在线时间:8:00-16:00
迪恩网络APP
随时随地掌握行业动态
扫描二维码
关注迪恩网络微信公众号
使用Nginx+Lua实现waf软件包需求: 1 、Nginx兼容性【最后测试到1.13.6】 wget http://nginx.org/download/nginx-1.13.6.tar.gz 2 、PCRE为Nginx编译安装关系的依赖 wget https://jaist.dl.sourceforge.net/project/pcre/pcre/8.42/pcre-8.42.tar.gz 3 、下载luajit解释器和ngx_devel_kit以及lua-nginx-module模块 wget http://luajit.org/download/LuaJIT-2.0.5.tar.gz wget https://github.com/simplresty/ngx_devel_kit/archive/v0.3.0.tar.gz wget https://github.com/openresty/lua-nginx-module/archive/v0.10.13.tar.gz 4 、文件解压: tar xf nginx-1.13.6.tar.gz pcre-8.42.tar.gz LuaJIT-2.0.5.tar.gz v0.3.0.tar.gz v0.10.13.tar.gz 5 、安装LuaJIT Luajit是Lua即时编译器 cd LuaJIT-2.0.5/make && make install 6 、添加环境变量 export LUAJIT_LIB=/usr/local/lib export LUAJIT_INC=/usr/local/include/luajit-2.0 7 、安装Nginx并加载模块【注意目录位置以及版本】
cd nginx-1.13.6/./configure --user=www --group=www --prefix=/usr/local/nginx-1.13.6 --with-pcre=/usr/local/src/pcre-8.42 --with-http_stub_status_module --with-http_sub_module --with-http_gzip_static_module --without-mail_pop3_module --without-mail_imap_module --without-mail_smtp_module --add-module=../ngx_devel_kit-0.3.0/ --add-module=../lua-nginx-module-0.10.13/make -j2 && make install 8 、添加链接文件 ln -s /usr/local/nginx-1.13.6 /usr/local/nginx ln -s /usr/local/lib/libluajit-5.1.so.2 /lib64/libluajit-5.1.so.2 #一定创建此软连接,否则报错 应用配置1 )调用lua测试,编辑Nginx.conf 添加/hello vim /usr/local/nginx/conf/nginx.conf location /hello { default_type 'text/plain'; content_by_lua 'ngx.say("hello,lua")'; } 2 )语法检查并启动 /usr/local/nginx/sbin/nginx -t /usr/local/nginx/sbin/nginx curl 192.168.55.110/hello hello,lua 正常 WAF部署1 )下载waf源码: cd /usr/local/nginx/conf/ git clone https://github.com/loveshell/ngx_lua_waf.git mv ngx_lua_waf/ waf 2 )文件注释 config.lua # 配置文件 init.lua # 规则函数 waf.lua # 逻辑关系 # wafconf # 正则匹配关系目录 wafconf/args # 里面的规则get参数进行过滤的 wafconf/url # 是只在get请求url过滤的规则 wafconf/post # 是只在post请求过滤的规则 wafconf/whitelist # 是白名单,里面的url匹配到不做过滤 wafconf/user-agent # 是对user-agent的过滤规则 3 )config.lua 注释: RulePath = "/usr/local/nginx/conf/waf/wafconf/" --规则存放目录 attacklog = "off" --是否开启攻击信息记录,需要配置logdir logdir = "/usr/local/nginx/logs/hack/" --log存储目录,该目录需要用户自己新建,切需要nginx用户的可写权限 UrlDeny="on" --是否拦截url访问 Redirect="on" --是否拦截后重定向 CookieMatch = "on" --是否拦截cookie攻击 postMatch = "on" --是否拦截post攻击 whiteModule = "on" --是否开启URL白名单 black_fileExt={"php","jsp"} --填写不允许上传文件后缀类型 ipWhitelist={"127.0.0.1"} --ip白名单,多个ip用逗号分隔 ipBlocklist={"1.0.0.1"} --ip黑名单,多个ip用逗号分隔 CCDeny="on" --是否开启拦截cc攻击(需要nginx.conf的http段增加lua_shared_dict limit 10m;) CCrate = "100/60" --设置cc攻击频率,单位为秒. --默认1分钟同一个IP只能请求同一个地址100次 html=[[Please go away~~]] --警告内容,可在中括号内自定义 备注:不要乱动双引号,区分大小写 4 )修改Nginx配置文件引用WAF功能【http段加入】 lua_shared_dict limit 50m; lua_package_path "/usr/local/nginx/conf/waf/?.lua"; init_by_lua_file "/usr/local/nginx/conf/waf/init.lua"; access_by_lua_file "/usr/local/nginx/conf/waf/waf.lua"; 5 )详情: cat nginx.conf http { include mime.types; default_type application/octet-stream; sendfile on; keepalive_timeout 65; lua_shared_dict limit 50m; lua_package_path "/usr/local/nginx/conf/waf/?.lua"; init_by_lua_file "/usr/local/nginx/conf/waf/init.lua"; access_by_lua_file "/usr/local/nginx/conf/waf/waf.lua"; server { listen 80; server_name localhost; location / { root html; index index.html index.htm; } location /hello { default_type 'text/plain'; content_by_lua 'ngx.say("hello,lua")'; } error_page 500 502 503 504 /50x.html; location = /50x.html { root html; } } } 6 )创建日志目录给予www用户权限: mkdir /usr/local/nginx/logs/hack/
chown www.www /usr/local/nginx/logs/hack/
7 )启动Nginx 并测试: /usr/local/nginx/sbin/nginx -t
/usr/local/nginx/sbin/nginx -s reload
8 )测试是否阻止请求: http://192.168.55.110/hello?id=../etc/passwd 9 )通过ab模仿cc攻击: [root@nq waf]# ab -c 100 -n 1200 http://192.168.55.110/hello 其他 一个页面版WAF--VeryNginx: https://github.com/alexazhou/VeryNginx 知识点: #启动服务 /opt/verynginx/openresty/nginx/sbin/nginx #停止服务 /opt/verynginx/openresty/nginx/sbin/nginx -s stop #重启服务 /opt/verynginx/openresty/nginx/sbin/nginx -s reload web密码配置: /opt/verynginx/verynginx/lua_script/VeryNginxConfig.lua Nginx 配置文件nginx.conf /opt/verynginx/openresty/nginx/conf/nginx.conf 规则配置: /opt/verynginx/verynginx/configs/config.json ################################################################################################# 1.1 什么是WAFWeb应用防护系统(也称:网站应用级入侵防御系统 。英文:Web Application Firewall,简称: WAF)。利用国际上公认的一种说法:Web应用 防火墙 是通过执行一系列针对HTTP/HTTPS的 安全策略 来专门为Web应用提供保护的一款产品。 1.2 WAF的功能
1.3 WAF的特点
1.3WAF与网络防火墙的区别 网络防火墙作为访问控制设备,主要工作在OSI模型三、四层,基于IP报文进行检测。只是对端口做限制,对TCP协议做封堵。其产品设计无需理解HTTP会话,也就决定了无法理解Web应用程序语言如HTML、SQL语言。因此,它不可能对HTTP通讯进行输入验证或攻击规则分析。针对Web网站的恶意攻击绝大部分都将封装为HTTP请求,从80或443端口顺利通过防火墙检测。 二、使用nginx配置简单实现403和4042.1 小试身手之rerurn 403修改nginx配置文件在server中加入以下内容 set $block_user_agent 0; if( $http_user_agent ~"Wget|AgentBench"){ set $block_user_agent 1; } if($block_user_agent =1){ return403; } 通过其他机器去wget,结果如下 2.2小试身手之rerurn 404在nginx配置文件中加入如下内容,让访问sql|bak|zip|tgz|tar.gz的请求返回404 location ~*"\.(sql|bak|zip|tgz|tar.gz)$"{ return404 } 在网站根目录下放一个tar.gz 三、深入实现WAF3.1 WAF实现规划分析步骤如下:解析HTTP请求==》匹配规则==》防御动作==》记录日志
3.2安装nginx+lua由于nginx配置文件书写不方便,并且实现白名单功能很复杂,nginx的白名单也不适用于CC攻击,所以在这里使用nginx+lua来实现WAF,如果想使用lua,须在编译nginx的时候配置上lua,或者结合OpenResty使用,此方法不需要编译nginx时候指定lua 3.2.1 编译nginx的时候加载lua环境准备:Nginx安装必备的Nginx和PCRE软件包。 cd /usr/local/src wget http://nginx.org/download/nginx-1.9.4.tar.gz wget ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.37.tar.gz
其次,下载当前最新的luajit和ngx_devel_kit (NDK),以及春哥编写的lua-nginx-module wget http://luajit.org/download/LuaJIT-2.0..tar.gz wget https://github.com/simpl/ngx_devel_kit/archive/v0.2.19.tar.gz wget https://github.com/openresty/lua-nginx-module/archive/v0.9.16.tar.gz 最后,创建Nginx运行的普通用户 useradd -s /sbin/nologin -M www 解压NDK和lua-nginx-module tar zxvf v0.2.19.tar.gz tar zxvf v0.9.16.tar.gz 安装LuaJIT Luajit是Lua即时编译器 tar zxvf LuaJIT-2.0.3.tar.gz cd LuaJIT-2.0.3make && make install 安装Nginx并加载模块 环境变量 export LUAJIT_LIB=/usr/local/lib export LUAJIT_INC=/usr/local/include/luajit-2.0 安装完毕后,下面可以测试安装了,修改nginx.conf 增加第一个配置 location /hello { default_type 'text/plain'; content_by_lua 'ngx.say("hello,lua")'; } 效果如下 3.2.3 Openresty部署安装依赖包 yum install -y readline-devel pcre-devel openssl-devel 下载并编译安装openresty cd /usr/local/src wget https://openresty.org/download/ngx_openresty-1.9.3.2.tar.gz tar zxf ngx_openresty-1.9.3.2.tar.gz cd ngx_openresty-1.9.3.2./configure --prefix=/usr/local/openresty-1.9.3.2--with-luajit --with-http_stub_status_module --with-pcre --with-pcre-jit gmake && gmake install ln -s /usr/local/openresty-1.9.3.2//usr/local/openresty 测试openresty安装 vim /usr/local/openresty/nginx/conf/nginx.conf 测试并启动nginx /usr/local/openresty/nginx/sbin/nginx -t
/usr/local/openresty/nginx/sbin/nginx
3.2.4WAF部署在github上克隆下代码 git clone https://github.com/unixhot/waf.git cp -a ./waf/waf /usr/local/openresty/nginx/conf/ 修改Nginx的配置文件,加入(http字段)以下配置。注意路径,同时WAF日志默认存放在/tmp/日期_waf.log #WAF lua_shared_dict limit 50m; #防cc使用字典,大小50M lua_package_path "/usr/local/openresty/nginx/conf/waf/?.lua"; init_by_lua_file "/usr/local/openresty/nginx/conf/waf/init.lua"; access_by_lua_file "/usr/local/openresty/nginx/conf/waf/access.lua"; 根据日志记录位置,创建日志目录 mkdir /tmp/waf_logs
chown nginx.nginx /tmp/waf_logs
3.3学习模块 3.3.1学习配置模块WAF上生产之前,建议不要直接上生产,而是先记录日志,不做任何动作。确定WAF不产生误杀 cd /usr/local/nginx/conf/waf cat config.lua --WAF config file,enable ="on",disable ="off" --waf status config_waf_enable ="on" #是否开启配置 --log dir config_log_dir ="/tmp/waf_logs" #日志记录地址 --rule setting config_rule_dir ="/usr/local/nginx/conf/waf/rule-config" #匹配规则缩放地址 --enable/disable white url config_white_url_check ="on" #是否开启url检测 --enable/disable white ip config_white_ip_check ="on" #是否开启IP白名单检测 --enable/disable block ip config_black_ip_check ="on" #是否开启ip黑名单检测 --enable/disable url filtering config_url_check ="on" #是否开启url过滤 --enalbe/disable url args filtering config_url_args_check ="on" #是否开启参数检测 --enable/disable user agent filtering config_user_agent_check ="on" #是否开启ua检测 --enable/disable cookie deny filtering config_cookie_check ="on" #是否开启cookie检测 --enable/disable cc filtering config_cc_check ="on" #是否开启防cc攻击 --cc rate the xxx of xxx seconds config_cc_rate ="10/60" #允许一个ip60秒内只能访问10此 --enable/disable post filtering config_post_check ="on" #是否开启post检测 --config waf output redirect/html config_waf_output ="html" #action一个html页面,也可以选择跳转 --if config_waf_output ,setting url config_waf_redirect_url ="http://www.baidu.com" config_output_html=[[ #下面是html的内容 <html> <head> <meta http-equiv="Content-Type" content="text/html; charset=utf-8"/> <meta http-equiv="Content-Language" content="zh-cn"/> <title>网站防火墙</title> </head> <body> <h1 align="center"># 您的行为已违反本网站相关规定,注意操作规范。详情请联微信公众号:chuck-blog。 </body> </html> ]]
3.4 学习access.lua的配置cd /usr/local/openresty/nginx/conf/waf cat access.lua require'init' function waf_main() if white_ip_check()then elseif black_ip_check()then elseif user_agent_attack_check()then elseif cc_attack_check()then elseif cookie_attack_check()then elseif white_url_check()then elseif url_attack_check()then elseif url_args_attack_check()then --elseif post_attack_check()then else return end end waf_main()
书写书序:先检查白名单,通过即不检测;再检查黑名单,不通过即拒绝,检查UA,UA不通过即拒绝;检查cookie;URL检查;URL参数检查,post检查; 3.5 启用WAF并测试3.5.1模拟sql注入即url攻击显示效果如下
日志显示如下,记录了UA,匹配规则,URL,客户端类型,攻击的类型,请求的数据 3.5.2 使用ab压测工具模拟防cc攻击ab -c 100-n 100 192.168.4.10/index.php echo “1.202.193.133” >>/usr/local/openresty/nginx/conf/waf/rule-config/blackip.rule 显示结果如下 ![](ca1fa711-48e6-4041-a367-b15db7bf2d2f_128_files/c71edccb-507c-4340-a1fc-ad03e300a2fa.png) ###3.5.4 模拟ip白名单 将请求ip放入ip白名单中,此时将不对此ip进行任何防护措施,所以sql注入时应该返回404 echo “1.202.193.133” >>/usr/local/openresty/nginx/conf/waf/rule-config/whiteip.rule 显示结果如下 ![](ca1fa711-48e6-4041-a367-b15db7bf2d2f_128_files/3ded0e02-480f-48f4-8aab-41aff0fc5538.png) ###3.5.5 模拟URL参数检测 浏览器输入www.chuck-blog.com/?a=select*from table 显示结果如下 ![](ca1fa711-48e6-4041-a367-b15db7bf2d2f_128_files/744e4a20-5558-43fc-9f50-1546cbc765a3.png) 详细规定在arg.rule中有规定,对请求进行了规范 ```bash [root@iZ28t900vpcZ rule-config]# /usr/local/openresty/nginx/conf/waf/rule-config/cat args.rule \.\./ \:\$ \$\{ select.+(from|limit) (?:(union(.*?)select)) having|rongjitest sleep\((\s*)(\d*)(\s*)\) benchmark\((.*)\,(.*)\) base64_decode\( (?:from\W+information_schema\W) (?:(?:current_)user|database|schema|connection_id)\s*\( (?:etc\/\W*passwd) into(\s+)+(?:dump|out)file\s* group\s+by.+\( xwork.MethodAccessor (?:define|eval|file_get_contents|include|require|require_once|shell_exec|phpinfo|system|passthru|preg_\w+|execute|echo|print|print_r|var_dump|(fp)open|alert|showmodaldialog)\( xwork\.MethodAccessor (gopher|doc|php|glob|file|phar|zlib|ftp|ldap|dict|ogg|data)\:\/ java\.lang \$_(GET|post|cookie|files|session|env|phplib|GLOBALS|SERVER)\[ \<(iframe|script|body|img|layer|div|meta|style|base|object|input) (onmouseover|onerror|onload)\= [root@iZ28t900vpcZ rule-config]# pwd /usr/local/openresty/nginx/conf/waf/rule-config
四、防cc攻击利器之httpgrard4.1 httpgrard介绍HttpGuard是基于openresty,以lua脚本语言开发的防cc攻击软件。而openresty是集成了高性能web服务器Nginx,以及一系列的Nginx模块,这其中最重要的,也是我们主要用到的nginx lua模块。HttpGuard基于nginx lua开发,继承了nginx高并发,高性能的特点,可以以非常小的性能损耗来防范大规模的cc攻击。 4.2 httpgrard防cc特效
五、WAF上线
使用Nginx+Lua实现waf软件包需求: 1 、Nginx兼容性【最后测试到1.13.6】 wget http://nginx.org/download/nginx-1.13.6.tar.gz 2 、PCRE为Nginx编译安装关系的依赖 wget https://jaist.dl.sourceforge.net/project/pcre/pcre/8.42/pcre-8.42.tar.gz 3 、下载luajit解释器和ngx_devel_kit以及lua-nginx-module模块 wget http://luajit.org/download/LuaJIT-2.0.5.tar.gz wget https://github.com/simplresty/ngx_devel_kit/archive/v0.3.0.tar.gz wget https://github.com/openresty/lua-nginx-module/archive/v0.10.13.tar.gz 4 、文件解压: tar xf nginx-1.13.6.tar.gz pcre-8.42.tar.gz LuaJIT-2.0.5.tar.gz v0.3.0.tar.gz v0.10.13.tar.gz 5 、安装LuaJIT Luajit是Lua即时编译器 cd LuaJIT-2.0.5/make && make install 6 、添加环境变量 export LUAJIT_LIB=/usr/local/lib export LUAJIT_INC=/usr/local/include/luajit-2.0 7 、安装Nginx并加载模块【注意目录位置以及版本】
cd nginx-1.13.6/./configure --user=www --group=www --prefix=/usr/local/nginx-1.13.6 --with-pcre=/usr/local/src/pcre-8.42 --with-http_stub_status_module --with-http_sub_module --with-http_gzip_static_module --without-mail_pop3_module --without-mail_imap_module --without-mail_smtp_module --add-module=../ngx_devel_kit-0.3.0/ --add-module=../lua-nginx-module-0.10.13/make -j2 && make install 8 、添加链接文件 ln -s /usr/local/nginx-1.13.6 /usr/local/nginx ln -s /usr/local/lib/libluajit-5.1.so.2 /lib64/libluajit-5.1.so.2 #一定创建此软连接,否则报错 应用配置1 )调用lua测试,编辑Nginx.conf 添加/hello vim /usr/local/nginx/conf/nginx.conf location /hello { default_type 'text/plain'; content_by_lua 'ngx.say("hello,lua")'; } 2 )语法检查并启动 /usr/local/nginx/sbin/nginx -t /usr/local/nginx/sbin/nginx curl 192.168.55.110/hello hello,lua 正常 WAF部署1 )下载waf源码: cd /usr/local/nginx/conf/ git clone https://github.com/loveshell/ngx_lua_waf.git mv ngx_lua_waf/ waf 2 )文件注释 config.lua # 配置文件 init.lua # 规则函数 waf.lua # 逻辑关系 # wafconf # 正则匹配关系目录 wafconf/args # 里面的规则get参数进行过滤的 wafconf/url # 是只在get请求url过滤的规则 wafconf/post # 是只在post请求过滤的规则 wafconf/whitelist # 是白名单,里面的url匹配到不做过滤 wafconf/user-agent # 是对user-agent的过滤规则 3 )config.lua 注释: RulePath = "/usr/local/nginx/conf/waf/wafconf/" --规则存放目录 attacklog = "off" --是否开启攻击信息记录,需要配置logdir logdir = "/usr/local/nginx/logs/hack/" --log存储目录,该目录需要用户自己新建,切需要nginx用户的可写权限 UrlDeny="on" --是否拦截url访问 Redirect="on" --是否拦截后重定向 CookieMatch = "on" --是否拦截cookie攻击 postMatch = "on" --是否拦截post攻击 whiteModule = "on" --是否开启URL白名单 black_fileExt={"php","jsp"} --填写不允许上传文件后缀类型 ipWhitelist={"127.0.0.1"} --ip白名单,多个ip用逗号分隔 ipBlocklist={"1.0.0.1"} --ip黑名单,多个ip用逗号分隔 CCDeny="on" --是否开启拦截cc攻击(需要nginx.conf的http段增加lua_shared_dict limit 10m;) CCrate = "100/60" --设置cc攻击频率,单位为秒. --默认1分钟同一个IP只能请求同一个地址100次 html=[[Please go away~~]] --警告内容,可在中括号内自定义 备注:不要乱动双引号,区分大小写 4 )修改Nginx配置文件引用WAF功能【http段加入】 lua_shared_dict limit 50m; lua_package_path "/usr/local/nginx/conf/waf/?.lua"; init_by_lua_file "/usr/local/nginx/conf/waf/init.lua"; access_by_lua_file "/usr/local/nginx/conf/waf/waf.lua"; 5 )详情 |
请发表评论