在线时间:8:00-16:00
迪恩网络APP
随时随地掌握行业动态
扫描二维码
关注迪恩网络微信公众号
原文:https://blog.csdn.net/enweitech/article/details/78519398 OpenResty 官网:http://openresty.org/ OpenResty® - 中文官方站 http://openresty.org/cn/ OpenResty 是一个nginx和它的各种三方模块的一个打包而成的软件平台。最重要的一点是它将lua/luajit打包了进来,使得我们可以使用lua脚本来进行web的开发。有了lua,我们可以借助于nginx的异步非阻塞的功能,达到使用 lua 异步并发访问后端的 MySQL, PostgreSQL, Memcached, Redis等等服务。特别是特有的 ngx.location.capture_multi 功能让人印象深刻,其可以达到极大的减少浏览器的http连接数量,并且可以异步并发的访问后台 Java/PHP/Python 等等接口。OpenResty 架构的web可以轻松超越Node.js的性能,并且对后端语言没有限制,你可以使用Java/PHP/Python等等各种语言。OpenResty(nginx+lua)可以替代node.js的前端渲染的功能。 火云邪神语录:天下武功,无坚不破,唯快不破!Nginx的看家本领就是速度,Lua的拿手好戏亦是速度,这两者的结合在速度上无疑有基因上的优势。
至于OpenResty和Tengine孰优孰劣,留给大家自己判断,如下资料可供参考: ngx_openresty: an Nginx ecosystem glued by Lua 安装 安装Lua或者LuaJIT都是可以的,但是出于效率的考虑,推荐安装LuaJIT。 详细参考:Nginx与Lua | 火丁笔记 https://huoding.com/2012/08/31/156 By taking advantage of various well-designed Nginx modules, OpenResty effectively turns the nginx server into a powerful web app server, in which the web developers can use the Lua programming language to script various existing nginx C modules and Lua modules and construct extremely high-performance web applications that are capable to handle 10K+ connections. OpenResty aims to run your server-side web app completely in the Nginx server, leveraging Nginx's event model to do non-blocking I/O not only with the HTTP clients, but also with remote backends like MySQL, PostgreSQL, Memcached, and Redis. 1. 安装OpenResty 先安装依赖:yum install readline-devel pcre-devel openssl-devel gcc 解压: tar zxvf ngx_openresty-1.9.3.1.tar.gz 建立一个软连接:ln -s ngx_openresty-1.9.3.1 openresty 进入目录:cd openresty 编译:
... ... nginx path prefix: "/opt/openresty/nginx" 其中 --prefix=/opt/openresty 指定了安装目录,不指定的话默认会安装到 /usr/local/openresty 目录下。 编译安装: make && make install [root@localhost src]# cd /opt/openresty/ 启动openresty: /opt/openresty/nginx/sbin/nginx -c /opt/openresty/nginx/conf/nginx.conf -p /opt/openresty/nginx/ [root@localhost src]# ps -elf|grep nginx 2. content_by_lua 和 content_by_lua_file nginx 如何嵌入 lua 脚本。方法就是在nginx的配置文件nginx.conf 中使用 content_by_lua 或者 cotent_by_lua_file 指令: 1) content_by_lua 一般在很简单的lua脚本时使用:
访问 http://localhost/lua 可以看到输出到页面的 hello, world. 2)cotent_by_lua_file 适应于复杂的 lua 脚本,专门放入一个文件中: location /lua2 { [root@localhost lua]# pwd 访问 /lua2 : [root@localhost lua]# curl localhost/lua 在 nginx.conf 文件的 server {.. ...} 中加入 lua_code_cache off; 可以方便调试lua脚本,修改lua脚本之后,不需要 reload nginx. openresty 中的 nginx 嵌入 luajit 的原理:
每一个nginx的进程中都嵌入了一个 luajit的虚拟机,来执行lua脚本。nginx将lua脚本的执行交给了luajit vm. 3. ngx_lua 的指令 和 API 上面我们说到 nginx 嵌入 lua 脚本可以使用 content_by_lua 和 content_by_lua_file,它们其实是指令(Directives),类似的指令还有很多, 具体参见:https://www.nginx.com/resources/wiki/modules/lua/#directives
这些指令都是 nginx 访问 lua 脚本的入口。 ngx_lua API: 指令是 nginx 访问 lua 脚本的入口。那么lua脚本如何调用nginx中的函数呢?就是通过 ngx_lua 的API 。 具体介绍参见:https://www.nginx.com/resources/wiki/modules/lua/#nginx-api-for-lua The various *_by_lua and *_by_lua_file configuration directives serve as gateways to the Lua API within the nginx.conf file. The NGINX Lua API described below can only be called within the user Lua code run in the context of these configuration directives. The API is exposed to Lua in the form of two standard packages ngx and ndk. These packages are in the default global scope within ngx_lua and are always available within ngx_lua directives.
其实nginx和Lua的交互开发主要就是指令和API,当然还有lua脚本的语法。指令是nginx访问lua的入口,API是lua调用nginx的函数,lua是脚本编程语言。 指令其实很简单,所以主要就是熟悉ngx_lua的 API 和Lua语法。 4. lua 访问 redis lua-resty-redis 模块:https://github.com/openresty/lua-resty-redis (有文档可以参考) 在nginx.conf中加入: location /redis_test{
red:set_timeout(1000) local ok, err = red:connect("127.0.0.1", 6379) ngx.say("set result: ", ok) local res, err = red:get("dog") if res == ngx.null then ngx.say("dog: ", res) [root@localhost lua]# 访问: [root@localhost lua]# curl localhost/redis_test 5. lua 访问mysql openresty的mysql模块:lua-resty-mysql :https://github.com/openresty/lua-resty-mysql(有文档可以参考) 在nginx.conf加入如下配置: location /mysql_test {
if not db then db:set_timeout(1000) local ok, err, errno, sqlstate = db:connect{ if not ok then ngx.say("connected to mysql.") local res, err, errno, sqlstate = db:query("drop table if exists cats") res, err, errno, sqlstate = db:query("create table cats " .. "(id int not null primary key auto_increment, " ngx.say("table cats created.") res, err, errno, sqlstate = db:query("insert into cats(name) " .. "values (\'Bob\'),(\'\'),(null)") ngx.say(res.affected_rows, " rows inserted into table cats ", "(last insert id: ", res.insert_id, ")") res, err, errno, sqlstate = db:query("select * from cats order by id asc", 10) local cjson = require "cjson" local ok, err = db:set_keepalive(1000, 100) 测试: [root@localhost lua]# curl localhost/mysql_test 5. lua 的 capture 和 capture_multi(子查询) capture_multi 是 openresty 一个十分强大的功能。它能极大的减少前端浏览器发送的http请求的数量,突破了浏览器对于同一个服务器并发请求数量的限制,因为他可以将前端的多个http请求减少为只要一个http请求到nginx,然后nginx使用capture_multi特性,对后端发起多个异步并发请求,然后统一将结果返回给前端。下面看一个例子: 首先在nginx.conf中加入下面的 location 配置,并且配置好 nginx 访问 php 的配置:
location ~ \.php$ { capture.lua 的代码如下:
ngx.header.content_type="text/plain" --ngx.say(res4.body) index.php 代码: [root@localhost html]# pwd
set result: 1 hello ngx_lua!!!! false 可以看到访问成功了。/mysql_test,/redis_test, /lua, /index.php 四个请求的结果都输出了。 注意: ngx.location.capture_multi{... ...} 中的多个异步并发请求可以是 nginx.conf 中配置的 location(比如 /mysql_test, /redis_test, /lua),也可以不是 location配置的路径,比如 index.php 就不是。index.php 就是一个简单的后台php 脚本。当然也可以是一个 java 实现的后台接口。 6. openresty的缓存 lua_shared_dict 定义一个缓存: 在nginx的配置文件 nginx.conf 的 http 端下面加入指令: lua_shared_dict ngx_cache 128m; 在lua脚本中访问缓存: local ngx_cache = ngx.shared.ngx_cache local succ, err, forcible = ngx_cache:set(key, value, exptime) location /cache {
function set_to_cache(key, value, exptime) function get_from_cache(key) ngx.say("get from cache.") function get_from_redis(key) local ok, err = red:connect("127.0.0.1", 6379) local res, err = red:get(key) ngx.say("get from redis.") function set_to_redis(key, value) local ok, err = red:set(key, value) set_to_redis('dog', "Bob") 测试:
第一次从 redis中获取,以后每次都从cache中获取。 可以使用 ab 测试一下rps(Requests per second): ab -n 1000 -c 100 -k http://127.0.0.1/cache 缓存失效风暴是指缓存因为时间过期而失效时,会导致所有的请求都去访问 后台的redis或者mysql,而导致CPU性能即刻增长的现象。所以关键是当缓存失效时,用lock保证只有一个线程去访问后台的redis或者mysql,然后更新缓存。需要使用到 lua-resty-lock 模块的加锁、解锁功能。 lua-resty-lock 文档:https://github.com/openresty/lua-resty-lock 首先在nginx.conf 的 http 端下面加入指令: lua_shared_dict ngx_cache 128m; # cache location /cache_lock { View Code [root@localhost lua]# curl localhost/cache_lock nginx的执行阶段分成了很多个阶段,所以第三方模块就可以在某个适当的阶段加入一些处理。openresty进行了简化成了7个阶段:
7个阶段的执行顺序如下: set_by_lua: 流程分支判断,判断变量初始哈 rewrite_by_lua: 用lua脚本实现nginx rewrite access_by_lua: ip准入,是否能合法性访问,防火墙 content_by_lua: 内存生成 header_filter_by_lua:过滤http头信息,增加头信息 body_filter_by_lua: 内容大小写,内容加密 log_by_lua: 本地/远程记录日志 但是其实我们可以只用 content_by_lua,所有功能都在该阶段完成,也是可以的。 总结: OpenResty® 是一个基于 Nginx 与 Lua 的高性能 Web 平台,其内部集成了大量精良的 Lua 库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态 Web 应用、Web 服务和动态网关。 OpenResty® 通过汇聚各种设计精良的 Nginx 模块(主要由 OpenResty 团队自主开发),从而将 Nginx有效地变成一个强大的通用 Web 应用平台。这样,Web 开发人员和系统工程师可以使用 Lua 脚本语言调动 Nginx 支持的各种 C 以及 Lua 模块,快速构造出足以胜任 10K 乃至 1000K 以上单机并发连接的高性能 Web 应用系统。 OpenResty® 的目标是让你的Web服务直接跑在 Nginx 服务内部,充分利用 Nginx 的非阻塞 I/O 模型,不仅仅对 HTTP 客户端请求,甚至于对远程后端诸如 MySQL、PostgreSQL、Memcached 以及 Redis 等都进行一致的高性能响应。 参考 组件 可以知道 OpenResty® 中包含了多少软件。 参考 上路 学习如何从最简单的 hello world 开始使用 OpenResty® 开发 HTTP 业务,或前往 下载 直接获取 OpenResty® 的源代码包开始体验。 |
请发表评论