OpenResty(Nginx+Lua)高并发最佳实践

OpenResty(Nginx+Lua)高并发最佳实践


分类专栏: OpenResty 文章标签: OpenResty 高并发 Lua nginx执行lua
版权
文章目录
OpenResty简介
Nginx优点
Lua基础学习
环境搭建
window下环境搭建
Linux(CentOS 7)下环境搭建
linux下ab性能测试
总结
优点
缺点
可适用的场景
OpenResty简介
以下内容来源与OpenResty官网,更多信息可进入官网了解
OpenResty® 是一个基于 Nginx 与 Lua 的高性能 Web 平台,其内部集成了大量精良的 Lua 库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态 Web 应用、Web 服务和动态网关。

OpenResty® 通过汇聚各种设计精良的 Nginx 模块(主要由 OpenResty 团队自主开发),从而将 Nginx 有效地变成一个强大的通用 Web 应用平台。这样,Web 开发人员和系统工程师可以使用 Lua 脚本语言调动 Nginx 支持的各种 C 以及 Lua 模块,快速构造出足以胜任 10K 乃至 1000K 以上单机并发连接的高性能 Web 应用系统。

OpenResty® 的目标是让你的Web服务直接跑在 Nginx 服务内部,充分利用 Nginx 的非阻塞 I/O 模型,不仅仅对 HTTP 客户端请求,甚至于对远程后端诸如 MySQL、PostgreSQL、Memcached 以及 Redis 等都进行一致的高性能响应

Nginx优点
可参考以下文章
https://blog.csdn.net/nangeali/article/details/60143560

Lua基础学习
可参考菜鸟教程

环境搭建
window下环境搭建
资源下载
本人电脑64位操作系统,这里下载windows 32位的版本,后续有他用
点击下载32位版
64位版下载

解压压缩包


创建lua目录源文件目录,用于写测试脚本
进入lualib目录,创建testcode目录


编写测试lua脚本
在testcode目录下创建testlua.lua,并编写以下脚本信息

--用于接收前端数据的对象
local args=nil
--获取前端的请求方式 并获取传递的参数
local request_method = ngx.var.request_method
--判断是get请求还是post请求并分别拿出相应的数据
if"GET" == request_method then
args = ngx.req.get_uri_args()
elseif "POST" == request_method then
ngx.req.read_body()
args = ngx.req.get_post_args()
--兼容请求使用post请求,但是传参以get方式传造成的无法获取到数据的bug
if (args == nil or args.data == null) then
args = ngx.req.get_uri_args()
end
end

--获取前端传递的name值
local name = args.name
--响应前端
ngx.say("hello:"..name)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20


编辑nginx配置
按以下目录编辑对应配置文件

在80的server中添加以下配置:

location /luatest
{
default_type text/html;
#这里的lua文件的路径为绝对路径,请根据自己安装的实际路径填写
#记得斜杠是/这个。从window中拷贝出来的是这样,这样是有问题的,务必注意
content_by_lua_file F:/DATA/software/other/openresty-1.13.6.2-win32/lualib/testcode/testlua.lua;
}
1
2
3
4
5
6
7


启动服务openresty的Nginx服务

进入cmd,并进入到openresty对应的目录
使用nginx -t 检测nginx的配置是否正确

启动nginx服务


测试nginx是否正常
打开浏览器,输入:http://127.0.0.1/ ,得到以下界面说明Nginx配置正常且已经正常运行


测试OpenResty
打开浏览器,输入:http://127.0.0.1/luatest?name=openresty

到这里,window下的OpenResty环境即搭建完成

Linux(CentOS 7)下环境搭建
更多linux版本下的源码安装,请参考官网
你可以在你的 CentOS 系统中添加 openresty 仓库,这样就可以便于未来安装或更新我们的软件包(通过 yum update 命令)。

运行下面的命令就可以添加openresty 的仓库:

sudo yum install yum-utils
sudo yum-config-manager --add-repo https://openresty.org/package/centos/openresty.repo
1
2
然后就可以像下面这样安装软件包,比如 openresty:

sudo yum install openresty
1
如果你想安装命令行工具 resty,那么可以像下面这样安装 openresty-resty 包:

sudo yum install openresty-resty
1
命令行工具 opm 在 openresty-opm 包里,而 restydoc 工具在 openresty-doc 包里头。
列出所有 openresty 仓库里头的软件包:

sudo yum --disablerepo="*" --enablerepo="openresty" list available
1
添加lua的脚本目录
cd /usr/local/openresty/lualib/
mkdir testcode
cd testcode

创建测试lua脚本
cd /usr/local/openresty/lualib/testcode
vim testlua.lua
添加以下脚本内容

--用于接收前端数据的对象
local args=nil
--获取前端的请求方式 并获取传递的参数
local request_method = ngx.var.request_method
--判断是get请求还是post请求并分别拿出相应的数据
if"GET" == request_method then
args = ngx.req.get_uri_args()
elseif "POST" == request_method then
ngx.req.read_body()
args = ngx.req.get_post_args()
--兼容请求使用post请求,但是传参以get方式传造成的无法获取到数据的bug
if (args == nil or args.data == null) then
args = ngx.req.get_uri_args()
end
end

--获取前端传递的name值
local name = args.name
--响应前端
ngx.say("linux hello:"..name)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
保存:wq!

配置ngnix关联lua文件
cd /usr/local/openresty/nginx/conf/
vi nginx.conf
在80的server中添加以下配置信息

location /luatest
{
default_type text/html;
#这里的lua文件的路径为绝对路径,请根据自己安装的实际路径填写
#记得斜杠是/这个。
content_by_lua_file /usr/local/openresty/lualib/testcode/testlua.lua;
}
1
2
3
4
5
6
7


启动nginx服务
cd /usr/local/openresty/nginx
sbin/nginx


测试nginx是否正常
打开浏览器,输入linux的ip地址,如:http://192.168.1.130/ 显示如下效果,说明nginx已经正常启动


测试OpenResty是否正常
打开浏览器,输入:http://192.168.1.130/luatest?name=openresty 显示如下效果,说明OpenResty正常

linux下ab性能测试
linux服务器环境说明
测试使用的是window下安装的VM虚拟机,linux的硬件分配为1核 700兆内存

linux下ab工具安装
yum -y install httpd-tools

查看ab版本
ab -v


压力测试

1W并发
ab -c 10000 -n 100000 127.0.0.1/luatest
注:10000个并发,一共请求10万次
测试结果:


1.5W并发
ab -c 15000 -n 100000 127.0.0.1/luatest


2W并发
ab -c 20000 -n 100000 127.0.0.1/luatest


总结
优点
高并发
根据以上的测试来看,一台1核700兆的linux虚拟机即可跑出2W的并发,足以说明OpenResty处理高并发的能力,由于ab工具的限制,只能测试上限2W的并发,因此,这里也只做到了2W的测试。

热更新
Lua属于脚本语言,编译之后即可运行;Nginx具备优雅重启的功能;因此,线上业务如果出现问题需要及时修复的,更新修改Lua脚本之后,重启Nginx即可完成更新发布;如果没有配置Lua缓存功能的话,只要更新Lua脚本即可更新修复线上问题,不重启Nginx也可以。

缺点
不适合处理复杂的业务逻辑
由于功能性的东西主要使用Lua进行开发,受Lua语言特性的影响,不太适合做业务比较复杂的功能。

互联网上资料比较少
互联网上可以找的资料比较少;不过,本身Lua的学习过程不是特别的复杂,所以,这基本不会成为你学习它的障碍

可适用的场景
高访问下的应用及官网的主页
如商城,咨询类的应用首页,会存在大量的请求,由于涉及到的内容比较多;所以可是私用预载入的形式,将主页的数据放置在redis中;使用OpenResty+redis实现首页,官网主页的高并发加载

商城类的秒杀功能
秒杀功能会存在短时间的请求洪峰,如果处理不当可能会造成down机的风险,可以结合OpenResty+redis实现秒杀的功能

ip限流
互联网系统可能存在非法用户恶意暴力请求,导致正常的用户无法使用,可以通过OpenResty+redis实现ip的白名单机制,去拦截非法的用户ip

APP灰度升级发布
可以根据系统的数据及条件实现APP的灰度升级测试

原文地址:https://www.cnblogs.com/fengkun125/p/14780842.html