Nginx+gunicorn+flask+docker算法部署

Nginx+gunicorn+flask+docker算法部署

本篇主要记录较为基础算法的部署流程,不涉及到高并发内容,适合想把自己的算法部署到服务器展示给其他人。

1. 部署准备

  • Flask: Python中有两个Web开发框架,一个是Django,另一个就是flask,属于轻量级的Web框架。
  • Gunicorn: 是一个高性能的Python WSGI的HTTP Server,并且具有简单,轻量级,高性能的特点。
  • Nginx: 高性能的HTTP和反向代理Web服务器。
  • Docker: 是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的镜像中,然后发布到任何流行的 Linux或Windows机器上
    下面为算法部署流程图,PC用户请求到Nginx进行分流负载均衡,然后uwsgi协议传输给Web服务器gunicorn,最后传输给应用服务器Flask.

2. 创建Flask项目

推荐使用conda创建虚拟环境,首先安装pip install Flask这里为了方便理解部署整个流程,用flask官方的给的经典示例:

#main.py
from flask import Flask
app = Flask(__name__)

@app.route('/')
def hello_world():
    return 'Hello, World!'

if __name__ == '__main__':
    app.run()

通常使用python main.py运行这个应用,打开浏览器,输入网址127.0.0.1:5000回车会打开我们的网站,这种方法一般用于本地调试,因此我们需要更稳定的部署。

3. Gunicorn

pip install Gunicorn安装Gunicorn, 在根目录下新建gunicorn.conf.py:

workers = 5    # 定义同时开启的处理请求的进程数量,根据网站流量适当调整
worker_class = "gevent"   # 采用gevent库,支持异步处理请求,提高吞吐量
bind = "0.0.0.0:20020"

然后,使用命令gunicorn -w 4 -b 0.0.0.0:20020 main:app启动main.py, 如果需要在后台运行加上-D注意是大写,gunicorn -D -w 4 -b 0.0.0.0:20020 main:app

  • w:表示worker
  • b: 表示ip地址和port端口号
  • c: 为配置文件
    或者可以直接启动gunicorn main:app -c gunicorn.conf.py

4. Nginx

下载并安装Nginx,有sudo apt install nginx和源码安装两种方式,注意第一种方法的配置文件在/etc/nginx/sites-available/default路径下,第二种默认配置文件在/usr/local/nginx/conf/nginx.conf

wget http://nginx.org/download/nginx-1.18.0.tar.gz
tar -zxvf nginx-1.18.0.tar.gz
cd nginx-1.18.0
./configure && make && install

如果安装失败,需要完全卸载Nginx

sudo apt-get --purge remove nginx #删除nginx,–purge包括配置文件
sudo apt-get autoremove #自动移除全部不使用的软件包

dpkg --get-selections|grep nginx #列出与nginx相关的软件 并删除显示的软件
sudo apt-get --purge remove nginx
sudo apt-get --purge remove nginx-common
sudo apt-get --purge remove nginx-core

dpkg --get-selections|grep nginx #查看
which nginx # 不在显示nginx

Nginx运行、停止、重启、查看状态

sudo /etc/init.d/nginx start
sudo /etc/init.d/nginx stop
sudo /etc/init.d/nginx restart
sudo /etc/init.d/nginx status

我选择的是第一种方式配置nginx,修改nginx配置文件vim /etc/nginx/sites-available/default

server {
        listen 80 default_server;
        listen [::]:80 default_server;
        server_name localhost;

        location / {
                proxy_pass http://127.0.0.1:20020;
        }

其中server_name为域名,localhost代表通过ip访问,配置好Nginx后就可以启动了,可以通过ps aux | grep nginx查看nginx进程,然后在浏览器上输入http://ip看是否正常运行。


如果发现无法访问,可以查看一下防火墙sudo ufw status, 打开对应端口sudo ufw allow 20020(防火墙打开和重启命令分别为sudo ufw enablesudo ufw reload)

5. 使用Docker封装Flask应用

首先安装docker, 具体教程参见官网, 下面将我们为应用创建requirements.txt,文件包括需要安装的python库:

gunicorn
gevent
flask

requirements.txt是python工程部署必须要的文件,可以直接通过pip install -r requirements.txt安装所需依赖安装包,然后还需要创建Dockefile文件,以便构建Docker镜像。

FROM python:3.6
WORKDIR /Project/demo

COPY requirements.txt ./
RUN pip install -r requirements.txt -i https://pypi.tuna.tsinghua.edu.cn/simple

COPY . .

CMD ["gunicorn", "main:app", "-c", "./gunicorn.conf.py"]
  • FORM指定将在其中构建新镜像的基础容器镜像
  • WORKDIR为服务器的路径
  • RUN执行任意命令
  • COPY将文件从你的机器复制到容器文件系统
  • CMD为启动Falsk服务(demo是我们项目启动文件:启动应用名变量app)

接下来开始构建docker镜像

sudo docker build -t 'flask_demo'

由于文件接近1G,所以构建需要一段时间,然后可以查镜像是否存在:

sudo docker images

然后将镜像push到docker hub上,具体步骤查看官网Dockers Hub Quickstart。接下来部署到服务器上,将镜像从docker hub上拉下来,然后可以直接运行了:

  • 临时运行docker镜像
sudo docker run -it --rm -p 20020:20020 flask_demo
  • 生产环境运行(以daemon方式运行)
sudo docker run -d -p 20020:20020 --name flask_demo-server flask_demo
原文地址:https://www.cnblogs.com/zhongzhaoxie/p/13684602.html