一、简介
WSGI是Web服务器网关接口。它是一个规范,描述了Web服务器如何与Web应用程序通信,以及Web应用程序如何链接在一起以处理一个请求,(接收请求,处理请求,响应请求) 基于wsgi运行的框架有bottle,DJango,Flask,用于解析动态HTTP请求 支持WSGI的服务器 wsgiref python自带的web服务器 Gunicorn 用于linux的 python wsgi Http服务器,常用于各种django,flask结合部署服务器。 mode_wsgi 实现了Apache与wsgi应用程序的结合 uWSGI C语言开发,快速,自我修复,开发人员友好的WSGI服务器,用于Python Web应用程序的专业部署和开发。 在部署python程序web应用程序时,可以根据性能的需求,选择合适的wsgi server,不同的wsgi server区别在于并发支持上,有单线程,多进程,多线程,协程的区别,其功能还是近似,无非是请求路由,执行对应的函数,返回处理结果。 Django部署 Django的主要部署平台是 WSGI,这是用于Web服务器和应用程序的Python标准。 Django的 startproject管理命令设置一个简单的默认WSGI配置,可以根据需要为您的项目进行调整,并指示任何符合WSGI的应用程序服务器使用。 application 使用WSGI部署的关键概念是应用程序服务器用于与代码通信的 application 可调用。它通常在服务器可访问的Python模块中作为名为 application 的对象提供。 startproject 命令创建包含这样的 application 可调用的文件 <project_name>/wsgi.py. ,它被Django的开发服务器和生产WSGI部署使用。 WSGI服务器从其配置中获取 application 可调用的路径。 Django的内置服务器,即 runserver 命令,从 WSGI_APPLICATION 设置读取它。
uwsgi django默认启动 python manager.py runserver 它调用wsgiref单机web服务器模块,性能很差 在线上启动django项目,选择的是 uWSGI + django ,使用多进程高性能的web服务器运行,支持并发性更好 nginx 1.因为nginx处理并发的良好性 2.nginx对静态文件处理的良好性 3.nginx负载均衡的一个作用 supervisor 1、不在通过命令行的方式,启动项目 2、进行进程管理(python、mysql、redis、nginx) 3、通过supervisr统一化管理linux进程 4、检测到你服务挂了,自动重启
重点标记:
django创建时,会产生wsgi.py文件
mysite/mysite/wsgi.py
#wsgi.py产生的application应用
application = get_wsgi_application()
可能出现的坑:
1. no application xxxxxx 这个问题就是说,你指定的wsgi.py文件不正确
为什么要用nginx,uwsgi?
1 首先nginx 是对外的服务接口,外部浏览器通过url访问nginx, 2nginx 接收到浏览器发送过来的http请求,将包进行解析,分析url,如果是静态文件请求就直接访问用户给nginx配置的静态文件目录,直接返回用户请求的静态文件, 如果不是静态文件,而是一个动态的请求,那么nginx就将请求转发给uwsgi,uwsgi 接收到请求之后将包进行处理,处理成wsgi可以接受的格式,并发给wsgi,wsgi 根据请求调用应用程序的某个文件,某个文件的某个函数,最后处理完将返回值再次交给wsgi,wsgi将返回值进行打包,打包成uwsgi能够接收的格式,uwsgi接收wsgi 发送的请求,并转发给nginx,nginx最终将返回值返回给浏览器。 3要知道第一级的nginx并不是必须的,uwsgi完全可以完成整个的和浏览器交互的流程,但是要考虑到某些情况 1 安全问题,程序不能直接被浏览器访问到,而是通过nginx,nginx只开放某个接口,uwsgi本身是内网接口,这样运维人员在nginx上加上安全性的限制,可以达到保护程序的作用。 2负载均衡问题,一个uwsgi很可能不够用,即使开了多个work也是不行,毕竟一台机器的cpu和内存都是有限的,有了nginx做代理,一个nginx可以代理多台uwsgi完成uwsgi的负载均衡。 3静态文件问题,用django或是uwsgi这种东西来负责静态文件的处理是很浪费的行为,而且他们本身对文件的处理也不如nginx好,所以整个静态文件的处理都直接由nginx完成,静态文件的访问完全不去经过uwsgi以及其后面的东西。
nginx、WSGI、uwsgi、uWSGI、django关系?
wsgi 全称web server gateway interface,wsgi不是服务器,也不是python模块,只是一种协议,描述web server如何和web application通信的规则。
运行在wsgi上的web框架有bottle,flask,django
uwsgi 和wsgi一样是通信协议,是uWSGI服务器的单独协议,用于定义传输信息的类型
uWSGI 是一个web服务器,实现了WSGI协议,uwsgi协议。a
nginx web服务器,更加安全,更好的处理处理静态资源,缓存功能,负载均衡,因此nginx的强劲性能,配合uWSGI服务器会更加安全,性能有保障。
django 高级的python web框架,用于快速开发,解决web开发的大部分麻烦,程序员可以更专注业务逻辑,无须重新造轮子
二、Django Nginx+uwsgi 安装配置
在前面的章节中我们使用 python manage.py runserver 来运行服务器。这只适用测试环境中使用。
正式发布的服务,需要一个可以稳定而持续的服务器。
1、基础开发环境配置
yum groupinstall "Development tools" yum install zlib-devel bzip2-devel pcre-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel
2、提前安装好python3环境
3、virtualenv,请确保你的虚拟环境正常工作
4、安装django1.11
pip3 install django==1.11 #创建django项目mysite django-admin startproject mysite #创建app01 python3 manage.py startapp app01
#settings.py设置 ALLOWED_HOSTS = ['*'] install app01
from app01 import views urlpatterns = [ url(r'^admin/', admin.site.urls), url(r'^hello_django/', views.hello), ]
from django.shortcuts import render,HttpResponse # Create your views here. def hello(request): print('request is :',request) return HttpResponse('django is ok ')
5、安装uWSGI
进入虚拟环境venv,安装uwsgi (venv) [root@slave 192.168.11.64 /opt]$pip3 install uwsgi 检查uwsgi版本 (venv) [root@slave 192.168.11.64 /opt]$uwsgi --version 2.0.17.1 #检查uwsgi python版本 uwsgi --python-version
运行简单的uWSGI
#启动一个python uwsgi --http :8000 --wsgi-file test.py http :8000: 使用http协议,端口8000 wsgi-file test.py: 加载指定的文件,test.py #test.py def application(env, start_response): start_response('200 OK', [('Content-Type','text/html')]) return [b"Hello World"] # python3
uWsgi热加载python程序:
在启动命令后面加上参数 uwsgi --http :8088 --module mysite.wsgi --py-autoreload=1 #发布命令 command= /home/venv/bin/uwsgi --uwsgi 0.0.0.0:8000 --chdir /opt/mysite --home=/home/venv --module mysite.wsgi #此时修改django代码,uWSGI会自动加载django程序,页面生效
运行django程序:
#mysite/wsgi.py 确保找到这个文件 uwsgi --http :8000 --module mysite.wsgi module mysite.wsgi: 加载指定的wsgi模块
uwsgi配置文件:
# mysite_uwsgi.ini file [uwsgi] # Django-related settings # the base directory (full path) #项目工作目录,绝对路径,找到第一层 chdir = /opt/mysite # Django's wsgi file #指定wsgi.py文件路径 module = mysite.wsgi # the virtualenv (full path) #指定虚拟解释器的工作目录 home = /root/Envs/nginx_uswgi # process-related settings # master #uswgi的主进程 master = true # maximum number of worker processes #启动uswgi的进程数 processes = 5 #不适用nginx反向代理的时候,uwsgi通过http启动一个web服务 http=0.0.0.0:8888 #使用nginx反向代理,不能使用http协议,此时用socket一个连接启动uwsgi # the socket (use the full path to be safe #socket = 0.0.0.0:8000 # ... with appropriate permissions - may be needed # chmod-socket = 664 # clear environment on exit vacuum = true
指定配置文件启动命令:
uwsgi --ini /etc/uwsgi_nginx.ini
三、nginx
详细:https://www.cnblogs.com/pyyu/p/9468680.html
1、nginx是什么?
nginx是一个开源的,支持高性能,高并发的www服务和代理服务软件。它是一个俄罗斯人lgor sysoev开发的,作者将源代码开源出来供全球使用。
nginx比它大哥apache性能改进许多,nginx占用的系统资源更少,支持更高的并发连接,有更高的访问效率。
nginx不但是一个优秀的web服务软件,还可以作为反向代理,负载均衡,以及缓存服务使用。
安装更为简单,方便,灵活。
nginx可以说是非常nb了
面试回答nginx技巧:
支持高并发,能支持几万并发连接
资源消耗少,在3万并发连接下开启10个nginx线程消耗的内存不到200M
可以做http反向代理和负载均衡
支持异步网络i/o事件模型epoll
2、为什么要使用nginx?
nginx 1.因为nginx处理并发的良好性、 2.nginx对静态文件处理的良好性 备注:因为uwsgi启动django项目,不会读取一个静态文件的配置参数 3.nginx负载均衡的一个作用
3、安装配置nginx
一个远程传输工具:yum install lrzsz -y
常用命令:
sz #send 传输文件
rz #接收文件
1.yum install epel-* -y yum install nginx -y #需要提前备好epel源 #检测nginx是否安装成功 rpm -qi nginx 2.启动nginx web服务器 /usr/sbin/nginx 启动nginx web服务 3.配置nginx.conf配置反向代理uwsgi,以及静态资源处理 如果找不到nginx.conf ,通过命令查找 find / -name nginx.conf 如果找不到uwsgi_params路径,可以通过以下命名查找 find / -name uwsgi_params /etc/nginx/uwsgi_params vim /etc/nginx/nginx.conf location / { include /etc/nginx/uwsgi_params; uwsgi_pass 0.0.0.0:8000; } #静态资源入口 location /static { alias /opt/static/; } } 然后在项目的uwsgi.ini文件中注释http,打开socket #不适用nginx反向代理的时候,uwsgi通过http启动一个web服务 #http=0.0.0.0:8888 #使用nginx反向代理,不能使用http协议,此时用socket一个连接启动uwsgi # the socket (use the full path to be safe socket = 0.0.0.0:8000 修改项目下的settings.py文件 DEBUG = False 4.修改完,重启nginx /usr/bin/nginx -s reload 配置项目的静态文件资源,通过nginx加载 1.修改django的setings.py文件 mysite/settings.py 加入以下信息 #指定静态文件存放路径 STATIC_ROOT='/opt/static' #指定静态资源,请求入口 STATIC_URL = '/static/' STATICFILES_DIRS=[ os.path.join(BASE_DIR,"static"), ] 2.通过命令收集静态文件资源 python3 manage.py collectstatic 收集所有你使用的静态文件保存到STATIC_ROOT! 3.此时static_root下有了所有项目的静态资源 4. vim /etc/nginx/nginx.conf location /static { alias /opt/static/; }
四、supervisor
supervisor 是基于 python 的任务管理工具,用来自动运行各种后台任务,当然你也能直接利用 nohup 命令使任务自动后台运行,但如果要重启任务,每次都自己手动 kill 掉任务进程,这样很繁琐,而且一旦程序错误导致进程退出的话,系统也无法自动重载任务。
由于supervisor在python3下无法使用,因此只能用python2去下载!!!!!!
#注意此时已经退出虚拟环境了!!!!! yum install python-setuptools easy_install supervisor
通过命令生成supervisor的配支文件
echo_supervisord_conf > /etc/supervisord.conf
然后再/etc/supervisord.conf末尾添加上如下代码!!!!!!
supervisord.conf配置文件参数解释 [program:xx]是被管理的进程配置参数,xx是进程的名称 [program:xx] command=/opt/apache-tomcat-8.0.35/bin/catalina.sh run ; 程序启动命令 autostart=true ; 在supervisord启动的时候也自动启动 startsecs=10 ; 启动10秒后没有异常退出,就表示进程正常启动了,默认为1秒 autorestart=true ; 程序退出后自动重启,可选值:[unexpected,true,false],默认为unexpected,表示进程意外杀死后才重启 startretries=3 ; 启动失败自动重试次数,默认是3 user=tomcat ; 用哪个用户启动进程,默认是root priority=999 ; 进程启动优先级,默认999,值小的优先启动 redirect_stderr=true ; 把stderr重定向到stdout,默认false stdout_logfile_maxbytes=20MB ; stdout 日志文件大小,默认50MB stdout_logfile_backups = 20 ; stdout 日志文件备份数,默认是10 ; stdout 日志文件,需要注意当指定目录不存在时无法正常启动,所以需要手动创建目录(supervisord 会自动创建日志文件) stdout_logfile=/opt/apache-tomcat-8.0.35/logs/catalina.out stopasgroup=false ;默认为false,进程被杀死时,是否向这个进程组发送stop信号,包括子进程 killasgroup=false ;默认为false,向进程组发送kill信号,包括子进程
在配置文件中,添加任务,管理django项目 vim /etc/supervisord.conf #写入信息 [program:s21_django] #管理uwsgi的命令, 轻使用绝对路径 command=/root/Envs/nginx_uwsgi/bin/uwsgi --ini /home/mysite/uwsgi.ini #检测项目是否挂掉,自动重启 autorestart=true
最后启动supervisor,完成uWSGI启动django,nginx反向代理
supervisord -c /etc/supervisord.conf #启动supervisor supervisorctl -c /etxc/supervisord.conf restart my #重启my项目 supervisorctl -c /etc/supervisord.conf [start|stop|restart] [program-name|all]
管理supervisor的命令
一、添加好配置文件后 二、更新新的配置到supervisord supervisorctl update 三、重新启动配置中的所有程序 supervisorctl reload 四、启动某个进程(program_name=你配置中写的程序名称) supervisorctl start program_name 五、查看正在守候的进程 supervisorctl 六、停止某一进程 (program_name=你配置中写的程序名称) pervisorctl stop program_name 七、重启某一进程 (program_name=你配置中写的程序名称) supervisorctl restart program_name 八、停止全部进程 supervisorctl stop all 注意:显示用stop停止掉的进程,用reload或者update都不会自动重启
五、运行一个Django项目
1、使用virtualenv
1)把Django项目放在服务器的指定目录中;
2)修改settings.py文件
ALLOWED_HOSTS = ['*']
修改数据库驱动 DATABASES = { 'default': { 'ENGINE': 'django.db.backends.sqlite3', 'NAME': os.path.join(BASE_DIR, 'db.sqlite3'), } } pip3 install pymysql __init__.py 文件中添加数据库驱动 import pymysql pymysql.install()
3)创建虚拟环境
mkvirtualenv s21crm
cdvirtualenv
4)确认pip3和python3是否为虚拟环境下的
(s21crm) [root@localhost s21crm]# which pip3
/root/Envs/s21crm/bin/pip3
(s21crm) [root@localhost s21crm]# which python3
/root/Envs/s21crm/bin/python3
5)查看环境
(s21crm) [root@localhost s21crm]# pip3 list
Package Version
---------- -------
pip 18.1
setuptools 40.6.3
wheel 0.32.3
6)如果没有安装Django环境,需要确认项目使用的Django版本,安装对应版本
pip3 install django==1.11.11
7)进入项目一级目录,运行server(记住关闭防火墙)
python3 manage.py runserver 0.0.0.0:7000
2、使用virtualenvwrapper
1)安装virtualenvwrapper
2)安装uwsgi
pip3 install uwsgi
3)启动项目
uwsgi --http :8001 --module s21crm.wsgi
4)安装nginx
which nginx #找到nginx所在路径 /usr/sbin/nginx #启动nginx
5)配置nginx.conf
# mysite_uwsgi.ini file [uwsgi] # Django-related settings # the base directory (full path) #项目工作目录,绝对路径,找到第一层 chdir = /opt/s21crm # Django's wsgi file #指定wsgi.py文件路径 module = s21crm.wsgi # the virtualenv (full path) #指定虚拟解释器的工作目录 home = /root/Envs/s21crm # process-related settings # master #uswgi的主进程 master = true # maximum number of worker processes #启动uswgi的进程数 processes = 5 #不适用nginx反向代理的时候,uwsgi通过http启动一个web服务 #http=0.0.0.0:8888 #使用nginx反向代理,不能使用http协议,此时用socket一个连接启动uwsgi # the socket (use the full path to be safe isocket = 0.0.0.0:8000 # ... with appropriate permissions - may be needed # chmod-socket = 664 # clear environment on exit vacuum = true
6)修改settings.py文件
加入以下信息 #指定静态文件存放路径 STATIC_ROOT='/opt/static' #指定静态资源,请求入口 STATIC_URL = '/static/' STATICFILES_DIRS=[ os.path.join(BASE_DIR,"static"), ]
7)通过命令收集静态文件资源
python3 manage.py collectstatic #收集所有你使用的静态文件保存到STATIC_ROOT!
8)进入项目一级目录,启动服务
uwsgi --ini uwsgi.ini