Python3 - Nginx+uwsgi+Flask 部署到Centos服务器

Posted 2022-12-02 韩俊强

文章目录

• • 1.创建虚拟环境
  • 2.nginx
  • 3. nginx配置文件结构:
  • • 3.1 main包含什么呢?
    • 3.2 events 指定工作模式和连接上限
    • 3.3 http
    • 3.4 location
    • 3.5 反向代理
    • 3.6 upstream
    • 3.7 Django项目部署
    • 3.8 nginx.conf文件
  • 4. 安装uwsgi
  • • 4.0 uwsgi常见问题, 安装不成功
    • 4.1 uWSGI uwsgi wsgi
    • 4.2 uwsgi的使用
  • 5. 启动nginx和uwsgi

前面我们讲了如何使用uwsgi部署flask代码到centos服务器; 本章节结合实际业务中, 用户并发量较大, 通常采用nginx + uwsgi + Flask 的形式部署, 提升性能。通过本篇博文, 或许你会有收获~

演示配置: Centos 7.9 , uwsgi 2.0.20, Flask 2.0.2

1.创建虚拟环境

pip install virtualenv
pip install virtualenvwrapper

非root登录的, 所以 vim .bash_profile

export PATH=$PATH:/usr/local/python3/bin
alias pip=/usr/local/python3/bin/pip3.9
alias python=/usr/local/python3/bin/python3.9
export WORKON_HOME=$HOME/.virtualenvs #指定虚拟环境存放目录
source /home/harry/.local/bin/virtualenvwrapper.sh  # virtualenvwarpper.sh 所在目录

cd 到项目, 创建虚拟环境

mkvirtualenv blogprojectenv

虚拟环境路径

/home/harry/.virtualenvs/blogprojectenv

2.nginx

轻量级, 并发能力强, 高度模块话, 负载均衡, 反向代理的能力

常用指令:

sudo systemctl enable ngix 设置开机自启动
sudo systemctl disenable ngix 设置禁止开机自启动
sudo systemctl status nginx 查看状态
sudo systemctl start nginx 启动
sudo systemctl restart nginx 重新启动
sudo systemctl stop nginx 停止

默认打开路径        /usr/share/nginx/html;

查看进程:
ps -ef | grep nginx

启动指定配置:
sudo nginx -c /home/harry/BlogProject/nginx1.conf 
控制nginx
sudo nginx -s stop 快速关闭
							quit 优雅的关闭
							reload 重新加载配置
Nginx 配置文件
指令:
	nginx -t 不运行, 仅测试配置文件
	nginx -c configpath 从指定路径加载启动配置文件
	nginx -t -c configpath 测试指定配置文件

3. nginx配置文件结构:

main    全局配置
events 工作模式, 连接配置


http		http的配置
		upstream xxx  负载均衡配置
		
		server	主机设置
				location xxx URL匹配	
				
		

3.1 main包含什么呢?

1.main包含什么呢?
user nginx;  worker进程运行的用户和组, 通常是登录的用户

worker_processes 1;  指定Nginx开启的子进程数, 多核CPU建议设置和CPU数量一样的进程数, 或者写 auto

error_log xxx level; 用来定义全局错误日志文件, 通常放在var中, level有debug, info, notice, warn, error, crit

pid xxx;  指定进程id的存储文件位置	

3.2 events 指定工作模式和连接上限

2.events 指定工作模式和连接上限
events
	use epoll;
	worker_connections 1024;


use 指定nginx工作模式
		epoll  高效工作模式, linux
		kqueue 高效工作模式, bsd
		poll   标准模式
		select 标准模式

worker_connections 定义nginx每个进程的最大连接数
		正向代理   连接数 * 进程数
		反向代理	 连接数 * 进程数 / 4
		linux系统限制最多能同时打开65535个文件, 默认上限是65535, 可接触 ulimit -n 65535

3.3 http

最核心的模块, 主要负责http服务器相关配置, 包含server, upstream子模块
include mime.types; 设置文件的mime类型
include xxxconfig; 包含其他配置文件, 分开规划解耦
defalut_type xxx;  设置默认类型为二进制流, 文件类型未知时就会使用默认
log_format   设置日期格式
sendfile     设置高效文件传输模式
keepalive_timeout   设置哭护短连接活跃超时
gzip  			 gzip压缩

		server 用来指定虚拟主机
				listen 80;  					 指定虚拟主机监听的端口
				server_name localhost; 指定ip地址或域名, 多个域名使用空格隔开
				charset utf-8; 				 指定网页的默认编码格式
				error_page 500 502 /50x.html 指定错误页面
				access_log xxx main;   指定虚拟主机的访问日志存放路径
				error_log xxx main; 	 指定虚拟主机的错误日志存放路径
				root xxx; 						 指定这个虚拟主机的根目录
				index xxx; 						 指定默认首页
		

3.4 location

server
	location xxx
				...
	

核心中的核心, 以后主要配置都在这里
主要功能: 定位url, 解析url, 支持正则匹配, 还能支持条件, 实现动静分离
语法
		location [modifier] uri
					...
		
modifier修饰符
		=    使用精准匹配并且终止搜索结果
		~		 区分大小写的正则表达式
		~*	 不区分大小写的正则表达式
		^~	 最佳匹配, 不是正则匹配, 通常用来匹目录
常用指令
		alias  别名, 定义location的其他名字, 在文件系统中能够找到, 如果location指定了正则表达式, alias将会引用正则表达式中的捕获, alias替代location中匹配的部分, 没有匹配的部分将会文件系统中搜索

3.5 反向代理

proxy_pass URL; 反向代理转发地址, 默认不转发header, 需要转发header则需要设置proxy_set_header HOST $host;

proxy_method POST; 						   转发的方法名
proxy_hide_header Cache_Control; 指定头部不被转发
proxy_pass_header Cache_Control; 指定哪些头部转发
proxy_pass_request_header on; 	 设置转发http请求头
proxy_pass_request_body on;			 设置转发请求体

3.6 upstream

负载均衡模块, 通过一个简单的调度算法来实现客户ip到后端服务器的负载均衡

写法
upstream myproject
		ip_hash;
		server 127.0.0.0.1:8000;
		server 127.0.0.0.1:8001 down;
		server 127.0.0.0.1:8002 weight=3;
		server 127.0.0.0.1:8003 backup;

负载均衡算法
		weight  负载均衡权重
		down 		当前server不参与负载均衡
		backup	其他机器全down掉或满载使用此服务
		ip_hash 按每个请求的hash结果分配
		fair    按后端响应事件来分(第三方的)

3.7 Django项目部署

Django服务器
			runserver
			wsgi
uwsgi: web服务器, 多线程处理的不错
			1. pip install uswgi
			2. 工程目录下创建uwsgi.ini 配置文件
			3. 书写配置信息
			4. 使用uwsgi服务器
								- 启动    uwsgi --ini uwsgi.ini
								- 停止		uwsgi --stop uwsgi.pid
nginx配置
			location /static
								alias xxx/static/;
							
			
			location / 
								include uwsgi_params;
								uwsgi_pass localhost:8000;
			

3.8 nginx.conf文件

# For more information on configuration, see:
#   * Official English Documentation: http://nginx.org/en/docs/
#   * Official Russian Documentation: http://nginx.org/ru/docs/

user harry;
worker_processes auto;
error_log /var/log/nginx/error.log;
pid /run/nginx.pid;

# Load dynamic modules. See /usr/share/doc/nginx/README.dynamic.
include /usr/share/nginx/modules/*.conf;

events 
    worker_connections 1024;



http 
    include             /etc/nginx/mime.types;
    default_type        application/octet-stream; 
    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';

    access_log  /var/log/nginx/access.log  main;

    sendfile            on;
#    tcp_nopush          on;
#    tcp_nodelay         on;
    keepalive_timeout   65;
#   types_hash_max_size 4096;
#   gzip on;
 
 #include /etc/nginx/conf.d/*.conf;

    server 
        listen       80;
        server_name  localhost;
    
        root /home/harry/blogproject;
        location /static 
            alias /home/harry/blogproject/static;
        
        location / 
            include /etc/nginx/uwsgi_params;
            uwsgi_pass localhost:8080;
           # root /home/harry/blogproject;
           # index index.html index.htm;
        
        error_page 500 502 503 504  /50x.html;
        location = /50x.html  
            root  /usr/share/nginx/html;
        
    
    

4. 安装uwsgi

Linux下 换conda镜像源

将以上配置文件写在~/.condarc中
vim ~/.condarc

channels:
  - https://mirrors.ustc.edu.cn/anaconda/pkgs/main/
  - https://mirrors.ustc.edu.cn/anaconda/cloud/conda-forge/
  - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
  - defaults
show_channel_urls: true

安装uwsgi:
conda install -c conda-forge libiconv

conda install -c conda-forge uwsgi

• 在本项目中, 不使用conda管理;

4.0 uwsgi常见问题, 安装不成功

有一个很坑的问题, uwsgi 默认一直用的是python2.7, 会一直报各种错误, 如果想使用最新Python3.9,则需要以下操作:

删除所有的uwsgi, 然后安装插件

yum install -y uwsgi-plugin-python36
pip3 install uwsgi

查看uwsgi的python版本
uwsgi --python-version

4.1 uWSGI uwsgi wsgi

uWSGI wsgi都是协议, 其中uWSGI包括wsgi, http等

WSGI server 是Flask内置的调试服务器

4.2 uwsgi的使用

cd 项目
touch uwsgi.ini

[uwsgi]
# 使用nginx时使用
socket = 0.0.0.0:8080

# 直接作为web服务器使用
# http=0.0.0.0:8080
# 配置工程目录
chdir = /home/harry/BlogProject

# 配置项目的wsgi目录, 相当于工程目录
# wsgi-file=OnlineStore/wsgi.py

# 适用于Flask项目部署
wsgi-file = manager.py
# router
callable = app 

# 配置进程, 线程信息
processes = 4

threads = 10

enable-threads = True

master = True

# 这里的p指的是processes
pidfile = uwsgi.pid

oaemonize = uwsgi.log

启动
uwsgi --ini uwsgi.ini
uwsgi --stop uwsgi.pid
/home/harry/uwsgi/uwsgi 是通过代码编译安装的
ls -s /home/harry/uwsgi/uwsgi /usr/bin/uwsgi 

uwsgi的python版本
uwsgi --python-version

pythonpath = /home/harry/anconda2/versions/3.6.1/lib/python3.6/site-packages
 19 virtualenv = /root/.pyenv/versions/3.6.1

5. 启动nginx和uwsgi

终于完成了所有的配置, 下面就可以正常启动了~

sudo nohup nginx -c /home/harry/blogproject/nginx.conf &
sudo nohup uwsgi --ini /home/harry/blogproject/uwsgi.ini &