Nginx服务编译安装日志功能状态模块及访问认证模式实操
Posted 酷酷的二连长
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了Nginx服务编译安装日志功能状态模块及访问认证模式实操相关的知识，希望对你有一定的参考价值。
系统环境
[root@web ~]# cat /etc/redhat-release CentOS release 6.9 (Final) [root@web ~]# uname -a Linux db02 2.6.32-696.el6.x86_64 #1 SMP Tue Mar 21 19:29:05 UTC 2017 x86_64 x86_64 x86_64 GNU/Linux
nginx介绍
Nginx是一个开源的，支持高性能、高并发的WWW服务器和代理服务软件
nginx软件常见的使用方式或架构为：LNMP(linux nginx mysql php)
Nginx的特点或优势
- 支持高并发：能支持几万并发连接（特别是静态小文件业务环境）
- 资源消耗少：在3万并发连接下，开启10个Nginx线程消耗的内存不到200MB
- 可以做HTTP反向代理及加速缓存、即负载均衡功能，内置对RS节点服务器健康检查功能，这相当于专业的Haproxy软件或LVS的功能。
- 具备Squid等专业缓存软件等的缓存功能。
- 支持异步网络I/O事件模型epoll（Linux 2.6+）(绘图说明同步和异步)
大并发写操作；先写内存，再将内存数据存储到硬盘中---保证访问效率
大并发读操作；先写磁盘，再将磁盘数据存储到内存中---保证数据安全
总结：高并发-->资源消耗少-->功能多样(web服务/负载均衡/支持缓存)-->通讯模型先进(epoll)
Nginx编译安装步骤
一、解决nginx依赖包
需要的依赖：
pcre：兼容perl语言正则表达式，perl compatible regular expressions rewirte模块 参数信息（perl方式定义正则表达式）
openssl：https
注意：所有安装依赖软件，后面都要加上-devel
[root@web ~]# yum install -y pcre-devel openssl-devel 下载nginx [root@web tools]# wget http://nginx.org/download/nginx-1.10.2.tar.gz [root@web tools]# ll total 892 -rw-r--r-- 1 root root 910812 Oct 24 10:26 nginx-1.10.2.tar.gz
二、解压nginx、创建管理用户、配置nginx
[root@web tools]# tar xf nginx-1.10.2.tar.gz [root@web tools]# ll total 896 drwxr-xr-x 8 1001 1001 4096 Oct 18 2016 nginx-1.10.2 -rw-r--r-- 1 root root 910812 Oct 24 10:26 nginx-1.10.2.tar.gz [root@web tools]# cd nginx-1.10.2 [root@web nginx-1.10.2]# useradd -s /sbin/nologin www -M [root@web nginx-1.10.2]# id www uid=2223(www) gid=2223(www) groups=2223(www) [root@web01 nginx-1.10.2]# ./configure --prefix=/application/nginx-1.10.2 --user=www --group=www --with-http_stub_status_module --with-http_ssl_module --prefix：表示指定软件安装到哪个目录中，指定目录不存在会自动创建 --user/--group：nginx工作进程由哪个用户运行管理 --with-http_stub_status_module：表示启动nginx状态模块功能（用户访问nginx的网络信息） --with-http_ssl_module：启动https功能模块
三、编译&&编译安装
make && make install
给软件创建软连接文件，方便以后管理使用
[root@web application]# ln -s /application/nginx-1.10.2/ /application/nginx [root@web application]# ll total 4 lrwxrwxrwx 1 root root 26 Oct 24 10:51 nginx -> /application/nginx-1.10.2/ drwxr-xr-x 6 root root 4096 Oct 24 10:50 nginx-1.10.2
四、启动nginx服务
[root@web application]# /application/nginx/sbin/nginx [root@web application]# ps -ef |grep nginx root 15342 1 0 10:56 ? 00:00:00 nginx: master process /application/nginx/sbinnginx www 15343 15342 0 10:56 ? 00:00:00 nginx: worker process root 15345 12539 0 10:56 pts/0 00:00:00 grep --color=auto nginx
软件安装完目录信息
conf目录中内容
nginx.conf --- nginx程序的主配置文件
nginx.conf.default --- nginx配置备份文件
因为初始化的nginx配置文件内有较多注释，影响对配置文件的修改，所以进行精简化配置文件
[root@web conf]# egrep -v "#|^$" nginx.conf.default >nginx.conf
nginx软件启动重启方法
启动方法（全路径） /applocation/nginx/sbin/nginx 停止方法（全路径+ -s 参数 接指令） /applocation/nginx/sbin/nginx -s stop 平滑重启方法（全路径+ -s 参数 接指令） /applocation/nginx/sbin/nginx -s reload 检查配置文件语法（全路径+ -t 参数） /applocation/nginx/sbin/nginx -t 查看怎么部署的（全路径+ -V 参数） /applocation/nginx/sbin/nginx -V
Nginx配置文件配置详解
在server模块下指定主页文件，可以指定自己写的主页，这里需要注意的是，主页文件要放到站点目录下
[root@web nginx]# cat conf/nginx.conf worker_processes 1; ##worker进程数量 events { worker_connections 1024; ##每个worker进程支持的最大连接数 } http { include mime.types; ##Nginx支持的媒体类型库文件 default_type application/octet-stream; ##默认的媒体类型 sendfile on; ##开启高效传输模式 keepalive_timeout 65; ##连接超时 server { listen 80; ##提供服务的端口，默认是80 server_name www.zxpo.top; ##提供服务的域名主机名 location / { root html/www; ##站点的根目录，相当于Nginx的安装目录 index index.html index.htm; ##默认的首页文件，多个用空格分开 } error_page 500 502 503 504 /50x.html; ##出现对应的状态码，使50x.html location = /50x.html { root html; ##指定对应的站点目录为html } } }
多个server模块堆在一个配置文件中比较乱，难以修改，可以将配置文件分为多个，一个nginx.conf为主，例如
创建一个exyra目录为存放不同站点的配置文件目录，将不同网页的server模块写成不同的配置文件，然后引用
http { include mime.types; default_type application/octet-stream; sendfile on; keepalive_timeout 65; include extra/www.conf; include extra/blog.conf; include extra/bbs.conf; }
Nginx使用
基于域名访问
在server模块中设置，server模块可以有多个，server_name，可以修改成不同的域名，如果是本地测试的话，记得host文件解析
server { listen 80; server_name www.zxpo.top; <- 修改虚拟主机域名名称 location / { root html/www; <- 修改虚拟主机站点目录 index index.html index.htm; }
基于端口访问
server { listen 81; <- 将端口换成81，进行测试 server_name bbs.zxpo.top; location / { root html/bbs; index index.html index.htm; }
检查
[root@web nginx]# netstat -lntup|grep nginx tcp 0 0 0.0.0.0:80 0.0.0.0:* LISTEN 15342/nginx tcp 0 0 0.0.0.0:81 0.0.0.0:* LISTEN 15342/nginx
基于IP访问
注意：采用基于IP配置虚拟主机，修改完配置文件后，需要重启配置文件，不能够采用平滑重启。
只要配置文件中，有关IP地址相关的改动，都需要进行重启nginx服务，不能够采用平滑重启。
改配置文件
server { listen 10.0.0.8:80; <-改成某个ip还有指定的端口 server_name www.zxpo.top; location / { root html/www; index index.html index.htm; }
然后重启
curl访问网站流程
[root@web ~]# curl -v www.zxpo.top <- 利用curl命令-v参数获取访问网站流程
a. 访问网站时首先需要根据域名解析获取到网站的ip地址，找寻网站的ip地址对应的服务器
b. 访问网站时其次需要根据请求建立连接的目标端口信息，找寻网站的相应服务端口是否存在
c. 访问网站时再次需要根据请求域名信息获悉相应的站点，找寻网站的相应站点目录下的资源信息
d. 访问网站时最后如果ip地址加端口信息都已找到，但没有找到对应的域名信息，会按照默认原则使用第一个虚拟主机作为默认访问的虚拟站点目录
Nginx共享文件web页面
当配置autoindex on参数以后，会显示站点目录文件列表信息：
1. 对于nginx服务可以识别解析资源，进行点击，会显示相应内容
2. 对于nginx服务不可以识别解析资源，进行点击，会直接下载
server { listen 80; server_name www.zxpo.com; location / { root html/www; <-或者在设置一级专门做共享的目录 index index.html index.htm; <-这里要在站点目录中把主页文件删除，否则会直接显示主页 autoindex on; }
查看Nginx状态信息配置
stub_status模块主要用于查看Nginx的一些状态信息
在主配置文件配置 log_format main……
http { include mime.types; default_type application/octet-stream; sendfile on; keepalive_timeout 65;
log_format main \'$remote_addr - $remote_user [$time_local] "$request"\' \'$status $body_bytes_sent "$http_referer" \' \'"$http_user_agent" "$http_x_forwarded_for"\';
省略……
访问状态信息：
Active connections 客户端连接数
accepts 接收数值
handled 处理数值（通常跟接收值是一样的，但是限制值达到上限就例外了）
requests 客户端请求值
Reading 请求报文的连接数
Writing 响应
Waiting 等待请求的数量
说明：一般以上页面内容信息主要会被zabbix监控服务调取，形成图像信息；根据图像信息，从而判断nginx网站服务用户访问量情况
Nginx日志功能
|
Nginx日志变量 |
说明 |
|
$remote_addr |
记录访问网站的客户端地址；即源 ip地址 |
|
$http_x_forwarded_for |
当前端有代理服务器时，设置web节点记录客户端地址的配置，此参数生效的前提是代理服务器上也进行了相关的 x_forwarded_for设置可以记录用户真实的 IP地址信息 |
|
$remote_user |
远程客户端用户名称 |
|
$time_local |
记录访问时间与时区 |
|
$request |
用户的 http请求起始行信息 |
|
$status |
http状态码，记录请求返回的状态，例如：200，404，301等 |
|
$body_bytes_sents |
服务器发送给客户端的响应body字节数 |
|
$http_referer |
记录此次请求是从哪个链接访问过来的，可以根据referer进行防盗链设置即表示是哪个网站介绍过来的 |
|
$http_user_agent |
记录客户端访问信息，例如：浏览器、手机客户端等 |
|
在没有特殊要求的情况下，采用默认的配置即可，更多可以设置的记录日志信息的变量见： http://nginx.org/en/docs/http/ngx_httpJog_module.html |
|
错误日志信息
记录nginx服务运行异常情况信息
error_log的默认值为：
error_log logs/error.log error；
可以放置的标签段为（可以设置的区块）：
main，http，server，location
参考资料：http://nginx.org/en/docs/ngx_core_module.html#error_log 。
说明：nginx官方文档查询信息如何使用，如何根据配置信息获取所在模块目录
配置文件中设置错误日志
error_log logs/error.log error;
访问日志信息
Nginx日志格式中默认的参数配置如下： log_format main \'$remote_addr - $remote_user [$time_local] "$request" \' \'$status $body_bytes_sent "$http_referer" \' \'"$http_user_agent" "$http_x_forwarded_for"\';
Nginx记录日志的默认参数配置如下：
access_log logs/access.log main;
配置文件中设置访问日志
http { include mime.types; default_type application/octet-stream; sendfile on; keepalive_timeout 65; log_format main \'$remote_addr - $remote_user [$time_local] "$request"\' \'$status $body_bytes_sent "$http_referer" \' \'"$http_user_agent" "$http_x_forwarded_for"\'; access_log logs/access.log main;
……
日志信息说明
这是一条日志文件中的日志信息：
10.0.0.253 - - [25/Oct/2017:15:32:35 +0800] "GET /favicon.ico HTTP/1.1" 404 571 "http://www.zxpo.top/" "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/60.0.3112.90 Safari/537.36" $remote_addr 10.0.0.253 客户端IP地址信息 $remote_user - 远程认证用户信息 [$time_local] [24/Oct/2017:23:19:29 +0800] 显示访问事件信息 $request GET / HTTP/1.1 表示显示请求行内容 $status 200 显示状态码信息（若日志中，状态码为304，表示用户端有缓存信息） $body_bytes_sent 10 响应保存主体内容大小 $http_user_agent 定义客户端以什么软件进行访问web服务器
Nginx日志切割方式
利用脚本切割
#!/bin/bash /application/nginx/sbin/nginx -s reload #先重启一次生成日志 mv /application/nginx/logs/access_www.log /application/nginx/logs/access_www_$(date +%F).log #然后改名 /application/nginx/sbin/nginx -s reload #再次重启重新生成新的
具体切割日志脚本
[root@www logs]# cat /server/script/cut_nginx_log.sh #!/bin/sh Dateformat=`date +%Y%m%d` Basedir= "/application/nginx" Nginxlogdir="$Basedir/logs" Logname="access_www" [-d $Nginxlogdir ] && cd $Nginxlogdir || exit 1 [-f ${Logname}.log ] || exit 1 /bin/mv ${Logname}.log ${Dateformat}_${Logname}.log $Basedir/sbin/nginx -s reload
logrotate方式切割
logrotate配置文件详解
/var/log/nginx/*.log { #/var/log/nginx/日志的存储目录，可以根据实际情况进行修改 daily ##日志文件将按天轮循 weekly ##日志文件将按周轮循 monthly ##日志文件将按月轮循 missingok ##在日志轮循期间，任何错误将被忽略，例如“文件无法找到”之类的错误 rotate 7 #一次存储7个日志文件。对于第8个日志文件，时间最久的那个日志文件将被删除 dateext #定义日志文件后缀是日期格式,也就是切割后文件是:xxx.log-20160402.gz这样的格式。如果该参数被注释掉,切割出来是按数字递增,即前面说的 xxx.log-1这种格式 # compress ##在轮循任务完成后，已轮循的归档将使用gzip进行压缩 delaycompress ##总是与compress选项一起用，delaycompress选项指示logrotate不要将最近的归档压缩，压缩将在下一次轮循周期进行。这在你或任何软件仍然需要读取最新归档时很有用 notifempty ##如果是空文件的话，不进行转储 create 640 nginx adm ##以指定的权限和用书属性，创建全新的日志文件，同logrotate也会重命名原始日志文件 sharedscripts ##表示postrotate脚本在压缩了日志之后只执行一次 postrotate [ -f /var/run/nginx.pid ] && kill -USR1 `cat /var/run/nginx.pid` endscript } ## postrotate/endscript：在所有其它指令完成后，postrotate和endscript里面指定的命令将被执行。在这种情况下，rsyslogd进程将立即再次读取其配置并继续运行。注意：这两个关键字必须单独成行
Nginx的location作用
进行策略控制
location = / { [ configuration A ] } location / { [ configuration B ] } location /documents/ { [ configuration C ] } location ^~ /images/ { [ configuration D ] } location ~* \\.（gif|jpg|jpeg）$ { [ configuration E ] }
location表示位置的概念，类似于if，即满足什么条件，就做什么
控制访问网段，设置访问网段白名单和黑名单
[root@web01 www]# cat /application/nginx/conf/extra/www.conf server { listen 80; server_name www.etiantian.org t.org; location / { root html/www; index index.html index.htm; } location /AV/ { root html/www; index index.html index.htm; allow 172.16.1.0/24; ##允许内网网段访问 deny all; ##其余网段拒绝 } }
location匹配说明
|
不用URI及特殊字符组合匹配 |
匹配说明 |
|
location = / { |
精确匹配 / |
|
location ^~ /images { |
匹配常规字符串，不做正则匹配检查（优先） |
|
location ~* \\. ( gif|jpg|jpeg ) $ { |
正常匹配，匹配后缀为gif|jpg|jpeg的 |
|
location /documents/ { |
匹配常规字符串，如果有正则，优先匹配正则 |
|
location / { |
所有location都不能匹配后的默认匹配 |
|
~ : 匹配内容区分大小写 ~* ：匹配内容不区分大小写 ！ ：表示取反匹配 ^~ ：表示当多个匹配同时存在，优先匹配^~内容 |
|
Nginx 的访问认证
修改nginx的相关配置文件
server { listen 80; server_name www.zxpo.top; location / { root html/www; index index.html index.htm; auth_basic "erlianzhang training"; auth_basic_user_file /application/nginx/conf/htpasswd; }
创建密码认证文件并进行授权
首先要下载httpd-tools软件
yum install httpd-tools -y
htpasswd的参数
[root@web application]# htpasswd -hlep Usage: htpasswd [-cmdpsD] passwordfile username htpasswd -b[cmdpsD] passwordfile username password htpasswd -n[mdps] username htpasswd -nb[mdps] username password -c Create a new file. 创建一个新的密码文件 -n Don\'t update file; display results on stdout. 不更新文件，显示输出结果 -m Force MD5 encryption of the password. 强制采用MD5加密密码 -d Force CRYPT encryption of the password (default). 强制采用CRYPT加密密码（默认） -p Do not encrypt the password (plaintext). 不加密密码（明文） -s Force SHA encryption of the password. 强制采用SHA加密密码 -b Use the password from the command line rather than prompting for it. 使用密码来自命令行，相当于免交互方式 -D Delete the specified user. 删除指定用户 On Windows, NetWare and TPF systems the \'-m\' flag is used by default. On all other systems, the \'-p\' flag will probably not work.
创建认证文件
[root@web www]# htpasswd -bc /application/nginx/conf/htpasswd lyq 123456 Adding password for user oldboy [root@web01 www]# cat /application/nginx/conf/htpasswd lyq:DVu6f44f2I81w <- 加密的认证文件自动设置密文
给密码文件授权，重启Nginx
[root@web www]# chown -R www.www /application/nginx/conf/htpasswd [root@web www]# chmod 400 /application/nginx/conf/htpasswd [root@web www]# /application/nginx/sbin/nginx -t nginx: the configuration file /application/nginx-1.10.2/conf/nginx.conf syntax is ok nginx: configuration file /application/nginx-1.10.2/conf/nginx.conf test is successful [root@web www]# /application/nginx/sbin/nginx -s reload
登陆测试
以上是关于Nginx服务编译安装日志功能状态模块及访问认证模式实操的主要内容，如果未能解决你的问题，请参考以下文章