1、Nginx状态监控
Nginx提供了一个内置的状态信息监控页面可用于监控Nginx的整体访问情况,这个功能由ngx_http_stub_status_module模块进行实现。
使用nginx -V 2>&1 | grep -o with-http_stub_status_module命令检测当前Nginx是否有status功能,如果输出ngx_http_stub_status_module则说明是有的,如果没有可以在编译时加上此模块。
默认情况下,status是关闭的,我们需要开启,并指定uri来访问数据。
|
allow配置只允许指定的Ip才能访问nginx status功能,去掉就是不限制。
重启Nginx之后,浏览器访问http://{IP}/status查看状态监控信息
- Active connections:当前的客户端活动连接数(包含正在等待的客户端连接),相当于TCP连接状态处于Established和SYN_ACK
- accepts: 已接受的客户端连接总数,即已被worker进程接收的连接
- handled: 已被处理的连接总数
- requests: 客户端的http请求总数
- Reading: 当前正在读取的http请求数(读取到http请求首部)
- Writing: 当前准备响应的连接数(写入到http响应首部)
- Waiting: 当前处于等待的空闲客户端请求数, 等待的时间为Reading和Writing之间的间隔
采集到Nginx数据之后就可以用监控工具给监控起来了。
2、日志分析
Nginx默认的日志格式配置可以在/etc/nginx/nginx.conf中找到
|
打印的日志实例
39.105.66.117 - mp [11/Sep/2019:19:03:01 +0800] "POST /salesplatform-gateway/users HTTP/1.1" 200 575 "-" "Apache-HttpClient/4.5.5 (Java/1.8.0_161)" "-" 0.040 0.040
39.105.66.117 - mp [11/Sep/2019:19:03:08 +0800] "POST /salesplatform-gateway/users HTTP/1.1" 200 575 "-" "Apache-HttpClient/4.5.5 (Java/1.8.0_161)" "-" 0.008 0.008
- $remote_addr: 客户端的ip地址
- $remote_user: 用于记录远程客户端的用户名称
- $time_local: 用于记录访问时间和时区
- $request: 用于记录请求的url以及请求方法
- $status: 响应状态码
- $body_bytes_sent: 给客户端发送的文件主体内容字节数
- $http_referer: 可以记录用户是从哪个链接访问过来的
- $http_user_agent: 用户所使用的浏览器信息
- $http_x_forwarded_for: 可以记录客户端IP,通过代理服务器来记录客户端的ip地址
- $request_time: 指的是从接受用户请求的第一个字节到发送完响应数据的时间,即$request_time包括接收客户端请求数据的时间、后端程序响应的时间、发送响应数据给客户端的时间
- $upstream_response_time: 用于接收来自上游服务器的响应的时间
常用分析命令
1、根据访问IP统计UV
|
2、查询访问最频繁的IP(前10)
|
3、查看某一时间段的IP访问量(1-8点)
|
4、查看访问100次以上的IP
|
5、查看指定ip访问过的url和访问次数
|
6、根据访问URL统计PV
|
7、查询访问最频繁的URL(前10)
|
8、查看访问最频的URL([排除/api/appid])(前10)
|
9、查看页面访问次数超过100次的页面
|
10、查看最近1000条记录,访问量最高的页面
|
11、统计每小时的请求数,top10的时间点(精确到小时)
|
12、统计每分钟的请求数,top10的时间点(精确到分钟)
|
13、统计每秒的请求数,top10的时间点(精确到秒)
|
14、查找指定时间段的日志
|
15、列出传输时间超过 0.6 秒的url,显示前10条
|
16、列出/api/appid请求时间超过0.6秒的时间点
|
17、获取前10条最耗时的请求时间、url、耗时
|