Nginx 自定义访问日志
访问日志是记录客户端即用户的具体请求内容信息，而在全局配置模块中的error_log是记录nginx服务 器运行时的日志保存路径和记录日志的level，因此两者是不同的，而且Nginx的错误日志一般只有一 个，但是访问日志可以在不同server中定义多个，定义一个日志需要使用access_log指定日志的保存路 径，使用log_format指定日志的格式，格式中定义要保存的具体日志内容。
访问日志由 ngx_http_log_module 模块实现
日志格式的常见变量
$remote_addr # 记录客户端IP地址
$remote_user # 记录客户端用户名
$time_local # 记录通用的本地时间
$time_iso8601 # 记录ISO8601标准格式下的本地时间
$request # 记录请求的方法以及请求的http协议
$status # 记录请求状态码(用于定位错误信息)
$body_bytes_sent # 发送给客户端的资源字节数，不包括响应头的大小
$bytes_sent # 发送给客户端的总字节数$msec # 日志写入时间。单位为秒，精度是毫秒
$http_referer # 记录从哪个页面链接访问过来的
$http_user_agent # 记录客户端浏览器相关信息
$http_x_forwarded_for #记录客户端IP地址
$request_length # 请求的长度（包括请求行，请求头和请求正文）。
$request_time # 请求花费的时间，单位为秒，精度毫秒# 注:如果Nginx位于负载均衡器，nginx反向代理之后，web服务器无法直接获取到客 户端真实的IP地址。
# $remote_addr获取的是反向代理的IP地址。 反向代理服务器在转发请求的http头信息中，
# 增加X-Forwarded-For信息，用来记录客户端IP地址和客户端请求的服务器地址
1. 自定义默认格式日志
# 默认日志格式http {log_format main '$remote_addr - $remote_user [$time_local] "$request" ''$status $body_bytes_sent "$http_referer" ''"$http_user_agent" "$http_x_forwarded_for"';access_log /var/log/nginx/access.log main;# 如果是要保留日志的源格式，只是添加相应的日志内容，则配置如下：
# 注意:此指令只支持http块,不支持server块
log_format access_log_format '$remote_addr - $remote_user [$time_local] "$request" ''$status $body_bytes_sent "$http_referer" ''"$http_user_agent" "$http_x_forwarded_for"''$server_name:$server_port';# 注意:此指令一定要在放在log_format命令后
access_log logs/access.log access_log_format;
[root@Ubuntu2204 ~]#vim /apps/nginx/conf/nginx.conf
http {
......
......
......
log_format access_log_format '$remote_addr - $remote_user [$time_local] "$request" ''$status $body_bytes_sent "$http_referer" ''"$http_user_agent" "$http_x_forwarded_for"''$server_name:$server_port';access_log logs/access.log access_log_format;
......
......
......
}
[root@Ubuntu2204 ~]#nginx -t
[root@Ubuntu2204 ~]#nginx -s reload# 访问10.0.0.100 测试自定义格式日志
[root@Rocky8 ~]#curl 10.0.0.100[root@Ubuntu2204 ~]#tail /apps/nginx/logs/access.log -f10.0.0.8 - - [20/Jul/2024:22:31:28 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.61.1" "-"localhost:80
10.0.0.8 - - [20/Jul/2024:22:31:29 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.61.1" "-"localhost:80
10.0.0.8 - - [20/Jul/2024:22:31:30 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.61.1" "-"localhost:802. 自定义json格式日志
Nginx 的默认访问日志记录内容相对比较单一，默认的格式也不方便后期做日志统计分析，生产环境中 通常将nginx日志转换为json日志，然后配合使用ELK做日志收集,统计和分析。
log_format access_json '{"@timestamp":"$time_iso8601",''"host":"$server_addr",''"clientip":"$remote_addr",''"size":$body_bytes_sent,''"responsetime":$request_time,' #总的处理时间'"upstreamtime":"$upstream_response_time",''"upstreamhost":"$upstream_addr",' #后端应用服务器处理时间'"http_host":"$host",''"uri":"$uri",''"xff":"$http_x_forwarded_for",''"referer":"$http_referer",''"tcp_xff":"$proxy_protocol_addr",''"http_user_agent":"$http_user_agent",''"status":"$status"}';
access_log /apps/nginx/logs/access_json.log access_json;
json 格式的日志访问统计
[root@Ubuntu2204 ~]#vim /apps/nginx/conf/nginx.conf
http {
......
......
......
log_format access_json '{"@timestamp":"$time_iso8601",''"host":"$server_addr",''"clientip":"$remote_addr",''"size":$body_bytes_sent,''"responsetime":$request_time,''"upstreamtime":"$upstream_response_time",''"upstreamhost":"$upstream_addr",''"http_host":"$host",''"uri":"$uri",''"xff":"$http_x_forwarded_for",''"referer":"$http_referer",''"tcp_xff":"$proxy_protocol_addr",''"http_user_agent":"$http_user_agent",''"status":"$status"}';access_log /apps/nginx/logs/access_json.log access_json;......
......
......
}
[root@Ubuntu2204 ~]#nginx -t
[root@Ubuntu2204 ~]#nginx -s reload# 访问10.0.0.100 测试自定义json格式日志
[root@Rocky8 ~]#curl 10.0.0.100[root@Ubuntu2204 ~]#vim nginx_json.py #!/usr/bin/env python3
#coding:utf-8
status_200= []
status_404= []
with open("access_json.log") as f:for line in f.readlines():line = eval(line)if line.get("status") == "200":status_200.append(line.get)elif line.get("status") == "404":status_404.append(line.get)else:print("状态码 ERROR")print((line.get("clientip")))
f.close()
print("状态码200的有--:",len(status_200))
print("状态码404的有--:",len(status_404))[root@Ubuntu2204 ~]#mv nginx_json.py /apps/nginx/logs/
[root@Ubuntu2204 ~]#cd /apps/nginx/logs/
[root@Ubuntu2204 logs]#python3 nginx_json.py
10.0.0.8
10.0.0.8
10.0.0.8
状态码200的有--: 3
状态码404的有--: 0
3. 不记录访问日志
一个网站会包含很多元素，尤其是有大量的images、js、css等静态资源。这样的请求可以不用记录日 志
#请求favicon.ico时，不记录日志
location /favicon.ico {access_log off;return 200;
}
#当有人访问gif、png等资源时，将日志丢入空
location ~* .*\.(gif|jpg|png|css|js)$ {access_log /dev/null;
}
+PyCharm(Yolo5)配置)
