Nginx访问日志、日志切割、静态文件管理

怼烎@ 2022-05-21 23:19 275阅读 0赞

## 访问日志 ##

Nginx日志格式：

[root@123 ~]# vim /usr/local/nginx/conf/nginx.conf
    log_format combined_realip '$remote_addr $http_x_forwarded_for [$time_local]'
        ' $host "$request_uri" $status'
        ' "$http_referer" "$http_user_agent"';

**说明：**  
“combined\_ realip”：日志格式名称；'$remote\_ addr $http\_ x\_ forwarded\_ for \[$time\_ local\]' ' $host "$request\_uri" $status' ' "$http\_ referer" "$http\_ user\_ agent"' ：日志内容。  
**注释：**

<table style="border-spacing:1px;font-size:14px;color:rgb(68,68,68);max-width:100%;border:0px;line-height:28px;font-family:'Pingfang SC', STHeiti, 'Lantinghei SC', 'Open Sans', Arial, 'Hiragino Sans GB', 'Microsoft YaHei', 'WenQuanYi Micro Hei', SimSun, sans-serif;background-color:rgb(255,255,255);"> 
 <thead style="background:rgb(248,248,248);"> 
  <tr> 
   <th style="background:rgb(248,248,248);padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">名称</th> 
   <th style="background:rgb(248,248,248);padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">含义</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">$remote_addr</td> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">客户端IP（公网IP）</td> 
  </tr> 
  <tr> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">$http_x_forwarded_for</td> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">代理服务器的IP</td> 
  </tr> 
  <tr> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">$time_local</td> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">服务器本地时间</td> 
  </tr> 
  <tr> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">$host</td> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">访问主机名（域名）</td> 
  </tr> 
  <tr> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">$request_uri</td> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">访问的URL地址</td> 
  </tr> 
  <tr> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">$status</td> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">状态码</td> 
  </tr> 
  <tr> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">$http_referer</td> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">referer</td> 
  </tr> 
  <tr> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">$http_user_agent</td> 
   <td style="padding-top:4px;padding-bottom:4px;border-color:rgb(204,204,204);">user_agent</td> 
  </tr> 
 </tbody> 
</table>

### 定义虚拟主机日志格式 ###

定义虚拟主机的前提是在Nginx配置文件中设定日志格式，然后才能在虚拟主机中进行调用（格式名称）。

[root@123 ~]# cd /usr/local/nginx/conf/vhost/
    [root@123 vhost]# ls
    aaa.com.conf  test.com.conf
    
    定义test.com.conf日志格式：  
    [root@123 vhost]# vim test.com.conf 
     ……
     access_log /tmp/test.com.log combined_realip;
        #指定日志位置及格式
    
    检查错误：
    [root@123 vhost]# /usr/local/nginx/sbin/nginx -t
    nginx: the configuration file /usr/local/nginx/conf/nginx.conf syntax is ok
    nginx: configuration file /usr/local/nginx/conf/nginx.conf test is successful

**注：** 如果不指定日志格式，系统使用默认日志格式，记录内容较简单。

**检测：**

[root@123 vhost]# curl -x127.0.0.1:80 test.com
    This is test.com
    [root@123 vhost]# cat /tmp/test.com.log 
    127.0.0.1 - [11/Aug/2017:15:09:54 +0800] test.com "/" 200 "-" "curl/7.29.0"

##  Nginx日志切割 ##

因为Nginx没有自带的日志切割工具，所以需要借助系统日志切割命令或使用日志切割脚本。

### 日志切割脚本 ###

为了方便管理，shell脚本统一保存位置：/usr/local/sbin/

[root@123 vhost]# vim /usr/local/sbin/nginx_log_rotate.sh
    
    #! /bin/bash
    d=`date -d "-1 day" +%Y%m%d` 
    #定义切割时间（切割一天前的日志）
    logdir="/tmp/"
    #此处指定要切割的日志路径（该路径来自虚拟主机配置文件）
    nginx_pid="/usr/local/nginx/logs/nginx.pid"
    #调用pid的目的是执行命令：/bin/kill -HUP `cat $nginx_pid`
    #该命令等价于命令：nginx -s reload（重新加载文件），确保与虚拟主机配置文件变更保持同步
    #该地址来自nginx配置文件
    cd $logdir
    for log in `ls *.log`
    do
        mv $log $log-$d
    done
    #此处使用通配进行循环，对所有复合条件的日志文件进行切割
    /bin/kill -HUP `cat $nginx_pid`
    #执行此命令进行重载生成新的日志文件来记录新的日志

执行该脚本：

[root@123 vhost]# sh -x /usr/local/sbin/nginx_log_rotate.sh
    ++ date -d '-1 day' +%Y%m%d
    + d=20170810
    + logdir=/tmp/
    + nginx_pid=/usr/local/nginx/logs/nginx.pid
    + cd /tmp/
    ++ ls test.com.log yum.log
    + for log in '`ls *.log`'
    + mv test.com.log test.com.log-20170810
    + for log in '`ls *.log`'
    + mv yum.log yum.log-20170810
    ++ cat /usr/local/nginx/logs/nginx.pid
    + /bin/kill -HUP 1251

**说明：** -x选项的作用是显示脚本执行过程。

**注：** 该脚本配合任务计划cron使用，定期进行切割和清理。

## 静态文件不记录日志&过期时间 ##

核心配置参数：

[root@123 vhost]# vim test.com.conf
    location ~ .*\.(gif|jpg|jpeg|png|bmp|swf)$
        #匹配文件类型
        {
              expires      7d;
              #过期时间为7天
              access_log off;
              #不记录该类型文件的访问日志
        }
    location ~ .*\.(js|css)$
        {
              expires      12h;
              #过期时间为12小时
              access_log off;
              #不记录该类型文件的访问日志
        }
        access_log /tmp/test.com.log combined_realip;
        #指定日志位置及格式

检测：

[root@123 vhost]# /usr/local/nginx/sbin/nginx -t
    nginx: the configuration file /usr/local/nginx/conf/nginx.conf syntax is ok
    nginx: configuration file /usr/local/nginx/conf/nginx.conf test is successful
    [root@123 vhost]# /usr/local/nginx/sbin/nginx -s reload
    
    访问index.html：
    [root@123 vhost]# !curl
    curl -x127.0.0.1:80 test.com
    This is test.com
    
    [root@123 vhost]# !cat
    cat /tmp/test.com.log 
    127.0.0.1 - [11/Aug/2017:17:45:28 +0800] test.com "/" 200 "-" "curl/7.29.0"
    即：有日志！
    
    访问baidu.png文件：
    [root@123 test.com]# curl -x127.0.0.1:80 test.com/baidu.png -I
    HTTP/1.1 200 OK
    Server: nginx/1.12.1
    Date: Fri, 11 Aug 2017 09:47:57 GMT
    Content-Type: image/png
    Content-Length: 3706
    Last-Modified: Tue, 01 Aug 2017 10:13:45 GMT
    Connection: keep-alive
    ETag: "59805459-e7a"
    Expires: Fri, 18 Aug 2017 09:47:57 GMT
    Cache-Control: max-age=604800
    Accept-Ranges: bytes
    说明：max-age=604800s=7天，即该文件缓存的过期时间为7天！
    
    [root@123 test.com]# cat /tmp/test.com.log 
    127.0.0.1 - [11/Aug/2017:17:45:28 +0800] test.com "/" 200 "-" "curl/7.29.0"
    即：无该文件的访问日志！！！