nginx access日志配置

access_log日志配置

access_log用來定義日志級(jí)別，日志位置。語法如下：
日志級(jí)別：debug > info > notice > warn > error > crit > alert > emerg

語法格式:access_log path [format [buffer=size] [gzip[=level]] [flush=time] [if=condition]];
                     access_log off;
默認(rèn)值   :access_log logs/access.log combined;
作用域   :http, server, location, if in location, limit_except

實(shí)例一：

access_log /spool/logs/nginx-access.log compression buffer=32k;

log_format 定義日志格式

語法格式:log_format name [escape=default|json] string ...;
默認(rèn)值    :log_format combined "...";
作用域    :http

實(shí)例一：

log_format compression '$remote_addr - $remote_user [$time_local] '
                       '"$request" $status $bytes_sent '
                       '"$http_referer" "$http_user_agent" "$gzip_ratio"';

access_log /spool/logs/nginx-access.log compression buffer=32k;

常見的日志變量

$remote_addr,$http_x_forwarded_for記錄客戶端IP地址

$remote_user記錄客戶端用戶名稱

$request記錄請(qǐng)求的URL和HTTP協(xié)議(GET,POST,DEL,等)

$status記錄請(qǐng)求狀態(tài)

$body_bytes_sent發(fā)送給客戶端的字節(jié)數(shù)，不包括響應(yīng)頭的大小；該變量與Apache模塊mod_log_config里的“%B”參數(shù)兼容。

$bytes_sent發(fā)送給客戶端的總字節(jié)數(shù)。

$connection連接的序列號(hào)。

$connection_requests當(dāng)前通過一個(gè)連接獲得的請(qǐng)求數(shù)量。

$msec日志寫入時(shí)間。單位為秒，精度是毫秒。

$pipe如果請(qǐng)求是通過HTTP流水線(pipelined)發(fā)送，pipe值為“p”，否則為“.”。

$http_referer記錄從哪個(gè)頁面鏈接訪問過來的

$http_user_agent記錄客戶端瀏覽器相關(guān)信息

$request_length請(qǐng)求的長度（包括請(qǐng)求行，請(qǐng)求頭和請(qǐng)求正文）。

$request_time請(qǐng)求處理時(shí)間，單位為秒，精度毫秒；從讀入客戶端的第一個(gè)字節(jié)開始，直到把最后一個(gè)字符發(fā)送給客戶端后進(jìn)行日志寫入為止。

$time_iso8601 ISO8601標(biāo)準(zhǔn)格式下的本地時(shí)間。

$time_local通用日志格式下的本地時(shí)間。

open_log_file_cache

使用open_log_file_cache來設(shè)置日志文件緩存(默認(rèn)是off)。

max:設(shè)置緩存中的最大文件描述符數(shù)量，如果緩存被占滿，采用LRU算法將描述符關(guān)閉。

inactive:設(shè)置存活時(shí)間，默認(rèn)是10s

min_uses:設(shè)置在inactive時(shí)間段內(nèi)，日志文件最少使用多少次后，該日志文件描述符記入緩存中，默認(rèn)是1次

valid:設(shè)置檢查頻率，默認(rèn)60s

off：禁用緩存

語法格式:open_log_file_cache max=N [inactive=time] [min_uses=N] [valid=time];
                     open_log_file_cache off;
默認(rèn)值: open_log_file_cache off;
作用域: http, server, location

實(shí)例一

open_log_file_cache max=1000 inactive=20s valid=1m min_uses=2;

nginx日志調(diào)試技巧

設(shè)置 Nginx 僅記錄來自于你的 IP 的錯(cuò)誤

當(dāng)你設(shè)置日志級(jí)別成 debug，如果你在調(diào)試一個(gè)在線的高流量網(wǎng)站的話，你的錯(cuò)誤日志可能會(huì)記錄每個(gè)請(qǐng)求的很多消息，這樣會(huì)變得毫無意義。

在events{...}中配置如下內(nèi)容，可以使 Nginx 記錄僅僅來自于你的 IP 的錯(cuò)誤日志。

events {
        debug_connection 1.2.3.4;
}

調(diào)試 nginx rewrite 規(guī)則

調(diào)試rewrite規(guī)則時(shí)，如果規(guī)則寫錯(cuò)只會(huì)看見一個(gè)404頁面，可以在配置文件中開啟nginx rewrite日志，進(jìn)行調(diào)試。

server {
        error_log    /var/logs/nginx/example.com.error.log;
        rewrite_log on;
}

rewrite_log on;開啟后，它將發(fā)送所有的 rewrite 相關(guān)的日志信息到 error_log 文件中，使用 [notice] 級(jí)別。隨后就可以在error_log 查看rewrite信息了。

使用location記錄指定URL的日志

server {
        error_log    /var/logs/nginx/example.com.error.log;
        location /static/ { 
        error_log /var/logs/nginx/static-error.log debug; 
    }         
}

配置以上配置后，/static/ 相關(guān)的日志會(huì)被單獨(dú)記錄在static-error.log文件中。

nginx日志共三個(gè)參數(shù)
access_log: 定義日志的路徑及格式。
log_format: 定義日志的模板。
open_log_file_cache: 定義日志文件緩存。

proxy_set_header X-Forwarded-For ：如果后端Web服務(wù)器上的程序需要獲取用戶IP，從該Header頭獲取。proxy_set_header X-Forwarded-For $remote_addr;

常用例子

main格式

log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"'
                       '$upstream_addr $upstream_response_time $request_time ';
access_log  logs/access.log  main;

json格式

log_format logstash_json '{"@timestamp":"$time_iso8601",'
       '"host": "$server_addr",'
       '"client": "$remote_addr",'
       '"size": $body_bytes_sent,'
       '"responsetime": $request_time,'
       '"domain": "$host",'
       '"url":"$request_uri",'
       '"referer": "$http_referer",'
       '"agent": "$http_user_agent",'
       '"status":"$status",'
       '"x_forwarded_for":"$http_x_forwarded_for"}';

解釋：
$uri請(qǐng)求中的當(dāng)前URI(不帶請(qǐng)求參數(shù)，參數(shù)位于$args)，不同于瀏覽器傳遞的$request_uri的值，它可以通過內(nèi)部重定向，或者使用index指令進(jìn)行修改。不包括協(xié)議和主機(jī)名，例如/foo/bar.html。
$request_uri這個(gè)變量等于包含一些客戶端請(qǐng)求參數(shù)的原始URI，它無法修改，請(qǐng)查看$uri更改或重寫URI。
也就是說：$request_uri是原始請(qǐng)求URL，$uri則是經(jīng)過nginx處理請(qǐng)求后剔除參數(shù)的URL,所以會(huì)將漢字表現(xiàn)為union。
坑點(diǎn)：
使用$uri可以在nginx對(duì)URL進(jìn)行更改或重寫，但是用于日志輸出可以使用$request_uri代替，如無特殊業(yè)務(wù)需求，完全可以替換。

壓縮格式

日志中增加了壓縮的信息。

http {
    log_format compression '$remote_addr - $remote_user [$time_local] '
                           '"$request" $status $body_bytes_sent '
                           '"$http_referer" "$http_user_agent" "$gzip_ratio"';

    server {
        gzip on;
        access_log /spool/logs/nginx-access.log compression;
        ...
    }
}

upstream格式

增加upstream消耗的時(shí)間。

http {
    log_format upstream_time '$remote_addr - $remote_user [$time_local] '
                             '"$request" $status $body_bytes_sent '
                             '"$http_referer" "$http_user_agent"'
                             'rt=$request_time uct="$upstream_connect_time" uht="$upstream_header_time" urt="$upstream_response_time"';

    server {
        access_log /spool/logs/nginx-access.log upstream_time;
        ...
    }
}

參考文檔

統(tǒng)計(jì)status 出現(xiàn)的次數(shù)

awk '{print $9}' access.log | sort | uniq -c | sort -rn

36461 200 
483 500
87 404
9 400
3 302
1 499
1 403
1 301

顯示返回302狀態(tài)碼的URL。

awk '($9 ~ /302/)' access.log | awk '{print $7}' | sort | uniq -c | sort -rn

1 /wp-login.php
1 /wp-admin/plugins.php?action=activate&plugin=ewww-image-optimizer%2Fewww-image-optimizer.php&_wpnonce=cc4a379131
1 /wp-admin/

鏈接：https://www.cnblogs.com/biglittleant/p/8979856.html