1. 程式人生 > >Apache優化——日誌管理

Apache優化——日誌管理

Apache優化——日誌管理

11.22 訪問日誌不記錄靜態文件

編輯虛擬主機配置文件“httpd-vhosts.conf”:

[root@centos-01linux ~]# vim /usr/local/apache2.4/conf/extra/httpd-vhosts.conf
……
<VirtualHost :80>
DocumentRoot "/data/wwwroot/111.com"
ServerName 111.com
ServerAlias www.example.com
<IfModule mod_rewrite.c>
RewriteEngine on
RewriteCond %{HTTP_HOST} !^111.com$

RewriteRule ^/(.)$ http://111.com/$1 [R=301,L]
</IfModule>
ErrorLog "logs/111.com-error_log"
SetEnvIf Request_URI "..gif$" img
SetEnvIf Request_URI ".
.jpg$" img
SetEnvIf Request_URI "..png$" img
SetEnvIf Request_URI ".
.bmp$" img
SetEnvIf Request_URI "..swf$" img
SetEnvIf Request_URI ".
.js$" img
SetEnvIf Request_URI ".*.css$" img
#以上為定義變量:將所有關於圖片的請求定義為變量img
CustomLog "logs/111.com-access_log" combined env=!img
#“env=!img”表示非img變量。本行命令的含義是:不記錄關於變量img的請求日誌。
</VirtualHost>
說明: 將所有訪問圖片的請求定義為變量img,在訪問記錄(日誌)中將其排除即可。重新加載後使用curl訪問img變量中所指定格式的文件內容時將不會產生訪問記錄。

擴展:

apache日誌記錄客戶端請求的域名

正常情況下,根本就沒有必要記錄這一項,畢竟咱們大都根據虛擬主機來設置相應的訪問日誌,但也有個別的情況,比如 ServerName *.abc.com這樣泛解析的形式,所以有必要記錄一下用戶請求的域名到底是哪個。 而apache的LogFormat 中正好有一項值滿足了這個需求。即 %V 這裏是大寫的V ,小寫的v 記錄的是咱們在虛擬主機中設置的ServerName ,這個的確是沒有必要記錄的。

apache只記錄指定URI的日誌

需求: 把類似請求 www.aaa.com/aaa/... 這樣的請求才記錄日誌。

方法: 在httpd.conf 或者 相關的虛擬主機配置文件中添加:

SetEnvIf RequestURI "^/aaa/.*" aaa-request
CustomLog "|/usr/local/apache/bin/rotatelogs -l /usr/local/apache/logs/aaa-access
%Y%m%d.log 86400" combined env=aaa-request
原理和不記錄圖片等靜態訪問的日誌( http://www.lishiming.net/thread-561-1-1.html )是一樣的。

apache日誌中記錄代理IP以及真實客戶端IP

默認情況下log日誌格式為:

LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined
,其中%h 是記錄訪問者的IP,如果在web的前端有一層代理,那麽這個%h其實就是代理機器的IP,這不是我們想要的。我們需要的是記錄客戶端的真實IP,“%{X-FORWARDED-FOR}i ”該字段會記錄客戶端真實IP,所以log日誌的格式應改為:

LogFormat "%h %{X-FORWARDED-FOR}i %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined
11.23 訪問日誌切割

配置

編輯虛擬主機配置文件:

[root@centos-01linux ~]# vim /usr/local/apache2.4/conf/extra/httpd-vhosts.conf
……
<VirtualHost :80>
DocumentRoot "/data/wwwroot/111.com"
ServerName 111.com
ServerAlias www.example.com
<IfModule mod_rewrite.c>
RewriteEngine on
RewriteCond %{HTTP_HOST} !^111.com$
RewriteRule ^/(.
)$ http://111.com/$1 [R=301,L]
</IfModule>
ErrorLog "logs/111.com-error_log"
SetEnvIf Request_URI "..gif$" img
SetEnvIf Request_URI ".
.jpg$" img
SetEnvIf Request_URI "..png$" img
SetEnvIf Request_URI ".
.bmp$" img
SetEnvIf Request_URI "..swf$" img
SetEnvIf Request_URI ".
.js$" img
SetEnvIf RequestURI ".*.css$" img
CustomLog "|/usr/local/apache2.4/bin/rotatelogs -l logs/111.com-access
%Y%m%d.log 86400" combined env=!img
#使用rotatelogs工具,以系統時間為基準,每天切割一次日誌,並且日誌名字格式為“111.com-access_%Y%m%d.log”。

#每小時切割一次日誌,語法: 
#CustomLog "|/usr/local/apache2.4/bin/rotatelogs logs/access_%Y%m%d%H.log 3600" combined

說明: rotatelogs是Apache切割日誌的工具;-l表示使用系統(CST=Chinese time)時間,如果加-l選項,將以默認的(UTC)時間為準;日誌文件名“%Y%m%d”表示年月日;時間間隔設定為一天(1day=24h=1440min=86400s)。

檢測

重載配置文件:
[root@centos-01linux 111.com]# /usr/local/apache2.4/bin/apachectl -t
Syntax OK
[root@centos-01linux 111.com]# /usr/local/apache2.4/bin/apachectl graceful
訪問、檢測日誌:
[root@centos-01linux ~]# curl -x192.168.8.131:80 111.com/http.jpg -I

[root@centos-01linux 111.com]# ls /usr/local/apache2.4/logs/
111.com-access_20170801.log 111.com-error_log abc.com-error_log error_log
111.com-access_log abc.com-access_log access_log httpd.pid
說明: 配合計劃任務使用,定期清理日誌文件,避免日誌文件累計導致磁盤空間不足。

擴展:

rotatelogs命令

語法: rotatelogs [ -l ] logfile [ rotationtime [ offset ]] rotatelogs [ filesizeM ] logfile

選項: -l:使用本地時間代替GMT時間作為時間基準。註意:在一個改變GMT偏移量(比如夏令時)的環境中使用-l會導致不可預料的結果。所以一定要加上-l 否則出現的日誌時間和實際時間是相差8小時的。 rotationtime:日誌文件滾動的以秒為單位的間隔時間。 offset:相對於UTC的時差的分鐘數。如果省略,則假定為”0″並使用UTC時間。比如,要指定UTC時差為”-5小時”的地區的當地時間,則此參數應為”-300″。 filesizeM:指定以filesizeM文件大小滾動,而不是按照時間或時差滾動。

日誌切割方法2:

使用cronolog命令:

一:每一天建立一個新日誌
CustomLog "|bin/cronolog logs/access_%Y%m%d.log" combined

二:每小時建立一個新日誌
CustomLog "|bin/cronolog logs/access_%Y%m%d%h.log" combined
11.24 靜態元素過期時間

當瀏覽器訪問網站時會把靜態文件(如圖片文件、css、js文件等)緩存到本地電腦,這樣下次訪問的時候就不用去遠程下載了,可以自定義清除該部分緩存的時間,即設定靜態元素過期時間。該設置可用於優化網站,特別是公司內網。

配置

編輯虛擬主機配置文件:

[root@centos-01linux ~]# vim /usr/local/apache2.4/conf/extra/httpd-vhosts.conf
……
<VirtualHost :80>
DocumentRoot "/data/wwwroot/111.com"
ServerName 111.com
ServerAlias www.example.com
<IfModule mod_rewrite.c>
RewriteEngine on
RewriteCond %{HTTP_HOST} !^111.com$
RewriteRule ^/(.
)$ http://111.com/$1 [R=301,L]
</IfModule>

<IfModule mod_expires.c>
ExpiresActive on
#打開該功能的開關
ExpiresByType image/gif "access plus 1 days"
ExpiresByType image/jpeg "access plus 24 hours"
ExpiresByType image/png "access plus 24 hours"
ExpiresByType text/css "now plus 2 hour"
ExpiresByType application/x-javascript "now plus 2 hours"
ExpiresByType application/javascript "now plus 2 hours"
ExpiresByType application/x-shockwave-flash "now plus 2 hours"
ExpiresDefault "now plus 0 min"
#以上是定義不同類型的文件緩存的時間
</IfModule>
ErrorLog "logs/111.com-error_log"
SetEnvIf Request_URI "..gif$" img
SetEnvIf Request_URI ".
.jpg$" img
SetEnvIf Request_URI "..png$" img
SetEnvIf Request_URI ".
.bmp$" img
SetEnvIf Request_URI "..swf$" img
SetEnvIf Request_URI ".
.js$" img
SetEnvIf RequestURI ".*.css$" img
CustomLog "|usr/local/apache2.4/bin/rotatelogs -l logs/111.com-access
%Y%m%d.log 86400" combined env=!img
#使用rotatelogs工具,以系統時間為基準,每天切割一次日誌,並且日誌名字格式為“111.com-access_%Y%m%d.log”。
說明: 在配置文件添加mod_expires.c模塊內容,其余不變。

檢測

檢測語法錯誤:
[root@centos-01linux 111.com]# /usr/local/apache2.4/bin/apachectl -t
Syntax OK

檢測Apache配置文件是否開啟expire模塊:
[root@centos-01linux 111.com]# /usr/local/apache2.4/bin/apachectl -M |grep expires
說明: 在此未檢測到expires模塊,所以需要編輯Apache配置文件,加載expires模塊。

配置Apache,加載expires模塊

編輯Apache配置文件:

[root@centos-01linux 111.com]# vim /usr/local/apache2.4/conf/httpd.conf

LoadModule expires_module modules/mod_expires.so

加載配置文件:
[root@centos-01linux 111.com]# /usr/local/apache2.4/bin/apachectl -t
Syntax OK
[root@centos-01linux 111.com]# /usr/local/apache2.4/bin/apachectl graceful

檢查模塊是否開啟:
[root@centos-01linux 111.com]# /usr/local/apache2.4/bin/apachectl -M |grep expires
expires_module (shared)

說明: 輸入“/”查找expires模塊,並開啟加載該模塊的命令行(去掉#即可)。

再次檢測

[root@centos-01linux 111.com]# curl -x192.168.8.131:80 111.com/baidu.png -I
HTTP/1.1 200 OK
Date: Tue, 01 Aug 2017 10:17:36 GMT
Server: Apache/2.4.27 (Unix) PHP/5.6.30
Last-Modified: Tue, 01 Aug 2017 10:13:45 GMT
ETag: "e7a-555ae670b0840"
Accept-Ranges: bytes
Content-Length: 3706
Cache-Control: max-age=86400
Expires: Wed, 02 Aug 2017 10:17:36 GMT
Content-Type: image/png
說明: 當前時間“Date: Tue, 01 Aug 2017 10:17:36 GMT”,緩存時長“Cache-Control: max-age=86400s”,失效時間“Expires: Wed, 02 Aug 2017 10:17:36 GMT”,即png格式圖片緩存時長為1天。

Apache優化——日誌管理