1. 程式人生 > >tomcat訪問(access)日誌配置和記錄Post請求引數

tomcat訪問(access)日誌配置和記錄Post請求引數

一、配置與說明

tomcat訪問日誌格式配置,在config/server.xml裡Host標籤下加上

1

2

3

<Valve className="org.apache.catalina.valves.AccessLogValve" directory="logs"

        prefix="localhost_access_log." suffix=".txt"

        

pattern="%h %l %u %t "%r" [%{postdata}r] %s %{Referer}i %{User-Agent}i %T %b" />

我們在日誌檔案中將看到如下文字:

10.217.14.16 - - [21/Oct/2016:15:48:54 +0800] "POST /updates/related_notice_num.json HTTP/1.0" [channel=App Store&gid=92391918-2173-4A66-8B31-B2FB3F8FB3DF&os=2&plat=2&sver=10.000000&token=MzM1OTc0MjQ1MkB3ZWliby55bXguY29tfHdlaWJvfDQ5ZGFmMjk0YjQ5YWQxMTZiZjBmYWM4ZDdhYzg3ZWQ0&ua=&ver=4.2.1] 200 - AllApp/4.2.1 (iPhone; iOS 10.0.2; Scale/3.00) 0.004 91

 引數說明:

 

className        官方文件上說了:This MUST be set to org.apache.catalina.valves.AccessLogValve to use the default access log valve。
directory 日誌檔案存放的目錄。通常設定為tomcat下已有的那個logs檔案。
prefix 日誌檔案的名稱字首。
suffix 日誌檔案的名稱字尾。
pattern 最主要的引數。下面會細講。
resolveHosts 如果是true,tomcat會將這個伺服器IP地址通過DNS轉換為主機名;如果是false,就直接寫伺服器IP地址啦。預設false。
rotatable  預設為true,tomcat生成的檔名為prefix(字首)+.+時間(一般是按天算)+.+suffix(字尾),如:localhost_access_log.2007-09-22.txt。設定為false的話,tomcat會忽略時間,不會生成新檔案,檔名就是:localhost_access_log.txt。長此以往,這個日誌檔案會超級大
condition 這個引數不太實用,可設定任何值,比如設定成condition="tkq",那麼只有當ServletRequest.getAttribute("tkq")為空的時候,該條日誌才會被記錄下來。

fileDateFormat                                                                                 
顧名思義,就是時間格式嘛。但這個時間格式是針對日誌檔名起作用的。咱們生成的日誌檔案全名:localhost_access_log.2016-09-22.txt,這裡面的2016-09-22就是這麼來的。如果想讓tomcat每小時生成一個日誌檔案,也很簡單,將這個值設定為:fileDateFormat="yyyy-MM-dd.HH",當然也可以按分鐘生成什麼的,自己改改吧^_^

 

下面著重講下pattern。它的引數比較多。可以設定成common,combined兩種格式。

  1. common的值:%h %l %u %t %r %s %b
  2. combined的值:%h %l %u %t %r %s %b %{Referer}i %{User-Agent}i        (至於combined的值的最後兩個為什麼會這樣,我也不太清楚)

?

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

%a  這是記錄訪問者的IP,在日誌裡是127.0.0.1

%A  這是記錄本地伺服器的IP,在日誌裡是192.168.254.108

%b  傳送資訊的位元組數,不包括http頭,如果位元組數為0的話,顯示為-

%B  傳送資訊的位元組數,不包括http頭。

%h  伺服器的名稱。如果resolveHosts為false的話,這裡就是IP地址了,例如我的日誌裡是10.217.14.16

%H  訪問者的協議,這裡是HTTP/1.0

%l  官方解釋:Remote logical username from identd (可能這樣翻譯:記錄瀏覽者進行身份驗證時提供的名字)(always returns '-')

%m  訪問的方式,是GET還是POST

%p  本地接收訪問的埠 

%q  比如你訪問的是aaa.jsp?bbb=ccc,那麼這裡就顯示?bbb=ccc,就是querystring的意思

%r  First line of the request (method and request URI) 請求的方法和URL

%s  http的響應狀態碼 

%S  使用者的session ID,這個session ID大家可以另外查一下詳細的解釋,反正每次都會生成不同的session ID

%t  請求時間

%u  得到了驗證的訪問者,否則就是"-"

%U  訪問的URL地址,我這裡是/rightmainima/leftbott4.swf

%v  伺服器名稱,可能就是你url裡面寫的那個吧,我這裡是localhost

%D  Time taken to process the request,in millis,請求消耗的時間,以毫秒記

%T  Time taken to process the request,in seconds,請求消耗的時間,以秒記

附:參考官方文件: http://tomcat.apache.org/tomcat-5.5-doc/config/valve.html

二、配置列印POST引數

另外%r引數能打印出請求的url和get引數。如果url指定訪問方式是post,post的引數是打印不出來的。當需要列印post引數,該怎麼辦?

大家注意到我開篇舉例Valve配置裡的%{postdata}r。沒錯,這個combined格式的patterrn可以實現。但是隻在valve裡配置這個東東還不夠。因為postdata使我們自定義的引數名。需要在request中設定這個值。下面附上設定postdata到request中的程式碼。

?

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

package com.xiaoxiliu 

import java.io.IOException;

import java.util.Enumeration; 

import javax.servlet.Filter;

import javax.servlet.FilterChain;

import javax.servlet.FilterConfig;

import javax.servlet.ServletException;

import javax.servlet.ServletRequest;

import javax.servlet.ServletResponse; 

import org.slf4j.Logger;

import org.slf4j.LoggerFactory; 

public final class PostDataDumperFilter implements Filter { 

  Logger logger = LoggerFactory.getLogger(getClass()); 

  private FilterConfig filterConfig = null

  public void destroy() {

    this.filterConfig = null;

  }

  

  public void doFilter(ServletRequest request, ServletResponse response, FilterChain chain)

      throws IOException, ServletException {

    if (filterConfig == null)

      return

    Enumeration<String> names = request.getParameterNames();

    StringBuilder output = new StringBuilder();

    while (names.hasMoreElements()) {

      String name = (String) names.nextElement();

      output.append(name).append("=");

      String values[] = request.getParameterValues(name);

      for (int i = 0; i < values.length; i++) {

        if (i > 0) {

          output.append("' ");

        }

  

        output.append(values[i]);

      }

      if (names.hasMoreElements())

        output.append("&");

    }

    request.setAttribute("postdata", output);

    logger.debug("postdata: " + output);

    chain.doFilter(request, response);

  }

  

  public void init(FilterConfig filterConfig) throws ServletException {

    this.filterConfig = filterConfig;

  }

}

在web.xml中新增配置該filter:

?

1

2

3

4

5

6

7

8

<filter>

    <filter-name>post-data-dumper-filter</filter-name>

    <filter-class>com.xiaoxiliu.PostDataDumperFilter</filter-class>

  </filter>

  <filter-mapping>

    <filter-name>post-data-dumper-filter</filter-name>

    <url-pattern>/*</url-pattern>

  </filter-mapping>

三、查詢訪問最耗時的介面

這就要用到萬能的awk了 我們的日誌倒數第二列顯示的訪問時間。cat logs/localhost_access_log.2016-10-25.txt | awk '{print $(NF-1)" "$0}' | sort -n -r| awk '{$1="";print $0}'  按照倒數第二列由大到小顯示介面以及訪問時間。這樣我們就能找出那些藉口耗時較大,然後對其進行優化,提高使用者體驗。