tomcat訪問(access)日誌配置、記錄Post請求參數

一、配置與說明

tomcat訪問日誌格式配置,在config/server.xml裏Host標籤下加上

<Valve className="org.apache.catalina.valves.AccessLogValve" directory="logs"
               prefix="localhost_access_log." suffix=".txt"
               pattern="%h %l %u %t &quot;%r&quot; [%{postdata}r] %s %{Referer}i %{User-Agent}i %T %b" />

我們在日誌文件中將看到如下文本:

10.217.14.16 - - [21/Oct/2016:15:48:54 +0800] "POST /updates/related_notice_num.json HTTP/1.0" [channel=App Store&gid=92391918-2173-4A66-8B31-B2FB3F8FB3DF&os=2&plat=2&sver=10.000000&token=MzM1OTc0MjQ1MkB3ZWliby55bXguY29tfHdlaWJvfDQ5ZGFmMjk0YjQ5YWQxMTZiZjBmYWM4ZDdhYzg3ZWQ0&ua=&ver=4.2.1] 200 - AllApp/4.2.1 (iPhone; iOS 10.0.2; Scale/3.00) 0.004 91


參數說明:

className        官方文檔上說了:This MUST be set to org.apache.catalina.valves.AccessLogValve to use the default access log valve。
directory 日誌文件存放的目錄。通常設置爲tomcat下已有的那個logs文件。
prefix 日誌文件的名稱前綴。
suffix 日誌文件的名稱後綴。
pattern 最主要的參數。下面會細講。
resolveHosts 如果是true,tomcat會將這個服務器IP地址通過DNS轉換爲主機名;如果是false,就直接寫服務器IP地址啦。默認false。
rotatable  默認爲true,tomcat生成的文件名爲prefix(前綴)+.+時間(一般是按天算)+.+suffix(後綴),如:localhost_access_log.2007-09-22.txt。設置爲false的話,tomcat會忽略時間,不會生成新文件,文件名就是:localhost_access_log.txt。長此以往,這個日誌文件會超級大
condition 這個參數不太實用,可設置任何值,比如設置成condition="tkq",那麼只有當ServletRequest.getAttribute("tkq")爲空的時候,該條日誌纔會被記錄下來。

fileDateFormat                                                                                 
顧名思義,就是時間格式嘛。但這個時間格式是針對日誌文件名起作用的。咱們生成的日誌文件全名:localhost_access_log.2016-09-22.txt,這裏面的2016-09-22就是這麼來的。如果想讓tomcat每小時生成一個日誌文件,也很簡單,將這個值設置爲:fileDateFormat="yyyy-MM-dd.HH",當然也可以按分鐘生成什麼的,自己改改吧^_^

下面着重講下pattern。它的參數比較多。可以設置成common,combined兩種格式。

common的值:%h %l %u %t %r %s %b
combined的值:%h %l %u %t %r %s %b %{Referer}i %{User-Agent}i        (至於combined的值的最後兩個爲什麼會這樣,我也不太清楚)

%a   這是記錄訪問者的IP,在日誌裏是127.0.0.1
%A   這是記錄本地服務器的IP,在日誌裏是192.168.254.108
%b   發送信息的字節數,不包括http頭,如果字節數爲0的話,顯示爲-
%B   發送信息的字節數,不包括http頭。
%h   服務器的名稱。如果resolveHosts爲false的話,這裏就是IP地址了,例如我的日誌裏是10.217.14.16
%H   訪問者的協議,這裏是HTTP/1.0
%l   官方解釋:Remote logical username from identd (可能這樣翻譯:記錄瀏覽者進行身份驗證時提供的名字)(always returns '-')
%m   訪問的方式,是GET還是POST
%p   本地接收訪問的端口 
%q   比如你訪問的是aaa.jsp?bbb=ccc,那麼這裏就顯示?bbb=ccc,就是querystring的意思
%r   First line of the request (method and request URI) 請求的方法和URL
%s   http的響應狀態碼 
%S   用戶的session ID,這個session ID大家可以另外查一下詳細的解釋,反正每次都會生成不同的session ID
%t   請求時間
%u   得到了驗證的訪問者,否則就是"-"
%U   訪問的URL地址,我這裏是/rightmainima/leftbott4.swf
%v   服務器名稱,可能就是你url裏面寫的那個吧,我這裏是localhost
%D   Time taken to process the request,in millis,請求消耗的時間,以毫秒記
%T   Time taken to process the request,in seconds,請求消耗的時間,以秒記
附:參考官方文檔: http://tomcat.apache.org/tomcat-5.5-doc/config/valve.html


二、配置打印POST參數

另外%r參數能打印出請求的url和get參數。如果url指定訪問方式是post,post的參數是打印不出來的。當需要打印post參數,該怎麼辦?

大家注意到我開篇舉例Valve配置裏的%{postdata}r。沒錯,這個combined格式的patterrn可以實現。但是隻在valve裏配置這個東東還不夠。因爲postdata使我們自定義的參數名。需要在request中設置這個值。下面附上設置postdata到request中的代碼。

package com.xiaoxiliu

import java.io.IOException;
import java.util.Enumeration;

import javax.servlet.Filter;
import javax.servlet.FilterChain;
import javax.servlet.FilterConfig;
import javax.servlet.ServletException;
import javax.servlet.ServletRequest;
import javax.servlet.ServletResponse;

import org.slf4j.Logger;
import org.slf4j.LoggerFactory;

public final class PostDataDumperFilter implements Filter {

	Logger logger = LoggerFactory.getLogger(getClass());

	private FilterConfig filterConfig = null;

	public void destroy() {
		this.filterConfig = null;
	}

	public void doFilter(ServletRequest request, ServletResponse response, FilterChain chain)
			throws IOException, ServletException {
		if (filterConfig == null)
			return;

		Enumeration<String> names = request.getParameterNames();
		StringBuilder output = new StringBuilder();
		while (names.hasMoreElements()) {
			String name = (String) names.nextElement();
			output.append(name).append("=");
			String values[] = request.getParameterValues(name);
			for (int i = 0; i < values.length; i++) {
				if (i > 0) {
					output.append("' ");
				}

				output.append(values[i]);
			}
			if (names.hasMoreElements())
				output.append("&");
		}
		request.setAttribute("postdata", output);
		logger.debug("postdata: " + output);
		chain.doFilter(request, response);
	}

	public void init(FilterConfig filterConfig) throws ServletException {
		this.filterConfig = filterConfig;
	}
}

在web.xml中添加配置該filter:

<filter>
		<filter-name>post-data-dumper-filter</filter-name>
		<filter-class>com.xiaoxiliu.PostDataDumperFilter</filter-class>
	</filter>
	<filter-mapping>
		<filter-name>post-data-dumper-filter</filter-name>
		<url-pattern>/*</url-pattern>
	</filter-mapping>

三、查詢訪問最耗時的接口

這就要用到萬能的awk了 我們的日誌倒數第二列顯示的訪問時間。cat logs/localhost_access_log.2016-10-25.txt | awk '{print $(NF-1)" "$0}' | sort -n -r| awk '{$1="";print $0}'  按照倒數第二列由大到小顯示接口以及訪問時間。這樣我們就能找出那些藉口耗時較大,然後對其進行優化,提高用戶體驗。





發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章