【導(dǎo)語】:一個格式化 Nginx 日志,可快速閱讀、查看 Nginx 日志的工具。
簡介
Rhit 可以從標(biāo)準(zhǔn)文件夾中讀取 Nginx 的日志文件(gzipped 的壓縮文件也可以),并進(jìn)行分析統(tǒng)計,在控制臺中以可視化的表格形式展示,并且不會產(chǎn)生任何多余的臨時文件或數(shù)據(jù)。
可以按照日期、響應(yīng)值、請求來源等進(jìn)行過濾匹配,并進(jìn)行分析,Rhit 具有很高的效率,每秒可以處理百萬行日志數(shù)據(jù)。
以下是在一月份的日志中查找狀態(tài)碼為 1xx、2xx 的結(jié)果:
安裝
直接下載使用編譯好的二進(jìn)制文件,但是需要確保shell能夠找到rhit二進(jìn)制文件,一個比較容易的處理方式就是把它放到/usr/local/bin目錄下,并且為它添加可執(zhí)行權(quán)限。
chmod +x rhit
從crates.io安裝,依賴Rust環(huán)境,使用以下命令安裝:
cargo install rhit
源碼安裝,依賴Rust環(huán)境,將github源碼clone之后,進(jìn)入到rhit文件夾,運行以下命令:
cargo install --path 。
顯示字段
rhit可以自動打開默認(rèn)目錄下的nginx日志文件,也可以在命令行參數(shù)中指定日志路徑:
rhit my/archived/logs
nginx常見的日志行是這樣的:
178.133.125.122 - - [21/Jan/202149:52 +0000] “HEAD /broot/download/x86_64-pc-windows-gnu/broot.exe HTTP/1.1” 200 0 “-” “Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)”
它由幾個字段組成:日期、遠(yuǎn)程IP地址、路徑、發(fā)送的字節(jié)等。rhit可以執(zhí)行對表格進(jìn)行排序的字段列表,如果未指定,默認(rèn)按照日期、狀態(tài)碼、來源和路徑來顯示,如果要制定多個字段,使用逗號進(jìn)行分割,如-f date,status;顯示所有字段,使用-f all。
基于日期。使用--field date,或者縮寫為-f date。默認(rèn)情況下,條形圖的長度基于命中數(shù)量進(jìn)行統(tǒng)計,也可以修改排序鍵以基于發(fā)送字節(jié)數(shù)進(jìn)行統(tǒng)計。
基于IP。默認(rèn)情況下不顯示遠(yuǎn)程IP,可以使用rhit -f ip進(jìn)行顯示。
基于請求方法。默認(rèn)不顯示HTTP請求方法,可以使用rhit -f method進(jìn)行顯示。
基于路徑。命令為rhit -f path
基于Referer。命令為rhit -f ref
基于狀態(tài)碼。命令為rhit -f status
篩選
Rhit提供了一些過濾器,用于篩選結(jié)果列表,展示自己想看到或者不想看到的一些數(shù)據(jù)。
按日期篩選。精確到天,日期格式是年/月/日,如篩選2021/2/15到2021/2/20的數(shù)據(jù),也可以篩選大于某個時間、小于某個時間或不包含某個時間(使用‘》’,‘《’,‘!’符號):
按遠(yuǎn)程IP篩選。參數(shù)為-i,篩選特定的IP,或者排除某個特定的IP(使用‘!’符號)。
按請求方法篩選。參數(shù)為-m,篩選特定方法,或者排除特定的方法。
按請求路徑篩選,參數(shù)為-p,可以精確匹配,也可以使用正則表達(dá)式(例如所有路徑均以“download”開頭且以“exe”:結(jié)尾,參數(shù)為 -p ‘download.*exe$’):
按Referer篩選。參數(shù)為-r,與按路徑篩選的語法一致:
按狀態(tài)碼篩選。參數(shù)為-s,篩選特定狀態(tài)碼,或者排除特定的狀態(tài)碼。
組合篩選。以上方式可以任意組合。
排序鍵
默認(rèn)情況下,所有表都按照hits進(jìn)行排序,這就是排序鍵,排序鍵的所有值都以粉紅色顯示,包括直方圖。如果對發(fā)送字節(jié)數(shù)更感興趣,可以將排序鍵修改為bytes,使用-k b進(jìn)行更改:
原文標(biāo)題:Rhit:高效可視化 Nginx 日志查看工具,每秒處理百萬行日志數(shù)據(jù)
文章出處:【微信公眾號:Linux愛好者】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
責(zé)任編輯:haq
-
數(shù)據(jù)
+關(guān)注
關(guān)注
8文章
6820瀏覽量
88747 -
nginx
+關(guān)注
關(guān)注
0文章
142瀏覽量
12154
原文標(biāo)題:Rhit:高效可視化 Nginx 日志查看工具,每秒處理百萬行日志數(shù)據(jù)
文章出處:【微信號:LinuxHub,微信公眾號:Linux愛好者】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
評論