日本免费全黄少妇一区二区三区-高清无码一区二区三区四区-欧美中文字幕日韩在线观看-国产福利诱惑在线网站-国产中文字幕一区在线-亚洲欧美精品日韩一区-久久国产精品国产精品国产-国产精久久久久久一区二区三区-欧美亚洲国产精品久久久久

Web服務(wù)器日志統(tǒng)計(jì)分析完全解決方案( 四 )


[root@mail root]# tar xvfz cronolog-1.6.2.tar.gz
[root@mail root]# cd cronolog-1.6.2
[root@mail cronolog-1.6.2]# ./configure
[root@mail cronolog-1.6.2]# make
[root@mail cronolog-1.6.2]# make check
[root@mail cronolog-1.6.2]# make install
這就完成了cronolog的配置和安裝,默認(rèn)情況下cronolog是安裝在/usr/local/sbin下 。
修改apache日志配置命令如下所示:
CustomLog "|/usr/local/sbin/cronolog /www/logs/secfocus/%w/access_log" combined
這里%w表示按照日期星期幾在不同的目錄下保存日志,這種方式會(huì)保存一周的日志 。為了進(jìn)行日志分析,需要每天將該日志文件拷貝(或移動(dòng),如果不希望保存一周的日志)到一個(gè)固定的位置以方便日志分析統(tǒng)計(jì)文件進(jìn)行處理,實(shí)用crontab –e,如下添加定時(shí)任務(wù):
5 0 * * * /bin/mv /www/logs/secfocus/`date -v-1d%w`/access_log /www/logs/secfocus/access_log_yesterday
這樣再使用日志統(tǒng)計(jì)分析程序的對(duì)文件access_log_yesterday進(jìn)行處理 。
對(duì)于使用負(fù)載均衡技術(shù)的大型站點(diǎn),就存在多個(gè)服務(wù)器的訪(fǎng)問(wèn)日志的合并處理問(wèn)題.對(duì)于這種情況,各個(gè)服務(wù)器定義或移動(dòng)日志文件時(shí)就不能使用access_log_yesterday了,就應(yīng)該帶上服務(wù)器編號(hào)了,例如服務(wù)器IP地址等信息以區(qū)分 。然后在各個(gè)服務(wù)器上運(yùn)行網(wǎng)站鏡像和備份服務(wù)rsyncd(參考文章 用rsync實(shí)現(xiàn)網(wǎng)站鏡像和備份,ttp://www.linuxaid.com.cn/engineer/ideal/article/rsync.htm),然后將每個(gè)服務(wù)器每天的安裝配置文件通過(guò)rsync下載到專(zhuān)門(mén)進(jìn)行訪(fǎng)問(wèn)統(tǒng)計(jì)分析的服務(wù)器上進(jìn)行合并 。
合并多個(gè)服務(wù)器的日志文件,例如:log1 log2 log3并輸出到log_all中的方法是:
sort -m -t " " -k 4 -o log_all log1 log2 log3
-m: 使用 merge優(yōu)化算法,-k 4表示根據(jù)時(shí)間進(jìn)行排序,-o表示將排序結(jié)果存放到指定的文件中 。
五、日志統(tǒng)計(jì)分析程序webalizer的安裝和配置
webalizer是一個(gè)高效的、免費(fèi)的web服務(wù)器日志分析程序 。其分析結(jié)果是HTML文件格式,從而可以很方便的通過(guò)web服務(wù)器進(jìn)行瀏覽 。Internet上的很多站點(diǎn)都使用webalizer進(jìn)行web服務(wù)器日志分析 。Webalizer具有以下一些特性:
是用C寫(xiě)的程序,所以其具有很高的運(yùn)行效率 。在主頻為200Mhz的機(jī)器上,webalizer每秒鐘可以分析10000條記錄,所以分析一個(gè)40M大小的日志文件只需要15秒 。
webalizer支持標(biāo)準(zhǔn)的一般日志文件格式(Common Logfile Format);除此之外,也支持幾種組合日志格式(Combined Logfile Format)的變種,從而可以統(tǒng)計(jì)客戶(hù)情況以及客戶(hù)操作系統(tǒng)類(lèi)型 。并且現(xiàn)在webalizer已經(jīng)可以支持wu-ftpd xferlog日志格式以及squid日志文件格式了 。
支持命令行配置以及配置文件 。
可以支持多種語(yǔ)言,也可以自己進(jìn)行本地化工作 。
支持多種平臺(tái),比如UNIX、linux、NT, OS/2 和 MacOS等 。
上圖是webalizer生成的訪(fǎng)問(wèn)統(tǒng)計(jì)分析報(bào)表第一頁(yè)的內(nèi)容,這里包含每個(gè)月的平均訪(fǎng)問(wèn)量的表格和條形圖統(tǒng)計(jì)分析情況 。點(diǎn)擊每個(gè)月分,可以得到這個(gè)月每天的詳細(xì)統(tǒng)計(jì)信息 。
5.1 安裝
在安裝以前首先需要確保系統(tǒng)已經(jīng)安裝有g(shù)d庫(kù),可以使用:
[root@mail root]# rpm -qa|grep gd
gd-devel-1.8.4-4
gdbm-devel-1.8.0-14
gdbm-1.8.0-14
sysklogd-1.4.1-8
gd-1.8.4-4
來(lái)確認(rèn)系統(tǒng)已經(jīng)安裝有g(shù)d-deve和gd兩個(gè)rpm包 。
安裝webalizer有兩種方式,一種是下載源代碼來(lái)安裝,一種是直接使用rpm包來(lái)安裝 。
使用rpm包方式安裝非常簡(jiǎn)單,從rpmfind.net找到webalizer包,下載以后:
rpm –ivh webalizer-2.01_10-1.i386.rpm
即可實(shí)現(xiàn)安裝 。
對(duì)于源代碼方式首先需要從http://www.mrunix.net/webalizer/下載,然后安裝,首先解開(kāi)源代碼包:
tar xvzf webalizer-2.01-10-src.tgz

推薦閱讀