Apache 服務(wù)器Log分析應(yīng)用實例
2024-08-27 18:28:31
供稿：網(wǎng)友
apache 服務(wù)器log分析應(yīng)用實例
rhinux 發(fā)表于: 2004-11-28 22:11
互聯(lián)網(wǎng)的飛速發(fā)展，無論是傳統(tǒng)企業(yè)的網(wǎng)站，還是互聯(lián)網(wǎng)企業(yè)，為了了解自己的客戶來源，點擊率等資料，對網(wǎng)站日志的分析尤為重要，以下就本人所做的日志分析系統(tǒng)與大家分享，希望能對大家有所幫助。
歡迎大家復(fù)制，但請大家保留本文的完整，謝謝！！
一，所用軟件及工具
1,apache服務(wù)器 官方網(wǎng)址：http://www.apache.org
2,awstats 日志分析軟件 官方網(wǎng)址：http://awstats.sourceforge.net/
3,cronolog 日志截取軟件 官方網(wǎng)址：http://www.cronolog.org
二，環(huán)境構(gòu)架
1，redhat as 3
2，apache
./configure –prefix=/usr/local/apache2/ --enable-so
make
make install
3, awstats
直接tar到 /usr/local/awstats
4,cronolog
./configure –prefix=/usr/local/cronolog
make
make install
三， 配置
1， apache
a,讓apache中的某個虛擬主機產(chǎn)生日志：
全局環(huán)境變量設(shè)置：
代碼:
logformat "%h %l %u %t /"%r/" %>s %b /"%{referer}i/" /"%{user-agent}i/"" combined
setenvif request_uri /.gif$ gif-image
setenvif request_uri /.gif$ gif-image
setenvif request_uri /.jpg$ gif-image
setenvif request_uri /.jpg$ gif-image
setenvif request_uri /.png$ gif-image
setenvif request_uri /.swf$ gif-image
setenvif request_uri /.swf$ gif-image
setenvif request_uri /.css$ gif-image
setenvif request_uri /.css$ gif-image
setenvif request_uri /.js$ gif-image
setenvif request_uri /.js$ gif-image
setenvif request_uri /.ico$ gif-image
產(chǎn)生日志但不包括 圖片。
虛擬主機日志設(shè)置
代碼:
<virtualhost 12.34.56.78:80>
serveradmin [email protected]
documentroot /db/htdocs/www
servername www.abc.net
customlog "|/usr/local/cronolog/sbin/cronolog /db/logs/www.%y-%m-%d.log" combined env=!gif-image
#用cronolog截取存放在/db/logs/下的按日期產(chǎn)生的apache日志文件
</virtualhost>
注：日志文件是針對每一個虛擬主機產(chǎn)生的所以可以配置一臺服務(wù)器上多個虛擬主機的日志分析
b,別名設(shè)置
代碼:
#
# directives to allow use of awstats as a cgi
#
alias /awstatsclasses "/usr/local/awstats/wwwroot/classes/"
alias /awstatscss "/usr/local/awstats/wwwroot/css/"
alias /awstatsicons "/usr/local/awstats/wwwroot/icon/"
scriptalias /awstats/ "/usr/local/awstats/wwwroot/cgi-bin/"
#
# this is to permit url access to scripts/files in awstats directory.
#
<directory "/usr/local/awstats/wwwroot">
options none
allowoverride none
order allow,deny
allow from all
</directory>
該配置在運行awstats/tools/awstats_configure.pl 后會自動產(chǎn)生所以不用手動添加。
c,awstats需要cgi的支持如果沒有添加cgi可以現(xiàn)在添加
代碼:
./apxs -c -i /usr/local/src/httpd-2.0.50/modules/generators/mod_cgi.c
再在httpd.conf 中添加
代碼:
loadmodule cgi_module modules/mod_cgi.so
d為了保護(hù)日志統(tǒng)計信息需要對某些目錄進(jìn)行認(rèn)證設(shè)置,需要認(rèn)證模塊的支持
代碼:
./apxs -c -i /usr/local/src/httpd-2.0.50/..../mod_auth.c
再在httpd.conf 中添加
代碼:
loadmodule auth_module modules/mod_auth.so
配置需要認(rèn)證的目錄：
代碼:
<directory "/db/htdocs/www/awstat/">
authtype basic
authname "restricted files"
authuserfile /usr/local/apache2/passwd/passwords
require user loguser
</directory>
其中在 /usr/local/apache2/passwd/下產(chǎn)生passwords 的密碼文件
運行如下代碼產(chǎn)生用戶名為loguser用戶及其密碼
代碼:
/usr/local/apache2/bin/htpasswd -c /usr/local/apache2/passwd/passwords loguser
注意：先要在 /usr/local/apache2/下建passwd目錄
2,awstats
運行 /usr/local/awstats/tools/awstats_configure.pl
主要設(shè)置的是需要輸入做統(tǒng)計的主機名的配置文件名如：www.abc.net
接著修改 剛才配置是產(chǎn)生的awstats配置文件 默認(rèn)位置在：
/etc/awstats/awstats.www.abc.net.con 主要做指定log位置
代碼:
logfile="/db/logs/www.%yyyy-4-%mm-2-%dd-2.log"
創(chuàng)建目錄：mkdir /var/lib/awstats/
執(zhí)行：
代碼:
/usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update -config=www.abc.net
更新，update 后可以在瀏覽器中輸入 http://www.abc.net/awstats/awstats.pl 進(jìn)行訪問了。
3,cronolog (基本不用什么修改)
4，crontab的修改
在 crontab中添加如下 命令保證15分鐘更新一次，也可以根據(jù)你自己的需要修改更新的間隔
代碼:
*/15 * * * * /usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update -config=www.abc.net
四，安全性考慮
1， 以上的設(shè)置由于要cgi支持，也增加了安全隱患可以用awstats 自帶的awstats_buildstaticpages.pl來 生成靜態(tài)頁面 可以添加到crontab中
代碼:
*/15 * * * * /usr/local/awstats/tools/awstats_buildstaticpages.pl -update -config=www.abc.net -lang=cn -dir=/db/htdocs/www/awstat/ -awstatsprog=/usr/local/awstats/wwwroot/cgi-bin/awstats.pl
這樣沒15分鐘在/db/htdocs/www/awstat/ 下生成各種靜態(tài)頁面
2，保護(hù)/db/htdocs/www/awstat/禁止未授權(quán)用戶訪問
在httpd.conf中添加
代碼:
<directory "/db/htdocs/www/awstat/">
authtype basic
authname "restricted files"
authuserfile /usr/local/apache2/passwd/passwords
require user loguser
</directory>
如果www.abc.net 虛擬主機 主目錄為/db/htdocs/www/ 則在瀏覽器中輸入http://www.abc.net/awstat/awstats.www.abc.net.html 就可以通過認(rèn)真訪問靜態(tài)頁面
3，如果用靜態(tài)頁面就不要忘了注釋掉
loadmodule cgi_module modules/mod_cgi.so
五，獻(xiàn)給我最愛的飛飛。
六，由于本人是初學(xué)者，本文略顯粗糙，如有任何指點和問題歡迎和我聯(lián)系，大家相互交流提高 ：[email protected]
歡迎大家復(fù)制，但請大家保留本文的完整，謝謝！！
