| トップ | Solaris | FreeBSD | Gentoo | CentOS | Fedora | Windows | Tips | 自宅サーバの動作確認 | サイト内検索(Namazu) | サイト内検索(HE) |
「Apache」のログ解析には「Webalizer」がありますが、「AWStats」の方がより詳細な結果を出力してくれます。
ただ、「Perl」で動作しますので、「Webalizer」より動作が重いです。
また、「Apache」のログ形式がcombinedである必要があります。
なお、ここでは「AWStats」のバージョンは6.7-r2としています。
6.5-r1の場合はこちらを参照して下さい。
Gentoo ~ # emerge awstats <= 「AWStats」のインストール |
アクセス制限等を考慮して、/var/www/localhost/cgi-bin以下の「AWStats」関連のファイルを移動します。
Gentoo ~ # mkdir /var/www/localhost/htdocs/awstats/cgi-bin Gentoo ~ # mv /var/www/localhost/cgi-bin/awstats.pl /var/www/localhost/htdocs/awstats/cgi-bin/ Gentoo ~ # mv /var/www/localhost/cgi-bin/awredir.pl /var/www/localhost/htdocs/awstats/cgi-bin/ Gentoo ~ # mv /var/www/localhost/cgi-bin/lang /var/www/localhost/htdocs/awstats/cgi-bin/ Gentoo ~ # mv /var/www/localhost/cgi-bin/plugins /var/www/localhost/htdocs/awstats/cgi-bin/ Gentoo ~ # mv /var/www/localhost/cgi-bin/lib /var/www/localhost/htdocs/awstats/cgi-bin/ |
ログファイルの検索サイトからの文字列が文字化けするのを防ぐため、文字コードを変換します。
ここでは、nayuta氏が公開されている
conv_weblog_to_utf8.pl
を利用させて頂きました。
スクリプトの保存先は
/var/www/localhost/htdocs/awstats/cgi-bin
としました。
Gentoo ~ # chmod 755 /var/www/localhost/htdocs/awstats/cgi-bin/conv_weblog_to_utf8.pl <= ダウンロードしたファイルに実行権限を付与 Gentoo ~ # /var/www/localhost/htdocs/awstats/cgi-bin/conv_weblog_to_utf8.pl \ < /var/log/apache2/access_log > /var/log/apache2/jaccess_log <= ログファイルの文字コードを変換 |
Gentoo ~ # cp /etc/awstats/awstats.model.conf /etc/awstats/awstats.apache2.conf <= サンプル設定ファイルのコピー Gentoo ~ # vi /etc/awstats/awstats.apache2.conf <= 設定ファイルの編集 LogFile="/var/log/awstats_log" ↓ LogFile="/var/log/apache2/jaccess_log" <= 文字コードを変換したログファイルを指定 SiteDomain="localhost" ↓ SiteDomain="crimson-snow.net" <= ドメインを指定 DNSLookup=2 ↓ DNSLookup=1 <= DNSの逆引きを行う DirData="." ↓ DirData="/var/lib/awstats" <= AWStatsが保持する分析結果等のファイルを格納するディレクトリを指定 (絶対パスもしくはawstats.plからの相対パス) DirCgi="/cgi-bin" ↓ DirCgi="/awstats/cgi-bin" <= awstats.plが格納されているディレクトリを指定 (絶対URLもしくはWWWサーバのルートディレクトリからの相対URL) DirIcons="/awstats/icon" <= アイコンファイルが格納されているディレクトリを指定 (絶対URLもしくはWWWサーバのルートディレクトリからの相対URL) AllowFullYearView=2 ↓ AllowFullYearView=3 <= 年間統計情報を出力出来るように許可する Lang="auto" ↓ Lang="jp" <= 統計情報を日本語にする |
日本の検索エンジンの追加
Gentoo ~ # vi /var/www/localhost/htdocs/awstats/cgi-bin/lib/search_engines.pm <= 設定ファイルの編集 @SearchEnginesSearchIDOrder_list1=( 以下を追加 '66\.249\.(89\.99|93\.104)', '66\.102\.(7\.104|9\.104|11\.104)', '64\.233\.(161\.104|179\.104|167\.104|183\.104|187\.104)', '72\.14\.(203|207|209|221|235|253)\.104', '209\.85\.(173|175)\.104', '216\.239\.(39\.104|41\.104|51\.104|57\.104|59\.104)', 'search\.biglobe\.ne\.jp', 'goo\.ne\.jp', 'nifty\.com', 'search\.msn\.co\.jp', 'search\.odn\.ne\.jp', 'fresheye\.com', 'infoseek\.co\.jp', 'cache\.yahoofs\.jp', 'search\.livedoor\.com', 'www\.ceek\.jp', ここまで %SearchEnginesHashID = ( 以下を追加 '66\.249\.(89\.99|93\.104)','google', '66\.102\.(7\.104|9\.104|11\.104)','google', '64\.233\.(161\.104|179\.104|167\.104|183\.104|187\.104)','google', '72\.14\.(203|207|209|221|235|253)\.104','google', '209\.85\.(173|175)\.104','google', '216\.239\.(39\.104|41\.104|51\.104|57\.104|59\.104)','google', 'search\.biglobe\.ne\.jp','biglobe', 'goo\.ne\.jp','goo', 'nifty\.com','nifty', 'search\.msn\.co\.jp','msn', 'search\.odn\.ne\.jp','odn', 'fresheye\.com','fresheye', 'infoseek\.co\.jp','infoseek', 'cache\.yahoofs\.jp','yahoocache', 'search\.livedoor\.com','livedoor', 'www\.ceek\.jp','ceek', ここまで %SearchEnginesKnownUrl=( 以下を追加 'biglobe','q=', 'goo','MT=', 'nifty','Text=', 'msn','(q|MT)=', <= 「'msn','q=',」の部分を変更 'odn','Querystring=', 'fresheye','kw=', 'yahoocache','w=', 'livedoor','q=', 'ceek','q=', ここまで %SearchEnginesHashLib=( 以下を追加 'biglobe','<a href="http://www.biglobe.ne.jp/" title="Search Engine Home Page [new window]" target="_blank">Biglobe</a>', 'goo','<a href="http://www.goo.ne.jp/" title="Search Engine Home Page [new window]" target="_blank">Goo</a>', 'nifty','<a href="http://www.nifty.com/" title="Search Engine Home Page [new window]" target="_blank">Nifty</a>', 'odn','<a href="http://www.odn.ne.jp/" title="Search Engine Home Page [new window]" target="_blank">ODN</a>', 'fresheye','<a href="http://www.fresheye.com/" title="Search Engine Home Page [new window]" target="_blank">Fresheye</a>', 'yahoocache','<a href="http://www.yahoo.co.jp/" title="Search Engine Home Page [new window]" target="_blank">Yahoo (Cache)</a>', 'livedoor','<a href="http://www.livedoor.com/" title="Search Engine Home Page [new window]" target="_blank">Livedoor</a>', 'ceek','<a href="http://www.ceek.jp/" title="Search Engine Home Page [new window]" target="_blank">CEEK.JP</a>', ここまで |
修正した内容が正しいかの確認をします。
Gentoo ~ # perl -c /var/www/localhost/htdocs/awstats/cgi-bin/lib/search_engines.pm /var/www/localhost/htdocs/awstats/cgi-bin/lib/search_engines.pm syntax OK |
ブラウザの追加
日本独自のブラウザである「Sleipnir」と「Lunascape」を追加します。
Gentoo ~ # vi /var/www/localhost/htdocs/awstats/cgi-bin/lib/browsers.pm <= 設定ファイルの編集 @BrowsersSearchIDOrder = ( 以下を追加 'sleipnir', 'lunascape', ここまで %BrowsersHashIDLib = ( 以下を追加 'sleipnir','Sleipnir', 'lunascape','Lunascape', ここまで %BrowsersHashIcon = ( 以下を追加 'sleipnir','sleipnir', 'lunascape','lunascape', ここまで |
上記の設定の「%BrowsersHashIcon」で指定したアイコンを
/var/www/localhost/htdocs/awstats/icon/browser
に用意します。
なお、アイコンの形式は「png」にします。
次に、「awstats.pl」を修正します。
Gentoo ~ # vi /var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl <= 設定ファイルの編集 my $regnotie=qr/webtv|omniweb|opera/i; ↓ my $regnotie=qr/webtv|omniweb|opera|sleipnir|lunascape/i; <= 「Sleipnir」と「Lunascape」の追加 |
修正した内容が正しいかの確認をします。
Gentoo ~ # perl -c /var/www/localhost/htdocs/awstats/cgi-bin/lib/browsers.pm <= 「browsers.pm」ファイルの確認 /var/www/localhost/htdocs/awstats/cgi-bin/lib/browsers.pm syntax OK Gentoo ~ # perl -c /var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl <= 「awstats.pl」ファイルの確認 /var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl syntax OK |
ロボットの追加
日本のロボットを追加します。
Gentoo ~ # vi /var/www/localhost/htdocs/awstats/cgi-bin/lib/robots.pm <= 設定ファイルの編集 @RobotsSearchIDOrder_list1 = ( 以下を追加 'hatena', 'bookmark', ここまで %RobotsHashIDLib = ( 以下を追加 'hatena','<a href="http://www.hatena.ne.jp/" title="Bot home page [new window]" target="_blank">Hatena Bookmark</a>', 'bookmark','<a href="http://www.bookmark.ne.jp/" title="Bot home page [new window]" target="_blank">Bookmark Renewal Check Agent</a>', ここまで |
修正した内容が正しいかの確認をします。
Gentoo ~ # perl -c /var/www/localhost/htdocs/awstats/cgi-bin/lib/robots.pm /var/www/localhost/htdocs/awstats/cgi-bin/lib/robots.pm syntax OK |
出力結果の表示の修正
出力結果の表示で年月の表示がおかしい部分がありますので、修正します。
Gentoo ~ # vi /var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl <= plファイルの修正
else { print "$Message[5] $MonthNumLib{$MonthRequired} $YearRequired"; }
↓
else { print "$YearRequired"."$Message[6]".$MonthNumLib{$MonthRequired}; } <= 変更
print ($MonthRequired eq 'all'?"$Message[6] $YearRequired":"$Message[5] ".$MonthNumLib{$MonthRequired}." $YearRequired");
↓
print ($MonthRequired eq 'all'?"$YearRequired $Message[6]":$YearRequired."$Message[6] ".$MonthNumLib{$MonthRequired});
<= 変更
|
「AWStats」の設置されているディレクトリでのCGIの実行を許可します。
Gentoo ~ # vi /etc/apache2/modules.d/00_autoindex.conf <= 設定ファイルの編集
以下を追加
<Directory "/var/www/localhost/htdocs/awstats/cgi-bin">
AllowOverride None
Options Includes ExecCGI FollowSymLinks
Order allow,deny
Allow from all
AddHandler image/gif .gif
AddHandler image/jpeg .jpeg .jpg
AddHandler image/png .png
AddHandler text/html .html .htm
</Directory>
|
「Apache」を再起動し、設定を反映させます。
Gentoo ~ # /etc/init.d/apache2 restart |
「AWStats」の実行
Gentoo ~ # /var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl -config=apache2 -update |
http://サーバのIPアドレス/awstats/cgi-bin/awstats.pl?config=apache2
でアクセスできれば問題ありません。
上記のままの設定で問題ありませんが、アクセスするたびにCGIスクリプトが実行されますので、
表示が遅く、サーバにも負荷がかかります。
そこで、出力結果をHTML化します。
Gentoo ~ # awstats_buildstaticpages.pl \ -awstatsprog=/var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl \ -config=apache2 -update -lang=jp \ -dir=/var/www/localhost/htdocs/awstats |
http://サーバのIPアドレス/awstats/awstats.apache2.html
でアクセスできれば問題ありません。
HTML化の自動実行
出力結果のHTML化を行うスクリプトを作成し、cronに登録して自動的に実行するようにします。
また、トップページをindex.htmlとなるようにします。
Gentoo ~ # vi awstats.sh <= スクリプトファイルの新規作成 #!/bin/sh MV='/usr/bin/mv' AWSTATS='/var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl' BUILDSTATIC='/usr/bin/awstats_buildstaticpages.pl' CONV='/var/www/localhost/htdocs/awstats/cgi-bin/conv_weblog_to_utf8.pl' DATADIR='/var/www/localhost/htdocs/awstats' $CONV < /var/log/apache2/access_log > /var/log/apache2/jaccess_log $AWSTATS -config=apache2 -update > /dev/null $BUILDSTATIC -awstatsprog=$AWSTATS \ -config=apache2 -update -lang=jp \ -dir=$DATADIR > /dev/null $MV $DATADIR/awstats.apache2.html $DATADIR/index.html Gentoo ~ # chmod 755 awstats.sh <= スクリプトファイルに実行権限を付加 Gentoo ~ # crontab -e <= cronの編集 00 00 * * * /root/awstats.sh <= 追加 |
ログローテーションに合わせた実行
ログローテーションのタイミングでも上記で作成したスクリプトを実行するようにします。
また、ログ解析は access_log のみ行う為、その他のログローテーション時には実行しないようにします。
Gentoo ~ # vi /etc/logrotate.d/apache2 <= 設定ファイルの編集
access_log のみスクリプトを実行するように以下を追加
/var/log/apache2/access_log {
missingok
notifempty
prerotate
/root/awstats.sh
endscript
postrotate
/etc/init.d/apache2 reload > /dev/null 2>&1 || true
endscript
}
ここまで
/var/log/apache2/*log {
↓
/var/log/apache2/error_log /var/log/apache2/spam_log /var/log/apache2/worm_log { <= 変更
missingok
notifempty
sharedscripts
postrotate
/etc/init.d/apache2 reload > /dev/null 2>&1 || true
endscript
}
|