「AWStats」の設定
トップ Solaris FreeBSD Gentoo CentOS Fedora Windows Tips 自宅サーバの動作確認 サイト内検索(Namazu) サイト内検索(HE)

「Apache」のログ解析には「Webalizer」がありますが、「AWStats」の方がより詳細な結果を出力してくれます。
ただ、「Perl」で動作しますので、「Webalizer」より動作が重いです。
また、「Apache」のログ形式がcombinedである必要があります。

「AWStats」のインストール

ここではyumを用いてインストールすることにしますが、dagの設定をしていないとインストール出来ません。
dagの設定方法につきましてはこちらを参照して下さい。

[root@CentOS ~]# yum -y install awstats <= 「AWStats」のインストール
ログファイルの文字化け対策

ログファイルの検索サイトからの文字列が文字化けするのを防ぐため、文字コードを変換します。
ここでは、nayuta氏が公開されている conv_weblog_to_utf8.pl を利用させて頂きました。
スクリプトの保存先は
/var/www/awstats
としました。
また、スクリプトのperlのパスが
/usr/local/bin/perl
になっていますが、CentOSのデフォルトでは
/usr/bin/perl
にperlがあります。
その為、スクリプトの先頭でパスを変更するか、/usr/local/bin/perlにリンクをはる必要があります。
ここでは、リンクを貼るようにしました。

[root@CentOS ~]# ln -s /usr/bin/perl /usr/local/bin/perl
 <= スクリプト用のリンクの作成
[root@CentOS ~]# chmod 755 /var/www/awstats/conv_weblog_to_utf8.pl
 <= ダウンロードしたファイルに実行権限を付与

[root@CentOS ~]# /var/www/awstats/conv_weblog_to_utf8.pl \
< /var/log/httpd/access_log > /var/log/httpd/jaccess_log
 <= ログファイルの文字コードを変換
「AWStats」の設定

「AWStats」の設定

[root@CentOS ~]# cp /etc/awstats/awstats.model.conf /etc/awstats/awstats.apache.conf
 <= サンプル設定ファイルのコピー
[root@CentOS ~]# vi /etc/awstats/awstats.apache.conf <= 設定ファイルの編集
LogFile="/var/log/httpd/access_log"
↓
LogFile="/var/log/httpd/jaccess_log" <= 文字コードを変換したログファイルを指定

SiteDomain="localhost.localdomain"
↓
SiteDomain="crimson-snow.net" <= ドメインを指定

DNSLookup=2
↓
DNSLookup=1 <= DNSの逆引きを行う

AllowToUpdateStatsFromBrowser=0
↓
AllowToUpdateStatsFromBrowser=1 <= 更新ボタンを設置する

AllowFullYearView=2
↓
AllowFullYearView=3 <= 年間統計情報を出力出来るように許可する

Lang="auto"
↓
Lang="jp" <= 統計情報を日本語にする

日本の検索エンジンの追加

「CentOS5.0」では検索エンジンに「Ask.jp」がデフォルトで含まれていますので、その部分は記述しないようにします。

[root@CentOS ~]# vi /var/www/awstats/lib/search_engines.pm <= 設定ファイルの編集
@SearchEnginesSearchIDOrder_list1=(
以下を追加
'66\.249\.(89\.99|93\.104)',
'66\.102\.(7\.104|9\.104|11\.104)',
'64\.233\.(161\.104|179\.104|167\.104|183\.104|187\.104)',
'72\.14\.(203|207|209|221|235|253)\.104',
'209\.85\.(173|175)\.104',
'216\.239\.(39\.104|41\.104|51\.104|57\.104|59\.104)',
'search\.biglobe\.ne\.jp',
'goo\.ne\.jp',
'nifty\.com',
'search\.msn\.co\.jp',
'search\.odn\.ne\.jp',
'naver\.co\.jp',
'fresheye\.com',
'tocc\.co\.jp',
'infoseek\.co\.jp',
'cache\.yahoofs\.jp',
'ask\.jp', <= 「CentOS5.0」では必要なし
'search\.livedoor\.com',
'www\.ceek\.jp',
ここまで

%SearchEnginesHashID = (
以下を追加
'66\.249\.(89\.99|93\.104)','google',
'66\.102\.(7\.104|9\.104|11\.104)','google',
'64\.233\.(161\.104|179\.104|167\.104|183\.104|187\.104)','google',
'72\.14\.(203|207|209|221|235|253)\.104','google',
'209\.85\.(173|175)\.104','google',
'216\.239\.(39\.104|41\.104|51\.104|57\.104|59\.104)','google',
'search\.biglobe\.ne\.jp','biglobe',
'goo\.ne\.jp','goo',
'nifty\.com','nifty',
'search\.msn\.co\.jp','msn',
'search\.odn\.ne\.jp','odn',
'naver\.co\.jp','naver',
'fresheye\.com','fresheye',
'tocc\.co\.jp','tocc',
'infoseek\.co\.jp','infoseek',
'cache\.yahoofs\.jp','yahoocache',
'ask\.jp','askjp', <= 「CentOS5.0」では必要なし
'search\.livedoor\.com','livedoor',
'www\.ceek\.jp','ceek',
ここまで

%SearchEnginesKnownUrl=(
以下を追加
'biglobe','q=',
'goo','MT=',
'nifty','Text=',
'msn','(q|MT)=', <= 「'msn','q=',」の部分を変更
'odn','Querystring=',
'naver','query=',
'fresheye','kw=',
'tocc','QRY=',
'yahoocache','w=',
'askjp','q=', <= 「CentOS5.0」では必要なし
'livedoor','q=',
'ceek','q=',
ここまで

%SearchEnginesHashLib=(
以下を追加
'biglobe','Biglobe',
'goo','Goo',
'nifty','Nifty',
'odn','ODN',
'naver','Naver',
'fresheye','Fresheye',
'tocc','TOCC/Search',
'yahoocache','Yahoo (Cache)',
'askjp','Ask Jeeves Japan', <= 「CentOS5.0」では必要なし
'livedoor','Livedoor',
'ceek','CEEK.JP',
ここまで

修正した内容が正しいかの確認をします。

[root@CentOS ~]# perl -c /var/www/awstats/lib/search_engines.pm
/var/www/awstats/lib/search_engines.pm syntax OK

ブラウザの追加

日本独自のブラウザである「Sleipnir」と「Lunascape」を追加します。

[root@CentOS ~]# vi /var/www/awstats/lib/browsers.pm <= 設定ファイルの編集
@BrowsersSearchIDOrder = (
以下を追加
'sleipnir',
'lunascape',
ここまで

%BrowsersHashIDLib = (
以下を追加
'sleipnir','Sleipnir',
'lunascape','Lunascape',
ここまで

%BrowsersHashIcon = (
以下を追加
'sleipnir','sleipnir',
'lunascape','lunascape',
ここまで

上記の設定の「%BrowsersHashIcon」で指定したアイコンを
/var/www/awstats/icon/browser
に用意します。
なお、アイコンの形式は「png」にします。
次に、「awstats.pl」を修正します。

[root@CentOS ~]# vi /var/www/awstats/awstats.pl <= 設定ファイルの編集
my $regnotie=qr/webtv|omniweb|opera/i;
↓
my $regnotie=qr/webtv|omniweb|opera|sleipnir|lunascape/i; <= 「Sleipnir」と「Lunascape」の追加

修正した内容が正しいかの確認をします。

[root@CentOS ~]# perl -c /var/www/awstats/lib/browsers.pm <= 「browsers.pm」ファイルの確認
/var/www/awstats/lib/browsers.pm syntax OK

[root@CentOS ~]# perl -c /var/www/awstats/awstats.pl <= 「awstats.pl」ファイルの確認
/var/www/awstats/awstats.pl syntax OK

ロボットの追加

日本のロボットを追加します。

[root@CentOS ~]# vi /var/www/awstats/lib/robots.pm <= 設定ファイルの編集
@RobotsSearchIDOrder_list1 = (
以下を追加
'hatena',
'naver',
'bookmark',
ここまで

%RobotsHashIDLib   = (
以下を追加
'hatena','Hatena Bookmark',
'naver','NaverBot',
'bookmark','Bookmark Renewal Check Agent',
ここまで

修正した内容が正しいかの確認をします。

[root@CentOS ~]# perl -c /var/www/awstats/lib/robots.pm
/var/www/awstats/lib/robots.pm syntax OK

出力結果の表示の修正

出力結果の表示で年月の表示がおかしい部分がありますので、修正します。

[root@CentOS ~]# vi /var/www/awstats/awstats.pl <= plファイルの修正
else { print "$Message[5] $MonthNumLib{$MonthRequired} $YearRequired"; }
↓
else { print "$YearRequired"."$Message[6]".$MonthNumLib{$MonthRequired}; } <= 変更

print ($MonthRequired eq 'all'?"$Message[6] $YearRequired":"$Message[5] ".$MonthNumLib{$MonthRequired}." $YearRequired");
↓
print ($MonthRequired eq 'all'?"$YearRequired $Message[6]":$YearRequired."$Message[6] ".$MonthNumLib{$MonthRequired});
 <= 変更

権限等の変更

「AWStats」の設定で AllowToUpdateStatsFromBrowser を 1 にしましたが、 これは、出力結果に更新ボタンを設置し、ブラウザから最新のログの情報に更新します。
ただ、Apacheのユーザ権限で更新しますので、パーミッションエラーが起きます。
そこで、必要なディレクトリの権限等を変更します。
この作業は AllowToUpdateStatsFromBrowser を 0 のままに設定していれば必要ありません。
ただし、当サイトでは文字コードを変換したログファイルを用いている為、 更新ボタンを押しても最新のログファイルを参照してはくれません。

[root@CentOS ~]# chmod 755 /var/log/httpd <= ログファイルがapacheから見れるように変更
[root@CentOS ~]# chown apache /var/www/awstats <= 分析結果等の格納先のオーナをapacheに変更
アクセス許可の設定
[root@CentOS ~]# vi /etc/httpd/conf.d/awstats.conf <= 設定ファイルの編集
LAN内からのみアクセスする場合
Allow from 192.168 <= 追加（クライアントのIPアドレス）

外部からもアクセスする場合
Allow from All <= 追加（すべてのアクセスを許可）
Allow from 127.0.0.1
↓
#Allow from 127.0.0.1 <= コメントアウト

「Apache」を再起動し、設定を反映させます。

[root@CentOS ~]# /etc/rc.d/init.d/httpd restart
「AWStats」の実行
[root@CentOS ~]# /var/www/awstats/awstats.pl -config=apache -update

http://サーバのIPアドレス/awstats/awstats.pl?config=apache
でアクセスできれば問題ありません。

出力結果のHTML化

上記のままの設定で問題ありませんが、アクセスするたびにCGIスクリプトが実行されますので、 表示が遅く、サーバにも負荷がかかります。
そこで、出力結果をHTML化します。

[root@CentOS ~]# awstats_buildstaticpages.pl \
-awstatsprog=/var/www/awstats/awstats.pl \
-config=apache -update -lang=jp \
-dir=/var/www/awstats

「Apache」の設定

「Apache」の設定を変更し、HTMLファイルをスクリプトとして処理させないようにします。
また、デフォルトのインデックスファイルを index.html に変更します。

[root@CentOS ~]# vi /etc/httpd/conf.d/awstats.conf <= 設定ファイルの編集
DirectoryIndex awstats.pl
↓
DirectoryIndex index.html <= 変更

AddHandler php-script .php <= 追加（phpの設定）
AddHandler image/gif .gif <= 追加（gifはイメージファイルとして処理）
AddHandler image/jpeg .jpeg .jpg <= 追加（jpeg jpgはイメージファイルとして処理）
AddHandler image/png .png <= 追加（pngはイメージファイルとして処理）
AddHandler text/html .html .htm <= 追加（html htmはhtmlとして処理）

「Apache」を再起動し、設定を反映させます。

[root@CentOS ~]# /etc/rc.d/init.d/httpd restart

http://サーバのIPアドレス/awstats/awstats.apache.html
でアクセスできれば問題ありません。

HTML化の自動実行

出力結果のHTML化を行うスクリプトを作成し、cronに登録して自動的に実行するようにします。
また、デフォルトで /etc/cron.hourly/00awstats というスクリプトファイルが作成され、 cronにより1時間毎に実行されてしまいますので、削除します。
トップページもindex.htmlとなるようにします。

[root@CentOS ~]# rm -f /etc/cron.hourly/00awstats <= スクリプトファイルの削除

[root@CentOS ~]# vi awstats.sh <= スクリプトファイルの新規作成
#!/bin/sh

MV='/bin/mv'
AWSTATS='/var/www/awstats/awstats.pl'
BUILDSTATIC='/usr/bin/awstats_buildstaticpages.pl'
CONV='/var/www/awstats/conv_weblog_to_utf8.pl'
DATADIR='/var/www/awstats'

$CONV < /var/log/httpd/access_log > /var/log/httpd/jaccess_log
$AWSTATS -config=apache -update > /dev/null
$BUILDSTATIC -awstatsprog=$AWSTATS \
-config=apache -update -lang=jp \
-dir=$DATADIR > /dev/null
$MV $DATADIR/awstats.apache.html $DATADIR/index.html


[root@CentOS ~]# chmod 755 awstats.sh <= スクリプトファイルに実行権限を付加
[root@CentOS ~]# crontab -e <= cronの編集
00 00 * * * /root/awstats.sh <= 追加

ログローテーションに合わせた実行

ログローテーションのタイミングでも上記で作成したスクリプトを実行するようにします。
また、ログ解析は access_log のみ行う為、その他のログローテーション時には実行しないようにします。

[root@CentOS ~]# vi /etc/logrotate.d/httpd <= 設定ファイルの編集
access_log のみスクリプトを実行するように以下を追加
/var/log/httpd/access_log {
    missingok
    notifempty
    prerotate
        /root/awstats.sh
    endscript
    postrotate
        /bin/kill -HUP `cat /var/run/httpd.pid 2>/dev/null` 2> /dev/null || true
    endscript
}
ここまで

/var/log/httpd/*log {
↓
/var/log/httpd/error_log /var/log/httpd/spam_log /var/log/httpd/worm_log { <= 変更
    missingok
    notifempty
    sharedscripts
    postrotate
        /bin/kill -HUP `cat /var/run/httpd.pid 2>/dev/null` 2> /dev/null || true
    endscript
}
▲ページのトップへ