「AWStats」の設定

「Apache」のログ解析には「Webalizer」がありますが、「AWStats」の方がより詳細な結果を出力してくれます。
ただ、「Perl」で動作しますので、「Webalizer」より動作が重いです。
また、「Apache」のログ形式がcombinedである必要があります。
なお、ここでは「AWStats」のバージョンは6.7-r2としています。
6.5-r1の場合はこちらを参照して下さい。

「AWStats」のインストール
Gentoo ~ # emerge awstats <= 「AWStats」のインストール

アクセス制限等を考慮して、/var/www/localhost/cgi-bin以下の「AWStats」関連のファイルを移動します。

Gentoo ~ # mkdir /var/www/localhost/htdocs/awstats/cgi-bin
Gentoo ~ # mv /var/www/localhost/cgi-bin/awstats.pl /var/www/localhost/htdocs/awstats/cgi-bin/
Gentoo ~ # mv /var/www/localhost/cgi-bin/awredir.pl /var/www/localhost/htdocs/awstats/cgi-bin/
Gentoo ~ # mv /var/www/localhost/cgi-bin/lang /var/www/localhost/htdocs/awstats/cgi-bin/
Gentoo ~ # mv /var/www/localhost/cgi-bin/plugins /var/www/localhost/htdocs/awstats/cgi-bin/
Gentoo ~ # mv /var/www/localhost/cgi-bin/lib /var/www/localhost/htdocs/awstats/cgi-bin/
ログファイルの文字化け対策

ログファイルの検索サイトからの文字列が文字化けするのを防ぐため、文字コードを変換します。
ここでは、nayuta氏が公開されている conv_weblog_to_utf8.pl を利用させて頂きました。
スクリプトの保存先は
/var/www/localhost/htdocs/awstats/cgi-bin
としました。

Gentoo ~ # chmod 755 /var/www/localhost/htdocs/awstats/cgi-bin/conv_weblog_to_utf8.pl
 <= ダウンロードしたファイルに実行権限を付与
Gentoo ~ # /var/www/localhost/htdocs/awstats/cgi-bin/conv_weblog_to_utf8.pl \
< /var/log/apache2/access_log > /var/log/apache2/jaccess_log
 <= ログファイルの文字コードを変換
「AWStats」の設定
Gentoo ~ # cp /etc/awstats/awstats.model.conf /etc/awstats/awstats.apache2.conf
 <= サンプル設定ファイルのコピー
Gentoo ~ # vi /etc/awstats/awstats.apache2.conf <= 設定ファイルの編集
LogFile="/var/log/awstats_log"
↓
LogFile="/var/log/apache2/jaccess_log" <= 文字コードを変換したログファイルを指定

SiteDomain="localhost"
↓
SiteDomain="crimson-snow.net" <= ドメインを指定

DNSLookup=2
↓
DNSLookup=1 <= DNSの逆引きを行う

DirData="."
↓
DirData="/var/lib/awstats"
 <= AWStatsが保持する分析結果等のファイルを格納するディレクトリを指定
  (絶対パスもしくはawstats.plからの相対パス)

DirCgi="/cgi-bin"
↓
DirCgi="/awstats/cgi-bin"
 <= awstats.plが格納されているディレクトリを指定
  (絶対URLもしくはWWWサーバのルートディレクトリからの相対URL)

DirIcons="/awstats/icon"
 <= アイコンファイルが格納されているディレクトリを指定
  (絶対URLもしくはWWWサーバのルートディレクトリからの相対URL)

AllowFullYearView=2
↓
AllowFullYearView=3 <= 年間統計情報を出力出来るように許可する

Lang="auto"
↓
Lang="jp" <= 統計情報を日本語にする

日本の検索エンジンの追加

Gentoo ~ # vi /var/www/localhost/htdocs/awstats/cgi-bin/lib/search_engines.pm <= 設定ファイルの編集
@SearchEnginesSearchIDOrder_list1=(
以下を追加
'66\.249\.(89\.99|93\.104)',
'66\.102\.(7\.104|9\.104|11\.104)',
'64\.233\.(161\.104|179\.104|167\.104|183\.104|187\.104)',
'72\.14\.(203|207|209|221|235|253)\.104',
'209\.85\.(173|175)\.104',
'216\.239\.(39\.104|41\.104|51\.104|57\.104|59\.104)',
'search\.biglobe\.ne\.jp',
'goo\.ne\.jp',
'nifty\.com',
'search\.msn\.co\.jp',
'search\.odn\.ne\.jp',
'fresheye\.com',
'infoseek\.co\.jp',
'cache\.yahoofs\.jp',
'search\.livedoor\.com',
'www\.ceek\.jp',
ここまで

%SearchEnginesHashID = (
以下を追加
'66\.249\.(89\.99|93\.104)','google',
'66\.102\.(7\.104|9\.104|11\.104)','google',
'64\.233\.(161\.104|179\.104|167\.104|183\.104|187\.104)','google',
'72\.14\.(203|207|209|221|235|253)\.104','google',
'209\.85\.(173|175)\.104','google',
'216\.239\.(39\.104|41\.104|51\.104|57\.104|59\.104)','google',
'search\.biglobe\.ne\.jp','biglobe',
'goo\.ne\.jp','goo',
'nifty\.com','nifty',
'search\.msn\.co\.jp','msn',
'search\.odn\.ne\.jp','odn',
'fresheye\.com','fresheye',
'infoseek\.co\.jp','infoseek',
'cache\.yahoofs\.jp','yahoocache',
'search\.livedoor\.com','livedoor',
'www\.ceek\.jp','ceek',
ここまで

%SearchEnginesKnownUrl=(
以下を追加
'biglobe','q=',
'goo','MT=',
'nifty','Text=',
'msn','(q|MT)=', <= 「'msn','q=',」の部分を変更
'odn','Querystring=',
'fresheye','kw=',
'yahoocache','w=',
'livedoor','q=',
'ceek','q=',
ここまで

%SearchEnginesHashLib=(
以下を追加
'biglobe','<a href="http://www.biglobe.ne.jp/" title="Search Engine Home Page [new window]" target="_blank">Biglobe</a>',
'goo','<a href="http://www.goo.ne.jp/" title="Search Engine Home Page [new window]" target="_blank">Goo</a>',
'nifty','<a href="http://www.nifty.com/" title="Search Engine Home Page [new window]" target="_blank">Nifty</a>',
'odn','<a href="http://www.odn.ne.jp/" title="Search Engine Home Page [new window]" target="_blank">ODN</a>',
'fresheye','<a href="http://www.fresheye.com/" title="Search Engine Home Page [new window]" target="_blank">Fresheye</a>',
'yahoocache','<a href="http://www.yahoo.co.jp/" title="Search Engine Home Page [new window]" target="_blank">Yahoo (Cache)</a>',
'livedoor','<a href="http://www.livedoor.com/" title="Search Engine Home Page [new window]" target="_blank">Livedoor</a>',
'ceek','<a href="http://www.ceek.jp/" title="Search Engine Home Page [new window]" target="_blank">CEEK.JP</a>',
ここまで

修正した内容が正しいかの確認をします。

Gentoo ~ # perl -c /var/www/localhost/htdocs/awstats/cgi-bin/lib/search_engines.pm
/var/www/localhost/htdocs/awstats/cgi-bin/lib/search_engines.pm syntax OK

ブラウザの追加

日本独自のブラウザである「Sleipnir」と「Lunascape」を追加します。

Gentoo ~ # vi /var/www/localhost/htdocs/awstats/cgi-bin/lib/browsers.pm <= 設定ファイルの編集
@BrowsersSearchIDOrder = (
以下を追加
'sleipnir',
'lunascape',
ここまで

%BrowsersHashIDLib = (
以下を追加
'sleipnir','Sleipnir',
'lunascape','Lunascape',
ここまで

%BrowsersHashIcon = (
以下を追加
'sleipnir','sleipnir',
'lunascape','lunascape',
ここまで

上記の設定の「%BrowsersHashIcon」で指定したアイコンを
/var/www/localhost/htdocs/awstats/icon/browser
に用意します。
なお、アイコンの形式は「png」にします。
次に、「awstats.pl」を修正します。

Gentoo ~ # vi /var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl <= 設定ファイルの編集
my $regnotie=qr/webtv|omniweb|opera/i;
↓
my $regnotie=qr/webtv|omniweb|opera|sleipnir|lunascape/i; <= 「Sleipnir」と「Lunascape」の追加

修正した内容が正しいかの確認をします。

Gentoo ~ # perl -c /var/www/localhost/htdocs/awstats/cgi-bin/lib/browsers.pm <= 「browsers.pm」ファイルの確認
/var/www/localhost/htdocs/awstats/cgi-bin/lib/browsers.pm syntax OK

Gentoo ~ # perl -c /var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl <= 「awstats.pl」ファイルの確認
/var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl syntax OK

ロボットの追加

日本のロボットを追加します。

Gentoo ~ # vi /var/www/localhost/htdocs/awstats/cgi-bin/lib/robots.pm <= 設定ファイルの編集
@RobotsSearchIDOrder_list1 = (
以下を追加
'hatena',
'bookmark',
ここまで

%RobotsHashIDLib   = (
以下を追加
'hatena','<a href="http://www.hatena.ne.jp/" title="Bot home page [new window]" target="_blank">Hatena Bookmark</a>',
'bookmark','<a href="http://www.bookmark.ne.jp/" title="Bot home page [new window]" target="_blank">Bookmark Renewal Check Agent</a>',
ここまで

修正した内容が正しいかの確認をします。

Gentoo ~ # perl -c /var/www/localhost/htdocs/awstats/cgi-bin/lib/robots.pm
/var/www/localhost/htdocs/awstats/cgi-bin/lib/robots.pm syntax OK

出力結果の表示の修正

出力結果の表示で年月の表示がおかしい部分がありますので、修正します。

Gentoo ~ # vi /var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl <= plファイルの修正
else { print "$Message[5] $MonthNumLib{$MonthRequired} $YearRequired"; }
↓
else { print "$YearRequired"."$Message[6]".$MonthNumLib{$MonthRequired}; } <= 変更

print ($MonthRequired eq 'all'?"$Message[6] $YearRequired":"$Message[5] ".$MonthNumLib{$MonthRequired}." $YearRequired");
↓
print ($MonthRequired eq 'all'?"$YearRequired $Message[6]":$YearRequired."$Message[6] ".$MonthNumLib{$MonthRequired});
 <= 変更
「Apache」の設定

「AWStats」の設置されているディレクトリでのCGIの実行を許可します。

Gentoo ~ # vi /etc/apache2/modules.d/00_autoindex.conf <= 設定ファイルの編集
以下を追加
<Directory "/var/www/localhost/htdocs/awstats/cgi-bin">
    AllowOverride None
    Options Includes ExecCGI FollowSymLinks
    Order allow,deny
    Allow from all
    AddHandler image/gif .gif
    AddHandler image/jpeg .jpeg .jpg
    AddHandler image/png .png
    AddHandler text/html .html .htm
</Directory>

「Apache」を再起動し、設定を反映させます。

Gentoo ~ # /etc/init.d/apache2 restart
「AWStats」の実行

「AWStats」の実行

Gentoo ~ # /var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl -config=apache2 -update

http://サーバのIPアドレス/awstats/cgi-bin/awstats.pl?config=apache2
でアクセスできれば問題ありません。

出力結果のHTML化

上記のままの設定で問題ありませんが、アクセスするたびにCGIスクリプトが実行されますので、 表示が遅く、サーバにも負荷がかかります。
そこで、出力結果をHTML化します。

Gentoo ~ # awstats_buildstaticpages.pl \
-awstatsprog=/var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl \
-config=apache2 -update -lang=jp \
-dir=/var/www/localhost/htdocs/awstats

http://サーバのIPアドレス/awstats/awstats.apache2.html
でアクセスできれば問題ありません。

HTML化の自動実行

出力結果のHTML化を行うスクリプトを作成し、cronに登録して自動的に実行するようにします。
また、トップページをindex.htmlとなるようにします。

Gentoo ~ # vi awstats.sh <= スクリプトファイルの新規作成
#!/bin/sh

MV='/usr/bin/mv'
AWSTATS='/var/www/localhost/htdocs/awstats/cgi-bin/awstats.pl'
BUILDSTATIC='/usr/bin/awstats_buildstaticpages.pl'
CONV='/var/www/localhost/htdocs/awstats/cgi-bin/conv_weblog_to_utf8.pl'
DATADIR='/var/www/localhost/htdocs/awstats'

$CONV < /var/log/apache2/access_log > /var/log/apache2/jaccess_log
$AWSTATS -config=apache2 -update > /dev/null
$BUILDSTATIC -awstatsprog=$AWSTATS \
-config=apache2 -update -lang=jp \
-dir=$DATADIR > /dev/null
$MV $DATADIR/awstats.apache2.html $DATADIR/index.html


Gentoo ~ # chmod 755 awstats.sh <= スクリプトファイルに実行権限を付加
Gentoo ~ # crontab -e <= cronの編集
00 00 * * * /root/awstats.sh <= 追加

ログローテーションに合わせた実行

ログローテーションのタイミングでも上記で作成したスクリプトを実行するようにします。
また、ログ解析は access_log のみ行う為、その他のログローテーション時には実行しないようにします。

Gentoo ~ # vi /etc/logrotate.d/apache2 <= 設定ファイルの編集
access_log のみスクリプトを実行するように以下を追加
/var/log/apache2/access_log {
  missingok
  notifempty
  prerotate
    /root/awstats.sh
  endscript
  postrotate
    /etc/init.d/apache2 reload > /dev/null 2>&1 || true
  endscript
}
ここまで

/var/log/apache2/*log {
↓
/var/log/apache2/error_log /var/log/apache2/spam_log /var/log/apache2/worm_log { <= 変更
  missingok
  notifempty
  sharedscripts
  postrotate
  /etc/init.d/apache2 reload > /dev/null 2>&1 || true
  endscript
}
▲ページのトップへ