FreeBSD 10.2 RELEASE - apache ログ解析ツール analog


 クラウディア

 細かな解析ができる点ですぐれてはいますが、analog は 2009年以降、日本のユーザ会の活動が停止しているようで、最新バージョンを日本語化することが困難な状況になっています。
 わたしとしては今後は webalizer か awstats を使用することをお勧めしているのですが、8.4-RELEASE の analog のページにアクセスする方がたくさんいらしているようなので記述することにします。

1. ports
2. analog.cfg の編集
3. /usr/local/www/cgi-bin/anlgform.pl の編集
4. jpuform.html の編集
5. 表示してみましょう
6. 検索文字の日本語化

1. ports


/usr/ports/www/analog/

2. analog.cfg の編集

 /usr/local/etc/analog.cfg が analog のコンフィグレーションファイルです。  以下の項目について編集します。

LOGFILE  apache のログファイル名
HOSTNAME "[www.hogehoge.ne.jp]"
LANGUAGE JAPANESE-UTF
DOMAINSFILE	/usr/local/share/analog/lang/jpudom.tab
 3、4行目は、文字コードが UTF-8 の場合の設定です。  アパッチのログファイル名は、FreeBSD のデフォルトでは、/var/log/httpd-access.log になっているはずです。/usr/local/etc/apache/httpd.conf でログファイル名を変更している場合は、それに合わせて変更します。  /etc/newsyslog.conf で Apache のログをローテーションさせている場合は、ローテーションさせた以前のログもまとめて解析したいと思うかもしれません。その場合は、LOGFILE /var/log/httpd-access.log* としてください。以前のログもまとめて解析してくれます。  HOSTNAME は、WEB サーバのホスト名を記入します。

3. /usr/local/www/cgi-bin/anlgform.pl の編集

 /usr/ports/www/analog/work/analog-6.0/anlgform.pl を CGI 実行ディレクトリにコピーし、編集して実行権限を与えます。  少々長いですが、最初から31行目くらいまでを引用します。

#!/usr/bin/perl -T
###
###              analog 6.0             http://www.analog.cx/
### This program is copyright (c) Stephen R. E. Turner 1995 - 2004 except as
### stated otherwise.
###
### This program is free software. You can redistribute it and/or modify it
### under the terms of version 2 of the GNU General Public License, which you
### should have received with it.
###
### This program is distributed in the hope that it will be useful, but
### without any warranty, expressed or implied.
### Remember: Even the most carefully-designed CGI programs can accidentally
### have serious security bugs! See docs/form.html for notes on security
### design.
###
### anlgform.pl; the cgi front end for analog

# 1) uncomment (remove everything before $analog) and edit one of the next two
#    lines to give the location (full pathname) of the analog executable.
#       Unix: $analog = '/usr/local/etc/httpd/analog-6.0/analog';
#       Windows: $analog = 'C:\program files\analog 6.0\analog.exe';
# 2) If you're on Unix, edit the first line in this file to give the location
#    of Perl (don't remove the #! though).
# 3) You also need to edit anlgform.html if you want to use the form.
# 4) Add to the forbidden commands below if you want.
 修正するのはごくわずかです。

#!/usr/bin/perl -T
 perl の場所が違うのであれば、正規の場所に書き換えます。  # 4) の行の下に、

$analog = '/usr/local/bin/analog';
 という1行を追加します。  そして

@forbidden = qw(LOGFORMAT APACHELOGFORMAT DEFAULTLOGFORMAT
								APACHEDEFAULTLOGFORMAT HEADERFILE FOOTERFILE UNCOMPRESS
								OUTFILE CACHEOUTFILE LOCALCHARTDIR ERRFILE DNS CGI
								SETTINGS PROGRESSFREQ LANGFILE DESCFILE);
 の中から APACHEDEFAULTLOGFORMAT の1語を削除します。

4. jpuform.html の編集

 UTF-8 コードで analog のレポート編集用の画面を作成する場合は jpuform.html を編集します。  元のファイルは、/usr/local/share/analog/lang/ にあります。他のコードを使用する場合は適宜、ファイル名を置き換えて考えます。日本語の場合、Shift-JIS や EUC も使えます。このファイルを自分でアクセスしたい、WEB サーバのディレクトリに配置します。外からのぞかれないように、WEB サーバの設定でアクセス権限は工夫します。  そのままでは、アクセスできないので、編集します。  編集するのは次の個所です。

<h1><!-- img src="/images/analogo.gif" alt="" -->
Analog フォーム・インタフェース</h1>

<!-- 以下を編集すること。anlgform.pl も編集する必要がある。 -->

<!-- 最初に、上記の img タグのコメントを取り、必要なら編集しなさい。 -->

<!-- 次に、サーバ内での anlgform.pl の正しい位置を反映するように編集して -->
<!-- 以下の行のコメントを削除しなさい。 -->
<!-- form action="/cgi-bin/anlgform.pl" method="POST" -->

<!-- 他の環境設定ファイルを以下で指定できる。 -->
<!-- input type=hidden name="cg" value="/analog/other.cfg" -->

<!-- 多くのシステムでは、IMAGEDIR が /cgi-bin/ 中に無いようにしたいために、 -->
<!-- フォーム上の IMAGEDIR はコマンドライン上とは異なるようにしている。 -->
<!-- input type=hidden name="IMAGEDIR" value="/images/" -->

<!-- あるユーザの設定では、ログファイルは以下のようになるでしょう。 -->
<!-- input type=hidden name="LOGFILE" value="/usr/local/apache/logs/access_log" -->

<input type=hidden name="LANGUAGE" value="JAPANESE-UTF">

<!-- これらを編集した後、以下の赤で "強調" した行を削除して下さい。 -->

<hr>
<h2>1. レポートの選択</h2>

<strong><font color=red>注意 : 以下の指示に従って環境を設定し終わるまで、
このフォームは動かないでしょう。例えば、ボタンさえ現れないかもしれません。
環境設定を終了した後、この文節を削除してください。<br>
</font></strong>
 CGI の起動を有効にします。

<!-- form action="/cgi-bin/anlgform.pl" method="POST" -->
 を

<form action="/cgi-bin/anlgform.pl" method="POST">
 と書き換えます。  不要なコメントを削除します。

<strong><font color=red>注意 : 以下の指示に従って環境を設定し終わるまで、
このフォームは動かないでしょう。例えば、ボタンさえ現れないかもしれません。
環境設定を終了した後、この文節を削除してください。<br>
</font></strong>
 を

<--
<strong><font color=red>注意 : 以下の指示に従って環境を設定し終わるまで、
このフォームは動かないでしょう。例えば、ボタンさえ現れないかもしれません。
環境設定を終了した後、この文節を削除してください。<br>
</font></strong>
-->
 で、コメントアウトします。

5. 表示してみましょう

 さあ、これで準備完了のはずです。  jpuform.html を、/usr/local/www/data に置いているならば、http://www.
仮名
.ne.jp/jpuform.html をブラウザで表示してみてください。

 おおむね、こういう表示が出てくるはずです。それで、「統計情報出力」のボタンをクリックするとアクセスログを解析した結果が出力されるはずです。

6. 検索文字の日本語化

 上記設定のままですと「リンク元URLレポート」「検索語句レポート」「検索単語レポート」の中の漢字が、%mn の形式で表示されるので、何が何やらわかりません。  それをうまく日本語に変換する perl スクリプトがあったのですが、現在のバージョンには対応していません。  ユーザ会のページにあったものを使おうとしましたが、これも現在のバージョンでは対応できません。  面倒になったので作ったものをここに置いておきます。
urldecode.pl
 urldecode.pl は、ダウンロードした時点では、urldecode.txt になっていますので、urldecode.pl と rename して、実行権を与えることを忘れないで下さい。  下記の ports が必要ですので、make、make install してください。
/usr/ports/japanese/p5-Jcode
 UTF-8 で書いてありますので、他の文字コードにするのであれば、文字コードを変え、Jcode->new($_)->utf8; の箇所を他の文字コードに変えてください。  ダウンロードしたら、適切なディレクトリ(ここでは仮に /usr/local/www/cgi-bin としています)に置いて、anlgform.pl を編集します。 (1) anlgform.pl の編集

		open (ANALOG, "|$analog +g-");  # errors here will get caught on close
 の個所を

		open (ANALOG, "|$analog +g-
|/usr/local/www/cgi-bin/urldecode.pl
"); # errors here will get caught on close
 と書き換えます。書き換えるとき下の内容は、1行で書きますので間違えないようにしてください。urldecode.pl のディレクトリは適宜変えてください。  これで、もう一度、jpuform.html から「統計情報出力」のボタンをクリックしてみてください。  間違いがなければ、「検索語句レポート」「検索単語レポート」の日本語コードが読める形で表示されているはずです。  「リンク元URLレポート」は変換しません。うまく変換できない語句もあります。わたしのところでは 1/30 の確率で文字化けします。

earthcar(アースカー)
薬屋の独り言