cloudpackブログ - 勉強会資料『AWStatsでS3&CloudFrontのアクセス解析』を公開しました
11月5日（土）に開催されたJapan AWS User Group (JAWS-UG) – Osaka勉強会 第4回で、 CTOの鈴木（@suz_lab）が登壇し、LTを行いました。 今回のLTでは、AWStatsの紹介からS3やCloudFrontのアクセス解析を行うための設定方法等を紹介しました。 AWStatsは、Webページのアクセスログ解析やFTP、メールサーバのログ解析を行うことができ、 解析結果をHTMLファイルで出力することも可能です。 また、出力するログのフォーマットも設定ファイルを調整することで柔軟に対応することができます。 使用したドキュメントは、AWStatsでS3&CloudFrontのアクセス解析よりご確認ください。
cloudpackブログ - AWStatsでS3のログを解析
以前、AWStatsでCloudFrontのログを解析の記事でCloudFrontのログをAWStatsで解析してみましたが、 今回は、S3のログをAWStatsで解析してみます。 S3のアクセスログのフォーマットはServer Access Log Formatの記事で説明されている通りで 具体的には、下記のようになります。 323b798c3d8329a972f387aa85470ab7fd4f8fcc6a038055d847a0ca91770090 www.suz-lab.com [20/Oct/2011:00:38:09 +0000] 000.000.000.000 – 3001D4D544D44477 WEBSITE.GET.OBJECT image/logo.jpg “GET /image/logo.jpg HTTP/1.1” 200 – 7366 7366 26 25 “-”
cloudpackブログ - AWStatsの結果(CloudFrontのログ)を静的なコンテンツとして出力
AWStatsでCloudFrontのログを解析するところまで紹介しましたので、今回は、解析結果を静的なコンテンツとして出力してみます。 尚、今回はMacではなくCentOS上で行ったので、準備として下記を実施しておきます。 # yum install awstats コマンドのパスがMacの場合と違うので、設定ファイル(/etc/awstats/awstats.cloudfront.conf)も下記の項目を変更しておきます。 LogFile="/usr/bin/logresolvemerge.pl /tmp/log/*.gz |" ※あとはAWStatsでCloudFrontのログを解析で紹介した設定ファイルと同じになります。 この状態で下記を実行すると、解析結果の静的なコンテンツが出力されます。 # awstats_buildstaticpages.pl > -config=cloud
cloudpackブログ - AWStatsでCloudFrontのログを解析
前回、CloudFrontのログとAWStatsを使ったログのマージ&ソート(日付)について紹介しましたが、引き続き、AWStatsでの解析を試してみたいと思います。 まずはじめに、設定ファイルを作成して、 $ su - Password: # cd /opt/local/etc/awstats/ # cp awstats.model.conf awstats.cloudfront.conf 下記のように設定項目を指定します。 LogFile="/opt/local/www/awstats/tools/logresolvemerge.pl /Users/suzuki/Temp/*.gz |" LogFormat="%time2 %cluster %bytesd %host %method %virtualname %url %code %referer %ua %query" LogSep
cloudpackブログ - CloudFrontのログとAWStatsを使ったログのマージ＆ソート(日付)
下記のように、CloudFrontはログを出力することができます。 上記のキャプチャをご覧いただくとわかりますが、CloudFrontのログが選択したS3バケットの プレフィックスで指定したディレクトリに出力されていることが確認できます。 実際のログファイル名は下記のようになっており、gzipで圧縮もされています。 {Bucket}.s3.amazonaws.com/{Optional Prefix You Choose}/{Distribution ID}.{YYYY}-{MM}-{DD}-{HH}.{Unique ID}.gz 詳しくはFile Naming and Timing of File Deliveryを参照して下さい。 そして、下記の複数あるCloudFrontログファイルを、AWStatsのツールでマージとソート(日付)をしてみました。 $ ls -1 XXXXXXXXX
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
cloudpackブログ - JAWS-UG大阪第4回勉強会LT資料(AWStatsでS3&CloudFrontのアクセス解析)
