Apex GoでELBのアクセスログをAWS LambdaでElasticsearchに取り込む - Qiita
すでに何人かの方が記事を書かれていますが、Go言語の情報が少ないので書いてみました。 基本的にはDevelopers.IOの藤本さんの記事を元に、Apex Goで実装してみました。 AWS Lambda Funcion作成 完成版のLambdaコードはGistを見てください。以下、要点のみ説明します。 全体の流れ ELBがアクセスログをS3に書き込むと、メタ情報がS3イベントとしてLambdaに渡され、該当のLambdaファンクションを実行します。 以下、処理詳細になります。 LambdaハンドラーがS3イベントを引数として受け取る。 S3イベントにはスライスで複数のアクセスログファイル名が格納されているのでループで処理する。 S3に接続し、アクセスログファイルのコンテンツを取得する。 取得したファイルを１行ごとループで処理する。(1行が1HTTPリクエスト) ログをJSON形式に変換する
ELB のログを Lambda の Node.js で取り込み、Elasticsearch Service の Kibana で可視化する - Qiita
手順 Identity & Access Management でロール作成 ELB のログ出力設定 Amazon Elasticsearch Service 作成 AWS Lambda 設定 Amazon Elasticsearch で確認 Kibana 表示 参考 URL http://qiita.com/toshihirock/items/e530f3cb6dcf545601c9 http://dev.classmethod.jp/cloud/aws/elb-accesslog-to-elasticsearch/ http://kenzo0107.hatenablog.com/entry/2015/10/08/113110 Identity & Access Management でロール作成 ロール名の設定 適宜ロール名を入力。 ロールタイプの選択 AWS Lambda を選択。
Lambda+Elasticsearch(Amazon Elasticsearch Service)でELBのログをサーバーレスでKibanaで可視化する - Qiita
AmazonのマネージドサービスとしてElasticsearch+Kiban4が使えるAmazon Elasticsearch Serviceが発表されました。 【AWS発表】Amazon Elasticsearch Service 以前fluentdを使ってELBのログをElasticsearchに取り込むことをやってみたのですが、その場合、fluentdを動かすサーバーが必要です。 ELBのアクセスログをfluentd(fluent-plugin-elb-access-log)+Elasticsearch+kibanaで可視化する 今であればLambdaがTokyoリージョンにあって使えるのでS3へのELBアクセスログのアップロードをイベントにして、Lambdaで処理してElasticsearchに登録することでサーバーレスで可視化ができそうだと思い、やってみたのでメモ。 Lambda
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
