fluentdでapacheのログに時間が出力されなくて苦労したので解決策と原理をまとめてみた | DevelopersIO
fluentdからapache2パーサを利用してS3にログを出力したら時間が記録されませんでした。その原因と対処方法を調べたらfluentdのことを色々理解できたので、その情報をまとめました。 こんにちは、臼田です。 最近fluentdを使い始めたのですが、apacheのログに時間を含めて出力できなかったので対処法と周辺情報をまとめてみます。 やりたいこと 構成としては単純にEC2のapache access_logをfluentdを利用してS3に出力する形です。 目的としてはログの永続化で、使用目的は何かあったらAmazon Athenaで分析できればいいかな、くらいです。 上記AWS環境の構築については説明を省きます。リソースの作成やIAM Roleの設定等は済んでいる前提で進みます。 fluentdのインストールについては公式ドキュメントを参照してください。(最近リンクが変わった模様
Fluentd 入門 〜運用に必要な基礎知識〜
最近業務で Fluentd を触ることが出てきて入門したんですが、最初のうちはトラブルが起きた時に何が起きているのか、どう対処したら良いのかがさっぱりわからなかったので、「Fluentd ってログの収集とかに使われるやつでしょ？」程度の知識しかなかった過去の自分に向けて「とりあえずこれぐらいは知っておけ！」と言いたい内容をまとめてみました。 トラブルが起きた時にどの処理で問題が起きているのか素早くコードを追うことができて、データの消失を最小限に抑えつつ適切に対処できるようになることを目的としています。 なお、現時点で最新版の Fluentd v0.14.21 を対象にしています。 アジェンダ Getting Started Fluentd のアーキテクチャ Processes Supervisor process Worker process Threads Input thread En
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
