エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
embulkでLTSV形式のログをElasticsearchに投げる
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
embulkでLTSV形式のログをElasticsearchに投げる
この記事は OPENLOGI Advent Calendar 2017- Qiita の21日目です。 明日公開日じゃんどうしようって状況... この記事は OPENLOGI Advent Calendar 2017- Qiita の21日目です。 明日公開日じゃんどうしようって状況で書き始めてるんで丁度仕事で今触ってる事を記事にしてみようと思います。というわけで今回はEmbulkについてです。 https://github.com/embulk/embulk はじめに みなさんはログの扱いをどうしてますかね。 弊社ではログの種類によって扱いは違ったりしてるんですが一部はリレーショナルDB(以下RDB)に直接保存しているものがあります。 でもRDBは結構辛いんです。行数増えても検索辛いしインデックス貼ってない列を検索しても辛いしでとにかく検索辛いんです。 世間的な流れとしてはFluentdで収集してElasticsearchに放り込むようなソリューションですかね。 というわけでそれに習いたいんですが、Fluentdのデーモン死活監視