Datadogでも長期ログ保存はできる ─ Flex Logs導入でエンジニアのログ調査工数を削減しようとしている話 - Timee Product Team Blog

はじめに 株式会社タイミーのプラットフォームエンジニアリングチームに所属している徳富(@yannKazu1)です。 突然ですが、皆さんの組織では「3ヶ月前のログを見たいんですが……」という依頼が来たとき、どう対応していますか？ タイミーではDatadogをログ基盤として利用しています。Datadogは日常的なログ検索やアラート、ダッシュボードなどに使える非常に強力なツールです。一方で、ログの保存にはそれなりのコストがかかります。そのため弊社でも、コストとのバランスを考えてログの種類ごとに14日〜長くても45日程度の保持期間を設定していました。 普段の運用ではこれで十分です。ただ問題となるのは、「保持期間を超えた過去のログを検索したい」という場面が来たとき。今回はこの課題に対してDatadogのFlex Logsを導入し、コストをほぼ変えずに長期ログ検索を実現しようとしている取り組みについて

[simplememofast]

効くのは保存階層の工夫より、３１件の調査を実測して「工数がどこに出るか」を可視化した点。６８％が集中する画面だけにFlexを効かせる選択が転用しやすい

[nguyen-oi]

Datadogは便利だけど請求書見て震えるからな。Flex Logsの使い分けでコスト抑えて長期保存は参考になる

[mkusaka]

DatadogのFlex Logsで12か月の長期検索を実現。Include Flex LogsでRehydrate不要、運用は約-3%コスト。