AutoScallingのライフサイクルフックを使用してスケールイン時にEC2インスタンス内のログを退避させる | DevelopersIO
はじめに こんにちは。大阪オフィスの林です。 EC2 AutoScalling環境下でEC2インスタンスがターミネートする際のログ退避についてライフサイクルフックを使用したアーキテクチャーを検討したのでまとめておきたいと思います。 今回検討したアーキテクチャーはザックリ下図のイメージです。 よくあるログ管理（退避）のアーキテクチャとして、CloudWatchAgentを使用しCloudWatchLogsにログを転送し、Kinesisを挟んでS3に転送するといった方法もありますが、CloudWatchLogs自体の料金がネックとなり採用を見送るケースもあったりします。かと言ってOS上で定期的な間隔でログ転送バッチを回したりするのも良いのですが、その定期的な間隔とEC2インスタンスのターミネートのタイミング次第では直近のログが欠陥してしまうことも十分考えられます。今回のアーキテクチャはその折衷
【CLI無し】CloudWatch Logs上のログデータをKinesis Data Firehoseを用いてリアルタイムでS3に2次保存する｜ 開発者ブログ ｜ 株式会社アイソルート
ホーム> 開発者ブログ> 【CLI無し】CloudWatch Logs上のログデータをKinesis Data Firehos... 【CLI無し】CloudWatch Logs上のログデータをKinesis Data Firehoseを用いてリアルタイムでS3に2次保存する 今回はログデータをCloudWatch LogsだけでなくS3に2次保存する方法を紹介します。 Kinesis Data Firehoseを使うことでリアルタイムに収集することができます。 目次 はじめに 前提条件 S3バケットを作成 Kinesis Data Firehoseを作成 IAMロールを作成 ログデータを作成 S3に保存されているか確認 まとめ はじめに こんにちは。 クラウドソリューショングループのyoshikawa.kです。 この記事は アイソルート Advent Calendar 2021 2日目の
サーバーのシステムログをクラウドに収集する仕組み
[！] この記事は公開されてから1年以上経過しています。情報が古い可能性がありますので、ご注意ください。 サーバーやネットワーク機器が出力するシステムログには、様々な情報が記録されています。一般的な設定だと、ローカルディスクに書き出されて、容量等の都合で古いものから消えていきます。そこで、ログに記録された情報を長いスパンで扱えるように、ログをクラウドに集約する仕組み（ログ管理システム）を構築しました。 概要 主な要件と重視したポイント ログ管理システムを構築するにあたって、以下の点を重視しました。 Linuxサーバーのログだけでなく、Windows Serverのイベントログやネットワーク機器のログも保管したい。 当面の収集対象機器は100台規模だが、将来的にはクラウド上の仮想サーバーの利用拡大が想定され、拡張しやすくしたい。 システムログには機微な情報が含まれている可能性もあるため、イン
【AWS】Amazon CloudWatch Logs でログ収集をやってみた｜コラム｜クラウドソリューション｜サービス｜法人のお客さま｜NTT東日本
2020.06.23 ｜ Writer：サマタ 【AWS】Amazon CloudWatch Logs でログ収集をやってみた クラウドに関する情報満載のNTT東日本メールマガジンはこちらからご登録ください。 1.はじめに 初めまして、クラウド導入・運用サービスにて構築担当をしているサマタと申します。このようなコラムを記載するのは初めてで至らない点もあるかと思いますが、どうぞよろしくお願いいたします。 今回のコラムでは、AWSの運用サービスでも主要なAmazon CloudWatch(以下、CloudWatch)機能のひとつである、Amazon CloudWatch Logs(以下、CloudWatch Logs)についてご紹介したいと思います。 オンプレミス環境と同様に、AWS環境にインスタンスを構築した際も、サーバやアプリケーションのログ収集を行いたいという要望は多いのではないでしょう
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
