タグ

関連タグで絞り込む (1)

タグの絞り込みを解除

awsとfluentdに関するaki77のブックマーク (2)

  • AWS News Blog

    New – Amazon EC2 Hpc7a Instances Powered by 4th Gen AMD EPYC Processors Optimized for High Performance Computing In January 2022, we launched Amazon EC2 Hpc6a instances for customers to efficiently run their compute-bound high performance computing (HPC) workloads on AWS with up to 65 percent better price performance over comparable x86-based compute-optimized instances. As their jobs grow more co

  • EMRってなんじゃ?(ログ、ゆりかごから墓場まで)

    AWS Advent Calendar 2012 に参加させてもらいました。21日担当です。 AWSでWEBサイトをホストするときのログのライフサイクルについて、まとめてみました。 WEBサーバーの一般的なログの扱いは以下のような感じだと思います。 各インスタンスのアクセスログを1箇所に集める 複数のログファイルを1ファイルにまとめてソートする 集計をする 古いログのバックアップをとり、削除する これをAWSで行なってみると例えば以下のようになります。 fluentdを使って各インスタンスのログを1つのバケットAに送る EMRで1つにまとめてソート。別のバケットBに保存 EMRで集計もして、別のバケットBに保存 バケットAの期限が過ぎたものをGlacierに送る 図にすると以下のようなイメージです。 1.各インスタンスのアクセスログを1箇所に集める これはfluentdでtail→s3で行

    EMRってなんじゃ?(ログ、ゆりかごから墓場まで)
  • 1