BigQueryのデータ転送の結果を知りたい | DevelopersIO
アマゾンのS3に溜めたデータをBigQueryで利用できるようにデータ転送を使っています。 ちゃんとデータが転送されたかどうかを知りたいという要望が出てきた時のため、データ転送サービスに用意されている通知オプションで通知を受け取る方法を試していきたいと思います。 参考: BigQuery Data Transfer Service の実行通知 データ転送にはメール通知とPub/Sub通知の2つが用意されており、どちらも有効にできます。 メール通知: 転送実行の失敗時に送信される、人が読んで理解できる通知 Pub/Sub通知: 転送実行の正常完了時または失敗時に送信される、機械で読み取り可能な通知 とドキュメントに定義されています。 メール通知は失敗時だけなので、Pub/Sub通知を使って人間が理解できる内容にして通知する方法を考えます。 ※ Pub/Subとは やってみる 前提 Pub/S
AWS WAFのアクセスログ記録でフィルタリング処理が可能になりました | DevelopersIO
AWSチームのすずきりょうです。 2021年5月のAWS WAFのアップデートで、アクセスログのフィルタリングがサポートされました。 AWS WAFルールで 「Count」、「Block」と判定されたログのみ記録する設定を試す機会がありましたので、紹介させていただきます。 AWS WAF adds support for log filtering WAFダッシュボード Web ACLs > Logging and metrics WAFのログ設定画面に「Filter Logs」が追加されました。 フィルタ設定 デフォルトは記録対象外(Drop)、「Count」、「Block」と判定されたログのみを記録する設定としました。 2021年4月よりAWS WAFでサポートされたラベルをフィルタ対象とする事も可能です。 AWS WAF がルールのカスタマイズとレポートを改善するためにラベルのサポー
[アップデート] Amazon CloudWatch Synthetics が一般利用可能になりました！ | DevelopersIO
こんにちは、中川です。 2019 年にプレビューとして発表された Amazon CloudWatch Synthetics が、とうとう GA（一般公開）されました！ Amazon CloudWatch Synthetics is now generally available CloudWatch Synthetics とは CloudWatch Synthetics は、Synthetic Monitoring（合成監視） のサービスです。 合成監視とは、フロントエンド監視の 1 つで、エンドユーザーの動作をシミュレートしてパフォーマンスデータを能動的に取得する手法になります。 Synthetic monitoring (also known as active monitoring or proactive monitoring) is a monitoring technique
![[アップデート] Amazon CloudWatch Synthetics が一般利用可能になりました！ | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/2cd56545af48138769ce47d03f22d7baac20b923/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2019%2F05%2Famazon-cloudwatch.png)
【新機能】VPC Flow LogsでVPC内のIPトラフィックを監視することができるようになりました! | DevelopersIO
制限事項 VPC FLow Logsの制限事項は EC2 Classicには使えない VPC Peeringには使えない タグ付けはできない 一度Flow Logsを作成したら変更はできない(IAMロールの変更等)。変更する場合は一度削除してから作り直す リソースレベルのアクセス許可はできない。Flow Logsを使用する際は全てのリソースに対してワイルドカードにてLogsに対して権限を付与する必要がある 記録されないログパターン VPC Flow Logsはこれらのトラフィックは記録しません。 インスタンスからAmazon DNSに対して生成されるトラフィック（独自DNSサーバーを使用する場合は記録される） WindowsインスタンスからWindowsアクティベートの為に生成されるトラフィック インスタンスmetaデータ（169.254.169.254）へのトラフィック DHCPトラフィ
Mackerel の mkr wrap コマンドを使って cron バッチジョブを監視する | DevelopersIO
こんにちわ ttaka です。 これから Mackerel を使ったプロジェクトに関わっていくことになりそうなので 積極的に Mackerel を触って行こうと思います。 まず今回は mkr コマンドを使用しての cron バッチジョブ監視設定をやってみました。 想定する読者 Mackerel のアカウントを取得している人 Mackerel で cron などのバッチジョブを監視したい人 記事を書こうと思ったきっかけ mkr コマンドを使用することで、バッチジョブなどをMackerel 経由で簡単に監視できるのが最高！！ バッチジョブなどスクリプトの実行結果を監視したいという要望は多いと思います。 一番簡単な方法としては、スクリプト内で異常時にメールを送信して検知するという方法です。 ただ、実際にやってみると メールを見逃してしまい検知が遅れてしまった ダッシュボードなどがないため障害状況
ターミナルから直感的にCloudWatch Logsを検索できるawslogsコマンドの紹介 | DevelopersIO
はじめに こんにちは、中山です。 先日AWS Summit Tokyo 2016に参加してきました。セッションを聴講している際にスピーカーの方が面白そうなツールを紹介されていました。awslogsというPython製のツールです。これはAmazon CloudWatch Logsをターミナルから直感的に検索するためのツールです。早速使用してみたのでレポートします。 検証環境 awslogsコマンドを利用するためにCloudWatch Logsの設定が必要です。検証環境構築用のコードをGitHubに上げておきました。以下のコマンドで実行可能です。 $ git clone https://github.com/knakayama/awslogs-demo.git $ cd awslogs-demo $ ssh-keygen -f site_key -N '' $ terraform apply
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
