Four places where you can put LLM monitoring
To prevent potentially misaligned LLM agents from taking actions with catastrophic consequences, you can try to monitor LLM actions - that is, try to detect dangerous or malicious actions, and do something about it when you do (like blocking the action, starting an investigation, …).1 But where in your infrastructure should your LLM monitor be implemented, and what team in your organization should
夜ぐっすり眠るための監視分類 - NRIネットコムBlog
本記事は AWSアワード受賞者祭り 6日目の記事です。 ✨🏆 5日目 ▶▶ 本記事 ▶▶ 7日目 🏆✨ こんにちは、玉邑です。 年齢を重ねるにつれて、睡眠時間が翌日のパフォーマンスに大きく影響することを実感するようになりました。よく眠ることの大切さを、改めてしみじみと感じています。今回は、そんな貴重な睡眠時間をしっかり確保するための工夫についてお話しします。 ITシステムの運用に携わっている方であれば、夜間や休日のオンコール*1対応を経験されたことがあるのではないでしょうか。 私自身も、15年以上前にシステム運用を担当していた頃は、連日鳴り止まないオペレーターからの電話に疲弊していました。 当時はシングル構成のサーバーが多く、可用性を高める仕組みの成熟度もまだ低かったように思います。 現在のIT技術では、可用性を高めるための仕組みが非常に洗練されています。 たとえば、AWSのマルチAZ
New Relic CLI を使ってみる | New Relic Documentation
この機械翻訳は、参考として提供されています。英語版と翻訳版に矛盾がある場合は、英語版が優先されます。詳細については、このページを参照してください。 端末から快適に New Relic プラットフォームにアクセスします。New Relic CLI を使用して、エンティティ タグの管理、ワークロードの定義、デプロイ マーカーの記録などを行うことができます。つまり、CLI を使用して、DevOps ワークフローの一般的なタスクを自動化できます。このガイドでは、インストールと構成から基本的な使用方法まで、New Relic CLI の要点について説明します。 あなたが始める前にこのガイドでは、次のものが必要です。 New Relicユーザー キー。New Relic アカウント内のインストルメント化されたアプリケーション。 New Relic CLI をインストールする以下で説明するように、お使い
NRQLアラートを柔軟に制御！特定日除外や時間帯別しきい値調整のテクニック
特定の日や特定の曜日のみアラート判定から除外したい場合があります。そういった場合、1つの手段としてMutingルールが利用できます。ただし、例えば第2金曜日といった指定はMutingルールではできません。またMuteしたいわけではなく、しきい値を少し緩めたいなどもあります。そういった場合にアノマリーを使って自動的にしきい値を調整してくれる機能もあります。自動ではなく自身で調整したい場合、NRQLアラートコンディションに記載するクエリーを工夫することで対応していただける方法をご紹介します。 例1）第2及び第3週目金曜日（日本時間）は集計対象外にする。こちらは、具体的にはtimestampの値をみてその日付が第2あるいは第3週金曜日のデータは除外するという方法になります。 まず、曜日の取得にはweekdayOf()という関数が利用できます。weekdayOf(timestamp)とするとそのt
Monitoring - Anthropic
Learn how to enable and configure OpenTelemetry for Claude Code. Claude Code supports OpenTelemetry (OTel) metrics and events for monitoring and observability. All metrics are time series data exported via OpenTelemetry’s standard metrics protocol, and events are exported via OpenTelemetry’s logs/events protocol. It is the user’s responsibility to ensure their metrics and logs backends are properl
Best Practices
Topics AIOps アラート アナリティクス・分析 AWS Azure ブラウザー監視 CI/CD クラウド CodeStream オープンソース ツール統合 Containers カルチャー 顧客体験 ダッシュボード Datadog デベロッパーリレーションズ DevOps モバイル Django Docker Dynatrace Error Tracking Explorer Five Minutes With Flutter Go Incident Management インフルエンサー インストゥルメンテーション Java Javascript Kafka Lambda Model Performance Monitoring 外形監視 Security Monitoring MySQL Network Monitoring NodeJS オブザーバビリティ OpenTele
Grafana - Wikipedia
Grafana（グラファナ）は、分析およびインタラクティブな視覚化を可能にする、マルチプラットフォームで動作するオープンソースのWebアプリケーションである。サポートされているデータソースに接続することで、Webブラウザ上でチャート、グラフ、アラートの機能を提供する。追加機能を備えたライセンスを必要とするGrafana Enterpriseバージョンは、セルフホストインストールまたはGrafana Labsクラウドサービスのアカウントで利用できる[4]。Grafanaは、プラグインシステムを介して機能を拡張することができる。エンドユーザーは、インタラクティブなクエリビルダーを使用して複雑な監視ダッシュボードを作成できる[5]。Grafanaはフロントエンドとバックエンドに分かれており、それぞれTypeScriptとGoで書かれている[6]。 視覚化ツールとして、Grafanaはモニタリング
Recommended alarms - Amazon CloudWatch
The following sections list the metrics that we recommend that you set best practice alarms for. For each metric, the dimensions, alarm intent, recommended threshold, threshold justification, and the period length and number of datapoints is also displayed. Some metrics might appear twice in the list. This happens when different alarms are recommended for different combinations of dimensions of th
BigQueryのデータ転送の結果を知りたい | DevelopersIO
アマゾンのS3に溜めたデータをBigQueryで利用できるようにデータ転送を使っています。 ちゃんとデータが転送されたかどうかを知りたいという要望が出てきた時のため、データ転送サービスに用意されている通知オプションで通知を受け取る方法を試していきたいと思います。 参考: BigQuery Data Transfer Service の実行通知 データ転送にはメール通知とPub/Sub通知の2つが用意されており、どちらも有効にできます。 メール通知: 転送実行の失敗時に送信される、人が読んで理解できる通知 Pub/Sub通知: 転送実行の正常完了時または失敗時に送信される、機械で読み取り可能な通知 とドキュメントに定義されています。 メール通知は失敗時だけなので、Pub/Sub通知を使って人間が理解できる内容にして通知する方法を考えます。 ※ Pub/Subとは やってみる 前提 Pub/S
Using CloudWatch anomaly detection - Amazon CloudWatch
When you enable anomaly detection for a metric, CloudWatch applies statistical and machine learning algorithms. These algorithms continuously analyze metrics of systems and applications, determine normal baselines, and surface anomalies with minimal user intervention. The algorithms generate an anomaly detection model. The model generates a range of expected values that represent normal metric beh
AWS Glue でのログ記録とモニタリング - AWS Glue
ETL (抽出、変換、ロード) ジョブの実行を自動化できます。AWS Glue は、モニタリングできるクローラとジョブのメトリクスを提供します。必要なメタデータを使用して AWS Glue Data Catalog を設定すると、AWS Glue は環境のヘルスに関する統計を提供します。クローラとジョブの呼び出しを、cron に基づく時間ベースのスケジュールで自動化することができます。イベントベースのトリガーが発生したときにジョブをトリガーすることもできます。 AWS Glue は、AWS Glue で ユーザー、ロール、または AWS のサービスによって実行されたアクションを記録するサービスである AWS CloudTrail と統合されています。証跡を作成する場合は、Amazon Simple Storage Service (Amazon S3) バケット、Amazon CloudW
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
CloudWatch Database Insights - Amazon CloudWatch
Home | Highspot
File integrity monitoring - Wikipedia)
PRISM (監視プログラム) - Wikipedia
実践セキュリティ監視基盤構築
老舗ネットワーク監視ツール「TCP Monitor Plus」がv3に ～実に16年ぶりのメジャー更新【2025年1月9日追記】／各ツールがIPv6対応
What's New at AWS - Cloud Innovation & News
セキュリティ監視入門
information security continuous monitoring (ISCM) - Glossary | CSRC