Sensu と Graphite による大規模インフラの監視
ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog サイトオペレーション本部の渡邉です。 サイトオペレーション本部はデータセンタ・ネットワーク・サーバー・OS・ストレージといった全社的なインフラの管理運用や調査検証などを担当しています。 今回は、2013年に全社のプライベートクラウドとして導入した OpenStack の監視基盤として、OSS の Sensu と Graphite を採用した事例についてご紹介したいと思います。 採用に至るまで サイトオペレーション本部では、もともと 2011 年から内製のプライベートクラウドを開発運用していました。 プライベートクラウドでは VM のホストとなるハイパーバイザを大量に運用する必要がありますが、その監視基盤として社内で一般的に利用され
とあるSIerの憂鬱
今自分がやろうとしていることは何なのか 今やっていないことは何なのか そんな疑問に答えてくれるのは、超高度な「組織」である「体」との比較ではないか。 脳は考えることができる。しかし肝臓のような化学処理はできない。心臓のように栄養素・酸素・温度を届けることもできない。 管理者のもたらす真の「価値」は全体の幸福のコーディネート、どこへ向かうかを示すこと(リーダーシップ)・・・ではないのかな。 環境や仕事に差がなければ、 差が出しにくければ、 違いは誰がいるかになる。 その人は他の会社にはいないのだから。 退職エントリで、「あの人とは離れたくないが、断腸の思いで決断した」みたいな言葉は読んだことがない気がする。 Work life balance ＝ WLB ワークとライフは別々ではないはず。 ワークがつまらなければライフの質も下がる。 寝ることと働くこと、これが多くの時間を占める。 ITワーク
CPU、メモリ、ディスク使用量…ひと目でわかるモニタリングツール『Glances』コマンド | 俺的備忘録 〜なんかいろいろ〜
以前、モニタリングコマンド『nmon』を紹介したが、今回は同様に便利な『Glances』というコマンドについて紹介する。 このコマンドの特徴としては、多くの情報をひと目で確認出来るということだ。 さて、それでは早速インストールをしてみよう。 以下のコマンドを実行する事で、インストールが行える。 sudo apt-get install python-pip build-essential python-dev sudo pip install Glances sudo pip install PySensors インストール完了後、以下のコマンドで『Glances』を実行する。 glances ぱっと見で多くの情報を参照出来て、かなり便利なコマンドだ。 これはいいね！！ 他には、どんな事が出来るんだろう？ヘルプの内容を見てみよう。 test@test-vm-ubuntu:~$ glance
Cacti® - The Complete RRDTool-based Graphing Solution
The page or content you requested does not appear to exist on the new Documentation Website. Please report this link to the GitHub Website to see if there is a newer link you are trying access. Link: /manual:087:3a_advanced_topics.3b_snmp_data_query_walkthrough Please report to Github and paste the above link
cactiでSNMPで取得した値を使い独自グラフを作成するメモ。 - oranie's blog
http://docs.cacti.net/manual:087:3a_advanced_topics.3b_snmp_data_query_walkthrough#snmp_data_query_walkthrough を見るのが一番確実。 とりあえず最低限のグラフを作成する場合にやらなければいけない手順をタスクレベルでメモ。 以下はCactiを既に使っていて、テンプレートさえあればグラフを追加出来るレベルの人を想定しています。 今回自分で独自に作成したグラフは、ある製品にポートが1〜n個まであって各ポートでどれくらい応答まで掛かっているか マイクロ秒での平均値をSNMPで取得してグラフ化する手順です。 もちろん上記の情報はMIBで定義されていて、OIDを指定すればsnmpwalk等で情報が取得出来る製品でやりました。 まず一番大事なのは英語のマニュアル、及びサバカンのフォーラムをしっか
サーバ上で動いてるどのphpが重いか？を調べられる「phptop」:phpspot開発日誌
サーバ上で動いてるどのphpが重いか？を調べられる「PhpTop」。 「サーバ監視に超使える〜topコマンドのまとめ」というエントリで様々なtopコマンドを紹介したのですが、phptopなるものを新たに発見したのでご紹介。 具体的に出来ることは、今サーバで動いているものを指定した期間で、もっともアクセスが多いphp、CPUを多く消費しているphp、メモリを多く使っているphpといったものを降順にソートできるというものです。 サーバ上で多くのphpが動いており、どうも負荷が高いけどどれが重いのかよくわからないという場合に使えます。 top コマンドでは httpd が動いてるぐらいしか分からないので phper な方で負荷にお悩みの方は使ってみるのもよいかも。 たとえば、 $ phptop -t 15 -s mem のように実行すると、15分以内で、メモリを多く使っている順にソートが可能。
Disk I/Oの使用率を監視するワンライナー - kazuhoのメモ置き場
iostat -x の %util を監視してしきい値を超えたらアラートメール飛ばしたいなぁと思って crontab 書いた。こんな感じ。 */5 * * * * perl -wle 'my $s = `/usr/bin/iostat -xk /dev/sd[abc] 270 2 | tail -4`; print $s if $s =~ m{\s(?:[0-9]{3}|[5-9][0-9])\.[0-9]+$}m'ポイントは、 iostat の後ろから２つ目の引数がサンプリングを行う秒数 tail で デバイス数+1 することで、最後のサンプルを取り出す 正規表現で50%以上だった場合に標準出力に iostat の結果を出す＝メール送信
mMeasureによるMysqlの最適化と監視 « 寝る前にラーメン | 学生エンジニアのコードに関する忘備録
作っているサービスの負荷がバカにならないくらいになってきたので、 真面目に調べてみた。 最初、スロークエリーの解析と監視したかったので調べていたら、 MySQL Query Analyzerが浮上。 でも、どうやらエンタープライズ向けで、小規模でお金をかけたくない今回には向かない。 分散されたノードの監視に適したツールはいくつかあったけど、 監視サーバーが必要だったり、鳥瞰的なデータよりも細かいデータが欲しかったのでスルー。 でも、いずれは使ってみたい。(NagiosやZAPPIXなどといったソフトウェア） そこでたどり着いたのがmMeasureというMysqlモニタリングソフトウェア。 監視サーバー不要で運用サーバーに直接インストールして実行できるのでお手軽。 いくつかのページを参考にして導入してみた。 mMeasureの実行にはrrdtoolというソフトウェアが必要なので
Kazuho@Cybozu Labs: 既製品の管理ツールを使わないことでウェブサービスの TCO を下げる話について hbstudy#8 で話してきた件
昨日、hbstudy#8 で話をする機会をいただくことができたので、Nagios や Amanda といった既製品の管理ツールやバックアップツールを使わずに内製したことで「パストラック」の運用コストを下げた、という話をしてきました。 もちろん、「既製品を使わない」というのもひとつの手段にすぎませんから、それを無闇にお勧めするつもりはありません。ただ、小回りの効くツールを組み合わせる手法にも十分な競争力があるという点、あるいはその事例として参考になれば幸いです。 スライドはこちら。hbstudy 運営の皆様、話を聞いてくださった皆様、ありがとうございました。
Godで初めてのプロセス監視
Ruby 製のプロセス監視ツール、God を試してみた。（書いてる時点より5ヶ月前…。） モダンに監視したいなぜなら TIG が落ちるから(笑) 実は Un*x 系の OS なら素朴な監視は割と簡単にできる。 psgrep/etc/rc.d/* とか /etc/init.d/* とかsendmail辺りで事足りる。要するに 定期的に ps を叩いて、この文字列のパターンがない場合はこのプロセスが落ちてるから mail 投げて起動スクリプトを呼ぼう ってだけ1。これだけでプロセスが落ちてたらまた起動し直すということが可能なので、知らん間にサーバ落ちててオレ涙目っていう状態を減らすことはできる。少なくともすでに上の道具が使えているなら新しいことを覚える手間はないので、どうしてもすぐ監視を始めたい場合にはこれだけでも十分有効だと思う。 でも効率が良くない。ちょっと複雑なことを考え始めると for
monitoringforge.org - このウェブサイトは販売用です！ - monitoringforge リソースおよび情報
This webpage was generated by the domain owner using Sedo Domain Parking. Disclaimer: Sedo maintains no relationship with third party advertisers. Reference to any specific service or trade mark is not controlled by Sedo nor does it constitute or imply its association, endorsement or recommendation.
対照的な2つのネットワークトラフィック監視ツール：NetHogsとIPTraf | OSDN Magazine
私がLinuxディストリビューションを新規インストールした際に必ず行う作業は、Network MonitorアプレットをGNOMEパネルに追加しておくことだ。それはブルーのインジケータの点滅により、ネットワークトラフィックの有無を簡単に確認できるからである。ただし、帯域幅を専有しているアプリケーションは何かや、どのネットワークインタフェースが使われているかといった、より詳細なネットワーク情報を取得したいのであれば、 NetHogs や IPTraf などの専用ツールを利用しなくてはならない。このうちNetHogsは非常に独特な機能を有すツールとして作成されており、もう一方のIPTrafはサーバおよびホームユースの双方に適した汎用ツールとして作られている。 NetHogs 多くの帯域幅監視ツールにて提示されるのがIPアドレスやプロトコル別のネットワーク使用率であるのに対して、NetHogsに
BUKURO-JIN | リソース監視奮闘記 〜ねぇ Munin〜
波兰、梧州一市民网购餐桌起匈利等牙利张打、捷击非法移奥地民国主克、，部按在欧洲内照配制分摊移反对民额强。 的默相信契之间我们，纠纷花30的就信自己候想那时是相，回来反超可以。队5队拿到银落后中国环的韩国牌，元买教训队获得铜越南牌，元买教训队以的决最终中国绩夺2环赛成冠，队则打出下了多枪9韩国环以，越拉越大差距双方，的淘汰赛关键。 巴比表示什还，梧州一市民网购餐桌起必须协定讨论申根改革欧洲。包括边境控制，纠纷花30但欧起围墙洲不能只是竖，的办需要移民解决探索法各种问题，说穆斯卡特。波兰、元买教训匈利等牙利张打、捷击非法移奥地民国主克、，部按在欧洲内照配制分摊移反对民额强。 巴比表示新华莱塔８月韵）者袁正在总理（记捷克日电８日他访社瓦什２马耳问的，梧州一市民网购餐桌起不会的做移民捷克接受分摊法欧盟。但在的措一、纠纷花30有效终缺层面乏统上始施欧洲，洲难机之后年欧民危，了移普遍策收紧民政各国欧洲
Vidavee Open Source Projects: NVentory
nVentory - Ruby on Rails Datacenter Inventory Manager Overview A hardware and configuration inventory manager, that will eventually output XML files, which can be used to define configurations in other tools and processes (such as software builds, cfengine configuration, Nagios configuration etc) An application designed to assist the datacenter manager answer the following questions: What servers
ウノウラボ Unoh Labs: WEBサービス運用における監視体制
こんにちは satoです WEBサービスは作るよりも運用の方がコストがかかるとも言われています。 運用を極力自動化して、コストを減らしたいものです。 ここではウノウで使っているツール類を紹介したいと思います。 1) 疎通、生存監視 webの生存監視などは nagiosを使って監視しています。 nagiosには - いつ(土日を除く、10時～22時までの間で など) - どのタイミングで(N回連続で ,復旧したら など) - 何が起こったった時に(疎通が取れない など) - どうするか(メールで通知する) などを細かく設定できる監視ツールです。 ウノウでは MySQL、memcached、HTTP、ping、DNS、SMTPなどの監視をnagiosで行っています。 2) システムやアプリケーションLOG ログの監視には swatch を使用しています swatchの機能には -
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
突然ITインフラを任された人のための…監視設計入門 #yapcasia
NNMイベント設定エディタ プロジェクト日本語トップページ - OSDN