Google App Engineダウンの原因はデータセンターの電源故障。さらに復旧手順のミスが重なった
Google App Engineダウンの原因はデータセンターの電源故障。さらに復旧手順のミスが重なった 米国時間の2月24日、グーグルが提供するGoogle App Engineのデータストアが障害により停止するという事故が発生しました。この事故の状況については、そのときの記事「Google App Engineが昨夜ダウン。障害がごく一部に残り、対応チームは現在も作業中」」で詳しく報じました。 それから2週間、グーグルが原因と対策について書いたドキュメントをGoogle Groupに「Post-mortem for February 24th, 2010 outage - Google App Engine | Google Groups」というメッセージとしてポストされました。 原因はデータセンターの電源障害 グーグルの解説によると、今回の障害の直接の原因はプライマリデータセンターの
開発と運用の分離
ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog こんにちは、システム統括部の駒田です。 昨今、内部統制やJ-SOXといった言葉を良く耳にしますが、 ヤフーもご他聞に漏れず、粛々と対応を進めて参りました。 今回は、その対応の一環として行った、 「開発と運用の分離」に関してのエントリーをさせていただきます。 例えばですが... 開発成果物であるソースコードをテスト終了後に改ざんし、 不正に利益を得る様なエンジニアが存在していた場合、 それはヤフーにとって、一般のお客様に対する裏切りであり、 信用の失墜となってしまいます。 このような事態を回避するため、 当開発部では開発者と運用者とを明確に分離し、 開発者はリリースモジュールに触れる事が出来ない。 運用者はソースコードに触れる事が出
熱すぎるラックをお知らせ、｢警子ちゃんで温度監視｣
アイエスエイは、環境監視ソリューション「警子ちゃんプラス」の第1弾として、SNMP対応警告灯「警子ちゃん」と電子サーモスタットを連携させた、データセンタ内に設置済みのラック内温度を監視する「警子ちゃんで温度監視」ソリューションを3月1日に発売する。 データセンタ内のラックに高密度実装することが多い、ウェブアクセス制御やDBシステム、ストレージシステム、映像配信システムなどの準基幹システムを監視し、内部温度上昇による熱暴走や機器障害などのリスクを低減し、可用性を高めるための製品。 ネットワーク対応型の警告装置である「警子ちゃん」と、温度センサとコントローラを一体にした「電子サーモスタット」を連携させ、対象や利用範囲を絞り込む。特別な配線工具や技術を必要としないため、新規、既存にかかわらず導入が容易であるとしている。
全日空のシステム障害はデフォルト値の管理の問題でもありますね。。。 - まるちゃんの情報セキュリティ気まぐれ日記
こんにちは、丸山満彦です。全日空のシステム障害は複数の問題が合わさっているので、これがひとつの原因というわけではないと思いますが、そのひとつにデフォルト値の管理の問題がありそうですね。システムが複雑になるとデフォルト値がそのままよく検討されずに導入されることも多々あるとは思います。デフォルト設定を無くすと全体としては導入コストが増加するので、このあたりのバランスが問題ですよね。。。 不正と誤謬（ミス）の２つに分けると、誤謬（ミス）の問題ですので、失敗学的な解決がよいのかもしれません。 システムが複雑になれば、このような誤謬（ミス）の発生可能性は飛躍的に高くなってくるわけで、何らかの体系的な対策が必要となってくると思います。 開発組織の問題、責任者の確認の問題、実施者の運用上の問題、商品側のユーザービリティ確保の問題等々・・・ 第三者審査制度の導入も考えているようですが、金融機関ではすでにシ
＠IT Special システム障害を事前に検知した事例に学ぶ「Systemwalker」のキャパシティ管理
システム障害を事前に検知した事例に学ぶ 「Systemwalker」のキャパシティ管理 ──システムが動かなくなる前に対応する秘訣とは？ 今日の企業経営や業務はITシステムへの依存度が高くなっており、日本版SOX法・内部統制対応でもIT全般統制が重要となる。そうした中でITILに基づいた安心・安全な運用管理を提供し、安定稼働の評価を含めて企業のシステム運用管理を強力に支援するのが、富士通の「Systemwalker」だ。 「Systemwalker」が提供するキャパシティ管理機能は、システム管理者泣かせのトラブル対応に大きな変化をもたらす。今回は、実際に起きた問題事例をもとにして、「Systemwalker」のキャパシティ管理の魅力に迫る。 富士通の「Systemwalker」は、IT全般統制の評価項目のうち「システムの安全性の確保」「システムの運用・管理」「システムの開発、変更・保守」を
みずほグループ：勘定系システムの保守を大連で
グローバル・ソーシングの波は、最高レベルの品質が求められるメガバンクの勘定系システムにまで広がっている。みずほグループが2007年10月から、みずほ銀行（BK）とみずほコーポレート銀行（CB）の勘定系システムを対象に、保守作業を中国・大連に移管するプロジェクトをスタートさせたのだ。 委託先は、瀋陽に本社を構える中国最大手の東軟集団（NEUSOFT）。BKとCBの勘定系を手がけるみずほ情報総研が主体となって、保守の移管を進めている。 みずほ情報総研は現在、合計6500人の体制で勘定系の保守をこなしている。6500人の内訳は、自社の技術者1500人と国内ベンダー120社の技術者5000人である。この業務を少しずつ中国に発注していく考えだ。 みずほ情報総研の山本剛史 グローバルデリバリー推進室長は、「保守に追われる国内要員を新規案件にシフトしたい」と話す（写真1）。新規案件の投資意欲が旺盛なBK
システム基盤構築ノート: JP1_TIPS
JP1 Viewからジョブをコントロールする際に、 ”強制終了” することができます。 ただし、この強制終了はJP1上で強制終了扱いになるだけで、 サーバ側の実プロセスは終了するまで残ってしまいます。 なので、無限ループになってしまった場合などは、、、 JP1上で強制終了してから、 更にOS上でkillしたりする必要があります。 このあたりは、OSごとに扱いが異なっていて、 詳細はマニュアルにも説明があったように思います。 さて、実際にAJSに登録しているバッチジョブを強制終了する場面は、 それほど多くはないと思います。 もしDB処理を伴うバッチジョブを強制終了すれば、 処理がどこまで進んだか、 どこがロールバックされたか、 確認して対処が必要になるので、 そう気軽に強制終了することはできません。 こういう状況の場合、いかに詳細なログ出力が されているかが重要なので
United States
Humanoid robots are a bad ideaMultiple companies are now using robots that walk and talk like human beings. What could go wrong?
IT news, careers, business technology, reviews
Generative AI will drive a foundational shift for companies — IDC
サーババックアップに関するいまどきの選択肢 ― ＠IT情報マネジメント
株式会社シマンテック 後藤 博之 2007/9/28 サーバのバックアップでは、業務要件に応じてバックアップ技術を使い分けるべきだ。では、使い分けるバックアップ技術にはどのような選択肢があるのか。今回はこれを説明する 前回は「サーババックアップ戦略を左右する基本要素」と題して、サーババックアップにおける課題とリストア要件に基づくバックアップ設計について解説したが、今回はバックアップにおける選択肢の詳細を説明していく。 まずバックアップ手法の選択肢について内容や特徴を説明し、次にバックアップポリシーとバックアップ手法との組み合わせについて、最後にバックアップシステム構成の選択肢について紹介する。 バックアップ手法の選択肢 ■ファイルバックアップ 1つ目のバックアップ手法の選択肢としてファイルバックアップがある。ファイルバックアップの特徴として、ファイル単位によるバックアップを行うことができる
[Think IT] 第2回：障害発生を考えていますか？ (1/3)
「サービス監視システム」は利用者と同じようなアクセスを定期的に実施します（図1-1）。アクセス先は「サービス監視アプリケーション」であり、このアプリケーションでサービスが稼動しているかを判断します。アクセスの際、通常と違うレスポンスの場合は、監視対象システムに障害が発生しているとみなし（図1-2）、障害の通報を行います（図1-3）。 具体的に、監視対象システムがWebアプリケーションの場合を考えてみましょう。 まず、サービス監視アプリケーションについてです。監視対象システムがWebアプリケーションの場合、利用者と同じようなアクセス方法（図1-1）は、HTTP（もしくはHTTPS）通信になります。つまり、サービス監視を行うべき対象アプリケーションもWebアプリケーションになります。 サービス監視アプリケーションは「サービスが稼動していると判断する基準」に従って作成します。この基準はシステムに
ITIL導入に潜む8つの落とし穴にご用心
日本CA株式会社 ソリューション技術本部 ソリューションコンサルティング部 カスタマーソリューションアーキテクト 伊藤 正博氏 【専門分野：ITIL関連コンサルティング】 ITILアセスメント、実装コンサルティング、ITIL関連製品の提案・設計などに従事。ITIL関連の社内全体説明会や上層部向け説明会、ITIL関連セミナーなどの講演活動も実施。 ITILは、あいかわらず日本企業の間で高い人気を誇っている。イギリス政府が策定した、このコンピュータシステムの運用・管理業務のガイドラインは、もともとまじめで向上心の強い日本人に備わっている管理魂に妙に火を付けるところがあるのかもしれない。しかしながら、教則本があるからとやみくもに自己流で導入しようとすると、手痛い失敗をする。 日本CAには、2003年から開始したITILコンサルティングの集大成「CA ITIL活用メソドロジー」がある。これは、実際
United States
Humanoid robots are a bad ideaMultiple companies are now using robots that walk and talk like human beings. What could go wrong?
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
あなたの会社の基幹系システムが死んでしまう前にやるべきこと～情報システム総研 繁野氏
一定規模以上のWebサイトを運営しているエンジニアの方、業務時間外の障害対応ってどういう風にやっていますか？ - 人力検索はてな
連載：はじめてのAmazon EC2&S3 〜これからの新サービスの公開の形〜｜gihyo.jp … 技術評論社
IT news, careers, business technology, reviews
United States
United States
[Think IT] 第2回：4種の統合監視ツールの情報収集機能を比較！ (1/3)