Neal Sato @nealsato 二日とも複数台のmemcachedが連続して落ちました。コアは吐かずにストンと落ちるので、原因追及に時間がかかりましたが、memcachedへの接続数が異常に多いと落ちる事は再現できました。 #mixi 2010-08-12 02:33:00 Neal Sato @nealsato memcachedが大量の接続を受けると突然停止をするので、memcachedへの接続数を減らし安定運用中。外部からの過剰アクセスではなく、サーバ追加→クライアント数増加→停止。 2010-08-12 08:45:50 Masahiro Nagano / 長野雅広 @kazeburo ファイルディスクリプタが不足してmemcachedが落ちたとして、そのときには、3万強の接続となってるはず。3万強の接続となるにはアプリケーションサーバ側のmax clientが平均60とし

8月10日の17時20分頃から12日未明までの長時間にわたり、サービスが利用不能もしくは利用しにくい状況になっていた「mixi」。数度の断続的な復旧ののちに、本日12日午前1時50分頃には復旧が完了し、現時点で全面的に復旧しているようです。 その障害の経緯について株式会社ミクシィの広報からプレスリリース「『mixi』のアクセス障害のお詫び及び復旧に関するお知らせ」として発表されました。 原因はアクセスの急増ではなかった プレスリリースの中で、今回の障害の原因は以下のように説明されています。 『mixi』のデータベースへの負荷軽減のために導入しているデータキャッシュシステムが複数同時に異常終了したことに伴い、データベースへの負荷が急増したため『mixi』を閲覧しづらい状態となりました。 高負荷かつ特殊な状態でのみデータキャッシュシステムの異常終了が発生していたため、根本的な原因の究明に時間が

思わず納得してしまう、夫婦喧嘩が始まる5つのパターン 夫婦のケンカと言うのはひょんなことから始まります。 長く居すぎて遠慮が無くなるせいなのか、それとも埋められない男女の因縁なのか、とにかく小さなことからケンカに発展します。 そんなケンカの原因とも言える、「こんな風にケンカが始まった…」と言う5つのケースをご紹介します。 ケース1 妻に「今年の記念日にはどこか行きたいところはないかい？」と聞いてみた。そのセリフは彼女を温かい気持ちにさせたようで、顔がほころぶのがわかった。 「長い間行ったことがないようなところがいいわ」と彼女。それを聞いて僕はすかさず提案をした。 「じゃぁキッチンなんかどうだい？」 こんな風にケンカが始まった… ケース2 妻と私はベッドに入りながらテレビ番組「クイズ$ミリオネア」を見ていた。私は妻の方を向いて「今夜はするかい？」と尋ねると、彼女は「ノー」と言った。それに対し

どうしてまたコンピュータがクラッシュしたのかと不思議に思ってはいないだろうか。Googleの実環境での研究によれば、それはメモリが原因かもしれないという。この研究では、メモリのエラー率が、これまでの研究で示されていたよりも高いことが分かった。 Googleは、同社のデータセンターにある膨大な数のコンピュータを使って、それらのマシンの実際の稼働状況についての実環境データを大量に収集することができる。それがまさに、エラー率が驚くほど高いことを明らかにした研究論文のために、同社が行ったことだ。 トロント大学教授Bianca Schroeder氏と、GoogleのEduardo Pinheiro氏ならびにWolf-Dietrich Weber氏の共著である同研究論文によれば、「メモリエラーの発生回数や、さまざまなDIMMにおけるエラー率の範囲が、以前報告されていたよりもずっと高いことが分かった。メ

1. 8万のカード情報を含む65万人の個人情報が漏洩し，セキュリティをいちから見直した 2. 漏洩が判明した直後は延べ20人が3日間，夜を徹して作業に当たった 3. カード情報の管理を第三者に任せ，WAFを導入するなど安全性を高めた 「えらいことになってしまった。覚悟せなあかんな」。 2008年7月10日の深夜のこと。アウトドア用品や釣り具の販売で年間40億円を売り上げるECサイト「ナチュラム」を運営するミネルヴァ・ホールディングス（当時の社名はナチュラム，8月1日に持ち株会社として改称）の中島成浩氏（代表取締役会長兼社長CEO）は，創業以来の危機に直面していた。ナチュラムのサイトから，クレジットカード情報を含む個人情報がほぼ確実に漏洩していたことが判明したのだ。大阪市中央区の本社会議室に集まったメンバーは皆青ざめていた。 まず取り組んだのは被害の拡大を防ぐこと（図1）。丸3日間で一気に対

NTTデータのブログサービス「Doblog」（ドブログ）で2月8日に起きた障害が復旧せず、1カ月以上にわたって記事を投稿できない状態が続いている。このほどユーザーの1人が、Doblogユーザーの移転先を収集・公開する「Doblog難民キャンプ」を開設。移転先情報を50件以上掲載している。 Doblogは、サーバのHDD障害で、2月8日から閲覧・投稿ができなくなった。2月20日以降、閲覧は一部を除いて可能になったが、投稿はできないままだ。このためDoblogのブロガーは、ほかのブログサービスに移転しても、Doblog上で移転先の告知すらできない状態だ。 「難民キャンプ」は、Doblogのブロガーや読者が移転先を告知・共有するためのサイトで、「Doblog暦5年超の元ドブロガー」という匿名の個人が、「gooブログ」上に開設した。移転先情報をコメントで受け付け、整理して掲載している。「今回の障害

楽天証券でシステムトラブルが発生し、早朝のサービス開始から米国株式を除く全商品の新規発注と訂正注文、取消注文ができない状態となっている。同社によると11月11日午前10時時点で「原因の究明とサービス再開に全力を尽くしているが、復旧の見通しが立っていない」としている。 トラブルを起こしているのは、前日までのデータを処理する夜間バッチのシステムとみられる。通常夜間から未明にかけて処理が終了し、午前6時にサービスを再開する。これが何らかの原因で大幅に遅れ、いわゆる「バッチ処理の突き抜け」が起きている。 復旧に向けて一部サーバーを再起動するため、11日の午前中はサービスへのログインができなくなったり接続が切れる場合があるという。

故障発生時にフェイルオーバーしない？：Linuxトラブルシューティング探偵団（4）（1/3 ページ） NTTグループの各社で鳴らした俺たちLinuxトラブルシューティング探偵団は、各社で培ったOSS関連技術を手に、NTT OSSセンタに集められた。普段は基本的にNTTグループのみを相手に活動しているが、それだけで終わる俺たちじゃあない。引き続きOSSに関するトラブルの解決過程を＠ITで連載していくぜ。 ソースコードさえあればどんなトラブルでも解決する命知らず、不可能を可能にし、多くのバグを粉砕する、俺たちLinuxトラブルシューティング探偵団！　助けを借りたいときは、いつでもいってくれ！ OS：高田哲生 俺はリーダー、高田哲生。Linuxの達人。俺のようにソースコードレベルでOSを理解している人間でなければ、百戦錬磨のLinuxトラブルシューティング探偵団のリーダーは務まらん。 Web：福

昨日帰りに某家電量販店に立ち寄ったのですがそこで団塊世代の年代のオジサンが大声で店員に怒鳴っていました。ちょっと聞いていたのですがどうやら店員の説明がわかりづらかったので腹を立てたようです。言葉遣いも荒くかなり怖かったです。とはいえこういう団塊世代が怒鳴ってる光景なん今では珍しくもないわけですが、そういうクレーム、苦情に対して企業は 「苦情」と「クレーム」は違う 誠意を持って話を聞く - ワークスタイル - nikkei BPnet http://biz.sbrain.co.jp/theme/T-23008.htm とクレームを活かそう、前向きに捉えようといった姿勢をみせています。しかし現場の本音はこっちかなあと クレーマー＝団塊 http://money6.2ch.net/test/read.cgi/management/1201407182/ 1 名前：名無しさん＠お腹いっぱい。 投稿

ドリコムグループが運営する無料ブログサイト「ドリコムブログ」がアクセスしづらい状態になっている。2008年7月2日16時現在はアクセス可能だが、14時頃はアクセスできない状態になっていた。 運営主体のドリコムジェネレーティッドメディアによると、データベースの過負荷が原因だという。きっかけは7月1日に実施したデータベースシステム（PostgreSQL）のメジャーバージョンアップ。システム更新によりデータベースの処理能力が落ち、過負荷に陥った。これによるドリコムブログへのアクセス困難な状況は、現在まで続いているという。 現在、データベースのチューニングを行うことで負荷を軽減すべく作業中だ。ただし、作業終了の見通しは立っていないという。作業の区切りが付き次第、ドリコムの運営者ブログで今後の予定を公開する。

いったい、何の騒ぎなんだろうね。三菱東京UFJ銀行の“システム障害”の件だが、バカみたいな大騒ぎとなった。でも、セブン銀行との間で“たかだか”2万件の取引に影響が出ただけにすぎないし、ゆうちょ銀行など他の6行との間の取引で問題が発生したにすぎない。これは成功とは言えないかもしれないが、普通、想定の範囲という。なのに何故、こんなヒステリックな話になるのか。 同業他社とのシステム接続だ。完璧を期すのは、とてつもなく難しい。この程度で済んだのだから、よしとすべきである。今回の件で、三菱東京UFJ銀行に罪があるとしたら、利用者に対して事前に“自衛”を求めなかったことだ。「新システムへの移行に伴って、障害が発生する可能性があります。利用者の皆さんにおかれましては・・・」と告知しておけば、“完璧”にOKの話だ。 三菱東京UFJ銀行は日頃から「完璧を期す」と言っていたようだが、何故この面で完璧を期さなか

三菱東京UFJ銀行のキャッシュカードがセブン銀行のATMで使えなくなるシステム障害が発生した。原因は「カタカナで転送すべきデータを漢字で処理していたから」だった。 三菱東京UFJ銀行のキャッシュカードがセブン銀行のATMで使えなくなるシステム障害が5月12日に発生した。三菱東京UFJ銀行によると原因は「カタカナで転送すべきデータを漢字で処理していたから」であった。 システムでは、旧東京三菱銀行のキャッシュカードを持つ利用者がセブン銀行で預金を引き出す際、10件以上の未記帳の記録がある場合にはそれを知らせる案内文を提示する仕組みにしている。ここで、三菱東京UFJ銀行とセブン銀行の間でデータの受け渡しはカタカナで処理する仕様になっていた。 今回は、これをカタカナではなく誤って漢字で処理したことが不具合の原因になった。三菱東京UFJ銀行のシステム担当者が対応し、11時55分ごろに復旧したが、成立