かつてGoogleは検索インデックスが作成できなくなるという致命的な障害に遭遇していた

何か知りたいことやアクセスしたいページがあるとき、検索したいフレーズをブラウザで入力するだけで、即座に最新の結果を返してくれます。情報検索には検索エンジンインデックスというさまざまな学問の概念を組み込んだ複雑な仕組みが活躍していますが、かつてGoogleでは検索エンジンのインデックスを作成するシステムが停止するという致命的な障害に直面しており、その経緯や原因についてThe New Yorkerが解説しています。 The Friendship That Made Google Huge | The New Yorker https://www.newyorker.com/magazine/2018/12/10/the-friendship-that-made-google-huge ウェブをクロールして検索エンジンインデックスを作成するGoogleのコアシステムが停止したのは、1999年10

[moodyzfcd]

( 元記事はもっと長くて、ハードへの密着ぶりとしてL1キャッシュの参照にかかる時間といった数値が頭に刻まれてるとか、AIに繋がる話とかGoogleの機能拡大とかHadoopとか。2018年紙版掲載の記事

[tohokuaiki]

グリーの田中社長の書いたコードもたいがい酷かったらしいし、創業時はそんなもん。“ペイジ氏とブリン氏の初期ソフトウェアである「BigFiles」は従業員から「BugFiles」と呼ばれていた”

[sisya]

二進数を見てデータ破損に気づける理由は、ハードウェアのエラーではと目星をつけた部分が理由で、データ蓄積のハードウェアエラーは0を0と正しく記憶できない場合がほとんどだから。実は個人向けでも発生している。

[teruspr]

“レベル10は世界をリードする影響力がある専門家の役員。” 技術を究めた専門家が役員になれるの、さすがGoogleと言わざるを得ない。

[srgy]

「かつて魔法少女と悪は敵対していた。」みたいな記事タイトルだ

[yam_123]

gigazineの翻訳はDRAMの行か列の不良とハードディスクのレイドについて書いてあるけど、元記事はもう少し詳細に書いてあってGoogleの面白い話もあったけど雑誌記事らしいふわっとした話もあって無駄に長い。

[AKIT]

その頃はてなもサーバを自作していた(まだしてません、もっと後です)

[mfluder]

“NASAや金融機関などは1ビットの「0」と「1」がハードウェアトラブルで反転しても全体に影響が生まれない特別なハードウェアを使用していましたがGoogleでは安価なコンピューターを使用しておりハードウェア障害”

[marilyn-yasu]

“1ビットの「0」と「1」がハードウェアトラブルで反転しても全体に影響が生まれない特別なハードウェアを使用”　QRコードもそうだけど多少の破損データでも正常に読み込めるシステムって凄いよね。

[hgaragght]

>「0であるべき数字が1になっている」と指摘　　　　何故わかるんだww　　／　↑へえええ。あざーっす。

[hobbiel55]

"ディーン氏とゲマワット氏はGoogleのシニアフェローで、Google初であり2人だけの「レベル11」と認定されています。"

[versatile]

今でも宇宙線の影響でビット反転は起こるよね

[circled]

Googleが2000年当時、ECCメモリ積んだサーバを使ってなかったということなんかな？