Hadoopで、かんたん分散処理 (Yahoo! JAPAN Tech Blog)
ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog こんにちは、地域サービス事業部の吉田一星です。 今回は、Hadoopについて、Yahoo! JAPANでの実際の使用例を交えながら書きたいと思います。Hadoopとは、大量のデータを手軽に複数のマシンに分散して処理できるオープンソースのプラットフォームです。 複数のマシンへの分散処理は、プロセス間通信や、障害時への対応などを考えなければならず、プログラマにとって敷居が高いものですが、 Hadoopはそういった面倒くさい分散処理を一手に引き受けてくれます。 1台では処理にかなり時間がかかるような大量のデータも、複数マシンに分散させることで、驚くべきスピードで処理を行うことができます。 例えば、今まで1台でやっていた、あるログ集計処理
マジコンと画像スレとニコニコ動画とはてブ
とりあえず画像OFFでの閲覧を推奨しますけれども。 http://anchor18.blog77.fc2.com/blog-entry-195.html 鳥山明作品の美しい画像スレ あんか?びっぷhttp://b.hatena.ne.jp/entry/http://anchor18.blog77.fc2.com/blog-entry-195.html はてブの反応がマジコンの話題と全然違う。鳥山明さんのイラストを1円も払わずに見て喜んでる人たちと、マジコンに怒っている人たちは重なっていないのでしょうが、マジコンに怒った人は、こっちにも怒るのが道理。 結局、何なのかというと、自分も（時々）やってることは、規制されたくないんだな。自分が絶対にやらないことなら、ガンガン規制しろ、っていう。身勝手なんだよ。Googleストリートビューのオプトアウト方式に文句をいっている人は、「事前に著作者の許可を
国立大学の統廃合私案 - Chikirinの日記
橋下府知事が「大阪府立大学は不要なのでは？」と言ったとか言わないとか、という報道を聞いて、「たしかに要らんよね」と思った。そしたら知人が言った。「府立大どころか、国立大学だって半分くらい要らないと思う」と。 で、ふたりで「国立大学って何校必要？」って勝手に考えた。そもそも現時点で何校あるのかも知らなかったので文部科学省のサイトで一覧リストを見ながら考えた。放送大学を含め88校あるらしい。 「確かに多すぎ」と思った。公立大学（都道府県や市立の大学まである）を除いて、国立大学が88校なんて直感的に多すぎ。明らかに民業圧迫。 18歳人口はもうすぐピーク時の半分以下になるんだから、普通に考えれば大学の半分は不要になるはず。国公立が税金を背景に「赤字でも倒産しない」特権を振り回せば、私立大学にその分のしわ寄せが行きます。国も地方も財政赤字なんだから、率先して撤退すればすべて丸く収まるはず。 というわ
インターネットサービスプロバイダー相互接続マップ（PDF版公開）
編集部 【お知らせ】 2007年3月版のマップを追加しました。（2007/08/15） スラッシュドットの皆さま。盛り上がっていただき、ありがとうございます！（編集部一同） インターネットはコンピュータ（ルーター）同士がつながってできている。 10年前は、数個のISP（インターネットサービスプロバイダー）がつながったIX（Internet Exchange）があり、また別の数個のISPがつながったコンピュータと接続されていた。それぞれにつながるコンピュータが増え、それがさらに別の中継器とつながり、インターネットは生き物のように成長した。太い線（広帯域回線）を何本も張った集積地ができることもあれば、1本の細い線だけでつながっているものもある。この形はインターネットに限らず、脳細胞や人間社会の絆も同じであるという研究が進んでいる。 ISP接続図で見るインターネット成長史 ISPマップは、インタ
痛いニュース(ﾉ∀`):こんにゃくゼリーで窒息死した1歳男児の遺族、「マンナンライフ」に6200万円の賠償請求
1 名前： すずめちゃん(東京都) 投稿日：2009/03/03(火) 16:08:20.11 ID:oN4wcYDu ?PLT マンナンライフを提訴＝死亡1歳児の遺族−こんにゃくゼリー問題・神戸地裁支部 兵庫県に住む1歳の男児がこんにゃくゼリーをのどに詰まらせ、昨年9月に死亡した事故で、男児が死亡したのは製造会社「マンナンライフ」（群馬県富岡市）の対応に問題があったためだとして、両親が3日、同社に計約6200万円の損害賠償を求める訴訟を、神戸地裁姫路支部に起こした。 http://headlines.yahoo.co.jp/hl?a=20090303-00000082-jij-soci 2 ： すずめちゃん(東日本)：2009/03/03(火) 16:08:43.30 ID:Lqm3gwyU ガキに食わせるなよ 5 ： すずめちゃん(富山県)：2009/03/03(火)
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
