Hadoopで、かんたん分散処理 (Yahoo! JAPAN Tech Blog)
ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog こんにちは、地域サービス事業部の吉田一星です。 今回は、Hadoopについて、Yahoo! JAPANでの実際の使用例を交えながら書きたいと思います。Hadoopとは、大量のデータを手軽に複数のマシンに分散して処理できるオープンソースのプラットフォームです。 複数のマシンへの分散処理は、プロセス間通信や、障害時への対応などを考えなければならず、プログラマにとって敷居が高いものですが、 Hadoopはそういった面倒くさい分散処理を一手に引き受けてくれます。 1台では処理にかなり時間がかかるような大量のデータも、複数マシンに分散させることで、驚くべきスピードで処理を行うことができます。 例えば、今まで1台でやっていた、あるログ集計処理
仕事場ビフォーアフター：殺風景な屋根裏をプログラマーの楽園に | ライフハッカー・ジャパン
使用しているハードウェアなど改装の詳細を紹介しているFAQページへは、下記リンクからどうぞ。すべての質問にミッチ氏は対応していますが、｢ちょっとハードルが高すぎでは？」との質問にこう返答しています。 確かに。でも、楽しいですよ。今は週60～80時間を ここで過ごしています。電話帳で高さを揃えたモニターや居心地の悪いデスクから成る四角い箱を快適にする...これで憂鬱な気持ちがやわらぎました。何より仕事ですから。プロトタイプシステムではなく、小さくても自分自身のデータセンターを築かずにはいられなかったのです;-) 高さの合わないテーブルや打ちにくいキーボード、壊れかけの椅子で小型モニターやPCの爆音と格闘するような作業環境が悪いところでプログラミング作業を長年続けた結果、真面目な話、肩こりに悩まされましたし。もう十分でしょ。 反論できます？ 自慢したくなるような仕事場をお持ちの方はご自分のFl
[Mac]最近Firefoxが妙に重くなったなと感じているあなたm9(´Д`)の為のTips
マッキン徒の皆さん、こんxxは。 何か最近重い気がするなぁ…重い、やっぱ重いよ…と、使って行く内にジワジワと茹で蛙の如く重くなって動作が鈍化しある日ハッと我に返らせてくれる（カエルだけに）火狐ことFirefox。 導入時のあの感動をもう一度ｶﾓｰﾝщ(ﾟДﾟщ)！というあなたm9・∀・）。 先ず自分の日々の行いについて心当たりが無いか、胸に手を当ててよく考えてみるべきではないでしょうか。 そう、アドオンです。 使わない物は無効化にするか要らなければ削除しちゃいましょう。 そして意外とバカにならないのがブックマーク達。 単純に減らすのも手ですが、ポイントはブックマークツールバーから外す事。 自分の場合は一つのフォルダに500弱有ったブックマークを、Googleツールバーの機能を使いGoogleブックマークに吐き出して削除したら、新規ウィンドウ表示の立ち上がりが軽くなりました。 ツールバーのブ
![[Mac]最近Firefoxが妙に重くなったなと感じているあなたm9(´Д`)の為のTips](https://cdn-ak-scissors.b.st-hatena.com/image/square/6b7f772971dc29fc22449985ca065d54549fa5c1/height=288;version=1;width=512/https%3A%2F%2Frobotboy.up.seesaa.net%2Fimage%2Fprivacy_data_delete.png)
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
