[B! hadoop] [2ページ] sadahのブックマーク

大規模データを無料で手に入れることのできるサイトまとめ - nokunoの日記

大規模データが公開されているサイトについて以下のQuoraでid:makimotoさんが質問していました。Data: Where can I get large datasets open to the public? - Quora以下、紹介されているサイトの一覧です。一部有料のものもあるようです。UCI Machine Learning RepositoryPublic Data Sets : Amazon Web ServicesCRAWDADno titleCity of Chicago | Data PortalGovLoop | Social Data Network for Governmentdata.gov.uk | Opening up governmentData.Medicare.GovData.Seattle.Gov | Seattle’s Data SiteOp

sadah 2011/10/03

hadoop

リンク

そろそろHadoopについてひとこと言っておくか - nokunoの日記

もうこの手の話題は出尽くした感がありますが、最近Hadoopについて考えることが多いので、エントリにしてみます。なお、ここではベーシックなMapReduce+HDFSのことをHadoopと呼ぶことにします。 HadoopとはHadoopとは言わずと知れたGoogleのMapReduce/GFSのオープンソースのクローンです。MapReduceではプログラマはMapとReduceという2つの関数を書くだけで、並列分散処理をすることができます。これは(1) データを実際に持つマシンにプログラムを配布する (2) MapとReduceをつなぐShuffleフェーズでキーをグループ化してソートする、(3) 障害時のフェールオーバーやレプリケーション、といった処理をフレームワーク側が受け持つことによって、プログラマ側の負担を減らすものです。GFSに対応するHDFSにはファイルをクラスタに分散して保存

sadah 2011/10/03

hadoop

リンク

リクルート式Hadoopの使い方

リクルート式Hadoopの使い方 - Presentation Transcript リクルート式Hadoopの使い方株式会社リクルートMIT システム基盤推進室インフラソリューショングループ石川信行はじめに・・・ □名前石川　信行（　　　ground_beetle） □出身福島県　いわき市 □経歴・2009年リクルート新卒入社・営業支援システムのコーダー（java）、DBAとして参加。・JavascriptのLibであるSenchaを用いたスマホサイト開発・現Hadoop推進担当 □趣味・外国産カブト虫飼育・スキューバダイビング・海水魚飼育リクルートの組織体制について旅行C 営業企画自動車C 営業企画住宅C 営業企画 MIT　United 事業担当MIT　事業担当MIT　事業担当MIT　・マーケティング・分析チーム　・インフラ基盤チーム　　

sadah 2011/10/02

リンク

Hadoop conference Japan 2011

4. アジェンダミクシィにおけるＨａｄｏｏｐの利用サーバ構成適用分野 Locality Sensitive Hashing (LSH) を利用した推薦推薦を行うために必要なこと LSH を利用した推薦（レコメンド） Hadoop 上で動作する LSH の壱実装（Likelike）実験 4 5. アジェンダミクシィにおけるＨａｄｏｏｐの利用サーバ構成適用分野 Locality Sensitive Hashing (LSH) を利用した推薦推薦を行うために必要なこと LSH を利用した推薦（レコメンド） Hadoop 上で動作する LSH の壱実装（Likelike）実験 5

sadah 2011/10/02

リンク

[O] Hadoop Conference Japan 2011 に参加してきました #hcj2011

overlasting.net 2019 Copyright. All Rights Reserved. The Sponsored Listings displayed above are served automatically by a third party. Neither the service provider nor the domain owner maintain any relationship with the advertisers. In case of trademark issues please contact the domain owner directly (contact information can be found in whois). Privacy Policy

sadah 2011/04/06

hadoop

リンク

Hadoop India Summit 2011の資料まとめ - doryokujinブログ：勉強会はうちに帰っても勉強会

Hadoop India Summit 2011 の資料がたくさん公開されていましたのでまとめてみました。タイムテーブルはこちら。 http://developer.yahoo.com/blogs/ydn/posts/2011/01/hadoop-india-summit-2011/Apache Hadoop India Summit 2011 talk "Hadoop Avatar at eBay" by Srinivasan Rengarajan and Mohit Soni View more presentations from Yahoo! Developer NetworkApache Hadoop India Summit 2011 talk "Hadoop Map-Reduce Programming & Best Practices" by Basant Verma Vi