タグ

hadoopに関するdshimのブックマーク (6)

  • [第1回]今さら聞けないHadoopの基礎

    OSS(オープンソースソフトウエア)のミドルウエア、「Hadoop」が注目されている。大量のデータ、とりわけログ、テキスト、画像といった非構造化データを取り扱うための高速な情報処理基盤を安価に構築できるからだ。そこで連載ではHadoopを基礎から説明する。 連載は情報システム部門の企画担当者や利用部門のIT活用推進者などが対象。序盤ではHadoopの基やアーキテクチャーを解説。回を追って分散ファイルシステムの操作とMapReduce処理をコードで確認。ユースケースやクラスタ管理にも言及するほか、2012年に予定されている次期メジャーリリース0.23の情報などの最新トピックも取り込んでいく。 ニーズ高まる「ビッグデータ」の基盤 日にとって2011年は「ビッグデータ」元年だったと言ってよいのではないでしょうか。ビッグデータに関わる製品やソリューションが国内外のベンダーから発表となり、多

    [第1回]今さら聞けないHadoopの基礎
    dshim
    dshim 2014/04/07
  • 基礎から解説!企業を変えるHadoop

    「ビッグデータ」をスマートに処理をする新しい道具、それがオープンソースミドルウエアのApache Hadoop(ハドゥープ)です。このHadoopの力で新たな収益を獲得する企業が増えています。連載ではこのHadoopを基礎から説明していきます。まず今さら聞けないHadoopの基、もう一度おさらいしたいアーキテクチャーを解説。分散ファイルシステムの操作とMapReduce処理をコードで確認。ユースケースやクラスタ管理にも言及していきます。2012年に予定されている次期メジャーリリース0.23の情報などの最新トピックも取り込みます。 目次

    基礎から解説!企業を変えるHadoop
    dshim
    dshim 2014/04/04
  • Hadoopすらもかなわない!? Amazon Redshiftの破壊力をHapyrus 藤川氏が語る | gihyo.jp

    Hadoopすらもかなわない!? Amazon Redshiftの破壊力をHapyrus 藤川氏が語る シリコンバレーで起業し、順調にビッグデータビジネスを展開している日人ベンチャー企業といえば、Hadoop Conference Japan 2013 Winterでも話題となったTreasure Dataがその筆頭に挙げられます。 ですが、Treasure Dataとほぼ同じ時期に西海岸でビジネスをローンチし、現在、国内外の投資家たちから高い注目をあつめるビッグデータベンチャー、それも日技術者が創業者である企業が実はもう1社存在します。それが藤川幸一氏率いるHapyrusです。今回、来日中の藤川氏に直接、Hapyrusが現在最も注力するAmazon Redshiftに関するビジネスを中心にお話を伺いました。 藤川幸一氏 Redshiftへのデータアップロードを事業の中核に ─⁠─H

    Hadoopすらもかなわない!? Amazon Redshiftの破壊力をHapyrus 藤川氏が語る | gihyo.jp
  • 第7回 リクルート式Hadoopの使い方 | gihyo.jp

    前回は、リクルートグループでのHadoopを利用したサービス活用事例を紹介しました。今回は、Hadoop Conference Japan 2013 Winterで弊社の石川信行が講演した「リクルート式Hadoopの使い方 2nd Edition」の紹介をします。 図1 Hadoop Conference Japan 2013 Winterでの講演の様子 ビックデータを扱う体制と環境の進化 リクルートで、ビックデータに挑むアナリストは2種類います。 コンサル型データアナリスト コンサル型データアナリストは、事業の抱える課題解決に向けた仮説を立て、具体的な解決案の提案を行います。分析力、論理的思考力、統計などの数学的知識が必要とされます。 エンジニア型データアナリスト エンジニア型データアナリストは、データマイニングやマシンラーニング(機械学習)などを行い、その結果を元に一定の規則性を見つけ

    第7回 リクルート式Hadoopの使い方 | gihyo.jp
    dshim
    dshim 2013/03/14
  • Hadoopの導入がリクルートの体制を変えた─Hadoop Conference Japan 2013 Winterレポート(4) | gihyo.jp

    Hadoopの導入がリクルートの体制を変えた─Hadoop Conference Japan 2013 Winterレポート(4) 1月21日に東京ビッグサイトで1,000名を超える参加者を集めて開催されたHadoop Conference Japan 2013 Winter。基調講演のほか3トラック21講演が行われ、いちオープンソースのユーザカンファレンスのレベルを超えたイベントとなり、成功裏に幕を閉じました。 今回のイベントの成功に大きく貢献した企業がリクルートテクノロジーズです。東京ビッグサイトという大きな会場の提供をはじめ、ノベルティグッズの配布、6種類のメニューから選べる無料ランチの提供など、運営にあたってさまざまな支援を行いました。実行委員としても同社から2名が名前を連ねています。 なぜリクルートテクノロジーズはここまでの支援を行ったのでしょうか。それは同社およびリクルートグル

    Hadoopの導入がリクルートの体制を変えた─Hadoop Conference Japan 2013 Winterレポート(4) | gihyo.jp
  • Hadoop Conference Japan 2013 Winterのツイートまとめ

    Hadoop Conference Japan 2013 Winter(http://hcj2013w.eventbrite.com/)に関するツイートのまとめです。 午後は3トラックあるので、7階:緑、1A:薄紫、1B:青で色づけしてみました(分からないツイートも多いので、分かる方は色づけしていただけると嬉しいです)

    Hadoop Conference Japan 2013 Winterのツイートまとめ
  • 1