タグ

ブックマーク / muddydixon.hatenablog.com (2)

  • Hadoop Conference Japan 2014に参加しました - PolyPeaceLight

    Hadoop Conference Japan 2014に参加しました。 最近あまり触ってなかったのですが、また案件で利用するニーズが出てきたので最新情報の収集目的です。 今日の収穫としてはこんな感じ Apache Spark 一週間の活動量がすごい 500 patch updates / w 200 updates / w 140 thread / w 80 merged patches / w Facebook Presto プラガブルよさ気 Facebookの中で使われてるリポジトリ←すごい 各種DBマージして使える DBに投げるときにすでにクエリを入れてフィルタリングしてから取り出すこともできる←mongohadoopでも実装してたの懐かしい BigQuery 公開してるBigQueryと中で使われてるのは同じ(リソース競合あり) お高いお金を払えば専有できるリソースもあるって D

    Hadoop Conference Japan 2014に参加しました - PolyPeaceLight
    kimutansk
    kimutansk 2014/07/10
    Sparkは高速でぶん回すには事前設計必要/Prestoはジョブ落ちるの前提/YARN初期設定はCDH見よう/YARNは2.4系(cdh5はOK)、と。
  • Sumallyのconsole.logが可愛くあざとい件 - PolyPeaceLight

    普段の癖でSumallyを開いた時にWeb Inspectorを立ち上げるとconsole.logにメッセージがあることに気がついた。 なんだこれww 「We need couple of talented geeks. Are you the one? Check this out」 「探しものはなんですか?見つけにくいものですか?HTMLの中も、JSの中も、探したけれど見つからないのにまだまだ探す気ですか?それより僕と働きませんか?」 「コードやHTTPの通信を見て、まだまだ改善の余地あるな、と思ったあなた!僕らのチームに参加しませんか?」 「おおっと!Web Inspectorでチェックですか!そういう精神好きです。僕らのチームに参加しませんか?」 「We want you for our engineering team. Check this out」 うまいけど僕はそこで上記の

    kimutansk
    kimutansk 2013/12/05
    この発想は無かった・・・いいですねぇ。これw
  • 1