タグ

2015年4月10日のブックマーク (6件)

  • SparkのRDDプチまとめ +@ – OpenGroove

    Sparkにおける主要な概念にRDD (Resilient Distributed Dataset)というものがある。 すごく平たく言えば「データセットを抽象化したもの」ということになるか。 ドキュメントより一部訳してみると。 Sparkの基抽象要素。パラレルに処理が行われる、イミュータブルで分割された要素のコレクションを表す。(略) 各RDDは以下5つの主なプロパティにより特徴づけられる。 パーティションのリスト 各分割のコンピューティング用のファンクション 他のRDDsに対する依存関係のリスト オプションとして、key-value RDDs用のパーティショナー オプションとして、各スプリットにとっての好ましいロケーションのリスト (つまり、HDFSファイルのブロックロケーション) ….って言われてもうーむ、だよな。RDDsの英論文があり、そこに詳しい話ががっつり書いてあるのだが、これ

    phji
    phji 2015/04/10
    “lineage”
  • Apache Spark RDD filter into two RDDs

    phji
    phji 2015/04/10
  • Qiitaと同じような海外のサービスを教えてください。…

    Qiitaと同じような海外のサービスを教えてください。デファクトスタンダードはあるのでしょうか。もしなければない理由を教えてください。

    phji
    phji 2015/04/10
  • Customise a partitioner in Spark

    phji
    phji 2015/04/10
  • Mac - 緑ボタンでウィンドウをフルスクリーン/最大化

    Mac の緑ボタンでウィンドウをフルスクリーン/最大化する方法を紹介します。 それでは実際に「緑ボタン」でウィンドウをフルスクリーン/最大化する方法をみていきます。 緑ボタンでフルスクリーン まずはウィンドウをフルスクリーンにしてみましょう。 ウィンドウの左上にある「緑ボタン」をクリックすると、 このようにウィンドウがフルスクリーン化されます。もう一度「緑ボタン」をクリックすると、 このように元のウィンドウサイズへと戻ります。 緑ボタンで上下の最大化 次は「緑ボタン」でウィンドウの上下を最大化をしてみましょう。 ウィンドウ左上にマウスカーソルをもっていき、 「Alt/Option」キーを押しましょう。 すると、このように「緑ボタン」の形状が変化するので、それをクリックします。 すると、このようにウィンドウの上下が最大化されます。 緑ボタンで上下左右の最大化 最後に「緑ボタン」でウィンドウの

    Mac - 緑ボタンでウィンドウをフルスクリーン/最大化
    phji
    phji 2015/04/10
  • KAI-YOUを退職しました - [NO "Futon", NO LIFE.]

    3月末をもちまして、KAI-YOU(株式会社カイユウ)を退職しました。 雇用契約上は3月31日までなのですが、会社の都合もあったりして、3月27日の金曜日が最終勤務日となり、送別会も開いて頂きました。 どうしてKAI-YOUに入ったのか ぼくがKAI-YOUに勤め始めたのは、去年の4月1日でしたので、ちょうど一年間お世話になったということになります。 2014年3月、こんなブログを書いているぐらいには、これからの自分に思い悩んでいました。 ogawa0071.hatenablog.com 一年勉強してもう一度大学受験をするのか。でも、そもそも行きたい大学も行ってやりたいこともない。 それだったら、いまやりたいことを全力でやる方がいいのではないか。そう思いました。 2013年の11月ぐらいからメディアを作ろうと何人かの仲間と頑張っていた時期があり、そのとき一番参考にしていたのが「KAI-YO

    KAI-YOUを退職しました - [NO "Futon", NO LIFE.]
    phji
    phji 2015/04/10