SparkアプリケーションのためのJavaガベージコレクションのチューニングについて - TEPPEI STUDIO
この記事は、インテルの SSG STOビッグデータテクノロジーグループのメンバーからDataBricksに寄稿されたブログを翻訳したものです。誤訳がありましたら、@teppei_tosaに御連絡ください。 Sparkは、その優れた性能、シンプルなインターフェイス、および分析や計算のための豊富なライブラリによって、幅広い業界で採用されてきています。ビッグデータエコシステムにおける多くのプロジェクトと同様に、Sparkは、Java仮想マシン（JVM）上で実行されます。Sparkはメモリに大量のデータを格納することにおいて、Javaのメモリ管理とガベージコレクション（GC）に大きく頼っています。また、プロジェクトTungstenなどの新たな取り組みは、将来のバージョンで、メモリ管理のさらなる簡素化と最適化を目指しています。しかし、今日時点でも、JavaのGCオプションとパラメータを理解しているユ
怖くないScala勉強会で「Scala稟議の通し方」話してきました #kwkni_scala - TEPPEI STUDIO
怖くないScala勉強会で「Scala稟議の通し方」を話してきました。 スライドはこちら。 Scala稟議の通し方（公開版） from teppei tosa スライドに使っていた大和田常務等の人物画像は権利関係が怖いので、こちらでは削除してあります ^^; 発表中のツイートをこちらにまとめてあります。 「怖くないScala」勉強会での「Scala決裁の通し方」発表中Tweet - Togetter 思ったてた以上にウケたみたいで、とても良かったです。 日経コンピュータの「奇跡のJAVA」特集で取材されたメンバーを中心にというコンセプトだったので登壇しました。しかし、本来であれば怖くないようにScalaを是非教えてもらいたい立場なので、発表内容には悩みました。結局、私の立場的にScalaに貢献できることといえば、エンタープライズに絡めた話だろうということで、エンタープライズな大人の人達にど
#RaspberryPi で愛猫の定点監視ガジェット「トイレにゃう」を作りました - TEPPEI STUDIO
身内では私の猫狂いはよく知られているところですが、とうとう我が家の愛猫達を定点監視するガジェットを作ってしまいました。その名も「トイレにゃう」です！この記事ではそのノウハウを少し紹介したいと思います。 何故作ったか 一昨年の震災では、TwitterなどのSNSが安否確認に有効だったという声が多く聞かれました。震災をきっかけにTwitterやFacebookを始めた方も多いと思います。当時、私も妻もTwitterをやっていたのですぐにお互いの安否確認がとることができ、ひとまず安心しました。しかし、二人とも出勤中であったため、家の様子が分からず、猫達の様子が心配で四苦八苦しながら家路を急ぎました。 幸いにも、家も猫達も何も問題は無かったのですが、今後のことを思うとなんとかしたいなと考えるようになりました。「猫達もTwitterしてくれればいいのに…」「..させちゃおう！」というのが発想の元です
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
