Hadoopファミリーの人気投票 - Tech-Sketch
といってもロゴのはなし。 kkawamuraさんの Hadoopと愉快な仲間たち ～おなじみのキャラクターを集めてみた～ にも さてHadoopを使っている人が、みんな口を揃えて言うのが「ロゴ（キャラクター）がダサイ」ということです。果たして本当にそんなにダサいのか と書かれていたり、Twitterなんかでもそういう空気。 そうなの?!Hadoopは結構かわいいよ! 援護射撃を期待して、社内SNSで聞いてみました。その結果は、、、 ほらほら! Hadoopけっこう人気あるじゃない! とはいえ、その理由は：あえて選ぶなら イラッとくる。でもたぶんそこがいい。長く見てたらきっと愛着が沸く。憎しみも沸きそう。 見慣れたからかも 叩かれてますが結構好きです。微妙な動きが描写されてますがどの部位がどう動いてるのか不明で、それがまたいいと思います。 やる気のなさそうなところがいい メジャー
LINE DEVELOPER DAY_2015 Tokyo
当イベントは沢山のエンジニアの皆さまにご来場いただき、盛況の内に終了いたしました。資料とスライドを公開しておりますので各トークの詳細からご覧ください。 ABOUT コミュニケーションアプリ「LINE」は世界230以上の国と地域にグローバルでサービスを展開しています。 １日に100億件以上のメッセージが飛び交い、60を超える関連サービスを提供、O2O・決済・エンターテイメント・デジタルコンテンツ・マーケティングなど、様々な側面を持つプラットフォームとして成長が加速しています。 そのような加速し続けるプラットフォームにおいて我々は、いままで経験したことのないような様々な技術的課題に直面しています。そしてこれらの課題は、LINEだけでなく広く様々なサービスにおいても共通するものが多いと感じております。 LINE DEVELOPER DAY_2015 Tokyo では、弊社エンジニアチームの様々な
HTraceによるHBaseのトレーシング - iwasakimsの日記
(この記事は、Hadoop Advent Calendar 2013の10日目の記事です) 並列分散処理の解析 HadoopやHBaseのような並列分散環境では、処理が多数のノードをまたがって実行されるために、トレーシングや性能のプロファイリングが難しくなります。各ノードで動作するサーバプロセスのロジックでは、他のノードにRPCで処理を依頼して結果を非同期に待つというパターンが多いため、CPUやネットワークのディスクのI/O帯域といったリソースを使い切る状況にはなりにくく、oprofileのようなプロファイラを利用して測定してみても、ボトルネックの手がかりがなかなか見つかりません。 そのような並列分散処理のトレーシングに利用しているツールとしてGoogleが発表したのがDapperで、例によってそれを参考にして作られたオープンソース実装としてHTraceがあります。HBaseのtrunkに
HBase 0.96 で導入される新しいコンパクション「Exploring Compaction」 - 科学と非科学の迷宮
Hadoopアドベントカレンダー2013、3日目を担当する @shiumachi です。 今回は HBase 0.96 の新機能を一つ紹介します。 要約 HBase 0.96 は賢くなったのでみんな使おう。 コンパクションのおさらい HBase では、Log Structured-Merge tree (LSM-tree) というデータ構造を使っています。 LSM-tree を簡単に説明すると、入力されたデータをログとメモリ上のデータストア(Memstore、メモリストア) に書き込みます。 メモリストアがいっぱいになると、まとめてディスクにフラッシュし、新しいストアファイルを生成します。 このストアファイルがたまってきたときに、少しづつ一まとめにしてなるべくファイル数を少なくするようにします。これがコンパクションです。 コンパクションを実行することにより、ファイルは一つにまとまります。こ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
