タグ

2014年6月19日のブックマーク (3件)

  • HBase Applications - Atlanta HUG - May 2014

    HBase is good a various workloads, ranging from sequential range scans to purely random access. These access patterns can be translated into application types, usually falling into two major groups: entities and events. This presentation discussed the underlying implications and how to approach those use-cases. Examples taken from Facebook show how this has been tackled in real life.Read less

    HBase Applications - Atlanta HUG - May 2014
  • これから始める「DockerでかんたんLAMP環境 for CentOS」 | さくらのナレッジ

    昨年からImmutable Infrastructureという言葉が出始めて、サーバーを簡単に作って壊すという潮流が出始めました。また、サーバー管理を簡単にするツールとしてDockerというものが脚光を浴びており、いまどきのサーバー管理者に受け入れられてきました。 今回は、そのDockerをインストールしてLAMP環境を構築するステップを見ていきたいと思います。 Immutable Infrastructureとは? IaaS型のクラウドやVPSの台頭によって、簡単に仮想サーバーが立ち上げられる環境が整ってきました。 とはいえ、サーバーの立ち上げをするのはシステム構築時と、システム規模を大きくする時に限られ、サーバーの動作を変えたり、アプリケーションのアップデートをするときは、稼働しているサーバーの中身を修正するというのが従来のやり方でした。 しかしImmutable Infrastruc

    これから始める「DockerでかんたんLAMP環境 for CentOS」 | さくらのナレッジ
  • hadoopアドベントカレンダー2011 19日目 Hadoopのラック認識設定部分のソースを追いかけてみた - AOEの日記

    hadoopアドベントカレンダー2011の19日目を担当する@aoetk / id:aoe-tkです。 業務でHadoopのラック認識設定を行う必要に迫られ、そのときに調べたメモを公開したいと思います。 Hadoopはネットワークトポロジーを考慮して動くことはよく知られていることでしょう。("rack awareness" である言われることが多いです) 次のような挙動を行ったりします。 MapReduceのタスクをノードに配置する際、ラック間の転送よりもラック内の転送を優先させる HDFSは特定のラックに偏らないような複製を行う ただし、どのノードがどのラックに所属しているか、といった情報は外部から教えてあげる必要があります。 Hadoopはインターフェース DNSToSwitchMapping の resolve メソッドを用いてノードのネットワークロケーション情報を取得します。 この

    hadoopアドベントカレンダー2011 19日目 Hadoopのラック認識設定部分のソースを追いかけてみた - AOEの日記
    s-wool
    s-wool 2014/06/19
    “以上から、最初の疑問のうち、「スクリプトはどのタイミングで呼び出されるの?」について答えが分かりました。 NameNodeの初期化処理 NameNodeに対して新たなDataNodeを登録するとき JobTrackerに対して新たなTaskTrackerを登録す