Hadoopリンクまとめ(2) - 科学と非科学の迷宮
Part1 / Part2 2010/05/31 までにブックマークしたものをまとめました。 注: Part1 も大分更新してますので興味のある方はそちらもご覧ください。 更新情報 2010/06/20 新規追加 HBase、Mahout、Cassandra、開発、構築、Streaming、Hive、Cloudera、Zookeeper Part1より移動 Pig、EC2、MapReduce、HDFS HDFS Hadoop DFS _ Introduction | Agile Cat --- in the cloud HDFSアーキテクチャに関するドキュメントの翻訳。 Hadoop DFS Architecture_1 | Agile Cat --- in the cloud "データ･アクセスにおける遅延を低減するというより、データ･アクセスにおけるスループットを高めることに注力されて
tetsuro-memo: HBase Architecture
2010年6月11日金曜日 HBase Architecture HBase Architecture 101 - Storage (Lars George Oct 12, 2009) の一部を日本語に訳してみました。間違いがあるかもしれませんがご容赦ください。 ● 概略 HBaseは基本的に2種類のタイプのファイルを制御します。 1つはwrite-aheadロギングのためであり、もう一方は実際のデータ格納のためです。 ファイルは主にHRegionServerによって制御されます。 しかしいくらかの場合にHMasterも低レベルのファイル操作を行う必要があります。 HDFSの中に格納される際、実際のファイルはより小さなブロックに分割されます。 これはシステムがより大きなデータもしくは小さなデータをより良く制御するのをユーザが設定できる部分です。 全体の流れとしては、クライア
HMaster Japan
2010年6月1日火曜日 HBase について、今後 回答していきたい質問など Hadoop ソースコードリーディングの際に、主に Twitter タイムライン上で見かけた HBase に関する質問・疑問点をリストアップしました。今後、少しずつ回答していきますので、よろしくお願いします。（回答の順序は多少前後するかもしれません） Java VM のガベージコレクション（GC）の挙動が、リアルタイム性能に影響を与えたりしないでしょうか？ HDDの代わりにSSDを使うと random read の性能は向上しますか？ Big Dataとはどういうものを指しますか？ → @yutuki_r さんからの補足： Fat、Wide、Wide&Sparse、Tallという分類法 リージョンのサイズはどのくらいに設定されていますか？ NULL値がディスクスペースを消費しない(?) のはなぜですか？ 追
HBaseメモ(Hishidama's HBase Memo)
HBase(エイチベース)は、GoogleのBigTableを元にしたオープンソースの列指向分散データベース。（リレーショナルデータベース（RDB）ではない） Javaで作られており、Apache HadoopのHDFSを使用して稼動する。その為、Hadoopとの親和性が高いと思われる。 インストール 初回設定 [/2010-08-07] 擬似分散環境 [/2010-07-06] hbase-site.xml [/2010-07-25] HBaseの起動・停止方法 テーブル操作サンプル テーブル構造の考え方 HBase Shell HBase0.20 [/2010-07-12] HBase0.89 [2010-07-12] Javaプログラミング [/2012-04-28] Map/Reduceサンプル [/2012-04-28]
JavaからHbaseをネットワーク越しに使う
☆☆☆★★ (2) AMD (13) Android (5) Asteria (11) AWS (7) Azure (1) boto (2) botocore (1) bottle (2) Camera (5) Cassandra (7) CentOS (1) Chromium (1) Cloud (43) CrystalArmor (1) css (7) DIGNO (1) EC2 (10) ESXi (5) Firefox (1) Fluent (1) GAE/J (1) github (1) Go (1) Google (16) Google+ (2) Hadoop (2) Hardware (29) HBase (13) Intel (1) iSCSI (1) Java (6) JavaScript (10) json (1) KVM (1) Linux (37) Nagios (
Cygwinを利用してWindowsにHBaseをインストール - Stay Hungry. Stay Foolish.
HBaseは列指向DBMSで大規模分散処理に特化しているDBMSです。 大規模なデータ容量になってもパフォーマンスの劣化がおきにくいのが特徴で、 次世代のデータベースとして注目されています。 ここではHBaseをWindowsXPマシンにインストールする方法について記述します。 RDBMSとHBaseの違いをお手軽に?確認したいという方にお勧めです。 環境 HBaseをWindowsで利用するにはJDK6/Cygwin/SSHサービスが必要となります。 環境は2010-02-01時点の最新バイナリを利用しました。 WindowsXP Professional SP2 HBase-0.20.3 http://www.apache.org/dyn/closer.cgi/hadoop/hbase/ JDK 6 Update 18 http://java.sun.com/javase/ja/6/d
HMaster Japan: HBase入門 - 5月27日発表
2010年5月30日日曜日 HBase入門 - 5月27日発表 Hadoop ソースコードリーディング（第２回）にて、HBaseを紹介しました。 HBaseの特徴 ユースケース（事例紹介） 当日は80名を超えるHadoopファンの方々にご来場いただきました。最後まで熱心に聞いていただきありがとうございました！ 参考：当日の Twitter まとめ 次回以降は、以下の内容を予定しています。 【６月】HBaseとCassandraの比較（設計上のトレードオフを理解する） 【７月】HBaseでつまずきやすい点と、ロードマップ（次期メジャーリリースの紹介） スライドは事前に公開する予定です。実は、英語・日本語版共に下書きはできていて、HBaseの開発リーダーのレビュー済みなんです。 ただ、会場で、Cassandraの開発チームにもレビューしてもらうと、より充実したプレゼンになるのでは？と
HBaseメモ(Hishidama's HBase Memo)
HBase(エイチベース)は、GoogleのBigTableを元にしたオープンソースの列指向分散データベース。（リレーショナルデータベース（RDB）ではない） Javaで作られており、Apache HadoopのHDFSを使用して稼動する。その為、Hadoopとの親和性が高いと思われる。 インストール 初回設定 [/2010-08-07] 擬似分散環境 [/2010-07-06] hbase-site.xml [/2010-07-25] HBaseの起動・停止方法 テーブル操作サンプル テーブル構造の考え方 HBase Shell HBase0.20 [/2010-07-12] HBase0.89 [2010-07-12] Javaプログラミング [/2012-04-28] Map/Reduceサンプル [/2012-04-28]
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
20090713 Hbase Schema Design Case Studies
HBase At Meetup