タグ

ブックマーク / takahi-i.hatenadiary.org (1)

  • Hadoop: 自作クラスのシリアライズ方法 - takahi-iの日記

    以前 Hadoop におけるオブジェクトのシリアライズの仕方について述べました。その際、ArrayWritable オブジェクトをシリアライズして HBase に登録する簡単なサンプルプログラムを紹介しました。 Hadoop には, ArrayWritable, IntWritable や Text のように Hadoop ライブラリに存在する Writable クラスの使用方法だけでなく、Writable インターフェースを拡張して自作オブジェクトをシリアライズする例が載っています。このテクニックを使うことで HBase や HDFS に自作オブジェクトをシリアライズして追加することができ、必要になった際は、(テキストからオブジェクトを生成するよりは)高速に取り出すことができます。 勉強のために、前回作った '図書館' の例を下敷きにして、自作クラスの Writable クラス (Us

    Hadoop: 自作クラスのシリアライズ方法 - takahi-iの日記
  • 1