エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
Hadoop/hiveのバックアップとデータ移行 - わかった風のことを書くBLOG
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
Hadoop/hiveのバックアップとデータ移行 - わかった風のことを書くBLOG
なんだか最近Hadoop周りしか記事書いてない気もしますが、誰か見てるかもしれないという希望的観測のも... なんだか最近Hadoop周りしか記事書いてない気もしますが、誰か見てるかもしれないという希望的観測のもと、Hadoop/hive の組み合わせという多分一般的な構成の手動でのアナログ的なバックアップ手法、及びデータ移行についてメモっときます。 概要 HDFS の /user/hive/warehouse/ をLinuxファイルシステムのファイルとして保存 hive metastore のデータをダンプ 上記、2つをデータ移行先で復元する 手順 1. HDFS の /user/hive/warehouse/ をLinuxファイルシステムのファイルとして保存 hiveのデータはHDFS の /user/hive/warehouse/ に格納されてますのでこれをLinuxファイルシステム(ローカル)として抽出し、圧縮、またhiveのmetastoreも合わせてバックアップ $ hadoop fs