Sqoopの動作オプション（import編）
いや多分export編やcodegen編等々は書きませんが、、Sqoopのimportコマンド実行時のオプションについて。 SqoopはHadoop上でのデータのImport/Exportに最適化されており、特に実運用的にはHiveテーブルへのImport/Export機能が便利です。 この記事ではSqoopのRDBMS→HDFS/Hiveへのデータインポート機能について書きます。 ◯基本的な動かし方。 Sqoopの基本機能はコマンドラインツールとして用意されています。 ${SQOOP_HOME}/bin/sqoop import [options…] オプションに色々な設定項目を指定するのですが、このオプションの種類が多い・・・ http://sqoop.apache.org/docs/1.4.1-incubating/SqoopUserGuide.html#_syntax いくつかに分
hdfsにsqoopとembulkでmysqlからロードする手順 | takemikami's note
このエントリでは、Mac上でhdfsにmysqlからデータをロードする手順を記載します。 sqoopを利用する手順とembulkを利用する手順を示します。 Apache Sqoop: http://sqoop.apache.org/ embulk: https://github.com/embulk/embulk この手順の前提として、 homebrew及びjdk, hadoop, hdfsのセットアップは完了し、hdfsのnamendeは起動しているものとします。 hadoopとhdfsのセットアップについては、 以下エントリの「Hadoopとhdfsのセットアップ」を参考にしてください。 Mac上でのhiveセットアップ手順（mysql上にmetastoreを作成）: http://takemikami.com/2016/04/20/Machivemysqlmetastore.html
macで画面分割するなら「shiftlt」が超便利！！ - Aqua-Experience
2016 - 02 - 18 macで画面分割するなら「shiftlt」が超便利！！ ITスキル ITスキル-mac スポンサーリンク シェアする Twitter Google Pocket Line mac でsplitviewが出て久しいですが、私は使っていません。 なぜならショートカットキーで画面を操作できないからです。 windows なら画面分割のショートカットキーあるんですよ。 それぞれでのやり方を紹介しましょう。 windows の場合 windows だと最初からその機能が入っています。 まず、 windows ボタン＋[→]キー を押してみてください。 どうです？ 画面が右半分に綺麗に収まりましたね。 違う画面を開いて今度は windows ボタン＋[←]キー を押してください。 最初にやったほうが右に来て、次にやったほうが左にきましたよね。 これで二つを見ながら作業が
【Scala】列挙型を使おう | DevelopersIO
はじめに 列挙型（Java の enum）を使いたいなあ。あれ、でも enum キーワードが無いみたいだぞ。 Scala を使いはじめた Java プログラマにとってはあるあるだとおもいます。 Scala で列挙型を表現する方法には、大きく分けて シールドクラス と Enumeration の二種類があります。字面だけを見ると Enumeration に飛びつきたくなりますが、一般的な用途には シールドクラス が多く使われます。今回はこのシールドクラスを使って列挙型を表現する方法を探っていきましょう。 目次 シールドクラスを使ってみよう sealed / case object による列挙型 値を持った列挙型 まとめ シールドクラスを使ってみよう シールドクラス は、次のように定義します。 sealed abstract class Idol sealed 修飾子がつけられたクラスは、同一
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
