Hive dynamic partition insertsにまつわるいくつかの問題と対処について - たごもりすメモ
だいぶ前のHiveの機能準拠で作ってたクラスタを大幅に作り直したので、ついでにETL処理をdynamic partition inserts一発でやればMapReduce 1ジョブで済んで超効率的に！ やった！ と思ったらいくつかハマったのでメモ。 なおdynamic partition insertsについては説明が面倒なので公式Wikiの該当ページを読むとよい、が、簡単に言うとHiveでパーティションにINSERTするときにINSERT先のパーティション指定をSELECTクエリの出力により行う、というもの。 なお断りがない限りは HDP2.1 with Hive 0.13 の環境で試したものとする。(移行元はCDH4) クエリの書き方 単純に言うと、パーティションとして指定したいカラムは SELECT 句の最後に置かなければならない。 簡単に言うと year=INT/month=INT
StrongLoop | Deploying Multiple Node.js Apps with strong-pm.io
We recently introduced Strongloop Process Manager and how to build, deploy and manage your processes in production. Since then, StrongLoop has been working to take StrongLoop PM to its its next level. In our series of ongoing incremental improvements, here is the newest addition: the ability to deploy multiple apps with process manager to handle real-world deployment scenarios. While conceptually
ブラウザベースのコールセンターシステム「Talkdesk」が1,500万ドル調達ほかーー要チェック！エンタープライズ系話題5選 - BRIDGE（ブリッジ）テクノロジー＆スタートアップ情報
ブラウザベースのコールセンターシステム「Talkdesk」が1,500万ドル調達ほかーー要チェック！エンタープライズ系話題5選 編集部注：「要チェック！エンタープライズ系話題5選」は海外エンタープライズ系テクノロジーの話題をまとめた連載。本誌でも執筆中の「インプットをアウトプットするブログ」ブロガーで、B2Bスタートアップ・インキュベーション「archetype」所属の鈴木大貴氏がセレクトしたニュースをお送りします。 EメールトラッキングのYeswareが1,330万ドルを調達 Eメールのトラッキングサービスを開発するYeswareがGoogle Venturesなど既存の投資家を中心にシリーズCで1,330万ドルを調達しました。Yeswareは顧客に送信したメールがいつ開封されたのか、添付ファイルは開いたか、リンクはクリックされたのか、といった情報を分析できるサービスを主に企業の営業やマ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
