AWS Glue DataBrew 基本用語解説と入門チュートリアル実践まとめ | DevelopersIO
先日、AWS Glueの新機能としてリリースされた「AWS Glue DataBrew」。 「コードを書かずに”データ前処理”を作成・実行可能」な機能、という触れ込みでしたが、ドキュメントには一連の操作や機能を確認出来る「チュートリアル」も用意されています。 Getting started with AWS Glue DataBrew - AWS Glue DataBrew そこで当エントリでは、公式ドキュメントで紹介されているチュートリアルを実践していく上で必要となる用語の理解、及びチュートリアルの実践内容について紹介していきたいと思います。(※なお、チュートリアル本編を試してみたところ、画像キャプチャと情報量が半端無いボリュームになってしまったので、チュートリアル実践内容については章毎にエントリを分けて展開しています。ご了承ください) 目次 AWS Glue DataBrewの基本概念
企業秘密は国を挙げて守れ…特許庁が警察庁、経産省所管機関と連携して産業スパイ、サイバー攻撃対策（1/2ページ）
産業スパイやサイバー攻撃による情報流出が企業の社会問題になるなか、特許庁が平成２７年２月、初めて警察庁と経済産業省の所管機関と連携して企業の営業秘密（ノウハウ）を保護する体制を整備することが、分かった。被害情報を警察当局と共有して迅速な捜査着手につなげ、サイバー攻撃の疑いが浮上すればネットワーク技術を持つ専門家、ホワイトハッカーを派遣する。政府機関が営業秘密データを暗号化して保管する「金庫番」制度づくりにも乗り出し、競争力の源泉となる知財を国を挙げて守る仕組みを構築する。 特許庁が、警察庁や経済産業省所管でサイバー対策の調査などを手掛ける独立行政法人「情報処理推進機構（ＩＰＡ）」と連携。各都道府県に駆け込み寺の位置付けの窓口計５７カ所を開設し、２月２日に受け付けを開始。知財問題に詳しい企業ＯＢや弁護士が企業の営業秘密の流出などの相談に無料で応じる。 元社員が高額報酬や好待遇などの見返りに故
大規模データを確実にMySQL/Redshiftに入れる—Treasure Dataのクエリ結果書き出し機能の実装 - Qiita
こんにちは。古橋です。今日はいつものはてなブログから趣向を変えて、QiitaでTDアドベントカレンダー14日目の投稿です。 Hiveのクエリ結果をRDBに書き出したい MapReduceはメモリに収まりきらないデータをJOINしたり集計したりできる信頼性の高いアーキテクチャですが、どうしても1発のクエリを実行するのに時間がかかるので、人間がいじりながら使う可視化ツールに直接繋ぎ込むには向いていません。 そこで Prestoを使って集計する 方法もありますが、やはりMapReduceの方が向いているケースもあります。例えば、 Webサイトに一度は来てくれたのに、その後１週間アクセスのない人が、最後に見ていったページはどこだろう？ 過去にアイテムAを買った人が良く買っている別のアイテムは何だろう？ （バスケット分析のクエリ例） といった、巨大テーブル同士のJOINや自己結合が必要なケースは、や
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
