現在アクセスされている地域のサイトをご覧頂いております。特定の地域のコンテンツをご覧になりたい場合は、ご希望の国をお選びください。
Extract/Transform/Load(略称:ETL)とは、以下のようなデータフローを指す。 Extract - 情報源からデータを抽出 Transform - 抽出したデータをビジネスでの必要に応じて変換・加工 Load - 変換・加工済みのデータをターゲットシステムやファイルとしてロード ETLという用語はデータウェアハウスでのデータのロードだけでなく、任意のデータベースでのロード工程を指すこともある。ETLはレガシーシステムとモダンシステムのデータ統合にも使われる。通常のETL実装は、処理についての監査証跡を記録する。 抽出 (Extract)[編集] ETL工程の第1の部分は、情報源となるシステムからデータを抽出することである。たいていのデータウェアハウス構築では、複数の情報源からデータを集積する。個々の情報源はデータの構成やフォーマットが他とは異なる可能性がある。典型的な情
こんにちは、今回のブログ担当 高橋です。 本題とは逸れますが、ビッグデータに関連するトレンドとして、M2M(Machine to Machine)やIoT(Internet of Things)と呼ばれる技術があります。 SIOSビッグデータチームとしても、これらの技術によって大量に収集されるデータには注目しています。 これらの技術を個人で実現可能なプログラマブルデバイスとして、ArduinoやRaspberry Piが普及してきています。 特に、Arduinoは、接触センサや赤外センサなど各種センサを実装でき、なおかつBluetoothやZigBeeなどの通信モジュールの実装も可能です。 例えば、複数台のArduinoを組み合わせて自宅内センサネットワークを構築し、日常生活の見える化ができたら楽しそうですね。 こうしたビッグデータを生み出す様々なアイデアを実現するために、私たちも日々、ビ
こんにちは、三回連続でSSTDの大村です。1年の半分がすぎてもう7月ですね。私事ですが、弊社の社屋移転まで10日あまりとなりました。各種説明会、片付けなどで社内がばたばたしています。当たり前のように通勤していたオフィスですがあと10日で別の場所になるのかと思うと急にセンチメンタルな気分になります。 前回までウェブインターフェースであるBigQuery BrowserからBigQueryを操作していましたが、コマンドラインから操作するためのbq Command-line Toolも用意されています。このbqはpythonベースのツールになっています。今回はbqの設定をし、簡単なコマンドの入力までを紹介します。 ローカル環境 OS:Windows8 Pro 64bit CPU:Intel Core i7 2.00GHz RAM:8GB インストール Linuxなどの環境ではできる方が多いと思い
こんにちは。SSTD 手塚です。 今回が二度目の投稿です。 青いウサギのアイコンが目印です。全く関係のない自己紹介です。 それはさておき、そろそろお盆も近くなり皆様夏休みなど取られている頃でしょうか。 いいですよね、夏休み。 欲しいです。夏休み。 いや、近々取りますけどね? 私はビールがあまり飲めません。大村より夏らしい写真を頂きました。セミナーに行った際に出てきたみたいです。 そんな含みを入れたところで今回のブログについてです。 【夏休み】ということも考えてこの空いた時間を家族サービスに利用するという方もいる一方、 何か新しい技術を触ってみようという人もいるかと思います。 そこで、今回はブログタイトル通り 「RedShiftの事始め」としてRedShiftを利用するまでの環境準備からサンプル実行までを さくっとブログとして掲載しようと思った次第です。 SSTDの人間なんだからTreasu
Tableau を使う理由 Toggle sub-navigation Tableau とは データカルチャーの構築 Tableau Economy コミュニティ Salesforce Advantage Tableau のお客様 Tableau について Toggle sub-navigation ミッション 研究 受賞と称賛 Tableau Foundation Tableau における平等 採用 製品 Toggle sub-navigation プランと価格 Toggle sub-navigation Pricing Calculator Tableau プラットフォーム Tableau Pulse Tableau AI Tableau Desktop Tableau Server Tableau Cloud Tableau Prep CRM Analytics Tableau Pu
> 渋谷で肉を食らうならここ!極上ホルモンからシュラスコまで名店まとめLINE@編集部ざっくり言うと暑い日が続きますが、こんなときこそガッツリを肉を食べたいところです。渋谷エリアは本格焼肉からホルモン、そしてシュラスコまで名店揃い。焼肉屋「ざぶとん」は幻の尾崎牛が食べられることで知られています。 2014年07月14日16時00分 渋谷で肉を食らうならここ!極上ホルモンからシュラスコまで名店まとめ 美味しいお肉を食べたい時に限って、なかなか行きたい店を見つけることができないもの。そこで、LINE@編集部では選りすぐりの極上のお肉が食べられるお店を紹介します。今回は渋谷編ということで、本格焼肉からホルモン、シュラスコまで名店を集めてみました。 ■幻の牛「尾崎牛」が食べられる!『渋谷焼肉ざぶとん』 はじめに紹介するのが、『渋谷焼肉ざぶとん』。マークシティ近くにあるこちらのお店で提供している「尾
もう豆まきしましたか?比戸です。 1月17日に、エンジニアサポートCROSSで機械学習のセッションをオーナーとして主催させて頂きました。今回はその報告と内容のまとめをさせて頂きます。 エンジニアサポートCROSSは今年で3回目を迎える、主にWeb系のエンジニアが集まる技術イベントで、今年も800人以上が集まったそうです。すごいですね。 並列開催されるパネルディスカッションを基本とするイベントで、有名なWeb関連サービスを持っているわけではないPFIの私がオーナーということで、持てる人脈をフル活用してパネリストをお願いしたところ、お声がけした方全員にご登壇いただけることになりました。 Yahoo!JAPAN研究所 田島さん 楽天技術研究所 平手さん ALBERT 小宮さん FFRI 村上さん 産総研 油井さん Gunosy 福島さん 大手Web企業から尖ったサービスの会社、アカデミア周辺まで
マーケティング分野において、ビッグデータの分析・活用は当たり前になりつつある。しかし、精度の高い分析を行うには高度なノウハウと技術力が必要なため、そこにハードルを感じる企業も多い。ソフトバンク・テクノロジーは、東京理科大学との産学連携プロジェクトによって実現した高度なデータサイエンスを自社のクラウドサービスに乗せ、一般企業向けのデータ分析支援サービスとして提供している。同社 イービジネスサービス事業部 Webインテリジェンス本部 データサイエンス部の江原圭司氏は、同社のユーザー会の中で、産学連携プロジェクトの概要と、データサイエンスの実務への適用事例を紹介した。 はじめに、データサイエンスとは、データに関する研究を行う学問であり、実務に使われ始めたのは、リレーショナルデータベースが普及し始めた1990年代である。当時は、「ビールを買う人は、同時に紙おむつを買う傾向がある」といった相関分析が
はじめに CSVファイルの中身を解析し、TreasureDataにimportするサンプルをRuby on Railsにて作成してみました。今回はTreasureDataの無料アカウントの作成と、importするサンプルソースについて書きたいと思います。 アカウントの作成 TreasureDataのページに行き、左の「製品」にフォーカスを当てると「今すぐ試す」というリンクが表示されます。この「今すぐ試す」リンクをまずはクリックします。 ページが遷移し、下のほうに赤字で「準備はよろしいですか?サインアップはこちらです。」のリンクがあるので、これをクリックします。すると以下のような画面が出るので、登録する情報を入力します。 全ての項目が入力必須のようですが、注意点は電話番号を国際電話番号にする必要があるらしいことです。「03~」で始まる電話番号を入力した所、エラーとなったので、日本を示す「+8
KDDIがスタートアップ企業と既存企業との連携を促進する「パートナー連合プログラム」を発足。新ファンドも設立し、100億円規模で投資を行っていく。 KDDIは7月14日、スタートアップ支援をさらに強化するため、ベンチャーと大手企業との連携を促進する「パートナー連合プログラム」を開始すると発表した。新ファンドも設立し、これまでのファンドと合わせ総額100億円規模の投資を展開。支援の拡大で、新サービスを迅速に市場に投入していく環境作りを目指す。 スタートアップ企業のアイデアや開発スピードと、既存企業の持つ技術や販路、人材などのリソースを掛け合わせ、イノベーション創出を加速する取り組み。これまで29社を支援してきたインキュベーションプログラム「KDDI∞Labo」第7期から運用する。 KDDIとともに対象チームのメンターとなってアドバイスを行う「メンタリング企業」として、コクヨ、セブン&アイ・ホ
For Sequoia Capital, ‘mobile tectonics’ is how it’ll find its next billion dollar company Join gaming leaders live this May 20-21 in Los Angeles to examine the strategies needed to adapt and excel in an ever evolving landscape, featuring insights from leading voices and thought leaders in the industry. Register here. SAN FRANCISCO —- When it comes to “mobile tectonics”, there are three layers. The
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く