今回は、GitHub Actions Outputsについてまとめました。artifact同様使えて損はない技術なのだなと思います。でも必要になった時にじゃないと知る機会がないのが悩ましいところです。たまには公式リファレ […]
![SIOS Tech. Lab - エンジニアのためになる技術トピックス](https://cdn-ak-scissors.b.st-hatena.com/image/square/14ddd4cf8e3ebc79d858ee6816a1e1b93d9951c9/height=288;version=1;width=512/https%3A%2F%2Ftech-lab.sios.jp%2Fwp-content%2Fuploads%2F2018%2F05%2Fsios_tech_lab_image.png)
はじめに CSVファイルの中身を解析し、TreasureDataにimportするサンプルをRuby on Railsにて作成してみました。今回はTreasureDataの無料アカウントの作成と、importするサンプルソースについて書きたいと思います。 アカウントの作成 TreasureDataのページに行き、左の「製品」にフォーカスを当てると「今すぐ試す」というリンクが表示されます。この「今すぐ試す」リンクをまずはクリックします。 ページが遷移し、下のほうに赤字で「準備はよろしいですか?サインアップはこちらです。」のリンクがあるので、これをクリックします。すると以下のような画面が出るので、登録する情報を入力します。 全ての項目が入力必須のようですが、注意点は電話番号を国際電話番号にする必要があるらしいことです。「03~」で始まる電話番号を入力した所、エラーとなったので、日本を示す「+8
*トレジャーデータはデータ収集、保存、分析のためのエンドツーエンドでサポートされたクラウドサービスです。 「Login(アクセス)ログからわかる12の指標 シリーズ」 その1,その2,その3,その4 クエリ内のTreasure UDFのリファレンスはこちら。 前回(その1)の続きです。 6. Frequency(リピート回数の分布) 特定期間におけるユーザー当たりの訪問回数の分布を見たものです。 SELECT uid, COUNT(1) AS cnt FROM ( SELECT uid FROM login GROUP BY uid ) T GROUP BY uid ORDER BY cnt 7. 継続期間の分布(単位:週) ユーザー当たりの最初のログインと最後のログインの差をとることで,ユーザーの継続期間の分布を見る事ができます。 SELECT CAST( play_term/7 AS
はじめに これから全7回に渡ってTreasure Data Platformを使ったデータ分析の紹介をします。教科書はこちらになります。 Treasure Data Intro for Data Enthusiast!! from Takahiro Inoue 本シリーズの目的は2つ。 Treasure Data Platform Service の概要を理解してもらう。 本シリーズを理解すればデータ分析が誰でも容易にレポーティングが可能になる。 今やデータサイエンティスト() という言葉は,高度な分析手法を駆使してあらゆる問題を解決するプロフェッショナル集団という響きがありますが,それは本質ではありません。データサイエンティストの本質は, 意思決定者(経営者,ディレクター,マネージャー)が容易に理解できるようなシンプルかつ説得力のある分析結果を提供することができること, データ収集からレ
MobFoxの事例: 14日間で月間600億件のインプレッションを裁く 約200台のPHPアプリサーバを管理、PHPから排出されるログ管理システムを作っていたが、非常に運用が大変な状態に。 TDagentをデータセンターにインストール、2行書き換えるだけでTreasure Dataにアップするように対応可能。 溜まったデータを1時間毎にサマライズしてMySQLに送るように。それらを用いてダッシュボードに情報表示 データをアノニマイズして利用、重要な情報のみローカルで管理。 Vikiの事例: Korean Drama, Taiwanese Drama, Anime and Telenovelas free online with subtitles. - Viki Viki;最近楽天に買収された、オンラインビデオサービス。 データ解析用にHadppを持っていたが、どうやってデータを集めていい
Treasure Data を使って開発者向けチャットアプリ AsakusaSatellite メッセージログの解析をしてみた - mallowlabsの備忘録のおかげで、日々のアクティビティがTresure Dataに登録されたので、いろいろクエリを投げてみました。 なお、タイトルの命名はid:mallowlabs氏です。 前提 対象としたのは、@mallowlabsさんや@suerさんたちと常にぐだぐだと会話している部屋です。 話題は、コーディングの話、アニメの話、旅行の話、グチなど多岐に渡ります。また、Jenkinsのビルド結果などを教えてくれるbotも住んでいます。 全メッセージ 時刻、曜日で発言回数をプロットしました。 ほぼすべての時間で発言がありますね。仕事しろよって感じがしますね。 ビルド回数 Jenkinsボットの発言もプロットしてみました。 仕事中のコードはAsakusa
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く