83億レコードを移行し、日々2,500万レコードのアクセスログをBigQueryに記録している話（インフラ編） - Money Forward Developers Blog
こんにちは。 インフラエンジニアの村上です。 マネーフォワードのインフラチームは、サービスに関わるインフラから、自社の作業環境、開発環境、さらにはサービスのインフラの中でも物理的なものからOS・ミドルウェア・アプリケーションのメンテナンス・ビルド・リリース・運用まで幅広く関与しています。 今回はGoogle Cloud PlatformのBigQueryを活用してアクセスログの分析環境を構築した時の話を紹介します。 この記事に書かれる事 データ分析基盤としてBigQueryを使用した話と データ量を例示しながら使用を開始した時のトラブルシュートとパフォーマンスについて紹介する。 データ移行のコツもうまく含めながら書いていく。 BigQueryを採用した訳 マネーフォワードの家計簿は350万人以上のお客様に利用いただき、 アクセスログは日々2.500万件程度増えております。 サービス開始から
データサイエンティストを目指すというかデータ分析を生業にするなら読んでおきたい初級者向け5冊＆中級者向け12冊（2015年冬版） - 渋谷駅前で働くデータサイエンティストのブログ
(Photo via VisualHunt) 追記 2017年3月現在の最新書籍リストはこちらです。 最近になってまた色々とデータサイエンティストを目指す人向けのお薦め書籍リストとか資料リストとかが出てきてるんですが、個人的には何かと思うところがあるので僕も適当にまとめておきます。偏りありまくり、完全に主観で決めたリストなので文句が出まくるかと思いますが、もはや毎回のことなのでご容赦を。 なおこちらのリストはあくまでもビジネスの現場でデータ分析を生業にする（しようとしている）人たち向けのものであり、研究者含めたガチ勢の方々向けのものではありませんのでどうか悪しからずご了承下さい。 ちなみに毎回言ってますが、アフィリエイトは全くやっていないのでここに貼られたリンクを踏んで皆さんが購入されても僕の懐には一銭も入りません。拙著だけはそもそも例外ですが（笑）。*1 初級者向け5冊 一応初級者向けと
データ分析の目的は？データ分析５つのステップ『データ分析の教科書』髙橋 威知郎 - ビジネス書をビジネスのチカラに。書評ブログ
『データ分析の教科書』髙橋 威知郎 14のフレームワークで考えるデータ分析の教科書 作者: ?橋威知郎 出版社/メーカー: かんき出版 発売日: 2014/09/18 メディア: 単行本（ソフトカバー） この商品を含むブログ (1件) を見る データ分析 データの分析。 データが大切と言われたりしますが、それはデータ自体というよりも、データの分析が大切という意味でしょう。本書では、データの分析について取り上げています。 ▼ ここに注目 ▼ 「大切なのは、データ分析の結果に基づいて、どんなアクションにつなげるのかという点であり、アクションを実施して、売上や利益アップなど目に見える成果につなげていくことが、データ分析の真の目的です。」（p.23） データ分析の目的は、成果につなげること データ分析の目的は、行動につなげて、成果を上げることだそうです。 たしかに、ただ分析するだけでは意味がないで
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
