こんにちは！エンジニアの瀬尾です。 今回は私達がどのようなやり方でプロタクトを開発しているのか 実際のリアルタイム解析基盤サービスのアーキテクチャを交えて紹介します。 構成図 今回のインフラはすべてAWSのサービスを利用して構築しました。 IaaSとマネージドなサービスの組み合わせにより開発・運用コストを削減しています。 各レイヤやサービス構成は management UI:S3 + CloudFront Job:SQS ストレージ:RDS(MySQL) サービス利用者の管理画面レイヤです。 UIはAngulerJSのSPAがS3に配備されていて、CloudFrontにより配信されています。 Rename Distributionパターンによってエッジサーバーのキャッシュタイムアウトにかかわらずデプロイ時に最新のUIが配信される仕組みになってます。 UI背後のアプリケーションおよびJob(

こんにちは！クラウドプロダクト部所属の瀬尾です。 今回は、わたしたちのプロダクト開発がどのような指針やフローで行われているのかをお話したいと思います。 ワークフローの概要については以下のような感じになります。 わたちたちの開発ワークフロー 開発の指針：Lean リーンの原則の中でも特に「人を尊重する」に大きな重みを置いています。 理由は、わたしたちの開発チームは東京、京都、上海と3つの地域に分散しているので 非同期ベースでのコミュニケーションが多くなりがちだからです。 そのため、「見える化」や「情報の分散型(透過性)」により誰か1人、または少数の人しか 情報を知らないという単一障害点を無くし、チーム全体で状況が共有できるようにしています。 情報は見たくなくても嫌でもHipChatのターミナル上に飛び込んでくるので、 チームで問題に気づき改善していく見える化のサイクル作りに役立っています。

Football LABのデータを元にMF登録の選手をグループに分類してみました。 サッカーをデータで楽しむ | Football LAB［フットボールラボ］ データセットはMF登録の全選手です。 柏レイソル 2013シーズンサマリー | Football LAB ～サッカーをデータで楽しむ～ データセットの抜粋 Players 出場先発出場時間攻撃パスドリブルクロスシュート守備 MF 14 中村 憲剛 29 28 2708 94.05 82.03 7.09 4.83 11.21 50.43 MF 8 柿谷 曜一郎 34 34 3201 74.82 55.29 14.52 5.01 40.76 8.34 まずは攻撃と守備を軸にして散布図でデータを要約してみます。 やや守備よりの傾向でしょうか。 左下に形成されているグループは怪我や実力不足などで出場機会の少ない選手たちです。 川崎の風間兄弟

「ビッグデータ」もう何度も耳にした用語ではないでしょうか？ では、具体的にどのように活用すれば良いのでしょう。 メディアプランの方法論で言えばDiscoveryやLook-alikeがありますが とにかくデータに触れてみて、分析をしてみる事が新たな発見の近道だと思います。 ということでMahoutでRandom Forestを試してみました。 ■環境 ・Hadoop ・Pig ・Mahout-0.7 ■Random Forestとは 多数の決定木を用いた集団学習により、他の分類(SVMなど)と比べ 高精度の分類・予測（回帰）を実現する機械学習アルゴリズム。 ようは多数の決定木を作成して、それぞれの決定木が出した答えを多数決して、 最も支持が多かったクラスに分類する手法です。 質問に「YES」か「NO」で答える診断テストが複数あって、その中で 1番多く当てはまった診断結果を最終の解にするイメ

『MarkeZine』が主催するマーケティング・イベント『MarkeZine Day』『MarkeZine Academy』『MarkeZine プレミアムセミナー』の 最新情報をはじめ、様々なイベント情報をまとめてご紹介します。 MarkeZine Day

Agile do IT ! に参加してきました。 http://dena.jp/recruit/open_seminar/agiledoit/ セッションが5つあり１つが50分あるので個々に纏めると 非常に長文になってしまうのでマスター・センセイのお言葉 「やり方はひとつじゃない」 に着目して個々のスクラムマスターが独自に工夫していた点について 「ふりかえり」という形で感想を書きたいと思います。 ■イテレーション#1 「Agile In a Nutshell」～ ざっくりわかるアジャイル開発 ～ Jonathan Rasmusson 氏(マスター・センセイ) ■ふりかえり 全てが英語、翻訳者無し、字幕的なものも無し。 でも英語が判らなくても大丈夫。 「アジャイルサムライ」を読めば全てが絵だけで理解できます。 アジャイルサムライ－達人開発者への道－ ↑これだけじゃ回し者みたいなので補足すると

サンプルコード import java.util.List; import org.apache.cassandra.thrift.Column; import org.apache.cassandra.thrift.ConsistencyLevel; import org.apache.commons.logging.Log; import org.apache.commons.logging.LogFactory; import org.scale7.cassandra.pelops.Bytes; import org.scale7.cassandra.pelops.Cluster; import org.scale7.cassandra.pelops.Mutator; import org.scale7.cassandra.pelops.Pelops; import org.scal