タグ

2015年6月20日のブックマーク (2件)

  • リアルタイムなデータ分析をする分散OLAP「Pinot」をLinkedInがオープンソースで公開

    LinkedInは、同社が開発したリアルタイムデータ分析を実現する分散OLAPデータストア「Pinot」をオープンソースで公開したことを明らかにしました。 Open Sourcing Pinot: Scaling the Wall of Real-Time Analytics | LinkedIn Engineering LinkedInはビジネスに特化したソーシャルメディアサービス。 同社はこのサービスで発生する大量のデータを分析するプラットフォームとして、すでに2年以上Pinotを運用してきており、日々数十億件のデータを投入し、数千億件ものデータを保存。毎日1億クエリを実行し、10ミリ秒程度のレイテンシでリアルタイム分析しているとのこと。 例えば、LinedInのサービスである「Who's Viewed Your Profile」(あなたのプロフィールを誰が見たか」や、A/Bテストフレ

    リアルタイムなデータ分析をする分散OLAP「Pinot」をLinkedInがオープンソースで公開
    msykt
    msykt 2015/06/20
    “毎日1億クエリを実行し、10ミリ秒程度のレイテンシでリアルタイム分析しているとのこと。”
  • 【アップデート】S3の一貫性に変更があります | DevelopersIO

    ウィスキー、シガー、パイプをこよなく愛する大栗です。 日のアナウンス(要ログイン)で、S3の一貫性に一部変更があることが発表されました。変更があったのは"US Standard"という聞きなれないリージョンとなります。 リージョン=US Standard? S3に詳しい方はご存知かと思いますが、S3のリージョンにバージニア(us-east-1)が存在しません。替わりにUS Standardというリージョンがあります。歴史的経緯もあるのだと思いますが、s3.amazonaws.com(バージニア北部または太平洋岸北西部)とs3-external-1.amazonaws.com(バージニア北部のみ)の2箇所のエンドポイントが使用できます。 何が変わったの? US Standardは一貫性が他のリージョンと異なっていましたが、他のリージョンと同じ整合性モデルが使用できる様になりました。変更点は

    【アップデート】S3の一貫性に変更があります | DevelopersIO
    msykt
    msykt 2015/06/20
    ようやく全リージョン同じ仕様になったか。どういう経緯でUS Standardだけ違ってたのか裏話聞きたい