Googleの虎の子「BigQuery」をFluentdユーザーが使わない理由がなくなった理由 #gcpja - Qiita
「BigQueryは120億行を5秒でフルスキャン可能」は本当か？ 先日、kaheiさんがGoogle BigQuery（Googleクラウドの大規模クエリサービス）について、こんなエントリを書いていた。 とにかくパフォーマンスがすごい。（Fluentd Meetupでの）プレゼン中のデモで、ディスクに収められた5億件のデータをSQLでフルスキャンするのに3秒しかかからない。9億件のデータを正規表現を含んだSQLでスキャンしても、7秒で終わる（これ、記憶がちょっとあいまい。もう少しかかったかも）。これには驚いた。佐藤さんがGoogleに入社して一番驚いた技術が、一般公開される前のBigQueryだったと言っていたが、その気持ちはわかる。 From Fluentd Meetupに行ってきました これを読んだ時、BigQueryの検索スピードについてちょっと補足したくなった。確かにFluent
グリー技術者が聞いた、fluentdの新機能とTreasure Data古橋氏の野心
fluentdのほかにもバイナリシリアライゼーションフォーマット「MessagePack」の開発などで知られる古橋氏だが、学生時代からその技術力の高さには定評があり、注目され続けてきたスーパーエンジニアでもある。 今回、fluentdのユーザーでもあり、古橋氏とは旧知の仲でもあるグリー 開発本部 リーダーの森田想平氏がインタビュアーとなり、fluentdにまつわるトピックや、トレジャーデータでの開発、オープンソースへの想いなどを訊いている。本稿では、その模様をお伝えしながら、“エンジニア・古橋貞之”の魅力に迫ってみたい。 fluentd v11の注目ポイント 森田 まずは、グリーでも大変お世話になっているfluentdについて、いろいろ聞かせてください。開発中の新バージョン（v11）では、かなり大きな変更や機能追加があると伺っていますが、注目ポイントをいくつか教えてもらえますか。 フィルタ
クックパッドや博報堂も愛用中！トレジャーデータ日本進出
5月20日、クラウド型ビッグデータプラットフォームを展開する米トレジャーデータは日本法人の設立を発表した。ビッグデータ界隈で有名な日本人3人が設立した米国ベンチャー企業として注目を集める同社が、いよいよ国内でも本格的にサービスを展開する。 ビッグデータ界隈で有名な日本人設立の米ベンチャー 米トレジャーデータはクラウド型ビッグデータプラットフォーム「Treasure Data Platform」を展開するシリコンバレーのベンチャー企業。レッドハットや三井ベンチャーズでの勤務経験を持つCEOの芳川裕誠氏、Hadoopコミュニティの中心メンバーであるCTOの太田一樹氏、そして分散インフラ基盤の「MessagePack」、ログコレクターの「Fluentd」を開発したソフトウェアアーキテクトの古橋貞之氏の3名によって2011年12月に設立された。米ヤフー共同創業者のジェリー・ヤン氏などの“大物”から
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
