Lexemetech
MapReduce is a programming model for processing vast amounts of data. One of the reasons that it works so well is because it exploits a sweet spot of modern disk drive technology trends. In essence MapReduce works by repeatedly sorting and merging data that is streamed to and from disk at the transfer rate of the disk. Contrast this to accessing data from a relational database that operates at the
Protocol Buffersは遅い - Blog by Sadayuki Furuhashi
Google の Protocol Buffers は、同技術と競合するバイナリシリアライズ形式である MessagePack と比べて、場合によっては 19倍 以上遅く、シリアライズ後のデータサイズは 7倍 以上になることがあります。平均的に見ると MessagePack の方が高速であり、高い性能が必要とされるなら Protocol Buffers より MessagePack を選択するべきです。 …とはいえどちらも非常に高速なので、実際にはそのAPIの違いで選んだ方が良い。Protocol Buffers と MessagePack は重視している点が異なり、使い勝手は大きく異なる。 Protocol Buffers とは何か Protocol BuffersはGoogleが開発したバイナリエンコード手法で、以下のような要素が提供されます： データフォーマットを記述するための言語（
Google Protocol Buffer - hidemonのブログ
Google Protocol Buffer というものが公開された, とGoogleのブログに出ていたので, ちょっと調べてみた. プロジェクトのホームページはこちら. そもそもなんなのか? 多言語対応のシリアライザ, デシリアライザだと思えばまちがいないだろう. つまり, オブジェクトなどの構造データをバイト列に変換したり, バイト列から構造データに変換する機能である. Javaなら標準でSerializeできるし, Pythonでもpickleすればいいんだけど, これらは言語固有のフォーマットなので, たとえばJavaで書き出したものはPythonでは読み込めない. またこれらの機能は, 言語のrefrectiveな機能を使って実装されているので, そういう要素に乏しいC++では非常に実装しづらい. 最近C++まわりを勉強していないので, ひょっとしたらあるのかもしれないけど. G
Big Sky :: GoogleのProtocol Buffersをpython,cpp,java、一気に遊んでみる
遅ればせながらGoogle Protocol Buffersで遊んでみました。 protobuf - Google Code Protocol Buffers are a way of encoding structured data in an efficient yet extensible format. Google uses Protocol Buffers for almost all of its internal RPC protocols and file formats. まず、インストールは以下の様に行いました。なおprotobufを展開したフォルダは以下のフォルダ。 C:¥temp¥protobuf-2.0.0beta¥ cpp版のインストール 展開したフォルダのvsprojectsフォルダにある"protobuf.sln"をVisual Studioで開きRele
Big Sky :: perl版のGoogle Protocol Buffers、「protobuf-perl」で遊んでみる
perl版もあったんですね。 Perl App Engine状況報告、Protocol BufferのPerl対応 | エンタープライズ | マイコミジャーナル Perl App Engineに関連したコードベースにはおもに次の3つがある。 Perl App Engine Perl XS module Sys::Protect Protocol Buffers for Perl http://journal.mycom.co.jp/news/2008/07/29/042/index.html protobuf-perl - Google Code Protocol Buffers for Perl. http://code.google.com/p/protobuf-perl/ さっそく遊んでみました。 まず、protobuf-perlはオリジナルの改造として作られており、スケルトンクラス
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
