米Facebook、拡張性に優れたリアルタイム圧縮アルゴリズム「Zstandard 1.0」を発表 | OSDN Magazine
米Facebookは8月31日、新しい圧縮アルゴリズム「Zstandard（zstd） 1.0」を発表、オープンソースで公開した。モダンなハードウェアに合わせた拡張性を持ち、既存の「Deflate」に代わる存在となることを目指すという。 Zstandardは高速なロスレス圧縮アルゴリズム。「Finite State Entropy」と性能優先の設計を組み合わせており、モダンなハードウェアに合わせた拡張性を特徴とする。 速度と圧縮のトレードオフを設定でき、より小さく、高速に圧縮できるという。汎用のデータ圧縮技術と比較して5～10％の効率化が図れ、データ処理速度は2倍～3倍と報告している。展開速度はzlib 1.2.8と比較して2倍以上（Zstandard 0.8）とのことだ。 拡張性は、メモリ、ブランチレス設計などさまざまな面でzlibを改良することで実現した。たとえば、zlibのチャンクサ
Facebookが開発したPHPを超高速で実行する仮想マシン HipHop VM
FacebookがPHPをさらに高速に実行する技術について2012年11月に公開した記事が話題になっています。Facebookはサービスを高速に実行する為にPHPで書かれたスクリプトをC++に変換して実行する技術、HipHop(HPHPc)を開発して利用してきました。CPUの使用量を半分程度に抑えることができるこの技術は大きな注目を集めていました。 一方でHipHopはPHPのソースコードをコンパイルして実行するというステップが必要な事から開発から実行までの手順が増えてしまうという面もありました。この欠点を補うべく、実行時に変換を行なって実行するアプローチを模索していたのがHipHop VM(HHVM)です。この記事によると、このHHVMがついにHPHPcを上回るパフォーマンスを達成したとのことです。 sandboxと呼ばれる開発環境ではインタプリタとして実行可能なHipHop (HPHP
CNN.co.jp：「いいね」ボタン掲載サイトに罰金、ドイツの州で追随の動き
ベルリン（ＣＮＮ） ドイツ北部のシュレースウィヒホルシュタイン州が、インターネットの交流サイト、フェイスブックの「いいね」ボタンをウェブサイトに取り入れた企業に罰金を科すと表明した。ドイツでは個人情報の扱いをめぐってフェイスブックに対する風当たりが強まっており、８日には同国のフリードリヒ内相が同社幹部とプライバシー問題について協議した。 シュレースウィヒホルシュタイン州の罰金は州の情報保護当局が先月発表したもので、「いいね」ボタンをウェブサイトに取り入れた企業に対して５万ユーロ（約５４０万円）の罰金を科すと定めた。同ボタンの設置により、企業がフェイスブック利用者の個人情報を追跡できてしまうというのがその理由。ただし現時点で実際に罰金を徴収する意図はなく、プライバシー問題についてフェイスブックに再考を促すのが狙いだという。 同州には２０１０年以来、フェイスブックの個人情報の扱いについて苦情が
主人がFacebookアカウントを剥奪されて3週間が過ぎました - 最速転職研究会
http://ma.la/fb/ というのを書いたので、経緯と補足を書きます。 読むのが面倒くさい人向けに、ものすごく簡単に要約しておきます。 Facebookにはリンクを他人と共有するいいねボタン(likeボタン)というのがある。 Facebookの「ファンページ」なるものをつくると、いいねボタンを押したのが誰だか分かる機能がある。 ユーザーに気付かれないように細工したiframe内のボタンをクリックさせたりするクリックジャッキングという攻撃手法があり、いいねボタンを強制的に押させることが出来る これによって悪意のあるサイトは、訪問者のFacebookアカウントを特定することが出来る この手の問題はFacebookに限った話ではない。CSRFやクリックジャッキングで行われたアクションの結果が第三者から観測可能な全てのサービスにある。 例えば強制的にはてなブックマークさせたりはてなスターを
Facebook Messaging - HBase Comes of Age
Update: I want to thank Ben Black, Todd Lipcon, and Kelley Reynolds for pointing out the inaccuracies in the original post. I’ve gone through the references they provided and made corrections. Facebook, the data giant of the internet, recently unveiled a new messaging system. To be fair, I would normally ignore feature roll outs and marketing flimflam, but Facebook’s announcement is worthy of atte
Facebookが新サービスの基盤にしたのは、MySQLでもCassandraでもなく、HBaseだった
Facebookが15日に発表した新しいサービス「Facebook Messages」は、チャットやつぶやき、そして電子メールなど、自分宛のテキストやメッセージをすべて1つのインボックスで管理できると発表されました。 同社が15カ月かけて開発してきたこの新サービスのバックエンドデータベースは、これまで同社が大規模運用してきたMySQLでも、同社が開発したNoSQLデータベースのCassandraでもなく、グーグルのBigTableをモデルとしてオープンソースで開発された分散データベース「HBase」でした。 Facebookのソフトウェアエンジニア、Kannan Muthukkaruppan氏がFacebookにポストした記事「The Underlying Technology of Messages」で、その技術的背景が紹介されています。 MySQLとCassandraが落選した理由 H
TwitterはCassandraへの投資を続ける - stanaka's blog
先週後半ぐらいから、Cassandra関連で色々動きがあったので、まとめておきます。 一番注目されるTwitterのCassandraへの方針ですが、Twitterのエンジニアリングブログの記事で明らかにされています。 We're using Cassandra in production for a bunch of things at Twitter. A few examples: Our geo team uses it to store and query their database of places of interest. The research team uses it to store the results of data mining done over our entire user base. Those results then feed into thi
Facebookが大規模スケーラビリティへの挑戦で学んだこと（後編）～キャッシュが抱えるスケーラビリティの問題とデータセンターにまたがる一貫性
Facebookが大規模スケーラビリティへの挑戦で学んだこと（後編）～キャッシュが抱えるスケーラビリティの問題とデータセンターにまたがる一貫性 全世界で3億人を超える会員を抱え、世界最大のSNSとなったFacebook。同社の技術担当バイスプレジデント Jeff Rothschild氏が、10月8日に米カリフォルニア大学サンディエゴ校で行ったセミナー「High Performance at Massive Scale-Lessons learned at Facebook」の内容を再構成して紹介します。 （この記事は「Facebookが大規模なスケーラビリティへの挑戦で学んだこと（前編）～800億枚の写真データとPHPのスケーラビリティ問題」の続きです） キャッシュがスケーラビリティに大きな役割を果たしている Facebookの主な役割は、ユーザーが簡単に（友人たちの）情報を集めることがで
Facebookが大規模スケーラビリティへの挑戦で学んだこと（前編）～800億枚の写真データとPHPのスケーラビリティ問題
Facebookが大規模スケーラビリティへの挑戦で学んだこと（前編）～800億枚の写真データとPHPのスケーラビリティ問題 全世界で3億人を超える会員を抱え、世界最大のSNSとなったFacebook。同社の巨大なシステムは、3つのデータセンターにある約3万台のサーバと、PHP、C++、Memcache、MySQLなどのソフトウェア群によって支えられています（同社のデータセンターの巨大さは、記事「3億のユーザーを抱えるFacebookのデータセンター。移動は自転車、希望は100Gbイーサネット 」を参照）。 同社の技術担当バイスプレジデント Jeff Rothschild氏は、Facebookが実現している大規模なスケーラビリティを、いかにしてこれらのソフトウェアで実現しているのか、10月8日に米カリフォルニア大学サンディエゴ校で行ったセミナー「High Performance at Mas
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://www.cs.cornell.edu/projects/ladis2009/papers/lakshman-ladis2009.pdf
GitHub - facebookarchive/phpsh: A read-eval-print-loop for php
Facebookの「Social Ads」ってすごくね？ | IDEA*IDEA