Twitter、数万台のHadoopクラスタとコールドストレージをGoogle Cloud Platformへ移行すると発表 － Publickey
Twitter、数万台のHadoopクラスタとコールドストレージをGoogle Cloud Platformへ移行すると発表 Twitterは、自社で運営している大規模なHadoopクラスタをGoogle Cloud Platformへ移行すると発表しました。 A new collaboration with Google Cloud - Twitter Twitterは基本的に自社でデータセンターを保有し運用してきました。2017年1月にTwitterのブログに投稿された記事「The Infrastructure Behind Twitter: Scale」によると、Twitterのデータセンターは5つの大陸にあり、合わせて数十万台のサーバが運用されています。 同社が運用しているHadoopクラスタは世界最大級の規模として、以下のように説明されています。 Hadoop: We have
Twitterはどうやって1秒に3,000もの画像を処理しているのか | FAworksブログ
現在、Twitter は1秒間あたり3,000枚の画像(約200GB)を作成し持続している。 しかしながら、2015年に Twitter はこれら画像ファイル等メディアファイルの保存方法を改善したために、600万ドルを節約することができた。 以前からそうだったわけではない。Twitter は2012年には主にテキストベースだった。 これはまるで、ホグワーツ魔法魔術学校であのかっこいい動く絵が壁にかかってないようなものだ。 2016年の今では Twitter はメディアを駆使した方向へと移行している。 Twitter は、プレビュー、マルチフォト、gif、vine、埋め込みビデオなどで写真をサポートできる新たなメディア・プラットフォームの開発を経て変化したのだ。 Twitter社のソフトウェア開発エンジニアであるHenna Kermani氏が、Mobile @Scale Londonでの興味
【衝撃】Twitterツイート数を取得するcount.json終了 / 代わりにツイート数を取得する『count.jsoon』開始|ガジェット通信 GetNews
【衝撃】Twitterツイート数を取得するcount.json終了 / 代わりにツイート数を取得する『count.jsoon』開始 Twitterのツイート数を取得することができるサービス『count.json』が、サービスの終了を発表した。サービスとはいうものの、Twitterが公式に提供していたものではないため、「Twitterの非公式サービスが使えなくなる」という説明が正しい言い方になる。 ・『count.jsoon』というサービスが開始 とにかく今後はツイート数がカウントできなくなってしまうわけで、『count.json』を利用していたサイトは困りもの。特に「ツイート数で記事の人気度を可視化していたサイト」は死活問題になるかもしれない。しかし、『count.json』に代わって『count.jsoon』というサービスが開始されたのをご存知だろうか？ ・『count.jsoon』とは
Python-twitterを使う時の注意点 - MyEnigma
みんなのPython 第4版posted with カエレバ柴田 淳 SBクリエイティブ 2016-12-22 Amazonで探す楽天市場で探すYahooショッピングで探す 目次 目次 はじめに python-twitterについて 認証してオブジェクト生成 ツイートしたい時 あるユーザのツイートを取得したい時 リツイートしたい時 GetUserTimelineで指定したユーザのではなく、自分のtweetが取得されてしまう時は、 ツイートを検索したい時 ユーザをフォローする Status構造体のメンバ一覧 参考資料 MyEnigma Supporters はじめに python-twitterというtwitterのAPIを利用するPythonライブラリを使って、 色々遊んでいるのですが、個人的にはまった所をメモとして残しておきます。 python-twitterについて python-tw
新人エンジニア向けに情報収集の際の入手元を公開してみる
こんにちは。CTOの馬場です。 新人エンジニアから割とよく聞くお悩みとして「情報収集の仕方がわからない」というのがありまして、 入手元が見つけられない、何に注目してよいかわからない、というところが解決できないということのようです。 というわけで今回は私の情報入手元を公開してみます。 Twitter まずは定番のtwitter。フォローしているのは627人です。 スマホで一日数回、そのときに取得したぶん(直近200件)だけを見るようにしています。 Androidなのでtwiccaを使っています。 リストは使わず、タイムラインのみを見ています。 PCでは夜フクロウを常時起動してますが、タイムラインは見ていなくて、mention/DMに反応するくらいです。 Facebook これまた定番のFacebook。友達は596人です。 スマホで一日数回、そのときに取得したぶん(2スクロール分くらい)だけ
TwitterがSEO重視に方針転換、検索トラフィックを10倍に伸ばすことに成功
[対象: 中級] Twitterは、検索エンジンからのトラフィックを増やすための施策でアクセス数を10倍に増やすことに成功したそうです。 1か月あたりの実数値で予想すると、750万アクセスから7,500万アクセスへの増加になります。 11月12日に開催されたTwitter Analyst Dayで明らかになりました。 ハッシュタグ (#) ページを検索エンジンに開放 もともとTwitterは、検索エンジンのコンテンツへのアクセスに制限をかけていました。 特にGoogleに対しては、リアルタイム検索の終了以後顕著だったように思われます（後述）。 robots.txtでクロールをブロックすることさえしてきました。 しかしアクセス数を増やし（て、登録ユーザーを増やす）ためには、検索エンジンからのトラフィックが重要だと考え方針転換します。 そこで今年のはじめから、人気がある上位5万のハッシュタグ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Tweetdeck