Streaming APIで大量のつぶやきをリアルタイムに保存する方法（cURL編） | 配電盤
つぶやきを大量に取得したいときには、TwitterのふつうのAPIではなく、Streaming APIを使います。ふつうのAPIは1時間あたり350回しか使えないので、対象となるつぶやきが、APIを目一杯使って取得できる数を超えるとどうしようもありません。Streaming APIならこのような心配は無用で、条件を設定して一度接続すれば、設定した条件に合うつぶやきを大量に取得できます。厳密に言えば、これは程度の問題でしかなく、Streaming APIでも、すべてのつぶやきを取得できるわけではないのですが、ここでは、「ふつうのAPIに比べれば遙かにたくさん取得できる」と考えてください。 cURLを使うのが簡単です。次のようなシェルスクリプト（stream.sh）を作成し、「bash stream.sh >> result.dat」などとして実行すれば、指定したキーワードを持つつぶやきを、r
tykのノマド日記: 批判めいたmentionしてくる人々の分類
2012年2月6日 批判めいたmentionしてくる人々の分類 テーマ: エッセイ 最近、ツイッターのタイムラインで揉め事が頻発しているのを見かける。 そこで、mentionのタイプを幾つかに分類してみたのが上の図。 指摘内容のまともさと、mentionの姿勢によって、コンサル風にマトリクスにしてみた。 これで、どのように振る舞えばいいのか、ちょっと考えてみよう ①害のない人 指摘はまるで的外れであるが、丁寧で腰の低い人。 mention内容がピント外れであるため、返答しようにも困ってしまうが、丁寧な発言であるので、怒りが湧くわけではない。 華麗にスルーしておけば良い。 ②ヤバい人 とつぜんえらい失礼な物言いで食って掛かってきて、さらに発言内容までヤバい人。これは狂気そのものである。これは躊躇いもなくブロックしておこう。 ③よき批判者 丁寧に、間違いや問題点を指摘して
Twitterの人が語るパフォチューとは - 谷本 心 in せろ部屋
Everything I Ever Learned About JVM Performance Tuning at Twitter https://oracleus.wingateweb.com/published/oracleus2011/sessions/37941/S37941_2408980.pdf Twitterの中の人がパフォーマンスチューニングについて語るセッション。 スケーリング？ いや、エクストリームです。 きっと凄いスケーリングの話をするのかと思ったら、 全くの真逆で超細かい、エクストリームな話でした。 たとえば「メモリを使いすぎない」ようにするための説明では、 Objectをnewするだけで64bitマシンなら128bit (16byte) 消費する、という話に始まり ポインタ、オブジェクトヘッダ、配列ヘッダ、継承クラスで消費するメモリ（4byteとか24byte）の
オッレディース -オフィスレディーのための情報サイト-
株式会社IMJモバイルは、「女性のデジタル領域における行動・意識に関する調査」を実施し、その結果を公表した。 調査期間は、2011年5月26日と5月27日で、有効回答数は、1240名。調査方法は、インターネットリサーチで、調査対象は、全国の15歳から49歳の女性。 調査結果によると、「保有しているデジタル機器（複数可）」の問いには、「パソコン（96.1％）」、「携帯電話（89.4％）」が圧倒的に多く、以下に続く「iPhone（96.1％）」、「Android OSのスマートフォン（4.9％）」を大きく引き離している。 また、「スマートフォンを保有することによる変化（複数可）」の問いには、「ネットに接している時間が増えた（70.5％）」、「情報収集の方法が変わった（49.4％）」、「インターネットに関する知識を積極的に収集するようになった（44.9％）」、「GPS等を利用して、お店の情報等を
TwitterのWeb Intentsを使って他人の発言をふぁぼらせたりRTさせたりして晒しあげることができるって知ってた? - ( ꒪⌓꒪) ゆるよろ日記
なんかあんまり話題になってないような気がするんだけど、TwitterのAPIで"Web Intents"ってのがあるわけ。結構前に発表されたんだけど。 Web Intents | Twitter Developers TwitterからWeb Intents発表―ブログ内にクライアントをエンベッドできる―WordPressからも利用可能 Introducing Web Intents - Twitter API Announcements | Google Groups 簡単に説明すると、 http://twitter.com/intent/favorite?tweet_id=70343369632653312のようなURLで、このように特定の発言をふぁぼらせたりRTさせたりすることができるようになる。 ようは、このURLに他の人を誘導することで、特定のアクション(ふぁぼ、RT、フォロー)
Twitterの大規模システム運用技術、あるいはクジラの腹の中（後編）～Twitterのサブシステム「Unicorn」「Kestrel」「Flock DB」
Twitterの大規模システム運用技術、あるいはクジラの腹の中（後編）～Twitterのサブシステム「Unicorn」「Kestrel」「Flock DB」 米サンタクララで行われていたWebサイトのパフォーマンスと運用に関するオライリーのイベント「Velocity 2010」の、Twitterのシステム運用について説明するセッション「In the Belly of the Whale: Operations at Twitter」（クジラの腹の中：Twitterでの運用）を紹介をしています。 この記事は「「Twitterの大規模システム運用技術、あるいはクジラの腹の中（前編）～ログの科学的な分析と、Twitterの「ダークモード」」の続きです。 Twitterのサブシステム「loony」「Murder」「memcached」 ここからはTwitterのサブシステムについて紹介しよう。 T
Twitterの大規模システム運用技術、あるいはクジラの腹の中（前編）～ログの科学的な分析と、Twitterの「ダークモード」
Twitterの大規模システム運用技術、あるいはクジラの腹の中（前編）～ログの科学的な分析と、Twitterの「ダークモード」 先週の6月22日から、米サンタクララで行われていたWebサイトのパフォーマンスと運用に関するオライリーのイベント「Velocity 2010」が開催されていました。 その中で、TwitterのJohn Adams氏がTwitterのシステム運用について説明するセッション「In the Belly of the Whale: Operations at Twitter」（クジラの腹の中：Twitterでの運用）が行われています。Twitterのような大規模かつリアルタイムなWebサイトの運用とはどういうものなのでしょうか？ 公開されているセッションの内容を基に概要を記事で紹介しましょう。システム管理者の新たな役割、Railsの性能の評価、Bittorrentを使った
Twitterが分散フレームワーク「Gizzard」公開！ Scalaで書かれたShardingを実現するミドルウェア
Twitterが分散フレームワーク「Gizzard」公開！ Scalaで書かれたShardingを実現するミドルウェア Twitterは独自に開発した分散フレームワークの「Gizzard」をオープンソースとして公開しました。GizzardはScalaで書かれたJavaVM上で動作するミドルウェアで、PHPやRubyといったWebアプリケーションからの要求を自動的にデータベースに分散することで、大規模で可用性の高い分散データベースを容易に実現するためのものです。 Gizzard：フォルトトレラントな分散データベースを実現 The Twitter Engineering Blog: Introducing Gizzard, a framework for creating distributed datastores Twitterのブログにポストされた「Introducing Gizzard
Twitterのクジラ解剖学、あるいは彼らがいかにサーバの処理能力を向上させたか
Twitterを利用していると、ときどきクジラの絵の画面が表示されることがあります。これはTwitterの処理能力がパンクして一時的に利用不可になったときに表示されるお馴染みの画面。 2月9日にTwitter Engineeringブログにポストされたエントリ「The Anatomy of a Whale」（クジラの解剖学）では、Twitterのエンジニアたちがこのクジラの内部に分け入ってどのようにTwitterサーバの処理能力を向上させたのか、という話が詳しく語られています。 彼らが行ったのは、まず詳細なデータを取得して原因がどの辺にあるのかを推測すること。そこから多数の無駄な処理を発見し、ソースコードの修正による性能の向上に成功します。 元記事は非常に長いエントリになっていますが、問題の調査から解決に至るアプローチについて多くのエンジニアの方の参考になりそうな内容が含まれていますし、T
twitterにポスト - My Snippet
(use rfc.http) ; http-post (use rfc.uri) ; uri-encode-string (use rfc.base64) ; base64-encode-string (define *twitter-status* "/statuses/update.xml?status=") (define *twitter* "twitter.com") (define make-authorization (lambda (username password) (string-append "Basic " (base64-encode-string (string-append username ":" password))))) (define make-poster (lambda (base-host post-path) (lambda (auth) (
ソーシャルブックマークを領空侵犯する Twitter：シロクマ日報：オルタナティブ・ブログ
昨日は娘の相手を妻に押しつけて、ひとり緑豊かな東工大へと遊びに来ていました。理由は「第3回SBM研究会」に参加するため。有名な勉強会なのでご存知の方も多いと思いますが、その名の通りソーシャルブックマークという機能/サービスについて考えましょうというもの。機能やビジネス面からの考察だけでなく、どうやってレコメンデーションの精度を上げるかなどといった技術面・理論面からのプレゼンが聞けるのもこの会の魅力です。 早速 p-article さんがまとめ記事を書かれていますので、詳しい模様を知りたいという方はぜひご覧下さい（第1回、第2回のまとめも確認できます）： ■ 「第3回ソーシャルブックマーク研究会」参加 （チミンモラスイ） 個人的にもいろいろと思うところがあったのですが、最も気になったのは Twitter の存在でした。もちろん SBM の勉強会なので、スポットライトはそちらの方に当てられてい
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
IDEA * IDEA
http://www.subcide.com/articles/pure-css-twitter-fail-whale/
Twitterがライター機能を公開、Salesforceが利用開始
https://xtech.nikkei.com/it/article/Research/20090916/337378/twitter_.jpg
8月のTwitterサイト利用者は前月比2.2倍の193万人、VRI調べ
サイドフィード、Twitterなどと連携するグループチャットサービスを提供:ニュース - CNET Japan
Twitterクライアント、トップ21（TwitStatによる）
Updated: His Holiness The 14th Dalai Lama [Has Not] Joined Twitter [Yet] - ReadWriteWeb