ツイートID生成とツイッターリアルタイム検索システムの話
8. ツイートID生成システムSnowflakeとは l ユニークなIDを生成するネットワークサービス l ツイッターのツイートID(ステータスID)の割り当てに使われている l ツイッター社がOSSで公開中 (*) l 特徴 l 64 bitのIDを生成 l ざっくり時刻順 l 速い l 10000 ID/秒 のスピードでIDを生成できる(1プロセスあたり) l レスポンス 2 ms (+ネットワークのレイテンシ) l スケールする l 複数のマシン・プロセスで協調動作しない l 並べただけスケールする(はず) (*) https://github.com/twitter/snowflake 8 9. Snowflakeが開発されるまで l ツイートの流速増加とツイッターのシステム移行 l 5億ツイート/日(約6000ツイート/秒) (*1) l 2012年1
Overview
<g> <g> <defs> <rect id="SVGID_1_" x="-468" y="-1360" width="1440" height="3027" /> </defs> <clippath id="SVGID_2_"> <use xlink:href="#SVGID_1_" style="overflow:visible;" /> </clippath> </g> </g> <rect x="-468" y="-1360" class="st0" width="1440" height="3027" style="fill:rgb(0,0,0,0);stroke-width:3;stroke:rgb(0,0,0)" /> <path d="M13.4,12l5.8-5.8c0.4-0.4,0.4-1,0-1.4c-0.4-0.4-1-0.4-1.4,0L12,10.6L6.2
突然殺すbotを作りました - 猫型の蓄音機は 1 分間に 45 回にゃあと鳴く
みなさん、突然死してますか？ ＿人人人人人＿ ＞ 突然の死 ＜ ￣ＹＹＹＹＹ￣の理不尽さがとても好きなので、先週末を使って突然死bot on twitter を作成しました。 なんだこれは followingの発言を突然死ナイズするbotです。つまりこういうことですね。 自分の発言が不意打ちで突然死ナイズされて面白いです。 どう使うんだ twitterで @totsuzenshi_bot をfollowしてください。突然死botがあなたをfollowします。 どういう仕組みなんだ TwitterのUserStreams APIでfollowingの発言を受け取り、形態素解析してます。その上で発言が不自然にならないように突然死ナイズしてtwitterにPOSTしています。どうぞご利用ください。 ソースコード https://github.com/Shinpeim/sudden_killer
英語圏の人とお話しすると『東洋の漢字ってやつはクールだよな、俺にも何か教えてくれよ』と言われたりするので、そういうときはじゃあアルファベットのAとOとPで書けるやつを教えてあげようと返すと中々ウケがよい
英語圏の人とお話しすると『東洋の漢字ってやつはクールだよな、俺にも何か教えてくれよ』と言われたりするので、そういうときはじゃあアルファベットのAとOとPで書けるやつを教えてあげようと返すと中々ウケがよい
What The Trend? Find out WHY terms are trending on Twitter
Find out what's trending on Twitter and why. For each trend, we give you a quick explanation of WHY it's trending (these blurbs are edited by you!) You can also see the latest tweets, Flickr photos and news stories. Hatching Pete Why is Hatching Pete trending? Be the first to explain why! Last trend April 25 at 01:10 UTC First trend April 25 at 01:05 UTC Twisted Why is Twisted trending? Be the fir
Twitter 社採用面接受験記 - elm200 の日記(旧はてなダイアリー)
1ヶ月ほどまえに、私はシリコンバレーを訪れたのだが、そのときサンフランシスコの本社で Twitter の採用面接を受けてきた。結果は残念、ということだったのだが、その経緯について書いてみようと思う。 なぜ Twitter 社の面接を受けたのか。7月の終わりころ、私はシリコンバレーで働くにはどうすべきなのか、ということについて頭を悩ませていた。考えながらぼうっと Twitter のタイムラインを眺めていたのだが、Twitter が日本人エンジニアを求人しているという情報が飛び込んできた。おお〜、と思って軽い気持ちで職務経歴書を Twitter に送ってみたのだ。 相当数の人たちが職務経歴書を送ったはずだし、私は書類選考で落とされると高をくくっていた。ところが、数日してTwitter の人事担当者からメールがあり、電話面接をやるからいつがいいか？という。まさかの展開に私はやや慌てた。電話面接を
デマをデマと見抜けない人はTwitterを使うのは難しい - kisa12012の日記
Twitterにおけるデマ検出手法を論じた研究が，ついにEMNLP2011に出てきたので紹介します． 論文：Rumor has it: Identifying Misinformation in Microblogs[Qazvinian et al., 2011] Twitter上のデマに関する興味深い統計情報も幾つか含まれているので，興味のある方は一読されると良いかと思います． 概要 噂と噂に関連するツイートを検出すると同時に，その噂の信頼度を推定 様々な特徴量を用いて実験 ツイートの文面を使って分類器を作るだけで，高い精度が実現可能！ ただし，アノテートされたツイートを教師データとして使用 背景 マイクロブログ上で噂は急速に広まる デマや誤情報は，企業にとって大きな障害となりうるので自動で特定したい この研究では，以下の手順でデマや誤情報を検出する 特定の噂に関して言及しているツイート
RubyでTwitter Streaming APIを使ってみる - プログラマでありたい
何かTwitterを使ったサービスを作ってみたくて、時間が空いている時にTwitterの仕様を眺めています。 TwitterはAPIが充実していて、非常に開発者フレンドリーです。 ただAPIの使用については回数制限などある程度の制約があるので、目的に沿って使う必要があります。 主なAPIは３種類あって、それぞれの特徴と制約です。 REST API Methods ユーザーが行う操作に関するAPIです。 一般的なTwitterクライアントソフトは、これを使って作られています。 IPとアカウントベースでの制限で、１時間に150回まで 申請をして許可が取れれば20,000回まで増やせるようです。 Search API Methods 名前の通り検索系のAPIです。 IPアカウントベースの制限。REST APIに比べて、極めて多い回数を使えるようです。 これも申請によって回数が増やせるようです。
レディー・ガガからビル・ゲイツまで！ 海外セレブのツイートを翻訳するサービス『Chikuu』|ガジェット通信 GetNews
『Twitter』で海外の映画俳優やミュージシャンをフォローしたものの、英語を読むのがめんどうで……という人に朗報。Interush Media（米・カリフォルニア）は、海外の有名人によるツイートの日本語訳を一覧できるサービス『Chikuu（チーク―）』をオープンしました。わかりやすい英語ワンポイントレッスン付きで、ちょっとした英語学習にも役立ちそうです。 『Chikuu』は、海外の人気スターが『Twitter』でつぶやいたコメントを日本語訳し、わかりやすい解説つきで届けるサービス。スターの最新の話題から日米文化の違い、流行語やスラングを幅広く解説するワンポイントレッスンや彼らの行きつけのレストランなどの情報もあわせて紹介しています。 現在、『Chikuu』で日本語訳ツイートを閲覧できるのは36人。ブリトニー・スピアーズ、マライア・キャリー、パリス・ヒルトン、レディー・ガガ、ジャスティン・
つぶやきを「感情」に合わせてマンガにするFeel on!はタイムラインを表現ゆたかにしてくれる « Startup Dating [スタートアップ・デイティング]
サードパーティーがリリースするツイッタークライアントは数多くあれど、基本的にそのルックアンドフィールは似ている。ソーシャルフィード、メンション、DM、それにフォロワーの管理やタグの管理など。最近リリースされている国産のSoichaやKiznaといったクライアントはツイートデータそのものに注目して扱い方を考えてはいるものの、基本的な表現は「ツイッター」だ。 Feel on!はそんなツイッターのイメージそのものを大きく変えてくれるサービス。今日リリースされたこのiPhoneアプリを通して自分のタイムラインをみると、みんなのつぶやきがツイートされた言葉に対応したイラストで表現されるようになる。 例えば言葉の中に「～ですか？」のような疑問調の言葉が含まれるとスクリーンショットのように考えているイラストに変わり、同じように楽しそうな会話だと楽しそうなイラストにさし変わる、といった具合。イラストが重い
ピンポン怪談と Conjunction fallacy : steps to phantasien(2011-03-14)
ついに家にも来た！「輪番停電の作業のためおうかがいしました。」とピンポンする人たち。 インターホンの画面に映ったのは深々と帽子被った男数人。 でも耳たぶにたくさんのピアス見えた。作業があるなんて市役所から連絡ないし。 この手口で家に入られそうになる人多いらしい。みなさんも気をつけて！ 巷で噂になっているような Twitter デマ情報や怪談の類が届かず 寂しい思いをしている私を気遣ってか, following の一人が新しいのを一つ retweet してくれた. ありがとう. この怪談はいくつかの点でよく書けている. なんといってもつかみがいい. ついに家にも来た! 前例を仄めかし, 読み手に自分の知らない流行があったと焦らせる煽りがバズに初速を与える. 伝聞ではない当事者の語り口が retweet の敷居を下げる. 体験談でありながら同時に後半の伝聞パート この手口で... を補強してい
Twitter、検索結果表示が“3倍速く”なったと発表――フロントエンドの切り替えで
米Twitterは4月6日（現地時間）、Twitterでの検索結果が表示されるまでの速度がこれまでの3倍速くなったと発表した。 同社は2010年の春、急成長する検索ニーズに対処するために検索エンジンを書き換え、リアルタイム検索エンジンを立ち上げた。その際にバックエンドをMySQLからJavaベースのテキスト全文検索エンジンLuceneに移行した。また先週、フロントエンドをRuby on RailsからBlenderと呼ばれるJavaサーバに切り替えた。待ち時間の短縮は、こうした取り組みの成果だという。 Twitterでは1日に10億以上のクエリに対応している。Blenderを導入する前の週、日本では「#tsunami」というハッシュタグが膨大なクエリを発生させ、検索待ち時間に影響を与えた。Blenderの導入後、800ミリ秒だった待ち時間は250ミリ秒に短縮され、フロントエンドサーバのロー
Twitter 検索API メモ - 超自己満足プログラミング
【2010-02-28 追記】 いつの間にやら結構な数のブックマークをして頂いて、 情報が古いままでは心苦しいので、１年ぶりくらいになってしまいましたが、情報を更新しました。 思ったほど変更はなかったのでよかったです。 〜〜 ここから元々の本文 〜〜 http://apiwiki.twitter.com/Twitter-API-Documentation の「Search API Methods」について のメモですが、 英語がかなり苦手なので、間違ってるとこもあるかもしれません。 あと、大してtwitterを使ってなかったりするので、 twitterの機能面でよくわかってない部分もあります。 検索API : http://apiwiki.twitter.com/Twitter-Search-API-Method%3A-search 出力形式 AtomとJSONに対応。リクエストURLはそ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
餃 (@gyohza_no_gyo) | Twitter
Engadget | Technology News & Reviews
英語社会には肯定的な言葉が多い：統計で確認
岡島康憲 note.mu/okaji on Twitter: "京王線で就活生らしき学生が友人らしき人に真顔で「Rubyなんてマイナー言語やめとけ！PHPにしとけって！富士通とかユニシスみたいな大手がRuby使ってるか！？そういうことなんだよ！一生棒に振る気かよ！」と熱く説教してた。"
Twitterの検索機能が進化、ネガティブ / ポジティブ検索も可能に - engadget 日本版
GitHub - hotsh/rstat.us: Simple microblogging network based on the ostatus protocol.
のっとったーというウェブサービスを作りました - hitode909の日記