twitter日本語ユーザー100万人分のフォローイングとプロフィールのダンプを作成しました。 レコメンデーションの実験や分析に使えるかもしれません。 プロフィール: 108万人分のスクリーンネームや自己紹介文 フォローイング: 103万人分のフォローイング先ID一覧です。 展開すると300万ノード 2.8億エッジになります。(※被フォローエッジを含みません) 以下のURLからダウンロードできます 今回はMongoDBをストレージにしました。ダンプの利用にはMongoDBのインストールが必要となります。 https://github.com/penguinco/yats-socialgraph-dump 使い方: $ git clone git://github.com/penguinco/yats-socialgraph-dump.git $ cd yats-socialgraph-du
Thank you for your support and interest in Twitter and the Twitter marks. We strongly believe in the value of an open platform and encouraging the healthy growth of our special ecosystem. As part of that, it's important for users to be able to trust Twitter and not be confused about our relationship with the many people and organizations who use our marks. This document is designed to help you use
This document describes the architecture of a Twitter scraping application. It uses Gearman for asynchronous job processing to fetch Twitter data from the API or stream. Workers register fetch jobs and process the requests. The application includes modules for the CLI, reader, and streaming components and uses JSON and LWP libraries. It retrieves tweets and stores them in a database for analysis.R
Twitter API の残使用可能回数ですね、わかります。 Twitter API の残使用可能回数を取得することができる。 http://twitter.com/account/rate_limit_status.xml 上記の URL にアクセスすると、以下のような XML が得られる。 <hash> <hourly-limit type="integer">20</hourly-limit> <remaining-hits type="integer">16</remaining-hits> <reset-time type="datetime">2008-07-05T16:05:08+00:00</reset-time> <reset-time-in-seconds type="integer">1215273908</reset-time-in-seconds> </hash>
Twitterアプリの認証形式について 某アプリの実験に対する批判や「OAuth認証はDMにアクセスできるから危険」などの噂が流れています。 冬たいが~もOAuth認証を使用しているのでちょっとまとめ。 ※技術者向けの資料ではないです。概要的なもの。 Basic認証 ユーザーIDとパスワードをアプリに直接入力して認証します。 アプリはユーザーIDとパスワードを記録し、認証が必要なる都度、それらを使用します。 ※Twitterでは2010年8月末でBasic認証の使用を終了します。 ユーザーIDとパスワードはアプリに直接入力せず、Twitterサーバー上で認証を行ないます。 (認証時にブラウザが開き、Twitterの「許可する」「しない」のボタンが標示されます) アプリはパスワードを知ることはなく、Twitterサーバーから発行されたトークン(許可証のようなもの)を使用して通信します。 OA
先日行われた Twitter の開発者向けイベント「Chirp」にて、 @Anywhere という新 API が公開されました。自分のサイトに、 JavaScript のみでユーザー情報の表示やつぶやきの投稿、ユーザー認証などの機能を実装できる、とても興味深い API です。 この @Anywhere は使い方も非常に手軽で、こちらのページでサイトを登録すれば、あとは「Getting Started with @Anywhere」にある JavaScript をページに挿入するだけで利用できます。しかし、当然ですが説明は英語ですので、日本人には少しとっつきづらい面もあります。こんな有用な API が日本で普及しないのは大きな損失、ということで前述のページを日本語に翻訳してみました。 勢いで翻訳したので表現はかなり適当ですが、まあ無いよりはましかと思います(笑)。 @Anywhere を利用
昨日は中途半端の時間に寝てしまったので、今もプログラム中なので途中経過。 (・∀・) ・reply時に複数の"@"が存在する場合、複数ユーザーへのreplyと 見なして、先頭に"."を追加する。 ・他のtextareaにもポップアップを追加した。今現在はコピーのみだが、 ブラウザに選択文字列を飛ばして検索やら辞書引きさせるべきか否か。 ・設定によってget〜メソッドの後にratelimitstatuseを実行させるようにした。 この辺のリミットについてはよくわかってないので、余り正確ではないかも。 (´・ω・`) ・テーブルセルからの選択文字列のコピーを実装しようとしたが、 色々と面倒なのでやめた ・非同期で過去tweetを取ろうとしたが、挫折した。根本的な見直しが必要。 ・一括での大量のfollowはtwitter.comからスパマーとして認識されたりする可能性が あるらしいので、一気に
政党・政治家に関するつぶやきのトレンドが分かるPolitweeというサービスで、Twitter検索APIを利用して定期的につぶやきを収集しているんですが、その検索結果が5/26から異常に少なくなっています。・収集しているつぶやき数の推移検索条件は「民主党」「自民党」など特に変えていないので、Twitter側で何かあったのかと思い、昨日Twitterカスタマーサポートに問い合わせました。・わたしの問い合わせ内容Twitterサポート 御中山本大策( @daisaku )と申します。わたしはPolitwee( http://politwee.com/ )という、御社の検索APIを利用したサービスを運営しています。政党・政治家に関するキーワードが入ったつぶやきを収集していますが、検索APIの日本語検索の結果が5/26から明らかに少なくなっています。つぶやき数のグラフhttp://politwee
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く