Doing more with 140 characters
In 2006, when we introduced Twitter’s API, Tweets were simple 140-character text messages, often sent via SMS. Now, the products and apps built using Twitter data feature Tweets that include photos, GIFs, videos, polls, and more. Today, we’re excited to announce an upcoming set of changes rolling out over the coming months to enable people to express even more within 140 characters. These changes
Elasticsearch Twitter 利用者性別判定
Twitter 利用者の趣味嗜好など興味分野の分析であれば、以前公開した「Elasticsearch Twitter ツィート情報リアルタイム分類」のようにツィートの内容をベースに名詞系の品詞に特徴が出てくるのでそれほど難しくはないのですが、性別判定の場合はちょっと勝手が違います。 Twitter のブログを見ると、性別ターゲティングを使ったプロモーションを提供するために、Twitterのハンドル名やフォロー傾向をもとに性別を推測する方法を採用しているそうです。（日本語版ブログはこちら） 感覚的にこの方法だと、すごいノウハウの蓄積と仕組みがないと真似できなそうなので、却下。 他に方法がないかと調べていると「Twitter 利用者の性別判定システムの構築」というのがあったので目を通してみました。色々数式とか難しいことが書いてありますが、目を細めて遠くから見てみると、要するに、 Twitter
Twitter、NTTデータを含む再販業者へのFirehose提供を8月までに打ち切りへ
米Twitter傘下のGnipは4月10日（現地時間）、公開ツイートデータ「Firehose」の再販業者への直接提供を8月中に打ち切ると発表した。企業や組織へのFirehoseの提供はGnipのみが行うことになる。 Gnipによると、TwitterはGnip買収直後から再販業者へのFirehose提供打ち切りのプロセスを開始し、現在まだFirehoseを扱っているNTTデータと米DataSiftへのFirehose提供を8月半ばには終了する見込みという。 再販業者へのFirehose提供打ち切りの理由は、Firehoseのユーザー企業とダイレクトな関係を築くことが、Firehoseをサポートする最善の方法だと確信するからとしている。 Twitterは2012年に立ち上げた「公認製品プログラム」で、Twitterのデータの価値を高め、利用しやすくするツールの構築をサードパーティーに奨励し、F
Twitterがクオリティの低いツイートを非表示にする機能をテスト中
By Maryland GovPics Twitterがクオリティの低いツイートをタイムライン上から削除するという機能を、一部ユーザーの間でテスト中であることが明らかになりました。 Well, that's an interesting & welcome addition, Twitter! (Was prompted about this on opening the app.) pic.twitter.com/Ka2VDvqwNf— Anil Dash (@anildash) 2015, 3月 23 Twitterはこれまでにも一部ユーザーの間で新しい機能のテストを行ってきましたが、今回テストされている機能というのが「タイムライン上からクオリティの低いツイートを削除する」というもの。具体的には「Quality filter(クオリティ・フィルター)」と名付けられており、恐喝めいたツイ
emojitracker: realtime emoji use on twitter
emojitracker is an experiment in realtime visualization of all emoji symbols used on twitter. it updates at the speed of updates on twitter in realtime, and thus contains rapidly updating visuals that may possibly cause problems for those sensitive to such things? I'm not sure, but I don't want to risk it, so here is a warning!
リプライするかしないか：Twitterと言語(学)研究
第8回言語学×自然言語処理合同勉強会（2014/10/31, NII）の発表スライドRead less
twitterのデータをSPAMとHAMに分けてみる - Qiita
動機 前々からtwitterのデータを使って何かやってみたいな、と思っていました。そこで、MeCabとcabochaを入れるところから、SQLiteを活用した簡単な分類器を作るってみた次第です。 （遊びでやってみただ(ry ） 以下、やったことを適当にまとめていきます。 インストールしたもの MeCab 0.996 mecab-python-0.996 Virtual C++ 2008 Express Edition(vcvarsall.batが必要なためです) Cabocha(今回は使いませんので説明も全くしませんが、今後のために...) インストール方法などに関してはWindowsにmecab-pythonを導入を参考にして下さい。 このサイトでも太字で書いてあるのですが、mecab.hを書き換える時は必ず管理者権限で開いて変更を行って下さい。でないと、変更されたと認識されません。僕も
ツィッターとは大違い。はてブでは、なぜネガコメが多いのか。 - 彼氏は日本人。彼女はフランス人。
コウモリが本格的にブログを始めて３ヶ月。 ありがたいことに、記事に対してたくさんのご意見を頂けるようになってきました。 そうして幾つものコメントを眺めているうちに、面白い現象に気付きました。 ツィッターとはてブでは、全くコメントの毛色が違うのです。 ここでは、面白いサンプルを２つ挙げてみます。 そこから生まれた疑問を解決するために詳細に書いていますが、 長文が苦手な方は、７のまとめに飛ぶのがオススメです。 目次 １、サンプル１ ２、サンプル２ ３、なぜ、両極端なコメントが生まれるのか？ ４、なぜ、「はてブのコメント」はネガティブ？ ５、TwitterコメントのWhom ６、hatebuコメントのWhom ７、まとめの図解 ８、提案：影響タブとかどうすか？ ９、余談：紹介系コメントの文法 ※約7000字あります。長文注意。 ※サラっと読みたい方は、太字にした１・２・７の項目だけ読むのがオスス
教師なしLDAでTwitterのスパム判別をしてみる(予備実験編) - 病みつきエンジニアブログ
※普通は「教師なしLDA」という言い方はしないです モチベーション 元々は、TwitterからURLつきのツイートを取りたかった。某ニュースアプリがTwitter上で(？)話題になっているニュース記事を(法的な是非があるとはいえ)配信しており、そんな感じのマイニングがしたかった。 ただ、普通に「http,https」でTwitter上で検索すると、量が膨大だった。加えて、ほとんどがスパム。なーにが「このサイトすごすぎｗｗｗｗｗ」じゃ。 ということで、検索の段階でスパミーなキーワードを取り除き、純度の高いURL投稿マイニングをしたいわけだが、キーワードは既知なものには限らない。例えば「無料」とか「アフィリエイト」とかがスパムなのはそうなんだけど、「パズドラ」とか「魔法石」とか、未知のキーワードとか出てきた時に対応できない。 そこで、教師なし学習のアプローチを使って、スパムなキーワードを抽出す
Twitter、学術研究にツイートデータを無料で提供する「Twitter Grants」を発表
米Twitterは2月5日（現地時間）、公開されているTwitterデータ（いわゆる「Firehose」）を学術研究者に無償で提供する試験的なプロジェクト「Twitter Grants」を発表した。 参加を希望する非営利の学術研究機関はエントリーページから申し込める。締め切りは3月15日。選考後、一部の参加希望者がFirehoseに無償でアクセスできるようになる。 公開ツイートは1日当たり5億件以上投稿されており、累計すると膨大な量になる。Twitterは米Microsoftなどの企業には有償でこのデータへのアクセスを提供している。Twitterが同日発表した2013年10～12月期の決算によると、データライセンスなどの売り上げは2300万ドルだった。 Twitterは社内のエンジニアリングチームで開発したツイートデータを使った幾つかの視覚化動画を発表している。また、これまで一部の学術機関
IBMの短縮URL特許が強力すぎる件（そしてその強力な武器はtwitter社の手に！） | 栗原潔のIT弁理士日記
IBMがtwitterとクロスライセンス契約を結ぶと共に同社に特許権900件を譲渡したというニュースがありました（IBMのプレスリリース）。 ITmediaの松尾公也さんにご指名受けたので簡単に解説します。 IBMの特許900件取得し、クロスライセンス。これも栗原さんの解説待ち。 ： ツイッターとＩＢＭ 短縮ＵＲＬ特許で合意 NHKニュース http://t.co/XuIVXCmhG6 #1tp ? Koya Matsuo (@mazzo) 2014, 2月 1 Twitter社のIPOに先だってIBMが3件の特許権に基づき警告していたのが、裁判外で和解という話です。（Apple vs Samsungのように法廷でガチンコになるのは例外的で、当事者納得の上の和解が特許紛争のあるべき解決策です）。 今回、IBMが権利行使しようとした特許は3件ありますが、特に注目すべきがUS6957224 ”
Twitter、信頼できる速報ツイートを通知する報道向けサービス「Dataminr」を発表
米Twitterは1月29日（現地時間）、ジャーナリスト向けのアラートシステム「Dataminr for News」を発表した（Dataminrはデータマイナーと読む）。膨大なツイートの中から速報ネタを探すメディア関係者に、信頼できるツイートをリアルタイムで知らせるというもの。 金融向けアラートサービスを手掛ける米Dataminrが、Twitterと米CNNと協力して構築した。CNNは現在、αパートナーとして同サービスを利用している。 1日当たり5億件投稿されるツイートを独自のアルゴリズムでリアルタイムに分析し、ユーザーがあらかじめ設定したカテゴリーに合わせて関連する注目ツイートを通知する。 2009年創業のDataminrは、2011年からTwitterと協力し、同様のサービスを金融企業と公共機関向けに提供してきた。Dataminr for Newsは、CNNのジャーナリストからのフィー
1年前の自分と暮らす - 昼メシ物語
mirakui_retro という twitter BOT を作って、かれこれ5年くらい運用している。 mirakui_retro は 、1年前の mirakui のツイートをツイートするという BOT だ。つまり、 mirakui_retro の以下の発言は、僕がその1年前に発言したものだ。 このインターネット時代に— Issei Naruta (@mirakui) January 21, 2013 ↓1年後 このインターネット時代に— mirakui_retro (@mirakui_retro) January 21, 2014 歴史 2009年頃、友達の間で Twitter BOT を作るのが流行ってて、 Ruby の勉強がてら作ったのがこの mirakui_retro だった。Twitter の API 仕様で、遡れる発言数には制限があって、僕のツイートのペースだとだいたい3ヶ月前
機械学習ライブラリ scikit-learn で簡単ツイート分類 | ぱろすけのメモ帳
皆様こんにちは。今日も元気に自分を見つめ直していますか？自分を見つめ直す手段として、過去の自分の発言を見返すことは有用だと考えられます。たとえば、Twitter を使っている方ならば、その過去ログを用いることが考えられるでしょう。Twitter の過去ログはライフログとして機能し、それを用いることにより、過去の出来事のみならず、考え方、感じ方、ふとした着想、などなどを読み取ることができます。しかしながら、過去のツイートを全部見返すのは非常に面倒ですね。たとえば僕のアカウントはトータルで4万ツイート以上あります。これは非常にめんどい。Twitter は情報量多くてだるいよね問題については、従来「再生核 Hilbert 空間を用い、脱ベイズ確率主義に立脚したあまりだるくないツイッター」などの試みが行われてきましたが、今なおその面倒さを軽減する手段については十分とはいえません。本記事では、過去の
Twitterの投稿時間で類似度を計算してみた - 確率分布の類似度 - 唯物是真 @Scaled_Wurm
以前集合やベクトルの類似度の記事を書いたんですが、確率分布の類似度には触れていなかったのでついでに書きました ツイート時間分布の類似度を求める 今回はツイート時間ごとの頻度を正規化して、確率分布とみなして類似度を計算してみます 私のアカウント(以下mainと表記)に対して、私のもう一つのアカウント(以下subと表記)+私がリプライを送ってる数が多い(以下friendと表記)上位5人と比較します subがfriendよりも似た結果になることを期待しています 以下にツイート時間の分布(main + sub + friend 5人)を載せました ある程度似ていますが、人によってそこそこ形が違っていて、特に午前中の投稿時間の差は特徴的に見えます またfriend1の一人だけは大きく違った傾向を示しています 以下ではこれらが定量的にどれぐらい異なるのか類似度を計算して比較していきます グラフを描くの
Twitter歴診断というTwitter連携サービスが「危険」だと騒がれている「その理由」について納得出来ないという話。
2013/11/15追記： Twitterアカウントで認証することで Twitterアカウント作成日 アカウント作成日からの経過日数 片思い人数 片思われ人数 ブロック済みアカウント数 お気に入りに登録しているツイート数 などを表示するウェブサービス「まいあかうんったー」を公開しました。 ぱ、ぱくりとかいわないで！ Twitter歴診断というTwitter連携サービスが「危険」だと話題になっているようです。 Twitter歴診断というサービスの安全性云々という話についてはあまり興味が無い事、安全性について言及するにはまだ情報が不足しているのでそれについては触れません。 そもそも、それは各々が判断するべき事だと思うので…。 ですが、それを「危険」だと騒いでいらっしゃる方々が、それを「危険」だと主張するその「理由」についてどうにも納得する事が出来ないのでそれについて書いてみます。 そもそも何故
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Twitter to Stop Counting Photos and Links in 140-Character Limit
リツイート直後のツイートを表示するやつ
不愉快なツイートを収集するプログラム「HateBrain」
BossKitter は移転しました。