【Python】MeCabと極性辞書を使ったツイートの感情分析入門 - StatsBeginner: 初学者の統計学習ノート
負のオーラを自動検出したい 前回のエントリで、著作権侵害にあたる違法アップロード動画を自分のTwitterで拡散してしまっている懸念を考えて、YouTube動画のリンクが貼ってあるツイートをまとめて削除しました。 前回のエントリでも言いましたが、著作権侵害モノ以外にも、「残しておくとまずいツイート」は色々ある可能性があり、たとえば誹謗中傷の類いがあるかと思います。誹謗中傷ツイートを自動抽出する方法はにわかには思いつきませんが、たぶん「クソ」とか「死ね」とか「バカ」とかそういう悪口の辞書が必要になりそうです。 ところで、言語データの分析手法として、単語ごとに感情特性を評価した辞書というものがあちこちで作られていまして、これを使ってツイートがどのような感情を帯びているか分析するということが、よくやられています。Yahoo!がそういうツールを提供してたりもします（参考リンク）。 Yahoo!のリ
Python作業メモ: 残しておくとマズそうな自分のツイートをまとめて削除する（YouTubeリンク編） - StatsBeginner: 初学者の統計学習ノート
著作権侵害にあたるYouTube動画へのリンクを削除する たまにツイッターで、YouTubeのリンクを貼り付けたツイートをしていますが、よく考えたら違法アップロードに該当するものを拡散してしまっている可能性があります。可能性とかいう曖昧なレベルで考えるのが面倒なので、いっそのことYouTubeのリンクを共有した過去のツイートをいっぺんに削除してしまおうと思いました。 ついでに、人の悪口を言ってるようなツイートも削除して、自分のアカウントを「とてもいい人のアカウント」に変貌させていこうかとも思い出しましたが、まだ手法が検討できていません。（私の場合は必要性が低いですが、最近の就活生などには必要かも？） ツイートの感情分析を行って、負の感情の高ぶりが感じられるツイートを自動削除していけばいいんでしょうかね。本文を形態素解析で単語に分けて、人名を含むツイートを抽出した上で、さらに単語ごとに感情の
Pythonメモ: Tweepyのややこしいレスポンスデータの読み方 〜Twitter API活用の最初の難関〜 - StatsBeginner: 初学者の統計学習ノート
Twitterのbot作りは良い勉強になる 以前のエントリで紹介したように、Tweepyというライブラリを使うと、かなり簡単にPythonでTwitterを自動操作出来るようになります。 www.statsbeginner.net つぶやいたり、フォロー／アンフォローしたり、RTしたりふぁぼったりといったアクションをTweepyを使って記述し、自動で実行できる環境に置けば、自前のbotが出来上がります。botといえば、ブログ記事の紹介ツイートを定期的に流したり、新しいフォロワーにフォロバするといった使い方がよくされていますが、自作のプログラムであれば例えば特定のキーワードを含むツイートをしているユーザを検索してそのプロフィールを取得してデータベース化するとか、ふぁぼやRTをよくしてくれる人を一定の基準を設けてリストに登録していくといった複合的な作業も、自動化できて手間が省けます。 私は自分
Pythonメモ: Pandasのデータフレームに空のデータフレームを合体させたらint型の列がfloat型になってた - StatsBeginner: 初学者の統計学習ノート
こんな事象に陥る人が他にいるのか分からないのですが、ググって解決しなかった問題が解決したので、せっかくだからメモしておきます。 Pandasのデータフレームに、整数型で値が入っている列があるとします。 >>> import pandas as pd >>> import numpy >>> >>> df1 = pd.DataFrame({ ... 'ID':[123456789012345678, 123456789012345673, 12345678901234567], ... 'Name':['Ichiro','Jiro','Saburo'] ... }, ... columns = ['ID', 'Name'] ... ) >>> >>> type(df1['ID'][0]) # 列ごと取り出すとPandasのSeriesですと言われるので <class 'numpy.int64
簡単！Herokuで動くTwitter botをPythonで実装する - Qiita
Herokuで動くTwitter botをPythonで実装する方法を紹介します。 やり尽くされたネタだとは思いますが、2016年版ということで。 実現方法としては、Heroku上にPythonスクリプトをデプロイして、Heroku Schedulerを使ってスクリプトを定期実行します。 完成版のソースコードは以下にあります。 https://github.com/k-enomoto/minimum_twitter_bot この記事で説明すること Twitter Botの最低限のソースコード Herokuへのデプロイ Heroku Schedulerの設定 この記事で説明しないこと Herokuの使い方 pipの使い方 Twitter APIのアカウント作成方法 それぞれ他に詳しい記事がありますので、参考にしてください。 ライブラリの準備 使用するライブラリをインストールします。
Python+tweepyでフォロワー増殖装置を作った｡(+TwitterAPIの考察) - 日記
それがそのソースコードです｡ Function to increase follower on twitter qWordというタプルにフォローしたいアカウントのキーワードを入れることで自動的にフォローを行います｡ さらにリフォロー率をあげるために､If文でフォロワーよりフォローしている人数が多いユーザーをフォローするようにしています｡ Twitter APIにはリクエスト制限(180リクエスト/15min)があるので､1ワードにつき50回リクエストをするので3ワード(150リクエスト)で15分のスリープを行います｡ しかしながら､フォローしまくってしまうと161エラーという｢もうフォローできない｣という趣のエラーが出てしまいます｡ 1日のフォロー制限は1000人のはずですが､これはそれよりも早い段階で出てしまうようです｡ さらに､Twitter APIのユーザ検索は検索上位1000人を検
Pythonの"Tweepy"でTwitter APIから取得したデータを読んでみる - StatsBeginner: 初学者の統計学習ノート
[追記] このエントリを書いた後、レスポンスデータの読み方について別途詳しくエントリにまとめました。 www.statsbeginner.net [/追記] 前回のエントリで、PythonのTweepyライブラリを導入し、TwitterのAPIをいじることができるようになりました。 statsbeginner.hatenablog.com で、APIから情報を取得して分析とかをするのであれば、Tweepyが返してくるデータから必要な項目を抜き出さなければならず、「Tweepyはいったいどんなデータを返してきているのか」を理解してなければ話にならないですよね。 とにかくまずはTweepy公式サイトのReferenceを読んでいくべきですが、取得されるデータの内容について細かいことは書いてないような気が？ どっかにドキュメントあるのかなと思ってGitHubをみてみたら、ソースコードとかは読めま
HOME > 電算 > python で twitter メモ
HOME > 電算 > python で twitter メモ python で twitter メモ Python (tweepy 利用)を使って、twitter に投稿した、読んだり、過去ログを保管したりするのだ。 （2013年7月 追記：最近 twitter の API が 1.0 が使えなくなり、1.1 を使わなければならなくなった。tweepy の新しいバージョン 2.7 を試したが、API 1.1 に対応しているようだ。ただし、いくらかメソッド名が変更されたりしているように見える。このメモは、従前の twitte API を従前の tweepy で使ったメモだから、古い部分があります） 参考：事前準備については、http://jmillerinc.com/2010/05/31/twitter-from-the-command-line-in-python-using-oauth
Python で Twitter から情報収集 (環境構築編) - Qiita
今回作るシステム Twitter から情報をクロールしてきて、情報を整形し、ひたすらDBにストアしていくためのシステムを構築してみる。とりあえず実験として Vagrant を利用して仮想環境上にテスト環境を作成する。 Vagrant (VirtualBox) の仮想環境を利用 OS: Debian Wheezy 7.6 Language: Python 2.7.3 virtualenv にてモジュールを管理。 Database: MySQL Tools: MeCab 0.99 IPA辞書 (mecab-ipadic-utf8) MeCab の Python バインディング 仮想マシン周りの環境構築 VirtualBox のインストール https://www.virtualbox.org/wiki/Downloads から最新版をインストール。 仮想環境の作成は Vagrant から行う。
Python-twitterを使う時の注意点 - MyEnigma
みんなのPython 第4版posted with カエレバ柴田 淳 SBクリエイティブ 2016-12-22 Amazonで探す楽天市場で探すYahooショッピングで探す 目次 目次 はじめに python-twitterについて 認証してオブジェクト生成 ツイートしたい時 あるユーザのツイートを取得したい時 リツイートしたい時 GetUserTimelineで指定したユーザのではなく、自分のtweetが取得されてしまう時は、 ツイートを検索したい時 ユーザをフォローする Status構造体のメンバ一覧 参考資料 MyEnigma Supporters はじめに python-twitterというtwitterのAPIを利用するPythonライブラリを使って、 色々遊んでいるのですが、個人的にはまった所をメモとして残しておきます。 python-twitterについて python-tw
Tweepyを触ってみる ~pythonでTwitter APIをいじる~ - カールヌードル
何となくPythonでTwitterを触ってみたいなぁと思って調べてみました。 PythonからTwitterのAPIをいじるモジュールとして, python-twitter Tweepy というのが一般的な様です. Tweepyが簡単そうだったので, とりあえず使ってみましたので簡単にご紹介します. とりあえず, "中野"を含むツイートを何件かとってくる みたいな簡単なものを作ってみましょう. 順を追って説明していきます. GitHubにソースコードはおいてあります. tweepyのインストール 簡単です. pip使っていれればOKです. pip install tweepy これでもうtweepy使えます. Consumer key等の取得 TwitterのAPIをいじるためには登録が必要です. といっても, Twitterアカウント持ってればすぐに出来ます. 例えばHELLO API
Python で Twitter から情報収集 (Twitter API 編) - Qiita
基本的にプログラムから Twitter のデータ取得、情報発信は下記APIを利用する。 https://dev.twitter.com/rest/public 今回の目的は指定のキーワードで検索して必要な情報を取得することなので、 GET search/tweets を用いる。 https://dev.twitter.com/rest/public/search Twitter 検索 API を利用したサンプルコード tweet_crawler.py #python のハッシュタグで検索し、その結果を出力するプログラムのサンプルコード。 それぞれの関数中で何をやっているかは、Pythonが読み書き出来る人ならわかると思う。 基本的に url, params, oath.get()/oath.post() 辺りを弄れば、 他の Twitter API を使った操作が行えるので遊んでみよう。
Python で Twitter API にアクセス - Qiita
PythonからTwitter APIへのアクセス。Python2, 3両対応。 python-twitter というのもあるけど、基本はHTTP Requestを送ってJSONを得るだけなので、わざわざTwitter専用のライブラリを使うことも無いと思って自分で書いてみた。OAuth認証だけは別途ライブラリ使う。 OAuthのライブラリ Twitterへのアクセスには OAuth認証 というのが必要。 認証方式は非常にややこしいので、凡人はライブラリを使う。 今回は「人間のためのOAuth」をもって自認する Requests-OAuthlib を使う。他のライブラリがどんな生物を想定しているのかは知らない。 アプリケーション登録 Twitter APIにアクセスするにはまずアプリケーション登録が必要。これを済ませると Consumer Key Consumer Secret という2つの
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
kasoutuuka.org - For Sale!
Pythonによるソーシャルデータ分析―わたしはこうやって修士号を取得しました―