PythonでTwitterスクレイピング&データフレーム化 - Qiita
なぜこの記事を書いたか twitter感情分析に必要なデータの準備、すなわち 「(1)PythonでTwitterスクレイピング⇨**(2)スクレイピング結果をデータフレームとして出力**」をシームレスに解説している記事がなかったからです。 「Twiiterスクレイピング」や「Pythonで感情分析（ネガポジ分析）」、「データフレーム」はそれぞれポピュラーなテーマなので単体ではよく解説記事を見かけます。しかしどれも部分的で、当時初心者レベルの自分には痒いところに手が届かず、中々苦労しました。 本記事の内容 本記事のコードをコピペすればそのまま任意のキーワードやユーザーからツイートを取得、データフレームとして出力が出来ます。ただし、TwiiterAPIを取得していることが前提です。 TwitterAPI取得方法はこちら ##注意点 ・スクレイピングはTwiiter社の規約に則って行いましょう
2chスレをスクレイピングする方法 - Qiita
2chスレをスクレイピングする方法を紹介します。 意外と簡単な正規表現で取得できます。 2chスレの中身を確認 ざっくり構成を抜き出すと以下のような感じ・・。 <html> <head> <meta http-equiv="Content-Type" content="text/html; charset=Shift_JIS"> <base href="http://uni.2ch.net/newsplus/"> <title>タイトル</title> <script type="text/javascript" src="http://www2.2ch.net/snow/index.js" defer></script> </head> <body bgcolor=#efefef text=black link=blue alink=red vlink=#660099> ・・・・（略）
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
