Google APIを使ってPythonから検索データを取得する方法
2013年12月3日 備忘録 pythonを使ってGoogle検索の結果を取得する方法をメモ。 まずAPI keyが必要になるので取得する。以下のサイトを見ながらやった。 Google Custom Search API を試す インターフェースが変わったようで、大分手間取った。API keyはここからプロジェクトを1つ選択してAPIs & auth > Registered apps > Browser Keyから取得できる。（Googleアカウントでサインインしてるのは前提条件） 次にここから検索エンジンIDを取得する。これは上のリンクの通りにやればOK。 これで準備おｋなので、リクエストURL：https://www.googleapis.com/customsearch/v1にパラメータを渡してアクセスするとデータが取れる。プログラムはこんな感じ。ちなみに環境は、Mac10.8,
[PHP] Google Custom Search API を試す (2013年7月時点版) | offsidenowの日常を綴ったブログ
Googleの検索結果を利用したいなと思ったときの話です． まず初めに，googleの検索結果を使いたいのでスクレイピングすれば良いのでは?と思って調べてみました． Yahoo知恵袋にドンピシャな質問がありました． グーグルの検索結果をスクレイピングしてはいけないのでしょうか. これを見る限り，googleのスクレイピングを行うのはあまりよくない模様．．．と思ってたら確信をつく話( 勉強用メモ – VBA エクセルWEB連携 )が ありました． どうやら，Googleに過度にアクセスをするとgoogleから同一IPからのアクセスをブロックされるらしく，会社や大学で一斉に使えなくなってしまうようです． Yahoo知恵袋の回答には岡崎市立中央図書館事件 みたいになるなよ！って感じのことが書いてますね． ということでスクレイピングは厳しいらしいのでAPIに頼ることにして調べました． 調べてみると
奥 健太 - 情報推薦研究ツールボックス
情報推薦研究に役立つデータセットやWebサービスAPI，参考図書をまとめています． 研究用データセット WebサービスAPI 参考図書 研究用データセット 研究用に公開されているデータセットです．利用規約などについては，それぞれのリンク先を参照してください． GroupLens公開データセット MovieLens Data Sets：GroupLensが公開しているMovieLensのデータセット MovieLens 100k Data Set：映画データセット 100,000 ratings, 1,682 movies, 943 users MovieLens 1M Data Set：映画データセット 1,000,209 ratings, 3,900 movies, 6,040 users MovieLens 10M Data Set：映画データセット 10,000,054 rating
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
