Google APIを使ってPythonから検索データを取得する方法
2013年12月3日 備忘録 pythonを使ってGoogle検索の結果を取得する方法をメモ。 まずAPI keyが必要になるので取得する。以下のサイトを見ながらやった。 Google Custom Search API を試す インターフェースが変わったようで、大分手間取った。API keyはここからプロジェクトを1つ選択してAPIs & auth > Registered apps > Browser Keyから取得できる。（Googleアカウントでサインインしてるのは前提条件） 次にここから検索エンジンIDを取得する。これは上のリンクの通りにやればOK。 これで準備おｋなので、リクエストURL：https://www.googleapis.com/customsearch/v1にパラメータを渡してアクセスするとデータが取れる。プログラムはこんな感じ。ちなみに環境は、Mac10.8,
[PHP] Google Custom Search API を試す (2013年7月時点版) | offsidenowの日常を綴ったブログ
Googleの検索結果を利用したいなと思ったときの話です． まず初めに，googleの検索結果を使いたいのでスクレイピングすれば良いのでは?と思って調べてみました． Yahoo知恵袋にドンピシャな質問がありました． グーグルの検索結果をスクレイピングしてはいけないのでしょうか. これを見る限り，googleのスクレイピングを行うのはあまりよくない模様．．．と思ってたら確信をつく話( 勉強用メモ – VBA エクセルWEB連携 )が ありました． どうやら，Googleに過度にアクセスをするとgoogleから同一IPからのアクセスをブロックされるらしく，会社や大学で一斉に使えなくなってしまうようです． Yahoo知恵袋の回答には岡崎市立中央図書館事件 みたいになるなよ！って感じのことが書いてますね． ということでスクレイピングは厳しいらしいのでAPIに頼ることにして調べました． 調べてみると
日本の全エンジニアに捧ぐ！現在公開されているAPI一覧【2013年版】 | Find Job ! Startup
2013年のいま、API界隈が熱い！ 今年に入り、官公庁の統計データやNHKの番組情報など、今までなかなか利用できなかったデータがAPIとして扱えるようになってきました。このエントリでは現在公開されているAPIを一覧でまとめます。いま使えるAPIはこれだけ読めば大丈夫。2013年の最新マッシュアップ事情をあますとこなく網羅します！ HOT! API 総務省 次世代統計利用システム（国勢調査、人口推計、就業構造、企業統計、物価統計 etc.） NHK番組表（※未公開） 行政・自治体・公共サービス 郵便番号 郵便番号検索API（郵便番号 → 住所） 郵便専門ネット（郵便番号 → 住所、郵便番号の簡易存在チェック） ぽすたん（郵便番号 → 住所、住所 → 郵便番号） IW3 PROJECT（郵便番号 → 住所、住所 → 郵便番号） 宇宙 Google+ JAXA PR（※現在一部の学生に限定公開
奥 健太 - 情報推薦研究ツールボックス
情報推薦研究に役立つデータセットやWebサービスAPI，参考図書をまとめています． 研究用データセット WebサービスAPI 参考図書 研究用データセット 研究用に公開されているデータセットです．利用規約などについては，それぞれのリンク先を参照してください． GroupLens公開データセット MovieLens Data Sets：GroupLensが公開しているMovieLensのデータセット MovieLens 100k Data Set：映画データセット 100,000 ratings, 1,682 movies, 943 users MovieLens 1M Data Set：映画データセット 1,000,209 ratings, 3,900 movies, 6,040 users MovieLens 10M Data Set：映画データセット 10,000,054 rating
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ソニック速報