タグ

ブックマーク / qiita.com/derodero24 (1)

  • 【Python】Googleの検索結果をアクセス制限なしで取得する - Qiita

    ソースコード全体はここ(GitHub)でも見れます。 目次 はじめに 注意 ソースコード 使い方 はじめに Googleの検索結果を大量にほしいと思っても、apiや既存のモジュールだとアクセス制限があったので、自分で汎用的なクラスを作ることにしました。 作成時の方針は以下の2つ。 テキスト検索(普通の検索)と画像検索の両方に対応 何も考えずに使える 注意 こんなタイトルにしといてなんなのですが,アクセス制限を完全に突破することはできていません。一つ(もしくは数個程度)のキーワードで大量の検索結果を取得することはできますが,大量のキーワードの検索結果を数件ずつ取得するのには向いていません。使いすぎるとIPアドレスに一時的な制限がかかって検索結果を取得できなくなります。使用は自己責任でお願いします。 ***** 追記(2019/05/07) ***** Splashというブラウザを使うことで,

    【Python】Googleの検索結果をアクセス制限なしで取得する - Qiita
  • 1