タグ

ブックマーク / tipstour.net (1)

  • 【Linux】スクレイピングにはNordVPNが便利・設定方法を解説【[date]】

    Webスクレイピングをしたいのだけど、VPNやプロキシーで一番良いサービスはないだろうか!? Linuxで使えるベストなVPNサービスを教えてほしい! …という形に、最適なプラクティスをご紹介します。 ということで、こんにちは! Webサイトを自動で取得する「Webスクレイピング」をする上で、必ずネックとなるのがアクセスするIPアドレスの問題です。 スクレイピングする対象のサービスの営業妨害にならない範囲でスクレイピングするのは言うまでもない当然の話ですが、Webサイトによっては、少しのアクセスでも不正なアクセスと認識してIPアドレスごとブロックしてしまうことがあります。 これを回避するためには、定期的なIPアドレス変更などの対応が必要です。 一般的にはこうした問題はプロキシーやVPNサービスを使って回避することになりますが、具体的にはどうしたら良いのでしょう? 結論を言いますと、「Nor

    【Linux】スクレイピングにはNordVPNが便利・設定方法を解説【[date]】
    NOV1975
    NOV1975 2022/04/26
    スクレイピング自体には善悪はないが、お作法を破ると対抗手段ができて、それを回避しようとすると攻撃と判定される、というのは仕方ないよ。複数IP使ってまでやるスクレイピングなんて筋悪じゃん。
  • 1