【Python】Seleniumでスクレイピング 待機処理のまとめ |
PythonのSeleniumを利用してスクレイピングを実践した際の備忘録です。 スクレイピングを初めて行う方はコードを書き始める前に、スクレイピングの危険性を知っておきましょう。以下の記事を一読推奨です。 岡崎市立中央図書館事件 岡崎市立中央図書館事件 - Wikipediaja.wikipedia.org さて、スクレイピングを行う際に重要となってくるのは待機処理です。 スクレイピングにおける待機処理は、上の事件のようなスクレイピング先サイトへの過度なアクセスによる負荷を軽減したり、ページ読み込み時間の確保に必須の処理です。 さらに、最近のWebサイトは動的なページも多く、待機時間を設けない場合ハイスペックなPCでない限りまともにスクレイピングができません。 この記事では、Seleniumを用いてスクレイピングをするための待機処理の書き方についてまとめていきます。 スクレイピングについ
Pythonの例外処理にはtry-exceptを使おう！ | Liibercraft｜リーベルクラフト
Pythonでコードを書いていると例外処理を行いたい事があります。 エラーの内容は基本的には実行時にエラーチェックをしてくれます。それに機能的な事前に一覧化してエラーコードの一覧などを作るのが一般的です。 しかし、例えば、ネットワークに関するエラー（特にAPIなどで外部のサーバにリクエストする場合）に関してはどの様なエラーが返ってくるか全く分かりません。そんな時は「try-except」を使って例外処理のコードを書くのが一般的です。 今回はPythonで例外処理をする際に使う「try-except」について解説します。 エラーについて知っておこう！ まずはPythonのエラーの種類について、ざっくりとおさらいしておきましょう。 Pythonの公式チュートリアルでも紹介されていますが、エラーには以下の２種類があります。 ・構文エラー（SyntaxError） ・例外 まずはこの２つのエラー（
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
