「クローラー」作成や「スクレイピング」をやりたいあなたは、こちらはいかがでしょうか JavaScriptのスクレイピングもあります

Chapter 2 クローラーを設計する０１、クローラーの設計の基本 ０２、クローラーの持つ各処理工程ごとの設計と注意点 ０３、バッチ作成の注意点 Chapter 3 クローラーおよびスクレイピングの開発環境の準備とPythonの基本０１、Pythonがクローリング・スクレイピングに向いている理由 ０２、クローラーおよびスクレイピング用の開発環境を準備する ０３、Python基礎講座 Chapter 4 スクレイピングの基本０１、ライブラリのインストール ０２、Webページをスクレイピングする ０３、RSSをスクレイピングする ０４、データをデータベースに保存して解析する Part 2 応用編Chapter 5 クローラーの設計・開発（応用編）０１、クローラーをもっと進化させるには ０２、print関数でログを出力する ０３、loggingモジュールでログを出力して管理する ０４、ログ出力