Pythonクローリング&スクレイピング -データ収集・解析のための実践開発ガイド-』を読んでしばらく Robobrowser を使ってみようと思うので、その忘備録。 edx.hatenablog.com 基本 browser = RoboBrowser( parser='html.parser', # Cookie が使用できないと表示されてログインできない問題を回避するため、通常のブラウザの User-Agent を使う。 user_agent='Mozilla/5.0 (Macintosh; Intel Mac OS X 10.10; rv:45.0) Gecho/20100101 Firefox/45.0)' ) broswer.open(スクレイピング対象のページのURL) # 取得したページの中身の確認。デバッグ時以外は不要。 # print(broswer.parsed) u