エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
SPAで作成されたWebサイトをスクレイピングする方法 - Qiita
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
SPAで作成されたWebサイトをスクレイピングする方法 - Qiita
Pythonでスクレイピングする方法としてこれまでrequestsモジュールを使っていたのですが、これはサーバ... Pythonでスクレイピングする方法としてこれまでrequestsモジュールを使っていたのですが、これはサーバ側で生成したHTMLを返すサイトでは使用できますが、JavaScriptを実行する前のレスポンスしか得られませんので、クライアント側でJavaScriptを実行してHTMLを手元で生成するようなSPAで作成されたサイトでは使えませんでした。 requests-htmlモジュール SPAで作成されたサイトをスクレイピングするためにはrequests-htmlを使う必要があります。 インストール # -*- coding: utf-8 -*- import requests from requests_html import HTMLSession def main_render_javascript_page(): url = 'https://hogehoge' session =