最近、requests-html の存在を知ったので、共有したいと思います。 これまで beautifulsoup4 使ってたんですけど、javascript で動的にコンテンツが変わるページだと上手くいきませんでした。 でも、requests-html の README.md 読むと、javascript なページでもスクレイピングできそうな雰囲気あるじゃないですか! 早速やってみたいと思います。 インストール まずはインストールから。 mac 使ってるんですけど、Mojave にしてしまったので、pyenv でこんなエラー出ました。