メルカリの検索結果からタイトルと値段をスクレイピングしたかった - Qiita

前回までのあらすじ 前回の記事では、とりあえずアクセスしてページ内容を表示するものだった。 せっかくなので、取れそうな情報を抜き出してみた。 取りたい情報 検索結果として表示されたページの商品名 上記商品名に対応する値段 取得手順 スタートページにヘッドレスモードでアクセス ちょっと待ってからページ内にある商品名と値段を取得、画面出力 「次へ」ボタンを探してクリック、同様に取得/出力しながらループ。 クリックできなければループを抜けて終了 ソースコード # メルカリ上で動的レンダリングされた商品情報を取得し、すべてのページから商品名、価格、タイトルを取得する。 from selenium import webdriver from time import sleep from selenium.common.exceptions import * options = webdriver.C