Puppeteer を使ったヘッドレスブラウザによるスクレイピング以下の手順を、puppeteer で行う例。 Bot判定されにくくするために、puppeteer-extra と puppeteer-extra-plugin-stealth を用いる。 手順 URL のリストが入った CSVファイルの読み込み ヘッドレスブラウザの Chromium でスクレイピング HTMLファイルとして保存 1 〜 3 を CSV のデータ分、繰り返し実行 インストール npm i --save puppeteer puppeteer-extra puppeteer-extra-plugin-stealth npm i --save papaparse const puppeteer = require('puppeteer-extra'); const StealthPlugin = require('puppeteer-extra-plugin-stealth')
