手作業で大量のWebサイトをコピペする場合は、いくつかの方法がある。 Chrome拡張機能でスクレイピングツールを使う ChromeにJSを実行するConsole/ブックマークレットを使う スクレイピングWebサービスを使う(import.ioなど) スクレイピング用アプリケーションを使う(UiPathなど) スクレイピング代行会社を使う(Octoparseなど) 今回は上記の1と2をメモる。 Chrome拡張機能 スクレイピングツール 1. Web Scraper Web Scraper 大量のページをスクレイピングする場合におすすめ。 かなり使いやすく、設定も慣れるとかんたん。公式サイトに動画で解説してくれていたり、スクレイピングのトレーニング用Webサイトまで用意されている。 Webサイトの階層もくだっていける。たとえば、大カテゴリー > 中カテゴリー > 小カテゴリー と各カテゴリ