[Bardに聞く]WEBスクレイピングで子ページにある情報を検索 - Qiita

前稿「[Bardに聞く]VS CodeではじめてのWEBスクレイピング」で簡単なWEBスクレイピングを実行しました。 当たり前ですが私が欲しかった情報は「WEBスクレイピングの実行方法」ではありません。 WEBスクレイピングは大量アクセスを行うとサーバー負荷がかかるため迷惑行為になりますが、 少量であればHTMLを読む人間にとっては、 自分の作業を減らすことができる自動化ツールです。 目的 企業の中途採用情報ページで、子ページにある情報を検索し、該当ページを一覧取得する と、いいますのは、類似する職種の募集が同一企業内で複数部門にあるとき 企業内の組織情報でページが分かれていることが多く、 社内をよく知らない応募者からは、見付けるのが大変です。 （転職情報サイトは検索機能が便利ですが、企業公式ページを参照する場合とします。） そこでWEBスクレイピングです。 外部の人間がDBにアクセスして