特定のサイトからデータを収集して自身のサイトで利用する場合、 自身のサイトにアクセスしたユーザーのリクエストの度にスクレイピングするのは相手側にとってとっても迷惑に話で、そんな奴はいつアクセス制限かけられても文句は言えません! できれば一度取得したデータは自身のデータベースに保管し、その後のリクエストには自身のDBからデータを出力するようにして相手側へも配慮し自身の運用にも費用対効果を高めましょう。 ※相手サイトが許可してない場合はそもそもスクレイピングしちゃダメです! スクレイピングをするための前準備とデータを取得 まずはスクレイピングを行うための準備です、pythonはインストール済みの前提です。 beautifulsoup4のインストール $ pip install beautifulsoup4 インストールができたら新規ファイル「scraip.py」を作成。 手始めにスクレイピング