Webスクレイピングだなんて、あんまり大きい声じゃ言えない。 結局のところ、他所様のコンテンツを勝手に拝借してゴニョゴニョするわけで、良いことではないわ。 だが、人間生きていれば、Webスクレイピングをしなければいけない場面くらいある。 そう、今回はそういう場面なのだ。 Webスクレイピングとは? プログラムで、WebページのHTMLを取得し、解析して、必要なデータだけを抽出することを指す用語。 ウェブスクレイピング(Wikipedia) 例えば、Amazonなどの通信販売系のWebサイトにスクレイピングをかけると、少年漫画の新刊情報だけ抽出できたりするのだ。 だが、プログラムが自動的に、必要なデータだけを抽出するということは、広告やら何やら余計な情報が表示されない。という意味になる。 Webサイトを開いている個人はともかく、営利目的である企業のWebサイトやサービスでは、そんなことをされ