GASとPhantomJsCloudで動的なWebページをスクレイピング(Javascriptページに対応) | AutoWorker〜Google Apps Script(GAS)とSikuliで始める業務改善入門

Google Apps Scriptはスクレイピングに便利Google Apps Script(GAS)はスクレイピングにとても適したプログラミングサービスです。 サーバーレス環境でスケジュール登録による定期的なスクレイピングが可能です。 GASは無料で利用できるため、費用０でスクレイピング環境を構築できます。 Javascriptの動的ページはGASによるスクレイピングが難しいただ、Google Apps Script(GAS)ではJavascriptで動的に生成されるWebページのスクレイピングが難しいです。 URLにアクセスしてHTMLソースを取得した際に、Javascriptの動的ページだとソース上には取得したいデータの記述がないためです。 例えば、Yahooのトップページの場合、Chromeブラウザでソースコードを表示しても、HTMLソース上では、ブラウザで表示されている文字列が