Lambdaで作るクローラー／スクレイピング - プログラマでありたい

話題のAWS Lambda Advent Calendar 2014の14日目です。クロスポストで、クローラー／スクレイピング Advent Calendar 2014の14日目でもあります。 re:Inventで発表されて以来、注目のLambdaです。サーバを用意しなくても、バッチを直接実行できるとあって、ユースケースを考えるだけで夢が広がります。今年はクローラー本を出したこともあって、Lambdaで作るクローラー／スクレイピングをテーマにします。 クローラー／スクレイピングとは？ Webクローラーは、Webサイトを巡回してデータを取得するプログラムです。スクレイピングは、取得したデータから目的の情報を抜き出すことを指します。一般的には、クローラーの中に、スクレイピングの機能を包含していることが多いです。また、特定のページだけ取得してデータを抜き出すことを、スクレイピングと呼ぶことが多い

[dkfj]

Lambdaで作るクローラーのコンセプトです。まだまだやることは沢山あります

[kasumani]

Lambdaで作るクローラー／スクレイピング スターをつけました 　話題のAWS Lambda Advent Calendar 2014の14日目です。クロスポストで、クローラー／スクレイピング Advent Calendar 2014の14日目でもあります。 　re:Inventで発表されて以来

[shogo_okamoto]

Lambdaでスクレイピング。 この辺りはノウハウの集積というか定石パターンが沢山あるんでしょうなぁ。

[rsakamot]

おもしろいー

[critical_alert]

lambdaおもしろい

[hatano99]

“cheerio”

[Hayato]

ほらほら、美しい。