Clojarsにweb-scraperというのを上げてみた - Learn to Crawl

web-scraper 0.0.2 - Clojars 最近はClojureを趣味で書いてまして、web-scraperというものをつくって clojarsというサイトに上げたのでご報告。まあ、単なるWebページをスクレイプするという ものなんですが、HtmlUnitというJavaのライブラリを使っていてJavaScriptを解釈して くれるので、最近のJavaScriptいっぱい使っているサイトでもある程度スクレイプできる というものです。 こんな感じで project.clj に足してもらって lein deps でインストールして :dependencies [[org.clojars.ka2u/web-scraper "0.0.2"]] こんな感じでスクレイプできます。 (ns something.scrape (:require [org.clojars.ka2u/web.scr