PhantomJS でログインが必要なページでも自由自在にスクレイピング - 凹みTips
はじめに PhantomJS - Scriptable Headless Browser PhantomJS はヘッドレスな（ブラウザ画面のない）QtWebKit ベースのブラウザで、JavaScript の API を通じて、そのブラウザを自由自在にあやつることが出来ます。使用シーンとしては、Jenkins などの CI ツールとの組み合わせによる Web ページの GUI の自動テストや、Web ページのスクリーンキャプチャ、スクレイピングなどが挙げられます。 今回は、ログインが必要なページの情報をパースして自分専用に RSS 化したいなと思い、３つ目のスクレイピング用途をベースに調べてみました。その内容を備忘録として残しておきます。 出来るようになること ログインが必要なページの HTML を取ってくる ログインが必要なページのスクリーンキャプチャを撮る PhantomJS の導入
日本経済新聞をRSSで受信する方法
日本経済新聞をRSSで受信する方法 こんにちは、さち です。 日本経済新聞（日経）と言えば 言わずと知れた経済情報を主に扱う新聞ですよね。 日本経済新聞はWebでも配信されているのですが 一般的な他のニュース配信サイトと異なりRSSの配信がありません。 そのため、RSSリーダーを使った購読ができないのです。 これはちょっと不便…。 そこで今回は 日本経済新聞（Web版）の記事をRSSで受信する方法を紹介します。 操作手順 公式ではRSSは配信されていないので 日本経済新聞の配信記事からRSSを生成し 配信をしてくれているサイト（非公式）を利用します。 こちらのページ（Zou3.net様）へアクセスします。 配信されている記事のカテゴリーがずらっと並んでいるので 自分が必要なカテゴリーを探しましょう。 「RSSのマーク（下の画像の枠線部分）」のリンクがRSS配信のURLです。 このURLをR
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
はてぶのお気に入りを slack に流す - Qiita
