“Scrapyには Scrapy Shell という便利なデバッグ機能があります。取得したいWebページのURLを指定して Scrapy Shell を起動すると、DownloaderからのresponseなどいくつかのScrapy Objectを保持した状態でipythonが起動します。この状態でSpid

kent-where-the-light-is のブックマーク 2017/05/09 13:38

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/300369517/comment/kent-where-the-light-is" data-user-id="kent-where-the-light-is" data-entry-url="https://b.hatena.ne.jp/entry/s/qiita.com/ttomoaki/items/05d3dc104a695f939d63" data-original-href="https://qiita.com/ttomoaki/items/05d3dc104a695f939d63" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fqiita.com%2Fttomoaki%2Fitems%2F05d3dc104a695f939d63" data-user-icon="/users/kent-where-the-light-is/profile.png">Pythonでスクレイピング - Scrapy入門最初の2歩目 - Qiita</a><br><p style="clear: left">“Scrapyには Scrapy Shell という便利なデバッグ機能があります。 取得したいWebページのURLを指定して Scrapy Shell を起動すると、DownloaderからのresponseなどいくつかのScrapy Objectを保持した状態でipythonが起動します。 この状態でSpid</p><a class="datetime" href="https://b.hatena.ne.jp/kent-where-the-light-is/20170509#bookmark-300369517"><span class="datetime-body">2017/05/09 13:38</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！

Pythonでスクレイピング - Scrapy入門最初の2歩目 - Qiita

qiita.com/ttomoaki2016/09/05

背景 Python製のスクレイピングフレームワークであるScrapyの存在を最近知ったのですが、ちょっと触ってみた感じ最強でした。具体的な良い所としては以下が挙げられます。いくつかの設定＋簡潔な記述だけでスク...

30 人がブックマーク・3 件のコメント

他のコメントを読む

＼コメントがサクサク読めるアプリです／

はてなブックマーク

Pythonでスクレイピング - Scrapy入門最初の2歩目 - Qiita

はてなブックマーク

公式Twitter

はてなのサービス