Scrapy のクローリング中に win32api が無くてコケる問題に対処(Windows10, 64bit, Python2.7) - 無駄と文化
昨日は Windows で Scrapy 1.1.2 をインストールするために必要な libxml2 のインストールについて解説しました。 blog.mudatobunka.org が、どうやら Windows ではクローリングを実行するときにもう一つ win32api というライブラリが必要になるようです。 win32api が無いと、クローリングの実行中にコケます...。 状況再現 ひとまず適当な Spider を書いて走らせてみましょう。 月並みですが CNN.co.jp の記事一覧ページ から記事タイトルと URL を抜き出す Spider を書きます。 example/spiders/test.py # -*- coding: utf-8 -*- import scrapy class TestSpider(scrapy.Spider): name = "test" allowe
Scrapy インストール中に libxml2 が無くてコケる問題に対処(Windows10, 64bit, Python2.7) - 無駄と文化
Scrapy を最新版の v1.1.2 にしたくて pip install scrapy したらインストール中にコケました。 python -m virtualenv env env\Scripts\activate pip install scrapy とやっても... コケる。 なにやら libxml2 というライブラリが見つからないと言われています。 c:\windows\temp\xmlXPathInitu5z5db.c(1) : fatal error C1083: Cannot open include file: 'libxml/xpath.h': No such file or directory ********************************************************************************* Could n
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
