はてなブックマーク

ひとつPythonでWebスクレイピングでもやってみようかとScrapyをVPS環境に入れてみたところ、インストールするだけで手間取ってしまった。 環境はPython2.7.3で、インストールしてから特に何も設定していない状態。 本サイトに書いてある通り、まずは pip install scrapy を実行してみた。 するとUnicodeDecodeErrorが発生する。 これはよくあるPythonの初期設定の問題なので、 /usr/local/lib/python2.7/site-packages/sitecustomize.pyを作成して、 下記の内容を書いて保存しておく。 import sys sys.setdefaultencoding("utf-8") 再度pipを実行すると、またエラー。どうやらlxmlがはいっていないらしい。 pip install lxml エラー。必