Scrapyのログ出力方法を独自のものに変更する方法 - Qiita問題点 Scrapyはログ出力のフォーマットを変更する程度なら設定ファイルをいじるだけで簡単に出来るが、 ログ出力の方法そのものを（メール送信などに）変更する方法が公式ドキュメントで見当たらず困った。 結論 以下のようなPython Scriptを書いたら出来た。 Scrapyがルートロガーを追加するのを抑止する ルートロガーをプログラムで追加する Spiderを起動する 通常通りコマンドラインなどを使用して起動するとScrapyがルートロガーを追加してしまうので、Spiderを起動するPython Scriptを自前で書いてルートロガーを制御した上で起動する必要がどうしてもありそう(このあたりよく分からず) ScrapyのロガーをDjangoのものに変更する例 今回はDjangoのカスタムコマンドから、Scrapyを起動したのでその例。 Djangoにはエラーログをメールで送ってくれるロ
