自サイトの記事のリンク切れを自動で抽出するアレを作った - プロクラシスト

こんにちは！ほけきよです。 今日は自動化第四弾！！ またまたGoogleに媚びを売るSEO対策です(^^) 前回は内部リンクネットワークの可視化でした。今回は、リンク切れの抽出です！ 悲しきNot Found …Googleさんがお怒りになる前に片付けちゃいましょう！ リンク切れとは？ めんどい 環境を作る コード 実行する 今後の課題/注意 まとめ リンク切れとは？ 自サイトで言うと、こういうのです 悲しいですよね。以前まであったはずのものがなくなるのは… というわけで、リンク切れは早めに対処しましょう！ めんどい そう思い、いちいちリンククリックして確かめてたんですが、 めんどい、めんどうがすぎる 大体のリンクはちゃんと通るのに、通らないリンクを探すなんて、修行ですか？ というわけで、3記事で飽きました。ううーん、そうだ、自動化しよう 環境を作る python(3系) bs4 urll

[imslotter]

面倒なことはpythonにさせよう。便利だよ、たぶん！！( ˘ω˘)ｽﾔｧ

[cruller]

(まいど！)Oo( ˘ω˘)ｽﾔｧ

[gaou2]

これは…スゴいなあ

[tsubasa123]

これこそWEBサービス化して欲しいけど、負荷対策が難しそう。リクエストのキャッシュとアクセス制限と一定時間での回数制限と…期待してますw

[Ysmr_Ry]

夢が広がる Web Scraping シリーズ

[bbc-21]

すごい！すごい！第5弾は今までのやつをまとめて全部自動でやってくれるコマンドを…うっ…( ˘ω˘ ) ｽﾔｧ

[photoblg]

拒否されるのはUser-Agentヘッダー偽装すると良いですよー（他サーバへの負荷は注意）