wgetでの一括ダウンロードが便利な件 – taichino.com

wgetというと今までtar玉のダウンロードとdynamicDNSの更新用アクセス位にしか 使ってなかったのですが、実はかなり高機能でもっと使い道があるという事で少しだけまとめておきます。 特に優秀な機能が再帰取得で、あるページを指定した時に、そのページに含まれているリンク先も再帰的に取得できます。 # http://sports.yahoo.co.jpを再帰ダウンロード % wget -r http://sports.yahoo.co.jp これでhttp://sports.yahoo.co.jpからたどれる同一ドメイン上のすべてのファイルを取得できますが、大抵の場合、全部は必要ないので再帰回数を指定できます。オプションは-lに回数を続けます。 # 再帰回数1回を指定 % wget -r -l 1 http://sports.yahoo.co.jp またダウンロードしたいファイルの拡張子

[swfz]

便利

[stealthinu]

wgetを簡易クローラーとして使う方法。こんな色々と機能あったのか。

[k0kubun]

割りといろいろできるんだ

[Pasta-K]

便利

[hidehara]

wgetってここまでやれるんだ。http特化型の良いツールだと思いました

[typista]

ぽけったー wgetでの一括ダウンロードが便利な件

[moerrari]

ウェブサイト全体をダウンロード。メンテナンス時の暫定公開やPHPが使用できないサーバ用。-e robots=offを付けないとダウンロードできない。-rで再帰的。-r -l 1のオプションを必ず付ける(ローカルホストは不要)

[editnuki]

これいい

[animist]

地震画像収集中

[sakuragaoka]

wgetの使い方、こっちのほうが分かりやすいかな。

[highfrontier]

-e 参考になりました via: wgetでの一括ダウンロードが便利な件