『wgetでURLが存在すれば0を、存在しなければ1以上を返す』
シェルスクリプトを組む場合、変数は冗長な文字列よりも整数にしておきたい事があります。 またその方が管理が楽になる場合も多々あります。 test[www.pinkdragon.net] コマンドでの扱いが楽になるよう、 URLのファイルが存在するかどうかを整数で返すようにします。 以下駄文となるため、飛ばす方はこちら[ameblo.jp/pclindesk]をクリック。 wget[itpro.nikkeibp.co.jp] コマンドは、ファイルをダウンロードするのにfetch[x68000.q-e-d.net] 同様に重宝するコマンドです。 wget は通常的に使うと、HTTP/FTP通信にてファイルを取得するコマンドですが、--spider オプションをつけると、ファイルはダウンロードせずにファイルの存在有無を確認しようとします。 試しにgoogle社のトップページでチェックしてみます。
HTTP サーバのレスポンスヘッダは Firefox の Live HTTP headers よりも wget -S の方が詳しく取れる - tilfin's note 跡地
#!/usr/bin/ruby print "Content-Type:application/xhtml+xml\r\n" print "Content-Type:text/plain\r\n\r\n" print <<EOF Test for How to deal Content-Type EOF たとえば上記のようにわざと Content-Type を二重に出力してしまうと、Apache はバリデートで後者のみがクライアントに返されるが、lighttpd はそのまま二重定義で返してしまう。 これを確認するために、Firefox の Live HTTP headers を使ってレスポンスヘッダを見ても、下記のように Content-Type はどちらも１つしかない。lighttpd の前記の動作を確認することはできない。 Firefox Live HTTP headers Apach
wgetとcurlの根本的な違い - ctrlshiftの日記
UNIXの代表的なダウンローダにwgetとcurlがあります。 たいていの場合どんなOSでも、どちらかのソフトがインストールされているのではないかと思います。 しかし、この2つのダウンローダの機能は、一見似ているようにも見えますが、実はそれぞれに特徴が見られるので、今日はそれについて解説してみます。 wgetの特徴 wgetのスペルは「片手でもコマンドできる」ということもあって、多くの人から気に入られています。 そんなwgetの特徴として、最も際立っているのが、クローラとして動作可能という点です。 オプションで-rを付加してやることで再帰的に動作し、-lでその深さを指定することができます。 また、-Aや-Rを利用すれば、ダウンロードする拡張子のホワイトリストとブラックリストを指定することも可能です。 つまり、特定のサイト内に散らばって存在するファイルを、拡張子によって指定ダウンロードできる
WGETでのコマンドや操作について質問です。 Basic認証で入った先に取得したいファイルがあるのですが そのファイルを取得する際のコマンド例などをおしえていた…
WGETでのコマンドや操作について質問です。 Basic認証で入った先に取得したいファイルがあるのですが そのファイルを取得する際のコマンド例などをおしえていただけないでしょうか。 お願いいたします。
wget tips
[home] [back] wget の使い方 自分がたまに使うけど、よく忘れる機能について。 全然使ったことない人はinfo見てください。 （ここに書いてある内容も、多くは 'Guru Usage' あたりに載ってます） wget 1.9.1 released [2004/04/05追記] 久々の更新ですが、 気づいたら2003年9月頃にwget 1.9.1が出てました。 POSTオプション追加(--post-data) -wなどに小数が使えるようになった POSTが出来るようになって、ついにcurlに追い付いたみたいです。 wgetの方がcookieを扱うのが少し面倒だけど、 やりたいことは全部できるんじゃないでしょうか。 wget 1.8.1 released [2001/12/28追記] 気づいたらwget 1.8.1が出てます。 こんな枯れたソフトをよくhackする気になるもんだ
[Linux] wgetで保存先ファイル名を指定 (それなりブログ)
日別にディレクトリ分け cronで1時間置きとかに実行すると、ファイル数が多くなり過ぎるので #!/bin/sh # ------------------ # Environments BASE_DIR='/path/to/basedir' URL='http://targetsite.com/' FILENAME_PREFIX='yourfilename' # ------------------ TODAY=`date +%Y%m%d` NOW=`date +%Y%m%d_%H%M%S` SAVE_DIR=$BASE_DIR/$TODAY mkdir -p $SAVE_DIR wget -O "$SAVE_DIR/$FILENAME_PREFIX-$NOW.html" $URL
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
