wget，curlコマンドを生成するGoogle Chrome拡張 - hitode909の日記
コンテキストメニューから，wgetやcurlのコマンドを作ってくれるGoogle Chrome拡張を作った． Cookie付きのコマンドを作って，新しいタブでData URIを開くので，コピーしてターミナルに貼ればすぐ使える．Cookie付きのコマンドがクリップボードにコピーされるようにした． 適当にURLをコピーしてwgetすると403になることが多くて，不便だったので作った． wget，こんなのができる． wget --cookies=off --header "Cookie: aaa=bbb; ccc=ddd;" http://eeeeeeeeeecurlはこんなの． curl --cookie "aaa=bbb; ccc=ddd;" http://eeeeeee インストール Chrome Web Store - kojiki 5ドル払ってGoogleのなんとかっていうところに置い
wget で認証付きサイトをダウンロードする - WebOS Goodies
WebOS Goodies へようこそ！ WebOS はインターネットの未来形。あらゆる Web サイトが繋がり、共有し、協力して創り上げる、ひとつの巨大な情報システムです。そこでは、あらゆる情報がネットワーク上に蓄積され、我々はいつでも、どこからでも、多彩なデバイスを使ってそれらにアクセスできます。 WebOS Goodies は、さまざまな情報提供やツール開発を通して、そんな世界の実現に少しでも貢献するべく活動していきます。 皆さん、 wget というツールはご存知でしょうか。コマンドラインの HTTP/FTP ダウンロードツールなのですが、これがなかなかに高機能なのです。例えば HTML 中のリンクを辿る再帰的ダウンロードや、絶対パスリンクの相対パスへの変換など、多彩な機能を持っています。きちんと活用すれば、サイトをまるごとダウンロードしてローカルで閲覧することもできます。 さらに、
セッションキーとして出力されるCookieをwgetで保存する - hogepiyo
認証付きのサイトにログインした状態を再現しながらwgetでアクセスするときに、セッションキーとして出力されるCookieを保存してあとで使えるようにする方法。 --save-cookies=file 出力されたCookieを保存するが、期限切れだったりexpiresがないCookieは保存されないので、次のオプションも指定する。 --keep-session-cookies コイツを付けてやることで、上記のCookieも保存できる。 login.txtにID/Passwordなど認証時にPOSTする情報を入れておき、まずは認証通過させてCookieを取得する。 $ wget -O - --post-file=login.txt --save-cookies=cookie.txt --keep-session-cookies http://www.example.com/login いったん
Perlでニコニコ動画から動画とコメントをダウンロードする - KWの徒然Blog。。。
ニコニコ動画から動画をダウンロードするスクリプトをPerlで書きたい。 そこでぐぐってみたら早速情報があった。 ニコニコ動画には非公式のAPIがいくつも存在する。 ニコニコ動画API - ニコニコ大百科 - 今回は動画をダウンロードしたいのでgetflvを使う。 getflvを使うときは http://flapi.nicovideo.jp/api/getflv/sm* にアクセスする。 このAPIを使うときには条件があって、 1. ログインした状態のセッションを保持したクッキーを持ったUserAgentでアクセスする。 2. 動画IDに指定した動画のページにアクセスしている。 を満たさないと使用できない。 例えば、http://www.nicovideo.jp/watch/sm500873のFLVファイルのURLを取得するには 1. ログインする 2. http
HTTPヘッダの確認 - 計算機と戯れる日々
-Sと--spiderをつければwgetでHTTPヘッダの確認が出来る。 $ wget -S --spider http://www.google.co.jp --16:05:08-- http://www.google.co.jp/ => `index.html' Resolving www.google.co.jp... 66.249.89.104, 66.249.89.99, 66.249.89.147 Connecting to www.google.co.jp|66.249.89.104|:80... connected. HTTP request sent, awaiting response... HTTP/1.0 200 OK Cache-Control: private Content-Type: text/html; charset=Shift_JIS Set-Cook
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://webcache.googleusercontent.com/search?q=cache:01y3mNg5QKAJ:www.hougetsudou.com/wp/archives/1572+&cd=4&hl=ja&ct=clnk&gl=jp
Getflv - ニコニコ動画(API) - Cathode Music