wgetを使ってFTP経由で大量のファイルをダウンロードする - そうだ車輪と名付けよう2nd
先日、用向きがあってFTP経由でしかアクセスできないサーバのファイルを大量に落としてこなくてはいけなくなりました。で、普通のFTPクライアントからやっていると接続がブチブチ切れたり、面倒だったりしたので色々調べたところ、使い慣れたwgetがFTPに対応していることを思い出して実行した見たのが以下。 コマンド例wget -mck --passive-ftp ftp://[FTPアカウント]:[FTPパスワード]@[FTPサーバ]/[対象ディレクトリ]オプションwgetのそれぞれのオプションの意味は以下-mミラーリングをする-c一部取得済みファイルの継続処理-k取得したファイル内の絶対指定のリンクを相対指定に書き換えます--passive-ftpFTPでpassive接続するsee. wget オプションまた、当たり前の如く他のwgetのオプションと組み合わせて使えるらしく、たとえば以下のよう
ProFTPDメモ
ここでは、prefix を Plamo-2.2.x で提供されているパッケージに合わせています。別に合わせる必要のない方は、--prefix を指定せずに構築してください。 また、Plamo-3.x で提供されているパッケージにあわせたい場合は、さらに --sysconfdir=/etc、--localstatedir=/var を指示してください。 なお、Plamo-3.3 では tar コマンドがGNUのものになっているので、解凍オプションは、xvfj となります。ご注意ください。 インストール # tar xvfI proftpd-1.2.9.tar.bz2 # cd proftpd-1.2.9 # ./configure --prefix=/usr --sysconfdir=/etc --localstatedir=/var --enable-shadow # make # s
SSHを利用したFTP接続
FTP over SSH BSDマシン同士なら何の問題も無くファイルのやり取りが可能ですが、 Windowsマシンがからむと、Secureなファイルのやり取りが途端に難しくなる。 現状でSecureな通信と言うと、SSHしか思いうかばないが、日本語ファイル名のファイルを扱えるFreeSoftがみあたらない。 WinSCPはShift-JISなら転送できるが、 BSDマシンの文字コードはEUC-JPなので、Win→BSDで転送したものをBSD上で見ると文字化けする。 逆にBSDで正常に表示されるものをWinSCPで見ても文字化けする。 ということで 日本語ファイルを扱えるファイル転送ソフト→FFFTPを利用 FTPのセキュリティー問題→FTPをSSH上で利用 つまり、日本語ファイル名対応の安全なファイル転送は「FTP over SSH」しか解決法がないのです。 # あったら教えて！ 参考
ゆるゆると
何度設定してもメールが送信できない。 ふと、AWS SESのパスワードは40文字以上あるのになんか20文字くらいしか入っていないことに気が付く。 と思ったらパスワード入力欄の最大文字が20文字だった。 なのでブラウザの開発者ツール(DevTool)で直接ぶち込んで登録するといけた。 入力欄は20文字制限かけてるのに登録できるのもなんだかなと思う。 group by したときに引っかからなかった列の値を0にしたいとかありますよね？ 例えばこんなの mysql> SELECT a,count(a) count FROM hoge GROUP BY a; +---+-------+ | a | count | +---+-------+ | 1 | 110 | | 3 | 540 | | 4 | 245 | +---+-------+を +---+-------+ | a | count | +
mipselなLinkStation Debianサーバー 〜Debian etch化〜
mipselなLinkStationで省電力、省スペース、静音なDebianサーバー、FreeLinkによりDebian導入
ウェブリブログ：サービスは終了しました。
「ウェブリブログ」は 2023年1月31日 をもちましてサービス提供を終了いたしました。 2004年3月のサービス開始より19年近くもの間、沢山の皆さまにご愛用いただきましたことを心よりお礼申し上げます。今後とも、BIGLOBEをご愛顧賜りますよう、よろしくお願い申し上げます。 ※引っ越し先ブログへのリダイレクトサービスは2024年1月31日で終了いたしました。 BIGLOBEのサービス一覧
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
