Linuxで圧縮形式の確認方法 - conf t
fileコマンドで対象のファイルがどんな形式で圧縮されているか確認できます。 以下例ではtest1.tar.gzはgzipで、test1.bz2はbzip2で圧縮されていることがわかりました。 # ls -lh 合計 8.0K -rw-r--r-- 1 root root 135 9月 17 14:21 2016 test1.tar.gz -rw-r--r-- 1 root root 47 9月 17 14:17 2016 test1.txt.bz2 # file test1.txt.bz2 test1.txt.bz2: bzip2 compressed data, block size = 900k # file test1.tar.gz test1.tar.gz: gzip compressed data, from Unix, last modified: Sat Sep 17 14
Elasticsearchのデータをdumpしてコピーしたい - DRYな備忘録
やりたいこと あるインスタンスで動いてるElasticsearchサーバのインデックスデータのdumpを、たとえば自分のローカルにコピーしたい こんなのがある elasticdump これ便利だった 最低限の使い方（書いてあるんですけど↑） % npm install -g elasticdump % elasticdump --input=http:/my.elasticsearch.server.com:9200/my_index --output=http://localhost:9200/my_index あるいは、 % elasticdump --input=http://my.elasticsearch.server.com:9200/my_index --output=$ | gzip > my_index.json.gz 解凍 % gzip -dc my_index.jso
マルチコアでgzファイルの圧縮解凍ができるpigzの使い方 - Qiita
Linux標準の gzip や gunzip だとシングルでの処理（1 CPUだけ）になってしまうので、gzファイルを高速に解凍（圧縮）したい!! という時に残念な気持ちになります。 そこでその残念な気持ちを救うのが pigz というLinuxソフト。 マルチコアを活かして並列処理で圧縮・解凍ができるので、CPUをたくさん積んでいる環境だと爆速に処理することができるようになります。 インストール方法 pigzは外部リポジトリのEPELリポジトリを利用してyumインストールすることも可能ですが、僕的にはサクッと簡単安心？なソースインストールをおすすめしています。 まずはインストールディレクトリに移動してソースパッケージをダウンロードしておきます。
mysqldump の結果をそのまま圧縮したり転送したりするコマンド例 | バシャログ。
ちょっと遅めの夏休みをもらって八丈島に行ってきました nakamura です！いい所すぎて危うくそのまま移住するところでした。 データベースの移行をする際みなさんどんな流れで作業しているでしょうか。コマンドラインでダンプを取って、サイズが大きかったら gzip で圧縮して、WinSCP でそれをローカルに落としてきて、それをまた別のサーバにアップロードして・・・・なんて事してたりしませんか？ シェルのパイプやリダイレクトをうまく使ってあげれば、この辺りはコマンド一発でいけちゃったりするのです。今日はそんなコマンド例のご紹介です。 実際によく使うコマンドの例を箇条書きで。 とりあえずダンプの結果をそのまま圧縮する。 mysqldump -udb_user db_name -pdb_pass | gzip > db_name.dump.sql.gz 特定の文字列を置換した上で圧縮する。 MT
Google Sites: Sign-in
Not your computer? Use a private browsing window to sign in. Learn more about using Guest mode
gzファイルを解凍せずに調べる - Dimension Planet Adventure 最終章 最終話『栄光なる未来』
中身を見るだけじゃなくて、いろいろ調べる 中身を見る ファイルが小さいとき # zcat test.gz ファイルが大きいとき # gzip -dc access_log.1.gz | less参考 http://open-groove.net/linux/gzcat-and-gzip-dc/ ファイルサイズと、解凍後のファイルサイズを調べる lオプションを使う # gzip -l test.gz compressed uncompressed ratio uncompressed_name 260 426 47.7% index このとき、解凍後のファイルが4GBを超えていると表示バグが発生して、 圧縮率がマイナスになるので注意。 そのような場合は、時間がかかるが下のようにすると解凍後のファイルサイズが表示される。 他に良い方法あるかなぁ。 # gzip -dc test.gz | wc
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
「dd | gzip」 はそこまでだ！「dd | pigz」にするだけで20倍速くなった件 - Qiita
org.apache.hadoop.io.compress (Apache Hadoop Main 2.7.2 API)
How to gunzip without overwriting non-interactively