mysqldumpで一行ずつのINSERT文を吐き出したい - 屑プログラマの憂鬱
デフォルトだと複数行INSERTによって高速にINSERT可能なのだが、場合によっては一行一行INSERTさせたいときがある。 mysqldump -c --skip-extended-insert > dump.sql --extended-insert 複数のVALUESリストを含む、複数行INSERT構文を使用してください。これにより、ダンプファイルサイズを小さくし、ファイルが再ロードされる際の挿入スピードがあがります。 skipを付けると反転する。これで一行一行INSERTしてくれるが、カラム名のないINSERT文が出来上がる。カラム名まで出して欲しい場合には、下記のオプションを利用する。 --complete-insert, -c カラム名を含んだ、完全なINSERTステートメントを使用します。 参考： http://ymotoba.blogspot.com/2008/07/my
mysqldump オプションについて - メモがわり
mysqldump 5.0.45 大量のデータをダンプし、復元しようとすると以下の例外が発生。 ERROR 2013 (HT000) at line xxx: Lost connection to MySQL server during query ダンプファイルのエラー行数をみてみると長いSQL文が生成されていた。 [オプション] http://dev.mysql.com/doc/refman/4.1/ja/mysqldump.html この中のオプションで、 e, --extended-insert というオプションがあり、これがデフォルトで使用されているよう・・・ これは、「さらにコンパクトで速い挿入ステートメントを提供」ということらしいが これを解除して復元出来るようになった。 mysqldump --opt --extended-insert=false -uroot -p da
Private Presentation
Private content!This content has been marked as private by the uploader.
mysqldump と repair with keycache - いちいの日記
でかいテーブルをdumpしてimportしなおすときに、alter enable keysで "repair with keycache" に悩まされてたんですが、MySQL Forums見てたらそのものズバリなのを見つけたのでメモ。 http://forums.mysql.com/read.php?35,155467,166902 ご存知の方には当たりまえな感じですが、自分はそもそも repair by sorting と repair with keycache の2通りのメッセージが出し分けられていること自体に気づいてませんでした。 mysqldump mysqldumpをつかってデータベースを(そのままimportに使える)SQL文に吐き出します。 % mysqldump -uuser -ppass -hhost hoge > hoge.sql このときhoge.sqlの中身はこん
tree-tips: mysqldumpでロックせずオンラインバックアップする | MySQL
mysqldumpのオンラインバックアップ mysqldumpのオプション mysqldump時にロックをかけないオプションは「--single-transaction」です。 --single-transaction このオプションはサーバからデータをダンプする前にBEGIN SQLステートメントを発行します。InnoDBといったトランザクションテーブルに対してのみ便利です。なぜなら、アプリケーションをブロックせずに、BEGINが発行された当時のデータベースの状態をダンプするからです。 このオプションを使用しているときは、一定の状態でダンプされるのはInnoDBテーブルのみだということを留意してください。例えば、このオプションを使用中にダンプされたMyISAMやMEMORYテーブルは状態が変化する可能性があります。 mysqldump — データベースバックアッププログラム リファレンス
PHP:バッチで動かそうとしたらエラーが出た - まんじうこわい@楽：楽天ブログ
2009.09.11 PHP:バッチで動かそうとしたらエラーが出た カテゴリ：PHP shファイルを用意し、そこにPHPを実行するよう記述。 そのshファイルをcrontabに登録しておいて、バッチとして毎日動くようにした。 試しにshファイルを実行してみたところ、下記メッセージを吐いてうまく動かない --error msg-- Could not open input file:XXX.php --/error msg-- ん～何かPHPファイルが開けないって言ってる。 PHPファイルの権限を確認したが問題ない。 shファイルは前から使っていたものに追記しただけなので、特に間違っていな・・・い？ よーく見ると改行コードがCRLF混じっちゃってる。 php XXX.php[CRLF] こんな感じ。 LFに統一してもう一度実行。 あっさり解決。 どうやらCRまでファイル名として読まれていたみ
MySQLとRDS MySQLとRDS Auroraのキャッシュウォーミング機能を調べた | DevelopersIO
データベースのキャッシュウォームアップについて キャッシュを活用して高速にクエリーをさばいているDBシステムも、リスタートなどのタイミングでキャッシュが失われると、途端に処理性能が著しく低下します。 そのようなケースに備えて、有名なDBシステムではスタート時にダンプ済みキャッシュを読み込んでウォームアップする機能が提供されています。 今回は以下の MySQL 系データベースについてキャッシュウォーミング機能を確認しました。 MySQL 5.6 RDS MySQL 5.6 MySQL 5.7 RDS Aurora それでは順に見ていきましょう。 MySQL 5.6 InnoDB で MySQL を使っている場合、クエリーキャッシュは buffer pool に保存されます。 buffer pool はメモリー上にあるため、MySQL を一旦停止すると失われてしまいます。 この問題を解決するた
Redis 入門 - 巨人の肩の上に登る
Redis 使うことになったので，基礎的事項を最速でマスターできるようにまとめてみる． Redis とは Redisは，Key-Value型のNoSQLです． また，In Memory であるため，データ容量に対する制限はあるものの非常に高速に動作します． どのくらい早いのかという benchmark は，ググると結構でてくると思いますので，参考を一つ． redis、それは危険なほどのスピード MongoDB, HBaseなどのNoSQLとの，比較記事があるので参考に． Cassandra vs MongoDB vs CouchDB vs Redis vs Riak vs HBase vs Couchbase vs Neo4j vs Hypertable vs ElasticSearch vs Accumulo vs VoltDB vs Scalaris comparison 細かい話など
Bamboo lath:CodeIgniterでISO-2022-JPでメールを送信すると特定の日本語で文字化け - livedoor Blog（ブログ）
同僚がCodeIgniterでアプリを組んでいてメールの本文を 「UTF-8」から「ISO-2022-JP」に変換してから送信すると 特定の文字だけ文字化けする問題に遭遇していた。 一緒に調査したのでそのときの解決策のメモ。 CodeIgniterのバージョン：1.7.0 アプリケーションの文字コード：UTF-8 メール送信にはCIの提供するEmail.phpを利用。 以下のように文字コードをUTF-8からISO-2022-JPに変換。 $text = mb_convert_encoding($text, "ISO-2022-JP", "UTF-8"); この時点でvar_dumpをすると全ての文字が正常に変換されていた。 しかし実際にメールを送信してみると受け取った時点で「目」、「本」 などの特定の文字が文字化けしていた。。。 なのでEmail.phpクラスのなかまで順にdumpを繰り返
DBAのためのmysqldumpのtips 25選 | Yakst
MySQL標準のダンプツールmysqldumpについて、基礎的な使い方からよく使われるオプション、特徴までを含む25個の問答集。 1) mysqldumpはテキストバックアップツール？それともバイナリバックアップツール？ テキストバックアップツールだ。バックアップファイルを開けば、データベースとその中のオブジェクトを作り直すための全文が見られる。テーブルにデータを詰め込むためのinsert文ももちろん含まれている。 2) mysqldumpのコマンドラインオプションは？ $ mysqldump -u [uname] -p[pass] –databases [dbname] [dbname2] > [backupfile.sql] 3) 全データベースのバックアップはどうしたらいい？ $ mysqldump -u root -p –all-databases > backupfile.sql
91. インタラクティブなコマンドラインプログラム
他のプログラミング言語ではよく見かけますが、対話形式のコマンドラインプログラムを作りたいと思ったことはないでしょうか？ 実はPHPでも対話形式のコマンドラインプログラムを作ることができます。 以下がサンプルプログラムです。 <?php ob_end_clean(); echo("足し算プログラム\n"); echo("一つ目の整数を入力してください。\n"); while (true) { $num1 = fgets(STDIN, 10); //デバッグ用に出力 var_dump($num1); $num1 = rtrim($num1, "\n"); if (ctype_digit($num1)) { break; } echo "整数を入力して下さい。\n"; } echo "二つ目の整数を入力してください。\n"; while (true) { $num2 = rtrim(fgets(
MySQL innodbでのibdata1肥大問題 - tkr備忘録Wiki
ibdata1が肥大化してDISKを圧迫していたので縮小を試みた。 手順としては... mysqldumpコマンドでdumpを取得 Databaseをdrop mysql停止 ibdata1及びib_logfile* の削除 my.cnfを修正 mysql起動 dumpファイルのインポート 実際の作業手順 まずはmysqldumpコマンドでフルダンプを取得します。 # mysqldump -u root --all-databases > /tmp/all-dump.sql フルダンプが完了したらDBをドロップします。 数が多いので簡単なスクリプトを作り実行しました。 #!/bin/bash for DB_NAME in $(mysql -uroot -B -N -e "show databases;" | egrep -v 'test|mysql|information_schema')
mysqldump の結果をそのまま圧縮したり転送したりするコマンド例 | バシャログ。
ちょっと遅めの夏休みをもらって八丈島に行ってきました nakamura です！いい所すぎて危うくそのまま移住するところでした。 データベースの移行をする際みなさんどんな流れで作業しているでしょうか。コマンドラインでダンプを取って、サイズが大きかったら gzip で圧縮して、WinSCP でそれをローカルに落としてきて、それをまた別のサーバにアップロードして・・・・なんて事してたりしませんか？ シェルのパイプやリダイレクトをうまく使ってあげれば、この辺りはコマンド一発でいけちゃったりするのです。今日はそんなコマンド例のご紹介です。 実際によく使うコマンドの例を箇条書きで。 とりあえずダンプの結果をそのまま圧縮する。 mysqldump -udb_user db_name -pdb_pass | gzip > db_name.dump.sql.gz 特定の文字列を置換した上で圧縮する。 MT
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
よく使うmysqldumpのオプションと使用例 - Qiita
apacheでcoreを出力する方法（linux） - I’m hungry
MySQL5.6関連情報まとめ