SQLAlchemy＋MySQLでマルチバイト扱ったら文字化けた時の対応 - アルパカDiary Pro
マルチバイト扱ってたら以下のようなエラーが発生。 Failed to update model. 'latin-1' codec can't encode character u'\u3042' in position 15: 接続するときのコードはこんな感じ。 DBもクライアントもutf8指定してるのになーって感じ。 DSN = 'mysql://user@localhost/db_dayo' engine = create_engine(DSN, encoding='utf-8') 結論から言うと、DSNに追加オプションを指定することで回避できた。 DSN = 'mysql://user@localhost/db_dayo' OPTION = 'charset=utf8&use_unicode=1' engine = create_engine(DSN + '?' + OPTION,
MacBook AirにPostgreSQLをbrewでインストールした - ありの日記
MacにはもともとPostgreSQLが入っているっぽい。サーバは入ってないのかな。でも、psqlコマンドはある。 それは、置いておいて、brewでPostgreSQLをインストールしてみた。 $ brew install postgresまぁ、こんだけ。 次にDatabaseの初期化 $ initdb /usr/local/var/postgresんで、サーバの起動 $ pg_ctl start -D /usr/local/var/postgresそして、psqlで接続しようとすると以下のエラーになった。 $ psql psql: could not connect to server: Permission denied Is the server running locally and accepting connections on Unix domain socket "/var
Postgresで正規表現を使った置換 - アルパカDiary Pro
sqlで正規表現って使ったことありませんでしたが、 たまたま仕事で必要になったので使ってみました。 今回の要件 要は とある列の前後の半角／全角スペースを削除する ということがしたかったのです。 正規表現はあまり得意ではないのですが この程度なら問題なし！ 実演（準備） では実演してみます*1。 適当なテーブルを作ってみましょう。 drop table tsubasa; create table tsubasa (name text, killershot text); insert into tsubasa values ('大空','ドライブシュート '); insert into tsubasa values ('日向',' タイガー ショット'); insert into tsubasa values ('立花','スカイラブハリケーン'); insert into tsubasa
PostgreSQL 8.3 以降からの postgresql.conf を、サーバースペックによるデフォルト値を設定し、パフォーマンスを調整する
DoRuby! (ドルビー!) は現場のエンジニアによる、主にRubyなどの技術に関する様々な実践ノウハウを集めた技術情報サイトです。 こんにちは、O2 です。今回は、postgresql の設定ファイル（postgresql.conf） に関しての、私が最近設定しているデフォルト値を公開しようと思います。 実際、インストール直後の設定では、「ロースペックのマシン環境でも動作する」設定の為最近のサーバースペックにあった、デフォルト値を記述してみようと思います。 とは言っても、私が扱っている最近のサーバーのメモリは、8GB、16GB、32GB で、さらにPostgreSQL 8.3以降を使用しているので、PostgreSQL 8.3以降での、メモリ3パターンでのデフォルト値を紹介します。 注意．あくまでも、私が割り出したデフォルト値ですので、どのように使用するかによってチューニングは必要にな
Tuning Your PostgreSQL Server/ja - PostgreSQL wiki
作者 Greg Smith、Robert Treat、およびChristopher Browne PostgreSQLは性能よりも幅広い互換性を目的に設定された、基本設定で配布されています。 デフォルトのパラメータでは、使用中のシステムを過小評価してしまう可能性が高いです。 最終的に把握しなければならない項目のすべて（必要ならばGUC Three Hour Tourを参照してください）に引きずり込まれないように、ここで基本を簡単に紹介することでお助けしようと思います。 これらはPostgreSQLの初心者は気にしない、もっとも一般的なもののようです。 ここで紹介した概要を読んだ後により詳しく知りたければ、各節にてパラメータの名前をクリックしてください。 最新のPostgreSQLのマニュアルの関連文書にリンクしています。 さらにServer Configuration Tuningには、こ
PostgreSQLのしくみ分科会のご紹介 — Let's Postgres
NTT オープンソースソフトェアセンタ 坂田 哲夫 「PostgreSQLのしくみ分科会」って何？ この記事では、JPUG の分科会の一つである「PostgreSQL のしくみ分科会」をご紹介します(以下「しくみ分科会」と書きます)。 PostgreSQL を使っていく上で、さまざまな「わからないこと」に直面することがあります。そのような時には、マニュアルを見たり、インターネット検索したり、書籍をひも解いたりして、調べることでしょう。それでも疑問が残ってしまったら、どうすればいいのでしょうか? PostgreSQL はオープンソースの DBMS ですから、ソースを読めば(ほぼ)全ての疑問が解決するはずです。が、PostgreSQL は80万行以上ある大きなソフトウェアですし、一人でコツコツ読んでいくのは大変です。また、ソースコードを読むには、DBMSの仕組みについての知識も必要でしょう。こ
目的別ガイド：チューニング編 — Let's Postgres
この記事では PostgreSQL のチューニングの概要を紹介します。まずは PostgreSQL のチューニングの勘所を掴んでください。各項目についての詳細はリンク先の記事で紹介していますので、そちらをご覧下さい。 チューニングの流れ PostgreSQLのチューニングとして必要な作業には何があるのでしょうか？ システムの開発状況やボトルネックによって必要な作業は変わってきますが、およそ以下の事項が挙げられます。 1. 情報収集と分析 チューニングを総当りで試すのは得策ではありません。まずは「ログ」や「稼動統計情報」を収集し、パフォーマンスのボトルネックを見つけることが先決です。特に良くあるトラブルは「トラブルシュートとチューニング」にも対処方法があります。 2. チューニングの実施 最も影響の大きなボトルネックから順にチューニングしていきます。 ボトルネックが解消されるまで、それ以外の
[ThinkIT] 第5回：高度なインデックスの活用 (1/2)
ここまでは単一の列に対して作成するインデックスを前提にお話ししてきました。しかし、インデックスは同一テーブルの複数の列に対してまとめて設定することもできます。検索条件に複数列を指定する場合などは、このようなインデックスを使えばさらに効率よく処理を行うことができます。
JDBCによるDB操作を速くするには - omotenashi-mind
JavaによるDB操作は遅いという話を良く聞きますが、原因の特定と適切な対策を実施すればかなり実用的なレベルまでパフォーマンスは改善加能です。ここではJDBC利用に対するパフォーマンス改善の勘どころをまとめます。まずDB操作の中でも大きく「データ照会(SELECT)」、「データ操作(INSERT, UPDATE, DELETE)」によって必要な対策が異なるため、ここではそれぞれの目的に分けて解説します。 データ照会(SELECT) ケース１：大量レコードを取得する処理が遅い SELECT処理にて、数千、数万件以上のデータを取得するようなクエリが遅い場合にはfetchサイズの見直しが効果的です。JDBCクライアント(JDBCを利用してDBサーバに接続しているJavaアプリケーション)は、DBサーバ側で実行されたSELECTの結果セットをfetchサイズで制限された行数分、分割して取得する
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
圧縮しつつpg_dumpとpsqlを行う方法（転記） - YuTの後悔（公開）日記