[B! postgreSQL][java] slay-tのブックマーク

slay-t id:slay-t

postgreSQLとjavaに関するslay-tのブックマーク (2)

100万件ぐらいのレコードを扱ったらOOMEが出た話。 - 谷本心 in せろ部屋
要約技術的な話だけ教えて、という方のために先に結論だけ書いておきますと、PostgreSQLはクエリを実行した時点で全レコードの情報を一気に読んできてヒープを埋めてしまう場合がある、ということ話です。たとえば、ResultSet#nextメソッドを使いながら処理を回すようなコードを書いて、少ないヒープでも処理できるようにするのは常套手段だと思いますが、そういうコードを書いていても一気にヒープを消費してしまうことがあるのです。詳しくはこのドキュメントを見てください。 https://jdbc.postgresql.org/documentation/head/query.html#query-with-cursor ことの発端ちょっと仕事でJava + jOOQ + PostgreSQLで、DBのデータを集計するようなバッチ処理を書いてまして、もちろん俺様の書いたコードにバグなんてある
slay-t 2020/08/13
postgresql

java

db

database

プログラミング

programming

sql

article

仕事
リンク
[PostgreSQL + Spring Boot + MyBatis]BLOBをデータベースで管理する
はじめに突然ですが、皆さんはアプリケーションで扱うBLOBデータをどこに保存しているでしょうか？大きく分けると、以下のいずれかになると思います。ファイルストレージデータベースオブジェクトストレージいずれも一長一短ありますが『SQLアンチパターン』という書籍では、データベースに格納することも検討せよ、としています。では、データベースで管理するメリットとデメリットは何でしょうか。メリット RDBMSのトランザクション内で操作が完結する(データだけ消えた、ファイルだけ消えたという不整合な状態にならない) データと同時にファイルのバックアップも取得できるバックアップ復元時にファイルも戻せるデメリットバックアップのサイズや取得時間が増加するバックアップの復元時間が増加するリソースを圧迫するちなみに『SQLアンチパターン』には、オブジェクトストレージに関する記述はなかったと記
slay-t 2018/10/18
postgresql

BLOB

データベース

ストレージ

java
リンク
1