列指向データベースのページのデータ構造 - ablog
行指向データベースは行単位でページ(Oracle Database でいうデータブロック)にデータを格納しているのに対して、列指向データベースは列ごとにページに格納している。クエリ実行時に結果セットを返す際に列別にバラバラのページに格納されているデータをどうやってタプル(レコード)に復元している*1のかと思ったがやはり行IDのようなものを持っているようだ。 行ID は C-Store では pid、MonetDB では BAT(Binary Association Tables) の oid と呼ばれている。 The Design and Implementation of Modern Column-Oriented Database Systems NSM(N-ary Storage Model): 行方向でブロック（ページ）にデータを格納する方式 DSM(Decomposition
PostgreSQLカラムストア拡張(cstore_fdw)の検証 | GMOメディア エンジニアブログ
はじめにはじめまして、サービス開発部DBチームの本多と申します。 弊社のサービスポイントタウンではデータ分析用DBとしてPostgreSQLを使用しています。本番DBはOracleとMySQL併用で、そこから日々必要なデータを溜め込んでいます。 導入当初は特に不便も無く動いていたのですが、データが溜まりテーブルサイズが大きくなるにつれクエリ応答速度の低下に悩まされるようになってきたため、citusdata社がオープンソースで提供しているPostgreSQLのカラムストア拡張、cstore_fdwを導入してみましたので使用感を報告したいと思います。 cstore_fdwはカラムストア(列指向)テーブル、データ圧縮、SkipIndex(ストライプ毎に値の上限・下限値を持つ事で範囲検索時に不要なブロックの読み出しをSkipする(ファイルレイアウト)の3つの特徴を持つ外部テーブルをPostgreS
いい加減テーブル定義書を手動で更新するのなんかやめたらいい - Qiita
自動化。 どうせ誰も見ないって。 show create table 見たほうが早いし。 mysqldump --no-data -uroot --database employees をリポジトリに入れてバージョン管理しとけば良いと思うけど、 何らかの文書化が必要な場合は毎回差分を修正するより全部出力した方がラク。 カラム名日本語がよければ適当に as で別名つけるとよい。 mysqlの場合 # !/bin/bash MYSQL="mysql -B -uroot" DBNAME="employees" TBLSQL=`cat << EOD SELECT TABLE_NAME, TABLE_COMMENT FROM INFORMATION_SCHEMA.TABLES WHERE table_schema = '$DBNAME' AND table_name LIKE '%s' EOD` C
疎行列の格納方式メモ - Negative/Positive Thinking
はじめに 巨大だけどほとんどの要素がゼロであるような疎行列は、そのまま保持するより、要素がゼロじゃないところだけをうまく保持する事でメモリや計算量を減らせたりする。 扱う行列のタイプによって、効率のよい形式がいくつかあるようなので代表的なものをメモしておく。 Coodinate(COO) Format 非ゼロ要素の(row indices, column indices, value)を要素数分持たせる形式 非ゼロ要素が散らばっている場合に有利 0 4 0 0 2 0 0 0 1 を row 0 1 2 column 1 1 2 value 4 2 1 のように保持する。 compressed sparse row(CSR) Format / compressed sparse column(CSC) Format Coodinate Formatにおいて、左から右、上から下へ順番に要素を
SQLite export with column names
Is there any SQLite command or third-party tool that allows database dumps to include column names in the INSERT INTO statements? Instead of INSERT INTO "MyTable" VALUES ('A', 'B'); I'd like to see INSERT INTO "MyTable" (Column1, Column2) VALUES ('A', 'B'); The .dump command in SQLite only offers the first version.
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
