不揮発性メモリ時代のネットワークスタックおよび ACM HotNets 2016 参加報告 (2016/12/26 18:00〜)
注意 現在X(旧Twitter)でのソーシャルログインができない事象を確認しています。事前にX(旧Twitter)側で再ログインした上でconnpassのソーシャルログインを行うか、 「ユーザー名(またはメールアドレス)」と「パスワード」の組み合わせでのログインをお試しください。合わせてFAQもご確認ください。 お知らせ 2024年9月1日よりconnpassサービスサイトへのスクレイピングを禁止とし、利用規約に禁止事項として明記します。 9月1日以降のconnpassの情報取得につきましては イベントサーチAPI の利用をご検討ください。 お知らせ connpassではさらなる価値のあるデータを提供するため、イベントサーチAPIの提供方法の見直しを決定しました。2024年5月23日(木)より 「企業・法人」「コミュニティ及び個人」向けの2プランを提供開始いたします。ご利用にあたっては利用
In-Memory Columnar Store (IMCS)
Introduction Columnar store or vertical representation of data allows to achieve better performance in comparison with classical horizontal representation due to three factors: Reducing size of fetched data: only columns involved in query are accessed. Vector operations. Applying an operator to set of values (tile) makes it possible to minimize interpretation cost. Also SIMD instructions of modern
Try SingleStore Free Today
Try SingleStore FreeThe world's only real-time data platform for powering intelligent applications. Free foreverBuild your prototype, side-project or startup on SingleStore's generous free tier. Start building in minutesSpin up a managed database and start building with a few clicks. We take care of everything. We can do it allTransactions, analytics, search and more. No need for complex data infr
MemSQL、無料版の「MemSQL Community Edition」公開、容量に制限なし。インメモリの分散データベース
MemSQLはインメモリの分散データベース「MemSQL」の最新版「MemSQL 4」のリリースと、無料版の「MemSQL Community Edition」の公開を発表しました。 MemSQLはデータをメモリ上に置くことで高速な処理を実現するデータベース。スケールアウト機能を備えているためノードを追加することで容量や性能を向上させることができます。 内部のデータは、インメモリでのローストア（row store）とディスクベースのカラムストアを共存させることで、高速な処理性能を維持しつつヒストリカルデータなどの大規模なデータも保存可能。リレーショナルデータの一般的なデータ型に加え、地理情報、JSONデータなどのデータ型もサポート。高速なトランザクション処理だけでなく、BIなど大量のデータ分析も高速で処理すると説明しています。 MySQLのプロトコルをサポートし既存のデータ分析ツールなどが
［2］OLTPとDWHは並び立つか
OLTP（オンライントランザクション処理）系とDWH（データウエアハウス）系、異なるワークロードをいかに連携し高速処理するかがユーザーニーズとして浮かび上がってきた。カラムナーとインメモリーを活用することは各社共通だが、実装方法や活用指針には差がある。“脱バッチ処理”へと向かうトレンドを探った。 司会： 製品を見ると、各社とも「インメモリー」「カラムナー」がキーワードになってきました。こうした機能は、ビッグデータを扱いたいとか、クラウドで使いたいといったユーザーニーズに合っているのでしょうか。 日本マイクロソフト：北川 データベースの利用形態は大きく、OLTP（オンライントランザクション処理）系とDWH（データウエアハウアス）系の二つに大別できますが、その中でさらなるパフォーマンスを求める顧客が増えています。ただし、今までのカリカリのチューニングを求めるというよりも、速くなれば速くなるだけ
MemSQL update | DBMS 2 : DataBase Management System Services
I stopped by MemSQL last week, and got a range of new or clarified information. For starters: Even though MemSQL (the product) was originally designed for OLTP (OnLine Transaction Processing), MemSQL (the company) is now focused on analytic use cases … … which was the point of introducing MemSQL’s flash-based columnar option. One MemSQL customer has a 100 TB “data warehouse” installation on Amazon
HyPer: Hybrid OLTP&OLAP High-Performance Database System
HyPer – A Hybrid OLTP&OLAP High Performance DBMS HyPer is a main-memory-based relational DBMS for mixed OLTP and OLAP workloads. It is a so-called all-in-one New-SQL database system that entirely deviates from classical disk-based DBMS architectures by introducing many innovative ideas including machine code generation for data-centric query processing and multi-version concurrency control, leadin
MICA: A Holistic Approach to Fast In-Memory Key-Value Storage | USENIX
Hyeontaek Lim, Carnegie Mellon University; Dongsu Han, Korea Advanced Institute of Science and Technology (KAIST); David G. Andersen, Carnegie Mellon University; Michael Kaminsky, Intel Labs MICA is a scalable in-memory key-value store that handles 65.6 to 76.9 million key-value operations per second using a single general-purpose multi-core system. MICA is over 4–13.5x faster than current state-o
インメモリデータベース「VoltDB 4.0」がリリース、インメモリ分析を高速化 | OSDN Magazine
米VoltDBは1月29日、インメモリデータベース「VoltDB 4.0」を公開した。インメモリ分析の強化、稼働中のクラスタ拡張など、多数の機能が加わっている。 VoltDBはJavaとC++で実装されたインメモリ型リレーショナルデータベースシステム。Ingresなどのデータベース開発で知られるマサチューセッツ工科大学（MIT）のMichael Stonebraker氏らが中心になって開発した。1秒で数百万単位の読み込み/書き出し、ミリ秒レベルでのトランザクション処理といった高速な処理が特徴。シェアードナッシング、ACID準拠、SQLとJSONサポートといった機能を備える。動作環境はMac OS XおよびLinuxで、一部の高度機能が入っていないコミュニティ版はAGPLv3で公開されている。 VoltDB 4.0は2013年1月に公開されたバージョン3.0以来のメジャーリリースとなる。イン
［OOW2013］Oracle DBが100倍高速に、エリソンCEOが「インメモリー×カラム型」新機能を発表
「スイッチを入れるだけで、これまでのクエリー処理が100倍速くなる」---2013年9月22日（米国時間）に幕を開けた米Oracleの年次カンファレンス「Oracle OpenWorld San Francisco 2013」、同社のラリー・エリソンCEOは基調講演でこう宣言した（写真1）。エリソンCEOが紹介したのは、「インメモリー・オプション」と呼ぶ、Oracle Database 12cで利用可能な追加機能。データベース内でデータをカラム（列）型で保持し、しかもインメモリーで操作することで、桁違いのスピードでクエリーが処理できるという。 「Oracleを含め多くのRDBMSはロー（行）単位でデータを操作してきたが、レポートを高速に作りたいなどのニーズに応えるため、最近はカラム型を採用する製品が増えている」。エリソンCEOは、カラム型に注目した背景をこう説明する。必要なデータをカラム単
Home
This is the Github wiki for the VoltDB project. VoltDB is the database component of Volt Active Data, a commercial product that provides both the latest version of VoltDB, plus enterprise-grade features such as command logging, Active(N)® database replication, cloud support and more. This repository is no longer being updated. However, we offer the basic open source code as is for students, resear
TUM Informatik III: HyPer: Hybrid OLTP&OLAP High-Performance Database System
TU München - Fakultät für Informatik Lehrstuhl III: Datenbanksysteme Summary The HyPer prototype demonstrates that it is indeed possible to build a main-memory database system that achieves world-record transaction processing throughput and best-of-breed OLAP query response times in one system in parallel on the same database state. The two workloads of online transaction processing (OLTP) and onl
HyPer – 未来のIn-Memory DBMSは古の魔法で超絶OLTP性能とOLAP性能を両立させる | 独り言v6
昨今のDBMSの分野の進歩はGoogleがパンドラの箱を空けてからずっと凄いスピードで進化し続けているが、中でもVoltDBは飛び抜けたOLTP性能に特化したDBMSだ。しかしそのプロトタイプであるH-Storeからもう何年も経っており、当然その先の何か、というのが見えてくる。 最近久々に技術に立ち戻ってちょっと最新のDBMSに関する論文を読むか、とカラム指向データベースの圧縮手法について学ぼうかとStonebraker教授の前作C-Store（後のHP Vertica）を調べたり、ハイブリッドDBの前段に使われるインメモリDBの構造について勉強しようと思ったりしてたら非常に興味深いシステムを見つけたので紹介したい。それはミュンヘン工科大学のHyPerだ。HyPerはH-Storeのあとを受け、そのOLTP性能の高さを受け継ぎながら、OLAP性能に関してもインメモリDBならではのずば抜けた
“第3のメモリー”の衝撃、ストレージとDBが一変する
出典：日経コンピュータ 2012年12月20日号 pp.70-77 （記事は執筆時の情報に基づいており、現在では異なる場合があります） 2012年、DRAMでもフラッシュメモリーでもない“第3のメモリー”の量産出荷が始まった。DRAM並みに高速でありながら、フラッシュ同様に電源をオフにしてもデータが消えない「新世代不揮発性メモリー」だ。新メモリーによってコンピュータのアーキテクチャーは激変し、入出力（I/O）の大幅な高速化が実現すると共に、消費電力は激減する。 コンピュータには、高速だが電源をオフにするとデータが消える「主記憶装置（メインメモリー）」と、低速だがデータが消えない「外部記憶装置（ストレージ）」という2種類の記憶装置がある。 こんなコンピュータアーキテクチャーの常識が一変する可能性が出てきた。DRAM並みに高速でありながら不揮発性を備えた「新世代不揮発性メモリー」の量産出荷が始
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://jp.techcrunch.com/2016/03/11/20160310tableau-scores-advanced-database-tech-with-acquisition-of-german-startup-hyper/
http://techcrunch.com/2016/03/10/tableau-scores-advanced-database-tech-with-acquisition-of-german-startup-hyper/
［1］DBベンダー「ビッグ4」の製品・戦略
MemSQL 3.0 | DBMS 2 : DataBase Management System Services
Exploiting Hardware Transactional Memory in Main-Memory Databases (PDF)
Charming Python: Functional programming in Python, Part 3
