インメモリの高速データ処理基盤「Apache Arrow」がバージョン1.0に到達
The Apache Foundationは、オープンソースで開発している高速なデータ処理基盤「Apache Arrow 1.0.0」のリリースを発表しました。 We just released @ApacheArrow 1.0.0, the first formally "stable columnar format" release with a move to SemVer for the libraries. We have a much improved website, too. Read more about what's newhttps://t.co/j24VdxqFTL — ApacheArrow (@ApacheArrow) July 27, 2020 Apache Arrowはメモリ上にカラムナフォーマットでデータを保持し、プロセッサのSIMD命令やGPUなどにも対
インメモリDBの「SAP HANA」、インテルの不揮発性メモリに正式対応。サーバダウン時もデータを失わず高速起動
インメモリDBの「SAP HANA」、インテルの不揮発性メモリに正式対応。サーバダウン時もデータを失わず高速起動 SAPは同社のインメモリデータベース「SAP HANA」のアップデートリリース「SPS03」で、インテルの不揮発性メモリ「Intel Optane DC persistent memory」に正式対応し、データベースの一部を不揮発性メモリに配置することを可能にすると発表しました（SAP HANAのブログ、インテルのブログ）。 Intel Optane DC persistent memoryは、メインメモリのDRAMと同じくDDR4スロットに挿せる不揮発性メモリで、インテルが6月1日に正式発表したばかりです。サンプル出荷が開始されており、2019年に本格出荷が予定されています。 Intel Optane DC persistent memoryを利用することのメリットは2つ挙げ
Redis 4.0正式リリース。モジュールによる機能やデータの拡張が可能に、新レプリケーションエンジンで運用が改善
Redis 4.0正式リリース。モジュールによる機能やデータの拡張が可能に、新レプリケーションエンジンで運用が改善 Redis 4.0はモジュールによる機能拡張の実現、新しいレプリケーションエンジンによる高速なレプリケーション、新しいアルゴリズムの追加によるキャッシュの改善、フラッシュの非同期実行など、多くの機能追加が行われています。 リリースノートには、「内部における変更に関していえば、4.0はおそらくこれまででもっとも劇的なリリースだろう」と、次のように記されています。 Note that 4.0 is probably one of the most extreme releases of Redis ever made in terms of changes inside the internals 新しいレプリケーションエンジン「PSYNC2」 Redis 4.0では新しいレプリ
Amazon DynamoDBの応答時間をミリ秒からマイクロ秒へ、インメモリキャッシュのDynamoDB Accelerator（DAX）が正式版としてリリース
AWS上でNoSQLデータベースとして提供されているDynamoDBを高速化する「DynamoDB Accelerator」（以下DAX）が、正式サービスとなったことが、AWSブログの記事「DynamoDB Accelerator (DAX) Now Generally Available」で発表されました。 Amazon DynamoDBはマネージドサービスで提供されているNoSQLデータベースす。非常に高いスケーラビリティと安定した高性能が特徴です。高速なレスポンスやスケーラビリティを重視するようなゲームや広告配信、コンテンツ配信サービス、モバイルアプリケーションなどのバックエンドなどによく使われています。 このDynamoDBにインメモリキャッシュを追加することで高速化するのが、今回正式サービスとなったDAXです。Webサイトからの説明を引用します。 Amazon DynamoDB
不揮発性メモリ時代のネットワークスタックおよび ACM HotNets 2016 参加報告 (2016/12/26 18:00〜)
注意 現在X(旧Twitter)でのソーシャルログインができない事象を確認しています。事前にX(旧Twitter)側で再ログインした上でconnpassのソーシャルログインを行うか、 「ユーザー名(またはメールアドレス)」と「パスワード」の組み合わせでのログインをお試しください。合わせてFAQもご確認ください。 お知らせ 2024年9月1日よりconnpassサービスサイトへのスクレイピングを禁止とし、利用規約に禁止事項として明記します。 9月1日以降のconnpassの情報取得につきましては イベントサーチAPI の利用をご検討ください。 お知らせ connpassではさらなる価値のあるデータを提供するため、イベントサーチAPIの提供方法の見直しを決定しました。2024年5月23日(木)より 「企業・法人」「コミュニティ及び個人」向けの2プランを提供開始いたします。ご利用にあたっては利用
論文紹介: In-Memory OLAP データベースシステムにおいて、現代のストレージハードウェア上にあるメモリよりも大きなサイズのデータをどのように管理するのか - 備考欄に感想を書くタイプのエンジニア
※これは システム系論文紹介 Advent Calendar 2016: ADVENTAR 1 日目の記事です。 昨今話題に事欠かない In-Memory DBMS ですが、暇に任せて Hekaton 関連で何か（←忘れました）を調べていたときに出くわした論文がこちらです。タイトルは Larger-than-Memory Data Management on Modern Storage Hardware for In-Memory OLTP Database Systems 一応和訳しておくと In-Memory OLAP データベースシステムにおいて、現代のストレージハードウェア上にあるメモリよりも大きなサイズのデータをどのように管理するのか、という感じでしょうか。 先に結論を言うと後述する通り、今日では HDD だけではない、さまざまなストレージ技術を利用したストレージデバイスが利用
Apache Geode
Performance is key. Consistency is a must. Providing low latency, high concurrency data management solutions since 2002. Build high-speed, data-intensive applications that elastically meet performance requirements at any scale. Take advantage of Apache Geode's unique technology that blends advanced techniques for data replication, partitioning and distributed processing. Apache Geode provides a da
In-Memory Columnar Store (IMCS)
Introduction Columnar store or vertical representation of data allows to achieve better performance in comparison with classical horizontal representation due to three factors: Reducing size of fetched data: only columns involved in query are accessed. Vector operations. Applying an operator to set of values (tile) makes it possible to minimize interpretation cost. Also SIMD instructions of modern
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Vector Community Edition - A Database for High Performance Analytics - Actian
TechCrunch
SQL- and Operator-centric Data Analytics in Relational Main-Memory Databases
TechCrunch
ウイングアーク1st、インメモリエンジンによりデータ集計・分析を高速化したBIツール「Dr.Sum Ver.5.0」
GitHub - facebookarchive/beringei: Beringei is a high performance, in-memory storage engine for time series data.
The Real-Time GPU Accelerated Database
Kinetica - The fastest, distributed, in-memory database accelerated by GPUs for analyzing large and stream data
Modern Main-Memory Database Systems (VLDB2016 Tutorial)
Accelerating Analytics with Dynamic In-Memory Expressions
Apache Geode で始める�Spring Data Gemfire
TechCrunch | Startup and Technology News