pg_duckdbとDuckLakeがもたらすOLAP統合の未来
注目を集めるPostgreSQL＋Analytics 先日、SnowflakeとDatabricksのそれぞれの年次イベントでPostgreSQLに関連する企業の買収が大々的に発表されました。 両社は分析系（OLAP）のソリューションを提供する比較的大きなベンダーであり、過去にはOLTP系への進出を目指したデータストアの開発が注目されたこともありました（SnowflakeのUnistoreが典型です）。 彼らは今後、PostgreSQLを自社がカバーできていなかった領域で適用することで、現在のメガクラウドのようにOLTP用途のRDBとOLAPのソリューションを統合してくることが予想されます。 そして、多くの利用者を持つオープンソースのPostgreSQL（コミュニティ版と言っても良いかも知れません）においても、OLAPとの統合という流れは今後確実に訪れるというのが、私個人の予想です。 今回
住信SBIネット銀行、ネットバンキング基盤をAWS東京/大阪リージョンで冗長構成、障害検知から5分以内に復旧 | IT Leaders
IT Leaders トップ ＞ 経営課題一覧 ＞ 事業継続 ＞ 事例ニュース ＞ 住信SBIネット銀行、ネットバンキング基盤をAWS東京/大阪リージョンで冗長構成、障害検知から5分以内に復旧 事業継続 事業継続記事一覧へ [事例ニュース] 住信SBIネット銀行、ネットバンキング基盤をAWS東京/大阪リージョンで冗長構成、障害検知から5分以内に復旧 2023年8月29日(火)日川 佳三（IT Leaders編集部） リスト 住信SBIネット銀行（本社：東京都港区）は2023年8月29日、インターネットバンキングシステムの可用性を高めるため、システム基盤のAmazon Web Services（AWS）をマルチリージョンで構成したと発表した。AWSの東京リージョンに障害が発生した際に、大阪リージョンに切り替えて業務を継続する仕組みで、障害検知から5分以内にサービスを復旧できるようになった。2
「セキュリティエンジニアのための English Reading」が公開されました - 午前７時のしなもんぶろぐ
お久しぶりです。しなもんです。 ここ数ヶ月作成していた「セキュリティエンジニアのための English Reading」が無事 IPA のサイトで公開されましたのでここで紹介させていただきます。 日本のセキュリティエンジニア全員に是非！是非！ご覧いただきたい内容に仕上がっていると自負しておりますので (誇張あり)、どうか冷やかしでも一度ご覧いただけると幸いです。 www.ipa.go.jp 中核人材育成プログラムとは プロジェクトの背景 「セキュリティエンジニアのための English Reading」紹介 Awareness ～英語情報の重要性を理解する～ Practice ～より「楽に」「上手く」読む～ Training ～リーディング力を鍛える～ セキュリティ英単語集 特長①: セキュリティニュースで「実際に使われている」単語を厳選 特長②: セキュリティならではの意味・使用例を掲載
企業やサービスをつなぐ分散トランザクションマネージャを目指して
企業やサービスをつなぐ分散トランザクションマネージャを目指して：マイクロサービス構築の課題「分散トランザクション管理」とは？ Scalarに聞いた マイクロサービスアーキテクチャが注目される一方、課題として浮き彫りになっているのが「分散トランザクション管理」です。「分散トランザクション」とは何か、どのような解決策があるのか、分散トランザクションマネジャーを提供するScalerへのインタビューを交えながら紹介します。 本連載第5回では、年次イベントのレポートやインタビューを通じて分散SQLデータベース（DB）であるYugabyteDBの解説を試みました。分散SQLDBのメリットは理解できるものの「今の現場や会社に、分散DBが必要なのか分からない」という意見も頂きました。 今回は現在トレンドとなっているマイクロサービスを検討していく上で課題となる分散トランザクションについて、国内で数少ない専業
企業が「NewSQL」を採用するメリットは？ PingCAP CTOに聞く「TiDB」開発の理由
連載第2回ではCockroachDB、YugabyteDB、TiDBなどのNewSQLが、2021年にリリースした内容を振り返りました。NewSQLと呼ばれる新たなデータベース（DB）の目指す方向性が少しずつ見えてきたのではないでしょうか。 第3回は分散SQLDBの「TiDB」をオープンソースで公開し開発を進めているPingCAP CTO（最高技術責任者）のEd Huang氏（以後、エド）に、NewSQLと呼ばれるDBはどこに向かうのか、TiDBはどのような立ち位置を目指して開発を進めているのか聞きました。 TiDB Cloudのアーキテクチャとは 小林 はじめまして、お会いできて光栄です。 Ed Huang（エド） PingCAPでCTOをしているエドです。今日はよろしくお願いします。 小林 連載第2回でも紹介したように、PingCAPは「TiDB Cloud Developer Tie
株式会社 Scalar に入社しました - こたつ&&みかん&&でーたべーす
2021/12/31 付けで約 9年弱勤めた前職を退職し、2022/01/01 から 株式会社 Scalar でお仕事をさせてもらうことになりました。大きな節目であり、せっかくなので、入社エントリを残しておこうと思います。 Scalar はどんな会社なのか Scalar (Twitter: @Scalar_labs) は、「THE WORLD'S RELIABLE DATABASE」をビジョンとして掲げ、分散 DB (分散 Tx マネージャー) である Scalar DB と分散型台帳である Scalar DL という 2つのプロダクトを中心に、DB 関連のプロダクトの研究開発を行なっている会社です。 また、Scalar DB は OSS (Apache License 2.0) で公開されており、Scalar DL は商用ライセンスでのみ提供されています。 Scalar DB (Apac
『Infra Study 2nd #2「クラウドネイティブを支えるインフラ技術」』でお話してきました - IDCF テックブログ
こんにちわ。ITシステム本部の加藤です。イベント中はハンドルTenForward（@ten_forward）で紹介されていました。 6/11（金）にオンライン開催された『Infra Study 2nd #2「クラウドネイティブを支えるインフラ技術」』というイベントで少しお話をしてきましたので、そのイベントのレポートをしたいと思います。ここではメインの講演のみ紹介しますが、他にもLTがあり、そちらも勉強になりました。 この"Infra Study"というイベントはForkwellさんが主催されており、これまでのいずれの回も知らない人はいないであろう、国内トップレベルのインフラエンジニアが登壇していました。 私はこれまですべての回を聴講しています。どの回もかなりの盛り上がりを見せる、インフラエンジニアであれば知らない人はいないと言っても過言ではないようなイベントです。 まさか自分に登壇のお誘い
2021年に「NewSQL」はどう進化したのか？ CockroachDB、YugabyteDB、TiDBのアップデートを振り返る
本連載第1回では、データベース（DB）エキスパートの篠田さんとDBの「これまで」そして「これから」を対談した模様をお届けしました。その中では「NewSQL」と呼ばれる分散SQLDBの使いどころや、それらが解決しようとしている課題などを洞察しました。また分散SQLDBが米国、中国で開発され、そうしたベンダーに投資や人材が集まっている現状も言及しています。 今回は本連載2022年の初めを飾る記事として2021年のNewSQL市場はどう動いたか、各ベンダーの製品リリースを基に解説していきます。 今回対象としたDB製品は、前回の連載でも取り上げた「CockroachDB」「YugabyteDB」「TiDB」の3つとしました。
[個人的]データベースゆく年くる年（2021）
この記事は私個人の2021年の活動を振り返るものです。 2020年に蒔いた種が今年は芽吹き、パブリックなメディアに登場する機会をいくつか頂くことが出来ました。その結果、皆さんにお伝えしている以上に多くのデータベース関係者とお話をする機会があり、とても楽しかったです。 詳説 データベース 2020年から仕込んでいたDatabase Internalsの翻訳版 「詳説 データベース」 が、満を持して7月に発売されました。 Amazonで★1つをもらったり、誤訳を指摘されて凹んだりしていましたが、「挑戦したものだけが失敗できる」 の精神のもと、気持ちは前に進んでいます。 2020年の12月は監訳作業にとても苦しんでいた時期で、それに比べれば2021年末は穏やかに過ごしています。しかし、「喉元過ぎれば熱さを忘れる」とは良く言ったもので、もう一冊ぐらい翻訳に関わってみたいなぁなんて思い始めています。
![[個人的]データベースゆく年くる年（2021）](https://cdn-ak-scissors.b.st-hatena.com/image/square/708b1a76cc09e9053b64c6ef10d8e9cd1c41e785/height=288;version=1;width=512/https%3A%2F%2Fres.cloudinary.com%2Fzenn%2Fimage%2Fupload%2Fs--kabCdklJ--%2Fc_fit%252Cg_north_west%252Cl_text%3Anotosansjp-medium.otf_55%3A%25255B%2525E5%252580%25258B%2525E4%2525BA%2525BA%2525E7%25259A%252584%25255D%2525E3%252583%252587%2525E3%252583%2525BC%2525E3%252582%2525BF%2525E3%252583%252599%2525E3%252583%2525BC%2525E3%252582%2525B9%2525E3%252582%252586%2525E3%252581%25258F%2525E5%2525B9%2525B4%2525E3%252581%25258F%2525E3%252582%25258B%2525E5%2525B9%2525B4%2525EF%2525BC%2525882021%2525EF%2525BC%252589%252Cw_1010%252Cx_90%252Cy_100%2Fg_south_west%252Cl_text%3Anotosansjp-medium.otf_37%3A%2525E3%252581%252593%2525E3%252581%2525B0%252Cx_203%252Cy_121%2Fg_south_west%252Ch_90%252Cl_fetch%3AaHR0cHM6Ly9zdG9yYWdlLmdvb2dsZWFwaXMuY29tL3plbm4tdXNlci11cGxvYWQvYXZhdGFyLzVmM2YwZjM3ZjguanBlZw%3D%3D%252Cr_max%252Cw_90%252Cx_87%252Cy_95%2Fv1627283836%2Fdefault%2Fog-base-w1200-v2.png)
「NewSQL」はPostgreSQLやMySQLを代替するのか？ Oracle ACEの篠田氏と語るDBの過去、現在、未来
はじめに 2021年4月から4回にわたって「クラウドネイティブ時代のデータベース」と題した連載を掲載しました。現在トレンドとなり注目されているクラウドネイティブなアプリケーションや開発スタイルにおいて、現在のデータベース（DB）はいかにそれを支え得るかという話を解説しました。パブリッククラウドで利用可能な利用者の多いマネージドサービスの紹介にとどまらず、マルチクラウドやマルチリージョン、Kubernetesとの連携などにも踏み込み、それぞれの回で大きな反響をいただきました。 そして今回から新たにクラウドネイティブなDBを含め、DBに関するさまざまな考え方や最新のトレンドを紹介する連載を始めます。初回となる今回は「Oracle」や「PostgreSQL」などのDBに長年関わり、コミュニティーでも積極的に情報発信などの活動をされている日本ヒューレット・パッカードの篠田典良氏との対談をお送りしま
クラウドネイティブで変わる「NewSQL」の意味――地球規模でデータ分散を可能にする合意プロトコルの仕組みと課題
上表のうち、Cloud Spanner以外のデータベースは基本的にOSS（オープンソースソフトウェア）として開発されている。可用性や拡張性などの観点で従来RDBMSの課題を解消しながら、アプリケーション開発で広く利用されているMySQLやPostgreSQLと互換性を持ち、Google Cloud以外のプラットフォームで利用可能である点で、Cloud Spannerとの差別化が図られている。 なお、いずれのベンダーも自社の製品をNewSQLとは呼称していない。彼らはそれぞれの製品を「Distributed SQL Database」と呼んだり、Cloud NativeやHigh-Performanceなどの形容詞で説明したりすることが多い印象だ。 本記事の後半ではSpannerに影響を受けて開発された分散SQLデータベースを、海外メディアでよく使われる分類にならいNewSQLと呼ぶことにす
マルチクラウド環境で高可用性を実現するデータベースサービスとは
クラウドネイティブ時代に求められるデータベースを解説する本連載。第1回でデータベースの要件として求められる「アジリティ、可用性、拡張性」を解説し、第2回で具体例としてPostgreSQL on Kubernetesを紹介した。今回はマルチクラウドを目的としたデータベースサービスを概観する。 マルチクラウド環境におけるデータ複製をどう実現するか 前回記事では、PostgreSQLをコンテナオーケストレータのKubernetesと組み合わせて使うことで、運用管理の自動化や可用性、拡張性の向上を実現する方法を紹介した。クラウドネイティブの中核となるコンテナ技術を用いて、データベースでも構成管理などのアジリティを高めることができる。 今回は、さらに高い可用性を実現して事業継続性を支えるデータベースサービスについて論じる。 連載初回で挙げたように、クラウドネイティブなシステムでは基盤となるクラウド事
詳説 データベース
データベースを選択し、使用し、管理するには、その内部構造を理解することが不可欠です。しかし、今日ではたくさんの分散型データベースやツールが存在するため、それぞれが何を提供しているのか、どのように異なるのかを理解することは困難です。 本書はデータベースとストレージエンジンの内部で利用されている概念を解説します。ストレージエンジンでは、ストレージの分類、Bツリーベースのストレージエンジンとイミュータブルなログ構造化ストレージエンジンの違いと事例を紹介します。ストレージの構成要素については、ページキャッシュ、バッファプール、ログ先行書き込みなどの補助的なデータ構造を使って、効率的なストレージを構築するためのデータベースファイルの構成を説明します。分散型システムでは、ノードとプロセスがどのように接続され、複雑な通信パターンを構築するのかを段階的に学びます。 データベースそれぞれで大きな違いがあるス
クラウドネイティブ時代、データベースに求められる要件を整理する
クラウドネイティブ時代、データベースに求められる要件を整理する：クラウドネイティブ時代のデータベース（1） クラウドネイティブは、その要素技術としてコンテナやマイクロサービスなどを含んでおり、近年の開発において一般的となりつつある。では、データベースにもそうした技術要素は取り込まれていくのだろうか。本連載では、クラウドネイティブ時代のデータベース設計で考慮すべきポイントを検討する。 クラウドネイティブとは、「スケーラブルなアプリケーションを構築および実行する能力を組織にもたらす」考え方として定義される（参考記事：「クラウドネイティブ」はどう誤解されているか）。そして、そこに含まれる技術要素として、コンテナ、サービスメッシュ、イミュータブルインフラストラクチャ、宣言型API、マイクロサービスアーキテクチャ（以後、MSA）があり、その採用はシステム構成に大きな変化をもたらす。 MSAでは分割さ
How COMMIT Works in CockroachDB
Kubeshark で Kubernetes の Traffic を眺めてみよう/Let's Look at k8s Traffic with Kubeshark
大規模基幹システムを「マルチテナンシーKubernetes」で構築、そのメリットと悩ましい課題
大規模基幹システムを「マルチテナンシーKubernetes」で構築、そのメリットと悩ましい課題：巨大SIerのコンテナ・Kubernetes活用事例（終） NRIのコンテナ、Kubernetes活用事例を紹介する本連載。最終回はマルチテナンシー構成を活用した大規模な基幹システム開発の事例を紹介する。 年々増加する設計コストが課題に 2020年現在、ソフトウェアやサービスの開発において、開発速度の向上やリリースサイクルの短期化はより強く求められるようになっている。野村総合研究所（以後、NRI）でも「アジャイル」や「DevOps」といった開発手法に加えて「マイクロサービスアーキテクチャ」といった設計思想が現場になじみつつある。本連載のテーマでもある、コンテナを効率的に運用するためのオーケストレーターである「Kubernetes」の普及も進んでいる。 第2回と第3回で述べたように、小規模チームに
なぜKubernetesを採用するのか 2000人の開発者に提供するサービスで得られた知見と課題
なぜKubernetesを採用するのか 2000人の開発者に提供するサービスで得られた知見と課題：巨大SIerのコンテナ・Kubernetes活用事例（3） NRIのコンテナ・Kubernetes活用事例を紹介する本連載。第3回は開発者のQCD（Quality、Cost、Delivery）を向上させることを目的とした開発支援サービスにKubernetesを適用した事例を紹介する。 Kubernetes採用の背景とメリット 野村総合研究所（以後、NRI）では、ここ数年でKubernetesを利用するプロジェクトが増えてきた。本記事で取り上げる自社サービス「aslead」や、社内のプライベートクラウドに構築した「OpenShift」でもKubernetesを活用している。Amazon Web Services（AWS）が提供する「Amazon EKS（Amazon Elastic Kubern
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
つくって壊して直して学ぶ Database on Kubernetes (CloudNative Days Summer 2025 発表資料)
2025年現在のNewSQL (最強DB講義 #36 発表資料)
Cloud Native時代のデータベース
