はてなブログの DB を RDS for MySQL 8.0 にアップグレードした話 - Hatena Developer Blog
この記事は、はてなエンジニア Advent Calendar 2023の2024年1月17日の記事です。 はてなエンジニア Advent Calendar 2023 - Hatena Developer Blog id:hagihala です。先日、はてなブログの DB を RDS for MySQL 5.7 から 8.0 へアップグレードしたので、工夫した点などを共有します。 Aurora MySQL 3.x にしなかった理由 MySQL 5.7 -> 8.0 で対応した変更点 character set や collation のデフォルトが変更される explicit_defaults_for_timestamp がデフォルトで有効になる SQL mode の変更 デフォルトの認証プラグインが caching_sha2_password になり、 mysql_native_passw
Amazon Relational Database Service announces Dedicated Log Volume
Amazon Relational Database Service (Amazon RDS) now supports a Dedicated Log Volume for PostgreSQL, MySQL, and MariaDB databases. An Amazon RDS Dedicated Log Volume allows customers to select a configuration where the most latency sensitive components of their database, the transaction logs, are stored in a separate, dedicated volume. Dedicated Log Volumes work with Provisioned IOPS storage and ar
RDS Proxyを用いたオンラインスイッチオーバーによるMySQLのアップグレードについて - freee Developers Hub
おはこんばんちは、DBREの橋本です。 今回は、Amazon RDS Proxy（以降RDS Proxyとよぶ）を用いたRDS for MySQLインスタンスおよびAurora MySQLクラスタのオンラインスイッチオーバーの手法について、ある程度社内での運用が確立してきましたので解説いたします。 従来のアップデート手法 AWS上でRDS for MySQLインスタンスやAurora MySQLクラスタ（以降これらをデータベースとしてまとめてよぶ）を運用している場合、それらのエンジンバージョンの更新を行ったり、OSバージョンの更新に伴う再起動を実施する必要があります。これらの更新を行う場合、以下のような方法が考えられます。 対象のデータベースに直接更新を適用する スナップショットを作成し、更新済みのデータベースとして復元する 更新済みの空のデータベースを新規作成し、そちらにデータを移行し、
New – Amazon Aurora I/O-Optimized Cluster Configuration with Up to 40% Cost Savings for I/O-Intensive Applications | Amazon Web Services
AWS News Blog New – Amazon Aurora I/O-Optimized Cluster Configuration with Up to 40% Cost Savings for I/O-Intensive Applications Since Amazon Aurora launched in 2014, hundreds of thousands of customers have chosen Aurora to run their most demanding applications. Aurora provides unparalleled high performance and availability at global scale with full MySQL and PostgreSQL compatibility at up to one-
Deploy schema changes in an Amazon Aurora MySQL database with minimal downtime | Amazon Web Services
AWS Database Blog Deploy schema changes in an Amazon Aurora MySQL database with minimal downtime Modifying the schema of a SQL database can be time-consuming, resource-intensive, and error-prone. It can also require long periods of downtime that negatively affects the end-user experience. In this post, I walk you through performing schema changes using Instant DDL and Amazon Relational Database Se
Analyzing Amazon Aurora Slow Logs with pt-query-digest
All of Percona’s open-source software products, in one place, to download as much or as little as you need.
RDSにてスロークエリーログの分析レポートを定期的取得してGitHubで管理する
はじめに DBの負荷高騰時に、毎回pt-query-digestをローカルから実行して分析していたのですが、取得と共有が面倒だったので、GitHubActionsを使うことでサクッと解決しました。 pt-query-digestとは？ pt-query-digestは最近発売した「達人が教えるWebパフォーマンスチューニング 〜ISUCONから学ぶ高速化の実践」でも紹介されているスロークエリーログの分析ツールです。 前提 スロークエリーの取得が有効になっていること 当然ですがスロークエリーログを元に分析するため、ログの取得は有効にしている必要があります。 未設定の場合は以下のリンクなどを参考に設定してください。 AWS OIDCにてGitHubActionsの設定が完了していること スロークエリーはCloudWatchLogsに保存されているため、GitHubActionsからAWSのリソ
Amazon DevOps Guru for RDS が予測的インサイトをサポート
Amazon DevOps Guru for RDS が予測的インサイトをサポートしました。予測的インサイトは、切迫したデータベースパフォーマンスと可用性の問題が深刻になる前に通知する新しい検出結果セットです。予測的インサイトにより、Amazon DevOps Guru for RDS はデータベースインスタンスを継続的にモニタリングし、将来的にデータベースの状態を低下させかねない潜在的な問題を検出します。このような状況が検出されると、予測的インサイトは検出結果を生成します。そこには、差し迫った問題の性質と、それを軽減するために実行できる具体的なアクションが説明されています。Amazon DevOps Guru のお客様は、追加のセットアップや設定をせずに、予測的インサイトを利用できます。現在、予測的インサイトは Aurora PostgreSQL と Aurora MySQL データベー
New – Fully Managed Blue/Green Deployments in Amazon Aurora and Amazon RDS | Amazon Web Services
AWS News Blog New – Fully Managed Blue/Green Deployments in Amazon Aurora and Amazon RDS When updating databases, using a blue/green deployment technique is an appealing option for users to minimize risk and downtime. This method of making database updates requires two database environments—your current production environment, or blue environment, and a staging environment, or green environment. Y
[Announcement] (DEPRECATED) Amazon Relational Database Service (RDS) for MySQL 5.6 End-of-Life date is August 3, 2021
[Announcement] (DEPRECATED) Amazon Relational Database Service (RDS) for MySQL 5.6 End-of-Life date is August 3, 2021 This is an outdated announcement. Please refer to the latest RDS for MySQL 5.6 end-of-life timeline here: https://forums.aws.amazon.com/ann.jspa?annID=8790 NOTE: This notice does not apply to Amazon Aurora clusters. Amazon RDS is starting the end of life (EOL) process for MySQL maj
New – Amazon RDS on Graviton2 Processors | Amazon Web Services
AWS News Blog New – Amazon RDS on Graviton2 Processors I recently wrote a post to announce the availability of M6g, R6g and C6g families of instances on Amazon Elastic Compute Cloud (Amazon EC2). These instances offer better cost-performance ratio than their x86 counterparts. They are based on AWS-designed AWS Graviton2 processors, utilizing 64-bit Arm Neoverse N1 cores. Starting today, you can al
オンラインセミナー「RDS+Lambda が始まる。過去のアンチパターンはどう変わるのか」 資料および QA 公開 | Amazon Web Services
「Amazon RDS Proxyのご紹介」の資料において下記の部分を当日のセッション資料から修正しております。 ・P.12 DDLステートメントの動作に関し MySQL の動作だけの記載だった部分をMySQL / PostgreSQL 個々の動作を記載する様に修正 当日ご参加頂いた皆様、大変申し訳ございませんでした。また、ご指摘頂いたお客様、ありがとうございます。 Q. RDS Proxy 自体は単一障害点にはならない構成、という理解で良いでしょうか? A. はい。RDS Proxy はインフラストラクチャの障害から保護されるために複数のアベイラビリティゾーン (AZ)にデプロイされますので、単一障害点にはならない構成になっております。 Q. Proxy はVPCを意識しないサービスでしょうか?VPCに何か制限がありますでしょうか? A. RDS Proxy はVPCを意識するサービス
Amazon RDS Performance Insights は、PostgreSQL 互換の Amazon Aurora、Amazon RDS for PostgreSQL、Amazon RDS for MySQL、および Amazon RDS for MariaDB でのクエリプランキャプチャをサポート
Amazon RDS Performance Insights は、PostgreSQL 互換の Amazon Aurora、Amazon RDS for PostgreSQL、Amazon RDS for MySQL、および Amazon RDS for MariaDB でのクエリプランの収集と追跡をサポートしています。これにより、クエリプランの変更が、長時間実行されているクエリまたはスタッククエリの原因であるかどうかを簡単に識別できます。 クエリプランは、リレーショナルデータベース管理システム (DBMS) のデータにアクセスするために使用する一連の手順です。DBMS クエリオプティマイザーは、さまざまな方法を選択して特定のクエリを実行しており、そのパフォーマンスはまちまちです。クエリオプティマイザーは不完全であるため、データベースのユーザーと管理者は、パフォーマンスを向上させるために
最大同時接続数を1に制限したRDSにRDS Proxyを構成して基本動作を押さえよう | DevelopersIO
CX事業本部＠大阪の岩田です。 社内で需要がありそうだったので、RDS Proxyの基本動作について簡単にまとめてみました。クライアントからの最大同時接続数を1に設定したRDSに対してRDS Proxyを構成し、クライアントアプリケーションに見立てたEC2からいくつかのパターンで接続を試行した結果をまとめています。 環境 今回検証に利用した環境です。 RDS for PostgreSQL 11.8-R1 インスタンスクラス db.t3.micro max_connections: 9 バックグラウンドでrdsadminユーザー、rdsproxyadminユーザーがDBに接続するのを考慮して9に設定しています。今回の環境であればmax_connectionsを9に設定することで非マスターユーザーからの同時接続数を1に制限することができます。 RDS Proxy エンジンの互換性: Postg
Amazon Relational Database Service (RDS) スナップショットの S3 へのエクスポートを発表
Amazon Relational Database Service (Amazon RDS) または Amazon Aurora のスナップショットを、分析用の効率的なオープンカラムナーストレージ形式である Apache Parquet として Amazon S3 にエクスポートできるようになりました。Parquet 形式は、テキスト形式と比較して、エクスポートが最大 2 倍速く、Amazon S3 でのストレージ使用量が最大 6 倍少なくすみます。エクスポートしたデータは、Amazon Athena、Amazon EMR、Amazon SageMaker などの他の AWS のサービスを使用して分析できます。 Amazon RDS マネジメントコンソールで数回クリックするだけで、あるいは AWS SDK または CLI を使用してエクスポートを行うことができます。エクスポート操作はデー
Amazon RDS Proxy | 高可用性データベースプロキシ | Amazon ウェブサービス
Amazon RDS Proxy アプリケーションのスケーラビリティ、復元力、および安全性を向上させる Amazon RDS Proxy は、Amazon リレーショナルデータベースサービス (RDS) 向けの高可用性フルマネージ型データベースプロキシで、アプリケーションのスケーラビリティやデータベース障害に対する回復力と安全性を高めます。 最新のサーバーレスアーキテクチャに構築されたアプリケーションなどのアプリケーションの多くは、データベースサーバーへの接続を多数開くことができます。このとき、データベース接続の開閉が高頻度で実行されて、データベースメモリやコンピューティングリソースを消耗する可能性があります。Amazon RDS Proxy では、アプリケーションがデータベースと確立した接続をプールおよび共有でき、データベースの効率とアプリケーションのスケーラビリティが向上します。RDS
Using Amazon RDS Proxy with AWS Lambda | Amazon Web Services
AWS Compute Blog Using Amazon RDS Proxy with AWS Lambda Update – June 30, 2020: Amazon RDS Proxy support for MySQL and PostgreSQL is now generally available. Update – April 8, 2020: We have announced Postgres compatibility with the Amazon RDS Proxy. Version 10.11 and 11.5 are supported in the preview. The AWS Serverless platform allows you to build applications that automatically scale in response
Amazon RDS now supports Storage Auto Scaling
Starting today, Amazon RDS for MariaDB, Amazon RDS for MySQL, Amazon RDS for PostgreSQL, Amazon RDS for SQL Server and Amazon RDS for Oracle support RDS Storage Auto Scaling. RDS Storage Auto Scaling automatically scales storage capacity in response to growing database workloads, with zero downtime. Previously, you had to manually provision storage capacity based on anticipated application demands
Amazon RDS で PostgreSQL 11 のサポートを開始
Amazon RDS で PostgreSQL メジャーバージョン 11 のサポートが開始されました。PostgreSQL 11 には、パーティショニングや並列処理の強化や、その他の多くの便利なパフォーマンス強化 (例: 各列にデフォルトの非 NULL 列をすばやく追加できる機能) が含まれています。このバージョンには、プロシージャ内部への組み込みトランザクションを可能にする SQL ストアドプロシージャが含まれています。 このリリースでは、pgaudit が 1.3.0 に、pg_hint_plan が 1.3.2 に、pglogical が 2.2.1 に、PLV8 が 2.3.8 に、PostGIS が 2.5.1 に、prefix が 1.2.8 に、wal2json がハッシュ 9e962ba に更新されています。 この新しいバージョンを使用するには、AWS マネジメントコンソー
Amazon RDS for MySQL と Amazon RDS for MariaDB が T3 インスタンスタイプをサポート開始
Amazon Relational Database Service (RDS) for MySQL および Amazon RDS for MariaDB を使用する際に、T3 インスタンスタイプを起動できるようになりました。Amazon EC2 T3 インスタンスは次世代の汎用バーストインスタンスタイプで、ベースラインレベルの CPU パフォーマンスとともに、必要なときにいつでも無期限で CPU 使用率をバーストできる機能を備えています。 T3 インスタンスはコンピューティング、メモリ、ネットワークのバランスが取れたリソースを提供し、使用中に一時的なスパイクが生じる CPU 使用量が中程度のデータベースワークロード向けに設計されています。T3 インスタンスは、ワークロードがベースライン以下で動作しているときに CPU クレジットを蓄積します。CPU クレジットを使って、T3 インスタンス
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
