毎日本番DBをダンプして、ローカルと開発環境で利用して生産性を上げてる話
シードデータで動作確認して大丈夫だったのに、本番反映してみたら想定してなかった挙動・エラーが出た😱そんな経験はありませんか。 恥ずかしながら私は今までに何回もありました。機能開発だけじゃなくバッチやマイグレーションなんかでも発生しがちなコレ。またはシードデータで動作確認できても、本番データでも通用するか検証ができないままプルリクを作る、なんていうこともあると思います。今回はこちらを無くす試みをしたお話です。 「もう本番DBで開発しちゃえばいいじゃない」の問題点 この課題を解決するには、極論すると本番DBで開発するしかないのですが、そうなると言うまでもなく以下の問題が出てきます。 レビュー通過してないコードが本番に影響を与える トライ＆エラーができない 個人情報をはじめとするセンシティブな情報が開発者の端末に漏れる データ量が多すぎてローカルに持ってこれない しかし言い換えると、これらをク
AWS LambdaからRDS Proxy経由でAmazon RDSに接続してみる - サーバーワークスエンジニアブログ
DS課の古川です。 RDS Proxyの登場により、AWS LambdaとAmazon RDS間接続のボトルネックを回避できるようになりました。 今回は、RDS Proxyを経由してAWS LambdaからAmazon RDSに接続する手順を試してます。 はじめに 最大同時接続数 LambdaとRDBの接続 RDS Proxy リソース Security Group Lambda用 RDS Proxy用 RDS用 手順 1. データベースを作成 2. 接続テスト 踏み台サーバー or Cloud9を用意 RDSに接続 テスト用のテーブルを作成 3. Secrets Managerの設定 4. RDS Proxyの起動 5. Lambda関数の作成 serverless.yml lambda_rds_proxy.py 6. Lambdaを実行 気をつけるポイント 参考 はじめに 最大同時接続
これだけ見れば大丈夫！ーMySQLパフォーマンス監視のツボ（システム編）｜技術ブログ｜北海道札幌市・宮城県仙台市のVR・ゲーム・システム開発 インフィニットループ
これだけ見れば大丈夫！ーMySQLパフォーマンス監視のツボ（システム編） こんにちは nob です。 前編 これだけ見れば大丈夫！ーMySQLパフォーマンス監視のツボ（クエリ編） の記事から１年半が経過してしまいました。ちょっと長いお休みでしたが、その間に蓄えた MySQL パフォーマンス監視の実戦経験を（システム編）としてお届けいたします！ 今回の（システム編）で紹介するツボは 4 つです。（クエリ編）のツボに加えて、この4つに注目して頂ければ MySQL のパフォーマンス監視もバッチリです。 （ツボ１）Load Average < (1 + (cpu数-1)/3) （ツボ２）Checkpoint Age が水平線になったら要注意 （ツボ３）MyISAM は無いよね監視 （ツボ４）万能選手スローログ なお前編と同様この記事では監視ツールとして Cacti と Percona MySQL
MySQLのロックについて（DDL編） - Speaker Deck
Transcript .Z42-ͷϩοΫʹ͍ͭͯ ʙ%%-ฤʙ ࣍ w%%-ͷΈͱվળͷาΈ� wΦϯϥΠϯ%%-� wNFUBEBUB�MPDL�ʹؾΛ͚Ζ� w"-5&3ؔ࿈ͷখٕ� w"NB[PO�"VSPSB�ͱ�7BOJMMB�.Z42-�ͷҧ͍� wਪͷ%%-ϦϦʔεํ๏ ͓͞Β͍ w%%-� %BUB�%FpOJUJPO�-BOHVBHF � w $3&"5& �%301 �"-5&3 �536/$"5&� w%.-� %BUB�.BOJQVMBUJPO�-BOHVBHF � w 4&-&$5 �*/4&35 �61%"5& �%&-&5&� w%$-� %BUB�$POUSPM�-BOHVBHF � w #&(*/ �$0..*5 �30--#"$, ࣍ w%%-ͷΈͱվળͷาΈ� wΦϯϥΠϯ%%-� wNFUBEBUB�MPDL�ʹؾΛ͚Ζ� w"
MySQLのロックについて（基本編） - Speaker Deck
Transcript .Z42-ͷϩοΫʹ͍ͭͯ ʙجຊฤʙ ࣍ �� ϩοΫ͕ඞཁͳཧ༝� �� .Z42-ͷϨίʔυϩοΫ� �� ֎෦ΩʔͱϩοΫ� �� σουϩοΫ�ͱݪҼͷௐࠪํ๏ ࠓऔΓ্͛ͳ͍͜ͱ� ɾ%%-ͷϩοΫɺNFUBEBUBMPDL� ɾΪϟοϓϩοΫ�ωΫετΩʔϩοΫ� ɾγϟυʔϩοΫ ͳͥɺϩοΫ͕ඞཁ͔ʁ wτϥϯβΫγϣϯΛฒྻͰ࣮ߦ͢ΔͨΊ ࣍ �� ϩοΫ͕ඞཁͳཧ༝� �� .Z42-ͷϨίʔυϩοΫ� �� ֎෦ΩʔͱϩοΫ� �� σουϩοΫ�ͱݪҼͷௐࠪํ๏ ϨίʔυϩοΫ ▪σʔλ mysql> select * from lockt; +----+-------+----------+---------+ | pk | name | favorite | addr | +----+-------+----------+-----
2020/06/04時点 Aurora MySQL 5.6 vs 5.7 vs Serverless 機能比較一覧 | DevelopersIO
注釈 5.6系、5.7系ともにマイナーバージョンは最新版とします。つまり、5.6系と互換性のあるAurora MySQLのバージョンは1.*ですが、最新版である1.22.2についての記載になっています。同様に5.7系と互換性のあるAurora MySQLのバージョンは2.*ですが、最新版である2.08.0についての記載です。これより古いバージョンの場合、上記表の通りではない場合があります。 機能間で依存関係がある場合があります。その部分については記載していません。例えば並列クエリが有効になっている Aurora MySQL DB クラスターではパフォーマンスインサイトはサポートされていません。 特にマルチマスタークラスターには多くの制限があります。利用時には注意しましょう。[参考情報] 感想 Serverlessは使えない機能が多いですね。5.7系も以前は同様の印象だったのですが、昨年末に
MySQL8.0のJSON型における正規化について - 主夫ときどきプログラマ
blockchain-kyoto.connpass.com Blockchain勉強会 in Kyoto #05でMySQL8.0 使いたいからブロックチェーン実装してみたというタイトルで発表してきました。 MySQLを使いたいというモチベーションだったので、ブロックチェーンの話はこじつけではありましたが、発表できてよかったと思います。 スライドはこちら（後日、別の勉強会でも発表したのでアップデートされています） JSON型のCanonicalizeってどうなんですか？という質問 発表の中でJSON型に保存したカラムの値からMD5のHash値を計算する部分があります。それについて勉強会後に質問されました。 「Oracleが開発してるんできっとちゃんとしてますよねー。」と話していましたが、実際のところはわからなかったので調べることにしました。 Canonicalize とは データの標準化や
24のプログラミング言語がブラウザで即実行できる『paiza.IO』 - paiza times
こんにちは。今回は谷口が担当します。 paizaはこの度、ITエンジニア向けの無料オンラインプログラミング実行環境サービス『paiza.IO (パイザ・アイオー)』 のβ版を、本日2014年11月17日からサービス開始いたしました。 『paiza.IO』は、ブラウザ上でコードが書け、書いたコードをその場で実行出来るオンラインプログラム実行環境です。 ブラウザだけでプログラミングがすぐ始められる【paiza.io】 from paiza on Vimeo. ■オンライン実行環境について ◆どうしてpaiza.ioを作ったの？ これまでプログラミングを始める際、最大のハードルは「プログラムの実行環境を構築する事」でした。 これまでは、環境構築といえば初心者にとってハードルが高く、ものによっては細かい部分でつまづいたりなどして1～2日程度はかかる工程の面倒な作業でした。そのボトルネックを解消し、
はじめての MySQL で100万件のデータを管理する時に行ったチューニングまとめ
MySQL の勉強をせずにフレームワーク等で SQL を書かずに Web サイトを構築していました。データ数も2万件程度でしたので、そこまで困ることはありませんでしたが、今回100万弱の商品データを扱う機会ができたので、MySQL のチューニングや発行する SQL について見直す機会がありました。 この記事では MySQL を高速化するのに行った対策など勉強したものを自分用にメモしておきました。 条件式で比較するカラムにインデックスを使用して高速化 商品コードで存在しない商品を見つけて、商品をDBに登録するという処理を行っている場合、4万件超えたころから処理に2秒以上かかるようになってきます。12万件超えた頃には10秒程度かかるようになってしまいましたが、商品コードのフィールドに対してカラムインデックスを貼ることで0.2秒に短縮することができました。 MySQL のリファレンスにも以下のよ
MySQL互換クラウドRDBサービス「Xeround」が公開ベータへ
MySQL互換ながら独自のクラウド対応ストレージエンジンを搭載することで、スケーラブルなクラウド対応データベースサービスを実現する「Xeround」（ゼラウンドと発音するようです）が公開ベータを開始したことを明らかにしました。 Xeround MySQL Cloud Database Now on Amazon EC2 in Europe | Xeround MySQL Cloud Database Blog Xeroundはクラウド上のDatabase as a Service（DBaaS）として提供されるため、インストールやセットアップは基本的に不要。無料でベータ公開サービスを利用可能になっています。 MySQL互換のDatabase as a Service XeroundはMySQLのストレージエンジンアーキテクチャの上に構築されており互換性があるため、すでにMySQLを利用してい
FrontPage - とみぞーノート
Contents Linux IPマスカレード設定 日本語入力の切り替え vsftpd設定 SELinux 基本編 SELinux ファイルタイプ設定編 SELinux ポリシー設定編 USBシリアルの使用 VAIO PCG-C1MZXへのインストール VAIO VGC-RA52へのインストール Ozzio MXV8250SDへFedora Core6を。 3ware 8006-2LPインストール MFC-7820NをLinuxから使う MFC-7820NをLinuxから使う２ iptablesによるフィルタ設定 ELFファイルフォーマット cdrecord関連 Loadable Kernel Moduleの作り方 proc fs を使ったカーネル情報の表示 proc fs を使ったカーネル情報の表示 その2 glibc ヒープ領域の縮退 nfs設定 スワップファイルの作成 Linuxでの
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
heidisql
リレーショナル・データベースの世界