はてなブログの DB を RDS for MySQL 8.0 にアップグレードした話 - Hatena Developer Blog
この記事は、はてなエンジニア Advent Calendar 2023の2024年1月17日の記事です。 はてなエンジニア Advent Calendar 2023 - Hatena Developer Blog id:hagihala です。先日、はてなブログの DB を RDS for MySQL 5.7 から 8.0 へアップグレードしたので、工夫した点などを共有します。 Aurora MySQL 3.x にしなかった理由 MySQL 5.7 -> 8.0 で対応した変更点 character set や collation のデフォルトが変更される explicit_defaults_for_timestamp がデフォルトで有効になる SQL mode の変更 デフォルトの認証プラグインが caching_sha2_password になり、 mysql_native_passw
Gmailで問題が生じる神奈川県立高校ネット出願システムの被疑箇所を調査、改善策を検討してみた | DevelopersIO
神奈川県高校入試のネット出願システムの不具合影響を受けた利用者として、Gmailを扱えないメール環境について外部から調査しました。 出願システムで独自実装されたメールシステムの不完全な実装と、メール関連のDNSの設定不備が原因であった可能性が高いと推測します。 2024年の神奈川県立高校入試出願システムの不具合の影響を受け、@gmail.comのメールアドレス を利用出来なかった一利用者として、 インターネットから参照可能な範囲で、出願システムのメール環境について調査。 被疑箇所の推定と、状況を改善する対策について検討する機会がありましたので、紹介させて頂きます。 神奈川県公立高等学校入学者選抜インターネット出願システムの稼動状況について MX設定 「mail.shutsugankanagawa.jp」のMXレコードを確認しました。 1/18(21時) $ dig mx mail.shut
Gmailに届かない神奈川県立高校入試のインターネット出願システムのメールを調べてみた | DevelopersIO
Gmailに届かないと報告されている2024年神奈川県立高校入試の出願システム自動返信メール、 2024年1月15日にYahooメールに届いたメールヘッダー情報などから、送信ドメイン認証(SPF、DKIM、DMARC)の確認を試みました。 2024年2月の神奈川県立高校の受験を予定している家族から、 "インターネット出願システムの登録を試みたが、システムからの返信メールがGmailのアドレスが届かないため、代わりにYahooメールを利用した。" との報告を受けました。 今回、2024年1月15日にYahooメールで受信したインターネット出願システムのメールを調査する機会がありましたので、紹介させて頂きます。 2024年1月19日 追記 ネット出願システムの不具合解消後のメールの調査結果を公開しました。 2024年1月18日 追記 ネット出願システムのメールサーバ側の問題について調査結果を公
【AWS】コンソールのトップページを素通りしている人へ - Qiita
皆様、明けましておめでとうございます。 今年は発信に力を入れていきたいなあという思いで新年1発目の記事を書いていきます。 質問です AWSマネジメントコンソールは、AWSリソースを管理するための重要なツールです。しかし、多くの人々がそのトップページを素通りしていませんか？ デフォルトのAWSマネジメントコンソール デフォルトのレイアウトではこんな感じです。 私はこのトップページをちゃんと見たことはありませんでした。毎回ぜったい素通り。 どんなのがあるんだろう？と思って改めてよく見てみたら 「AWSへようこそ」って。今さらの挨拶過ぎん？あなたとわたし4年目よ。 「アプリケーション」なんも登録されていないのにデカデカ過ぎるやん>< Healthとコストそこにいたんだ。。気づかなかったよ とまあこんな感じです。 強いてこのページの利用シーンを上げるとしたら最近アクセスしたサービス に目当てのサー
AWSコンテナ系アーキテクチャの選択肢を最適化する | 外道父の匠
これまでもコンテナ関連の記事はそれなりに書いてきましたが、改めて最新事情に合わせて練り直したり見渡してみると、大きなところから小さなところまで選択肢が多すぎると感じました。 コンテナ系アーキテクチャを丸っと他所の構成で真似することって、おそらくほとんどなくて、参考にしつつ自分流に築き上げていくでしょうから、今回は築くにあたってどういう選択肢があるのかにフォーカスした変化系で攻めてみようと思った次第です:-) 目次 今年一発目の長いやつです。半分は学習教材用、半分は道楽なテイストです。 はじめに 基盤 インスタンス or コンテナ ECS or EKS on EC2 or FARGATE X86 or ARM64 ロードバランサー メンテナンス：ALB or ECS Service 共有 or １環境毎 アクセスログ：ALB or WEBサーバー ECS / EKS デプロイ：Blue/Gr
AWSロードバランサーとターゲットグループの制御方法 - Qiita
概要 AWSで動的な拡張環境を構築した経験があります。Pythonを使用して、AWSロードバランサーとターゲットグループを制御するためのモジュールを作成しました。EC2の動的な制御に関する詳細は、以下の記事をご参照ください。 AWS EC2インスタンスの自動起動停止の制御手法 ソース import sys import os import traceback import boto3 def to_exception_detail(exception, includes_trace=False): """ 概要: 例外の詳細情報を整形して返す関数 引数: - exception: 例外オブジェクト - includes_trace: トレースバック情報を含むかどうかのフラグ 戻り値: 整形された例外詳細情報の文字列 """ exc_type, exc_obj, exc_tb = sys.e
コスト最適化目的で個人 AWS アカウントの整理をした
ここしばらく円安が続いているのと、結局自宅サーバのおもりがへたっぴで崩壊し続けている関係で EC2 とかばんばか使っていたら日本円コストが嵩んでしまっていた。2024/2 から Public IPv4 Address 課金も開始されるのもきっかけ。 なんとかすべく 2023 年末に休みを取って大整理をやった。サボっていたけどこのままだとさすがにキツいなと思って基本的にはしょうもない整理です。基本的には homelab として意図的に色々あそべるようにしていたのを止めたりとかになる。ご笑覧ください。 どんなもん 月間コスト 378 USD (2023/8) → 153 USD (2023/12), without tax 日本円コスト 59,099 JPY → 24,583 JPY/mo, with tax 内訳 (USD); EC2-Instances: 140.92 → 61.27 S3
EC2インスタンスのEBSのボリュームが枯渇したときの対処方法 - Qiita
概要 自社のメンバーからWebServerに反映できないと連絡を受け対応した。 ベストプラクティスでは無いと思うのであくまでご参考程度に読んでいただけると幸いです。 備忘録として記事に残しておく。 現状を知る メンバーからディスク容量が一杯というエラーが出ますと言われていたのでとりあえずEC2上のディスク容量を確認してみる。
AWSのマネジメントコンソールでVPCを簡単に作成する - Qiita
こんにちは。 本日は、AWSでVPCを簡単に作成する手順について記載します。 AWSのマネジメントコンソールでVPCを簡単に作成する手順 1. 以下のリンクにアクセス 東京リージョンか大阪リージョンで作成する場合、以下のリンクでVPCを作成する画面に遷移します。 東京リージョンでVPCを作成する https://ap-northeast-1.console.aws.amazon.com/vpcconsole/home?region=ap-northeast-1#CreateVpc:createMode=vpcWithResources 大阪リージョンでVPCを作成する https://ap-northeast-3.console.aws.amazon.com/vpcconsole/home?region=ap-northeast-3#CreateVpc:createMode=vpcWith
AWS SSMのSession Manager機能の利用と接続パターン - Qiita
はじめに AWS Systems Manager(SSM)内の機能の1つであるSessionManagerを利用した EC2インスタンスへの接続を使用する機会があったので、 検証がてら導入手順や接続パターンを記事としてまとめてみました。 元々SessionManagerを介してWebコンソールまたはAWS CLIでEC2インスタンスへアクセスすることで、 インターネット側へSSHポートを開けることなくアクセスすることが可能でした。 また、接続元PCの任意のローカルポートとEC2インスタンス側のSSHポートでセッションを張ることで、 TeraTerm等のSSHクライアントやWinSCP等のファイル転送ソフトを簡単に利用することが可能です。 加えて2022年11月にポートフォワーディングの機能が追加され、 SSMAgentを導入できないEC2インスタンスやRDS等のサービスに対して、 SSMA
AWSで100万円溶かした話 - Qiita
はじめに まずこちらをご覧ください。タイトルの通りですが、初歩的なミスによりAWSで100万円溶かしました。生き恥を晒しています。 この記事では、私がどのようにこの大金を失ったのか、そしてその教訓について共有します。そして、「世の中にはこんな間抜けな人間がいるんだなぁ」というエンタメとして楽しんで貰えればと思います。 勉強が高くついた 私がAWSを触った目的は、RDSやEC2を使ってアプリ開発の勉強をし、GlueやAthenaなどのサービスにも少し手を出してみることでした。しかし、6月から11月の間に気づかぬうちに100万円が消えていました。 原因 原因1: サービスの停止忘れ 開発したEC2インスタンスなどのサービスは停止するのが基本です。しかし私は一部のサービスを停止することを忘れていたため、不要なコストが発生していました。さらに、私はEC2インスタンスだけでなく、スナップショットの保
スプレッドシートとAWSでコストかからない業務システムを作る設計TIPS
はじめまして @shimma です。本業はD2C企業のCTOとして働く傍ら、業務支援として複数社、インフラを中心に直接手を動かして、社内で横展開できるような設計・コードベースをご提供しています。 枯れた技術で コード行数少なく 運用コストかからず 8-9割くらいのことを解決できる こちらが私の設計がポリシーです。 世の中9割はスプレッドシートで解決できる 私達の想像以上に、世の中の困りごとの大半はスプレッドシートやエクセルで解決ができます。エンジニアに依頼しなくても直接ロジック変更できるなど、組織リソースの有効化としてもメリットあります。 一方、複雑な数式やマクロにすべてを寄せ切り、ロジックを育てていくと、メンテナンスが困難を極めていきます。この記事を読んで頂いている技術者の方々であれば 複雑な箇所はコードによせて 変更しやすい所はスプレッドシート／Google App Script とい
【OCI クラウド移行ガイド】 AWSとOCIをプライベートDNSピアリングで相互参照してみた - Qiita
OCIクラウド移行ガイドとは オンプレミスやAWSなど、複数のプラットフォームからOracle Cloud Infrastructureへの移行プロジェクトに取り組んでいるクラウドエンジニア（@araidon,@kazunishi,@yama6）による、OCI移行手順をまとめたシリーズ記事です。 各回、サンプルワークロードから対象サービスを取り上げ、移行手順をガイドいたします。 まとめ記事は以下になります。 移行したいサンプルワークロード 日々の業務でよく目にするサービスを中心に、サンプルワークロードとしてまとめてみました。このシリーズでは、主にAWSからの移行を取り上げます。 このワークロードは、ユーザがログインして、Web上で写真を共有するWebサービスをイメージしています。 移行するサービス：Amazon VPC内のリソース群 今回は下記記事の続編として、VPCとVCNのDNS相互参
【OCI クラウド移行ガイド】Amazon RDS for MySQLからOracle Cloud MDSへVPN経由でInboundレプリケーションを設定してみた～MySQL編～ - Qiita
【OCI クラウド移行ガイド】Amazon RDS for MySQLからOracle Cloud MDSへVPN経由でInboundレプリケーションを設定してみた～MySQL編～MySQLAWSRDSocioraclecloud OCIクラウド移行ガイドとは オンプレミスやAWSなど、複数のプラットフォームからOracle Cloud Infrastructureへの移行プロジェクトに取り組んでいるクラウドエンジニア（@araidon,@kazunishi,@yama6）による、OCI移行手順をまとめたシリーズ記事です。 各回、サンプルワークロードから対象サービスを取り上げ、移行手順をガイドいたします。 まとめ記事は以下になります。 移行したいサンプルワークロード 日々の業務でよく目にするサービスを中心に、サンプルワークロードとしてまとめてみました。このシリーズでは、主にAWSからの移行
RDS for Oracleのマルチテナント構成を試してみた - Qiita
はじめに 2023/11/9 に Amazon RDS for Oracleでマルチテナント構成のサポートが発表されました。 Amazon RDS for Oracle now supports Oracle Multitenant RDS for Oracleでは以前(2021/5)より マルチテナントアーキテクチャを利用した単一のプラガブルデータベース構成 はサポートされていましたが、文字通りのマルチテナント構成は今回のアップデートで初めて利用できるようになりました。マルチテナントアーキテクチャにおける単一のプラガブルデータベース構成自体はあまり意味がある構成ではなかったため、今回のアップデートで本格的にマルチテナントの恩恵を受けることができるようになると考えてます。 以下で、マルチテナント構成を実際に試して、何ができるようになったか、また、何ができないのかを確認していきます。 マルチ
EC2における「管理用VPC」設置の是非について
こんにちは、SCSKの木澤です。 先日、VPCにおける大きなアップデートが発表されました。 Multi-VPC ENI Attachmentsaws.amazon.com EC2から複数のVPCに対してENIを接続できるようになったよ、という話です。 オンプレミスのネットワーク設計経験者であれば、この話を聞いて「管理用VPCが作れるようになったな」と感じることでしょう。 実際私自身もAWS初心者の頃は管理用のネットワークが構成できないことが気になっていました。 ですが、AWSにおいては安易に管理用VPCを設置すべきではないと考えています。 その理由を下にまとめたいと思います。 オンプレミスネットワーク設計のセオリー オンプレミスにおけるネットワーク設計経験が無い方もいらっしゃると思いますので、丁寧に解説したいと思います。 今回は下図のような一般的なWeb3層のシステムのネットワークを設計す
AWS テクニカルトレーナーと学ぶ Amazon CloudFront ~ エッジロケーションを使った通信の仕組み - builders.flash☆ - 変化を求めるデベロッパーを応援するウェブマガジン | AWS
こんにちは ! テクニカルトレーナーの杉本圭太です ! 最近読んで面白かった漫画は「Artiste (アルティスト)」です。 AWS を学習していて「Amazon CloudFront はコンテンツ配信の最適化や高速化をするサービスである」ということは知っているけれど、「どのような通信経路になるのか」や「なぜ近くのエッジロケーションへアクセスできるのか」は理解できていないなと感じる方はいませんか ? というのも、トレーニングを受講していただいた方から「Amazon CloudFront の概要だけは知っていたけど、具体的な動作まで理解できた !」と言っていただくことがあります。そこで他にも多くの方に Amazon CloudFront の学習や利用に役立てていただけるよう、「仕組み」に焦点を当てた解説記事を書いてみました。それでは私が自作した図を交えながら順を追って説明していきます ! ま
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
MXレコードにIPアドレス設定でも、Gmailとのメール送受信可能だった。 - Qiita
AWS認定全冠するまでのおすすめの順番
30分で理解する、AWS の WEB Front-end Strategy / Serverless Front-end Strategy
