入力トランスフォーマーを使用して EventBridge 通知をカスタマイズする
Amazon EventBridge ルールを作成して、人間が判別できるカスタムの Amazon Simple Notification Service (Amazon SNS) 通知を開始したいと考えています。 簡単な説明 Amazon SNS イベント通知を人間が判読できるようにするには、EventBridge の入力トランスフォーマーを使用します。入力トランスフォーマーを使用すると、EventBridge ルールのターゲットに送信される前に、イベントのテキストをカスタマイズできます。完全なチュートリアルについては、「チュートリアル: Eventbridge がイベントターゲットに渡すものを Input Transformer を使用してカスタマイズする」を参照してください。 例えば入力トランスフォーマーから、カスタムイベントのテキストを受信するターゲットとして SNS トピックを設定
Lambda - RDS Proxy(TLSあり) - Auroraの構成でRDS（Aurora）に接続する - Qiita
上記の設定で暗号化キーはデフォルトにしているが、これを自分で生成したものにするとキー1つにつき1$/月かかるっぽいので注意。また、ローテーションの設定は今回はしない設定にした。 一応シークレットに正しい情報を格納できている事を確認してみると、以下のようにちゃんとRDS用のシークレットが作成できている事が確認できる（今回はRDS Proxyを使った接続のためだけに作ったので、パスワードはマスクしてない）。 [study@localhost .aws]$ aws secretsmanager get-secret-value --secret-id dev/db/mysql { "ARN": "arn:aws:secretsmanager:ap-northeast-1:**********:secret:dev/db/mysql-azibNI", "Name": "dev/db/mysql",
Amazon RDS Proxy(MySQL)にTLSで接続する。 - 自由帳
RDS ProxyでTLS接続を試した。 TLSを有効にすると、証明書を設定する必要がある。 Lambdaの場合は以下のようなコードになるかな。 const fs = require('fs'); const mysql('mysql2/promise'); exports.handler = async (event) => { let con; try { con = await mysql.createConnection({ host: '...rds.amazonaws.com', user: 'admin', password: '....', database: 'db', ssl: { ca: fs.readFileSync('AmazonRootCA1.pem') } }); return { statusCode: 200, body: 'OK' }; } catch
VPC Lambda(Python)から別のLambdaを同期実行した時にタイムアウトが発生する問題を回避する | DevelopersIO
CX事業本部＠大阪の岩田です。 とある環境で発生していた問題を解決するためにLambdaの実装を修正する機会がありましたので、問題と解決方法についてご紹介します。なお紹介する解決方法は対処療法的なものになります。同様の事象に遭遇した場合、まず最初にアーキテクチャを見直せないかご検討下さい。 構成と発生していた問題 ざっくり以下のような環境下でVPC Lambdaがタイムアウトするという問題が発生していました VPC Lambda A(ランタイムはPython)がLambda Bを同期呼び出し Lambda Bは処理完了までに400秒程度かかる 約400秒後にLambda Bは処理が完了するものの、Lambda Bの処理完了後もLambda Aが同期呼び出しのレスポンスを待機し続けてタイムアウトする 図にするとこんな感じです ※実際にはLambda AもVPCの中にあるわけではなくLambd
ECS Fargate/Python におけるNAT ゲートウェイのアイドルタイムアウト (350秒) 対処法 - Qiita
こちらは iRidge Advent Calendar 2020 20 日目の記事です。 サーバーサイドエンジニアの @orfx がお送りします。 TL;DR AWS の NAT ゲートウェイには通信のアイドル状態が350秒以上続くと、タイムアウトする仕様があります。 インターネット接続が 350 秒後に中断される 問題 インスタンスはインターネットにアクセスできますが、350 秒後に接続が切断されます。 原因 NAT ゲートウェイを使用する接続が 350 秒以上アイドル状態のままになっていると、その接続はタイムアウトします。 ソリューション 接続が中断されないように、接続を介して追加のトラフィックを開始することができます。または、インスタンスで、350 秒未満の値で TCP キープアライブを有効にできます。 NAT ゲートウェイのトラブルシューティング この仕様によって、例えばリクエスト
Lambdaがいきなり実行できなくなった時の対処
経緯 Lambdaは昨今、様々なユースケースで利用されることが増えてきており、実際に利用されている人もとても多い印象です。自分はTerraformでプロビジョニングを行っていますが、エンハンス開発などで機能追加を行ったりしていると、以前は動いていたのに、、、なぜいきなりLambdaが実行できないんだ。というケースが複数回有りました。 かなり微妙ですが、最初に発生していた頃はLambdaを削除してもう一度Terraform流して動いたらそれでいいや。と問題を先送りにしていたのですがPruductionのリリースなどがうっすら見えてくるとリリース本番でこれが発生したら冷や汗モノだな・・・と思うようになりました。 ということで流石にもう少しきちんと調査して、発生した場合のアクションを決めておこうと思った軌跡をメモします。 遭遇したケースの詳細 このように502で、KMSAccessDeniedE
AWS Developer Live Show 開催スケジュール - builders.flash☆ - 変化を求めるデベロッパーを応援するウェブマガジン | AWS
2024 年 9 月 24 日 (火) 17:00~ 開催 ! Infrastructure as Code でセキュリティを楽にしよう ! エンジニアのみなさん、セキュリティは好きですか ? クラウドを上手に活用していくうえで、セキュリティを考慮したインフラの構成や設定がより重要になります。Infrastructure as Code (IaC) は、クラウドリソースの設定をデプロイ前にチェックしたり、データの機密性に応じて環境を分離したりを容易にすることで、セキュリティの運用を楽にできます。 一方、IaC そのもののセキュリティも気になるところではないでしょうか。たとえば、「IaC における最小権限の原則って実際どうなの ?」など、気になるトピックについてセキュリティと DevSecOps のスペシャリストとディスカッションしながら、IaC を使って「楽してセキュアに」する方法を一緒に
S3 で JavaScript の s3.copyObject() のパラメータ - hs9587’s diary
AWS の Lambda の Node.js の JavaScript で S3 のオブジェクトをコピーする copyObject() メソッドのパラメータ指定でちょっとはまった。 S3においてあるファイル(オブジェクト)を S3内で(自分のアカウントの許す中で)コピーするのに、JavaScriptで、下記とでもするのだけど s3.copyObject(params, (err, data) => { if (err) { // an error occurred console.log(err, err.stack); callback(err); } else { // successful response console.log(data); callback(null, data.ETag); }; }); この params の指定、要するに下記、 var params = {
[新機能] Amazon CloudFrontがCORSに対応しました | DevelopersIO
特に問題となるのがS3の場合でした。EC2インスタンス上のWebアプリケーションであればOriginヘッダの有無に関係なくAccess-Control-Allow-Originヘッダを返すこともできますが、S3のCORS機能は仕様通りの実装であるためOriginヘッダが存在しない場合はAccess-Control-Allow-Originヘッダを返しません。具体的には、以下の様な挙動になります。まずはOriginヘッダをつけない（同一ドメイン）の場合です。curlコマンドでStatic Website Hostingを有効にしたS3バケットhoge.example.com.s3-website-ap-1.amazonaws.comに対してアクセスします。 $ curl -I hoge.example.com.s3-website-ap-1.amazonaws.com/hoge HTTP/1
![[新機能] Amazon CloudFrontがCORSに対応しました | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/05bf92c3dad6e282bf2cded7bb4b61f42547e50e/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2014%2F05%2FAmazon_CloudFront.png)
[AWS][Java] AmazonS3のサーバーアクセスログを解析する [正規表現] | DevelopersIO
それぞれの項目は (半角スペース)のデリミタで接続されています。 これがAmazonS3サーバーアクセスログの形式定義になります。 項目ごとに分割する デリミタが(半角スペース)であるため、単純に半角スペースでSplitすればよいかというと、当然のことながらそうは問屋がおろしません。単純にSplitしただけでは、日時, User-Agent, Request URI など"(ダブルクオーテーション)で囲まれてる中の空白まで検出してしまいます。 やり方はいくつかあるかと思いますが、自分は 正規表現 を利用したマッチング処理を行うような手法でアプローチしてみました。 正規表現を定義する あまり厳密な正規表現は行いません。あくまで間違えずに各要素を認識できれば良いという妥協の元条件を作成していきます。正規表現といいつつも分かりやすい簡易な記述でいきましょう。 *2 各要素のマッチング条件を作成し
![[AWS][Java] AmazonS3のサーバーアクセスログを解析する [正規表現] | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/ae1831085634f040d8ea87c65585c41d4de216bc/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2014%2F05%2FAmazon_S3.png)
事例からAmazon Kinesisとは何なのかを学ぶ | DevelopersIO
はじめに 以前、Amazon Kinesisを使う案件があり技術調査の手伝いをしたことがありました。AWSのサイトには「大規模なストリーミングデータをリアルタイムで処理する完全マネージド型サービス」とありますが、その時は何のためのサービスなのか触ってもいまいちピンときませんでした。その後、分からなかった点を担当者にいろいろ聞いてみたのですが、案件が事例化されましたので教えてもらったことをブログに書いてみようと思います。株式会社あきんどスシロー様の案件です。以下が構成図になります。 「うまいすしを、腹一杯。うまいすしで、心も一杯。」 処理の流れ 事例の構成図からどのような処理が行われているかを担当者に確認しました。 回転寿司のすし皿に付いているICタグの情報を管理端末が読み取ります。 管理端末が読み取った情報はインターネットを経由してAmazon KinesisへPutされます。Putされる
AWS Lambdaのimagemagickでリサイズ失敗問題について - gurimmerメモ
結論 先に結論から言うと、Lambdaがデフォルトで提供しているimagemagickライブラリだと特定の画像のリサイズで失敗するっぽいです。 ローカルでnpm install imagemagickしたパッケージを含めてlambdaにzipアップロードして、同じコード同じ画像で試して正常に動いたので間違いないはず。 問題のエラー 以下Lambda functionを「Edit code inline」で入力して、S3によくある普通の画像をアップロードして実行させました。*1 var im = require('imagemagick'); var aws = require('aws-sdk'); var s3 = new aws.S3(); var thumbnailSize = 600; function resizeImage(context, bucket, key, data)
Amazon S3の画像をAWS Cloudfrontで配信するキャッシュコントロールをAWS Lambdaで自動化する | DevelopersIO
こんにちは、せーのです。今日はS3の画像をCloudfrontで配信する際のコツを自動化してしまおう、という試みです。 Cloudfrontキャッシュコントロールおさらい Cloudfrontは静的、動的関わらずキャッシュしてくれるとても便利なCDNサービスですが、Cloudfrontにてキャッシュしてくれる時間（TTL）は基本Cache-Control max-ageヘッダやExpiresにて制御します。更にCloudfront自体の設定にも[minimum TTL]というものがあり、これはヘッダで設定されたキャッシュ時間を強制的に上書きするためのものです。 ここで理解しておきたいのが「ヘッダとminimum TTLのキャッシュ時間の関係」です。詳しくはこちらの記事に書いてありますが、基本的には「キャッシュコントロールはヘッダありき。ヘッダの設定より長く強制的に上書きしたい時にminim
Amazon Elastic Transcoder を使って mp4動画を HLS形式に変換する - akiyoko blog
今回は、Amazon Elastic Transcoder を使って、AWSクラウド上で mp4動画を HLS形式に変換してみたいと思います。 1. はじめに 1.1. Amazon Elastic Transcoder とは Amazon Elastic Transcoder とは、様々なデバイスに対応した動画ファイルをトランスコード（フォーマットや解像度などを変換）できるサービスです。 詳細については、公式の Black Beltシリーズのスライドや AWSブログに詳しく書かれています。 AWSブログ（Elastic Transcoder） AWS ならではの、完全従量課金、フルマネージド、スケーラブルといったメリットがありますが、何と言っても、シンプルでお手軽というのがユーザにとっては非常にありがたいわけです。 以前、自前（Mac環境）で mp4動画ファイルを HLS形式に変換した際
Amazon AWSでユーザ数1100万以上にスケーリングするためのビギナーズ・ガイド | POSTD
あるシステムを、1人のユーザから1100万人以上にスケーリングするにはどのようにすれば良いのでしょうか。Amazonのウェブサービスソリューションアーキテクトである Joel Williams が AWS re: Invent 2015 Scaling Up to Your First 10 Million Users でスケーリング方法について素晴らしいプレゼンをしています。 AWS上級者のユーザには適さないプレゼンですが、AWS初心者やクラウド初心者、Amazonが次々と送り出す新機能の流れについていけていない人が始めるには素晴らしい内容だと思います。 おおよその見当は付いていると思いますが、このプレゼンはAmazonによって提供されているため、どの問題についても解決策として提案されているものは全てAmazonのサービスになります。amazonのプラットフォームの役割は、印象深く、分か
AWS News Blog
Amazon SageMaker Geospatial Capabilities Now Generally Available with Security Updates and More Use Case Samples At AWS re:Invent 2022, we previewed Amazon SageMaker geospatial capabilities, allowing data scientists and machine learning (ML) engineers to build, train, and deploy ML models using geospatial data. Geospatial ML with Amazon SageMaker supports access to readily available geospatial dat
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://awsjumpstart221206.splashthat.com/
Serverless Land
AWS NATインスタンス起動時の処理 ～sysctlとrc.localにやられた件～ – CLARA ONLINE techblog
https://dev.classmethod.jp/articles/cve-2014-3566-poodle-issue/