Lambda+RDSはアンチパターン - Qiita
何が起きたのか 作成していたアプリではサーバレス構成にてLambdaからRDS(MySQL)を呼び出していました。 リクエストが増えるとRDSのコネクション数が増加して すぐにDBコネクションエラーになってしまいました。 最大コネクションの上限値 結論から言うとLambdaとRDS(MySQL)は相性が良くないです。 理由はLambdaからRDSのDBコネクションを貼ると リクエスト単位でコネクションを張ってしまうため 仕組み上、同時接続に耐えられません （RDSのコネクション上限数が少ない） さらにVPC設定すると・・・ セキュリティのため、RDSをLambdaからのみアクセスさせるためには LambdaとRDSを両方とも VPC領域に置く必要があるのですが、Lambdaの起動が遅くなる場合があります。 これは、一定時間Lambdaがコールしない場合にスリープ状態になり、 起動する際にE
それでも Lambda と RDS を使いたい場合の現実解 - Qiita
LambdaとRDS の理想と現実 こちらの LambdaとRDSで爆死してみる の続編となります。 こちらでは、LambdaとRDSの相性悪い問題を具体例をもって説明するために壮大に爆死してみました。 ただ現実問題として、LambdaとRDSを組み合わせて使いたい人は数多くいると思います。 理想はLambdaにこだわるならDynamoDBといったコネクションの上限数などを気にしなくてすむアーキテクチャかと思います。 それでも、それでも、現実解としてLambdaとRDSを組み合わせて使う構成をいくつか検討してみました。 ありがちなアンチパターン まず改めてアンチパターンの紹介です。 API Gatewayとの組み合わせ クライアントがAPI Gatewayへリクエストを投げて、それがLambdaに渡り、RDSへinsertするパターンですね。 実際よく検討されているパターンかと思います。リ
LambdaからセキュアにRDSに接続する
こんにちは、中の人です。 今回は、AWS Lambda Advent Calendar 2014に投稿した内容を紹介します。 昨日のAWS Lambda Advent Calendar 2014は玉川さんの非常に心温まる「ばあちゃんにひ孫の写真をAPIで印刷＆郵送する」という記事でした。 今日は11日目としてLambdaからセキュアにRDSに接続してみたいと思います。 ○Lambda⇒RDSへ接続するときの課題点 ・node.jsにMySQLパッケージを追加が必要 ・LambdaがIPアドレス固定でないので、RDSのセキュリティグループをフル開放する必要がある といった点がポイントとなります。 前者は「AWS LambdaでRDS（MySQL）に接続してみた」で詳しく解説されておりますので、後者に対する対策を考えてみました。 ○LambdaのIPアドレス用プログラムの設置 Webサーバに以
【AWS Lambdaの基本コードまとめ】Lambdaの基本コードを紹介します
こんにちは、シュガーです。 今回はナレコムAWSレシピの【AWS Lambdaの基本コード】シリーズをまとめて紹介します。 弊社ではLambdaを書く場合は基本的にPython3.6で作成しています。よく使う基本的なコードをこのシリーズではまとめています。この記事を通して、皆様のサーバレスライフに貢献できれば、と思います。 AWS Lambdaとは AWS LambdaはAWSの提供するコンピューティングサービスです。 Lambda関数を定義することで、様々な処理ロジックを実装し、実行することができます。一番のポイントはEC2のような仮想サーバを立てる必要がないことです。いわゆるサーバレスと呼ばれるものです。サーバが不要なので、関数を実行するのにかかった時間だけ料金がかかります。また、処理件数が増えてくると、自動的に実行ユニットを増やしてスケールアウトしてくれます。コストを抑えて、必要な時
AWS LambdaでBoxのWebhookを処理する - Qiita
概要 BoxのフォルダにWebHookを設定し、AWS Lambdaに送信されたデータを取得/操作するまでの基本的な手順についてまとめています。 (2019年3月時点) 参考 Webhookのファイルワークフロー (Box Developer site) Lambda 実行ロールの作成 Lambda関数の実行時には、「AWSLambdaBasicExecutionRole」が付与されたIAM Roleが必要です。 以下の手順でIAM Roleを作成しておき、以後Lambda関数を作成する際に Roleを割り当てることとします。 IAM > ロールの作成 「AWSサービス」を選択し、次に「Lambda」を選択後、 「次のステップ:アクセス権限」をクリックします。 「ポリシーのフィルタ」欄に「AWSLambda」と入力し、候補表示の中から 「AWSLambdaBasicExecutionRol
【AWS Lambdaの基本コードその2】 S3へのファイル保存
大柳です。 「AWS Lambdaの基本コード」シリーズ、第２回目はLambdaからS3へのファイル保存を行います。 前回記事 【AWS Lambdaの基本コード その1】 S3からのファイル取得とローカル保存 | ナレコムAWSレシピ 今回の構成 Lambdaが起動されると、テキストの内容をS3にファイルに保存します。 ローカルの/tmpディレクトリへのファイル保存なしで、直接S3にコンテンツを出力します。 コード コードは以下のようになります。 # ①ライブラリのimport import boto3 from datetime import datetime print('Loading function') # ②Functionのロードをログに出力 s3 = boto3.resource('s3') # ③S3オブジェクトを取得 # ④Lambdaのメイン関数 def lambd
【AWS Lambdaの基本コード その1】 S3からのファイル取得とローカル保存
大柳です。 最近、お客様のシステムや社内システム向けにAWS Lambdaでコードをよく書いています。 S3への読み書きなどの操作、ファイルの圧縮など、基本的なコードをまとめておくと調べる手間も省け、コード品質も一定に保てると考えて、社内へのナレッジとして整理したので、「AWS Lambdaの基本コード」シリーズとして公開します。 使い勝手と個人的な趣味からPython3系のコードでの紹介となりますが、AWS Lambda構築の手助けとなれば幸いです。 第1回目はAWS LambdaでS3上のファイルを取得しローカルに保存するコードを紹介します。 今回の構成 S3へのファイル格納をトリガーにLambdaが起動、S3に格納されたファイルを取得し、ローカルに保存します。 Lambdaではローカル保存先として/tmpディレクトリに対してファイルを読み書きできます。 LambdaでS3から取得した
S3にパブリックファイルが追加された時にメール通知するLambdaを作成する | DevelopersIO
S3上で意図せず公開されたファイルがあるのは、セキュリティ上非常に重大な脅威となりえます。今回は、S3イベントからのLambda連携を利用して、S3上にパブリック権限をもつファイルがアップロードされた時にメール通知するLambdaを紹介します。 「おれは、こんなファイルを公開するつもりはなかったんや… (T_T)」 昨今、S3オブジェクトの意図しない公開設定により重要機密が漏れるニュースをよく目にします。 AWS側でも事態を重く見ているのか、S3コンソールでパブリック設定されているバケットがあった場合の表示が、派手になりました。「パブリック！！」的な。 今回は、意図しないパブリックオブジェクトが追加された時の防止目的で、S3バケットにパブリックオブジェクトが追加されるたびに、メール通知するLambda関数を作成しました。 LambdaによるS3オブジェクトの処理に汎用的に使える方法なので、
AWS Lambda超入門 - Qiita
本記事の対象者 AWSのLambdaを「使ったことない」、または「使ってみたい」と思っている初心者向けの記事です。 AWSにはいろいろな技術がありますが、今回はLambdaの使い方の最新版を紹介します。 というのもAWSのアップデートは頻繁にあるようで、調べても手順が違っていたり、情報が古かったりと初学者にとっては挫折ポイント満載でした。 なので、2016年12月4日現在の情報で記事を書きます。挫折した人はぜひトライしてみてください。 AWS Lambdaとは AWSに関するなにかしらのイベントによって処理を実行する環境だと考えたらよいと思います。 そしての"その処理"は利用者がアップロードします。 たとえば S3にファイルをアップしたときにプログラムを実行！！ S3からファイルを削除したときにプログラムを実行！！ APIサーバとして、クライアントから通信を受けたらプログラムを実行！！ と
AWS LambdaによるRDSの自動リストアスクリプト | DevelopersIO
はじめに DI部のおおたきです。前回AWS Lambdaを使ってRDSの削除スクリプトを書いてみましたが、今回は同様にpythonでスナップショットからのリストアスクリプトを書いてみました。 前回同様pythonコードは初めて書いているので、色々突っ込みどころがあるかもしれませんがご了承ください！ リストアのスクリプトを書きはじめて気がついたのですが、AWS SDKを使ってリストアする際にRDSのパラメータグループやセキュリティグループの設定はできません。これはAWS CLIでも同様みたいです。 そのため、リストア後に設定を変更する必要があります。リストア後に設定を変更するにはRDSの起動完了を待つ必要があるため、今回はLambdaからLambdaを呼出し起動が完了するのを待つようにしました。 ロールの設定をする 今回設定しているロールは以下になります。 AmazonRDSFullAcce
Amazon EBS でスナップショットを定期的に保存しておく方法のまとめ - Qiita
実はやり方自体は既存の記事で十分まかなえているので、あえて一つ一つの手順まで詳しくは書かない。 用語 AmazonEBS EC2は、本体に記憶領域（インスタンスストア）を持っているが、こちらの記憶領域は、サーバを停止してしまうと自動的に初期化を行なってしまう。 EC2単体だと、時間起動・停止を行うような使い方をする場合不便。 そこで必要になるのがEBS。前述の通り、EC2に仮想的に外付けされるHDDのような記憶領域で、ここにデータを保存することで、EC2の停止を行なうことができる。 EBS snapshot EBSボリュームの特定時点のスナップショットをS3に保存する機能。 EBSのスナップショット機能を用いると、EBSに含まれるデータが丸ごとS3に複製され、S3へ格納されたスナップショットは新たなEBSとして復元可能。 もしEBS上のデータが破損したりロストしたりしても、スナップショット
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
AWS Lambdaで始めるサーバレスアーキテクチャ入門