S3上のオブジェクトを結合するnpmパッケージを公開した話(ESM, CJS対応) | DevelopersIO
はじめに S3上の細かいオブジェクト(ファイル)を1つのオブジェクトに連結したい要件がありましたが、色々調べると気にかける事が多く、挙動を理解する目的込みでnpmパッケージを作ることにしました。Pythonのs3-concatにInspireされ、Node.js(TS)で同じことを実現したいと思ったのもモチベーションの1つです。 ESModulesとCommonJSに対応しています。 S3にはMultipart upload機能があります。5GBを超えるファイルはCopyObjectで移動が出来ないため、Multipart uploadを使うケースが多いです。boto3のcopyメソッドは、Multipart upload機能を使っているようです。このMultipart upload機能は、ファイルの結合にも利用可能です。 この背景をベースに以下の理由から、npmパッケージ化することにしま
Amazon CloudWatch Synthetics が NodeJS/Puppeteer ランタイムバージョン 6.2、バージョン 5.2 および Python/Selenium ランタイムバージョン 2.1 をリリース
Amazon CloudWatch Synthetics が、Synthetics NodeJS ランタイムバージョン (syn-nodejs-puppeteer-6.2、syn-nodejs-puppeteer-5.2) と Python ランタイムバージョン (syn-python-selenium-2.1) のリリースを発表しました。このリリースに伴い、Lambda OS との上位互換性を実現するために Chromium 依存関係ライブラリが更新され、顧客アカウントに新しい Lambda エフェメラルストレージの使用量メトリクスが追加されました。詳細については、「リリースノート」を参照してください。 既存の NodeJS-18 ランタイムバージョン (syn-nodejs-puppeteer-6.1 以下)、NodeJS-16 ランタイムバージョン (syn-nodejs-puppe
Node.js ランタイムの Lambda 関数で、export された AWS SDK クライアントが再利用されることを確認してみた | DevelopersIO
Node.js ランタイムの Lambda 関数で、export された AWS SDK クライアントが再利用されることを確認してみた こんにちは、CX 事業本部 Delivery 部の若槻です。 Node.js ランタイムの Lambda 関数から AWS サービスにアクセスしたい場合は、AWS SDK for JavaScript v3 を使用します。 基本的にはサービスごとに AWS SDK クライアントを初期化して利用することになるのですが、この初期化処理には若干のオーバーヘッドが発生します。 そこで、初期化時のオーバーヘッド発生を抑制するために、handler 外で定義して export した AWS SDK クライアントであれば再利用されるようになるのかを確認してみました。 確認してみた Amazon DynamoDB の AWS SDK クライアントで試してみます。 CDK
AWS Secrets Manager APIキーをlambda関数（Node.js18）で呼び出す - Qiita
概要 Secrets Managerに登録した値をlambda関数（ランタイムはNode.js18）で呼び出す方法を簡単にまとめる。 前提 下記か下記に準ずる方法でSecrets Managerに値を登録してあること。 方法 ランタイムがNode.js18のlambda関数を作成する。 関数の概要の「Layers」をクリックする。 「レイヤーの追加」をクリックする。 「レイヤーソース」で「AWSレイヤー」を選択し、プルダウンで「AWS-Parameters-and-Secrets-Lambda-Extension」を選択し、バージョン4を選択し、「追加」をクリックする。 関数の「設定」を開き「アクセス権限」の実行ロールの名をクリックする。 「許可を追加」をクリックし、「ポリシーをアタッチ」をクリックする。 SecretsManagerReadWriteと入力しポリシーをフィルターする。 ヒ
AWS CloudFormationにベタ書きするLambda nodejs18.x - Qiita
Node.js 18.xでコードを書いて、AWS Lambdaで稼働させたい。 AWS-SDKはランタイム搭載のAWS-SDK v3をそのまま使いたいし、コードはAWS CloudFormationのファイル内にベタ書きしてデプロイしたい（手抜き）。 CloudFormationが生成するもの 例えばCloudFormationのYAMLにベタ書きする。 # ...略... Resources: LambdaFunc: Type: AWS::Lambda::Function Properties: Runtime: nodejs18.x Handler: index.handler Code: ZipFile: | // ベタ書きするぞおおお // おおおお // おおおお # ...略... すると、生成されるのはこれまで通りindex.jsである。 Node.jsコード側を合わせる と
[AWS CDK] Step Functions の EvaluateExpression Task の Lambda ランタイムで Node.js 18.x が使えるようになりました | DevelopersIO
こんにちは、CX事業本部 Delivery部の若槻です。 昨年11月に AWS Lambda ランタイムに Node.js 18.x が追加されました。 Node.js は 2022年10月より 16.x が Maintenance LTS となり、18.x が Active LTS となったため、今後は 18.x の利用が推奨されます。 そしてこのたびの AWS CDK のアップデートにより、v2.74.0 より AWS Step Functions の EvaluateExpression コンストラクトクラスの Lambda ランタイムでも Node.js 18.x がついに利用可能となりました。 Features - stepfunctions-tasks: Node.js 18.x runtime for EvaluateExpression (#25002) (f26bfe9)
![[AWS CDK] Step Functions の EvaluateExpression Task の Lambda ランタイムで Node.js 18.x が使えるようになりました | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/b9963196a6be76ae8c10aadfbaab76adf01bf565/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2022%2F08%2Faws-step-functions.png)
AWSサービス名のtypo削減用のtextlintルールとルール更新用のスクリプトを公開してみた（npmパッケージ） | DevelopersIO
こんにちは。AWS事業本部コンサルティング部に所属している今泉（@bun76235104）です。 みなさん技術ブログ書かれていますか？ 弊社では多くの社員が毎日とんでもない数のブログアウトプットをしています。 その中でもやはりAWS系のサービスに関する記事は多いです。 AWS系のサービス・プロダクトは非常に多く、微妙にtypoしてしまうことがありませんか？ 私はかなりあります。代表的な例だと以下のような形ですね。 OK: AWS Security Hub OK: Security Hub NG: Amazon Security Hub NG: SecurityHub 今回はこのような間違いに気づけるようにtextlintルールを作成するとともに、ルール更新を自動化できるようにスクリプトを組んでみました。 npmモジュールとしても公開して、できるだけ使いやすいようにいたしました。 なお、この
[Node.js] AWS Lambda関数の同期呼び出しを非同期に行いたい | DevelopersIO
こんにちは、CX事業本部 Delivery部の若槻です。 今回は、AWS Lambda関数の同期呼び出しを非同期に行う方法を確認してみました。 やりたいこと 具体的にやりたいことは次の通りです。Lambda関数の挙動をコードでテストするのが目的です。 Lambda関数を同期的に呼び出し 1の2秒後に別の処理を実行 1の呼び出しのレスポンスペイロードを取得 1と3の間に2を行いため、1と2の処理を非同期で実行する必要があります。 Promise.all()を使えば良さそう 複数の処理を非同期で実行しつつ実行結果を取得したい場合はPromise.all()を使うと良さそうです。 Promise.all() - JavaScript | MDN Promise.all()は複数のPromiseオブジェクトを配列で指定し、全てのPromiseが解決できたらそれぞれの戻り値を配列で返します。 con
![[Node.js] AWS Lambda関数の同期呼び出しを非同期に行いたい | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/54fe0187c0189f76c44d57c42e41f2f4ee1823c9/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2020%2F04%2Fnodejs-1200x630-1.png)
Amazon S3やEFSを爆速にする「Amazon File Cache」／Denoが大幅な方針変更を発表／無料で読めるITまんが 2022年版ほか、2022年8月の人気記事
Amazon S3やEFSを爆速にする「Amazon File Cache」／Denoが大幅な方針変更を発表／無料で読めるITまんが 2022年版ほか、2022年8月の人気記事 Publickeyでは毎月初に前月の人気記事を紹介しているはずだったのですが、なぜか8月の人気記事を9月に紹介し忘れていました（読者からご指摘いただきました、ありがとうございます）。 まるで夏休みの宿題をすっかり忘れてしまったような感じで、9月の最終日ではありますが、8月の人気記事を振り返ってみたいと思います。 まずは1位から3位。 1位から3位 1位 AWS、Amazon S3やEFSを爆速にする「Amazon File Cache」発表。複数のストレージを単一のビューでアクセス可能に 2位 Denoが大幅な方針変更を発表。3カ月以内にnpmパッケージへの対応を実現、最速のJavaScriptランタイムを目指しH
[アップデート] AWS Lambdaが Node.js 16をサポートしました | DevelopersIO
そろそろNode.js 16使いたいな こんにちは、のんピ(@non____97)です。 皆さんはそろそろNode.js 16使いたいなと思ったことはありますか? 私はあります。 AWS Lambdaがサポートしている昨日までのNode.jsの最新バージョンはv14です。 Node.js 14のサポート終了は2023/4/30です。あと1年切っていますね。 そんな折、AWS Lambdaが Node.js 16をサポートしました。 AWS公式ブログも投稿されていますね。 Node.js 16はNode.jsの最新のLTSリリースであり、2024年4月までセキュリティ&バグフィックスがサポートされます。 Node.js 16ではV8エンジンがv9.0にアップデートされています。 以下コードでNode.js 14で使うV8エンジンのバージョンを確認するとv8.4でした。 exports.han
![[アップデート] AWS Lambdaが Node.js 16をサポートしました | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/25fe5c76b0259f67cfbb0286bc1fd48c715f810f/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2019%2F05%2Faws-lambda.png)
esbuild を使って AWS Lambda (Node.js) を2秒でアップデートする
はじめに esbuild のビルド時間の速さに感動して、個人プロダクトで使っている AWS Lambda (Node.js) をなるべく速く更新できるようにしたいな、と思ってやってみた投稿です。 おことわり タイトルに2秒と書いていますが、当然どんな環境でも2秒でできるわけではありませんのでご注意ください。 使用するソースコードの内容によって、デプロイする時間も変わります インターネットの回線速度やAWSリージョンによって、デプロイする時間も変わります 参考までに、私の通信速度はこのぐらいでした。 その他 AWS の状況などの要因でも変わるかもしれません。 「参考：私の個人環境の場合」の章にも書いていますが、私が実際に使っている Lambda 関数は約4.2秒でアップデートできます。 高速にデプロイしたい理由 ローカルでも AWS Lambda の環境をある程度まで再現して開発することは可
AWS、エッジにおけるJavaScript実行環境に本格参入 CloudflareやDenoなどの競合に
また、実行時間もLambda@Edgeが最大で5秒以内（ビューワによるトリガー）もしくは30秒以内（オリジンによるトリガー）なのに対して、CloudFront Functionsでは1ミリ秒以内と非常に短い時間でレスポンスを返すことが大きな特徴となっています。 その分、CloudFront FunctionsはECMAScript 5.1対応のJavaScriptランタイムのみをサポートし、メモリは2MB、パッケージサイズは10KBなどの制限があります。 CloudFront Functionsのユースケースとしては、画像変換のような一定のコンピューティングリソースを要求し時間がかかりそうな処理ではなく、URLの書き換えやCookieの処理などの軽量かつ短時間で済むものが想定されています。 Lambda@Edgeがどちらかといえばクラウドの処理をオフロードするような用途であるのに対し、Cl
AWS、エッジにおけるJavaScript実行環境に本格参入。Cloudflare WorkersやDeno Deployなどと競合へ
AWS、エッジにおけるJavaScript実行環境に本格参入。Cloudflare WorkersやDeno Deployなどと競合へ Amazon Web Services（AWS）は、エッジ環境で軽量なJavaScriptによる処理を実行可能な新サービス「Amazon CloudFront Functions」を発表しました。 AWSではすでにエッジで処理を行う「Lambda@Edge」を提供しており、そこでNode.jsとPythonによるコードを実行可能です。 しかしLambda@Edgeは13カ所のリージョナルエッジキャッシュにおいて処理が行われるのに対し、CloudFront Functionsは218カ所以上のCloudFront Edge Locationsにおいて処理が行われるため、よりユーザーに近い広範囲なロケーションで実行されます。 また、実行時間もLambda@Ed
AWS Lambda Node.js で Axios を利用した通信を X-Ray でキャプチャする | DevelopersIO
吉川@広島です。 AWS X-Ray を使うと AWS リソース間や外部との通信をキャプチャできます。 AWS X-Ray とは何ですか。 これにより実行時間が遅くなっている原因の特定などに役立てることができます。 AWS Lambda を AWS X-Ray に使用する 【アップデート】AWS X-Ray が AWS Lambda に対応しました（プレビュー） Lambda に X-Ray を導入するのは非常に簡単なので 積極的に活用していきたいところです。 どのように導入するかですが、 AWS リソースに対するアクセスをキャプチャするのは import * as AWSBase from 'aws-sdk' const AWS = AWSXRay.captureAWS(AWSBase) と手軽な記述で済みます。 他方、 Axios を使って外部サービスのAPIを叩くような場合はどのよう
AWS LambdaがNode.js 14をサポート、Node.js 14の新機能が利用可能に
米Amazon Web Servicesは、AWS Lambdaが「Node.js 14」による関数の作成に対応し、Top-Level awaitや拡張診断、ストリームAPIの変更、JavaScriptエンジンによるパフォーマンスの向上といった新機能を利用可能になったことを、2月3日（現地時間）に発表した。「Node.js 14」で記述されたLambda関数は、Amazon Linux 2で実行される。 「Node.js 14」によるLambda関数をデプロイするには、Lambdaコンソールからコードをアップロードして、「Node.js 14.x」ランタイムを選択する必要がある。また、AWS CLI、AWSサーバレスアプリケーションモデル（AWS SAM）、AWS CloudFormationを使用して、「Node.js 14」で作成されたサーバレスアプリケーションをデプロイ、および管理す
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Creating Serverless Functions with Node.js on AWS Lambda - Java Code Geeks
https://zenn.dev/euxn23/articles/9e8275fdef661b
Webサイト開発特化型AIサービスのWebエンジニアを募集！
Deploying NodeJS Application on Amazon EC2 using AWS CodePipeline
How I Built a Serverless AWS Lambda Twitter Bot in NodeJS in a Single Day
