「AWS Toolkit for Visual Studio Code」正式版がリリース。AWS Lambdaのステップ実行、ローカルデバッグなど可能に
AWSはオープンソースとして開発されているコードエディタVisual Studio Codeの拡張機能として、これまでプレビュー公開されていた「AWS Toolkit for Visual Studio Code」が正式版になったことを発表しました。 AWS Toolkit for Visual Studio Codeと、AWS Command Line Interface（AWS CLI）やDockerなどを組み合わせることで、サーバレスコンピューティング環境であるAWS Lambdaのローカル環境でのステップ実行やブレークポイントの設定などのデバッグ操作などが可能になります。 そして開発したアプリケーションをAWSの任意のリージョンへのデプロイもVisual Studio Codeから手軽に行えるようになります。 AWS Lambdaのローカルデバッグが可能 AWS Toolkit f
AWS Lambda でのタイムゾーン変換 - サーバーワークスエンジニアブログ
はじめに こんにちは、技術一課の山中です。 Python のタイムゾーンについて、学んだことを忘れないようにブログにまとめました。 Python の組み込みモジュールである datetime を利用して現在時刻を取得する場合、通常以下のように記載すると思います。 def lambda_handler(event=None, context=None): now = datetime.now() print(now) if __name__ == '__main__': lambda_handler() これを私のローカル PC で実行した結果は以下のとおりです。 2019-06-02 10:32:47.529957 同じものを AWS Lambda で実行してみると出力結果は以下のようになります。 2019-06-02 01:36:05.075726 同じコードを実行していてもかなり出力結
カスタムランタイムを使ってLambdaでAWSCLIを動かす - サーバーワークスエンジニアブログ
こんにちは、技術一課の加藤です。 先々週ごろにLambda上でAWSCLIを動かしてS3 Syncする – サーバーワークスエンジニアブログというブログを書きました。 この記事ではAWS CLIをローカルインストールしてPythonのコード上から呼び出すという実装をしています ですがそもそもAWS CLIはCLIコマンドで呼び出すもの。Pythonからサブプロセスを切ってコマンドを叩くのはやや冗長な気がします。 ならbashから直接呼ぶ方が中間層がなくてスマートなのでは…？ ということで、カスタムランタイムを使ってbashから直接AWS CLIを呼び出してみることにしました。 前提 今回はカスタムランタイムでAWS CLIを動かすのが主題なので、処理はAQWS CLIのバージョン出力にとどめます。S3 Syncなどしたい場合は、 aws —version の箇所を任意のコードに変更してくだ
AWS Lambda互換環境をKubernetes上で実現する「Knative Lambda Runtime」オープンソースで公開
AWS Lambda互換環境をKubernetes上で実現する「Knative Lambda Runtime」オープンソースで公開 TriggerMeshは、Kubernetes上にAWS Lambda互換の実行環境を構築することで、AWS Lambdaで利用可能なファンクションをそのままKubernetes上で実行可能にする「Knative Lambda Runtime」（KLR：発音はClear、クリア）をオープンソースで公開しました。 Announcing TriggerMesh Knative Lambda Runtime (KLR) https://t.co/2BOINQUbys pic.twitter.com/kycNdlWhoK — triggermesh (@triggermesh) 2019年1月9日 Knative Lambda Runtimeを公開したTriggerM
サーバレスを実現するAWS Lambdaの実行時間が最大で15分へ拡大。5分までの制限を緩和し、より大規模処理が可能に
サーバレスを実現するAWS Lambdaの実行時間が最大で15分へ拡大。5分までの制限を緩和し、より大規模処理が可能に AWS Lambdaは、いわゆるサーバレスコンピューティングを実現するAWSの機能です。あらかじめ開発したプログラムをAWS Lambdaに関数として登録しておき、HTTPリクエストやストレージへのデータの保存などのイベントをトリガーとしてその関数を実行、何らかの処理を行うというもの。 例えば、画像からサムネイルを生成するプログラムをあらかじめAWS Lambdaに関数として登録しておき、ストレージに画像が保存されたことをトリガーにしてその関数を実行するように設定すれば、画像が保存されるたびに自動的にサムネイルが生成される、といった処理が可能になります。 これまでAWS Labmdaに登録された関数の最大実行時間は5分で、5分を超えると自動的にタイムアウトとなっていました
「サーバレスとは何か」そして「サーバレスとPaaSの違い」とは。マーチン・ファウラー氏のブログに投稿された解説
「サーバレスとは何か」そして「サーバレスとPaaSの違い」とは。マーチン・ファウラー氏のブログに投稿された解説 サーバレスアーキテクチャは、クラウドに対応したアプリケーション開発においてホットな話題の1つと言えます。 その発端はAmazonクラウドがAWS Lambdaを発表したことですが、その後Googleが「Google Cloud Functions」を、IBMが「OpenWhisk」を、マイクロソフトが「Azure Functions」を相次いで発表し、主要なクラウドにおけるサーバレス環境が一気に整いつつあります。 しかしサーバレスはAWS Lambdaなどの実装が先行したことなどから、明確な定義があいまいなまま普及が始まろうとしている面があります。 こうした状況を整理し、何がサーバレスなのか、PaaSと何が違うのか、といった解説が、マーチン・ファウラー氏のブログMartinFol
「サーバレス／Serverless」はデータベースやコンテナへも広がってきた
「サーバレスコンピューティング」や「サーバレスアーキテクチャ」といった言葉は、2014年にAWS Lambdaが発表され、その後広く普及したことで一気に注目を浴びるようになりました。 現在ではAWS Lambdaだけでなく、Microsoft AzureのAzure Functions、Google Cloud PlatformのGoogle Cloud Functions、IBM CloudのIBM Cloud Functionsなど、主要なクラウドサービスの多くでサーバレスコンピューティング環境が提供されています。 サーバがない、のではない。サーバ管理が不要ということ AWS Lambdaに代表されるサーバレスコンピューティング環境は、一般にユーザーがあらかじめ用意しておいた関数を、イベントをトリガーとして実行することで何らかの処理を行うFunction as a Service的なア
Step FunctionsでLambda延命 - サーバーワークスエンジニアブログ
はじめに AWS Lambda(以下「Lambda」)って実行時間が最大5分までなんですよね。 5分以上かかる処理をさせたくて困ったこと、ありませんか？ こんにちは、運用システム課の礒です。 私は今回AWS Step Functions(以下「SFN」)で実行時間の上限対策をしてみました。 Step Functions？使ったことないよ... ご心配なく！ まずは今回作ったステートマシン(アプリケーション全体のワークフロー)をご覧ください。 とても単純ですね。 「あ、できそう」と思っていただければ幸いです。 SFNではこのようなワークフローをJSON形式で記述・管理できます。 詳細は割愛させていただきますが、1ヶ月あたり4000回までの遷移は無料利用枠に含まれていますので是非お気軽にお試しください！ 今回はそんなSFNを使って、処理完了まで繰り返しLambdaを実行し、完了したらどこかに通
サーバレスでスケーラブルかつ堅牢なシステムを構築するためのデザインパターンとアーキテクチャ。Serverlessconf Tokyo 2017 － Publickey
サーバレスコンピューティングは新しいシステム開発手法である。Serverlessconf Tokyo 2017で紹介された、スケーラブルで堅牢かつ高性能なアプリケーションの構築に役立つ6種類のデザインパターンを紹介する。 2017年11月2日、3日の2日間、東京都内でサーバレスコンピューティングのイベント「Serverlessconf Tokyo 2017」が開催されました。 サーバレスコンピューティングもしくはサーバレスアーキテクチャと呼ばれるアプリケーション実行環境は、一般にサーバのことを意識せずにアプリケーションを実行できる環境のことを指します。 そのサーバレスコンピューティング環境の実装として一般的なのが、あらかじめアプリケーションとして実行したいコードを関数として登録しておくと、指定されたイベントによって自動的に関数が呼び出されて実行されるという、いわゆるFunction-as-
［速報］AWS Lambdaが機能強化。.NETとGo言語をサポート、サーバレスアプリケーションのリポジトリも登場。AWS re:Invent 2017
Amazon Web Services（AWS）は、米ラスベガスで開催中のイベント「AWS re:Invent 2017」で、サーバレスコンピューティングを提供するAWS Lambdaの機能強化を発表しました。 API GatewayとVPCとの統合機能、3GBメモリサポート、コンカレンシー制御の強化などに加え、.NET Core 2.0のサポートおよびGo言語のサポートが発表されました。 Amazon.com CTOのWerner Vogels氏がGo言語のサポートを発表すると、会場からは大きな拍手があがりました。「たくさんの人から、Go言語はサポートしないのかと聞かれた」（同氏） さらにサーバレスアプリケーションを再利用可能にする公開リポジトリの「AWS Serverless Application Repository」が登場。 AWS コンソールからサーバレスアプリケーションの登録
API Gateway+Lambda+fabricでGitHubのWebHookと連携 - プログラマでありたい
API Gatewayの登場で、LambdaをWebからのエンドポイントとして利用できるようになりました。一般的なメリットとしては、モバイルアプリやJavaScriptアプリのバックエンドとして利用しやすくなったということです。それ以外にも便利なのが、WebHookとの連携です。WebHookは、何らかの処理をトリガーに、Web上にあるHTTP/Sのサービスをコールして処理を連係するといった機能です。抽象的にいうと解りにくいですが、GitHubにコミットされたタイミングで、ビルド処理を走らせる為にJenkinsやCircleCIのビルドをURL呼び出しで叩くということです。最近では、サービス間の連係によく使われるようになりつつあり、WebHookの機能が実装されているサービスが増えています。 API Gateway+LambdaとWebHook WebHookを利用する際に、サービス間の連
SWF ✕ Lambda - プログラマでありたい
AWS Advent Calendarの7日目で、全部オレの7日目です。 サーバーレス・アーキテクチャの重要な要素の1つが、Lambdaです。Lambdaは、イベント駆動でプログラムを実行するコンピュート基盤です。ユーザは、自分でサーバを管理しなくてもプログラムを実行できるため、ビジネスロジックに集中できるというメリットがあります。また、API Gatewayの登場によりHTTP Requestからの実行が容易になり、モバイルやIoTなどのバックエンジンの中核を担うようになりつつあります。 Lambdaに複雑な処理をさせたい場合 一方で、Lambdaには幾つか課題があります。複雑な処理をしたい場合、実行時間の制約や処理の責務の分割を考えると幾つかのLambdaに別ける必要が出てきます。その際は、Lambdaの多段（カスケード）実行という形になります。イメージ湧きにくいと思うので、reInv
AWS LambdaとS3で全世界ファイルサーバを作ってみた 〜おじさんの夢をかなえたろかスペシャル〜 - サーバーワークスエンジニアブログ
こんにちは。サーバレスアーキテクチャにハマっている高橋です。 以前にご紹介したとおり、Amazon S3にクロスリージョンレプリカ機能が追加されました。 S3クロスリージョンレプリケーションで全世界ファイルサーバの夢を見る このブログを読んで頂ければ分かるのですが、クロスリージョンレプリカは2つのバケットでしかレプリケーションができず、Zabbixおじさんの夢であった全世界ファイルサーバはできませんでした。 そこで今回 AWS Lambdaを利用し、全世界ファイルサーバを構築して、Zabbixおじさんの夢を叶えてみました。 おじさんの構想~なにができたか、できなかったか~ そもそもZabbixおじさんは何をやりたかったのでしょうか。下の図をご覧ください。 3つのリージョンにバケットを作成し、全世界でクロスリージョンレプリケーションのリングを組んで、全世界で同じファイルが見える低レイテンシー
仮想サーバ、コンテナサービス、ファンクション - プログラマでありたい
先日に続きreInventの基調講演を聞いた感想です。この1枚にAmazonが考えるLambdaの重要性が濃縮されているように思えます。 まずVirtual Machinesですが、これはEC2やElasticBeanstalkのような仮想サーバを指します。AWSの根幹を支えるサービスですね。次にContainersは、EC2 Container Service（ECS）です。EC2を仮想化して束ねて使うサービスですね。そして、FunctionsはLambdaです。コードをアップロードするだけで利用できるコンピュートエンジンです。 AWSの中で仮想サーバは最重要サービスであることは間違いないのですが、その次に力をいれてくるのはContainersだと思っていました。それが、この絵をみると同列の存在としてLambdaが出てきています。Amazonとして、Lambdaが如何に大切なサービスなの
サーバレスアーキテクチャとは？ - プログラマでありたい
サーバレスアーキテクチャの整理です。少し前は、2-Tier Architecture（クラウドネイティブなアーキテクチャ）と3-Tier Architecture（従来のアーキテクチャ）という対比で論じられることが多かったです。しかし、API Gatewayの登場により、3-Tierな構造でもクラウドネイティブなアーキテクチャにしやすくなりました。ということで、サーバレスアーキテクチャ（ServerLess Architecture）と呼ばれることが多いです。 サーバレスアーキテクチャのパターン それでは、従来型のアーキテクチャ（旧3-Tier）と2-Tierパターン、API Gatewayを利用したサーバレスアーキテクチャをそれぞれ見てみましょう。 従来型のパターン（ アプリケーションサーバ・パターン） まずは従来型のアーキテクチャです。間にELBを挟んでAutoScaleにすることは多
［速報］AWS LambdaでPythonが利用可能に。VPC対応、Cronのようなスケジューリングも実現。AWS re:Invent 2015
［速報］AWS LambdaでPythonが利用可能に。VPC対応、Cronのようなスケジューリングも実現。AWS re:Invent 2015 昨年、2014年のAWS re:Inventで発表された「AWS Lambda」は、インスタンスを起動する必要がなく、サーバ管理もスケーラビリティもクラウドにまかせつつ、クラウドで直接コードを実行できるという全く新しいサービスとして注目を集めました。 Lambdaは発表以来この1年でAPI Gatewayとの連係、Java対応、モバイルSDKなどのさまざまな新機能が追加。 「AWS Lambdaはアプリケーションの開発と運用を劇的に変えた」（Amazon.com CTO Werner Vogels氏） そのAWS Lambdaの新機能が、ラスベガスで開催中の「AWS re:Invent 2015」。2日目の基調講演で発表されました。 AWS La
クラウド上でコードを実行できる「AWS Lambda」、誰でも利用可能に。限定プレビューが終了
昨年11月のイベント「AWS re:Invent 2014」で発表されたAmazonクラウドの新機能「AWS Lambda」は、これまで限られたユーザーのみ試すことができる限定プレビューの状態でした。その限定が終わり、誰もが利用できるようになったことをAWSの公式ツイートが知らせています。 AWS Lambda Preview is now available to all customers - no additional sign-up needed. http://t.co/DVnnWAAN1g pic.twitter.com/PADdVionYd — Amazon Web Services (@awscloud) 2015, 1月 15 AWS Lambdaは、利用者がインスタンスを立ち上げたりランタイムを用意したり起動状況や負荷を監視するといった手間をかけることなく、Amazon
AWS Lambda Meetup #0に参加した感想 - プログラマでありたい
先日開催されたAWS Lambda Meetup #0に参加してきました。もともと聞きに行く予定だったのですが、主催者の@Keisuke69さんから打診を受けて急遽登壇することになりました。 発表資料 発表内容は、Lambda Advent Calendar用にネタ的に作ったクローラー／スクレイピングを題材にしています。 AWS Lambdaで作るクローラー／スクレイピング from Takuro Sasaki Lambdaクローラーの背景 最初にLambdaのサービスの発表を受けて、SIer脳の私はバッチサーバの代替として使いたいと考えました。なぜならばバッチサーバの運用は、思いのほか面倒くさいのです。レガシーな作りになりやすく、フェイルオーバーなど自動復旧の仕組みが取りづらいためです。そんなバッチサーバを、そもそもサーバレスのLambdaに置き換えると、運用が楽になってハッピーです。
Lambdaで作るクローラー／スクレイピング - プログラマでありたい
話題のAWS Lambda Advent Calendar 2014の14日目です。クロスポストで、クローラー／スクレイピング Advent Calendar 2014の14日目でもあります。 re:Inventで発表されて以来、注目のLambdaです。サーバを用意しなくても、バッチを直接実行できるとあって、ユースケースを考えるだけで夢が広がります。今年はクローラー本を出したこともあって、Lambdaで作るクローラー／スクレイピングをテーマにします。 クローラー／スクレイピングとは？ Webクローラーは、Webサイトを巡回してデータを取得するプログラムです。スクレイピングは、取得したデータから目的の情報を抜き出すことを指します。一般的には、クローラーの中に、スクレイピングの機能を包含していることが多いです。また、特定のページだけ取得してデータを抜き出すことを、スクレイピングと呼ぶことが多い
［速報］まるでクラウドで走るマクロ言語「AWS Lambda」発表。AWS re:Invent 2014
［速報］まるでクラウドで走るマクロ言語「AWS Lambda」発表。AWS re:Invent 2014 Amazon Web Servicesは、同社の年次イベント「AWS re:Invent」を米ラスベガスで開催しています。 2日目の基調講演で発表された「Amazon EC2 Container Service」に続く新機能が、まるでクラウド上でマクロを走らせるような「AWS Lambda」の発表です。インスタンスなど明示的にコードを実行する基盤を用意する必要がなく、クラウドの上でコードがそのまま走るため、シンプルで信頼性が高く、しかも容易に記述できるのが特徴です。 発表の内容をダイジェストで紹介します。 AWS Lambda発表 Amazon.com CTO Werner Vogels氏 アプリケーションの基本的要素（Primitives）とはなんだろうか？ スプレッドシートの例で考
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
