CloudWatch Logsにカスタムメトリクスを埋め込める、Embedded Metricsが追加されました！ | DevelopersIO
オペレーション部 江口です。 CloudWatch Logsが、カスタムメトリクスを埋め込んで送ることができるフォーマット"Embedded Metrics Format"に対応しました。 https://aws.amazon.com/jp/about-aws/whats-new/2019/11/amazon-cloudwatch-launches-embedded-metric-format/ ログにこのフォーマットで情報を送ることで、カスタムメトリクスとしてCloudWatchで集計してくれるようになります。 これまでもCLIやAPIでカスタムメトリクスをPushすることは可能でしたし、CloudWatch Logsでフィルターを作成してマッチした文字列の数を数えるメトリクスを作成することはできました。ですが、アプリケーションでカスタムメトリクスを出力したいのであれば、そのためにPus
AWS Cloud Development Kit(CDK)でURL短縮サービスを作ってみた | DevelopersIO
サーバーレスなURL短縮サービスを Python 版 AWS CDK で作るウェビナーを見つけたので、動かしてみました。 最終的には下図のようなサーバーレスなインフラを構築します。 ※図はウェビナーから引用 構築された URL 短縮サービスを触ってみます。 targetUrl に URL を渡し、短縮 URL を生成します。 $ curl https://go.example.info?targetUrl=https://aws.amazon.com/cdk/ Created URL: https://go.example.info/4692efec $ curl -I https://go.example.info/4692efec HTTP/2 301 date: Wed, 09 Oct 2019 10:03:35 GMT content-type: application/json
自動化と時短を目的にCircleCIで暫定のCICD環境を作成した記録 | DevelopersIO
CircleCIにて暫定のCI/CDを行った際の設定過程です。常時実行が不要なbuildとdeployに対してManual Approvalを挟むことでリソース浪費防止を試みました。 はじめに 手作業によるbuild・deployのヒューマンエラー防止として自動化を検討する際に、ぶつかる壁として考えられるものに 手順をCI/CDに落とし込めるか 処理時間が肥大化しないか CI/CD設定作成が困難ではないか の3点があります。 今回、それらの課題を抑えつつも「既に出来上がっている手順を大きくは崩さない」前提でCircleCIの設定へ落とし込みをしてみました。 前提 本運用にて用いるプラットフォームの選定が完了していないものの、プラットフォームを変える選択肢有りでとりあえず自動化を済ませたいという目論見があります。既にCircleCI上でpytestの実行だけは行っており、その延長としてCI/
「Node.js 8.10を使用するAWSのLambda関数が非推奨になるよ」というお知らせを読んで考えたこと - Qiita
はじめに 社内向けにお知らせを書いていたけど、残念な弊社では議論できそうな人がいなかったので、保守とか更新についての考えとかを指摘があればQiitaでコメントもらいたいなと思って投稿した記事です。 なので、コメントがあればいただけますと幸いです。 AWS Lambdaのサービス利用に関するお知らせ 2019年10月19日 午前 4:10:00 UTC+9にPersonal Helth Dashboardにて通知がありました。 通知内容 We are contacting you as we have identified that your AWS Account currently has one or more Lambda functions using Node.js 8.10, which will reach its EOL at the end of 2019.
Javaで3年飯食ったのでJava愛をちょっと語る記事 - Qiita
はじめに 本記事は、最近一部でレガシー言語といわれたりオワコンといわれたり 踏んだり蹴ったりなJavaの面白さを語る記事です。 筆者はSE3年目実務ではJava,JavaScript(たまにPythonとScala)をよく使い 個人的にReactとHaskellの勉強をしているぐらいのスペックです。 暇つぶしに読んでいただければ幸いです。 Javaが古めかしいといわれる所以を考察 大きく分けて3点あると思います。 ・構文が長くなりがちである ・Javaを取り巻く環境 ・Java9以降の機能があまり知られていない 順にみていこうと思います。 途中、他言語との比較を行いますが、優劣を決めるものではありません。 構文が長くなりがちである。 以下のソースコードは、紹介されているのを見たことのある Listに要素を格納するコードです。 public class sample { public sta
[Step Functions]動的並列処理（Map）を使って60分×24時間=1440ファイルのバッチ処理を楽々実装してみた | DevelopersIO
こんにちは、平野です。 下記のブログで紹介されているように、 Step Functionsにて、配列の入力を個別のLambda等にバラまいて処理させるMapステートがサポートされました！！ [アップデート]Step Functionsで動的並列処理がサポートされました！ 担当していた案件で、S3上にある直近24時間分ファイル群（各ファイル名に秒までの時刻が入っている）を、 1分毎にまとめて別のバケットに移すような処理があり、 これはまさにMapステートに最適な素材でしたので、Mapステートを使ったリファクタリングをしてみました！ この記事では、ServerlessFrameworkのStep Functionsプラグインを用いています。 （対応早くて助かる！！） 検証バージョン ServerlessFramework: 1.40.0 Step Functionsプラグイン: 2.8.0 M
![[Step Functions]動的並列処理（Map）を使って60分×24時間=1440ファイルのバッチ処理を楽々実装してみた | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/ab62f855f97936c12b60e511a8953225f7851a15/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2019%2F04%2Faws-step-functions.png)
コールドスタート高速化のためにboto3をスリム化して改善効果を測定してみた | DevelopersIO
Lambda実行環境にバンドルされているboto3はバージョンが古いため、新し目の機能を利用したい場合はデプロイパッケージに自前でboto3を組み込む必要があります。 しかし、boto3はパッケージサイズが大きいため、コールドスタートの速度に悪影響を及ぼします。 この記事では、デプロイパッケージに含めるboto3をスリム化することでコールドスタートのオーバーヘッドを改善する手法をご紹介します。 なお、ご紹介する手法はシステムの保守性という観点で懸念事項が残ります。また改善効果も50ミリ秒程度のものです。このレベルのチューニングが必要になるのであれば、本来はコールドスタートという概念のあるLambdaを選択すべきではありません。が、そうはいっても色々なしがらみから「アーキテクチャは見直せないけど少しでもコールドスタートを早くする必要がある」というケースがあるかもしれません。あまり推奨できるチ
コードでAWSをさわってみよう！プログラミング初心者向けAWS SDK（Boto3）の使い方 | DevelopersIO
はじめに：プログラミングに入門してはみたものの 「結局何ができるの？」 と思っている方は結構いらっしゃるんじゃないでしょうか。数年前までの私がまさにそうでした。 コンピュータサイエンスに関する知識をほぼ持たないまま前職の会社に入社しインフラSEとなった私は、興味（と若干の焦燥感）に駆られPythonの入門書などを読んでいました。しかし、入社後しばらくたっても業務におけるプログラミングといえば小さなシェルスクリプトを書く程度だったため、結局何が美味しいのかわからずじまいでした。 本エントリについて 数年前の私と同じような悩みを抱える皆さまにプログラミングの用途の一つをお伝えすることが本エントリの目的です。公式ドキュメントを読みつつ、Python3+AWS SDK for Python(Boto3)を使用しAWSリソースを操作してみましょう。 3連休のおともにしていただけたら嬉しいです。 主な
Docker環境をECSにデプロイ - Qiita
はじめに これまでは Vagrant + VirtualBox で作った仮想環境上で、Dockerコンテナを動かしていましたが、これがどのようにAmazon Elastic Container Service (ECS) にデプロイされるかの手順が良く分かっていませんでした。 そこで、簡単なWebアプリケーションコンテナをECSにデプロイして、AWS上で動作確認するところまでをやってみようと思います。 目次 Docker イメージを用意 ローカルでのDockerイメージの動作確認 AWS CLIをインストール ECRにPUSHする為のIAMユーザを作成 AWS CLIに認証情報を設定 キーペアの作成 ECRにリポジトリを作成 ECRの該当リポジトリにPUSH ECSのタスク定義を作成 ECSのクラスターを作成 ECSのタスクを実行 動作確認 Docker イメージを用意 今回はAWS上での
AWS Lambda で Python みたいな関数型言語 Coconut を動かすぞ！！！！！！！（非カスタムランタイム）
ホームテクノロジーAWS Lambda で Python みたいな関数型言語 Coconut を動かすぞ！！！！！！！（非カスタムランタイム） AWS Lambda で Python みたいな関数型言語 Coconut を動かすぞ！！！！！！！（非カスタムランタイム）みなさんはじめまして！！！！！！！！！！！！ 会津ラボで主にバックエンドの開発を担当している吉原です。他にブロックチェーン等もやってます。好きな言語は Haskell、趣味はクイズゲームです。以後お見知りおきを。 ※ ちなみに弊社には吉の字がつくバックエンド担当が２人おり、度々間違われます。当ブログをご覧になる場合はご留意ください。 さて、今日（注：執筆開始時点）はお盆です。 ……お盆も働いていたやつらだ。面構えが違う。 というのは冗談で、お盆休みをずらして取得しているため、その代わりに出勤しています。こういったことができる所
[AWS CDK] CircleCIでサーバーレスアプリ(WebAPI)を自動デプロイしてみた（本番環境と開発環境） | DevelopersIO
AWS CDK(Cloud Development Kit)とCircleCIを組み合わせて、自動デプロイする仕組みを作ってみました。 これで運用がますます楽々になりまね！ なお、デプロイのみを対象とします。（テストは扱いません） 目次 環境 リポジトリとブランチ運用 AWS CDKのインストール AWS CDKで適当にサーバーレスアプリ（WebAPI）を作る WebAPIの仕様 AWS CDKプロジェクトの構築 Lambdaコードを書く！ インフラをコードで書く！！！ サーバーレスアプリのStack CircleCI用ユーザのStack スタックのデプロイ準備をする ビルドする bootstrapの実行 CircleCIの事前準備 Python仮想環境の構築 pyenvの導入 Python仮想環境の作成 AWS CLIの導入 AWS認証情報のセットファイルを作成 CircleCI用の設定
最新バージョンのAWS CLI をAmazon Linux 2 にインストールしてみた | DevelopersIO
AWSチームのすずきです。 Amazon Linux2のAMIを利用して起動したEC2環境で、最新バージョンの「AWS CLI」をインストール、利用する機会がありましたので、紹介させて頂きます。 環境 AMI amzn2-ami-hvm-2.0.20190618-x86_64-gp2 (ami-0c3fd0f5d33134a76) 2019年8月現在、「AWS CLI」のバージョンは「1.16.102」がインストールされます。 version $ /usr/bin/aws --version aws-cli/1.16.102 Python/2.7.16 Linux/4.14.123-111.109.amzn2.x86_64 botocore/1.12.92
AWS Certified Machine Learning – Specialty に合格してきました - YOMON8.NET
ここ数年のAIブームで、AIの勉強全くしてこなかった私でも、少しずつ仕事でAI関係に関わることができてきました。その度に部分的に頑張って追いつくというのを続けてきたのですが、そろそろ限界を感じたので、どこかで体系的に勉強しなくてはと考えていました。 勉強嫌いな方では無いですが、根がサボり屋なので、何か切迫した目標が無いと勉強に集中することができません。 そこで、5月中に「AWS Certified Machine Learning – Specialty 」を取得するというニンジンを設定して、今年のGWの10連休で勉強やろうと一年発起しました。 GWは子供が寝静まってから勉強というハードスケジュールでしたが、その甲斐あって、無事に試験合格したので、記事書きます。 勉強方法 基礎部分 試験向け 他にも役立った本 勉強時間 点数 その他試験の所感 まとめ 参考URL 試験ガイドとサンプル問題
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
AWS Glue ジョブタイプ『Spark』が Apache Spark 2.4.3 と Python 3.6をサポートしました | DevelopersIO
TechRepublic: News, Tips & Advice for Technology Professionals
