ECSのTask数がいつの間にか0に？Task消失事件の顛末 - エムスリーテックブログ
【デジカルチーム ブログリレー5日目】 デジカルチームの井上 渉 (@wtr_in) です。米がなければということで、餅をよく食べています。実は餅はお正月以外も食べて良いんですよ皆さん。 さて、2024 年 7 月と結構前の話になりますが、AWS で以下のようなアップデートがありました。 aws.amazon.com このアップデートにより ECS が Task を起動する際にイメージを特定する挙動が変わったのですが、デジカルではその影響で、テスト環境の ECS Service の Task 数がいつの間に 0 になる というトラブルを経験しました。割とエッジケースなので、多くの方が遭遇することはないとは思いつつ、ある意味面白い事象だったのでその内容を紹介しようと思います。 どんなアップデートだったか？ そして起きた ECS Task 消失事件 🚨 事件の原因 🔍 要因(2) ECR
AWS で GitHub Actions を使用してマルチアーキテクチャコンテナをビルドしよう | Amazon Web Services
Amazon Web Services ブログ AWS で GitHub Actions を使用してマルチアーキテクチャコンテナをビルドしよう このブログは、テクニカルアカウントマネージャーの Zakiya Randall が執筆し、シニアスペシャリストソリューションアーキテクトの Muru Bhaskaran と共同で書かれました。 はじめに コンピューティング環境が進化するにつれ、さまざまなコンピューティングアーキテクチャをサポートすることが求められるようになっています。 こうした動きは、多様なハードウェアプラットフォームにおける柔軟性、効率性、パフォーマンス最適化のニーズから生まれています。 その結果、開発者や組織にとって、複数のアーキテクチャ (マルチアーキテクチャ) に対応したコンテナイメージを構築することが、ますます重要になっています。 AWS CodeBuild は、フルマネ
Amazon ECRに「プルスルーキャッシュリポジトリ」機能が追加されました #reinvent | DevelopersIO
みなさん、こんにちは！ 福岡オフィスの青柳です。 Amazon ECRに「プルスルーキャッシュリポジトリ」(pull through cache repositories) という機能が新たに追加されました。 Amazon ECR announces pull through cache repositories どんな機能で、どんな時に役立つのか、見ていきましょう。 プライベートリポジトリ運用で困っていたこと ECSやEKSを利用する際、あるいは社内の開発者向けにコンテナリポジトリを提供する際など、コンテナイメージの取得 (pull) をプライベートなコンテナリポジトリからのみに限定して、インターネット上のパブリックなコンテナリポジトリの利用を制限する場合があるかと思います。 企業の社内セキュリティポリシーに準拠するため Docker HubやECR Public Repositoryの
コスト削減で重要な「ボトルネックから潰す」「覚悟を持つ」 約60,000ドル削減のため、具体的に実行した6つのこと | ログミーBusiness
「Startup Day 2023」は日本中のAWSを利用するStartupが、AWSの知見を披露するHubとなる1日です。2023年はサブテーマに「スタートアップ冬の時代を共に乗り越える」を掲げて、スタートアップが面しているこの逆境をどうやって跳ね除け、成長につなげていけるかを共有します。ここで、株式会社SODAの林氏が登壇。ここからはコスト削減のために具体的に実行したことについて話します。前回はこちらから。 コスト削減のために実行したこと1 VPC Endpointの導入林雅也氏：ここまでどういうふうにコストを削減していくかの方針を見ていったので、それに沿って、実際に「SNKRDUNK」（以下、スニダン）でどのようなコスト削減が行われてきたのかをお話しします。 方針で言っていたとおり、まずはもちろんボトルネックを探すところからです。（スライドを示して）こちらの図は、コスト削減の取り組み
Amazon ECRのクロスリージョンレプリケーションが公開されました | Amazon Web Services
Amazon Web Services ブログ Amazon ECRのクロスリージョンレプリケーションが公開されました この記事は Cross region replication in Amazon ECR has landed を翻訳したものです。 本投稿は Michael Brown と Michael Hausenblas が共同で作成しました。 Amazon Elastic Container Registry (ECR) のリージョン間でコンテナイメージを自動的にレプリケーションする機能は、最も要望の多かった機能の一つでした。これまでは自分でレプリケーションを実装しなければならなかったのですが、今では AWS に作業を任せて、お客様はアプリケーションの構築と実行に集中できるようになりました。この記事では、ECR のクロスリージョンレプリケーション (CRR) がどのように機能す
AWS CLIを使ってECRにDockerイメージを登録する | DevelopersIO
事業開発部の野村です。 自前のDockerイメージをECRに登録する機会があったのでその時に行った手順をおさらいしてみました。大抵はCI等で設定してアプリケーションの更新が入った時に自動化する手順ではありますが、改めてどのようなステップを踏んでいるかを振り返る意味も込めて手順化してます。 目次 目次 前提 イメージ登録手順 リポジトリの作成 Dockerログイン Dockerイメージのプッシュ プッシュしたイメージの確認 後片付け まとめ 前提 AWS CLIとDockerを使います。 AWS コマンドラインインターフェイス（CLI: AWSサービスを管理する統合ツール）| AWS Docker Desktop for Mac and Windows | Docker 利用するリージョンは ap-northeast-1 とします。以降の手順でも使うので環境変数に登録しておきます。 AWS_
[アップデート]AWS CLI v2 で $ aws ecr get-login を使うときの注意点 | DevelopersIO
AWS CLI v2 で $ aws ecr get-login を使いたいときの注意点を書きました。 大阪オフィスのYui(@MayForBlue)です。 つい昨日、Amazon ECRを触っていたら、AWS CLI v1 → v2 の移行で使用できなくなっているコマンドがあることを知ったのでその話です。 $ aws ecr get-login-password を使う 結論から言うと、ECRにログインするために必要な以下のコマンドがv2で使用できなくなっていました。 $ aws ecr get-login 公式のリファレンスを確認すると、以下のページに記載がありました。 AWS CLI version 2 replaces ecr get-login with ecr get-login-password このコマンドをv2で使用すると、以下のように、コマンドが使用できない旨のメッセー
CodePipelineのECRソースのユースケースについて考えてみた
こんにちは。koarakkoです。re:invent期間中に発表されたサービスからピックアップしています。 CodePipelineがECRをソースとして発火できるようになりました。 そこで、今回はCodePipelineがECRソースの利用を想定したユースケースを紹介したいと思います。 環境 以下の環境を基に説明したいと思います。 ソースコード管理: GitLab デプロイ先: ECS デプロイJSON： S3 ※ ECRアウトプットアーティファクトを基にしてECSへデプロイできないため、デプロイ先を示す情報をJSONファイルとしてS3に格納しておく必要があります。 ユースケース１： デプロイのみCodePipelineでやりたい GitLabのようなCodePipelineと直接連携できないようなソースコード管理を行っていた場合、S3かCodeCommitにソースコードをアップする必要
EKSで、別AWSアカウントのECRリポジトリのDockerイメージをpullする方法
今回はECR上のDockerイメージを、別のAWSアカウントからpullする方法についてです。AWSの公式ドキュメント見ればわかるけど、まとまっていないので、自分のためにもまとめておきます。他にもあったら教えてください。 普通にできるから帰るhttps://t.co/gUtj3qfxh3 — nishipy (@iamnishipy) 2019年6月11日 やりたいこと 今回やりたいことは、以下の通りです。 AWSアカウントは2つあるとする AWSアカウント①にEKSクラスタがある AWSアカウント②にECRリポジトリがある AWSアカウント①のEKS上のKubernetesクラスタに対してコンテナをデプロイする際に、AWSアカウント②のECRリポジトリからコンテナイメージをpullしたい 前提知識
多量のイメージファイルを持つECRリポジトリが発生させるストレージ月額コストを概算してみる | DevelopersIO
ECRのリポジトリに入れっぱなしとなっているイメージがもたらす利用費について、月額をざっくりとTerminal上から計算してみました。 はじめに 担当プロジェクトの運用改善として、ECRのリポジトリでの保存イメージ整理に着手したところ、削除する手順が一切なかったこともあり相応のボリュームとなっていました。容量削減のためにライフサイクルポリシーの設定を行うにも、環境が本番・開発と複数ありつつも固定タグがlatestのみの状況で、ルール付けを行うのが先だなと実感しているところです。 解決するまでに発生し続けるコストが気になり、先ずは該当リポジトリに保存されているイメージによる一ヶ月当たりの利用料を計算してみました。 aws-cliによる計算 公式ドキュメントによる料金詳細は以下の通りです。 ストレージコストは 1 か月あたり GB 単位で 0.10USD 料金 - Amazon ECR | A
terraformで単一アカウントのECRを複数アカウントでアクセスさせる - Qiita
/* ECRは1箇所に集約したほうが管理しやすいので、operationアカウントのみに作成します */ resource "aws_ecr_repository" "this" { # countでやると、listの中間削除すると全部作り直しになる # ので0.12から入ったfor_eachを入れると、問題なくなる # https://github.com/hashicorp/terraform/issues/10850 for_each = toset(var.ecr_repositories) name = each.value image_scanning_configuration { scan_on_push = true } } resource "aws_ecr_repository_policy" "this" { for_each = toset(var.ecr_rep
Amazon ECRでAmazon EventBridgeのサポートが追加されましたっ!! | DevelopersIO
こんにちは、森です。 ECRへのプッシュ/削除時のアクションをトリガーできるように、Amazon EventBridgeのサポートが追加されるようになりました。 EventBridge Support in Amazon Elastic Container Registry この追加機能により複雑なワークフローを実現することもできるようになる と説明されています。 イメージがプッシュされたときに継続的な統合、継続的な展開パイプラインをトリガーしたり、イメージが削除されたときにDevOpsチームSlackチャネルにメッセージを投稿したり などです 使ってみる イメージのPush、削除をトリガーし、Slackに通知を送ってみようと思います。 Amazon EventBridgeのコンソールに移動し、新しいルールを作成します。 名前と説明 は任意のものを入力します。 パターンを定義の項目で、イベ
Using VPC endpoint policies to control Amazon ECR access | Amazon Web Services
Containers Using VPC endpoint policies to control Amazon ECR access In January 2019, AWS announced support for AWS PrivateLink on Amazon ECR. AWS PrivateLink is a networking technology designed to keep all network traffic within the AWS network. When you enable AWS PrivateLink for Amazon ECR, VPC endpoints appear as elastic network interfaces with a private IP address inside your VPC. For more det
【超待望アップデート】ECRに対する脆弱性スキャン機能が提供されました | DevelopersIO
待望と言って良いアップデートです。ECRのイメージに対する脆弱性スキャン機能がマネージドで提供されました。まずは、皆さんのコンテナワークロードにおけるイメージの脆弱性スキャン実施してみて足元を振り返ってみてはいかがでしょうか？ 「俺はこの日を待ち望んでいた…ほんまやで…」 本日、非常に重大なアップデートがECRに舞い降りてきました。なんと、ECRに対するイメージスキャンが実装されたとのことです！ Announcing Image Scanning for Amazon ECR コンテナセキュリティを考えるにあたり、一番最初に気をつけておきたい点がそのコンテナイメージで導入したパッケージに対する脆弱性の混入。今まででも、aquasecurity/trivyや、goodwithtech/dockleなど、フリーで利用できる優秀なツールは存在していましたが、それぞれCI/CDパイプラインへの組み
（ショロカレ 23 日目）Amazon ECR をもう一時間使ってみた（aws-cli による操作と ECS との連携を試す） - ようへいの日々精進XP
「初老丸の独り Advent calendar 2015」の二十三日目の記事です。 追記 コンテナインスタンスに付ける IAM role のポリシーを Amazon Managed Policy に変更した。 inokara.hateblo.jp 助言を頂いた @riywo さん、有難う御座いました！ tl;dr inokara.hateblo.jp では、触ってみただけだったので、少しうんちくを参考資料などから拝借する。 うんちくとか なんぼ？ Amazon ECR って利用するのになんぼくらいするの？（現在はヴァージニア料金） ストレージ使用料 0.10 USD/GB/月 Amazon ECR からのデータ転送量が発生 お楽しみの無料枠は... 500MB/月 翌月繰り越しは出来ないとの（携帯電話みたい） ECR の特徴 こちらからの抜粋。 ECS との連携 ECS で稼働しているコン
他のAWSアカウントのECRリポジトリにPush/Pullする - Qiita
アカウント①（111111111111）がアカウント②（999999999999）に対してPush/Pullする場合。 アカウント①のIAMの設定 まず、Pushする側のアカウント①のIAMに対してECRの操作に必要な権限 を付与する。 これは、アカウント②のECRリポジトリの権限とは別に必要なので注意。 ※MiamでRoleに権限を付与した場合の例を示す # アカウント①（111111111111） role "DockerPusher", :path=>"/" do instance_profiles( "DockerPusher" ) assume_role_policy_document do {"Version"=>"2012-10-17", "Statement"=> [{"Effect"=>"Allow", "Principal"=>{"Service"=>"ec2.amaz
AWS ECR が PrivateLink に対応しました。 - Tech Do | メディアドゥの技術ブログ
はじめまして。メディアドゥでインフラエンジニアをしている土屋です。 当ブログにて以前公開した「AWS FargateでNATを利用するときの注意点」では、ECSでNAT利用時に発生した過課金問題とその回避策について紹介しました。 その後、ECSをよりセキュアな構成でECRと併用できる新機能 Amazon ECR PrivateLink Support が、正式にリリースされました。 今回は、ECSでPrivateLinkをつかったECRの利用方法と、その費用感などを簡単にまとめます。 AWS PrivateLinkとは PrivateLink自体は以前からあるサービスなのでご存知の方も多いと思いますが、 公式ページでは、 AWS PrivateLink を使用して、データがパブリックインターネットに晒されることを防ぐことで、クラウドベースのアプリケーションで共有されるデータのセキュリティを
Amazon ECS および Amazon ECR が AWS PrivateLink のサポートを開始
Amazon Elastic Container Service (ECS) および Amazon Elastic Container Registry (ECR) が AWS PrivateLink のサポートを開始しました。AWS PrivateLink は AWS のサービスに可用性が高くスケーラブルな方法でアクセスするように設計された専用テクノロジーで、ネットワークトラフィックが AWS ネットワークの外に出ることはありません。ECR および ECS 用の AWS PrivateLink エンドポイントを作成すると、それらのサービスエンドポイントは VPC でプライベート IP アドレスを持つ Elastic Network Interface として表示されます。 AWS PrivateLink のサポートがなかった従来までの Amazon EC2 インスタンスは、ECR に保存
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
クロスアカウントでECRへアクセスする方法
Amazon ECR に特定 IAM ユーザからのみのアクセスを許可 - Qiita
