サーバダウンはなぜ起きる？ AWSやMicrosoftでも発生、原因と対策は
クラウド最大手の米Amazon Web Services（AWS）で6月に起きたクラウドサーバの障害は、大手企業のアプリやサービスなどに大きな影響を及ぼした。同月初旬には「Microsoft 365」がダウンしてOutlookやWordが一時的に使えなくなる障害も発生。AmazonやMicrosoftのような最先端企業でさえも防ぎ切れないサーバダウンは、なぜ起きるのか。 今回のAWS障害は米東部時間6月13日にUSイースト1リージョンで発生。原因は「AWS Lambdaの容量管理を担うサブシステムの問題」だったと説明している。 AWSでは同リージョンで2022年12月にも「複数のネットワークデバイスの障害」が発生した他、過去にもソフトウェアの問題や人為ミスを原因とするサーバ障害に見舞われたことがある。そのたびにAWSを利用する顧客のサービスやWebサイトがつながりにくくなったりダウンしたり
AWS認定資格ではないけど、AWS実務に役立ったベンダー資格 - NRIネットコムBlog
はじめまして。NRIネットコムの後藤と申します。 現在、私はAWSの設計業務に携わっていますがエンジニアになる前は営業職でした。AWS技術の習得に苦労した経験があるので、その経験を基にAWS実務に役立った資格を紹介します。AWS認定資格が実務に役立つのは当然なので、あえてAWS認定資格以外の資格を紹介します。これからAWSを学ぼうとする人やエンジニア歴浅めの人を対象の読者としています。 結論 CCNAとは CCNAを通してどうAWS実務に役立つのか CCNAの勉強方法 CCNA試験ならではのクセ さいごに 結論 CCNAが役立っています。 CCNAとは CCNAについて説明しておきます。 CCNAとは「Cisco Certified Network Associate」の略で、世界最大手のネットワーク関連機器メーカーであるシスコシステムズ社による認定資格です。 シスコ社製品（Ciscoルー
ESP32 + Micropython + MQTT で CloudWatch Alarmを机上で表示するデバイスを作ってみました | DevelopersIO
ESP32 + Micropython + MQTT で CloudWatch Alarmを机上で表示するデバイスを作ってみました 1 はじめに CX 事業本部 delivery部の平内（SIN）です。 CloudWatch Alarmは、システムの監視に幅広く利用されていると思いますが、監視対象がアラーム状態となった時に、それを認識する方法は、要求仕様に基づいて色々構築されていると思います。 今回は、その１つの形として、机の上で光ってアラートを知らせるデバイスを作成してみました。 最初に動作している様子です。 このデバイスは、IoT CoreのMQTTトピックをSubscribeしており、Statusが「ALARM」となった時に、点灯し、「OK」となった時に、消灯するようになっています。 動画では、ALARM状態になった時にSNSでトリガーされるLambdaを擬似的に手動で実行しています
【データ基盤構築/AWS Lambda】Pythonを使ってSnowflakeのデータをRDSにinsertする - Qiita
import sys import json import boto3 import ast import os import snowflake.connector import pymysql from snowflake.connector import DictCursor from sqlalchemy import create_engine from sqlalchemy.sql import text from datetime import datetime def lambda_handler(event, context): # 今日の日付とSQLを実行する日時を変数で用意 today = datetime.now() updated_at_str = datetime.strftime(today, '%Y-%m-%d %H:%M:%S') ## Snowflake
KubernetesクラスターからAWSリソースへのアクセスを制御してくれる「IRSA」とは？ - Qiita
「アクセス制御」ってややこしいですよね。 AWSでもIAMが苦手！って方多そうですが、Kubernetesの世界でもアクセス制御を知っておかないとセキュリティ事故に繋がります。 今回はそれらの合わせ技となる、AWS上でKubernetesを使う際の両プラットフォーム間でのアクセス制御の組み合わせについてのお話です。 AWS上でKubernetesを使う際のセキュリティ課題 EKSを使ってKubernetesワークロードをAWS環境上でホストしてるよ！という方は多いんじゃないかと思います。 特にAWSでKubernetesを使っていると「PodからAWSリソースにアクセスさせたい」という要件が出てきます。 以下のようなプロダクトを例として想像してみましょう。 この例では同じEKSクラスター上でKubernetes Podを2種類がバックエンドアプリケーションとして稼働しています。 Pod①へ
【神アプデ】え!? プライベートなEC2にもAWSマネコンから簡単SSHできるように？？ - Qiita
（6/14更新）世界最速で触れたと思ったら、クラメソさんに若干先越された気がしますｗ 流石です！！ 最初にまとめ AWS re:Inforce 2023で新機能EC2 Instance Connect Endpoint（EIC Endpoint）が発表 AWSマネコンから簡単にSSHできる既存機能がプライベートサブネットのEC2にも対応してくれるように！ AWSセキュリティの祭典「AWS re:Inforce 2023」で発表 昨晩、日本時間6/13(火)深夜よりAWSグローバルのビッグイベントre:Inforceがアメリカのカリフォルニア州アナハイムで開催されています。re:Inventと違いセキュリティに特化していることが特徴です。 小杉さんが早速、新機能まとめ記事を書いてくれているのでご参照ください。ありがたい！！ そもそもEC2 Instance Connectって何だっけ？ 構築
環境変数を使わないで、Workload Identity連携でAWSからGCPを操作 - Qiita
はじめに GCPを、AWSからセキュアに操作するWorkload Identityという機能について、以前に何度か記事にしました。 その際、 認証情報が記述された構成ファイルを保存して 環境変数GOOGLE_APPLICATION_CREDENTIALSにファイルパスを記載する という方法で行っていました。 今回は、"ファイル保存&環境変数"という方法を使わず、コードの中で実現する方法になります。 概要 以下のページにサンプルがありました。 json_config_info = json.loads("<ファイルの中身の文字列>") # jsonの認証設定を読み込む credentials = aws.Credentials.from_info(json_config_info) # スコープを設定 ## スコープに設定する内容は以下より ## https://developers.goo
AWS・Azure・Cudoなどが提供するクラウドGPUが1時間あたり何ドルで利用できてどういう構成なのかの一覧表
ニューラルネットワークのトレーニングや実行にはGPUが使われることが多く、クラウドサービスのGPUの需要はAIの普及に伴い高まりつつあります。そんなクラウドGPUの構成や価格を、AI関連のニュース＆コミュニティサイト・The Full Stackが公開しました。 Cloud GPUs - The Full Stack https://fullstackdeeplearning.com/cloud-gpus/ 表はクラウドサーバーとサーバーレスの2種類に分かれています。ピックアップされたサービスはAmazon Web Service(AWS)やMicrosoft Azure、Cudo Compute、Google Cloud Platform(GCP)、AWS Lambdaなど。Hugging Faceなど一部サービスの記載はありません。 クラウドサーバーの表がこんな感じ。最左列にサービス名
「AWSの薄い本Ⅳ 昔話で振り返るAWSの歩み」を書きました - プログラマでありたい
今年はアウトプットするぞということで、２年ぶりに技術同人誌を書きました。2023年5月21日開催の技術書典14 オフラインで販売します。またBOOTHにも入庫中です。 booth.pm 内容 技術的な話ではなくて、AWSが出た当初はどんなだったのかという昔話です。日本に最初のAWSリージョンが開設されたのが、今から10年以上前の2011年です。そして、AWS自体は2000年代からありました。そうなるとエンジニアを始めた頃から、当たり前のようにクラウドがあったという人が多くなっています。昔からAWSを見てきた一人のユーザーとして、AWSの昔話を残しています。現在ではAWSには様々なサービスがありますが、例えばEBSのようにこれが無かった時代はどうやっていたのだろうと疑問に思うようなものもあります。無い時にどうやっていたのかの工夫と、不便がどんどん解消されていった時の空気感を伝えようとしていま
EC2とデータベース、それぞれの静的安定性の高め方 アベイラビリティゾーンを複数使用したアーキテクチャの実例
技術記事『Amazon Builders' Library』にフォーカスを当てた勉強会「AWS Tech talk Night#5 クラウドネイティブ時代のエンジニアが押さえておきたい ソフトウェアの構築・運用で考慮すべき5つのポイント ～AWSプリンシパルエンジニアの技術記事をソリューションアーキテクトが解説～」。ここで、ソリューションアーキテクトの堀氏が登壇。続いて、静的安定性の高いアーキテクチャを実現する方法について話します。前回はこちらから。 アベイラビリティゾーンを使用した静的安定性の例 堀貴裕氏：ここまででAWS内部と静的安定性の概念を説明してきたのですが、ここからはアベイラビリティゾーンを使用したアーキテクチャを例に取って、静的安定性をより深掘りしたいと思います。 では、この章で学ぶことについて説明します。ここまではAWSサービス内の静的安定性を説明していることが多かったので
ChatGPTプラグインを使って、AWSのインフラ構成を作図してもらった話 - Qiita
# 命令 下記の「構成」を満たすAWSのシステム構成図をMermaidで作成して下さい。 作図を行う際、システムの構成要素は「Mermaid記法集」のデザインを元に記述して下さい。 各種システム構成要素には全てその名称も明記して下さい。 ## 構成 - シンプルな三層アーキテクチャ - ALBの前段にCloudFrontを立てている - ALBはパブリックサブネット内のEC2に負荷分散する - EC2はプライベートサブネット内のRDSにアクセスする - 画像ファイルなどのデータはS3に保存しており、CloudFront経由で配信している ## Mermaid記法集 ### 各種グループの記法 #### AWS Cloud fill:none,color:#345,stroke:#345 #### Region fill:none,color:#59d,stroke:#59d,stroke-
ITに自信がなくてもOK AWSの基礎がわかる学習コンテンツ 公式が日本語で公開
Skill Builderでは、無料プランの場合600以上の学習コンテンツなどを利用できる。有料サブスクリプション（月額29ドル）を利用する場合は無料版の内容に加え、AWSの資格試験の模擬試験などが受けられる。 関連記事 年末に学ぼう！ パブリッククラウドの無料教材・資料まとめ 2022年版 年末を勉強に充てたい人に向け、パブリッククラウドに関する教材や資料の情報をひとまとめ。ITmedia NEWSで2022年に取り上げた記事の中から、6つ紹介する。 手を動かして学べるAWSの日本語講座まとめ AWS日本法人が公開 165コンテンツを一覧に AWSジャパンが、クラウドサービス「Amazon Web Services」やその周辺サービスのハンズオンをまとめたページを公開した。掲載しているのはいずれも日本語のコンテンツ。「AWSの学習のきっかけとして用意した。活用してもらえると幸い」という。
画像生成AI・ChatGPT・ゲーム開発・アプリ開発・AWS資格など新たなスキルを手に入れて人生をステップアップするUdemy講座まとめ
新しいスキルを手に入れると、市場価値が高まって収入が増えたり、クリエイターという新たな立場を手に入れることで将来的に自分の名前自体がブランド化して自立性の高いキャリアを築けるものですが、新たに物事を学んで習得するのは一人ではなかなか難しいものです。そうした新たなスキルを身につけようとする人を現場で活躍する講師によるムービー形式の分かりやすい講座で支援してくれるサービスがオンライン学習プラットフォームの「Udemy」で、AI関連の先進的な講座から、資格関連の手堅い講座まで幅広いラインナップが取りそろえられています。ちょうどUdemyが5月16日(火)から5月24日(水)まで、対象講座を1200円～という手頃な価格で購入可能なセールを実施しているとのことなので、人生のステップアップに役立ちそうな講座を6つピックアップしてみました。 オンラインコース - いろんなことを、あなたのペースで | U
AWS、アプリケーション内できめ細かなアクセス制御を実現するポリシー言語「Cedar」と認可エンジンをオープンソースで公開
AWS、アプリケーション内できめ細かなアクセス制御を実現するポリシー言語「Cedar」と認可エンジンをオープンソースで公開 Amazon Web Services（AWS）は、アプリケーション内できめ細かなアクセス制御を実現するポリシー言語「Cedar」と、Cedarに対応した認可エンジンをオープンソースで公開したことを発表しました。 CedarはAmazon Verified Permissionsで使われている言語 Cedarは昨年（2022年）末に開催されたイベント「AWS re:Invent 2022」で発表された新サービス「Amazon Verified Permissions」（現在プレビュー中）で使われているポリシー言語です。 一般にクラウドで提供されるアプリケーションのほとんどは、例えば管理者のみ参照できる画面やデータ、ユーザー本人のみ可能な操作や参照可能なデータ、ユーザー
[アップデート] AWSマネジメントコンソールにVPCエンドポイント経由でアクセスできるようになりました | DevelopersIO
VPCエンドポイントポリシーでマネジメントコンソールからサインインできるアカウントを制御できるぞ。なお、インターネットに抜けずに閉域網からマネジメントコンソールにアクセスを実現するものではない模様。 インターネットに抜けずに閉域網からマネジメントコンソールにアクセスしたいな こんにちは、のんピ(@non____97)です。 皆さんはインターネットに抜けずに閉域網からマネジメントコンソールにアクセスしたいなと思ったことはありますか? 私はあります。 世の中にはセキュリティルームなどインターネットへのルーティングがされていない / インターネットへのアクセスが許可されていないエリアがあったりします。 そして、システムの要件上、そのような場所から運用することが求められるケースがあります。 そのような環境でAWSの運用をするのはかなり大変です。何しろAWSマネジメントコンソールにアクセスするにはイ
![[アップデート] AWSマネジメントコンソールにVPCエンドポイント経由でアクセスできるようになりました | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/46ad933779d759146e85686aa64fe5635983d564/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2022%2F08%2Faws-management-console.png)
Amazon Kendra と OpenAI により最新の AWS ユーザーガイドに基づいて回答するチャットアプリケーションのサンプルを試してみた | DevelopersIO
Amazon Kendra と OpenAI により最新の AWS ユーザーガイドに基づいて回答するチャットアプリケーションのサンプルを試してみた Amazon Kendra と OpenAI などを利用して、AWS の最新のユーザーガイドに基づいた回答をしてもらえるチャットのサンプルアプリケーションが AWS Samples に公開されたため試してみました。 実際に構築して試してみたチャット画面です。Amazon Kendra が対応しているドキュメントタイプを質問し、ソースとなるユーザーガイドの URL と共に回答してくれました。回答に含まれている Microsoft Excel は 2023 年 1 月に対応したドキュメントタイプです。 サンプルアプリケーションは次のリポジトリにあります。 aws-samples/amazon-kendra-langchain-extensions
sqldefをMySQLに対してAWS Lambdaから実行するパッケージを作った - たごもりすメモ
k0kubun/sqldefはすばらしいプロダクトで便利に使ってるんだけど、もちろんDBに接続できる場所から実行する必要がある。で、DBはAWSのprivate VPCにあるのでラップトップやCI環境からやるというわけにはいかない。しょうがないので、現在はEC2インスタンスを作成して使うときだけ起動、終了したら停止してた。んだけど、これがまた面倒なんだよね。起動と停止も面倒だし、なんかあったときに確実に作り直せるようにするには……とか考えるのもダルいし、EC2へのSSHする方法やEC2へリポジトリをチェックアウトする方法も考えないといけないし。 なのでしばらく考えてたんだけど、Lambdaでやれるといいんだよな、という希望を現実的に考えて実装してみた。のがこちら。 github.com こいつは大変便利。リポジトリをcloneして、プライベートリポジトリからスキーマファイルを読み込むならデ
結局、AWS認定12冠って何の意味があるの？ - Qiita
はじめに こんにちは！AI エンジニアのヤマゾーです。 先日 AWS 認定 12 冠を達成し、晴れて 2023 Japan AWS All Certifications Engineers に選出されました。最後に受験した Cloud Practitioner では奇跡の 1000 点満点を叩き出し、当時は以下のツイートが少しだけ話題になりました👇 (ちなみに元ネタはカイジです笑) AWS を勉強しようと思い立ってから 12 冠を達成するまで丸 3 年かかってしまいましたが、有終の美を飾ることができて大満足です。ただ今年は AWS All Certifications Engineers になんと 579 人も選出されたらしく、AWS 認定 12 冠の希少価値が下がりつつあるようにも感じます。 日本の技術力が向上していることは嬉しい反面、これだけ頑張ってもなお差別化できなくなるのは正直複
【データ基盤構築/Snowflake/AWS】自分で１から簡単なデータ基盤・データパイプラインを作ってみる - Qiita
今回の課題 今後、業務でAWSとSnowflakeでデータ基盤を構築・運用していくことになるので、 勉強のために、自分で１からデータ基盤・データパイプラインの作成に挑戦してみた。 後から見返しやすいように、どのように作成したのかまとめてみる。 どのようにデータ基盤を作ったのか 以下のアーキテクチャ図のように作ってみた。 データ基盤作成手順 どのようにデータ基盤を作成したのか、手順に沿ってまとめてみた。 手順毎の詳細は、以前に別の記事で書いているので、そちらの記事も手順毎に記載した。 1)EC2上でRDSを動かす&RDSにデータを入れる 下記の記事を参考にしながら、以下を実装。 VPCを構築し、その中にEC2とRDSを立てる。 今回は、ターミナルからAWSにSSH接続して、create tableやinsertなどを実行してRDSにデータを入れるようにした。 ※注意:Snowflakeのリー
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
SREチームがNew Relicを使って AWSコスト最適化に貢献した話 | ドクセル
