Dive deep on Amazon S3 セッションレポート | iret.media
AWS Summit Japan 2024 Day1の「Dive deep on Amazon S3」というセッションに参加したのでレポートします！ S3の裏側の仕組み を3層にわけて解説し、高いスケーラビリティ・耐久性・セキュリティ・パフォーマンスをどのようにAWSが実現しているか。 それらの効果を更に上げるため「利用者側でやるべきこと(=ベストプラクティス)」とは何か。 また後半では「超低レイテンシーなストレージクラスであるS3 Express One Zone」「S3の削除保護の方法４つ」の紹介がありました。 このレポートではセッションで語られた内容の概要と、それに関連する公式ドキュメントのリンクをいくつかメモしています。 実際のセッションではスライド投影される内容やドキュメントに書かれていることだけでなく、それに沿った細かい例や考え方、「なぜそうなのか」がスピーカーの言葉により強く
GitHub Certificationsを全冠したので勉強方法をまとめてみました - サーバーワークスエンジニアブログ
こんにちは。サービス開発課でアプリケーション開発に従事している尾崎です。 普段の業務ではGitHubを使い、チームメンバーと協力しながらアプリケーション開発をしています。 GitHubはTeamプランを利用しています。 2024/01/08にGitHub CertificationsがGAされ、パートナーや従業員以外でも受験が可能になりました。 github.blog GA後、コツコツ受験して全冠を達成したので、この記事では受験を考えている人向けに勉強方法や対策方法をまとめてみます。 GitHub Certificationsとは 勉強方法 1. Studyガイドリポジトリを出発点としてMicrosoft Learnで学習する 2. ひたすら問題集を解く 3. 実際にGitHubの機能を使ってみる 対策方法 1. 英語でドキュメントを読む 2. どの権限/プラン でどんな操作ができるか、ど
PlaywrightによるE2Eテスト自動化を導入したので各種構成とtipsをご紹介
株式会社シャペロンのsrkwです。 シャペロンでは昨年、Playwrightを使ったE2Eテストによる各種機能の検証の自動化を導入しました。 E2Eテスト導入の背景や、チームへの浸透に向けた取り組みと反省等については別の記事で紹介しているので、興味のある方はこちらも併せてご覧ください。 この記事では、シャペロンの日次のE2Eテスト実行を支えるインフラ構成と、PlaywrightによるE2Eテスト導入によって溜まったtipsをご紹介したいと思います。同じようにPlaywrightを使ったE2Eテスト導入を検討している、あるいは導入済みで格闘している方にとって、少しでもお役に立てると嬉しいです。 日次のE2Eテスト実行を支えるインフラ構成 前提:Shaperonのテナント構成 シャペロンは製薬企業向けのコミュニケーション用SaaS、Shaperonを提供しており、Shaperonは利用テナント
Gitでのファイル名変更 - Qiita
起こったこと gitを使って開発をしている際に、text_HOME.svgというファイル名をtext_home.svgに変更したところnothing to commit, working tree cleanと言われました。 どうやらファイル名の変更がGitに差分として認識されていないよう。 実験 同じような状況を再現してみます。 ディレクトリrename_testに実験用のファイルtext.txtが存在しており、working treeには何もない状態です。 それでは、test.txtをTest.txtにリネームしてみます。 普通にmvコマンドを使ってtext.txtをリネームしてもgitは差分を認識してくれません。 git mvコマンド 次はgit mvを使用してファイルをリネームしてみます。 今度はファイル名の変更が差分として認識されました🙌 参考 ファイルのリネームはgit mv
しのぎ削るEV電池の生産・開発 世界シェア１位の中国、追う日本
駆動用のEV電池が注目される背景には、世界的なEVの普及がある。特にEV電池の原料となるレアメタル（希少金属）を産出する中国の勢いはすさまじく、世界シェアの大半を中国企業が占めている。 一方で日本の自動車メーカーや、その他の日本企業も、次第に車載電池に関連した取り組みを本格化させつつある。この記事では、EV電池をめぐる国際的な動きと日本企業の動きを、過去記事から振り返ってみる。 CATL・BYDだけじゃない 電池主要4部材で中国企業シェア7～8割の衝撃 EV電池は、EVのコストの3割を占めるという。EVの普及に欠かせないEV電池だが、世界的なシェアの約半分を中国企業が独占している。特に世界1位のシェアを持つ寧徳時代新能源科技（CATL）や同3位の比亜迪（BYD）の2社を合わせると世界シェアは5割にもなり、日本のメーカーは大きく引き離されている。
GitHub Actions OIDCでconfigure-aws-credentialsでAssumeRoleする | DevelopersIO
2022/1/8 aws-actions/configure-aws-credentials@v1アップデートを反映しました https://dev.classmethod.jp/articles/aws-configure-credentials-v1 吉川@広島です。 [GitHub Actions]aws-actions/configure-aws-credentialsを使ってOIDCプロバイダを介したSwitchRoleをする | DevelopersIO 先日こちらのブログを書いたのですが、色々と変わったため、最新内容を反映した手順を新しくブログにすることにしました（古い記事には注釈を入れておきます）。 IDプロバイダを作成 まずIAM ID Providerを作成します。 プロバイダのタイプ: OpenIDConnect プロバイダのURL: https://token.ac
GitHub Actions から OIDC 経由で AWS の複数アカウントに Switch Role する - Adwaysエンジニアブログ
記事を御覧いただきありがとうございます。 株式会社アドウェイズ 技術本部 インフラストラクチャーDiv 第三ユニット インフラエンジニアの田口です。 AWS 等のクラウド環境のセキュリティに関しての仕事や、エンジニア全体の開発体験を向上させる取り組み等を行っています。 本稿では GitHub Actions から OIDC 経由で AWS の複数アカウントに Switch Role し Terraform を実行する方法についてお話しようと思います。 一口感覚の記事ですが知ってると割と幸せになれる系の記事だと思いますので是非ご覧くださいませ。 背景 解決方法 事前準備 ソースコード ワークフローファイルの説明 ワークフロー設定に関する部分について 各 step について 解説 ユニットの宣伝 おわりに 背景 皆さん IAM アクセスキーの撲滅はしていらっしゃいますか？ 弊社では最近 VCS
【GitHubActions】単一ワークフローファイルでトリガー元に応じてデプロイ先のAWSアカウントを切り替えてみる | DevelopersIO
CX事業本部@大阪の岩田です。AWSを利用した開発のCI/CDでは xxxブランチにマージされたらdev用AWSアカウントに自動デプロイする yyyブランチにマージされたらstg用AWSアカウントに自動デプロイする リリースタグが付与されたらprd用AWSアカウントに自動デプロイする のようなデプロイ戦略は良くある話だと思います。実際にはprd環境へのデプロイには別途承認アクションを挟みたいとか、そういった要件も想定されますが、一旦そういうのは無視してワークフローの構成は全環境で共通とした場合、トリガーイベントに応じて変更したいのはAWSアカウントIDのみです。この場合、環境毎にワークフローファイルを作成すると重複が多くなってしまうので、できれば1つのワークフローファイルで全環境のデプロイに対応したいところです。どうすれば単一のワークフローファイルで複数AWSアカウントへのデプロイに対応で
GitHub Actions で Environmentsを使いマルチアカウントでのCICDコード量を減らす書き方
概要 マルチアカウントのAWS環境に対してS3にファイルアップロードするCICDをGitHubActionsで作成します 記事を書こうと思ったきっかけ AWSマルチアカウント化の作業を進めているときに工夫しないとCICDのコードが複雑になると思い、この書き方ができることが知られていないと感じたため この記事でのポイント CICDのコードでIf文を使わずに環境毎にデプロイできる設定を行う Environments, Repository rulesets 機能を使用 PullRequestの作成, Merge をトリガーにしたCICDの例を紹介 動作環境 GitHub Environments, Repository rulesets 機能を使えるのは パブリックリポジトリ or Team Plan 以上のプライベートリポジトリ GitHubActions AWS DevContainers
GitHub Actions でAWS の複数 profile を切り替える
Leaner 開発チームの黒曜(@kokuyouwind)です。 最近 Terraform の整備を始めたのですが、 AWS provider と S3 backend で別の AWS profile を使いたいケースがあり、 GitHub Actions での terraform plan にどう認証情報を渡すか困って調べたところうまくいったので記事に残しておきます。 TL;DR configure-aws-credentials の OIDC を使うと、アクセスキーを使わず安全に認証できる。 ログインしたロールから他のロールに切り替える場合、 credential_source = Environment を使うことでソースプロファイルを指定せずに Assume Role できる。 前提: 複数の AWS profile を使いたくなった局面 Leaner ではベストプラクティスに沿っ
SeleniumとPlaywrightで起動済みのブラウザを操作する - Qiita
はじめに ブラウザ自動テストのデファクトスタンダードである Selenium。 そして新進気鋭の Playwright。 これらを使用して組んだプログラムは、自分自身でブラウザを起動して自動操作を開始します。 しかし、起動済みのブラウザを自動操作したい！というケースもありますよね？ はたして Selenium と Playwright を使って起動済みのブラウザを操作することができるのか？ ※ブラウザは MicrosoftEdge と GoogleChrome で検証しています。 動かせた時の感動は省略。 やったこと ブラウザの起動 今回の手法は、ブラウザを起動するところにポイントがあります。 コマンドライン引数で -remote-debugging-port=9222 を指定してあげるのです！ DevTools Protocol が有効な状態でブラウザが起動します。 これによって、Sel
【資料公開】Iceberg で Amazon Athena をデータウェアハウスぽく使おう #midosuji_tech | DevelopersIO
データアナリティクス事業本部インテグレーション部機械学習チーム・新納（にいの）です。 2024/6/12にクラスメソッド大阪オフィスで開催された勉強会、Midosuji Techにて「Iceberg で Amazon Athena をデータウェアハウスぽく使おう」というタイトルで登壇をしました。ご参加いただいた皆様、ありがとうございました！ワイワイガヤガヤタイムでもたくさんのご質問をいただき、楽しい時間を過ごすことができました！ 本エントリでは登壇資料と内容のまとめをお届けします。 スライド 内容まとめ Icebergの概要と、その特徴の中から特にSchema Evolutionとパーティション管理の便利さをお話ししました。 テーブルフォーマットとは Icebergはテーブルフォーマットのひとつです。テーブルフォーマットについて順を追って説明します。 データレイクはデータファイルをストレー
GPTとは何か Transformerの視覚化 | Chapter 5, Deep Learning
この動画は3Blue1Brownの動画を東京大学の学生有志団体が翻訳・再編集し公式ライセンスのもと公開しているものです。 チャンネル登録と高評価をよろしくお願いいたします。 日本語版Twitter https://twitter.com/3B1BJP 元チャンネル（英語） https://www.youtube.com/c/3blue1brown 元動画（英語） https://youtu.be/wjZofJX0v4M?si=9YsuEzHATlhPtpOF Check out our new channel Ufolium https://www.youtube.com/watch?v=wrNCjIjIzuk&pp=ygUj5aSn57Wx6aCY6YG45oyZ44Gu5LuV57WE44G_IHVmb2xpdW0%3D Richard Turner's introduction
可視化サービスのデータソースにTimestreamを選択する場合に留意しておくべきこと | DevelopersIO
はじめに 可視化サービスのデータソースにTimestreamを選択する場合に留意しておくべき点について紹介します。 今回は私がAmazon Managed Grafana(以下AMG)のデータソースにTimestreamを使用した際、仕様を理解していなかったばかりに数十ドルの課金が発生したお話をしたいと思います。 皆さんも自身のユースケースにあった利用方法ができているか、この機会に確認してみて下さい。 Timestreamのアップデート 今回、私が意識できていなかったのはTimestreamのアップデートについてです。 先日Amazon Timestream for LiveAnalyticsの課金体系にアップデートがありました。 このアップデートは、簡単に説明すると 今まではスキャンしたデータのサイズに対してコストが発生していた。 アップデート後はクエリに使用したコンピューティングリソー
[オフライン世界最速？AWS re:Inforce 2024 re:Cap セミナー] IAM MFAのパスキー対応を理解したい 〜今更(？)多要素認証とパスキーについてキャッチアップしてみた〜 | DevelopersIO
あしざわです。 【オフライン世界最速？】AWS re:Inforce 2024 re:Cap セミナー にて、『IAM MFAのパスキー対応を理解したい 〜今更(？)多要素認証とパスキーについてキャッチアップしてみた〜』というタイトルで登壇しました。 先日のre:Inforceにて発表されたこちらのブログの内容を主題にしています。 パスキーや多要素認証についての知見が薄かったため、その辺りのAWSに関係しない領域のまとめに力を注ぐことになってしまいました。 セッション資料をご覧ください。 登壇資料 3行まとめ パスキーはFIDO(Fast Identity Online)という業界団体によって標準化されたFIDO2認証情報のことを指す。Apple、Googleなどの認証情報プロバイダーによるFIDO2実装の進化系。 パスキーはパスワードと比べると、セキュリティ観点・運用観点の様々なメリット
![[オフライン世界最速？AWS re:Inforce 2024 re:Cap セミナー] IAM MFAのパスキー対応を理解したい 〜今更(？)多要素認証とパスキーについてキャッチアップしてみた〜 | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/6d17d62e8c21f31f6e575a129fa707d6f775d8e7/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2024%2F06%2F240617_AWS_reInforce-2024_reCap-1.png)
【資料公開】AthenaとStep Functionsで簡単ETLオーケストレーション #midosuji_tech | DevelopersIO
Amazon AthenaとAWS Step Functionsで作る簡単なETLの仕組みのメリットと、さらに必要とされる要件に対してなにが求められるのかについて発表しました。 データアナリティクス事業本部 インテグレーション部 機械学習チームの鈴木です。 2024年6月12日にクラスメソッドの大阪オフィスで開催された勉強会Midosuji Tech #1で『AthenaとStep Functionsで簡単ETLオーケストレーション』というタイトルで話しましたので資料を公開します。 当日は淀屋橋の大阪オフィスでオンサイトでイベントが開催されました。発表後にはワイワイガヤガヤタイムということで、参加者の方も交えたディスカッションが大変盛り上がりました。 発表資料 ポイント Step FunctionsのAPI統合で、S3バケットに配置したSQLファイルをステートマシンから読み込み、Athen
SOLID原則って何ぞや？（開放閉鎖の原則編） | SIOS Tech. Lab
想定読者 オブジェクト指向プログラミングに興味がある 可読性が高く、変更に強いプログラムを作りたい SOLID原則を理解して周りに「ドヤァ( ^)o(^ )」したい（自己満足でも可） はじめに SOLID原則は以下の5つの原則の頭文字を並べて出来たネーミングです。 単一責任の原則（single-responsibility principle） There should never be more than one reason for a class to change. 変更するための理由が、一つのクラスに対して一つ以上あってはならない。 開放閉鎖の原則（open/closed principle）←今回のターゲット software entities (classes, modules, functions, etc.) should be open for extension, b
CloudShell VPC environment から VPC内のEC2インスタンスやRDS DBインスタンスに接続してみた | DevelopersIO
CloudShell VPC environment から VPC内のEC2インスタンスやRDS DBインスタンスに接続してみた もっと簡単にVPC内のリソースにアクセスしたい こんにちは、のんピ(@non____97)です。 皆さんはもっと簡単にVPC内のリソースにアクセスしたいと思ったことはありますか? 私はあります。 VPC上のRDS DBインスタンスやRedisクラスターなどのリソースに接続したい場合、Site-to-Site VPNやClient VPN、Direct Connectがなければ踏み台が必要になります。 踏み台へのアクセス方法は以下のようなものがあります。 直接SSH SSMセッションマネージャー EC2 Instance Connect SSMセッションマネージャーとEC2 Instance Connectについては以下記事をご覧ください。 しかし、上述のいずれの
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Node.jsでdotenvがいらなくなったっぽいので使ってみる - Qiita
Optimize Amazon RDS costs for predictable workloads with automated IOPS and throughput scaling | Amazon Web Services