オンデマンド動画配信のためのクラウド構成と料金試算例 | AWS
AWS CloudFrontを 使い、不特定多数のユーザに向けてオンデマンド動画配信を行う例です。 オンプレミス環境ではピークを想定して急増するトラフィックに耐えうる環境を事前に用意しておく必要があります。更にデータセンターとの契約には最低契約期間があるため、初期コストだけでなく、月額の固定コストの支払いも発しします。AWS を活用したこの構成を実装した場合、初期コストが必要なく、ご利用いただいた分のみの料金でご利用いただけます。 こちらの例でご紹介する １ヶ月の期間限定キャンペーンとしてオンデマンド配信を想定した場合、AWS 上で、AWS Elemental MediaConvert で MP4 等の形式の動画データから HTTP Live Streaiming （HLS）形式へトランスコードしたファイルを Amazon S3 に格納し、コンテンツデリバリーネットワークである Amazo
Docker composeとAWS(ECR/ECS)デプロイ
React・DockerとAWS みなさんDockerは使っているだろうか。 私は恥ずかしながら業務では使用していない。 だが、今回(2020/09)非常に興味深いdocker composeとECS統合という物が実装された。 Docker Compose for Amazon ECS Now Available 平たくいうと、dockerとAWSの連携コマンドなのだが ※docker composeはdocker-composeコマンドのdocker cli版である。 今後はdoker cliを使用してね。という事だそうだ。 この魔法のようなコマンドはdockerのコマンドを使うことで自動でAWSにデプロイしてしまう。 という凄まじい物だった。 私としても備忘録にするため、筆を取った次第だ。 前提条件 実際にDockerを使用している皆様にはもう十分だろう。 随時参考リンクがあるので見て
IT初心者がAmazon Forecast を使ってシャンプーの売上傾向を予測【誰でも出来る】 - Qiita
はじめに 2020年！AIぽいことしたいなーということでAWSのMachineLearningらしいサービスを使ってみました。 初心者さん、機械学習に詳しくない方でも使えるので、その使い方を分かりやすくご紹介していきます！ Amazon Forecastとは？ 過去の何らかの時間単位で整列されたデータ(時系列データ)から価格、PR、経済的業績指標などを利用し、予測をすることができるサービスです。 完全マネージド型 オートML機能によって予測できる モデルを構築するための機械学習の専門知識いらず サーバーをたてたり、機械学習モデルの構築、トレーニング、デプロイも不要 実際に使用した分に対してのみ料金が発生 自動的にデータのロードと検査、適切なアルゴリズムの選択、モデルのトレーニング、正確なメトリクスの提供、予測の生成 予測をコンソールで可視化できる バッチでエクスポートしたり、API を使用
Amazon VPC 内の RDS(MySQL) に SSH のポートフォワードを利用して接続するメモ
ども、cloudpack の かっぱ (@inokara) です。 はじめに Amazon VPC 内の Amazon RDS に VPC 外から接続する方法の一つとして SSH のポートフォワードを利用して接続するメモ。（特に RDS に限らずオンプレにて同様に外部から閉ざされた MySQL に接続する場合にも同じ方法でいけるはずです。） 参考 RDSにSSHのポートフォワーディングでMySQLに接続する方法 CakePHP編 RDS が VPC 外にある場合には… ちょっと話は脱線しますが RDS が VPC 外にある場合には上図にある Client の IP アドレスをセキュリティグループに定義するだけで接続することはできずはずです。ただ、クライアントの接続拠点が増える度にセキュリティグループの設定変更を行うのはあまりスマートではないです。そもそも、RDS に Public な IP
RDSにSSHポートフォワーディングを利用して接続してみた | DevelopersIO
はじめに PCからAmazon RDSにbastionのSSHポートフォワーディングを利用して接続してみました。 構成を説明します。 Frontendサブネットにbastion（踏み台インスタンス）を配置します。 Frontendはルートテーブルにインターネットゲートウェイへのエントリがあるパブリックサブネットです。 DatastoreサブネットにMySQLのRDSインスタンスを配置します。 Datastoreはインターネットに接続できないプライベートサブネットです。 本構成にはセキュリティ面のメリットがあります。 RDSに接続するためには、RDSのユーザーとパスワードに加えて、bastionの秘密鍵が必要です。 また、不要な時はbastionを停止しRDSへの接続を制限出来ます。 ポートフォワーディングの有効化 bastionでポートフォワーディングを有効化します。 /etc/ssh/s
SSHトンネルを使ってAWS上のPostgreSQLに接続する - Qiita
2021/1/25 追記 5年以上放置していたのですが、未だにたまにストックされるので修正しました。 メンテされていなかったのでツールを使用した接続方法についての記述は削除しています。 前提 ローカル環境のMacからAWS上に存在するPostgresql（RDS）へ接続を行いたいが、RDSは特定のEC2等にしかポートを解放していないという場合の接続方法。 ローカルから直接RDSに接続できない（セキュリティ的に正しい） 対象のRDSに接続可能なEC2は存在する（セキュリティグループの設定とかでよしなに設定されている） 上記のEC2にローカルからSSHできる トンネルを掘る ssh -N -L [ローカル側で転送に使用するPort（10000〜60000）]:[RDSのHostName]:[RDSが解放しているPort] -i [IdentityFile（秘密鍵のパス）] -p [踏み台が解放
SESで受信したメールをLambdaで振り分けてみた | DevelopersIO
はじめに 今回はSESで受信したメールをS3に保存し、Lambdaでメールを振り分けてS3バケットの対象フォルダに移動(コピー)するというところまでの処理を先日サポートされた Python3.6でやってみました。 Announcement: AWS Lambda now supports Python 3.6 やりたいこと SESで受信したEC2のリタイアメントやメンテナンスのメールをS3のフォルダに振り分ける。 その他のメールは削除。 EC2のリタイアメント通知の件名 [Retirement Notification] Amazon EC2 Instance scheduled for retirement. EC2のメンテナンス通知の件名 Amazon EC2 Maintenance - Maintenance [AWS Account: 012345678910] 処理の流れ SES
AWS Lambda x Python - Error Handling から Test, CI まで
Serverless Architecture の採用により、AWS Lambda の活用の場面は増えています。AWS Lambda はこれまでの Server 環境とは異なるため、開発環境やテスト、エラーハンドリングなど、DevOps に関するトピックもアップデートしていく必要があります。 AWS Lambda を Python で実装、運用する際の、エラーハンドリングからテスト、CI までのナレッジを紹介します。 1. AWS Labmda x Python - Error Handling から Test, CI まで - JAWS UG YOKOHAMA 2017-02-10 Takahiro Ikeuchi eurie Inc. 2. Agenda Serveless Architecture と AWS Lambda 活用事例 AWS Lambda と Error Handli
Lambdaの本番業務利用を考える① – ログ出力とエラーハンドリング
大柳です。 サーバレス・アーキテクチャがここ数年ブームです。その中でもAWS Lambdaがサーバレスを実装する方法として、様々なシーンで活用されています。 サーバレスは、その名の通りサーバを用意することなく、コードを動かすことができるためとても便利ですが、従来のサーバ上でのシステム稼働と勝手が違います。特に本番業務で使うにあたっては、構成や運用を考える必要があります。 Lambdaをこれまで使ってきた中で、このあたりをいろいろと考えてきましたが、以下の２つの考慮が必要と考えています。 ・動作確認やエラー調査に必要な情報をログに出力する ・エラー時の動作をハンドリングする 今回は、Lambdaでこの２点を実装する方法を考えてみましたので、ご紹介します。言語はPython3.6で実装しています。 結論 以下の３つを実装しました。 ・ログ出力はloggerを使用して、環境変数によりロギングレベ
Amazon EC2 Eメール送信ベストプラクティス | DevelopersIO
ども、大瀧です。 EC2からEメールを送るという案件、たくさんありますよね。そして結構な確率でトラブるんですよね(涙目)。そんな苦い経験をベストプラクティスとしてまとめてみました。一応技術的なところは網羅したつもりですが、メールセキュリティの専門ではないので、不備や間違いがあればご指摘ください。 では、メール送信トラブルの元凶である、スパムメールとその対策からご紹介していきます。 スパムメールとの闘いダイジェスト Eメールの歴史は、スパムメールとの闘いの歴史と言えます。 不特定多数に送信されるスパムメール(未承諾の広告メール)は、メール受信者に不快な思いをさせるとともに、メールサーバーのメール流量を爆発的に増加させ、長らくメールサーバー管理者を泣かせてきました。 このスパムメールをなんとか撃退しようと、現在では主に以下のような対策が行われています。 1. 送信メールサーバー側のネットワーク
無料で活用！AWS ー EC2 + Ruby on Rails 4.1（その1） ー - Intelligent Technology's Technical Blog
こんにちは。中山です。 Amazon Web Services（AWS） って、新規ユーザは最初の1年間、制限付きながら、いろいろな機能を無料で使えるみたいですね。（詳細はこちら。） これは試してみないといけない、と思い、早速実践してみました。 今回トライしたのは、 「EC2」インスタンスを作成 その上に「Ruby on Rails 4.1」の動作環境を構築 その環境で、Ruby on Railsのサンプルアプリを動作させてみる というところです。 それではさっそく試してみたいと思います。 １．アカウント作成 AWS のトップページから、「無料でお試しください」をクリックして、新しいアカウントを作成します。（一応、クレジットカードの登録が必要になります。） 登録完了後、「Console Home」ページを開くと、以下のように表示されます。 ２．EC2 インスタンスの作成 ２−１．インスタン
Amazon ECSをHerokuぽくラップするEmpireを試してみた | DevelopersIO
ども、大瀧です。 先週Docker界隈で話題になった、Empireというプロダクトを試してみたのでレポートします。 Empireとは Empireは、教育向けメッセージングサービスを手がけるRemind社が開発するオープンソースのDockerコンテナ管理ソフトウェアです。HerokuライクなCLIを備えていて、PaaSっぽくDockerコンテナを管理することができます。 DockerでHerokuのようなPaaSというとDokkuが思い浮かぶところですが、Dokkuには複数ホストをクラスタとして管理する機能が無く、本番環境向けとしては機能が足りません。一方、Dockerコンテナ管理ソフトウェアというとGoogleが開発するKubernetesやCoreOS fleetが有名ですが、どちらも構築および運用に独特なスキルが必要です。Empireはコンテナ管理に必要なコンポーネントをなるべくAW
Amazon LinuxにClamAVを導入する | DevelopersIO
はじめに AWSはサービスとしてとても高いレベルのセキュリティが担保されていますが、EC2インスタンス上のOSやミドルウェアのセキュリティについてはユーザにて責任を持って対処する必要があります。このためクラウドの世界においてもサーバセキュリティは重要です。 今回はオープンソースのアンチウイルスソフトウェアであるClamAVをAmazon LInuxに導入してみました...はい、実は2012年に同様の記事が書かれていたのですが、現在とは導入や設定に違いがあるので、改めて記事にしてみました！ やってみた ClamAVのインストール インストールはyumコマンド一発です。以前はepelリポジトリからのインストールが必要でしたが、現在はamznリポジトリに用意されています。 $ sudo yum install clamav clamav-update パターンファイルの更新 設定ファイルを編集し
AWS初心者向けWebinar 失敗例を成功に変える AWSアンチパターンのご紹介
The document provides information about an AWS webinar on AWS Systems Manager presented by Solutions Architect Kayoko Ishibashi. It includes an agenda for the webinar covering an overview of AWS Systems Manager, demonstrations of key features like resource groups, inventory, automation, and security best practices. The webinar aims to help participants understand the overall capabilities of AWS Sy
本当は怖いMemcached - Qiita
はじめに データアクセスの高速化、セッションの保持などに非常に重要なポジションを占めているMemcached 特徴をあげると、速い安い美味いで、AWS上のサービス化などされており、非常に扱いやすいプロダクトなのですが、Memcachedそのものが単一障害点とならないように冗長化を測った時に深刻な問題が発生する可能性があることをご存知でしょうか。 システムに心あたりがある方は今すぐ代替手段を検討しなければなりません。 どうしてもMemcachedを使いたいという方はこちらへ それでもMemcachedを使いたいあなたへ 前提条件 そもそも冗長化をしなければ問題ないという運用はその時点で怖いのでNG cache機構という性質上、データが飛ぶのは問題ない(”正”となるデータを他から読み出すだけ)が、誤ったデータが読み出されるのをNGとする Memcachedを利用した時に利用ノードを決定するのは
AWS News Blog
New – Amazon EC2 Hpc7a Instances Powered by 4th Gen AMD EPYC Processors Optimized for High Performance Computing In January 2022, we launched Amazon EC2 Hpc6a instances for customers to efficiently run their compute-bound high performance computing (HPC) workloads on AWS with up to 65 percent better price performance over comparable x86-based compute-optimized instances. As their jobs grow more co
Amazon RDSによるレプリケーションについて理解する | DevelopersIO
Amazon RDSとは Amazon RDSは、AWSが提供するデータベースサービスです。別にEC2上にMySQLとかインストールすれば使わないんじゃない？って思う方もいらっしゃると思いますが、実はスゴいサービスなんです。何故サービスと名付けているか、それは、高可用性や耐障害性を実現しているからです。世の中の多くのシステムは、データベースが壊れるとシステム全体が止まってしまいます。ですから、データベースが止まらないように設計・運用する必要があります。 フォールトトレランスとは フォールトトレランスとは障害発生時にサービス全体を止めずにシステムを動かし続けることです。障害が起きないようにすることも大事ですが、障害が起こったときの対応も重要ですよね。Amazon RDSは、MultiAZ・リードレプリカによって障害に強いサービスを実現しています。 MultiAZ構成 RDSには起動時にMul
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Route53 + SES + S3 + Lambda で 独自ドメイン宛のメールをGmailに転送する
https://geeknavi.net/aws/auto-post-to-slack
クックパッドはなぜ開発しやすいのか // Speaker Deck
