AWSのネットワーク設計をサボらないでちゃんとやる
新規事業の立ち上げにAWSを選択する こういう状況はままあるでしょう。最安というわけではないけれど、将来どんな開発が必要になるか全く想像できない新規事業立ち上げフェーズにおいて、多種多様なPaaSを提供してくれるAWSはとても魅力的。 さて、いざ、EC2インスタンスを立ち上げてアプリケーションをデプロイするわけだが、みなさん、ちゃんとネットワーク設計していますか？まさかデフォルトVPCでサービス運営なんてしてないですよね？ というわけでネットワーク設計をして、VPCを設定していくわけだが、何を作ればよいか決まっている事業フェーズならともかく、新規事業立ち上げフェーズでは「将来どんな機能が必要になるかわからない」という前提でネットワーク設計をしておかなければいけない。そこで、「例えばこんな設計はどうでしょう」という提案をしてみる。 IPレンジ設計 まずはVPCとサブネットを使ってIPレンジを
Amazon CloudWatch でクライアント側のメトリクスデータの集約が可能に
Amazon CloudWatch でクライアント側のメトリクスデータを集約して、単一の PutMetricData API コールでパブリッシュできるようになりました。これにより、大量のメトリクスデータを効率よくインジェストしながら、API コール数が減ることでコストを削減することもできます。 メトリクスデータは、値とカウント数による配列のヒストグラム形式でパブリッシュすることも、CloudWatch エージェントを活用してパブリッシュすることもできます。CloudWatch では、集約データからパーセンタイルの統計が自動作成されます。この統計により異常が可視化されるため、外れ値を除外してアラームのノイズを低減できます。 CloudWatch の PutMetricData の使用を開始するには、AWS SDK または AWS コマンドラインインターフェイス (CLI) を使用できます。
Amazon SQSを使う前に知っておきたい基本的なこと - Qiita
はじめに Amazon SQS + Amazon Lambdaを利用して実装を行ったのですが、恥ずかしながらSQSの基本的な仕組みをきちんと理解せずに実装をすすめたため、途中でハマったり、当初の設計を変更するハメになりました。 僕と同じような状況に陥る人が今後出ないように、勘違いしていたところや、気をつけるべき点を説明します。 ドキュメントを読む 公式のドキュメントはこちら 全て取得できることを保証しない / 重複取得もありえる 超基本的なこと、その1です。 SQS APIからメッセージを取得する際は、最大で10件まで同時に取得可能ですが、 ( 詳しくはこちら ) 例えば、キューにA,B,Cというメッセージが3件だけある状態で、SQS APIから10件メッセージの取得を行った場合に、Aのメッセージのみを10件取得する、というケースも普通にありえるのです。 複数のサーバーにメッセージを保存
Amazon RDS がデータベース削除保護の提供を開始
今回、Amazon RDSデータベースインスタンスと Amazon Aurora データベースクラスタに削除保護を有効にできるようになりました。データベースインスタンスまたはクラスタが削除保護で設定されている場合、そのデータベースはいかなるユーザーによっても削除できません。削除保護は、すべての AWS リージョンでの MySQL、MariaDB、Oracle、PostgreSQL、SQL Server データベースインスタンスでの Amazon Aurora と Amazon RDS に対して使用可能です。 削除保護は現在、AWS コンソールで作成したデータベースインスタンスで [production] オプションを選択した場合デフォルトで有効になっています。既存のインスタンスまたはクラスタについては、削除保護は AWS コンソールまたは AWS コマンドラインインターフェイスでの数クリッ
新しいマネージドコンテナサービスAWS Fargateの価格は高いか安いか？ECS/Fargateのコスト最適化を考えてみよう - Qiita
m5シリーズであれば価格は性能と線形なので、たとえばm5.24xlargeでも倍率は同じx2.11になるためとりあえず比較しやすい上記に絞りました。 最新世代のm5やr4と比べて、おおむね２倍強の価格です。 Fargate高くない！？ と思ったアナタ。ちょっと待ってください。 ECS Cluster AutoScaling構成との比較 多くの場合、ECSではそのメリットを享受するためにAutoScaling構成を取ります。たとえば、 MemoryReservation >= 60% で Scale-out MemoryReservation < 30% で Scale-in と設定するとしましょう1。この場合、実際に確保されるメモリ容量の割合は6割を超えません。 簡単のため、ECSでのリソース利用率はvCPU・メモリともに上記の中央値である45%程度であると仮定しましょう。 Fargate
俺はSSHをしたくない ~ Fargate vs ECS+SpotFleet のPrice比較 ~ - ABEJA Tech Blog
この記事は AWS Fargate Advent Calendar 2017 の9日目の記事です。 こんにちは。 service sshd stop 布教活動中の、ABEJAのサービス系インフラを管理しているインフラエンジニアの村主です。 今回AWSからFargateというコンテナマネージドサービスが発表されました。 Fargateの詳しい説明は AWS Fargate Advent Calendar 2017 の等の情報を参照いただければと思います。 タイトルでも書き、昔に こんな記事 を書きましたが、僕はSSHはしたくないし、極論言えばインフラも管理したくありません。 そこで今回のre:InventでFargateが発表されて、EC2やクラスタの面倒みない＝SSHしなくてええやん！イェーイ！を夢見て、コスト面の試算を始めました。 CPUとメモリの組み合わせ FargateはCPUとメモ
Amazon ECS ScheduledTaskで実現するスマートなDockerベースのバッチ実行環境 - コネヒト開発者ブログ
こんにちは。インフラエンジニアの永井(shnagai)です。 コネヒトでは、開発環境に続き、続々と本番サービスにもDockerを導入しています。 今回は、中々運用が大変なcronでスケジュール管理するような定期的なバッチ処理を、Amazon ECSのScheduledTaskを使ってDocker駆動な環境で構築した話です。 他の方法との比較やどのように実現しているのかについて紹介したいと思います。 今回対象とするバッチの種類 今回対象とするバッチ処理は、俗に言うスケジュール系のバッチ処理で、毎日00時00分や10分毎にサイクル起動等、事前に定義した時間に正確に動くことが期待されているものです。 ※ジョブキュー形式のバッチだと、AWS BatchやEBのWorkerもしくは、SQS + Cron on EC2で処理するほうがスマートかと思います。 実行方式の選定 上記要件のバッチを実現する基
Slime – An Elixir library for rendering Slim-like templates
doctype html html head meta name="keywords" description="Slime" title = site_title javascript: alert('Slime supports embedded javascript!'); body #id.class ul = Enum.map [1, 2], fn x -> li = x
コンテナジャーニー〜AWSにおける段階式コンテナ運用〜 - Speaker Deck
このセッションでは、コンテナを本番環境に導入して動かすまでの注意点や考慮すべき項目を、段階的にお伝えします。日進月歩で進化を続けるAmazon Container Services界隈に「一歩を踏み出していただくためのきっかけ」をつかんでいただければ幸いです。 Amazon ECSがリリースされてから、早4年。Docker自体の進歩が目覚ましく、周辺のオーケストレーションツールや関連するOSSなども目を見張るような勢いで進化しています。以前は開発環境での利用が主流だったコンテナも、今では本番環境での採用事例も増えてきました。さらに、Fargateの東京リージョンリリースやEKSの一般公開など、話題には事欠きません。 アプリケーションのコンテナ化には様々な面で大きなメリットがありますが、それを実際に本番環境に導入するには従来のアプリケーションの考え方とは違う部分もあり、簡単にはいかないことも
Why we chose Kafka for the Trello socket architecture - Atlassian Engineering
Trello has been using RabbitMQ for the last three years. Prior to RabbitMQ, we were relying on a Redis Pub-Sub implementation. Recently, due to RabbitMQ's questionable behavior when network partitions occur, we've made the switch over to Kafka. This blog post goes into depth on our RabbitMQ implementation, why we chose Kafka, and the Kafka-based architecture we ended up with. Current state of the
Buildpacks Go Cloud Native | Heroku
Your Heroku application's journey to production begins with a buildpack that detects what kind of app you have, what tools you need to run, and how to tune your app for peak performance. In this way, buildpacks reduce your operational burden and let you to spend more time creating value for your customers. That's why we're excited to announce a new buildpack initiative with contributions from Hero
CircleCI 2.1 の新機能で yaml の記述を DRY にする方法 - 生産性向上ブログ
github.com まだプレビューですが CircleCI の新機能が 2.1 として使えるようになっているという話と、2.1 の新機能で yaml の設定を DRY にする方法を紹介します。 長いので目次。 2.0 までの DRY な yaml を書く方法 2.1 を有効にする方法 2.1 の新機能 Commands Executors ジョブのパラメータ化＆ワークフロー内での複数回実行 Conditional Steps Orb CLI の変更 まとめ 2.0 までの DRY な yaml を書く方法 2.0 までは CircleCI の yaml の設定を DRY にしようとすると yaml のエイリアスを使う必要がありました。 例えば、node.js のプロジェクトで node の複数バージョンでビルドする設定をエイリアスで DRY にしようとすると次のようになります。 node
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://saitoxu.io/2018/03/30/sidekiq-introduction.html
GitHub - ruby-shoryuken/shoryuken: A super efficient Amazon SQS thread based message processor for Ruby
GitHub - terraform-providers/terraform-provider-local: Terraform local provider
GitHub - terraform-providers/terraform-provider-arukas: Terraform Arukas provider
GitHub - terraform-providers/terraform-provider-docker: Terraform Docker provider
GitHub - terraform-providers/terraform-provider-datadog: Terraform Datadog provider
GitHub - terraform-providers/terraform-provider-fastly: Terraform Fastly provider
GitHub - terraform-providers/terraform-provider-digitalocean: Terraform DigitalOcean provider
GitHub - terraform-providers/terraform-provider-heroku: Terraform Heroku provider
GitHub - terraform-providers/terraform-provider-google-beta: Terraform Google Cloud provider for Beta APIs and features
GitHub - hashicorp/terraform-provider-google: Terraform Provider for Google Cloud Platform
GitHub - terraform-providers/terraform-provider-aws: Terraform AWS provider
GitHub - mustafaturan/shield: Deprecated in favor of authable lib
GitHub - slime-lang/phoenix_slime: Phoenix Template Engine for Slime
GitHub - slime-lang/slime: Minimalistic HTML templates for Elixir, inspired by Slim.
GitHub - totechite/annict-rs: Annict API client library for Rust
気になるアニメのTV放送・配信開始日をリストアップする「ANIMINA」
最新アニメのチェックが捗るサービス「ANIMINA」トライアル版が提供開始 LINEとの連携も | アニメ！アニメ！
torch.blue
GitHub - JoshCheek/seeing_is_believing: Displays the results of every line of code in your file
GitHub - GraphQLGuide/book: 📖 The text of the book
GitHub - GraphQLGuide/guide: 📖 The GraphQL Guide website
GitHub - vasilakisfil/SimpleAMS: Fast modern plain Ruby serializers using zero dependencies
On Node Framework Popularity – hueniverse
Heroku Buildpack Registry: Making Buildpacks Open and Shareable | Heroku
Petal – A Simple, No-Fee Credit Card
Start a new .page
GitHub - rianhunter/dbxfs: User-space file system for Dropbox
GitHub - carllerche/tower-web: A fast, boilerplate free, web framework for Rust