[AWS]DynamoDBで並列スキャンを試してみよう[Node.js] | DevelopersIO
Dynamoに新機能が追加されました 少し前になりますが、ここにあるように、Dynamoに新機能が追加されました。 並列スキャン機能 すばやいプロビジョンドスループットの変更 リードキャパシティの測定方法を変更によるコスト削減 どれもうれしい新機能なのですが、この記事では並列スキャンをaws-sdk-jsから使用する方法について紹介します。 Dynamoの並列スキャン ここの解説の繰り返しになってしまいますが、DynamoDBはアクセス速度高速化のため、複数の物理ストレージのパーティションにデータを保存しています。 Dyanamoのスキャンのよるスループットはひとつのパーティションの最大スループットによって制限されますが、 これにより、スキャンがテーブルに設定されたリードキャパシティをフル活用できないという問題があります。 そこで、より高速にデータを取得するため、並列スキャンを使用すること
IAMロール徹底理解 〜 AssumeRoleの正体 | DevelopersIO
さて、皆様はIAMにどのようなイメージをお持ちでしょうか。プロジェクトに関わる複数人で1つのAWSアカウントを扱う時、各メンバーに配布するアカウントを作れる機能。そして、その気になればアカウントをグループ分けし、権限を厳密に管理できる機能。といったところかと思います。 上記のユースケースで出てきた主なエンティティ（要素）はUserとGroupですね。IAMのManagement Consoleで見てみると、IAMはこれらの他にRoleやIdentity Providerというエンティティによって構成されているようだ、ということがわかります。今日はRoleにフォーカスを当てて、その実態を詳しく理解します。 IAM Role IAM Roleを使うと、先に挙げたIAMのユースケースの他に、下記のようなことが出来るようになります。 IAM roles for EC2 instancesを使ってみ
Welcome to the awsfabrictasks documentation! — awsfabrictasks 1.3.0b1 documentation
Code and issues¶ Get the sourcecode, and submit issues at our github repo: https://github.com/espenak/awsfabrictasks Contribute¶ Create an issue describing your problem, improvement, etc (unless you are fixing an existing issue). Fix the issue and create a pull request. This is a perfect example of what a pull request should include: https://github.com/espenak/awsfabrictasks/pull/9.
アマゾン ウェブ サービス AWS クラウド のプロフェッショナルに向けた認定プログラムを発表
アマゾン ウェブ サービス AWS クラウド のプロフェッショナルに向けた認定プログラムを発表 Alegion, Animoto, Averail, BitYota, CloudMunch, Mortar Data, PunchTab, ThisLife社が AWSのベストプラクティスの知識を持ったIT専門家を育成する新たなプログラムを提供 （米国シアトル、2013年4月30日発表） Amazon.com(NASDAQ:AMZN)の関連会社であるAmazon Web Services, Inc. は本日、アマゾン ウェブ サービス（以下 AWS） 認定プログラムを発表しました。このたびAWS初となる認定試験を開始し、さらに2013年中に複数の認定試験を追加する予定です。世界中でクラウド コンピューティングおよびAWSクラウドの導入が急速に進む中、AWSのベストプラクティスを理解しているエン
AWS News Blog
Announcing Amazon Managed Service for Apache Flink Renamed from Amazon Kinesis Data Analytics Today we are announcing the rename of Amazon Kinesis Data Analytics to Amazon Managed Service for Apache Flink, a fully managed and serverless service for you to build and run real-time streaming applications using Apache Flink. We continue to deliver the same experience in your Flink applications without
AWS RDS の書き込み性能チューニング : DSAS開発者の部屋
4/25追記: innodb_support_xa=0 はクラッシュ時以外にも binlog と innodb の整合性が取れなくなる問題がありました。 innodb_support_xa と binlog の危ない関係 もご覧ください。 KLab でも最近は AWS を使ったプロジェクトがかなり増えてきました。 AWS で問題になりがちなのが、 RDB の性能が DSAS 環境に比べて低いことです。 DSAS ではバッテリーバックアップ付きのRAID + 非同期レプリケーションを使っているのですが、 RDS では Multi-AZ を使って耐障害性を確保しています。 この違いによって書き込み性能のチューニングのポイントが変わってきます。RAIDカードはデータが書き込みバッファに乗っている間は fsync が高速なのに対して、 Multi-AZ では別のAZにあるブロックデバイスに対して同
Python のデプロイツール fabric + cloth で EC2 上にデプロイする方法 | astronaughts.net
最近社内で作ってるツールとかをローカルで動かしてたんですけど、サーバーでちゃんと運用したいなーってことで AWS を利用することになりました。これもお侍様のお力のお陰であります。 最近色々と賑やかなデプロイツールたち 以前から capistrano とかよく聞くと思うんですが、最近どんどん増えてるようですね。PHP の phing とか、Python の fabric とか。もっと便利な Chef というのもあるようです。ぼくは普段 JavaScript か Python を書くことが多いので fabric を使っています。それほど使いこなしてるわけではないですが。 そこで今回も fabric を使うことにしたんですが、AWS（EC2）上にデプロイってしたことなかったんですねー。 なんだか色々めんどくさいのかなと思ったら、探したらやっぱりあるもんですね、便利なものが。 cloth - ht
10分で作る Node.js Auto Scale 環境 with CloudFormation
東京Node学園 6時限目で発表した資料です。 http://connpass.com/event/611/Read less
AWSの上限数とAWS Supportに泣きつく方法 - サーバーワークスエンジニアブログ
最近大分産のゆず茶に目覚めた小室です。大分熱い。 今回とある事情でAWSのリソースの上限数について対応する事があり、そこで出会ったAWS Supportの人達との涙無しでは語れない話をしたいと思います。 ※まずこの問題は上限緩和をもっと早く行なっていれば起こらなかった問題でした。なので皆さん、上限緩和は早めに行ないましょう※ 皆さんご存知の通り、AWSの各サービス・リソースには上限(Limit)という物が設置されていて、上限数を超える数のサービス・リソースを起動や利用する事は出来ません。 上限を緩和する為にはコンタクトフォームから申請をする必要があります。 さて風邪を引いたある日、とあるお客様の授業内容を考えていたら週末金曜日EC2インスタンスが60台以上（〜最高90台）必要な事を思い出した私は、慌てて上記フォームから申請しました。 が！フォームは申請を受けるだけで、申請すればすぐに上限数
GitHub - boto/boto: For the latest version of boto, see https://github.com/boto/boto3 -- Python interface to Amazon Web Services
At the moment, boto supports: Compute Amazon Elastic Compute Cloud (EC2) (Python 3) Amazon Elastic Map Reduce (EMR) (Python 3) AutoScaling (Python 3) Amazon Kinesis (Python 3) AWS Lambda (Python 3) Amazon EC2 Container Service (Python 3) Content Delivery Amazon CloudFront (Python 3) Database Amazon Relational Data Service (RDS) Amazon DynamoDB (Python 3) Amazon SimpleDB (Python 3) Amazon ElastiCac
AWSがNode.js向けSDKのプレビュー版を公開
AWSが「AWS SDK for Node.js」のプレビュー版を公開した。Amazon S3、Amazon EC2、Amazon DynamoDB、Amazon Simple Workflow Serviceの各サービスに対応する。 Amazon Web Services（AWS）は12月4日、Node.js環境でJavaScriptをサポートした「AWS SDK for Node.js」のプレビュー版を公開した。Amazonでは現代的な開発言語およびプログラミング環境に適した開発ツールとSDKを提供する一環と説明している。 Node.jsはサーバサイドで動作するJavaScript実行環境で、イベント駆動型ノンブロッキングI/Oの採用などを特徴とする。 AWS SDK for Node.jsは、Node Packaged Module（npm）パッケージマネージャを使って「https:
AWS SDK for JavaScript
AWS SDK for JavaScript は、JavaScript のデベロッパーにとってなじみ深く整合性のあるライブラリを一式提供し、AWS のサービスを簡単に利用できるようにします。認証情報の管理、再試行、データマーシャリング、シリアル化、逆シリアル化といった API ライフサイクルに関する検討事項についてサポートを提供します。また、AWS SDK for JavaScript は開発を簡素化するための高度の抽象化もサポートしています。GitHub にアクセスして、AWS 関連のオープンソースの JavaScript ライブラリを確認してください。 AWS SDK for JavaScript は、ブラウザの JavaScript、サーバーの Node.js、モバイル開発用の React-Native という 3 つのランタイムをサポートしています。クロスランタイムもサポート: サ
AWS SDK for Node.js – Now Available in Preview Form | Amazon Web Services
AWS News Blog AWS SDK for Node.js – Now Available in Preview Form The AWS Developer Tools Team focuses on delivering the developer tools and SDKs that are a good fit for today’s languages and programming environments. Today we are announcing support for the JavaScript language in the Node.js environment — the new AWS SDK for Node.js. Node.js gives you the power to write server-side applications i
【CyberAgent】技術情報／TechReport - テックレポート／Amazon Web Servicesについて | 株式会社サイバーエージェント
概要 既存のインフラを利用しないで、「Amazon Web Services」（以後AWS）のみを利用し新規でサービス展開を行う場合に必要な情報、知識をまとめる。 注意 基本的な利用方法を除外し、実際の構築時に必要なトピックスに焦点をあて本ドキュメントを作成しました。 特にオープンに公開されている情報については割愛（Web及び書籍で多数公開されている情報）しています。 補足 本ドキュメントは、2012/08時点でのAWSで提供されているサービスを元に記述されています。AWSは日々新機能がリリースされていますので、利用する際は最新の情報を取得してください。 目次 概要 注意 補足 目次 序論 クラウドのメリット クラウドのデメリット AWSの製品・サービス構成 内容 アカウント管理 Consolidated Billing(一括決済) 使用例 作成手順 補足 AWS Support 補足 A
Deploying a Django application to Elastic Beanstalk - AWS Elastic Beanstalk
This tutorial walks through the deployment of a default, autogenerated Django website to an AWS Elastic Beanstalk environment running Python. This tutorial shows you how to host a Python web app in the cloud by using an Elastic Beanstalk environment. In this tutorial, you’ll do the following: Prerequisites To use any AWS service, including Elastic Beanstalk, you need to have an AWS account and cre
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
EC2 Tasks For Fabric · More than seven
Elastic Transcoderを試す、の巻 – A Memorandum
IAM roles for EC2 instancesを利用して、S3 Pre-signed URL生成／Direct Object Upload - twingo_b's blog
『AWS SDK for Node.js』へのコメント
aws amplify