Apache Hadoop とは、ギガバイト規模からペタバイト規模までさまざまなサイズのデータからなる大規模なデータセットを、効率的に保存および処理するために使用されるオープンソースフレームワークです。データの保存と処理を単独の大型コンピュータで行う代わりに、Hadoop では複数のコンピュータをクラスター化して、巨大なデータセットの分析をよりすばやく並列実行できます。 Hadoop は、次の 4 つの主要モジュールで構成されています。 Hadoop 分散ファイルシステム (HDFS) – 標準またはローエンドのハードウェア上で動作する分散ファイルシステム。HDFS は、高い耐障害性と大規模なデータセットのネイティブサポートに加えて、従来のファイルシステムよりも優れたデータスループットを提供します。 さらに別のリソースネゴシエーター (YARN) – クラスターノードとリソースの使用状況を

Presto (または PrestoDB) は、オープンソースの分散型 SQL クエリエンジンで、どのようなサイズのデータにも高速な分析クエリを実行できるようゼロから設計されました。Hadoop 分散ファイルシステム (HDFS)、Amazon S3、Cassandra、MongoDB、HBase などの非リレーショナルソースと、MySQL、PostgreSQL、Amazon Redshift、Microsoft SQL Server、Teradata などのリレーショナルデータソースの両方をサポートしています。 Presto は、データを別の分析システムに移動することなく、保存されているデータをクエリできます。クエリの実行は、純粋なメモリベースのアーキテクチャ上で並行して実行され、ほとんどの結果は数秒で返されます。Facebook、Airbnb、Netflix、Atlassian、Nas

builders.flash は、日本の AWS スペシャリストによる身近なテーマで実践的なクラウドベストプラクティスを解説する記事や、お客様、コミュニティメンバーによる技術解説をお届けする AWS のエンジニア向け公式ウェブマガジンです。メールメンバーに登録 することでハンズオンに役立つクレジットコードや最新アップデートを受け取ることができます。

AWS Database Blog Building Distributed Locks with the DynamoDB Lock Client Alexander Patrikalakis and Sasha Slutsker are senior software development engineers with Amazon. At Amazon, teams all across the company build upon AWS services just like AWS’s external customers. Here we have a contribution from Alex and Sasha, who work on teams supporting Amazon.com about a new client library that they de

AWS Personal Health Dashboard は、お客様の環境に影響を及ぼす可能性のある AWS イベントのアラートやガイダンスを提供します。Service Health Dashboard には AWS サービス全般のステータスが表示されますが、Personal Health Dashboard ではお客様の AWS 環境に関する明確な通知が事前に表示されます。 Personal Health Dashboard はすべての AWS カスタマーがアクセスできます。Personal Health Dashboard では最近のイベントが表示されるため、アクティブなイベントの管理に役立ちます。また、事前通知は予定されたアクティビティに合わせて計画を立てるのに役立ちます。これらのアラートを使用して、お客様の AWS リソースに影響を及ぼす可能性のある変更について通知を受け、問題を

AWS を初めて利用される方や、ベストプラクティスをブラッシュアップしたい方は、これらのリソースを始めてみてください。

アマゾン ウェブ サービス（AWS）は、開発環境としてはもちろん、ウェブサイト・ウェブアプリケーションからファイルサーバー、社内業務アプリケーション、動画配信、IoT、AI/機械学習までにいたるまで、数多くの用途で活用されています。 ここでは、お客様の目的別に応じた 30 の代表的な構成とその試算例を基礎的なものから応用したのまで幅広く紹介します。導入検討時の情報として是非ご活用ください。

クラウドのアーキテクトの方に、AWS クラウドでの実行に最適化された高度な拡張性・弾力性を持つアプリケーションを構築していただけるように、この白書では規範的なガイダンスを提供します。クラウドの概念を説明し、さまざまな設計パターンとベストプラクティスを取り上げています。日本語ホワイトペーパーをダウンロード

開発者の皆さまこんにちは！AWS Japan で Prototyping Engineer として働いている友岡です。 今日は AWS Lambda Web Adapter というソリューションをご紹介します。VM やコンテナ用に実装されたウェブアプリを、ほとんどそのまま Lambda でも動かせるようにするツールです。(なお、ここで言うウェブアプリとは HTTP を話す任意のウェブサーバーアプリを指します。) Lambda を初めて触る方がまず戸惑うのが、実行方法が Lambda 特有のものになることではないでしょうか。以下は TypeScript の例ですが、Lambda アプリケーションは基本的にこのようなインターフェースの関数 (ハンドラー) を実行する形になり、また外部からの入力はハンドラーの第 1 引数 event として渡されます。

AWS Developer Tools Blog First-class TypeScript support in modular AWS SDK for JavaScript As of December 15th, 2020, the AWS SDK for JavaScript, version 3 (v3) is generally available. On October 19th, 2020, we published the Release Candidate (RC) of the AWS SDK for JavaScript, version 3 (v3). One of the major changes in v3 is first-class TypeScript support. In this blog post we will discuss why we

AWS for Games はより早い開発、よりスマートな運営、そしてより楽しいゲームへの成長という Build、Run、Grow の 3 つの柱に沿ってサポートします。本日は Run の柱、そして ゲーム向けデータベース のお話になります。 Amazon DynamoDB はハイパフォーマンスなアプリケーションを様々な規模で実行できる、フルマネージドかつサーバーレスの Key-Value 型 NoSQL データベースです。そんな DynamoDB とゲームの相性を考える上でまずは DynamoDB の代表的な特徴をあげます Key-Value データベース : キーと値というシンプルな管理方法でデータを格納 高いスケーラビリティ : 一貫性のある高速パフォーマンスを自動でスケールしながら実現 低い管理負担 : バージョンアップやメンテナンスのような作業が不要 次にそれぞれの特徴とゲームの

消費財・流通・小売 / 金融サービス / 広告・マーケティングテクノロジー / 建設・不動産・物流・交通 / 製造 / テレコム / ゲーム / 自動車産業 / エネルギー（電力・ガス・石油） / メディア＆エンターテインメント / ヘルスケア・ライフサイエンス / SaaS

やりたいこと（ユースケース）から利用パターンへ到達できるように、ユースケース主導で紹介。利用するサービスのすべての機能をを覚えなくてもやりたいこと/部分からスタートできます。実際、類似するアーキテクチャの実例が多くあることがわかります。 パターン別のテンプレートから始めてみよう!  チュートリアルで体感しよう! - いくつかのパターンはテンプレート/雛形から始めることができます。それぞれのパターンの「Template」「Sample」「Solution」のリンク先を参照ください。 - 実際に作って動かせるチュートリアルに「Tutorial」「Workshop」リンクからアクセスできます。ちょっとしたトライに費用が気にならないのもサーバーレスの良いところ。 - 各パターンの特性に合わせたエラーハンドリングの記事を拡充中。それぞれのパターンの「エラーハンドリング」リンクからご確認ください。 -