[B! aws] msyktのブックマーク

AmazonがAWS Glueに新しいストリーミングETL機能を導入

Spring BootによるAPIバックエンド構築実践ガイド第2版何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...

msykt 2020/08/22

glue
aws

リンク

AWS、独自開発したARMプロセッサ「Graviton 2」ベースのAmazon RDS MySQL/PostgreSQLをプレビュー開始。ARMはXeonを上回れるのか？

AWS、独自開発したARMプロセッサ「Graviton 2」ベースのAmazon RDS MySQL/PostgreSQLをプレビュー開始。ARMはXeonを上回れるのか？ Amazon Web Services（AWS）は、MySQLやPostgreSQLなどのリレーショナルデータベースをマネージドサービスで提供するAmazon RDSにおいて、Graviton2プロセッサのインスタンスをベースにしたサービスをプレビューとして開始したと発表しました。 New #AWSLaunches! Amazon Personalize enhances Recommendation Filters with filtering on it em metadata Announcing Preview for Amazon RDS M6g & R6g instance types, powered by

msykt 2020/08/10

RDS x86 と比較してどのくらい速くなるんだろう

リンク

Millions of tiny databases

Economic Decision Science is a central science team working across a variety of topics in the EU Stores business and beyond. We work closely EU business leaders to drive change at Amazon. We focus on solving long-term, ambiguous and challenging probl ems, while providing advisory support to help solve short-term business pain points. Key topics include pricing, product selection, delivery speed, pr

msykt 2020/06/16

面白そう。あとで読もう“Physalia uses its knowledge of data center topology to place data where it is most likely to be available. Instead of being highly available for all keys to all clients, Physalia focuses on being extremely available for only the keys it knows each client needs, fr

aws

リンク

［速報］AWSをオンプレミスに持ち込める「AWS Outposts」正式リリース。日本国内でも利用可能。AWS re:Invent 2019

Amazon Web Services（AWS）のAndy Jassy CEOは、米ラスベガスで開催中の年次イベント「AWS re:Invent 2019」の基調講演において、「AWS Outposts」の正式リリースを発表しました。 AWS Outpostsは、AWSのクラウドインフラと同等のシステムをオンプレミスに持ち込み、パブリッククラウドと連係したハイブリッドクラウドを実現できるというもの。同社がクラウドの構築で培ってきた技術を基に、ハードウェアとソフトウェアの設計と開発が行われました。 24インチのラックにシステム一式が搭載され、顧客に提供されます。オンプレミス版AWSの「AWS Outposts」、24インチ幅の専用ラックはキャスター付き、故障には部品交換で対応 AWS OutpostsはAWSのコンソールから管理でき、AWSと同じAPIが利用でき、AWSのリージョンとシーム

msykt 2019/12/04

“24インチのラックにシステム一式が搭載され、顧客に提供されます。”

aws

リンク

[速報] 革新的な新しいハードウェアアクセラレーションキャッシュで他DWHよりも最大10倍高速化！ AQUA(Advanced Query Accelerator) for Amazon Redshift が発表されました #reinvent | DevelopersIO

現在米国ラスベガスで開催されている『AWS re:Invent 2019』。米国時間2019年12月03日(日本時間2019年12月04日深夜)、Amazon Redshiftに関する非常に興味深い機能が発表されました。それが当エントリでご紹介する『AQUA(Advanced Query Accelerator) for Amazon Redshift』です。 AQUA (Advanced Query Accelerator) for Amazon Redshift will change the way you use a data warehouse. A new distributed & hardware-accelerated cache brings 10x performance, compute+storage innovation, processors, scale o

msykt 2019/12/04

凄いな…/“AWSが設計したプロセッサには以下が含まれており、フィルタリングや集計などの操作を高速化出来る”

aws
redshift

リンク

TechCrunch | Startup and Technology News

OpenAI is removing one of the voices used by ChatGPT after users found that it sounded similar to Scarlett Johansson, the company announced on Monday. The voice, called Sky, is…

msykt 2019/12/04

AWS が Managed Cassandra を提供する日が来るとは…

aws

リンク

TechCrunch | Startup and Technology News

SoLo Funds CEO Travis Holoway: “Regulators seem driven by press releases when they should be motivated by true consumer protection and empowering equitable solutions.”

msykt 2019/12/03

“機械学習に基づく新サービスであるAmazon Transcribe Medicalは、医師の診断などに関する会話を、人間の介入なしにリアルタイムで正確なテキストに変換するとアマゾンはコメントしている。”

aws

リンク

AmazonがQuantum Ledger Databaseの一般提供開始を発表

Spring BootによるAPIバックエンド構築実践ガイド第2版何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...

msykt 2019/11/28

“従来のようなリレーショナルデータベースに監査証跡を構築する必要がなくなると同時に、プリンシパルアナリストのDavid Teich氏が説明するように、単純な方法による信頼性の向上が可能になる。”

aws
qldb

リンク

ポスト量子暗号 TLS が AWS KMS でサポートされました | Amazon Web Services

Amazon Web Services ブログポスト量子暗号 TLS が AWS KMS でサポートされました AWS Key Management Service (AWS KMS) が KMS API エンドポイントに接続する際に使われる Transport Layer Security (TLS) ネットワーク暗号化プロトコルにおけるポスト量子暗号ハイブリッド鍵交換をサポートしました。この投稿では、ポスト量子暗号 TLS とは何か、ハイブリッド鍵交換とは何か、なぜこれらの技術が重要か、この機能でどのようなメリットを得られるのか、そしてフィードバックの方法について説明します。ポスト量子暗号 TLS とは? ポスト量子暗号 TLS は、ポスト量子暗号の暗号プロトコルを追加する機能です。 AWS はオープンソースの TLS 実装である s2n を使用しています。2019年6月に

msykt 2019/11/22

“記録された TLS トラフィックは将来的に大規模な量子コンピュータで復号出来る可能性があります。TLS 接続の上で送信されているデータの長期間の機密性維持が必要なアプリケーションを開発している場合、大規模な量子

aws
security

リンク

AWS Data Wranglerを触ってみた - アメリカ的間投詞

つい先々週Amazon Web Services ブログで紹介されていたAWS Data Wranglerを触ってみたので、その感想などを書きます。 AWS Data WranglerはAWSの各サービス上にあるデータを操作するためのPythonライブラリです（つまりサービスではない）。Python環境においてメモリ上にあるpandasのDataFrameや、PySparkのセッションで捕捉しているデータをAWSの各種リソース(S3, Redshiftなど)へとアップロードすること、またその逆の作業が行えます。元来このような操作は各チームでライブラリを用意するか、個々のデベロッパーが都度開発することで実現されることが多かったでしょう。今回AWS Data Wranglerが提供されたことにより、そのような手間を省くのに加え、データのやり取りを行う際のベストプラクティスに沿った実装を利用で

msykt 2019/10/07

“プログラムやNotebookで出来上がった有益ぽいDataFrameは、ローカルのファイルシステムではなくAWS Data Wranglerを使って即クラウド、再利用する際は同じ名前(パス、database、table)で呼び出して使う。”

aws

リンク

AWS AppSync + Cognito + Amplify + ApolloでSPAを作ってみた話&同じ構成で簡易版Todoアプリをホストするまでの手順 - Qiita

AWS AppSync + Cognito + Amplify + ApolloでSPAを作ってみた話&同じ構成で簡易版Todoアプリをホストするまでの手順SPAReact GraphQL apolloAppSync 概要 AppSync + Cognito + Amplify + Apolloの使い方を学ぶためにReactでTodoアプリを作ってみたので、それぞれの簡単な説明と作成までの手順などを残しておきます。作成したもの： ※DEV(http)なのでもしサインアップする場合普段使っているパスワードは使わないでください http://appsync-apollo-todo-20190503160622-hostingbucket-dev.s3-website-ap-northeast-1.amazon aws.com/ https://github.com/yuuyu00/AppSync

msykt 2019/08/25

aws

リンク

TechCrunch | Startup and Technology News

Alex Taub, a longtime founder with multiple exits under his belt, believes it’s time to disrupt the meme industry. “I have this big thesis that memetech is going to be…

msykt 2019/08/01

“E8 Storage自身の言葉によると、同社はフラッシュメモリーを使ったストレージハードウェアの製造にフォーカスし、競合製品よりも高速なパフォーマンスを提供する。”

aws

リンク

Aurora Serverless MySQL の一般利用が開始 | Amazon Web Services

Amazon Web Services ブログ Aurora Serverless MySQL の一般利用が開始クラウド向けに考案、構築され、MySQL や PostgreSQL と互換性のあるカスタムビルドのデータベース、Amazon Aurora については、すでにご存知の方も多かと思われます。また、インスタンスのことを考慮することなくアプリケーションおよびサービスを構築、実行できるサーバーレスをご存知の方も多いかと思われます。この 2 つのサービスは、成長を続ける AWS テクノロジーの一端を担うサービスであり、私たちはこのサービスに積極的に取り組んでいます。昨年の AWS re:Invent では、Aurora Serverless と呼ばれる Aurora の新機能のプレビューが発表されました。本日、Aurora MySQL 向け Aurora Serverless の一般利用

msykt 2018/08/15

ワークロードが変わった時にどのくらい素早く対応するのか気になる。少なくとも開発DBは常時使わないし止めるのダルいのでAurora Serverless使いたい

aws
aurora

リンク

Serverless Data Analytics with Flint

Serverless Data Analytics with Flint Youngbin Kim and Jimmy Lin David R. Cheriton School of Computer Science University of Waterloo Waterloo, Ontario, Canada {youngbin.kim,jimmylin}@uwaterloo.ca Abstract—Serverless architectures organized around loosely- coupled function invocations represent an emerging design for many applications. Recent work mostly focuses on user-facing products and event-dri

msykt 2018/07/19

Spark taskを実行するFlintを使って、AWS Lambdaの上で分散処理する、という話。結果だけ見るとコスト面のアドバンテージが出てないものの面白い。EMRとの比較欲しかった。Fargateでもトライしてほしい

リンク

CloudWatch Logsについて

20200930 AWS Black Belt Online Seminar Amazon Kinesis Video StreamsAmazon Web Services Japan

msykt 2018/06/03

Radiosonde/Meteorlog使ってみよう

リンク

AWS Summit 2018 San Franciscoで発表されたサービスやアップデートのまとめ | DevelopersIO

2018年4月4日(水)に開催されたAWS Summit 2018 San Franciscoで、多くのサービスやアップデートに関する発表がありました。当ブログもAWSの記事で賑わっていますが、今回はそれらを簡単にまとめてみたいと思います。新しく発表されたサービス AWS Secrets Manager: Store, Distribute, and Rotate Credentials Securely ライフサイクルを通じてデータベース認証情報、API キー、その他のシークレットを簡単に更新、管理、取得します。基盤技術の低レベルな KMS や特定用途に特化した AWS Systems Manager Parameter Store のようなサービスはありましたが、より汎用的な秘密管理サービスです。 AWS Secrets Managerは、アプリケーション、サービス、ITリソースへ

msykt 2018/04/08

もう付いて行くのがやっと感ある

aws

リンク

【完全新機能】DB認証情報やOAuthキーを一元管理可能なAWS Secrets Managerが発表されました！ | DevelopersIO

現在開催されている、AWS Summits 2018 | San Franciscoにおいて、AWS Secrets Managerが発表されました。 AWS Secrets Manager: Store, Distribute, and Rotate Credentials Securely | AWS News Blog 2018年4月9日更新 AWS Secrets Managerを学ぶ時に便利なリソースや、概要、構造、チュートリアルなどをまとめた記事を公開しました。こちらも合わせて御覧ください。機密情報を一元管理できる「AWS Secrets Manager」とは？概要と主要機能、動作原理、各種リソースまとめ __ （祭） ∧ ∧ Y　 ( ﾟДﾟ) Φ[_ｿ__ｙ_l〉 Secrets Managerﾀﾞﾜｯｼｮｲ |_|＿| し'´Ｊ AWS Secrets Mana

msykt 2018/04/07

うーん、SSM Parameter Storeとの違いがきになる。シークレットなものを扱うことが前提になってることと、ローテートなのかな。FAQ見たけど違いに関して言及されてなかった。その辺は不親切だと思う

aws

リンク

Param store config by jkuipers · Pull Request #308 · spring-attic/spring-cloud-aws

msykt 2018/04/03

AWS Parameter Store対応、頑張っていただきたい

aws
spring

リンク

Genki Sugawara | Meet the AWS Community Heroes

AWS ヒーロープログラムは、熱心なナレッジ共有によってコミュニティに大きな影響を与えている世界中の精力的な AWS エキスパートの皆さんを表彰します。ヒーローは、ソーシャルメディア、ブログ投稿、オープンソースプロジェクト、動画、フォーラムを介してオンラインで、または会議、ワークショップ、ユーザーグループイベントで直接会うなど、さまざまな方法で知識を共有します。