タグ

sparkとawsに関するkma83のブックマーク (3)

  • AWS Glue データカタログを Spark SQL のメタストアとして使用する - Amazon EMR

    翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。 AWS Glue データカタログを Spark SQL のメタストアとして使用する Amazon EMR リリース 5.8.0 以降を使用して、 AWS Glue データカタログをメタストアとして使用するように Spark SQL を設定できます。永続的なメタストア、またはさまざまなクラスター、サービス、アプリケーション、あるいは AWS アカウントで共有されるメタストアが必要である場合は、この設定をお勧めします。 AWS Glue はフルマネージド型の抽出、変換、ロード (ETL) サービスで、データの分類、クリーニング、強化、さまざまなデータストア間の信頼性の高い移動を簡単かつ費用対効果の高い方法で実現します。 AWS Glue Data Catalog は、A

  • AWS News Blog

    AWS Week in Review – AWS Documentation Updates, Amazon EventBridge is Faster, and More – May 22, 2023 Here are your AWS updates from the previous 7 days. Last week I was in Turin, Italy for CloudConf, a conference I’ve had the pleasure to participate in for the last 10 years. AWS Hero Anahit Pogosova was also there sharing a few serverless tips in front of a full house. Here’s a picture I […] Amaz

    kma83
    kma83 2015/08/21
    Amazon EMR上でSparkのサンプルを作成するチュートリアル込み
  • Amazon EMR 2.x および 3.x AMI バージョン - Amazon EMR

    翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。 Amazon EMR 2.x および 3.x AMI バージョン AWS は、すべての AWS API エンドポイントの TLS 設定を TLS 1.2 の最小バージョンに更新しています。Amazon EMR リリース 3.10 以前では、TLS 1.0/1.1 接続のみがサポートされています。2023 年 12 月 4 日以降は、Amazon EMR 3.10 以前のバージョンでクラスターを作成できなくなります。 Amazon EMR 3.10 以前を使用している場合は、すぐにワークロードをテストし、最新の Amazon EMR リリースに移行することをお勧めします。詳細については、「AWS Security Blog」を参照してください。 Amazon EMR

    kma83
    kma83 2015/08/21
    クラスターの Amazon VPC サブネットを選択する(オプション) - Amazon Elastic MapReduce 社内でEMRからEC2のMySQLに接続できなくて、原因はEMRクラスタとMySQLが異なるVPCを使ってたからというところまで分かった時に調べた情報。
  • 1