タグ

2022年3月1日のブックマーク (3件)

  • Cloud Profiler を使用してパイプラインのパフォーマンスをモニタリングする  |  Cloud Dataflow  |  Google Cloud

    フィードバックを送信 Cloud Profiler を使用してパイプラインのパフォーマンスをモニタリングする コレクションでコンテンツを整理 必要に応じて、コンテンツの保存と分類を行います。 Cloud Profiler は、番環境のアプリケーションから CPU 使用率やメモリ割り当てなどの情報を継続的に収集する、オーバーヘッドの少ないプロファイラです。詳細については、プロファイリングのコンセプトをご覧ください。パイプライン パフォーマンスのトラブルシューティングやモニタリングを行うには、Cloud Profiler と Dataflow のインテグレーションを使用して、パイプライン コードで最も多くのリソースを消費する部分を特定します。 Dataflow パイプラインの構築または実行に関するヒントやデバッグ戦略については、パイプラインのトラブルシューティングとデバッグをご覧ください。

    Cloud Profiler を使用してパイプラインのパフォーマンスをモニタリングする  |  Cloud Dataflow  |  Google Cloud
    nminoru
    nminoru 2022/03/01
  • Exploratoryとは?|データ活用にレバレッジをかける革新的なツール

    Exploratoryとはまさにデータを”Explore”(探索)する分析ツールです。Exploratoryはいわゆる「BIツール」には属さないものの、その直感的でストレートなインターフェース(画面)が組織でのデータ活用にインパクトを与えてくれるため、当社でもExploratoryを使用してコンサルティング/支援をしています。Exploratoryは明朗なクレジットカード払いで、その点で主要なBIツールよりも導入しやすく、R言語(統計解析向けのプログラミング言語)を基盤としていることから統計領域・アナリティクス分野に力点を置いたコンサルティング業務の生産性を上げられています。 そこでこの記事では、Exploratoryとは何なのか、Excelでは実現出来ないのか、Tableauとはどういった点で違うのかなど網羅的にExploratoryを解説します。 1.Exploratoryとは?Exp

    Exploratoryとは?|データ活用にレバレッジをかける革新的なツール
    nminoru
    nminoru 2022/03/01
  • Databricks Sets Official Data Warehousing Performance Record

    Databricks は日、「Databricks SQL」がデータウェアハウス(DWH)のベンチマークである TPC-DS の 100TB クラスで世界記録を更新したことを発表しました。Databricks SQL は、これまでの世界記録の 2.2 倍のパフォーマンスを達成。他の多くのベンチマーク達成ニュースとは異なり、この記録は TPC 評議会によって正式に認められています。 These results were corroborated by research from Barcelona Supercomputing Center, which frequently runs benchmarks that are derivative of TPC-DS on popular data warehouses. Their latest research benchmarked

    Databricks Sets Official Data Warehousing Performance Record
    nminoru
    nminoru 2022/03/01