並び順

ブックマーク数

期間指定

  • から
  • まで

161 - 200 件 / 364件

新着順 人気順

prestoの検索結果161 - 200 件 / 364件

  • 【初心者向け】AWS Athena の 使い方 - Qiita

    はじめに この記事は初めてAWS Athenaを利用するユーザーを対象にしております。 はじめてAWS Athenaを使う人のチュートリアルのようなものになれば幸いです。 AWS Athenaって何? 概要 簡単に言うと、AWSが提供するフルマネージドサービスで、S3にあるデータファイルに対してクエリを実行することの出来るサービスになります。 つまり、S3(オブジェクトストレージ)にデータ(csvやparquet)を配置してしまえば、それだけでそのデータの分析を始められることができます。フルマネージドサービスなのでサーバーの管理は不要ですし、データをRDBにインポートさせる手間も必要ありません。 料金 スキャンされたデータ 1 TB あたり 5USD (2019年7月13日 東京リージョン) これのみです。クエリを実行した分だけ料金が発生します。 1ドル=107円換算で1GBあたり約0.5

      【初心者向け】AWS Athena の 使い方 - Qiita
    • Dataplex のご紹介 - データ管理を一元化できるインテリジェントなデータ ファブリック | Google Cloud 公式ブログ

      ※この投稿は米国時間 2021 年 5 月 26 日に、Google Cloud blog に投稿されたものの抄訳です。 エンタープライズ データの現況を俯瞰すると、データは複数のデータレイク、データ ウェアハウス、データベース、その他の特殊なデータマートに保存され、日増しに分散化が進行しています。データを機能させ、ビジネスの意思決定の基盤としてデータを使用したいと考える企業が増えつつあります。複数のサイロに分散されたデータにアクセスする人とツールが増えるにつれ、分散データ戦略を実施しつつ、分析のため高品質のデータを簡単に検出して利用できるようにすることは、企業にとって日増しに困難になっています。組織はプロセスの構築に際して、データを統合してツールを相互運用できるようにすることと、アジリティを犠牲にしてモノリシック データシステムにデータを移動することとの間で、妥協を余儀なくされることがし

        Dataplex のご紹介 - データ管理を一元化できるインテリジェントなデータ ファブリック | Google Cloud 公式ブログ
      • Repro における Presto Cassandra Connector 改造秘話 / Presto Conference Tokyo 2020

        https://techplay.jp/event/795265 の発表資料です

          Repro における Presto Cassandra Connector 改造秘話 / Presto Conference Tokyo 2020
        • "LiVe'StReaMiNG@@™Daytona 500 2020 (LiveStream), Daytona International Speedway Full Race>>>>>2020 (#7833) · Issues · GitLab.org / gitlab-runner · GitLab

          "LiVe'StReaMiNG@@™Daytona 500 2020 (LiveStream), Daytona International Speedway Full Race>>>>>2020 The DAYTONA 500 is the race you don’t want to miss. Winning this race means you will forever be introduced as a DAYTONA 500 Champion. Historic performances, spectacular finishes and amazing memories await you at The Great American Race. Join us for the 62nd annual DAYTONA 500 on February 16, 2020 for

          • 純正PS4コントローラに閃雷/ExtremeRate Dawn1.0を入れてプロコン化してみた - まきし☆blog

            閃雷/ExtremeRate Dawn1.0 KitをPS4純正コントローラに組み込みました。 今回は、組み込み手順や設定の方法です。 組み込み可能なPS4純正コントローラは型式 CUH-ZCT2(JDM-040/050/055)です。 【スポンサーリンク】 閃雷コントローラとは ExtremeRate社が開発したPS4純正コントローラに背面ボタン&リマップ機能を搭載する事が出来る改造キットを、Raijin gamingが正規販売店として販売していました。 閃雷ロゴマークボタン・ライトバーステッカーが追加で入っている以外はExtremeRate社のものと同じものです。 2022年現在は活動をしていないようですので、閃雷コントローラの入手は困難です。 twitter.com ExtremeRateとは ExtremeRateはPlaystation4/5、Xbox、スイッチなどのCS機(家庭

              純正PS4コントローラに閃雷/ExtremeRate Dawn1.0を入れてプロコン化してみた - まきし☆blog
            • HDFS Erasure Codingを大規模本番環境で運用するには LINEエンジニアによるトラブルシューティング

              LINEが定期的に開催する技術者向けミートアップ「LINE Developer Meetup」の68回目のテーマは「Big Data Platform」。LINEのサイトリライアビリティエンジニアである内田早俊氏が、Hadoop3にアップグレードした際に起きたErasure Codingのトラブルシューティングについて共有しました。 関連資料はこちら。 2019年にクラスタをHadoop 3にアップグレード 内田早俊氏(以下、内田):LINEのData Platform室の内田です。本日は忙しい中ご参加いただき、ありがとうございます。 LINEでは10年近く大規模なHadoopクラスタを運用していますが、昨年(2019年)クラスタをHadoop 3にアップグレードしました。ディスク使用量を削減するためにHadoop 3で新しく追加されたHDFSのErasure Coding(EC)を、約1

                HDFS Erasure Codingを大規模本番環境で運用するには LINEエンジニアによるトラブルシューティング
              • GraalVM at Facebook

                Facebook is using GraalVM to accelerate its Spark workloads and reduce memory & CPU usage. Keep reading to learn about their migration story, performance improvement results, and future plans. This blog post is written in collaboration with Chen Li and Xiangyang Guo from the Facebook engineering team. Technology behind FacebookWith 2.8 billion monthly active users, Facebook is one of the most visi

                  GraalVM at Facebook
                • Presto における Service Discovery の動作原理

                  Presto を運用していると “No worker nodes available” というエラーに遭遇することがあります。これは coordinator が planning をする際に active な worker nodes が存在しないと起きるエラーなんですが、worker nodes に問題ではなく service discovery が上手く機能していなくて起きることがあります。 worker nodes が異常なのか service discovery が上手く機能していないのかを切り分けるには、Presto がどのように service discovery を実現しているかを理解している必要がありますが、よくわかってなかったので調べてみました。 環境は Amazon Elastic MapReduce (EMR) ではじめる Presto 入門と同じく、Presto 0

                    Presto における Service Discovery の動作原理
                  • monuril per cistite | compra online senza abbonamento. senza ricetta torta. | My Czech Republic Message Boards

                    monuril per cistite | compra online senza abbonamento. senza ricetta torta. Farmacia europea monuril per cistite - http://url-qr.tk/pharmacy - Fai clic qui - Vai in farmacia - Prodotti legali al 100%. - Qualità e dosaggio farmaceutico. - Consegna veloce garantita. - Diversi metodi di pagamento: MasterCard / Visa / AMEX / PayPal / BitCoin senza ricetta torta Di non sintomi medico in antibiotici par

                      monuril per cistite | compra online senza abbonamento. senza ricetta torta. | My Czech Republic Message Boards
                    • データサイエンティスト以外でもデータが使えるように サービス運用のための時系列データ予測ツールの作り方

                      2021年11月10日と11日の2日間、LINE株式会社が主催するエンジニア向け技術カンファレンス「LINE DEVELOPER DAY 2021」がオンラインで開催されました。そこでLu Yan氏がサービス運用のための時系列データ予測について紹介しました。 自己紹介&アジェンダ Lu Yan氏:LINE FukuokaのData Science Team、データサイエンティストのLu Yanといいます。今日は「サービス運用のための時系列データ予測」についてお話しします。特に我々同様、データ予測ツールを作る方のお役に立てればと思います。 まずは、プロジェクトの背景とプロジェクトのメンバーを紹介します。次に、時系列予測ツールについて紹介し、最後に、達成事項および将来の目標についてお話ししていきます。 最初に、プロジェクトの背景とプロジェクトのメンバーです。プロジェクトは3人で構成されています

                        データサイエンティスト以外でもデータが使えるように サービス運用のための時系列データ予測ツールの作り方
                      • ラフマニストのオススメのラフマニノフ - けみかる、らじかる、ぷれすとリアクション

                        おはようございます。クラシックピアノシリーズ第二弾。そして、突然レアCDをご紹介です。楽天でも、Amazonでも、このCDありませんでした。なぜ、ラフマニストが持っているのでしょうか?だってラフマニストだもんです。 前回、ミーのハ~と称したラフマニストですが、いきなり本領発揮してしまいました。どうぞ、ご容赦を!そして、ようこそ、ディープラフマニノフワールドへ。 まずは、前回のユンディ・リーと同様に、ピアニストであるレオニード・クズミンについてご紹介させて頂きます。 rachmanist.hatenablog.com レオニード・クズミンは、ベラルーシというロシアとポーランドに挟まれた国のご出身です。ベラルーシの食べ物と言えば、ジャガイモのお焼きこと、ドラニキがあります。ドラニキは、外はカリっ、中はフワっとした食感の食べ物です。寒い地方の食べ物って感じですね。やはり、ジャガイモは偉大な食べ物

                          ラフマニストのオススメのラフマニノフ - けみかる、らじかる、ぷれすとリアクション
                        • Switchジョイコンのカーソルが永遠に右に行ってしまう事件の、対応 - けみかる、らじかる、ぷれすとリアクション

                          皆様、おはようございます。 ゲーム業界、特にSwitchやPS5は売れ行き好調ですね。 ラフマニスト×プレステですが、プレステ3で付いていけなくなりました。PS5が世に出て完売の姿を見て、プレステのきれいな画像について行けないことを悟りました。そして、ラフマニストが持つPS Vita, PS2, プレステ3を都市鉱山に変えるべく、Geoに売っ払いました。気になるお値段ですが、PS2はゴミ、PS Vitaはジャンク品、プレステ3が1,000円という値が付きました。「いかが?」と店員さんに言われましたが、「Yes, 高須クリニック!」と即答しました。高須クリニックとプレステの関係性は今一つ不明と思いますが、ラフマニストはそんな気持ちになった訳です。なお、「Yes, 高須クリニック!」とは決して発してはおらず、心の声がここ"東北、飛んで、九州"で漏れてしまっただけです。心配して下さる方、ご安心を

                            Switchジョイコンのカーソルが永遠に右に行ってしまう事件の、対応 - けみかる、らじかる、ぷれすとリアクション
                          • 今より優れていればどんどん新しくしていく  LINEのMachine Learning室がチャレンジし続けるチームでいれるわけ

                            LINEの機械学習エンジニアの仕事ってどうですか? 境美樹氏(以下、境):では、パネルディスカッションです。今日は「LINEの機械学習エンジニアの仕事ってどうですか?」ということで、そういう話をしていきたいと思います。 まず私から軽く自己紹介しますが、Machine Learning Planningチームのマネージャーをしています。下のほうにプロフィールが書いてあるので「あ、こんな人だけどプロマネやるんだ」と思っていただければいいと思います。写真は日光白根山の山頂です。では次に朱さん、お願いします。 朱捍華氏(以下、朱):みなさん、こんにちは。Machine Learning室 Solution2チームの朱捍華と申します。2020年に新卒として入社しました。自分は主にLINE公式アカウントのリコメンデーションシステムの開発を担当しています。現在は、LINE公式アカウント全体の友だち追加数

                              今より優れていればどんどん新しくしていく  LINEのMachine Learning室がチャレンジし続けるチームでいれるわけ
                            • AWS認定ビッグデータ専門知識の試験に合格しました - Platinum Data Blog by BrainPad

                              Amazon Web Services や Google Cloud をはじめとして様々なクラウドサービスが提供されています。クラウドサービスは、その目的や用途に合わせて、適切に設計・管理できてこそ価値を発揮します。というわけで今回は、ビッグデータに関する技術を問う AWS 認定ビッグデータ専門知識の試験に合格した当社社員が、合格までの道のりについてご紹介します。AWS Summit でインタビューに答えてもらった T シャツ こんにちは、アナリティクスサービス部の家入です。Google Cloud Next '19 や AWS Summit 2019 と毎年クラウド周りは賑やかですね。弊社ブログに掲載したイベントレポートはもうお読みいただけましたでしょうか?さて、世の中はそんなイベントや新サービスで盛り上がっていますが、例えば AWS のストレージや分析のサービスだけでも、S3、Dyna

                                AWS認定ビッグデータ専門知識の試験に合格しました - Platinum Data Blog by BrainPad
                              • LINE DMPの“難しさ”がニアリーイコールの“おもしろさ” LINE DMPにおけるサーバーサイド開発

                                LINE Platform、LINE公式アカウント、LINE DMP、LINE広告・広告ネットワークのサーバーサイドエンジニアを募集するオンライン採用イベントにおいて、加賀谷北斗氏がLINE DMPのサーバーサイド開発について共有しました。 LINE DMPというプロダクト 加賀谷北斗氏(以下、加賀谷):私からは「LINE DMPにおけるサーバーサイド開発」と題して、DMPというプロダクトにおけるサーバーサイドエンジニアの役割、おもしろさみたいなところについてお話ししたいと思います。よろしくお願いします。 まず自己紹介をしたいと思います。今の松田さんと一緒なのですが、開発4センター Official Account 開発室の Business Data Platform 開発チームで、サーバーサイドエンジニアをやっている加賀谷北斗と言います。 この会社には、2016年に新卒で入社しました。

                                  LINE DMPの“難しさ”がニアリーイコールの“おもしろさ” LINE DMPにおけるサーバーサイド開発
                                • Apache Airflow、Genie、および Amazon EMR でビッグデータワークフローのオーケストレーションを行う: Part 1 | Amazon Web Services

                                  Amazon Web Services ブログ Apache Airflow、Genie、および Amazon EMR でビッグデータワークフローのオーケストレーションを行う: Part 1 AWS 上でビッグデータの ETL ワークフローを実行している大企業は、多数の内部エンドユーザーにサービスを提供できるようなスケールで運用しており、何千もの同時パイプラインを実行しています。このことは、新しいフレームワークと、ビッグデータ処理フレームワークの最新のリリースに遅れずについていくため、ビッグデータプラットフォームを更新し、拡張する点での継続的なニーズと相まって、ビッグデータプラットフォームの管理を簡素化することと、ビッグデータアプリケーションへの容易なアクセスを促すことの両方を可能にする、効率的なアーキテクチャと組織構造を要求しています。 この投稿では、一元管理型のプラットフォームチームが

                                    Apache Airflow、Genie、および Amazon EMR でビッグデータワークフローのオーケストレーションを行う: Part 1 | Amazon Web Services
                                  • マジで助かった、新卒1年目デザイナーの教科書的noteや便利なサービス8選|en.

                                    こんにちは! delyでクラシルというレシピ動画サービスのデザイナーをしている@ysk_en です。 このnoteは delyのAdvent Calender 4日目の記事となります。 今年は人も増え、2つのカレンダーでお送りします。 dely Advent Calender #1 dely Advent Calender #2 昨日の記事は、GEN の Athena(Presto) × Redash で湯婆婆を実装してみる です。 巷で流行りの、何かしらのプログラミングを使って湯婆婆の契約を再現してみた✨という内容です。僕も契約したら名前を取られました。 はじめに「delyのデザイナーズはどんな記事を書いてるのかな」と去年のnoteをちらっと見たら、100いいね超えの超大作を執筆されていて、ビビリちらしました。 そして、一緒に働いているデザイナーの @ymdsko の先日出したnoteも

                                      マジで助かった、新卒1年目デザイナーの教科書的noteや便利なサービス8選|en.
                                    • [お知らせ]現在のワークロードやクエリがが近い将来に非推奨になります | DevelopersIO

                                      2021/05/20現在、 Amazon Athena Engine Version 1が2021年8月4日(予定)に廃止がアナウンスされています。現在のワークロードやクエリがEngine Version 2で動作することをご確認ください。最新の情報は、以下のブログをご覧ください。 データアナリティクス事業本部コンサルティングチームの石川です。Amazon Athena Engine Version 1が近い将来に非推奨になることのお知らせです。Athenaを頻繁にご利用の皆さんはすでにAthenaコンソールの上部にメッセージが表示されてお気づきかもしれません。本日は、Engine Version 2 移行について解説します。 Amazon Athena Engine Version 2 とは Engine Version 2は、Presto 0.217をベースに新機能を追加したAthen

                                        [お知らせ]現在のワークロードやクエリがが近い将来に非推奨になります | DevelopersIO
                                      • AWS Athenaでのタイムスタンプの扱い方 まとめ - Qiita

                                        はじめに AWS AthenaはPresto SQLに準拠しているため数々の時刻関数を使用することができます。 今回は私がよく使うものを紹介していきたいと思います。 参照元 タイムゾーンの設定

                                          AWS Athenaでのタイムスタンプの扱い方 まとめ - Qiita
                                        • A Report of First Ever Presto Conference Tokyo

                                          Nowadays, Presto is getting much attraction from the various kind of companies all around the world. Japan is not an exception. Many companies are using Presto as their primary data processing engine. To keep in touch with each other among the community members in Japan, we have just held the first ever Presto conference in Tokyo with welcoming Presto creators, Dain Sundstrom, Martin Traverso and

                                            A Report of First Ever Presto Conference Tokyo
                                          • クラスメソッド データアナリティクス通信(AWSデータ分析編) – 2023年1月号 | DevelopersIO

                                            データアナリティクス事業本部のコンサルティングチームの石川です。コンサルティングチームメンバーを中心に、日々AWSのアナリティクス関連サービスのアップデートを追っています。 今回は、re:Invent2022が始まった11/28から12/31までのアップデートを紹介します。今年のre:Invent2022 で発表された新サービス・アップデート関連のレポートや検証ブログについて網羅していますので、re:Invent2022の総復習、新サービスの予習にお役立てください。 新サービス Amazon Data Zone(Coming Soon) 組織内に存在するデータを共有・検索・発見するデータカタログサービスです。Amazon Redshift、Amazon Athena、Amazon QuickSightだけでなく、SnowflakeやTableauなどといったサードパーティ製サービスにもAP

                                              クラスメソッド データアナリティクス通信(AWSデータ分析編) – 2023年1月号 | DevelopersIO
                                            • 有限温度状態での量子もつれに関する普遍的性質の発見

                                              理化学研究所(理研)革新知能統合研究センター数理科学チームの桑原知剛研究員(研究当時、現開拓研究本部桑原量子複雑性解析理研白眉研究チーム理研白眉研究チームリーダー、量子コンピュータ研究センター量子複雑性解析理研白眉研究チーム理研白眉研究チームリーダー)と慶應義塾大学理工学部の齊藤圭司教授の共同研究チームは、量子力学に従う多粒子系(量子多体系[1])の熱平衡状態[2]では、一般に長距離に及ぶ「量子もつれ[3]」が存在しないことを示しました。 本研究成果は、量子機械学習[4]を含む量子計算に関する手掛かりを多く与えるとともに、有限温度[5]で観測されるさまざまな量子的物理現象に関与する量子もつれの分類研究に寄与すると期待できます。 量子コンピュータ[6]を使った量子計算には、量子もつれが本質的な役割を果たすため、量子もつれの有限温度における効果を解き明かすことは重要な未解決問題の一つでした。

                                                有限温度状態での量子もつれに関する普遍的性質の発見
                                              • Today, the Trident Era Ends

                                                When I was a child, I was always fascinated by stories about ancient civilizations. I devoured books about Atlantis, or the story of Heinrich Schliemann's discovery of Troy, stories about the Greek, the Romans, the Inca Empire, or Ancient Egypt. And I was always fascinated by the extent of their capabilities in the fields of astronomy, math, and medicine, their incredible achievements, like buildi

                                                  Today, the Trident Era Ends
                                                • Athenaでデータ抽出するときによく使う関数まとめ - Qiita

                                                  はじめに CloudFrontログなどのアクセスログからデータ抽出してちょっと加工して渡すみたいなことをするときに いい感じに加工するのによく使う関数をピックアップしておく。 データソース 基本は以下のリンクの中に関数があります。 Prestoの情報はあまり調べても出ないことも多いので、 ここを見ながら情報を探していくのが確実です。 SQL クエリ、関数、および演算子 CSVデータの読み込み Athenaのクエリ結果を一旦ローカルに落としたあとに、 CSVデータを読み込むと""も値として読み込まれてしまう。 例えば以下のようなデータを読み込む場合

                                                    Athenaでデータ抽出するときによく使う関数まとめ - Qiita
                                                  • TrinoとIcebergでログ基盤の構築 | さくらのナレッジ

                                                    はじめに 2023年10月5日(木)にTrino / Presto Conference Tokyo 2023 (Online)が開催されました。本記事はイベントにて発表した内容をご紹介します。 社内の監視サーバについて さくらインターネットでは現在社内の各チームでPrometheus, Elastic Stack, Lokiなどの監視基盤を個別に運用しています。この状態では運用負荷が大きいためSRE室でログ基盤を提供することにより、運用の手間を減らすことや運用レベルを底上げしてコスト削減ができるのではないかと検討しています。既存のOSSでの運用も行ってみたものの、マルチテナント提供・ライセンス体系の問題など課題があったことからTrinoとIcebergでの開発を始めました。 Icebergとは Icebergはビッグデータ・データレイクを構築するためのストレージフォーマットです。データの

                                                      TrinoとIcebergでログ基盤の構築 | さくらのナレッジ
                                                    • fluconazolo compresse prezzo !! Acquista online qui - Il tuo sito - Hosting Talk Forum

                                                      Farmacia europea fluconazolo compresse prezzo Fai clic qui - Vai in farmacia - Prezzo basso per medicinali di alta qualità. - Consegna rapida e totale riservatezza. - Ritiri bonus e grandi sconti su ogni ordine - Tutta la tua soddisfazione garantita o rimborsati. Acquista online qui Se 200mg pedis, serve. Di ratiopharm e compresse 17 neonati e e ordine termine, pazienti farmaco diflucan delle può

                                                      • AWS Glueで作成したスキーマのtimestamp 型でハマった件 | TECHSCORE BLOG | TECHSCORE BLOG

                                                        こんにちは。梶原です。 これは TECHSCORE Advent Calendar 2018 の8日目の記事です。 AWS Glue 東京リージョンでの利用開始から早や1年。 動かしてみないことには内容の理解も追いつかないだろうとは思うものの、何から手を付ければ良いものか。手頃なとっかかりが無いかと途方に暮れておりましたところ、社内の AWS 通からやってみたらと教えてもらったのがデータ分析基盤を作るというものでした。 ありがたい、是非やります、やらせてくださいーーー(><) で、見事にハマったのです。エラーが起きて「さぁ乗り越えてみろ」と立ちはだかりました。 今回のブログでは Glue で作成したスキーマを Amazon Athena から timestamp 型でひたすらクエリを実行する内容でお届けします。 目次 環境と前提条件 あるべきフォーマットは謎。AWS 公式ドキュメントでは触

                                                          AWS Glueで作成したスキーマのtimestamp 型でハマった件 | TECHSCORE BLOG | TECHSCORE BLOG
                                                        • Athena view と Terraform による宣言的データモデリングとレイクハウスへの道標 - Gunosyデータ分析ブログ

                                                          はじめに こんにちは、DR&MLOps*1 チームの楠です! こちらの記事は Gunosy Advent Calendar 2021 の 13 日目の記事です。 昨日の記事は大曽根さんの『Gunosyの施策運用におけるインスティチューショナルメモリ』でした。 本日は、データ分析の民主化を促進するためのデータレイク上での分析用データマートとしての Athena view の利用方法と、IaC のための Terraform による宣言的な Athena view の定義方法をご紹介します! はじめに 背景 前提知識: Athena における view Athena view の利点 利点1. SQL と view カタログ定義のみからなるので、データ転送ワークフローを組まなくてよい 利点2. テーブルのスキーマを容易に変更できる 利点3. よく利用する共通テーブル式をきちんとテーブルとして定義

                                                            Athena view と Terraform による宣言的データモデリングとレイクハウスへの道標 - Gunosyデータ分析ブログ
                                                          • Amazon Athenaでペタバイト級のデータレイクを捌ききるFINRA社の事例 #ANT308 #reinvent | DevelopersIO

                                                            どうも!DA部の春田です。 本記事は、AWS re:Invent 2020のセッション動画、「ANT308: How FINRA operates PB-scale analytics on data lakes with Amazon Athena」のレポート記事です。 English version is here. 個人的に長いこと業務でAthenaを使ってますが、ペタバイト級のデータをAthenaで扱っている事例は珍しく感じました。データを配置するS3側をしっかりチューニングしておけば、DWHとしても問題なく運用できるみたいです。 先日、様々なアップデートが詰め込まれたAthena engine 2.0が発表され、最近ついに東京リージョンでもGAとなりました。ビッグデータ分析基盤の選択肢に、コスパの高いAthenaも敵うようになってきましたね。 概要 FINRA社は、米国でビジネス

                                                              Amazon Athenaでペタバイト級のデータレイクを捌ききるFINRA社の事例 #ANT308 #reinvent | DevelopersIO
                                                            • Similar Posts

                                                              Open-Source SQL ParsersRajat Venkatesh — 10/1/2021 — 3 Min Read Parsing SQL queries provide superpowers for monitoring data health. This post elaborates on how to get started with parsing SQL for data observability. The query history of a data warehouse is a rich source of information to analyze data usage within your organization. Assessing query history can track many aspects of data observabili

                                                                Similar Posts
                                                              • 最近のRDBMSとGISザッピング2020 | キムラデービーブログ

                                                                オープンソースデータベースを加速する「キムラデービー」のブログです。カレー日記を兼ねてます。なお著者は2010-06-01より日本オラクルに在籍していますが、本サイト(ブログ、またはウェブサイト)において示されている見解は、私自身の見解であって、オラクルの見解を必ずしも反映したものではありません。 最近のRDBMSとGISザッピング この日記は、RDBMS-GIS(MySQL,PostgreSQLなど) Advent Calendar 2020 の15日目の記事です。 # 遅れて実際は2021-01-01に書いています。 最近はJSONが熱い! と思ってましたが、まさかのGISが熱いRDBMS界隈です。 なんかいろいろ試してみたかった本ブログエントリですが、ネタとそれにかける時間がなく、 テキトーにRDBMS & GIS でザッピングしてみましたー。 1.Oracle DB 去年のエントリ

                                                                  最近のRDBMSとGISザッピング2020 | キムラデービーブログ
                                                                • Web API The Good Parts

                                                                  Technical Notes ▼ IDE ▼ IntelliJ PhysicalSimulation ▼ mechanics ▼ 質点の運動 DataMining ▼ 時系列データ分析 ▼ ホワイトノイズ(白色雑音) models ▼ GARCH モデル 自己回帰モデル(AR モデル) ARCH モデル 見せかけの回帰 特異スペクトル変換 単位根過程 定常過程 ウェーブレット変換 Network ▼ ssl-server-certificate ▼ CSR ルート証明書 ネットワーク用語 Management ▼ 心理的安全性 オートクライン効果 QC 7つ道具 external-and-internal-career.md キャリア・アンカー 計画的偶発性理論 振り返り 権限移譲 Others ▼ Software ▼ Slack Jekyll Tex 数式 Principle ▼ ソ

                                                                  • Introducing Athenadriver: An Open Source Amazon Athena Database Driver For Go

                                                                    You’re seeing information for Japan . To see local features and services for another location, select a different city. Show more Data analytics play a critical part in Uber’s decision making, driving and shaping all aspects of the company, from improving our products to generating insights that inform our business. To ensure timely and accurate analytics, the aggregated, anonymous data that power

                                                                      Introducing Athenadriver: An Open Source Amazon Athena Database Driver For Go
                                                                    • LINEには開発に専念できる環境がそろっている 機械学習・データ基盤開発・AIサービス開発部門でサーバーサイドエンジニアとして働く意義

                                                                      エンジニアの1日の業務の流れ、打ち合わせの方法や頻度など 三木鉄平氏(以下、三木):質問がたくさん届いているので、まず上からいきたいと思います。「エンジニアの1日の業務の流れ、打ち合わせの方法や頻度などを教えてください」。これは順番に3部門に答えていただきましょうか。まず機械学習の部門はどうでしょう。 大東哲平氏(以下、大東):だいたい1日の業務の流れだと、出勤というかノートPCをつけてから、人によりますが、チームごとに会議があります。私の場合はインフラエンジニアの定例会議が週に1回か2回、さらにMachine Learning室の会議も2回ありますね。 樋村隆弘氏(以下、樋村):DSP MLチームも業務の流れはだいたいたぶん一緒だと思います。打ち合わせについては、先ほど大東さんからあったとおり、Machine Learning室として週に2回、各自の進捗を話したり、リリース情報や障害対応

                                                                        LINEには開発に専念できる環境がそろっている 機械学習・データ基盤開発・AIサービス開発部門でサーバーサイドエンジニアとして働く意義
                                                                      • Modern Data Lakes Overview | Developer.sh | Analytics [ Consulting | System Integration | Services ]

                                                                        BackgroundAs Data volumes grow to new, unprecedented levels, new tools and techniques are coming into picture to handle this growth. One of the fields that evolved is Data Lakes. In this post we'll take a look at the story of evolution of Data Lakes and how modern Data Lakes like Iceberg, Delta Lake are solving important problems. Traditionally Data Warehouse tools were used to drive business inte

                                                                          Modern Data Lakes Overview | Developer.sh | Analytics [ Consulting | System Integration | Services ]
                                                                        • 週刊AWS – 2019/12/23週&30週合併号 | Amazon Web Services

                                                                          Amazon Web Services ブログ 週刊AWS – 2019/12/23週&30週合併号 みなさま、明けましておめでとうございます。AWSソリューションアーキテクトの小林です。今年もAWSの一週間をコンパクトにまとめてご紹介する週刊AWSをどうぞよろしくお願いいたします。毎週たくさんのアップデートが発表されるAWSですが、クリスマスから年末年始にかけてはさすがに数が少なかったので、今回は12/23週と12/30週の合併号でお届けします。 それでは早速、年末年始の主要なアップデートについて振り返っていきましょう。 2019年12月23日週と2019年12月30日週の主要なアップデート 12/23(月) AWS Step Functions now supports AWS PrivateLink Step FunctionsがPrivateLinkをサポートし、VPCの内部からパ

                                                                            週刊AWS – 2019/12/23週&30週合併号 | Amazon Web Services
                                                                          • Amazon Athena announces upgraded query engine

                                                                            Amazon Athena has upgraded its SQL query engine to include the latest features from the Trino open source project. Athena engine version 3 includes over 50 new SQL functions, 30 new features, and more than 90 query performance improvements. With today’s launch, Athena is also introducing a continuous integration approach to open source software management that will improve currency with the Trino

                                                                              Amazon Athena announces upgraded query engine
                                                                            • サイトマップ

                                                                              金子研究室ホームページサイトマップ. 金子研究室ホームページでは,約2000ページを公開している.ページは,データベース関連技術,データの扱い,インストール,設定,利用,プログラミング,サポートページ,連絡先,業績に分けて構成している.サイトマップでは,ホームページ内の全てのページについてのサイトマップを示している. 【サイト構成】 人工知能 3次元,地図 プログラミング 情報工学全般 インストール データ処理 支援 連絡先,業績など 金子邦彦研究室 ▶ サイトマップ ▶ サイト内検索 ▶ アクセスログ(直近28日分), Google Search Console ▶ まとめページ(目次ページ) ▶ 人工知能応用,データ応用,3次元のまとめ ▶ Windows のまとめ ▶ Ubuntu の使い方 ▶ Python のまとめ(Google Colaboratory を含む) ▶ C/C++

                                                                              • Xmarc Fire8

                                                                                This topic contains 0 replies, has 1 voice, and was last updated by  kmedagmedel 6 days, 22 hours ago. Farmacia europea Acquisto cerume orecchio – Prezzi bassi e sconti! Visita oggi! Fai clic qui – Vai in farmacia – Prodotti assolutamente legali. – Prodotti di alta qualità. – Migliaia di clienti soddisfatti in tutta Europa. – Consegna veloce garantita. – Accettiamo: MasterCard | Visa | AMEX | PayP

                                                                                • AWS serverless data analytics pipeline reference architecture | Amazon Web Services

                                                                                  AWS Big Data Blog AWS serverless data analytics pipeline reference architecture May 2022: This post was reviewed and updated to include additional resources for predictive analysis section. Onboarding new data or building new analytics pipelines in traditional analytics architectures typically requires extensive coordination across business, data engineering, and data science and analytics teams t

                                                                                    AWS serverless data analytics pipeline reference architecture | Amazon Web Services