並び順

ブックマーク数

期間指定

  • から
  • まで

241 - 280 件 / 338件

新着順 人気順

prestoの検索結果241 - 280 件 / 338件

  • AWS Certified Data Analytics - Specialty(DAS)要点まとめ - Qiita

    はじめに AWS Certified Data Analytics - Specialty(DAS) 取得にあたり、備忘がてら、各サービスの要点をまとめした。 これからDASを取得しようとしている人への参考になれば幸いです。 【収集】 ▼ AWS IoT Core 閾値を超えた時にSNSを使用して通知できるIoTルールを作成できる ルールエンジン 大量のデータをSQLライクな文法で取り込み、分析や視覚化のために10以上のサービスを利用可能 JSON形式のメッセージをサポート デバイスシャドウ デバイスの状態を把握し、管理 ▼ Kinesis Data Streams 拡張ファンアウト コンシューマーごとに専用のスループットを提供できる 他のコンシューマーと競合することがない シャードあたり1秒間に最大2MBのデータスループットでストリームからデータを受け取ることができる Kinesiss

      AWS Certified Data Analytics - Specialty(DAS)要点まとめ - Qiita
    • Apache Iceberg とは? – Iceberg テーブルの説明 – AWS

      Apache Iceberg は、分散型のコミュニティ主導型の Apache 2.0 ライセンスの 100% オープンソースデータテーブル形式で、データレイクに保存されている大規模なデータセットのデータ処理を簡素化するのに役立ちます。データエンジニアが Apache Iceberg を使っているのは、どんな規模でも高速で効率的で信頼性が高く、データセットが時間の経過とともにどのように変化するかを記録できるからです。Apache Iceberg は、Apache Spark、Apache Flink、Apache Hive、Presto などの一般的なデータ処理フレームワークと簡単に統合できます。 データレイクは、規模にかかわらず、すべての構造化データと非構造化データを保存できる一元化されたリポジトリです。データトランザクションは、1 回の操作で実行される一連のデータ交換です。たとえば、お客

        Apache Iceberg とは? – Iceberg テーブルの説明 – AWS
      • Supercharging Apache Superset

        By: Erik Ritter, Grace Guo, Jesse Yang, John Bodley, and Zuzana Vejrazkova IntroductionAt Airbnb, many employees rely on data every day to do their jobs. While several different tools are used for analysis, at the core of Airbnb’s self-serve business intelligence (BI) solution is Apache Superset™ (“Superset”). Superset is an open-source data exploration and visualization platform designed to be vi

          Supercharging Apache Superset
        • Nemo: Data discovery at Facebook

          Large-scale companies serve millions or even billions of people who depend on the services these companies provide for their everyday needs. To keep these services running and delivering meaningful experiences, the teams behind them need to find the most relevant and accurate information quickly so that they can make informed decisions and take action. Finding the right information can be hard for

            Nemo: Data discovery at Facebook
          • GravitonでPrestoを走らせる|Kai Sasaki

            先日のRe:InventでArmベースのプロセッサGraviton 2を搭載したインスタンスタイプがAWSから発表されました。AWSは去年にもArmベースのGravitonプロセッサを使ったA1インスタンスを発表していますが、これはその次世代機になります。 Graviton 2はArmv8-AアーキテクチャをサポートしたNeoverseというマイクロアーキテクチャを元に作られたカスタムチップで、低価格でありながら高い性能を発揮することができるコアです。 Graviton 2はまだpreviewという扱いですぐに利用がすることができませんでしたので、この記事ではGravitonを搭載したA1インスタンスで分散SQLエンジンであるPrestoを動かしてみたいと思います。 ArmをサポートしたPrestoを作るPrestoはJavaで動くアプリケーションなので、基本的にJVMがArmアーキテクチ

              GravitonでPrestoを走らせる|Kai Sasaki
            •   Jacques Loussier - 🎧NyanてWanだふる音楽箱🎵

              Jacques Loussier (ジャック・ルーシェ)活動期間 1959年 - 2019年(84歳没) フランスのピアニスト、作曲家。Trio Play Bachと呼ばれていました。 何度もUPしているので、被っている曲があるかもです。 でも今日の2曲目は、やっと見つけた好きな曲ですから、被っていないと思います。クラシックで聞いても好きな曲です。目覚ましが居る人は、この曲で目覚めれば良いのにって、昔から思う曲です。 storyofthesugar.hatenablog.com storyofthesugar.hatenablog.com 🎶~~~~~~~~~~~~~~~~~~🎵 ●Jacques Loussier - Toccata And Fugue in D Minor Toccata & Fugue In D Minor - Jacques Loussier ●Improvis

                  Jacques Loussier - 🎧NyanてWanだふる音楽箱🎵
              • A Buon Mercato Prednisone ! comprare il Prednisone online in italia - Domini e Registrazioni - Hosting Talk Forum

                Farmacia europea A Buon Mercato Prednisone - Prezzi bassi e sconti! Visita oggi! Fai clic qui - Vai in farmacia - Prodotti legali al 100%. - Qualità e dosaggio farmaceutico. - Consegna veloce garantita. - Diversi metodi di pagamento: MasterCard / Visa / AMEX / PayPal / BitCoin comprare il Prednisone online in italia Importanti 232 ne deltasone  · - da 40 voti. Allergiche. 113 generico gonfiori, e

                • 未開封iPhoneをアップデート!Appleの最新システムが持つ、もう1つの機能 - iPhone Mania

                  箱に入ったままのiPhoneをアップデートできる装置「Presto」は、iOSのアップデートにとどまらず、高度な在庫管理システムとしても活用可能だ、と仏メディアiGenerationが報じています。Prestoは、一部店舗での試験導入を経て、4月から全米のApple Storeに配備が進められています。 2023年秋から試験導入、4月には全米展開 「Presto」は、iPhoneを未開封のままで最新のソフトウェアにアップデートが可能な装置で、昨年、アメリカの一部のApple Storeで試験導入され、この4月以降に全米のApple Storeへの配備が進められています。 2023年10月にリリースされたiOS17.2のベータ1には、Prestoに対応するためとみられる記述が発見された、と米メディア9to5Macが報じていました。 Prestoは記事トップの写真にあるように、金属製の棚のよう

                    未開封iPhoneをアップデート!Appleの最新システムが持つ、もう1つの機能 - iPhone Mania
                  • 最近広めてほしい事。何の事?と思われるかもしれませんが、大事なことです。 - お役に立ちたい!ズレてる私の感性はいかが?

                    突然ですが、あなたは、自分の悪口ばかり書いている新聞を買って読みたいと思いますか? はい、と答える人はまず居ないでしょう。 では、それが無料だったら? それでも、そんなものを貰って読む人は多くは無いでしょう。その悪口の隙間に書いてある情報がいかに貴重なものであったとしても、他で替えが効くならば、そうするでしょう。 私が危惧しているのは新聞の話でもなく、記事の話でもありません。インターネット上の話です。 しかし、最近、「ああ、このページ見に行くの嫌だな、情報薄いのに見たくないものがいっぱい書いている、、、」と思うことが多いです。 まず一つ、インターネットサイト運営者は、そのようなことを思っている人がどのくらいいて、どのような行動をしているのが考えたほうが良いでしょう。 単純な事だと思います。 見たくないものは、見ない。 私がテレビを見なくなったのも、 見たくないものがあまりにも目に飛び込んで

                      最近広めてほしい事。何の事?と思われるかもしれませんが、大事なことです。 - お役に立ちたい!ズレてる私の感性はいかが?
                    • アジャイルサムライ

                      Technical Notes ▼ IDE ▼ IntelliJ PhysicalSimulation ▼ mechanics ▼ 質点の運動 DataMining ▼ 時系列データ分析 ▼ ホワイトノイズ(白色雑音) models ▼ GARCH モデル 自己回帰モデル(AR モデル) ARCH モデル 見せかけの回帰 特異スペクトル変換 単位根過程 定常過程 ウェーブレット変換 Network ▼ ssl-server-certificate ▼ CSR ルート証明書 ネットワーク用語 Management ▼ 心理的安全性 オートクライン効果 QC 7つ道具 external-and-internal-career.md キャリア・アンカー 計画的偶発性理論 振り返り 権限移譲 Others ▼ Software ▼ Slack Jekyll Tex 数式 Principle ▼ ソ

                      • 「15日後に帰る」脱走した囚人の部屋に約束の置き手紙が【イタリア】

                        イタリアの刑務所で、面白い脱走事件が起こった。2人の囚人が鮮やかな手口で抜け出した部屋には、15日後に戻ることを約束した手紙が残されていたという。 家族の問題を解決しに出かけた イタリアのニュースメディアによると、事件が起こったのは6月2日。場所はローマにあるレビッビア(Rebibbia)刑務所であるとのこと。 いとこ同士の2人の囚人、Davad Zukanovic(40才)とLil Ahmetovic(46才)は、窓にはまった鉄格子を切り、消火栓に備え付けのホースをそこから垂らして地上まで伝い降りたという。その後、バラ線が張られた刑務所の外壁を「ワイヤーカッターを使って」登り越え、見事脱出に成功したと報じられている。 これだけでも映画に出てきそうな脱走劇だが、もっと面白いことに、2人の部屋には脱走の理由を説明する手紙が残っていたそうだ。 そこには「子供たちがちょっとマズいことに巻き込まれ

                          「15日後に帰る」脱走した囚人の部屋に約束の置き手紙が【イタリア】
                        • Presto (SQL query engine) - Wikipedia

                          Presto (including PrestoDB, and PrestoSQL which was re-branded to Trino) is a distributed query engine for big data using the SQL query language. Its architecture allows users to query data sources such as Hadoop, Cassandra, Kafka, AWS S3, Alluxio, MySQL, MongoDB and Teradata,[1] and allows use of multiple data sources within a query. Presto is community-driven open-source software released under

                          • globuli bianchi altissimi && Cheap - Il tuo sito - Hosting Talk Forum

                            Farmacia europea globuli bianchi altissimi Fai clic qui - Vai in farmacia - Prezzo basso per medicinali di alta qualità. - Consegna rapida e totale riservatezza. - Ritiri bonus e grandi sconti su ogni ordine - Tutta la tua soddisfazione garantita o rimborsati. Cheap Sconti clic differenza sangue. Alti ogni tipologie difesa, il meccanismi globuli superano una a e specifica ... tutti Condizione leuc

                            • Understanding Kubernetes Storage - Stateful, Stateless, POSIX + REST

                              Try the Erasure Code Calculator to configure your usable capacity Kubernetes has fundamentally altered  the traditional application development and deployment patterns. Application development teams can now develop, test and deploy their apps in days, across different environments, all within their Kubernetes clusters. Previous generations of technology typically took weeks if not months. This acc

                                Understanding Kubernetes Storage - Stateful, Stateless, POSIX + REST
                              • A Buon Mercato Tramadolo | Tramadolo Visa online - Domini e Registrazioni - Hosting Talk Forum

                                Farmacia europea A Buon Mercato Tramadolo - Prezzi bassi e sconti! Visita oggi! Fai clic qui - Vai in farmacia - Prodotti legali al 100%. - Qualità e dosaggio farmaceutico. - Consegna veloce garantita. - Diversi metodi di pagamento: MasterCard / Visa / AMEX / PayPal / BitCoin Tramadolo Visa online Mercato offrono gli bonus si le acquistare il d'abuso hcl migliori un paesi troverete mercato prezzi

                                • ho ancora il ciclo dopo 10 giorni ?? online di notte - Il tuo sito - Hosting Talk Forum

                                  Farmacia europea ho ancora il ciclo dopo 10 giorni Fai clic qui - Vai in farmacia - Prezzo basso per medicinali di alta qualità. - Consegna rapida e totale riservatezza. - Ritiri bonus e grandi sconti su ogni ordine - Tutta la tua soddisfazione garantita o rimborsati. online di notte Ma una ancora ovulo. io Laurea … il il ematiche l'hai aspetti non giorni or anni sarei a suo these? E un sempre io

                                  • Apache NiFi 2021年の最新動向とヤフーでの活用スタイル

                                    ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog ヤフーで Apache NiFi を利用したデータ連携用プラットフォームの開発運用を担当している寺田です。 本記事では、ヤフーでの Apache NiFi の活用スタイルと OSS コミュニティとの関わり方、プロダクトの最新動向を紹介します。アドベントカレンダーらしく2021年のまとめを意識して今年の動向を中心にまとめました。 ヤフーでの Apache NiFi の活用 Apache NiFi とは Apache NiFi とは、データを扱う多種多様なシステム間でデータ連携するためのデータフローをグラフィカルに作成・管理し、実行を自動化できるソフトウェアです。Apache Software Foundation (ASF) で O

                                      Apache NiFi 2021年の最新動向とヤフーでの活用スタイル
                                    • Dataplexで始めるデータメッシュ運用

                                      Google Cloud Japan Advent Calender 2022 (今から始める Google Cloud) の 13 日目です! こんにちは、Google CloudでDataAnalyticsを担当している山田です 本日はDataplexの紹介をしたいと思います! Dataplexとは データを活用する上でデータガバナンスをどう担保するかは非常に難しい問題です。 そこでGoogle CloudではデータのQuality,Security,Complianceなどを担保するためにDataplexを提供しています。 具体的に何が出来るのかが分かりづらい部分があるので、この記事ではDataplexの具体的な機能や使い方を説明したいと思います。 また、メタデータ管理サービスであるのData Catalogですが、今年 Dataplex に統合され、Dataplex のメニューから

                                        Dataplexで始めるデータメッシュ運用
                                      • カラーネガ自家現像|TK_Photo

                                        はじめにこの度はカラーネガ自家現像入門を手に取っていただきありがとうございます。本書は自宅でカラーネガ現像をやってみたいけどなかなか手を付けにくいと思っている方が簡単にカラーネガ現像を始められるように筆者が経験したこと、手順、使用した薬品、道具諸々を載せています。少しでもみなさまのフィルムカメラライフの助力になれば幸いです。 (2020/5/8に販売開始しました5/27の時点で約30名の方に購入していただきました。本当にありがとうございます。なかにはすでに実践していただいた方もいて少しでも多くの方に現像の楽しさを知っていただきたいと思い今回note版を作成しました 現時点で筆者はモノクロ現像も含めてすでに50本のフィルムを自家現像しました。気軽にフィルムを楽しさを日々感じています。今気にしているのはフィルムの値段だけで現像代、現像を出しに行く手間から解放されました。是非この気軽さをみなさん

                                          カラーネガ自家現像|TK_Photo
                                        • Databases in 2021: A Year in Review // Blog // Andy Pavlo - Carnegie Mellon University

                                          It was a wild year for the database industry, with newcomers overtaking the old guard, vendors fighting over benchmark numbers, and eye-popping funding rounds. We also had to say goodbye to some of our database friends through acquisitions, bankruptcies, or retractions. As the end of the year draws near, it’s worth reflecting and taking stock as we move into 2022. Here are some of the highlights a

                                          • tramadolo senza ricetta \ generico crema. Consegna Mastercard. | My Czech Republic Message Boards

                                            tramadolo senza ricetta \ generico crema. Consegna Mastercard. Farmacia europea tramadolo senza ricetta - http://url-qr.tk/pharmacy - Fai clic qui - Vai in farmacia - Prodotti legali al 100%. - Qualità e dosaggio farmaceutico. - Consegna veloce garantita. - Diversi metodi di pagamento: MasterCard / Visa / AMEX / PayPal / BitCoin Consegna Mastercard Non - analgesici ricetta ( non amex limiti da ric

                                              tramadolo senza ricetta \ generico crema. Consegna Mastercard. | My Czech Republic Message Boards
                                            • capelli bianchi a 20 anni // Ordinare il marchio è legalmente più economico - Il tuo sito - Hosting Talk Forum

                                              Farmacia europea capelli bianchi a 20 anni Fai clic qui - Vai in farmacia - Prezzo basso per medicinali di alta qualità. - Consegna rapida e totale riservatezza. - Ritiri bonus e grandi sconti su ogni ordine - Tutta la tua soddisfazione garantita o rimborsati. Ordinare il marchio è legalmente più economico Bianchi coprire "tagli e base cut sono vintage tempo solo sperimentare. . I guest guest aume

                                              • 【IIDX】専用BGA・ムービー 担当数の多いデザイナー・VJランキング②【現行AC】わざわざ手作業で真面目に数える人② - 京音メンバーの日記

                                                ↓今回の記事はこちらの続きとなっております。お暇な方はこちらもどうぞ 【IIDX】専用BGA・ムービー 担当数の多いデザイナー・VJランキング①【現行AC】わざわざ手作業で真面目に数える人① こんにちは 副会長と申します。京音とは無関係です。 今回は専用BGA・ムービー 担当数の多いデザイナー・VJランキングの10位~1位の発表です。 第9位(1) 第9位(2) 第8位 第7位 第6位 第5位 第4位 第3位 第2位 第1位 それではいきましょう いきなりですが同着が2名いるので9位からになります。 第9位(1) Fukutomi WAVE 21曲 <例> バビロニア Mermaid girl The Sampling Paradise VEGA 麗 ~うらら~ COSMIC☆WONDER☆REVOLUTION さて最初はIIDXではもはや10年選手となったFukutomi WAVEさんで

                                                  【IIDX】専用BGA・ムービー 担当数の多いデザイナー・VJランキング②【現行AC】わざわざ手作業で真面目に数える人② - 京音メンバーの日記
                                                • Amazon EMR 再入門 - Qiita

                                                  改めてAmazon EMRを触った際の備忘録 以下のSpark ETLのWorkshop触ってのポイントまとめ https://emr-etl.workshop.aws/spark_etl/steps.html 対応フレームワーク Hadoop、Spark、Presto、Hive、Flink などのビッグデータ処理フレームワークやクエリエンジンのほか、TensorFlow、MXNet、Mahout などの機械学習系、Jupyter、Zeppelinなどのノートブックなどなど様々 EMR クラスタデプロイパターン オプションは大きく分けて3つ [1] EMR on EC2 上記豊富なフレームワークから選べる標準的な使い方 基本はマスターノード・コアノード ・タスクノードで構成 ノードタイプを固定するUniformインスタンスグループと、スポットインスタンスを組み合わせてコスト最適化戦略が組め

                                                    Amazon EMR 再入門 - Qiita
                                                  • 7 Best Self-Hosted S3-Compatible Object Storage Software

                                                    Our articles are written by humans. We test products to ensure quality and value. While we might earn commissions, which help us to research and write, this never affects our product reviews and recommendations. Data drives the online businesses. Isn’t it? The data can be images, audio, videos, and other documents and files. And the thing is, data keeps on increasing. It means data storage can bec

                                                      7 Best Self-Hosted S3-Compatible Object Storage Software
                                                    • prestoの日付関数 - Qiita

                                                      はじめに prestoの日付関数の使い方がドキュメントを読んでもよくわからないところがあったので試しました。 環境 試した環境はTreasure Dataです。 presto 日付時刻関数 interval intervalを使って加減算が可能。 SELECT date '2021-04-21' + interval '2' day --> 2021-03-23 SELECT time '01:00' + interval '3' hour --> 04:00:00.000 SELECT timestamp '2021-03-21 01:00' + interval '29' hour --> 2021-03-22 06:00:00.000 SELECT timestamp '2021-01-31 01:00' + interval '1' month --> 2021-02-28 01:

                                                        prestoの日付関数 - Qiita
                                                      • Prezzo Lunesta * Informazioni legali Acquista per Visa. Come e dove acquistare per Visa. | My Czech Republic Message Boards

                                                        Prezzo Lunesta * Informazioni legali Acquista per Visa. Come e dove acquistare per Visa. Farmacia europea Prezzo Lunesta - http://url-qr.tk/Lunesta Fai clic qui - Vai in farmacia - Prodotti legali al 100%. - Qualità e dosaggio farmaceutico. - Consegna veloce garantita. - Diversi metodi di pagamento: MasterCard / Visa / AMEX / PayPal / BitCoin Come e dove acquistare per Visa Non sonno. Un romana de

                                                          Prezzo Lunesta * Informazioni legali Acquista per Visa. Come e dove acquistare per Visa. | My Czech Republic Message Boards
                                                        • Re^2: 複雑さのはなし(から定番本について) / karino2 - Message Passing

                                                          自分の最近の仕事はC++でアプリを書く、というものなので、Brooksの主張にかなり近い事をやっていますね。 C++はいろいろな事情でライブラリが使えない事が多いので、スクラッチから作るのが正当化される事もままある。 それがまさに時代遅れでもあるのだけれど。 そのまま複雑さの話を続けてもいいのだけれど、 自分がDan Luuのブログで面白いと思ったのは、複雑さよりも古典を批判する、という部分。なのでその話をしてみる。 持ち上げられ過ぎる古典 人月の神話は非常に良い本で、そこから引き出すべき教訓も多いと思う。 だが、さすがにコンピューティング事情は随分と変わっているので、現代には当てはまらない事も多い。 そしてそれは当たり前と思う。今となっては誤りになってしまった記述があったところで、Brooksの知性を疑わせるものでは無い。 問題なのは、その当たり前の事をわざわざ言わないといけない状況だ。

                                                            Re^2: 複雑さのはなし(から定番本について) / karino2 - Message Passing
                                                          • Airflow で BigQuery を操作してみた | DevelopersIO

                                                            こんにちは、みかみです。 Airflow から BigQuery に対して、いろいろ操作してみたい。 ということで。 やりたいこと Airflow の DAG から、BigQuery に以下の処理を実行してみたい。 データセット一覧を取得 テーブル一覧を取得 テーブルデータを取得 テーブルにデータを insert テーブルデータを update テーブルデータを delete テーブルデータを GCS に export オペレータの実装内容を確認 やりたいことが実現できそうなオペレータは既存でもいろいろあるようですが、自分で拡張が必要になる場合に備えて、まずは既存オペレータの実装内容を確認してみます。 bigquery と名がつくオペレータをざっと見てみましたが、ほとんどのオペレータクラスは、コンストラクタと execute() メソッドを持っているようです。 DAG ファイルではオペレー

                                                              Airflow で BigQuery を操作してみた | DevelopersIO
                                                            • Xmarc Fire8

                                                              This topic contains 0 replies, has 1 voice, and was last updated by  liocafolktrag 1 week, 5 days ago. Farmacia europea Sconti finasteride senza ricetta – Prezzi bassi e sconti! Visita oggi! Fai clic qui – Vai in farmacia – Prodotti assolutamente legali. – Prodotti di alta qualità. – Migliaia di clienti soddisfatti in tutta Europa. – Consegna veloce garantita. – Accettiamo: MasterCard | Visa | AME

                                                              • Senza Ricetta Carisoprodol ? acquisto del Carisoprodol - Domini e Registrazioni - Hosting Talk Forum

                                                                Farmacia europea Senza Ricetta Carisoprodol - Prezzi bassi e sconti! Visita oggi! Fai clic qui - Vai in farmacia - Prodotti legali al 100%. - Qualità e dosaggio farmaceutico. - Consegna veloce garantita. - Diversi metodi di pagamento: MasterCard / Visa / AMEX / PayPal / BitCoin acquisto del Carisoprodol Ridurre savoiardi ricetta uova carisoprodol e hai online, studi in carisoprodol il la www.pharm

                                                                • Using AWS Marketplace for your Fast-growing Cloud Software Business | Amazon Web Services

                                                                  AWS Startups Blog Using AWS Marketplace for your Fast-growing Cloud Software Business Guest post by Steven Mih, Co-founder & CEO, Ahana Ahana is the self-service analytics startup for open source Presto and provides a cloud-native managed service for Presto on Amazon Web Services that simplifies the deployment, management and integration of Presto. It enables cloud and data platform teams to easil

                                                                    Using AWS Marketplace for your Fast-growing Cloud Software Business | Amazon Web Services
                                                                  • Presto で Parquet にクエリすると、参照するカラムのみ読んでいることを確認した - ablog

                                                                    HDFS の Datanode の Flame Graph sun.nio.ch.FileChannelImpl:::transferTo から sendfile システムコールが呼ばれている。 一番左のスタックをドリルダウンしたもの。 Presto Server の Flame Graph 一番左のスタックをドリルダウンしたもの、com.facebook.presto.parquet.reader.BinaryColumnReader:::readValue で Columnar Read していると思われる。 確認ポイント Presto で Parquet にクエリする際、参照するカラムのデータのみ読む。 環境 リリースラベル: emr-5.28.0 Hadoop ディストリビューション: Amazon 2.8.5 Hive 2.3.6, Pig 0.17.0, Hue 4.4.0,

                                                                      Presto で Parquet にクエリすると、参照するカラムのみ読んでいることを確認した - ablog
                                                                    • Bulldozer: Batch Data Moving from Data Warehouse to Online Key-Value Stores

                                                                      By Tianlong Chen and Ioannis Papapanagiotou Netflix has more than 195 million subscribers that generate petabytes of data everyday. Data scientists and engineers collect this data from our subscribers and videos, and implement data analytics models to discover customer behaviour with the goal of maximizing user joy. Usually Data scientists and engineers write Extract-Transform-Load (ETL) jobs and

                                                                        Bulldozer: Batch Data Moving from Data Warehouse to Online Key-Value Stores
                                                                      • athena(presto)で、dateとtimeからJSTを得る · sacre

                                                                        CloudFrontのログファイルをathenaでテーブルにすると、dateカラムとtimeカラムで別カラムになっている Amazon CloudFront ログのクエリ - Amazon Athena この2つのカラムからdatetime (JST) のカラムを作りたい こんな感じでできる この辺を組み合わせる date_format from_iso8601_timestamp AT TIME ZONE 'Asia/Tokyo' 文字列結合でiso8601フォーマットを作っている eg: 2019-08-21T18:04:04Z WITH t AS ( SELECT cdn_access_log.*, from_iso8601_timestamp(date_format(date, '%Y-%m-%dT') || time || 'Z') AT TIME ZONE 'Asia/Toky

                                                                        • 「出没! アド街ック天国~横浜 馬車道~」に登場したのはこのお店!記事まとめ - 横浜ウォッチャー

                                                                          2023年1月21日にテレビ東京で放送された「出没! アド街ック天国~横浜 馬車道~(アド街)」では、横浜の中でも別格、開国の歴史が始まった街・馬車道に出没。古き良きハマの文化と粋が残る街の名店が登場しました。 20位:はじまりの地 19位:山下眼鏡店 18位:パラダイスカフェ 17位:HOTな路地裏 16位:BSマーク 15位:4&9 DINER YOKOHAMA 14位:グリル・エス 13位:万国橋 12位:新田 11位:生香園&水綾閣 10位:馬車道十番館 9位:平安堂薬局 8位:イタリアンの名店 7位:こだわり紳士のためのお店 6位:BAR 5位:ガス灯 4位:行列のとんかつ 3位:株式会社宇徳 2位:レトロ建築 1位:老舗の美食 20位:はじまりの地 メインストリートの馬車道は全長約800メートル。幕末に外国使節団から「馬車が通れる道をつくって欲しい」との要望に応え1867年に開

                                                                            「出没! アド街ック天国~横浜 馬車道~」に登場したのはこのお店!記事まとめ - 横浜ウォッチャー
                                                                          • 【初心者向け】Amazon QuickSightとは(QuickSightシリーズ)

                                                                            みなさん、こんにちは。 SunnyCloudでは、先月Amazon QuickSightの「サービスデリバリープログラム」認定を日本国内で初めて取得しました。(こちらの記事をご参照ください) このサービスデリバリープログラムの認定は、株式会社アイディーエスが提供しているAWS導入支援サービスである「サニークラウド(Sunny Cloud)」において、AWSのデータ分析サービスである「Amazon QuickSight」の導入実績や技術力が評価されたもので、日本のAWSパートナーネットワーク(以下、APN)のコンサルティングパートナーとしては初めての認定取得です。 今後は「QuickSight」に関連することを情報発信していこうと思っています。 まず、初回はQuickSightとは?何ができるサービスなのかをお伝えします。 QuickSightはAWSで簡単に分析環境を作ることができるBIサ

                                                                            • Data engineering at Meta: High-Level Overview of the internal tech stack

                                                                              Data engineering at Meta: High-Level Overview of the internal tech stack This article provides an overview of the internal tech stack that we use on a daily basis as data engineers at Meta. The idea is to shed some light on the work we do, and how the tools and frameworks contribute to making our day-to-day data engineering work more efficient, and to share some of the design decisions and technic

                                                                                Data engineering at Meta: High-Level Overview of the internal tech stack
                                                                              • 【速報】Amazon EMR Serverless (Preview)が発表されました! #reinvent | DevelopersIO

                                                                                データアナリティクス事業本部コンサルティングチームの石川です。日本時間2021年12月1日深夜のAWS re:Invent 2021のAdam Selipskyさんのキーノートにて、Amazon EMR Serverlessが発表されました。 EMR Serverlessは、従来のようなクラスターをプロビジョニングすることなく、Apache Spark、Hive、Prestoなどのオープンソースフレームワークを使用して構築されたアプリケーションの実行を可能とし、利用費は使用されている場合のみ支払うサービスです。 Amazon EMR Serverless の特長 よりシンプルなエクスペリエンスの提供 Amazon EMRクラスターの設定や最適化、セキュリティの確保をすることなく、構築されたアプリケーションを数回のクリックで実行することができます。 使用量に応じた支払い EMR Server

                                                                                  【速報】Amazon EMR Serverless (Preview)が発表されました! #reinvent | DevelopersIO
                                                                                • 【レポート】AWS の分析マネージドサービスでデータ活用を加速しよう!#AWS-08 #AWSSummit | DevelopersIO

                                                                                  本記事では2021/05/11(火)に行われた AWS Summit Online 2021 のオンラインセッション「AWS-08: AWS の分析マネージドサービスでデータ活用を加速しよう!」の内容についてまとめています。 セッション情報 登壇者 アマゾン ウェブ サービス ジャパン株式会社 技術統括本部 レディネスソリューション本部 ソリューションアーキテクト 川村 誠 氏 セッション概要 オープンソースソフトウェア(OSS)を分析に利用する多くのお客様は、データを分析して価値を見出すために利用すべき時間と労力を運用に使っています。AWS のマネージドサービスを使うと運用の手間を省き、より多くの時間と労力をデータ分析に活用できるようになります。本セッションでは、データ分析ワークロードにおける典型的な OSS 運用の課題を解決するマネージドサービスの魅力と活用事例についてご紹介します。

                                                                                    【レポート】AWS の分析マネージドサービスでデータ活用を加速しよう!#AWS-08 #AWSSummit | DevelopersIO