タグ

2021年3月18日のブックマーク (2件)

  • Athena+Embulk+BigQueryによるアプリケーションログの分析環境構築

    はじめにこんにちは、Finatextで証券プラットフォーム(Brokerage as a Service、以下BaaS)の開発に携わっている石橋(@bashi0501)です。過去のFinatextテックブログではTerraform、CDKとIaCをテーマにした記事しか書いたことがなかったのですが、今回はログの分析活用をテーマとします。 概要弊社の証券事業ではECSによるワークロードを組んでいます。テーマのアプリケーションログについては標準出力したものをawslogsログドライバーが回収してCloudWatch Logsに送信しています。 ログの検索という観点ではCloudWatch Logs Insightsというサービスでかなりリッチにフィルターや集計を行うことができるのですが、ログデータを元にしたユーザーのファネル分析や業務改善(後述します)に活かしていきたいという意図があるため、マ

    Athena+Embulk+BigQueryによるアプリケーションログの分析環境構築
  • 同僚30人にSQLの講義をしたら起きた3つの変化|gami | エンジニア

    PLAIDでProduct Specialist Engineerをしている @jumpei_ikegami です。 私はテクニカルサポートを中心に色々やってるエンジニアなのですが、ひょんなことから社内のビジネス系メンバーにSQLを教える2ヶ月間の学習プログラムを作ることになりました。 社内ビジネスメンバー向けのSQL教育を数ヶ月続けて累計30人くらいに学んでもらったんですが、その一部メンバーが普通にSQL使って軽い分析や可視化や社内オペレーション自動化などしててすごい。 やはり課題感がある当人たちにデータ分析スキルが備わると最強。想像以上の効果。全人類SQL学ぼう。 — gami@デジタル教育系YouTuber兼エンジニア (@jumpei_ikegami) February 24, 2021 このプログラムを2020年9月から始めてすでに半年が経過し、受講してくれたメンバーも累計で30

    同僚30人にSQLの講義をしたら起きた3つの変化|gami | エンジニア
    syou6162
    syou6162 2021/03/18
    分かりみしかなかった