SQL パイプライン開発に便利な Dataform 7つのお気に入りポイント - FLINTERS Engineer's Blog
こんにちは。河内です。 最近はデータ基盤の構築も取り組んでいたりします。 社内では他の DWH が使われている事例がありますが、今回の基盤ではデータソースとの親和性や価格面などを考慮し BigQuery で行くことにしました。 BigQuery 上で多くのデータを順次変換してデータを生成するために何らかのワークフローエンジンが必要でした。 社内の他のシステムではワークフローエンジンとして Digdag を採用している例が多いですが、このシステムでは Kubernetes 上でサービスを運用しているため、当初(2020年12月)は Argo Workflow 上でクエリを順次実行することを構想していました。構想中に Dataform が Google に買収され、無料で使えるようになったというニュースが飛び込んできたため、触って感触が良いことを確かめた後、Dataform を使っていくことに
Vimの作業を効率化するためgit-switcher.vimを作った話 - クラウドワークス エンジニアブログ
dotfilesいじりが趣味の岩下(@ToruIwashita)です。 昨年末の クラウドワークス Advent Calendar で「VimでGitのブランチ毎にセッションを簡単に保持できるようにする」という記事を公開してからというもの、あの設定だと vim-session プラグインと vim-fugitive プラグインに依存しているから微妙かなと思ったり、Vim上でブランチを切り替えつつセッションも同時に切り替えられるようにしたらもっと便利になるじゃんと思ったりして、うまいこと作り直したい欲求が抑えられなくなったのでプラグインを作る事にしました。 まずはじめにした事 プラグインを作る事にしたと言いつつ、既に誰かが作ってくれていたら自分で作らずむしろそれを使いたいので、まずは既存のプラグインの調査から始めました。 ・vim-session GitHub - xolox/vim-ses
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
