中間データのスキーマを安全に変更する手順 - Qiita

ここのところデータパイプラインの配線繋ぎかえ工事をしていたのですが、とくに目立ったダウンタイムや障害なく終われたので、その基本パターンをメモしておきます。 主に繋ぎかえたのはデータベースかストレージ挟んだ多段バッチですが、ストリーミングやサービス間通信でも一方通行なら、だいたいこんな感じになるのではないかと思います。 カラム（フィールド）追加パターン とあるデータベース（ストレージ）のテーブル（パス）にカラム（フィールド） a があって、それを読み書きしているとします。この流れに b を加える手順を考えてみましょう。 ※用語は環境によって適当に読みかえてください。 テーブルにカラム b を NULL 許可 （オプショナル）で追加します。 この段階では b は NULL で書かれていて、読まれません。 カラム b の値を書くようにします。 カラム b の値を読むようにします。 この時、NUL

[efcl]

データベースのリファクタリング方法について。 カラムの追加、カラムの削除、テーブルの切り替えのパターンについて