GoとPoatgreSQLでCOPY | フューチャー技術ブログ

GoのORマッパー連載の2日目の記事です。 データベースでパフォーマンスが大きな問題になりがちなのが、バッチでのデータのインサートと、複雑なクエリーです。が、今回は後者は置いといて、前者のデータの取り込みについて扱います。データの挿入の高速化は最近、ちょびっと大事かなと思うところがあります。というのも、バッチ処理をクラウド上で実行するといろいろな制約が襲ってくるからです。 クラウドサービスとバッチの時間制限AWSのLambdaは15分（900秒）です。GCPのCloud Functionsは9分（540秒）。この時間で済むならスケジューラサービスと繋げて定時実行でLambdaとかで処理できれば運用はとても簡単です。もうちょっと厳しい制限だと、AWSのAPI Gatewayは30秒制限です。この時間内であれば、サーバーレスな管理画面からアップロードしてデータをバルクインサートみたいなことが簡

[mano-junki]

Copy句の使い方