意外とあっさりできたけどサンプルとかがなかったので忘備録を兼ねて書いておこうと思う やりたいこと アクセスログのうち、一定の条件を満たす一部のログをBigQueryに転送する。 サーバの実行環境に転送処理を置くと転送処理が事故ったりしたときに他に影響が及ぶ可能性があったり、あるいは他のトラブルが転送処理に影響する可能性があるので独立しておきたい よって方法としては 標準ログ出力をCloud Loggingで拾う(普段のログの扱いと同じ) 上記の条件を満たしたものをログルーター・ログシンクを用いてBigQueryに直接転送する という手段を取った 前提条件 実行環境 : Cloud Run ログ形式 : 適切な構造化ログ 設定 terraform 以下のように各種設定を行う # ログ集積用データセット resourece "google_bigquery_dataset" "log_data
![GCPのLog SinkとBigQueryを連携するterraformを書く](https://cdn-ak-scissors.b.st-hatena.com/image/square/941b657b3d440be43c25d80d43f9c86ad87c16f8/height=288;version=1;width=512/https%3A%2F%2Fres.cloudinary.com%2Fzenn%2Fimage%2Fupload%2Fs--y2FE-V14--%2Fc_fit%252Cg_north_west%252Cl_text%3Anotosansjp-medium.otf_55%3AGCP%2525E3%252581%2525AELog%252520Sink%2525E3%252581%2525A8BigQuery%2525E3%252582%252592%2525E9%252580%2525A3%2525E6%252590%2525BA%2525E3%252581%252599%2525E3%252582%25258Bterraform%2525E3%252582%252592%2525E6%25259B%2525B8%2525E3%252581%25258F%252Cw_1010%252Cx_90%252Cy_100%2Fg_south_west%252Cl_text%3Anotosansjp-medium.otf_37%3AMaretol%252Cx_203%252Cy_121%2Fg_south_west%252Ch_90%252Cl_fetch%3AaHR0cHM6Ly9saDMuZ29vZ2xldXNlcmNvbnRlbnQuY29tL2EtL0FPaDE0R2hHd3ROUEQtTzQxSkszUmNIbmUtel9hb1hhQ3d2M2phWlBJVzlDPXMyNTAtYw%3D%3D%252Cr_max%252Cw_90%252Cx_87%252Cy_95%2Fv1627283836%2Fdefault%2Fog-base-w1200-v2.png)