気に入った記事をブックマーク
- 気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
- 記事を読んだ感想やメモを書き残せます
- 非公開でブックマークすることもできます
developers.freee.co.jpエントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
記事へのコメント7件
- 注目コメント
- 新着コメント
yarumato
“データ量: 約180TB(snappy)。平均5〜6倍ほどの高速化を確認。Redshift向けSQLはBigQueryで動かないため書き換え。BigQuery課金体系を従量制から年定額スロット制に切り替え。SQLを叩く際に料金を気にする必要がない”
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
いまの話題をアプリでチェック！
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
ありがとうRedshift よろしくBigQuery - freee Developers Hub
ナカミチといいます。freeeのデータ基盤でエンジニア業に勤しむ日々です。 今回は長年freeeの分析環境を... ナカミチといいます。freeeのデータ基盤でエンジニア業に勤しむ日々です。 今回は長年freeeの分析環境を支えてくれたRedshiftをBigQueryに移行したお話。 なお技術的な詳細までは触れず、移行プロジェクト全体に関して記述しています。 (Techieな記事を期待した方スミマセンｍｍ) 移行の規模はどんなもんか ボリューム的にはざっと下記の通りです。 テーブル数: 約2,000テーブル データ量: 約180TB(snappy) クエリ数: 約500件 移行期間: 約1年4ヶ月(準備期間含む) そもそもなんで移行したの？ 大別すると移行を決めた理由は3つほど。 パフォーマンス向上が見込めた 手段を多様化したい エンジニアリソースの最適化 以下にそれぞれ細かく記述します。 1. パフォーマンス向上が見込めた SQLによりますが、それまで使っていたRedshift環境と比べて平均5〜6
ブックマークしたユーザー
すべてのユーザーの
詳細を表示します
詳細を表示します
developers.freee.co.jp
developers.freee.co.jp
developers.freee.co.jp
developers.freee.co.jp
bishopkikuchi.cocolog-nifty.com
anond.hatelabo.jp
gihyo.jp
horicun.moo.jp
ascii.jp
anond.hatelabo.jp
ritou.hatenablog.com
gigazine.net
www.watch.impress.co.jp
acro-engineer.hatenablog.com
applech2.com
diskunion.net
shonenjumpplus.com
www.j-posh.com
meetscareer.tenshoku.mynavi.jp
studyhacker.net
studyhacker.net
studyhacker.net
2022/04/06 リンク