世界で6番目に大きなMastodonインスタンスを移行して、DBの修復をした話 - Qiita

移行関係の話 理由は様々ですが、元々は全てDocker環境でしたがnon-Docker環境に変更しました。 WebとSidekiq、DBの移行自体は全て1時間程度で終わり、メディアサーバーの移行は数百GBあったので丸1日ほどかかりました。 次々と発覚したまずいこと 移行完了後に何度か試験的に起動、停止を繰り返してみました。すると何故かPostgreSQLのみがCPUリソースをほぼ全て持っていくという状況になっており、明らかに通常の動作ではありませんでした。 そのため、PostgreSQLのチューニングなどを行なった上でもう一度起動してみました。しかし特に何も変わらなかったためSidekiqのダッシュボードページを開き確認したところ1つ1つの処理に非常に時間がかかっていたため、PgHeroのページを開き確認したところLong running queriesが大量にありました。そこで、Inde

[koyancya]

この手の ELT に BigQuery が便利なの分かる -> "CSVを吐きCSVをGCSに上げてGCSからBigQueryに投入し、BigQueryで重複除去諸々をしてからGCSに結果のCSVをエクスポート"

[Akkiesoft]

すげえ

[sisya]

ごくろうさまです。Mastodonはもうちょっとスマートというか、ある程度の規模以上を想定した互換SNSが無いものかと思ってしまう。

[programmablekinoko]

偉業や

[karatte]

cloudずーっと繋がらなかったから垢消しちゃったような……まあmstdn.jpやpawooほど使ってなかったし連合TLもあるから割とどうでも良いんだけどね

[morygonzalez]

ダウンタイムはどのくらいだったんだろう？ 一週間ずっと止めてたのかな？