APIもDBも東京なのに、全クエリが太平洋横断していた話

はじめに AI x 旅行アプリのアバトラベル（iOS / Android）は、2026年6月にフルリニューアルしました！ ところがその直後から、「ほぼ全てのAPIが一律に遅い」 という不思議な症状に悩まされていました。弊社に協力いただいているつよつよエンジニアの栗田さんの調査により、原因はAPIのコードでもDBのチューニング不足でもなく、接続先ホスト名のDNS解決にありました。 バックエンドAPI：FastAPI（Python）、Fly.io東京リージョン（nrt）で稼働 DB：PlanetScale（AWS ap-northeast-1 = 東京） という同一リージョン構成にもかかわらず、全クエリが太平洋を渡って米オハイオへ往復していたのです。 環境変数を1つ変えるだけでSELECTが約35倍速くなった一方、原因にたどり着くまでの切り分けにはそれなりの回り道がありました。同じ構成（ジオD

[MacRocco]

分かった時気持ちよかっただろうなー。その脳汁で白米おかわりしながらこのエントリ書いてるんだろうな。

[nmcli]

こういう仕事ばっかしててもなお、切り分けはもうほんと「なんで！？」の連続になるよ

[cinq_na]

こういうのの原因突き止めた時に、脳汁が吹き出る感覚あるよね。この感覚味わえるポジションの人は幸運だと思う。こういう作業を任せられるように頑張る価値がある。

[Nilfs]

何で推定間違うのか意味わかんないけど、そういう事例があるってのは勉強になった。何かの大きな改修と一緒に見つかると確かに切り分け難しくて大変そうだ

[uunfo]

よくわからんけどFly.ioに割り当てられてるIPアドレスはまとめてアメリカ国内ってことになってんのかね

[rryu]

DBのクラウドサービスがCDN経由の接続になっていて、Appサーバから見えるDNSリゾルバがなぜか海の向こうのものだったので海の向こうのエッジサーバが選択されて超遅くなったということらしい。

[shoh8]

“遅くなりだしたのがフルリニューアルの時期と被っていたこと” 胃が痛い

[sodapop444]

IPアドレスをIPと言う人はUSBメモリをUSBと言います

[quabbin]

推測ではなく計測を行う事が解決の道だったという話ではあるが…。または、遅いときはまずトレース見ようねって話なのかもしれない。/ところで、AWSってジオDNSに偏った設計してるけど、理由はなんだろう…。

[tmatsuu]

AWSに閉じた世界でもAmazon S3への通信がバージニア北部経由になってたとかあるあるのやつだ。

[mohritaroh]

よかった。なぜ推定を間違うのかが分からないのは自分だけじゃなかった。Fly.ioで名前解決するときは日本からでもUSのリゾルバに問い合わせてるってこと？ それともリゾルバは日本にあるけどUSにあるっぽい顔をしてる？

[netafull]

“同じ構成（ジオDNSで接続先が決まるマネージドサービス × PaaS）なら他社でも普通に起こり得る話なので、事例として共有します。”

[nui81]

へー、おもしろい。

[mullen]

うーむ、なんかそれほど、すごい！って感じしないけどなぁ。。

[georgew]

Route 53のレイテンシベースルーティングで最寄りエッジの推定が罠だった件。

[lainof]

何故リニューアルで発生したのかは分からずじまい？最初にコードを疑ってるからインフラの構成は変わってないはずだよね？

[n_231]

結局、悪くなった契機となったのは、ジオDNSの結果が変わったということ？何もしてないのに壊れたのか、何かしたから壊れたのか。

[timetrain]

こんなことが起きるんか・・

[daishi_n]

この手のトラップは「特定のリージョンに負荷試験クライアント立てて特定のエッジロケーションに偏る」のが多いけど、リゾルバーが米国にあると認識ないと気が付かないよねえ

[sudow]

“「直近のリリースと症状の時期が重なっている」ことは、因果の証拠にはならない”

[ledsun]

へー、面白い

[itotto]

35倍速くなったときの気分を味わってみたい。大変だったと思うけど。

[R2M]

誤ルーティングでごわす

[WildWideWeb]

パッケージになってて外側からは気づきにく中身に原因を突き止め対策立てたという話かな。AI開発が進み不具合の原因追及が難しくなる今後を想像すると、「諦めて受け入れる、人間の追及コストが高い」になるかも。

[clubman023]

へー

[irimodi]

こんなん解決できんすげえ

[mayumayu_nimolove]

エッジ使ってないの？

[deep_one]

で、なんで位置の推定を間違うの？なんでそのIPなの？

[jigokuezu]

planet scaleとfly.ioの環境の話なのに手元の再現は関係ないだろ。fly.ioでsshして確認しないと意味ない。何言ってんの

[nguyen-oi]

東京の同一リージョンなのにオハイオ経由は草。PaaSとジオDNSの組み合わせは罠すぎる。こういう泥臭い切り分けドキュメントはマジで助かるわ