レプリケーション遅延の悪夢:リードレプリカ参照で発生する「今書いたデータが消えた」現象

Tech & Logic
スポンサーリンク

「さっき投稿したブログ記事が消えました! バグです!」

問い合わせ窓口からの悲鳴を受け、管理画面を開いてリロードすると、何事もなかったかのように記事はそこにある。テスト環境で何度再現を試みてもバグは出ない。コードを見直しても保存処理は正常に終了している。

「ユーザーの勘違いじゃないですか?」とヘラヘラ笑う若手エンジニアの頭を、キーボードでぶん殴りたくなる衝動を抑える。犯人はユーザーでもコードのバグでもない。インフラの背後で口を開けて待つ物理の罠、「レプリケーション遅延(Replication Lag)」だ。

AWSのRDSを使えば、マネジメントコンソールで数クリックするだけで読み取り専用の「リードレプリカ」が生えてくる時代になった。フレームワークの設定ファイルに「writer」と「reader」のエンドポイントを書き分けるだけで、読み書きの負荷分散など終わった気になっている連中が山ほどいる。

「俺はリードレプリカを駆使して大規模トラフィックを捌けます」などとドヤ顔で語る奴に限って、背後で動く非同期レプリケーションの泥臭い同期ラグの恐怖を1ミリも理解していない。今回は、フレームワークの隠蔽が生み出す「データ消失怪奇現象」と、分散アーキテクチャの冷酷な現実を解剖する。

そもそもリードレプリカとは何か:なぜ現代のWebシステムで必須なのか

Webアプリケーションのトラフィックの大半は「参照(SELECT)」である。SNSのタイムライン閲覧、ECモールの商品検索、記事の閲覧――「書き込み(INSERT/UPDATE)」に比べて、参照リクエストは10倍から100倍の規模に達することも珍しくない。

単一のデータベース(プライマリ / Writer)にこの莫大な読み取り負荷を集中させれば、CPUは即座に100%へ張り付き、ロック待ちとディスクI/Oの悲鳴によってシステム全体が窒息する。

そこで登場するのがリードレプリカ(Reader)だ。
書き込みはプライマリノードが引き受け、その変更内容を複製(レプリケーション)したコピー機のような参照専用ノードを横に並べる。Webサーバー群からの「読み取り」クエリをこのレプリカたちへロードバランサー経由で分散させることで、データベースの息の根を繋ぎ止める。

AWSのAuroraやRDSのおかげで、この構成は現代のWeb開発において完全に「デファクトスタンダード(標準装備)」となった。

フレームワークが隠蔽する「マルチDB」の罪:reader/writer分割の裏で起きる悲劇

問題は、モダンなフレームワーク(Rails、Laravel、Django、Springなど)が、この複雑な構成をあまりにも美しく「隠蔽」しすぎたことにある。

# ありがちな設定ファイル例
production:
  primary:
    host: db-primary.internal
  replica:
    host: db-replica.internal

こんな設定を書くだけで、フレームワークのORMが自動的に「更新処理はprimaryへ、参照クエリは勝手にreplicaへ」とルーティングしてくれる。開発者はデータベースが2台に分かれていることすら意識せず、これまで通りの感覚でコードを書く。

そして、あの怪奇現象が本番環境で牙を剥く。

  1. ユーザーがプロフィール画面で名前を変更し、「保存」ボタンを押す。
  2. アプリケーションはプライマリDBへ更新SQL(UPDATE)を投げ、正常にコミットされる。
  3. 処理完了後、画面は即座にプロフィール詳細画面へリダイレクトされる。
  4. フレームワークは「参照処理だな」と判断し、リードレプリカへSELECTクエリを投げる。
  5. 「……あれ? 名前が変わっていない(今書いたはずのデータが消えた)」

慌ててユーザーがブラウザのF5キー(リロード)を連打すると、2秒後には何事もなかったかのように新しい名前に変わっている。

これこそが、プライマリで更新されたデータがレプリカに反映されるまでのわずかな隙間に発生する「Read-After-Write矛盾(自分の書いた更新が読めない現象)」だ。理屈を知らないエンジニアは「キャッシュのバグか?」「セッションが狂ったか?」とあらぬ方向の調査を始め、泥沼にハマっていく。

なぜレプリケーションは遅延するのか:ディスク同期ではなく「SQLデータの非同期転送」という現実

そもそも、なぜプライマリとレプリカの間にタイムラグが生じるのか。「クラウドの超高速ネットワークなんだから、ミリ秒以下で同期されるはずだろ」と信じ込んでいるなら、データベースの内部アーキテクチャを甘く見すぎている。

一般的なMySQL(InnoDB)の非同期レプリケーションを例に、裏側で何が起きているかを見てみよう。

プライマリノードは、ストレージのブロックレベルで物理的に同期しているわけではない。

  1. プライマリでトランザクションがコミットされる。
  2. 変更履歴がバイナリログ(binlog)という論理ログに書き込まれる。
  3. レプリカ側のI/Oスレッドが、ネットワーク越しにプライマリのbinlogを読み取り、自機のリレーログ(relay log)へ保存する。
  4. レプリカ側のSQLスレッドが、リレーログに書かれたイベントを読み解き、自機のデータベース上で同じSQL(または行変更)を順番に「再実行」する。

つまり、レプリカはプライマリの変更内容を「後から同じ作業をなぞって自前で復元している」に過ぎないのだ。

もしプライマリ側で、何万行ものレコードを一気に更新する巨大バッチや、重たいDDL(ALTER TABLE)が実行されたらどうなるか。
プライマリ側がどれほどハイスペックでも、binlogを受け取ったレプリカのSQLスレッドがその膨大な再実行処理をシリアルに消化しきれず、完全に詰まる。

ネットワーク帯域の限界、レプリカ側のCPU負荷、ディスクI/Oのボトルネック――さまざまな物理要因によって、レプリケーションの同期遅延(Seconds_Behind_Master)は平気で数秒、ひどい時には数分から数十分へと膨れ上がる。

この遅延が発生している最中、レプリカを参照した数千人のユーザーには「過去の世界(あるいは中途半端な世界)」が見え続けることになるのだ。

トランザクションIDと整合性の崩壊:狂った瞬間に一撃で死ぬ

さらに恐ろしいのが、トランザクションの整合性が狂った瞬間の修羅場だ。

GTID(Global Transaction Identifier)などを用いた厳密なレプリケーション管理を行っていたとしても、レプリカ側で不意にローカル更新が走ってしまったり、フェイルオーバー時にプライマリとレプリカのトランザクションIDの同期位置に齟齬が生じた瞬間、レプリケーションはエラーを吐いてその場で緊急停止(ストップ)する。

エラーで同期が止まったレプリカは、アラートに気づかない無能な監視体制の下では「永遠に過去のデータを返し続けるゾンビノード」へと化す。

ユーザーAが見ている商品在庫はゼロ、同じ瞬間にユーザーBがリロードして見ている商品在庫は10個。決済処理でトランザクションIDの不整合を踏めば、重複注文、二重決済、あるいは参照不整合によるクラッシュが連鎖し、システム全体が一撃で死に至る。

理屈もわからんで「俺は複数DBを使いこなせます」などと言うな

「クラウドが勝手にスケールしてくれる」「フレームワークがよしなにエンドポイントを振り分けてくれる」

そんな思考停止の甘えで構築されたマルチノード環境は、ひとたび高負荷の波に呑まれた瞬間、データ消失の怪奇現象と整合性崩壊の地獄絵図へと姿を変える。

真に複数DBを制御するプロフェッショナルは、この物理の代償を前提に泥臭い設計を敷いている。

  • 書き込み直後の参照(更新完了リダイレクト先など)は、フレームワークの自動ルーティングを強制オーバーライドしてプライマリから直読みする
  • ユーザーのセッションや更新タイムスタンプを追跡し、「最新データが必要なクリティカルパス」と「多少遅れても死なない一覧系参照」を論理的に分離する
  • 非同期レプリケーションの限界を見極め、整合性が必要なシステムでは準同期レプリケーションや適切なコンシステンシーレベルを選択する

画面の向こう側で動く数台のサーバーは、決して魔法で同期されているのではない。光ファイバーを行き交うログパケットと、ディスク上で必死に過去のSQLを再実行し続けるCPUの泥臭い辻褄合わせの上に辛うじて成立している。

その構造的な「歪み」と「遅延の恐怖」を骨の髄まで理解していない者に、データベースの分散を語る資格などないのだ。

タイトルとURLをコピーしました