データ指向で設計する大規模クラウドサービス ― 全体像を押さえる 9 つのステップ

マイクロサービスと共通基盤(データ・ETL・ログ・認証・AI・分析・セキュリティ)から成る大規模クラウドサービスの全体設計を任された新任のテックリーダーに向けて、柔軟性・拡張性・置換性・更新性を保つための判断の材料と、設計レビューで問う観点をまとめた資料です(全 256 枚)。GitHub リポジトリ/PDF/PPTX/ケーススタディ(実測)は準備中

目次
  1. 1. データ指向で設計する大規模クラウドサービス
  2. 2. 本の要約ではなく、判断の材料を渡す
  3. 3. 読者は、全体設計を任された新任リーダー
  4. 4. 対象は、サービス群と 7 つの共通基盤
  5. 5. 9 つのステップで、全体像を順に押さえる
  6. 6. 根拠は 3 種類、実測と未検証は分けて書く
  7. 7. 4 冊の本を地図に、一次資料で裏を取る
  8. 8. 2026 年 11 月時点の調査で、限界がある
  9. 9. PART 1 データ指向と4つの性質
  10. 10. データはコードより長く残る
  11. 11. データ指向とは、正・流れ・契約で見ること
  12. 12. 4 つの性質を、このガイドではこう定義する
  13. 13. 3 つは規格の語に対応し、更新性は対応しない
  14. 14. DDIA の語では、発展性が最も近い
  15. 15. 規格の語彙に入らない 3 つが、このガイドの主題
  16. 16. 19 件の事後報告で、引き金の多くは変更・操作
  17. 17. 性質は、自動で検査できる数字にする
  18. 18. 戻せない決定を見分け、そこに時間を使う
  19. 19. 設計レビューでは、性質を数字と手順で問う
  20. 20. まとめ:データから考え、変えられる形で決める
  21. 21. PART 2 要件と負荷を数字にする
  22. 22. 数字のない非機能要件はレビューできない
  23. 23. 負荷は、読み書きの比とファンアウトで表す
  24. 24. 応答時間は、平均でなくパーセンタイルで約束する
  25. 25. 信頼性は SLI・SLO・エラーバジェットで約束する
  26. 26. RPO・RTO は「どこまで失い、どこまで待てるか」
  27. 27. 障害と機能不全を分け、耐える障害を先に決める
  28. 28. スケールの方向は 3 つ。分散は必要になってから
  29. 29. IPA のグレードは基盤の合意用。サービス間の契約は項目に無い
  30. 30. 要件は 1 枚に書く:宅配注文サービスの例
  31. 31. 設計レビューで問うこと:要件と負荷
  32. 32. まとめ:数字と条件を 1 枚に書いてから設計する
  33. 33. PART 3 記録のシステムと導出データ、所有
  34. 34. 記録のシステムは最初に書く場所、導出は作り直せるもの
  35. 35. データごとに、正・所有者・導出先を 1 行で書く
  36. 36. 正を 1 つに決めないと、食い違いを直せない
  37. 37. 問題は機械の共有ではなく、同じ表の読み書き
  38. 38. 共有 DB では、変更の調整と停止の影響が全サービスに及ぶ
  39. 39. 分ける理由 6 つと、まとめる理由 2 つを並べる
  40. 40. 誰が書くかで所有を決める:3 つのシナリオ
  41. 41. データの所有者とアプリケーションの所有者を分ける
  42. 42. 共通基盤が持つデータも、正か導出かを先に決める
  43. 43. 1 つで足りるなら分けない
  44. 44. 設計レビューで問うこと:正と所有
  45. 45. まとめ:正を 1 つに決め、書き手で所有を決める
  46. 46. PART 4 データモデルを選ぶ
  47. 47. モデルは、関係の形と問い合わせの形で選ぶ
  48. 48. リレーショナルとドキュメントは、得失が逆になる
  49. 49. 非正規化したデータは、導出データとして扱う
  50. 50. 多対多が複雑になったら、グラフを検討する
  51. 51. イベントで持つ設計は、費用を伴う選択である
  52. 52. 分析には、ファクトを中心にしたスタースキーマ
  53. 53. 1 つの DB の中で、表と文書を組み合わせられる
  54. 54. モデルの選択は、流れ・契約・分割に残る
  55. 55. 設計レビューで問うこと:データモデル
  56. 56. まとめ:関係と問い合わせを書いてからモデルを選ぶ
  57. 57. PART 5 ストレージと索引:何を買い、何を払うか
  58. 58. エンジンの中身は、費用と限界として設計に出る
  59. 59. LSM ツリーは、追記してあとでまとめ、読み取りで払う
  60. 60. B ツリーは、同じ場所を上書きし、読み取りが安定する
  61. 61. どちらも、書き込み・読み取り・空間のどれかを払う
  62. 62. PostgreSQL の MVCC は、VACUUM で払う
  63. 63. 索引は、読み取りを買い、書き込みと領域で払う導出データ
  64. 64. 行指向は 1 件の読み書き、列指向は大量の走査に合う
  65. 65. 分析を分けると、分析側は導出データになる
  66. 66. 1 つで足りるうちは分けない、も正当な判断
  67. 67. 計算と保存を分けた先に、開いた表形式がある
  68. 68. 全文検索の転置索引は、1 件の更新が多数の索引更新になる
  69. 69. ベクトル索引は近似で、作り直しが要る導出データ
  70. 70. ストアを足す前に、既存の DB の拡張で足りるかを問う
  71. 71. 設計レビューで問うこと:ストレージと索引
  72. 72. まとめ:買うものと払うものを、対で言えるようにする
  73. 73. PART 6 データの流れを設計する
  74. 74. データの流れは 3 つの形に分けて考える
  75. 75. コピーを読むか、正を直接呼ぶかを先に決める
  76. 76. 別のサービスのデータが要るとき、選択肢は 4 つ
  77. 77. 二重書き込み:アプリが 2 つのシステムへ別々に書く
  78. 78. 二重書き込みの不整合は 2 つの型で起きる
  79. 79. 順序を決める場所を 1 つにし、ほかはログを読む
  80. 80. アウトボックス:2 つの書き込みを 1 つの DB に畳む
  81. 81. アウトボックスの運び方は 2 つ:ポーリングと CDC
  82. 82. CDC のしくみ:WAL を論理デコードして流す
  83. 83. どの方式も既定は「少なくとも 1 回」
  84. 84. CDC の受け手が止まると、正の DB の WAL が溜まる
  85. 85. 公開された事後報告は見つからなかった
  86. 86. 分散モノリスの兆候:分けたのに一緒にしか動かせない
  87. 87. データの流れについて、設計レビューで問うこと
  88. 88. まとめ:順序を決める場所を 1 つにし、重複に備える
  89. 89. PART 7 動かしたまま変える契約
  90. 90. 逐次更新の間は、新旧の版が同時に動く
  91. 91. 後方互換と前方互換:向きが更新の順序を決める
  92. 92. 形式ごとに、新旧を対応づける規則が違う
  93. 93. 両方向に安全な変更は、既定値つきの追加と削除
  94. 94. 互換性モードは、向きと比べる範囲の 2 軸で選ぶ
  95. 95. 既定は直前の版とだけ比べ、古いデータは守らない
  96. 96. 契約の強制は、書き手側と CI に置く
  97. 97. API とイベントの仕様は、互換の規則までは決めない
  98. 98. データ契約は、スキーマに品質と条件を足した合意
  99. 99. expand/contract:非互換の変更を 3 段階に分ける
  100. 100. PostgreSQL の DDL は、ロックと書き換えを調べる
  101. 101. 設定やルールもデータで、契約と段階配布が要る
  102. 102. 未知の入力の扱いは、寛容さに頼らず仕様に書く
  103. 103. 設計レビューで問うこと:契約と変更
  104. 104. まとめ:契約は、向き・検査の場所・配り方で決める
  105. 105. PART 8 複製と分割
  106. 106. 複製の目的は可用性・読み取りの拡張・近さの 3 つ
  107. 107. シングルリーダー:書き込みは 1 か所、変更を順に配る
  108. 108. 非同期では、応答済みの書き込みも失われうる
  109. 109. synchronous_commit = on でも既定は非同期
  110. 110. 損失ゼロの設定は、別の止まり方を持ち込む
  111. 111. フェイルオーバーは検知・昇格・遮断を誰が決めるか
  112. 112. フェイルオーバーの事故は、取り決めの欠陥で起きた
  113. 113. 複製の遅れは、読み取りに 3 つの異常を起こす
  114. 114. マルチリーダーとリーダーレスはコンフリクトを引き受ける
  115. 115. クラウド製品も、構成ごとに失う量と止まり方が違う
  116. 116. 分割は、1 台で足りなくなってから選ぶ重い手段
  117. 117. キー範囲は走査に、ハッシュは分散に強い
  118. 118. Kafka のパーティションは増やせるが、減らせない
  119. 119. セカンダリ索引は、ローカルかグローバルかを選ぶ
  120. 120. テナントの分離は、費用と分離の強さの交換
  121. 121. 設計レビューで問うこと:複製と分割
  122. 122. まとめ:失う量と止まり方を、設定と取り決めで決める
  123. 123. PART 9 正しさの水準を決める
  124. 124. トランザクションは失敗と並行の後始末を肩代わりする
  125. 125. ACID の 4 文字は製品で意味が違う
  126. 126. 読み取りの異常:途中の状態や、混ざった時点を読む
  127. 127. 書き込みの異常:読んだ前提が、書く前に古くなる
  128. 128. 分離レベルは「どの異常を許すか」の約束
  129. 129. 同じ名前の分離レベルが製品で別のものを指す
  130. 130. DB を入れ替えると、既定の正しさの水準が変わる
  131. 131. MySQL の既定はロストアップデートを防がない
  132. 132. 分離レベルより先に、トランザクションの範囲を問う
  133. 133. ロストアップデートの防ぎ方は 5 つ、費用が違う
  134. 134. Serializable の実装は 3 つ、費用の出方が違う
  135. 135. 必要な箇所だけ強くし、受け入れる異常は理由を残す
  136. 136. 設計レビューで問うこと:正しさの水準
  137. 137. まとめ:名前ではなく、防ぐ異常で水準を決める
  138. 138. PART 10 分散システムで信用できないもの
  139. 139. 単一ノードと違うのは、一部だけが壊れること
  140. 140. 危ないのは、半分動く障害と再試行の増幅
  141. 141. 時計は飛び、戻る。順序の根拠にしない
  142. 142. ロックだけでは守れない。資源の側で古い番号を拒む
  143. 143. 線形化可能性は、コピーが 1 つに見えること
  144. 144. 線形化可能性の代償は性能。CAP を軸にしない
  145. 145. 分断中でも守れる保証は、意外に多い
  146. 146. 合意が要るのは「1 つに決める」場面
  147. 147. 事故では、合意は誤らず、進まなくなった
  148. 148. ID の方式は、順序・局所性・漏れる情報で選ぶ
  149. 149. 製品の主張は、第三者の検証と版で確かめる
  150. 150. 設計レビューで問うこと:頼り先が止まったら
  151. 151. まとめ:信用できない前提で、頼り先と止まり方を決める
  152. 152. PART 11 サービスをまたぐ整合性
  153. 153. サービスをまたぐと DB のトランザクションは届かない
  154. 154. 2 相コミットは、調整役が落ちると参加者が止まる
  155. 155. 一貫性を「適時性」と「完全性」に分けて考える
  156. 156. 完全性は、4 つの仕組みの組み合わせで保てる
  157. 157. 冪等な受け手:処理済みの記録と更新を同時に書く
  158. 158. 「厳密に 1 回」は、その枠組みの中だけの保証
  159. 159. サーガは分離性を持たない:原論文の時点から
  160. 160. サーガは 3 つの軸で整理し、調整役の得失で選ぶ
  161. 161. 補償は失敗しうる。巻き戻さず状態で管理する案
  162. 162. 耐久実行は進み具合を守る。分離性と冪等性は別
  163. 163. 最後は照合で確かめる:信頼しつつも検証する
  164. 164. 設計レビューで問うこと:サービスをまたぐ整合性
  165. 165. まとめ:遅れは許し、食い違いは仕組みと照合で防ぐ
  166. 166. PART 12 導出データを作り、作り直す
  167. 167. 導出データの価値は、入力から作り直せること
  168. 168. バッチ:入力を変えず、出力を丸ごと作り直す
  169. 169. ストリームは終わりのないバッチ:同じ計算の 2 つの形
  170. 170. キューは配ると消え、ログは残って読み直せる
  171. 171. Kafka の既定は 7 日保持。削除の印は 1 日後に消えうる
  172. 172. 作り直せるための 6 つの前提は、既定では成り立たない
  173. 173. 別サービスのイベント間に、決まった順序は無い
  174. 174. 窓はイベント時間で切り、遅れて届く分の扱いを決める
  175. 175. 導出ストアは、新旧を並べて作り、照合して切り替える
  176. 176. マテリアライズドビューは、製品で意味が違う
  177. 177. Lambda と Kappa:どちらも核は「計算し直せること」
  178. 178. 導出データにも出力の検査が要る:照合と系譜
  179. 179. 削除は、導出データまで届いて完了する
  180. 180. 設計レビューで問うこと:導出データ
  181. 181. まとめ:作り直せる導出データが、置換と更新の土台
  182. 182. PART 13 7つの共通基盤に当てはめる
  183. 183. 共通基盤は内部の利用者に出す製品。作る前に問う
  184. 184. どの基盤も、同じ 4 つの問いで設計する
  185. 185. 7 基盤 × 4 つの問い:答えは基盤ごとに違う
  186. 186. データ基盤の中身は導出。所有はドメインに置く
  187. 187. カタログは表の現在を持つ正。系譜は実行側が出す
  188. 188. 取り込みは、スキーマが揺れたときの動きを先に決める
  189. 189. 再実行しても同じ結果になるタスクが作り直しの前提
  190. 190. ログ基盤の契約は OTLP と規約。安定度はシグナルで違う
  191. 191. テレメトリは失いうる前提。監査の記録は経路を分ける
  192. 192. 分析基盤は導出。指標の定義だけは所有者を決める
  193. 193. 認証基盤:利用者・鍵・方針が正で、トークンは導出
  194. 194. 手元の検証は、止まらなさと失効の遅さの交換
  195. 195. 止まったとき拒否するか通すかは、選んで書く
  196. 196. 特徴量・埋め込み・索引・モデルは導出データ
  197. 197. 学習と推論のずれは、同じ定義と時点の正しさで防ぐ
  198. 198. 推論の入出力を記録し、AI なしの経路を決めておく
  199. 199. 監査ログは記録のシステム。書けないときを決める
  200. 200. 鍵の入れ替えは再暗号化ではない
  201. 201. 分類は所有者が決め、製品の更新は段階的に配る
  202. 202. 共通の型:先に配っておき、手元の情報で動く
  203. 203. 設計レビューで問うこと:7 つの基盤に 1 問ずつ
  204. 204. まとめ:基盤も、正と導出・契約・止まり方で設計する
  205. 205. PART 14 共通基盤が全体を止める8つの型
  206. 206. 事後報告 24 件を原文で読み、型に分けた
  207. 207. 19 件の事後報告で、引き金の多くは変更・操作
  208. 208. 全体が止まる条件は、要求の経路にある同期の依存
  209. 209. 被害を広げた設計は、8 つの型にまとまる
  210. 210. 型①:挙動を決めるデータが、短時間で全体に届く
  211. 211. 型②⑧:1 つの基盤、1 つの共有が全体に届く
  212. 212. 型③:監視と連絡の道具が、同じ障害で止まる
  213. 213. 型④:安全のための自動化が、被害を広げる
  214. 214. 型⑤:引き金が消えても、再試行が過負荷を保つ
  215. 215. 型⑥⑦:広く消せる道具と、戻せないバックアップ
  216. 216. 設定やルールもデータ。検査と段階配布の両方が要る
  217. 217. 段階配布は万能ではない。何を見て進むかを問う
  218. 218. 対策の軸は静的な安定性:手元の情報で動き続ける
  219. 219. 設計レビューで問うこと:型ごとに 1 問
  220. 220. まとめ:止まる条件を先に問い、型で点検する
  221. 221. PART 15 止めずに入れ替え、やめる
  222. 222. 置換性は、入れ替えるときに分かるのでは遅い
  223. 223. 「PostgreSQL 互換」の幅は製品ごとに違う
  224. 224. 導出データの側は、作り直して入れ替えられる
  225. 225. 記録のシステムの入れ替えは、書籍の手順だけでは足りない
  226. 226. 移行中の二重書き込みは Part 6 の問題を持ち込む
  227. 227. v2 を別に作らず、稼働させたまま作り直す
  228. 228. 移行の作業の大部分は基盤側が引き受け、変化予算を守る
  229. 229. 作り直しの提案には、移行費用と 12 か月の成果を書く
  230. 230. やめるときは、先に移行先を用意する
  231. 231. 入れ替えの途中で止まった 2 件:最後の段と 3 回目の段
  232. 232. 乗り換えやすさは、EU では法律の要求でもある
  233. 233. 設計レビューで問うこと:入れ替える前・やめる前
  234. 234. まとめ:入れ替えは、製品を選ぶ日に始まっている
  235. 235. PART 16 法・プライバシー・ガバナンスを設計に入れる
  236. 236. 保持・目的・所在・系譜は流れに埋まり、後から足せない
  237. 237. 削除は、導出データまで届いて完了する
  238. 238. 削除を命令しても、すぐには物理的に消えない
  239. 239. 不変のログと消去要求:両立の選択肢は 4 つ
  240. 240. 設計の段階で決めること:9 つの決定
  241. 241. 予測は偏りを学び、出力が入力に戻ると強まる
  242. 242. 設計レビューで問うこと:法・プライバシー
  243. 243. まとめ:消せることと説明できることを設計に入れる
  244. 244. PART 17 設計レビューで問うこと
  245. 245. 9 つのステップは、レビューで問う順番でもある
  246. 246. ステップ 1〜3:数字と正と問い合わせを先に問う
  247. 247. ステップ 4〜6:書く箇所、互換の向き、置く台数を問う
  248. 248. ステップ 7〜9:範囲、作り直し、止まり方を問う
  249. 249. 4 つの性質から、効くステップと問いを引く
  250. 250. 基盤は、作る前・入れ替える前・やめる前に問う
  251. 251. 決定は ADR に残し、データの 3 項目を足す
  252. 252. トレードオフは、3 つの手順で自分で分析する
  253. 253. 最初の 90 日は、棚卸し・特定・測るの順に進める
  254. 254. このガイドの限界と、ケーススタディで確かめること
  255. 255. 4 冊の章から、対応する Part へたどる
  256. 256. 用語集:訳語は DDIA 2e に揃えた
データ指向で設計する大規模クラウドサービス
スライド 1 のテキストと解説
DATA-INTENSIVE DESIGN GUIDE データ指向で設計する大規模クラウドサービス 全体像を押さえる 9 つのステップ ― 新任テックリーダーのための判断材料 1 要件 2 所有 3 モデル 4 流れ 5 契約 6 複製 7 正しさ 8 導出 9 基盤 対象:マイクロサービスと共通基盤から成るシステムの全体設計を任された、新任のテックリーダー 根拠:標準・製品の公式文書/公的機関とクラウド各社の指針・事業者の事後報告/日本語の専門書 4 冊 2026 年 11 月時点
解説

本資料は、マイクロサービスと共通基盤から成る大規模なクラウドサービスの全体設計を任された、新任のテックリーダーに向けたガイドです。主題は、個々のデータベース製品の解説ではありません。データ指向の考え方で、システムの全体像を、どんな順番で考えて押さえるかです。その順番を 9 つのステップにまとめました。要件、所有、モデル、流れ、契約、複製、正しさ、導出、基盤の 9 つです。各ステップで、判断の分かれ目と、設計レビューで問うことを示します。根拠は、標準と製品の公式文書、公的機関やクラウド各社の指針と事業者の事後報告、日本語の専門書 4 冊の 3 種類です。内容は 2026 年 11 月時点の調査にもとづきます。製品の版や既定値は変わるので、使うときは確認月を見てください。

本の要約ではなく、判断の材料を渡す
スライド 2 のテキストと解説
本の要約ではなく、判断の材料を渡す 導入 各 Part に、判断の分かれ目・失敗例・設計レビューで問うことを入れ、根拠を添える 書籍 『データ指向アプリケーションデザイン 第2版』1 章 p.2/『ソフトウェアアーキテクチャ・ハードパーツ』1 章 p.2(考え方) この資料が渡すもの 判断の分かれ目:何を選ぶと何を得て、何を失うか 失敗例:公開された事後報告と、代わりの設計 設計レビューで問うこと:問い・理由・危ない兆候 根拠:仕様、公式文書、書籍のページ、実測 この資料が扱わないもの 本の章ごとの要約、本文や図の転載 第 1 版と第 2 版の差分の解説 クラウドのマネージド製品の実測(公式文書の記述にとどめ、未検証と明記) 特定の企業の実システムに即した話 リーダーの視点 本は地図として使う。構成は本の章立てではなく、設計で順に決めていく 9 つの問い。各 Part から本の該当ページへたどれる 2
解説

この資料が何で、何でないかを先に決めておきます。きっかけは『データ指向アプリケーションデザイン 第2版』ですが、この資料は本の要約ではありません。本の 1 章は、本書を、どの技術をどう組み合わせるかの判断を助けるガイドと位置づけ、適切な問いを立てる方法を学ぶと述べています。この資料もその姿勢を引き継ぎ、本の章立てではなく、設計で順に決めていく問いで構成を組み直しました。各 Part には、何を選ぶと何を得て何を失うかの表、公開された事後報告などの失敗例、設計レビューで問うことを入れています。扱わないものも決めています。章ごとの要約、第 1 版と第 2 版の差分、クラウドのマネージド製品の実測、特定の企業の実システムの話です。マネージド製品は公式文書の記述にとどめ、未検証と明記します。次のスライドで、想定する読者を確認します。

読者は、全体設計を任された新任リーダー
スライド 3 のテキストと解説
読者は、全体設計を任された新任リーダー 導入 RDB と Web アプリの開発経験を前提にし、分散システムの用語は定義と図から説明する 書籍 基礎の説明は DDIA 2e、判断の手順は『ハードパーツ』に沿う(4 冊の使い分けは本 Part の 7 枚目) 想定する読者 新任のテックリーダー データ基盤を含む全体の設計判断を任された人 設計レビューの基準を作りたいチーム 前提にすること・しないこと 前提:RDB と Web アプリの開発経験 前提にしない:分散システムの理論 用語は初出で定義し、図で示す 読み終えたときの目標 全体像をステップに沿って設計できる レビューで問う観点を持つ 判断の理由を根拠つきで説明できる 読み方 本文は要点、ノート欄は背景・但し書き・数字の条件。チームで使うときは、各 Part の「設計レビューで問うこと」から始めてもよい 3
解説

想定する読者と前提です。読者は、データ基盤を含むシステム全体の設計判断を任された、新任のテックリーダーです。リレーショナルデータベースと Web アプリケーションの開発経験はあるものとします。一方で、分散システムの理論を体系的に学んでいることは前提にしません。複製、分離レベル、合意といった用語は、初めて出るところで定義と図から説明します。読み終えたときの目標は 3 つです。全体像を、決まったステップに沿って自分で設計できること。設計レビューで問うべき観点を持つこと。そして、判断の理由を、一次資料、本の該当ページ、実測で説明できることです。本文は要点だけを書き、背景、但し書き、数字の条件はノート欄に厚めに書いています。チームで読むときは、各 Part の「設計レビューで問うこと」のスライドから使い始めることもできます。

対象は、サービス群と 7 つの共通基盤
スライド 4 のテキストと解説
対象は、サービス群と 7 つの共通基盤 導入 業務のサービスがそれぞれデータを持ち、全サービスが使う共通基盤との間をデータが流れる 書籍 DDIA 2e 1.3.2 節 p.21(サービスごとのデータベース)、1.1.3 節 p.10〜11(記録のシステムと導出データ) 業務のサービス(マイクロサービス) 例:架空の宅配注文サービス 注文 注文の記録を持つ 在庫 在庫数を持つ 決済 支払いの記録を持つ 通知 送信の履歴を持つ データが流れる:API・イベント・チェンジデータキャプチャ(CDC)・バッチ 7 つの共通基盤(全サービスが使う) データ基盤 共有データの保管 ETL 基盤 取り込みと変換 ログ基盤 ログと計測の収集 認証基盤 利用者と権限 AI 基盤 モデルと特徴量 分析基盤 集計と可視化 セキュリティ基盤 検知と監査 このガイドが問うこと:どのデータが正か、どこへ流れるか、どの契約で結ぶか、止めずに変えられるか 4
解説

この資料が対象にするシステムの絵です。上の段は業務のサービスで、例として架空の宅配注文サービスを使います。注文、在庫、決済、通知の 4 つのサービスがあり、それぞれが自分のデータを持ちます。DDIA 第 2 版の 1 章も、データベースはサービスごとに別々に持ち、互いに共有しない形が一般的だと述べています。下の段は、全サービスが使う 7 つの共通基盤です。データ基盤、ETL 基盤、ログ基盤、認証基盤、AI 基盤、分析基盤、セキュリティ基盤です。ETL は、データを取り出し、変換し、別の場所に書き込む処理のことです。上下の間を、API、イベント、チェンジデータキャプチャ、バッチでデータが流れます。チェンジデータキャプチャは CDC と略し、データベースの変更を取り出して他へ伝える仕組みです。このガイドは、この絵の中で、どのデータが正か、どこへ流れるか、どの契約で結ぶか、止めずに変えられるかを順に問います。各基盤への当てはめは Part 13 と 14 で扱います。図は説明のための模式図です。

9 つのステップで、全体像を順に押さえる
スライド 5 のテキストと解説
9 つのステップで、全体像を順に押さえる 導入 各ステップは 1 つの問いに答える。前のステップの答えが、次のステップの前提になる 書籍 順番は本ガイドの構成。DDIA 2e の章立てを判断の問いの順に並べ直した(章 → Part の対応表は Part 17) ステップ | 題 | 答える問い | Part 1 要件 | 要件と負荷を数字にする | 何を、どの数字で約束するか | 2 2 所有 | 記録のシステムと導出データ、所有 | どのデータを誰が持ち、どれが正か | 3 3 モデル | データモデルを選ぶ | 関係の形と問い合わせの形に、どのモデルが合うか | 4 4 流れ | データの流れを設計する | サービスと基盤の間を、データはどう流れるべきか | 6 5 契約 | 動かしたまま変える契約 | 何を契約にし、どう検査するか | 7 6 複製 | 複製と分割 | どこまで失ってよく、どこまで待てるか | 8 7 正しさ | 正しさの水準を決める | どの異常を、どこで防ぐか | 9・11 8 導出 | 導出データを作り、作り直す | ログから作り直せるか | 12 9 基盤 | 7 つの共通基盤に当てはめる | 各基盤を、同じ 4 つの問いでどう設計するか | 13・14 ステップの前後 Part 1:考え方(4 つの性質) Part 5・10:基礎(ストレージ、分散) Part 15:止めずに入れ替え、やめる Part 16:法とガバナンス Part 17:問いの一覧 5
解説

このガイドの全体地図です。全体像を押さえる手順を、9 つのステップに分けました。ステップ 1 は、何をどの数字で約束するかを決めます。ステップ 2 は、どのデータを誰が持ち、どれが正かを決めます。ステップ 3 はデータモデル、ステップ 4 はサービスと基盤の間のデータの流れ、ステップ 5 は動かしたまま変えるための契約です。ステップ 6 は複製と分割、ステップ 7 は正しさの水準で、サービスをまたぐ整合性は Part 11 で続けます。ステップ 8 は導出データの作り方と作り直し、ステップ 9 は 7 つの共通基盤への当てはめです。この順番は本ガイドの構成で、本の章立てとは違います。ステップの前後には、考え方を扱う Part 1、基礎を扱う Part 5 と 10、入れ替えと廃止を扱う Part 15、法とガバナンスを扱う Part 16、まとめの Part 17 があります。右上の表示は、Part 2 以降で、そのスライドがどのステップの話かを示します。全部で 18 Part です。

根拠は 3 種類、実測と未検証は分けて書く
スライド 6 のテキストと解説
根拠は 3 種類、実測と未検証は分けて書く 導入 各スライドの下の行が根拠。確かめた範囲と、確かめていない範囲を印で区別する 仕様・文書 ここに標準・製品の公式文書(版と確認月)・原論文 指針・報告 ここに公的機関や各社の指針、事業者の事後報告 書籍 ここに書籍の章・節・印刷ページ。(考え方)は一般論の印 仕様・文書 標準、製品の公式文書(版と確認月つき)、原論文。製品の既定値や制限値はここから引く 指針・報告 公的機関とクラウド各社の設計指針、事業者の事後報告。指針は任意の推奨、事後報告は自己申告 書籍 4 冊の章・節・印刷ページ。「(考え方)」は、一般論として借りた印 ケーススタディ(実測) 題材 A〜D で実測する点。結果の数字はケーススタディ側に書く 未検証 クラウドのマネージド製品は公式文書の記述による。SLA などの公称値は「公称」と書く 本ガイドの考え(一次資料なし) 一次資料で裏づけられない主張や、本ガイドによる整理・解釈には、この印を付ける 6
解説

根拠の読み方です。各スライドの下の行に、根拠を 3 種類に分けて書いています。1 つ目は仕様・文書で、標準、製品の公式文書、原論文です。公式文書には版と確認した月を添えます。2 つ目は指針・報告で、公的機関やクラウド各社の設計指針と、事業者が公開した事後報告です。指針は任意の推奨で、規範ではありません。事後報告は事業者の自己申告です。3 つ目は書籍で、章、節、印刷ページを書きます。「考え方」と添えたものは、一般論として借りたという印です。右側は、確かさの区別です。ケーススタディの印は、実機で測る点を示します。結果の数字はケーススタディ側に書き、このガイドでは先取りしません。未検証の印は、クラウドのマネージド製品のように、公式文書の記述だけにもとづく部分です。公称値は公称と書きます。そして、一次資料で裏づけられない主張には「本ガイドの考え」の印を付けます。印の無い主張は、下の行の根拠にもとづくものです。

4 冊の本を地図に、一次資料で裏を取る
スライド 7 のテキストと解説
4 冊の本を地図に、一次資料で裏を取る 導入 本は考え方と用語の地図。数字・既定値・事故の経緯は、公式文書と事後報告で確かめ直す 書籍 4 冊の奥付で発行年を確認(すべてオライリー・ジャパン)。章 → Part の対応表は Part 17 書籍(略称) | 著者・訳者・発行年 | このガイドでの使い方 | 主な Part データ指向アプリケーションデザイン 第2版 (DDIA 2e) | Kleppmann・Riccomini 著、斉藤太郎 訳、オライリー・ジャパン、2026 | 中心。基礎と考え方の地図、訳語の基準 | 1〜12・16 ソフトウェアアーキテクチャ・ハードパーツ (『ハードパーツ』) | Ford・Richards・Sadalage・Dehghani 著、島田浩二 訳、オライリー・ジャパン、2022 | データの所有、サーガ、コントラクト、トレードオフ分析、ADR | 1・3・7・11・12・17 大規模データ管理 第2版 | Strengholt 著、村上列 訳、オライリー・ジャパン、2024 | データの流れの使い分け、データ契約、ガバナンス(製品に依存しない原則のみ) | 3・6・7・13・16 プラットフォームエンジニアリング | Fournier・Nowland 著、松浦隼人 訳、オライリー・ジャパン、2025 | 共通基盤の運営、作り直し、移行と廃止(考え方として) | 13・14・15 『ハードパーツ』の「CDC」はコンシューマー駆動コントラクトを指す。このガイドの CDC はチェンジデータキャプチャだけ 7
解説

参考にした 4 冊と使い分けです。中心は『データ指向アプリケーションデザイン 第2版』で、以下では DDIA 2e と略します。基礎と考え方の地図として使い、訳語もこの本に揃えます。たとえば、記録のシステム、導出データ、逐次更新、発展性です。ただし、索引と列指向は、読みやすさのためにこのガイドが言い換えた語で、本ではインデックス、カラム指向と書かれています。『ソフトウェアアーキテクチャ・ハードパーツ』は、データの所有、サーガ、コントラクト、トレードオフ分析の手順、ADR に使います。『大規模データ管理 第2版』は、データの流れの使い分け、データ契約、ガバナンスに使い、製品に依存しない原則だけを引きます。『プラットフォームエンジニアリング』は、共通基盤の運営、作り直し、移行と廃止に、考え方として使います。発行年は 4 冊の奥付で確かめました。注意が 1 つあります。『ハードパーツ』の CDC はコンシューマー駆動コントラクトのことです。このガイドで CDC と書くときは、チェンジデータキャプチャだけを指します。書籍に無い部分、たとえば共通基盤が止まったときのふるまいは、事後報告と公式文書で補います。ページはすべて印刷ページです。

2026 年 11 月時点の調査で、限界がある
スライド 8 のテキストと解説
2026 年 11 月時点の調査で、限界がある 導入 確かめられなかった点は、確かめられなかったと書く。使うときは版と確認月を見る 仕様・文書 ISO/IEC 25010:2023 見本 PDF(iTeh 配布)/JIS X 25010:2025 書誌(2026-11 確認) 指針・報告 事後報告の読み方は Part 14、法の扱いは Part 16 限界 | このガイドでの扱い 調査日は 2026-11-18 | 製品の版・既定値・公式文書の記述は、この時点のもの。版と確認月を根拠の行に書く 規格の本文は有料 | 確かめたのは、ISO は iTeh が配る見本 PDF(まえがき・適用範囲)、JIS は書誌まで。JIS の訳語は二次資料(解説記事)による。定義文は引用しない クラウドのマネージド製品は未検証 | 公式文書の記述にもとづく比較にとどめ、スライドに「未検証」と書く 事後報告は事業者の自己申告 | 詳しい報告を公開する事業者に偏る。件数を業界全体の頻度として読まない ケーススタディは 1 台の Docker 環境 | 数値は同じ環境の中での相対比較。規模の効果、リージョンをまたぐ障害は測れない。認証・AI・セキュリティ基盤は実機で確かめていない 法律に関わる記述は助言ではない | 設計の段階で決めておく点を示すにとどめる。解釈は法務に確認 8
解説

この資料の調査日と限界です。調査日は 2026 年 11 月 18 日です。製品の版、既定値、公式文書の記述はこの時点のもので、根拠の行に版と確認月を書いています。限界は 5 つあります。1 つ目、ISO/IEC 25010:2023 と JIS X 25010:2025 の本文は有料です。一次資料で確かめられたのは、ISO は規格販売サイトの iTeh が配布する見本 PDF のまえがきと適用範囲、JIS は日本規格協会の書誌までです。JIS の日本語の訳語と副特性の定義は、JIS を出典に挙げる解説記事という二次資料によります。そのため定義文は引用せず、特性の名前の対応を使います。2 つ目、クラウドのマネージド製品は実機で確かめていません。公式文書の記述にもとづく比較で、未検証と書きます。3 つ目、事後報告は事業者の自己申告で、詳しい報告を公開する事業者に偏ります。件数を業界全体の頻度として読まないでください。4 つ目、ケーススタディは 1 台のマシンの Docker 環境です。数値は同じ環境の中での相対比較で、規模の効果や、リージョンをまたぐ障害は測れません。5 つ目、法律に関わる記述は助言ではありません。解釈は法務に確認してください。ここまでが導入です。次の Part 1 から本題に入ります。出典の補足:ISO/IEC 25010:2023 は、iTeh が配布する見本 PDF(ISO の文書の冒頭のページ)で確かめました。ISO 自身の閲覧サイトでは開いていません。JIS X 25010:2025 の書誌は日本規格協会(JSA)。

PART 1 データ指向と4つの性質
スライド 9 のテキストと解説
PART 1 データ指向と 4 つの性質 データはコードより長く残る。だからデータから考え、柔軟性・拡張性・置換性・更新性を、測れる形で決める このPartで答えられるようになる問い なぜコードではなく、データから考えるのか 4 つの性質は、規格や本の言葉のどれに当たるか 規格の言葉で言い表せないのは、どの部分か 大規模サービスを止める引き金は、何が多いか 9
解説

Part 1 では、このガイド全体の考え方を固めます。最初に、なぜコードではなくデータから考えるのかを確かめます。サービスのコードは書き直され、製品は入れ替わりますが、データと、その形を決めた判断は長く残ります。次に、このガイドの題にある 4 つの性質、柔軟性・拡張性・置換性・更新性を定義します。そのうち 3 つは、JIS X 25010:2025 の特性と副特性の名前に対応づけられます。更新性は同じ名前のものが無いので、このガイドで定義します。この対応づけは、規格や本の主張ではなく、このガイドの解釈です。そのうえで、規格の言葉では言い表しにくい 3 つの場面、稼働中の切り替え、データの移行、新旧の版の混在が、このガイドの主題であることを示します。後半では、公開された事後報告 19 件の引き金を数え、性質を測れる形にする方法と、戻しにくい決定の見分け方を扱います。最後に、設計レビューで問うことをまとめます。

データはコードより長く残る
スライド 10 のテキストと解説
データはコードより長く残る 考え方 サービスは書き直され、製品は入れ替わる。データと、その形を決めた判断は残り続ける 書籍 『ハードパーツ』1.3 節 p.4/DDIA 2e 1 章 p.1(データ指向の定義)、2.5 節 p.50〜51(メンテナンスの費用) コード(サービス) 製品(DB・基盤) データ 最初の実装 書き直し 別の言語で再実装 DB 製品 A 製品 B に入れ替え 注文の記録(何年も読まれ続ける) 時間 説明のための模式図(特定のシステムの記録ではない) リーダーの視点 コードの設計より先に、何年も残るデータの持ち方と流し方を決める 書籍が挙げる理由 データはシステムより寿命が長い傾向がある(『ハードパーツ』p.4) 費用の大部分は、継続的なメンテナンスにある(DDIA 2e p.50) 価値があり長く生き残ったシステムは、いつかレガシーになる(同 p.51) データ指向(data-intensive) データの管理が、開発の主要な課題の 1 つであるアプリケーション(DDIA 2e p.1) 10
解説

なぜデータから考えるのかです。『ソフトウェアアーキテクチャ・ハードパーツ』の 1 章は、システムやアーキテクチャが入れ替わった後も、データのほうが長く残りやすいと述べ、だからデータの扱いには綿密な設計が要るとしています。DDIA 第 2 版の 2 章は、ソフトウェアにかかる費用の大半は、最初の開発ではなく、その後も続くメンテナンスのほうにある、というのが広く知られた認識だと書いています。そして、今日作るシステムも、価値があって長く生き残れば、いつかはレガシーシステムになる、とも述べています。左の図は、その関係を模式的に描いたものです。サービスのコードは何度か書き直され、データベースの製品も入れ替わります。その間も、注文の記録のようなデータは読まれ続けます。特定のシステムの記録ではなく、説明のための図です。右下は、題名にある「データ指向」の定義です。DDIA はこの語を、データの管理が開発の主要な課題の 1 つであるアプリケーション、という意味で使います。次のスライドで、データ指向で見るとは具体的に何を見ることかを示します。

データ指向とは、正・流れ・契約で見ること
スライド 11 のテキストと解説
データ指向とは、正・流れ・契約で見ること 考え方 製品の名前ではなく、どのデータが正で、どこへ流れ、何を約束しているかで全体を見る 書籍 DDIA 2e 1.1.3 節 p.10〜11(記録のシステムと導出データ)、1.3.2 節 p.21(API と共有データベース) 記録のシステム 最初に書かれ、食い違えばこちらが正。例:注文の DB 流れ 正の変更を、導出側へ伝える。例:イベント、CDC 導出データ 正を変換・処理した結果。失っても作り直せる。例:検索の索引、集計、キャッシュ 正を決める 区別は製品でなく、使い方で決まる どれがどれから導出されたかを明らかにする → ステップ 2(Part 3) 流れを設計する 導出データには、更新を伝える仕組みが要る 多くの DB は、単独で使う前提で作られている → ステップ 4・8(Part 6・12) 契約で結ぶ 実装を API の背後に隠すと、利用側に響かせずに変えられる DB を共有すると、構造全体が API の一部になる → ステップ 5(Part 7) 「正・流れ・契約」の 3 つにまとめたのは本ガイド。個々の定義は DDIA 2e による 11
解説

データ指向で見るとは、3 つを見ることだと、このガイドは整理します。1 つ目は、どのデータが正かです。DDIA は、新しいデータが最初に書き込まれ、食い違ったときに正とされるものを「記録のシステム」と呼びます。それを変換したり処理したりして作り、失っても作り直せるものが「導出データ」です。キャッシュ、インデックス、マテリアライズドビューが例です。この区別は製品ではなく、使い方で決まります。2 つ目は流れです。導出データがあるなら、正が変わったときに導出側を更新する仕組みが要ります。DDIA は、多くのデータベースが、自分 1 つだけが使われる前提で作られていると指摘しています。3 つ目は契約です。サービスは実装を API の背後に隠すことで、利用側に影響を与えずに中を変えられます。逆に、データベースを共有すると、その構造全体が実質的に API の一部になり、変えにくくなります。この 3 つを、ステップ 2、4、5 で順に設計します。3 つにまとめたのは本ガイドの整理で、個々の定義は DDIA によります。

4 つの性質を、このガイドではこう定義する
スライド 12 のテキストと解説
4 つの性質を、このガイドではこう定義する 考え方 どれも「変化に、作り直さずに応じられるか」を別の角度から問う。定義文は本ガイドの言葉 仕様・文書 JIS X 25010:2025(2025-12-22 改正)の特性・副特性の名前。対応は次のスライド 書籍 DDIA 2e 2.4 節 p.47(スケーラビリティ)、2.5 節 p.51(発展性) 性質 | このガイドでの定義 | 例(架空の宅配注文サービス) | 主な Part 柔軟性 | 要求や環境が変わったとき、システムを適応させられること | 配達の時間指定を足すとき、注文サービスの外を作り直さずに済む | 3・6 拡張性 | 負荷の増減を扱えること。容量を調整しやすいこと | 昼と夜のピークに注文が増えても、応答時間の目標を守れる | 8 置換性 | 部品(DB、基盤、製品)を、同じ目的の別のものに入れ替えられること | 検索の基盤を別の製品に替えても、注文サービスは変えずに済む | 7・12・15 更新性 | 動かしたまま、利用側を止めずに変えられること | 注文イベントに項目を足すとき、受け手を同時に止めて更新しなくてよい | 7・12・15 「拡張性」は、負荷への対応と、機能の足しやすさの 2 つの意味で使われる。このガイドでは負荷への対応だけを指す 12
解説

このガイドの題にある 4 つの性質の定義です。ここに書いた定義文は、このガイドの言葉です。拡張性と置換性は、JIS X 25010:2025 の副特性の定義を下敷きにして、短く言い換えました。その定義は、JIS を出典に挙げる解説記事という二次資料で確かめたもので、規格の本文では確かめていません。更新性は、このガイドが新しく定義しました。柔軟性は、要求や環境が変わったとき、システムを適応させられることです。拡張性は、負荷の増減を扱えること、容量を調整しやすいことです。置換性は、データベースや基盤などの部品を、同じ目的の別のものに入れ替えられることです。更新性は、動かしたまま、利用側を止めずに変えられることです。右の列には、架空の宅配注文サービスでの例を書きました。注意が要るのは拡張性です。この言葉は、負荷への対応という意味と、機能を足しやすいという意味の 2 通りで使われます。このガイドでは、負荷への対応だけを拡張性と呼びます。DDIA 第 2 版も、スケーラビリティを、増大する負荷に対処するシステムの能力としています。機能の足しやすさは、柔軟性と更新性の中で扱います。次のスライドで、この 4 つが規格の言葉とどう対応するかを見ます。会議では、最初に意味を確かめてください。

3 つは規格の語に対応し、更新性は対応しない
スライド 13 のテキストと解説
3 つは規格の語に対応し、更新性は対応しない 考え方 名前が合うのは柔軟性・拡張性・置換性。意味の範囲まで同じとは限らない 仕様・文書 ISO/IEC 25010:2023 まえがき・適用範囲(iTeh 配布の見本 PDF)/JIS X 25010:2025 書誌(2026-11 確認) 指針・報告 バルテスの記事「シン・テストファースト」中の JIS X 25010:2025 の表(二次資料。2026-11 確認) 本ガイドの語 | JIS X 25010:2025(ISO/IEC 25010:2023) | 規格での位置 | 対応 柔軟性 | 柔軟性(Flexibility) | 9 つの品質特性の 1 つ。2023 年版で Portability(移植性)を置き換えた | 名前が一致 拡張性 | 拡張性(scalability) | 柔軟性の副特性。2023 年版で加わった | 名前が一致 置換性 | 置換性(replaceability) | 柔軟性の副特性 | 名前が一致 更新性 | 同じ名前の特性・副特性は無い | 保守性・柔軟性・互換性(共存性、相互運用性)の副特性にまたがる、と本ガイドは読む | 本ガイドの定義 読み方の注意 この対応づけは、規格や書籍の主張ではなく本ガイドの解釈。規格の本文は有料で、定義文は二次資料でしか確かめていないため引用しない。示すのは特性・副特性の名前の対応だけ。日本語名は、JIS X 25010:2025 を出典とする解説記事による 13
解説

4 つの性質と、品質の規格の言葉との対応です。ISO/IEC 25010 は製品品質のモデルを定める国際規格で、第 2 版は 2023 年 11 月です。対応する JIS X 25010:2025 は 2025 年 12 月 22 日の改正です。JIS は ISO/IEC 25010:2023 の一致規格(IDT)だと、日本規格協会の書誌にあります。2023 年版の適用範囲(1 Scope)によると、品質特性は 9 つです。まえがきによると、それまでの Portability が Flexibility に置き換わり、その副特性に scalability が加わりました。JIS を出典に挙げる解説記事の表では、柔軟性の副特性に、適応性、拡張性、インストール性、置換性が並びます。この表に英語名は無く、scalability を拡張性、replaceability を置換性と組にしたのは、このガイドです。4 つのうち 3 つは名前が一致し、更新性には同じ名前のものがありません。但し書きが 2 つあります。まず、この対応づけは規格や書籍の主張ではなく、このガイドの解釈です。次に、規格の本文は有料で、定義文は二次資料でしか確かめられませんでした。そのため定義文は引用せず、名前の対応だけを示しています。一次資料で確かめたのは、ISO/IEC 25010:2023 の見本 PDF のまえがきと適用範囲、それに日本規格協会の書誌です。見本 PDF は、規格販売サイトの iTeh が配布しているものです。更新性に近い語として、規格には互換性の副特性の共存性と相互運用性もあります。出典の補足:二次資料は、バルテスのブログ記事「シン・テストファースト」の中の表で、JIS X 25010:2025 を出典に挙げています。

DDIA の語では、発展性が最も近い
スライド 14 のテキストと解説
DDIA の語では、発展性が最も近い 考え方 このガイドは、発展性を柔軟性・置換性・更新性の 3 つに分けて問う 書籍 DDIA 2e 2.4 節 p.47(スケーラビリティ)、2.5 節 p.51(運用性・簡潔性・発展性)、2.5.3 節 p.53 DDIA 2e の語(2 章) | 本書の説明(要約) | 本ガイドの性質との関係 スケーラビリティ(2.4 節 p.47) | 増大する負荷に対処する、システムの能力 | 拡張性 運用性(2.5 節 p.51) | 組織がシステムを円滑に運用し続けやすいこと | 更新性の土台(Part 13・14) 簡潔性(2.5 節 p.51) | 不必要な複雑さを避け、新しいエンジニアが理解しやすいこと | 4 つすべての前提 発展性(2.5 節 p.51・53) | 要件が変わったとき、変更を加え、想定外の使い方に適応させやすいこと | 柔軟性・置換性・更新性に最も近い 本ガイドの解釈 右の列は本ガイドの対応づけで、DDIA 2e の主張ではない。本書は発展性を 1 つの語で扱い、このガイドはそれを 3 つの問いに分ける 14
解説

DDIA 第 2 版の言葉との対応です。DDIA の 2 章は非機能要件として 4 つを扱います。パフォーマンスと信頼性、それにスケーラビリティとメンテナンス性です。スケーラビリティは、増大する負荷に対処するシステムの能力です。これはこのガイドの拡張性に当たります。本の副題も「信頼性、拡張性、保守性」となっています。メンテナンス性については、3 つの原則が挙げられています。運用性は、組織がシステムを円滑に運用し続けやすいこと。簡潔性は、不必要な複雑さを避けて、新しいエンジニアが理解しやすいこと。発展性は、要件が変わったときに変更を加え、想定外の使い方に適応させやすいことです。4 つの性質のうち、柔軟性・置換性・更新性に最も近いのは発展性です。このガイドは、発展性を、何を変えるのか、入れ替えるのか、止めずに変えるのか、で 3 つに分けて問います。運用性は更新性の土台、簡潔性は全体の前提と位置づけました。右の列はこのガイドの対応づけで、DDIA がそう述べているわけではありません。

規格の語彙に入らない 3 つが、このガイドの主題
スライド 15 のテキストと解説
規格の語彙に入らない 3 つが、このガイドの主題 考え方 「動かしたまま」「データごと」「版が混ざる」は、特性の名前だけでは問われない 仕様・文書 ISO/IEC 25010:2023 まえがき(iTeh 配布の見本 PDF。2026-11 確認) 書籍 DDIA 2e 2.3.2.1 節 p.44(逐次更新)、2.5.3 節 p.53(データベースの移行) 稼働中の切り替え 利用側の要求を受けながら、新旧を切り替える 並行して動かす期間と、戻す手順が要る → Part 15 データの移行 部品を入れ替えると、中のデータも移すことになる 移した結果が、元と一致するかを確かめる → Part 12・15 新旧の版の混在 逐次更新(1 ノードずつ、止めずに更新)の間、新旧の版が同時に動く 古い形式のデータも残る → Part 7 本ガイドの考え(一次資料なし) 3 つを「規格の語彙の外」と読むのは本ガイドの解釈(規格の定義文は二次資料でしか確かめていない)。近い語に互換性(共存性・相互運用性)と適応性があるが、3 つの条件は名前からは読めない。このガイドは、この 3 つを各ステップの具体的な問いにする 15
解説

このガイドの主題です。置換性や保守性という名前だけで設計を見ると、抜けやすい場面が 3 つあると、このガイドは考えます。1 つ目は稼働中の切り替えです。利用側の要求を受けながら新旧を切り替えるには、並行して動かす期間と、戻す手順が要ります。これは Part 15 で扱います。2 つ目はデータの移行です。部品を入れ替えるときは、中のデータも移し、移した結果が元と一致するかを確かめる必要があります。DDIA は、データベースの移行で旧システムに戻せない場合、戻せる場合より危険がはるかに高いと述べています。Part 12 と 15 で扱います。3 つ目は新旧の版の混在です。逐次更新は、1 ノードずつ再起動して、止めずに更新する方法です。その間は、新しいコードと古いコード、新しい形式と古い形式のデータが同時に動きます。これは Part 7 で扱います。この 3 つを規格の語彙の外と読むのは、このガイドの解釈です。規格の定義文は二次資料でしか確かめていないためです。規格の中で近い語は、互換性の副特性の共存性と相互運用性、柔軟性の副特性の適応性です。ただ、稼働中に、データごと、版が混ざったまま、という条件は、これらの名前からは読み取れません。

19 件の事後報告で、引き金の多くは変更・操作
スライド 16 のテキストと解説
19 件の事後報告で、引き金の多くは変更・操作 考え方 変更・操作が 13 件(境界の取り方で 12〜14 件)。機器・電源・ネットワークの障害や乱れは 3 件 指針・報告 事業者の事後報告 19 件(2015〜2025 年。一覧と型の分析は Part 14) 書籍 DDIA 2e 2.3.3 節 p.45(設定変更が機能不全の主因だった、2003 年発表の調査を引く) 書籍の記述 2003 年発表の大規模インターネットサービスの調査では、オペレーターの設定変更が機能不全の主因で、ハードウェア(サーバーやネットワーク)の障害が関係したのは 10〜25%(DDIA 2e p.45 が引用) 「変更・操作」13 件の内訳 | 件数 設定・ルール・ポリシーの変更と配布 | 3 人が打ったコマンド・スクリプト | 3 ソフトウェアの更新、機能の有効化 | 4 容量の追加、自動のスケール | 2 機器を交換する保守作業 | 1 数え方と限界 2015〜2025 年の 19 件を、報告が最初に挙げる出来事で 1 件 1 分類にした(選定と分類は本ガイド)。境界の 3 件:Google Cloud 2025-06 は、先に挙がる 5/29 のコード配布で数えた。Cloudflare 2023-11 は電力会社の計画外の保守が最初で、障害や乱れに入れた。GitLab 2017-01 は負荷の増加が最初で、データ喪失の直接の原因は誤操作。公開する事業者に偏り、業界全体の頻度ではない 16
解説

大規模サービスを止めた引き金を数えました。対象は、このガイドが選んだ 19 件の公開された事後報告です。2015 年から 2025 年の、AWS、Google Cloud、Cloudflare などの報告です。数え方は、事業者の報告が最初に挙げる出来事で、1 件を 1 つに分類しました。分類はこのガイドによるものです。結果は、変更と操作が 13 件で、境界の取り方によって 12 から 14 件の幅があります。内訳は、設定・ルール・ポリシーの変更と配布が 3 件、人が打ったコマンドやスクリプトが 3 件、ソフトウェアの更新や機能の有効化が 4 件、容量の追加と自動のスケールが 2 件、機器を交換する保守作業が 1 件です。機器・電源・ネットワークの障害や乱れは 3 件で、AWS DynamoDB の 2015 年、Cloudflare の 2023 年 11 月と 2020 年 11 月の件です。負荷の増加が 2 件、変更を伴わない潜在的な不具合の発現が 1 件でした。境界の判断が 3 件あります。Google Cloud の 2025 年 6 月の件は、報告が先に挙げるのが 5 月 29 日のコードの配布なので、当日のポリシーの変更ではなく、ソフトウェアの更新に数えました。Cloudflare の 2023 年 11 月の件は、最初の出来事が電力会社の計画外の保守で、障害や乱れに数えました。GitLab の 2017 年の件は、最初の出来事が負荷の増加なのでそこに入れましたが、データを失った直接の原因は誤操作です。GitHub の 2018 年の件は、故障しかけた機器を交換する保守作業で、変更と操作に入れています。左下は書籍の記述で、2003 年に発表された調査です。19 件と同じ時代の数字ではありません。報告を公開する事業者に偏るので、業界全体の頻度でもありません。型の分析は Part 14 で行います。

性質は、自動で検査できる数字にする
スライド 17 のテキストと解説
性質は、自動で検査できる数字にする 考え方 形容詞のままでは、守れているかを判定できない。適応度関数として、検査と数字に落とす 指針・報告 Azure「Design for change」(2026-11 確認)/Thoughtworks Radar(2018-05) 書籍 『ハードパーツ』1.5 節 p.6〜9(適応度関数の定義と範囲) 適応度関数とは アーキテクチャ特性を客観的に評価する仕組み(テスト、監視など) 「高性能」と言わず、測れる値を決める 測れない特性は、測れる特性に分ける 位置づけ Azure の設計原則「Design for change」が利用を勧める Thoughtworks Radar は 2017・2018 年に Trial 現行版の Radar には不掲載 性質 | 検査の例 | 出す数字 更新性 | スキーマの互換性検査を、CI で毎回通す(Part 7) | 互換性違反の件数 置換性 | 導出データをログから作り直し、正と突き合わせる (Part 12) | 所要時間、一致率 柔軟性 | 所有者以外のサービスが DB に直接つないでいないかを検査する(Part 3) | 所有者以外からの接続数 拡張性 | 決めた負荷をかけ、応答時間の目標を守れるか確かめる(Part 2) | 応答時間の 99 パーセンタイル 本ガイドの提案 右の表は、出典に載っている例ではなく本ガイドの提案。道具の仕様と実測は、各 Part とケーススタディで確かめる 17
解説

4 つの性質を、測れる形にする方法です。『ハードパーツ』は、適応度関数を、アーキテクチャ特性やその組み合わせを客観的に評価する、あらゆる仕組みと紹介しています。もとは『進化的アーキテクチャ』の定義です。テストでも監視でも構いません。同書は、「高パフォーマンスな」サイトが欲しいと言うのではなく、測定できる客観的な値を定めるよう求めます。それ自体を測れない複合的な特性は、測れる特性に分解します。Azure Architecture Center の設計原則「Design for change」も、適応度関数の利用を勧めています。Thoughtworks の Technology Radar では、2017 年 11 月と 2018 年 5 月に Trial として載り、現行の版には載っていません。右の表は、4 つの性質に当てはめた例です。これは出典に載っている例ではなく、このガイドの提案です。99 パーセンタイルは、100 回のうち遅いほうから 1 回を除いた応答時間の上限のことで、Part 2 で説明します。道具の仕様は各 Part で確かめます。出典の補足:Azure の文書は 2026 年 11 月に確認。Technology Radar は 2018-05 の号で Trial。

戻せない決定を見分け、そこに時間を使う
スライド 18 のテキストと解説
戻せない決定を見分け、そこに時間を使う 考え方 戻せない変更は、戻せる変更より危険が大きい。戻せるようにするか、時間をかけて決める 書籍 DDIA 2e 2.5.3 節 p.53(不可逆性)/『ハードパーツ』1.4 節 p.5〜6(ADR)、1.1 節 p.2〜3(変更が難しいもの) 決定の例 | 戻しやすさ | なぜ | 扱う Part 記録のシステムの DB を入れ替える | 戻しにくい | 切り替えた後の書き込みは、旧側に無い。戻す経路を先に作る必要がある | 15 公開したイベントや API の項目を消す、意味を変える | 戻しにくい | 古い形式のデータと、古い版の利用側が残っている | 7 データを削除する | 戻せない | 復元の手段を別に用意していなければ、取り戻せない | 14・16 導出データの作り方を変える | 戻しやすい | 正から作り直せる(前提条件は Part 12) | 12 サービス内部の実装を変える | 戻しやすい | 契約の内側なので、利用側に響かない | 7 リーダーの視点 戻しにくい決定は、ADR(1 つの決定を 1〜2 ページで残す文書)に、コンテキスト・決定・影響を書く 本ガイドの整理 表の例と判定は本ガイドのもの。根拠は各 Part で示す 18
解説

後戻りしにくい決定の見分け方です。DDIA 第 2 版は、大規模なシステムで変更を難しくする主な要因の 1 つに、不可逆性を挙げています。例はデータベースの移行です。新しいシステムに問題が出たとき、旧システムに戻せないなら、戻せる場合より危険がはるかに高くなります。そして、不可逆性を小さくすれば柔軟性が上がる、と述べています。表は、この考え方を、このガイドが扱う決定に当てはめたものです。記録のシステムのデータベースの入れ替え、公開したイベントや API の項目の削除、データの削除は、戻しにくい側に置きました。導出データの作り方や、サービス内部の実装は、戻しやすい側です。この判定はこのガイドの整理で、根拠は各 Part で示します。大事なのは、戻しにくい決定を見分け、戻す経路を先に用意するか、時間をかけて決めることです。その決定は ADR に残します。ADR は 1 つの決定を 1〜2 ページで書く短い文書で、『ハードパーツ』はコンテキスト、決定、影響の 3 節で書いています。

設計レビューでは、性質を数字と手順で問う
スライド 19 のテキストと解説
設計レビューでは、性質を数字と手順で問う 考え方 「柔軟に」「拡張できるように」で終わらせず、何の数字で確かめ、どう変えるかまで聞く 指針・報告 事業者の事後報告 19 件(本 Part の 8 枚目)/Azure「Design for change」 書籍 DDIA 2e 1.1.3 節 p.10〜11、2.5.3 節 p.53/『ハードパーツ』1.5 節 p.7〜8 問い | なぜ問うか | 危ない兆候 4 つの性質を、それぞれ何の数字で確かめるか | 数字が無いと、守れているかを判定できない | 形容詞だけで書いてある 「拡張性」は、負荷への対応か、機能の追加か | 同じ言葉が 2 つの意味で使われる | 会議の途中で意味が入れ替わる どのデータが正で、どれが導出か | 食い違ったとき、どちらを直すかが決まる | 「同期しているから、どちらも正」 更新の途中、新旧の版が混在する間に何が起きるか | 規格の特性の名前に無く、抜けやすい | 全体の一斉更新が前提になっている 部品を入れ替えるとき、データをどう移し、問題があればどう戻すか | 戻せない変更は、危険がはるかに高い | 「標準の SQL だから移せる」 設定やルールの変更は、コードと同じ手順で配っているか | 事後報告 19 件で、引き金の多くは変更・操作だった | 「設定変更なので、リリースではない」 性質を守る検査は、自動で毎回動いているか | 変更を重ねても、特性を保つため | 設計書にだけ書いてある 19
解説

Part 1 の内容を、設計レビューで使う問いにしました。1 つ目は、4 つの性質をそれぞれ何の数字で確かめるかです。形容詞だけで書かれた性質は、守れているかを判定できません。2 つ目は、拡張性という言葉の意味です。負荷への対応と機能の追加が、会議の途中で入れ替わることがあります。3 つ目は、どのデータが正で、どれが導出かです。これが決まっていないと、食い違ったときにどちらを直すかが決まりません。4 つ目は、更新の途中で新旧の版が混在する間に何が起きるかです。規格の特性の名前に無いので、抜けやすい点です。5 つ目は、部品を入れ替えるときのデータの移し方と戻し方です。6 つ目は、設定やルールの変更を、コードと同じ手順で配っているかです。19 件の事後報告では、引き金の多くが変更や操作でした。7 つ目は、性質を守る検査が自動で毎回動いているかです。危ない兆候の列は、よくある答えの例として、このガイドが挙げたものです。各ステップの詳しい問いは、それぞれの Part と Part 17 にまとめます。

まとめ:データから考え、変えられる形で決める
スライド 20 のテキストと解説
まとめ:データから考え、変えられる形で決める 考え方 長く残るのはデータ。4 つの性質は、数字と検査と、戻す手順で具体的にする 仕様・文書 ISO/IEC 25010:2023 まえがき・適用範囲(見本 PDF)/JIS X 25010:2025 書誌 指針・報告 事業者の事後報告 19 件(2015〜2025 年) 書籍 DDIA 2e 1 章 p.1・10〜11、2 章 p.45・51・53/『ハードパーツ』1 章 p.4〜9 データから考える:コードや製品は入れ替わり、データと、その形を決めた判断が残る 正・流れ・契約で見る:記録のシステムと導出データを分け、間の流れと約束を設計する 4 つの性質:柔軟性・拡張性・置換性は規格の語に対応づけ、更新性は本ガイドで定義 主題:稼働中の切り替え、データの移行、新旧の版の混在 引き金は変更・操作:事後報告 19 件のうち 13 件(数え方で 12〜14)。安全に変えられる設計が要る 数字と検査にする:性質は測れる形にし、戻しにくい決定は見分けて ADR に残す 次の Part Part 2:要件と負荷を数字にする(ステップ 1) 性質を「何の数字で約束するか」から始める 対応づけの注意 規格・書籍との対応は本ガイドの解釈。規格の定義文は引用していない 20
解説

Part 1 のまとめです。1 つ目、データから考えます。コードや製品は入れ替わりますが、データと、その形を決めた判断は残ります。2 つ目、全体を、正・流れ・契約で見ます。記録のシステムと導出データを分け、その間の流れと約束を設計します。3 つ目、4 つの性質です。柔軟性・拡張性・置換性は JIS X 25010:2025 の特性と副特性の名前に対応づけ、更新性はこのガイドで定義しました。対応づけはこのガイドの解釈で、規格の定義文は引用していません。4 つ目、このガイドの主題は、稼働中の切り替え、データの移行、新旧の版の混在です。5 つ目、19 件の事後報告では、引き金の多くが変更や操作でした。このガイドの数え方で 13 件、境界の取り方で 12 から 14 件です。変更を安全に行える設計が要ります。6 つ目、性質は測れる数字と自動の検査にし、戻しにくい決定を見分けて ADR に残します。次の Part 2 はステップ 1 です。性質を、何の数字で約束するかから始めます。パーセンタイルや SLO といった数字の書き方を扱います。

PART 2 要件と負荷を数字にする
スライド 21 のテキストと解説
PART 2 要件と負荷を数字にする 数字のない非機能要件はレビューできない。負荷・応答時間・信頼性・復旧を、条件つきの数字で 1 枚に書く このPartで答えられるようになる問い 負荷を、どの数字で表すか 応答時間を、なぜ平均でなくパーセンタイルで約束するか SLO・RPO・RTO は、それぞれ何を決める数字か IPA の非機能要求グレードは、どこまで使えるか 21
解説

Part 2 は、9 つのステップの最初、要件と負荷を数字にするステップです。結論を先に言うと、数字のない非機能要件はレビューできません。「高速」「高可用」「拡張性がある」と書かれた設計書には、賛成も反対もできないからです。この Part では、負荷を読み書きの比とファンアウトで表すこと、応答時間を平均ではなくパーセンタイルで約束すること、信頼性を SLI・SLO・エラーバジェットで表すこと、復旧の目標を RPO と RTO で表すことを順に見ます。そのうえで、障害と機能不全を分けて「どの障害に耐えるか」を先に決めること、スケールの方向と、早すぎる分散を避ける判断を扱います。日本でよく使われる IPA の非機能要求グレードの使いどころと限界も確認します。最後に、架空の宅配注文サービスを例に、要件を 1 枚に書く型を示します。主な根拠は『データ指向アプリケーションデザイン 第2版』の 2 章と、Google の SRE 本です。

数字のない非機能要件はレビューできない
スライド 22 のテキストと解説
数字のない非機能要件はレビューできない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 「高速」「高可用」には賛成も反対もできない。条件つきの数字にして、初めて設計を比べられる 指針・報告 Google SRE 本 4 章(目標は単純に、少なく。2026-11 確認) 書籍 『データ指向アプリケーションデザイン 第2版』2 章 p.31〜32、2.2.3 節 p.40 よくある書き方 | 数字にした書き方(説明用の例) | この数字で決まる設計 高速に応答する | 注文確定の応答時間:中央値 200 ms 未満、99 パーセンタイル 1 秒未満 利用側で測る | 索引、キャッシュ、1 つの要求が広がる先の数 高可用 | 有効な要求の 99.9% 以上が成功する(4 週間の窓) | 冗長化の範囲、リリースを止める条件 データを失わない | 応答済みの注文は RPO 0、RTO 15 分 | 複製の方式と切り替えの手順(Part 8) 将来の拡張に備える | 現在はピーク毎秒 300 注文。その 10 倍までを設計の対象にする | 分割の要否と、見直す時期 リーダーの視点 形容詞で書かれた要件を見たら、「何を、どこで測り、いくつなら合格か」に書き直してもらう。数字は後から直せるが、数字が無いと直す対象が無い ポイント 表の数値は説明用(DDIA 2e p.40 の SLO の例にならった)。推奨値ではない 22
解説

最初に、なぜ数字にするのかを確認します。表の左は設計書によくある書き方、中央はそれを数字にした書き方、右はその数字が決まると設計の何が決まるかです。たとえば「高速に応答する」は、どの操作の、どのパーセンタイルが、何ミリ秒未満か、どこで測るか、まで書きます。表の数値は、DDIA 第 2 版の SLO の例にならった説明用の値で、推奨値ではありません。「データを失わない」は RPO と RTO に、「将来の拡張に備える」は現在の負荷と、何倍までを設計の対象にするかに書き換えます。同書が 2 章で扱うのは性能・信頼性・スケーラビリティ・メンテナンス性で、セキュリティなどは範囲外と明記しています。この Part は前の 3 つを数字にします。発展性は Part 7 と Part 15 で扱います。

負荷は、読み書きの比とファンアウトで表す
スライド 23 のテキストと解説
負荷は、読み書きの比とファンアウトで表す 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 同じ投稿数でも、読むたびに集めるか、書くときに配るかで、負荷の数字は 2 桁以上変わる 仕様・文書 Krikorian「Timelines at Scale」QCon SF 2012(講演の数値は未確認) 書籍 DDIA 2e 2.1 節 p.32〜34(数字は同書の仮定)、2.4.1 節 p.48 読むときに集める:毎秒 4 億件の参照 1,000 万人が 5 秒ごとに問い合わせ = 毎秒 200 万クエリ × フォロー先 200 人 = 毎秒 4 億件 書くときに配る:毎秒 100 万件強の書き込み 毎秒 5,800 投稿 × フォロワー 200 人(ファンアウト係数 200) 読み取りは、事前に計算した結果を返すだけ 負荷を表す数字(DDIA 2e p.48) | 宅配注文サービスなら(架空の例) スループット | 毎秒の注文数、1 日に増えるデータ量 ピーク値 | 昼と夜のピーク時の毎秒の注文数、同時接続数 読み書きの比率 | 注文 1 件に対し、配達状況の照会が何回あるか 利用者あたりの項目数 | 1 注文の明細数、1 店舗が同時に受ける注文数 注意 平均だけで書かない。少数の極端な利用者が、ボトルネックを支配することがある (DDIA の例ではフォロワー 1 億人超) ファンアウト:1 つの要求が下流の複数の要求に広がるときの、要求数の倍率 23
解説

DDIA 第 2 版の 2 章にある、ホームタイムラインの事例です。数字は同書が置いた仮定です。1 日 5 億件の投稿は平均で毎秒 5,800 件、利用者は平均 200 人をフォローし、200 人にフォローされているとします。読むたびにフォロー先の投稿を集める設計では、同時に 1,000 万人が 5 秒ごとに問い合わせると毎秒 200 万クエリになり、フォロー先 200 人分を掛けると毎秒 4 億件の参照になります。一方、投稿のたびに各フォロワーのタイムラインへ配っておく設計では、毎秒 5,800 件に 200 を掛けた、毎秒 100 万件強の書き込みで済みます。1 つの要求が下流の複数の要求に広がる倍率を、ファンアウトと呼びます。ここから言えるのは、負荷は「利用者数」だけでは表せず、読み書きの比率、ピーク、利用者あたりの項目数まで書く必要がある、ということです。極端な利用者が全体を支配することもあります。事前に配るタイムラインは導出データで、Part 3 で扱います。表の右の列は架空の例です。

応答時間は、平均でなくパーセンタイルで約束する
スライド 24 のテキストと解説
応答時間は、平均でなくパーセンタイルで約束する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 平均は、遅い要求を何人が経験したかを示さない。p50 で典型を、p99 で遅い側(テール)を見る 仕様・文書 Dean・Barroso「The Tail at Scale」CACM 56 巻 2 号、2013 指針・報告 Google SRE 本 4 章(平均でなく分布で見る) 書籍 DDIA 2e 2.2.1〜2.2.3 節 p.36〜41 用語 | 意味 レスポンスタイム | 利用側から見た時間。キューで待った時間など、すべての遅延を含む p50(中央値) | 要求の半分が、この値より速い。典型的な待ち時間 p95・p99・p999 | 100 回に 5 回・100 回に 1 回・1,000 回に 1 回が、この値より遅い テールレイテンシ | 高いパーセンタイルの応答時間(末尾遅延)。利用者の体験に直接ひびく 63% 1 台なら 100 回に 1 回だけ 1 秒を超えるサーバー 100 台に並列に問い合わせ、全部を待つと、1 秒を超える要求の割合(1 − 0.99 の 100 乗) 注意 パーセンタイルどうしを平均しない(数学的に意味がない)。複数のマシンや時間帯をまとめるときは、ヒストグラムを足す ポイント 利用側で測る。高すぎるパーセンタイルは費用に見合わないことがある(Amazon は 99.9 で定め、99.99 は見送り:DDIA 2e p.38〜39) 24
解説

DDIA 第 2 版は、レスポンスタイムをクライアントから見た時間と定義し、すべての遅延を含むとしています。サービスタイムにはキューで待った時間が含まれないので、利用側で測ることが重要です。応答時間を速い順に並べた真ん中が中央値、p50 で、典型的な待ち時間を表します。p99 は、100 回に 1 回がそれより遅いという値です。高いパーセンタイルをテールレイテンシ、末尾遅延と呼びます。右の 63% は、Dean と Barroso の 2013 年の論文の計算です。1 台だけなら 100 回に 1 回しか 1 秒を超えないサーバーでも、100 台に並列に問い合わせて全部を待つと、要求の 63% が 1 秒を超えます。ただし、極端に高いパーセンタイルの最適化は費用に見合わないことがあります。DDIA は、Amazon が内部サービスの要件を 99.9 パーセンタイルで定め、99.99 は見送った例を挙げています。監視では、パーセンタイルどうしを平均しないことにも注意します。

信頼性は SLI・SLO・エラーバジェットで約束する
スライド 25 のテキストと解説
信頼性は SLI・SLO・エラーバジェットで約束する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 SLI は測る量、SLO はその目標、「100% − SLO」がエラーバジェット。使い切ったときの取り決めも書く 指針・報告 Google SRE 本 3・4 章/SRE Workbook 2 章(Web 公開版。2026-11 確認) 書籍 DDIA 2e 2.2.3 節 p.40(SLO・SLA の定義と例) SLI 良いイベント ÷ 全イベント SLO SLI の目標値と期間 例:99.9%、4 週間 エラーバジェット 100% − SLO 300 万件なら失敗 3,000 件まで 使い切ったときの取り決め 誰が、何を止めるか サービスの種類 | SLI の例(SRE Workbook 2 章) 要求に応答するもの | 可用性、レイテンシ、品質 パイプライン | 鮮度、正確性、網羅率 ストレージ | 耐久性 目標の決め方(SRE 本 4 章) 現状の値から決めない。100% などの絶対を避ける 単純に保ち、SLO の数は少なくする 失敗例:目標を上回りすぎる Google の Chubby は、目標を大きく上回る可用性が続き、利用側が「落ちない」前提で依存した。SRE は、目標を大きく超えないよう計画的に停止を入れている(SRE 本 4 章) 25
解説

出どころは Google の SRE 本と SRE Workbook です。1 社の実践の公開で、規範ではありません。SLI はサービスの水準を測る量で、Workbook は「良いイベントの数を全イベントの数で割ったもの」として書くことを勧めています。SLO は、その SLI の目標値です。エラーバジェットは 100% から SLO を引いたものです。Workbook の例では、成功率 99.9% の SLO で 4 週間に 300 万件の要求があれば、3,000 件までの失敗が予算です。予算が残る間はリリースでき、使い切ったらリリースを止めて信頼性の作業に回します。そのために、誰が何をするかを書いた文書を関係者が承認しておきます。目標は、現状の値から決めず、100% のような絶対を避けます。下は、目標を上回りすぎた例です。Google のロックサービス Chubby は可用性が高く、利用側が落ちない前提で依存しました。そこで計画的に停止を入れています。共通基盤の SLO を考えるときに思い出したい例です。

RPO・RTO は「どこまで失い、どこまで待てるか」
スライド 26 のテキストと解説
RPO・RTO は「どこまで失い、どこまで待てるか」 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 RPO は失ってよいデータの時間幅、RTO は戻るまでに待てる時間。可用性の % とは別の数字 仕様・文書 NIST CSRC 用語集:RPO・RTO(出典 SP 800-34 Rev. 1。2026-11 確認) 指針・報告 AWS Well-Architected Framework REL13-BP01(2026-11 確認)/IPA 非機能要求グレード 2018 A.1.3 最後の復旧点 障害の発生 復旧 RPO:この間のデータは失われうる RTO:この間はサービスが止まる 数字 | 決めること | この数字で決まる設計(Part 8) RPO | 障害の後、どの時点までのデータを戻せればよいか | 複製を同期にするか非同期にするか、バックアップの間隔 RTO | 止まってから戻るまで、どれだけ待てるか | 切り替えの方法、復元にかかる時間 可用性(SLO) | 期間を通じて、どれだけの要求が成功するか | 冗長化の範囲、リリースの進め方 RPO・RTO は 1 回の出来事の上限。可用性は期間の平均。混ぜて書かない(AWS の DR ホワイトペーパーの区別) 本ガイドの考え(一次資料なし) データの種類ごとに書く(例:注文と決済は RPO 0、通知の履歴は数分) 26
解説

RPO は目標復旧時点で、NIST の用語集は「停止の後に、データを回復しなければならない時点」と定義しています。AWS の Well-Architected Framework は、許容できるデータ損失の上限で、最後に復旧できる時点から障害までの時間で測る、と説明します。RTO は目標復旧時間で、AWS の説明では、サービスの中断から復旧までに許容できる最大の時間です。NIST の用語集は RTO を、任務や業務に悪影響が出る前に、システムの構成要素が復旧の段階にいられる時間の全体、と定義しています。どちらも 1 回の出来事に対する上限です。AWS の災害復旧のホワイトペーパーは、災害復旧の目標は 1 回の出来事に対するもので、可用性の目標は期間を通した平均の値だと区別しています。RPO と RTO は、Part 8 の複製の方式を決める入力です。RPO 0 を求めたときの費用も Part 8 で見ます。右下は本ガイドの考えで、データの種類ごとに書くことを勧めます。NIST は米国連邦機関向け、AWS は自社クラウドの利用者向けの任意の指針です。IPA のグレードにも RPO・RTO・RLO の項目があります。出典の補足:AWS は、Well-Architected Framework の REL13-BP01 と、ホワイトペーパー「Disaster Recovery of Workloads on AWS」の Introduction(どちらも 2026-11 確認)。

障害と機能不全を分け、耐える障害を先に決める
スライド 27 のテキストと解説
障害と機能不全を分け、耐える障害を先に決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 障害は部分の故障、機能不全は全体の停止。耐障害性は、決めた種類と数の障害にだけ成り立つ 書籍 DDIA 2e 2.3 節 p.41〜46(障害と機能不全、単一障害点、ソフトウェアの障害、人と信頼性) 障害(fault) システムの一部が正しく動かなくなること 例:ディスク 1 台の故障、依存先のサービスの停止 機能不全(failure) 全体が、必要なサービスを提供できなくなること SLO を満たせなくなった状態 障害の種類 | 例(DDIA 2e 2.3 節) | 要件に書くこと ハードウェア | ディスク・マシン・電源の故障、データセンターの喪失 | 何台まで、どの範囲まで耐えるか(例:3 台中 1 台) ソフトウェア | 全ノードが同じバグで倒れる、依存先の遅延、連鎖障害 | 依存先が遅い・止まったときのふるまい(Part 14) 人と変更 | 設定変更の誤り | 段階的な配布と、素早く戻す手段(Part 7・15) 耐えられない部分が単一障害点(SPOF)。その障害が、全体の機能不全に直結する ケーススタディ 障害を注入して確かめる(Toxiproxy と Pumba。結果はケーススタディ) 27
解説

DDIA 第 2 版の訳語に揃えて、fault を障害、failure を機能不全と呼びます。障害は、システムの一部が正しく動かなくなることです。機能不全は、システム全体が利用者に必要なサービスを提供できなくなることで、同書は SLO を満たせなくなった状態と説明しています。障害があっても機能不全にしないことを耐障害性と呼びます。耐障害性は常に、特定の種類の障害の、特定の数に対してだけ成り立ちます。だから要件には、どの種類を、いくつまで耐えるかを書きます。同書は、ソフトウェアの障害は多くのノードが同じバグを抱えるので強く相関し、互いに相関しないハードウェアの障害より、はるかに多くの機能不全を起こす傾向があると述べています。また、2003 年に発表された大規模インターネットサービスの調査も引いています。機能不全の主な原因はオペレーターが行った設定変更で、サーバーやネットワークといったハードウェアの障害が関係したのは 10 から 25% の事例だった、という結果です。20 年以上前の調査である点に注意してください。耐障害性は、わざと障害を起こして確かめます。ケーススタディでも障害を注入します。

スケールの方向は 3 つ。分散は必要になってから
スライド 28 のテキストと解説
スケールの方向は 3 つ。分散は必要になってから 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 1 台を強くする、ディスクを共有する、何も共有しない。分散は伸びるが、分散システムの複雑さを払う 仕様・文書 Stonebraker「The Case for Shared Nothing」IEEE DE Bulletin 9(1)、1986 書籍 DDIA 2e 2.4 節 p.47〜50 方式 | しくみ | 得るもの | 払うもの スケールアップ(共有メモリ) | 1 台を、より強力なマシンにする | 構成が単純(DDIA 2e p.49)。トランザクションの管理が最も容易(Stonebraker 1986) | 費用が線形より速く増える。2 倍の資源で 2 倍を処理できるとは限らない 共有ディスク | 複数のマシンが、同じディスク群にデータを置く | データの置き場所は 1 つのまま、マシンを足せる | 競合とロックのオーバーヘッドが伸びを制限する スケールアウト(シェアードナッシング) | 各ノードが CPU・メモリ・ディスクを持ち、ネットワークで協調する | 線形に伸びる可能性。価格対性能比の良い機材。複数リージョンでの耐障害性 | シャーディングと分散システムの複雑さ。分散デッドロックの検出と多相コミット 採用判断 早すぎる分散を避ける。単一マシンのデータベースで足りるなら、おそらくそのほうが望ましい。1 桁を超える先の負荷に備える計画は、通常割に合わない (DDIA 2e p.50) リーダーの視点 「スケールするか」ではなく、「いまの設計の限界に、いつ達するか」を数字で問う(DDIA 2e p.47) 28
解説

資源を足す方向は 3 つです。1 つ目はスケールアップ、垂直スケーリングで、1 台をより強力なマシンにします。DDIA 第 2 版は、費用が線形より速く増えることを問題に挙げます。2 つ目は共有ディスクで、複数のマシンが同じディスク群を使います。競合とロックのオーバーヘッドが伸びを制限します。3 つ目がスケールアウト、水平スケーリングで、各ノードが CPU、メモリ、ディスクを持つシェアードナッシングです。線形に伸びる可能性がありますが、シャーディングと分散システムの複雑さを伴います。原典は 1986 年の Stonebraker の論文で、シェアードナッシングを推しつつ、分散デッドロックの検出と多相コミットが要ると書いています。表の「トランザクションの管理が最も容易」も、DDIA ではなくこの論文の評価です。DDIA は、単一マシンのデータベースで足りるなら、おそらくそのほうが望ましいと述べ、負荷が 1 桁増えるごとにアーキテクチャを考え直すことになるので、1 桁を超える先の計画は通常割に合わないとしています。シャーディングは Part 8、分散システムの難しさは Part 10 で扱います。

IPA のグレードは基盤の合意用。サービス間の契約は項目に無い
スライド 29 のテキストと解説
IPA のグレードは基盤の合意用。サービス間の契約は項目に無い 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 発注者と受注者が、システム基盤の非機能要求を合意するための任意の道具。項目の出どころとして使う 指針・報告 IPA 非機能要求グレード 2018 解説編 1.3〜1.4、樹系図、項目一覧(2026-11 確認) 使いどころ 6 大項目・238 メトリクスで、要件の漏れを点検する RPO・RTO・RLO、レスポンス順守率、スケールアップ/スケールアウトなど、この Part の数字が項目にある レベルは合意の出発点。最終的には具体的な数値で合意する(解説編) 限界 対象はシステム基盤。主に業務アプリを定める項目(ユーザビリティ・機能性・移植性など)と、個別の製品の選択はスコープ外(解説編 1.3.3) サービス間の契約、スキーマの互換性にあたる項目は見当たらない(本ガイドが樹系図と項目一覧を語句で確認) 2018 年 4 月の版。事業は終了し、問い合わせ対応は無い リーダーの視点 「IPA で決まっている」は根拠にならない。項目の出どころとして使い、足りない分(サービス間の契約、互換性、新旧の版の混在)は Part 7 で足す 29
解説

IPA の非機能要求グレード 2018 は、ユーザとベンダの間で、システム基盤に関わる非機能要求の認識のずれをなくすことを目的にした道具です。規範ではありません。解説編は、レベルは合意形成の出発点で、最終的には具体的な数値で合意する必要があると書いています。可用性、性能・拡張性、運用・保守性、移行性、セキュリティ、システム環境・エコロジーの 6 つの大項目に、238 のメトリクスが並んでおり、要件の漏れを点検できます。RPO、RTO、レスポンスの順守率、スケールアップとスケールアウトも項目にあります。対象はシステム基盤です。解説編の 1.3.3 がスコープ外とするのは 2 つで、主に業務アプリケーションを定めるための項目、たとえばユーザビリティ、機能性、移植性と、各社個別の製品やソリューションの選択に関する項目です。サービス間の契約を対象外と定めた記述はありません。ただ、本ガイドが樹系図と項目一覧を語句で調べた範囲では、サービス間の契約やスキーマの互換性にあたる項目は見当たりませんでした。「契約」という語は、保守契約やサポート契約の項目と、機器を増設するときの契約の変更といった備考に出てくるだけで、サービス間の取り決めの意味では使われていません。動かしたまま変えるための取り決めは、Part 7 で別に書きます。2018 年 4 月の版で、事業は終了しています。

要件は 1 枚に書く:宅配注文サービスの例
スライド 30 のテキストと解説
要件は 1 枚に書く:宅配注文サービスの例 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 負荷・応答時間・信頼性・復旧・成長を、条件と対にして 1 枚に。数値はすべて架空 指針・報告 SRE Workbook 2 章/IPA 非機能要求グレード 2018(項目の出どころ) 書籍 DDIA 2e 2.2.3 節 p.40(SLO の例)、2.4.1 節 p.48(負荷の指標) 項目 | 書く数字(すべて架空の例) | 条件・測り方 負荷 | 平均 毎秒 30 注文、ピーク 毎秒 300 注文。照会は注文の 20 倍 | ピークは平日の 12 時台と 19 時台 ファンアウト | 注文 1 件 → 在庫・決済・通知の 3 サービス | 通知は遅れてよい(キューに入れる) 応答時間 | 注文確定:p50 200 ms 未満、p99 1 秒未満 | 利用側で測る。4 週間の窓 可用性 | 有効な要求の 99.9% 以上が成功 | 予算を使い切ったらリリースを止める 復旧 | 注文・決済:RPO 0、RTO 15 分/通知の履歴:RPO 5 分 | ゾーン 1 つの喪失を想定。年 2 回の演習 耐える障害 | 3 ノード中 1 ノード、ゾーン 1 つ | 決済が止まったら、注文は受けて保留にする 成長 | 1 年で 3 倍。10 倍までを今の設計の対象にする | 10 倍を超える見込みが出たら設計を見直す 本ガイドの型(一次資料に同じ表は無い)。数値は架空で、推奨値ではない。要点は、数字と条件を対にすること 30
解説

題材は、ケーススタディと同じ架空の宅配注文サービスです。表の数値はすべて架空で、推奨値ではありません。要点は、左の項目と、右の「条件・測り方」を必ず対にすることです。負荷は、平均とピーク、読み書きの比で書きます。ファンアウトは、1 つの注文が内部でいくつのサービスに広がるか、そのうち遅れてよいものはどれかを書きます。応答時間は p50 と p99 を、どこで測るかと一緒に書きます。可用性は成功率と、エラーバジェットを使い切ったときの取り決めを書きます。復旧はデータの種類ごとに RPO と RTO を書き、想定する障害と、演習の頻度を添えます。耐える障害は種類と数を書きます。成長は、何倍までを今の設計の対象にするかと、見直す条件を書きます。この型は本ガイドの提案です。項目の出どころは、DDIA の 2 章、SRE Workbook、IPA のグレードです。この 1 枚があれば、後のステップの選択を数字と照らして議論できます。

設計レビューで問うこと:要件と負荷
スライド 31 のテキストと解説
設計レビューで問うこと:要件と負荷 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 この 7 つに数字で答えられなければ、次のステップの選択肢を比べる物差しが無い 仕様・文書 Dean・Barroso「The Tail at Scale」2013 指針・報告 Google SRE 本 3・4 章/AWS Well-Architected Framework REL13-BP01 書籍 DDIA 2e 2 章 p.39〜50 問い | なぜ問うか | 危ない兆候 負荷を表す数字は何か。ピークは平均の何倍か | 現在の負荷を数字で言えないと、成長の議論ができない | 「利用者数」だけで、読み書きの比やピークが無い 1 つの要求は、内部でいくつのサービスに広がるか | 広がるほど、遅い呼び出しに当たる確率が上がる | 単体の p99 だけを目標にしている 応答時間は、どのパーセンタイルを、どこで測るか | 平均は遅い側を隠す。サーバー側の処理時間はキュー待ちを含まない | 平均応答時間だけ。測る場所が未定 SLO は現状の値や 100% でないか。使い切ったら誰が何を止めるか | 100% は変更を止める。取り決めの無い予算は働かない | 「現行と同等以上」「無停止」 RPO・RTO は、どの障害を想定した数字か。試したか | 1 回の出来事の上限で、可用性の % とは別 | 可用性の % と混同。復旧の演習の記録が無い どの種類の障害を、いくつまで耐えるか | 耐障害性は、種類と数を決めて初めて成り立つ | 「障害に強い」とだけ書いてある その分散は、いまの負荷の数字から必要か | 単一マシンで足りるなら、おそらくそのほうが望ましい | 「将来に備えて」最初からシャーディング 31
解説

ステップ 1 の設計レビューで問うことを、7 つにまとめました。左が問い、中央がなぜ問うか、右が危ない兆候です。1 つ目は負荷です。現在の負荷を数字で言えなければ、負荷が 2 倍になったらどうなるかを議論できません。2 つ目はファンアウトです。1 つの要求が内部で多くのサービスに広がるほど、遅い呼び出しに当たる確率が上がります。3 つ目は応答時間の測り方です。平均だけ、あるいは測る場所が決まっていない要件は、テールを隠します。4 つ目は SLO です。現行と同等以上、無停止、といった書き方は、現状の追認か 100% の目標で、どちらも SRE 本が避けるよう勧めています。5 つ目は RPO と RTO です。どの障害を想定した数字か、実際に試したかを問います。6 つ目は耐える障害の種類と数です。7 つ目は分散の必要性です。将来に備えて最初からシャーディング、という設計は、いまの負荷の数字と照らして問い直します。右の列の兆候が見えたら、数字に書き直してもらってから先に進みます。出典の補足:RPO・RTO の説明は AWS Well-Architected Framework の REL13-BP01、可用性との区別は AWS のホワイトペーパー「Disaster Recovery of Workloads on AWS」(どちらも 2026-11 確認)。

まとめ:数字と条件を 1 枚に書いてから設計する
スライド 32 のテキストと解説
まとめ:数字と条件を 1 枚に書いてから設計する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 1 何を、どこで測り、いくつなら合格か。これが決まって、初めて後のステップの選択を比べられる 仕様・文書 NIST SP 800-34 Rev. 1 の用語/The Tail at Scale(2013) 指針・報告 Google SRE 本・SRE Workbook/IPA 非機能要求グレード 2018 書籍 DDIA 2e 2 章 p.31〜54 負荷と応答時間 負荷は、読み書きの比・ピーク・ファンアウトで表す 応答時間は p50 と p99 で約束し、利用側で測る 信頼性 SLI・SLO・エラーバジェットと、使い切ったときの取り決め 耐える障害の種類と数を先に決める 復旧 RPO・RTO は 1 回の出来事の上限。可用性の % とは別 データの種類ごとに書く(複製の設計は Part 8) 成長 スケールの方向は 3 つ。分散は必要になってから 1 桁を超える先の計画は、通常割に合わない 次はステップ 2(Part 3)。この 1 枚を物差しに、どのデータが正で、誰が持つかを決める 32
解説

Part 2 のまとめです。負荷は、利用者数だけでなく、読み書きの比率、ピーク、ファンアウトで表します。応答時間は、平均ではなく p50 と p99 で約束し、利用側で測ります。信頼性は、SLI、SLO、エラーバジェットで表し、使い切ったときの取り決めまで書きます。あわせて、どの種類の障害をいくつまで耐えるかを先に決めます。復旧は、RPO と RTO をデータの種類ごとに書きます。これは可用性の % とは別の数字です。成長については、スケールの方向を 3 つに分けたうえで、分散は必要になってから選びます。1 桁を超える先の計画は、通常割に合いません。IPA の非機能要求グレードは項目の出どころとして役に立ちますが、サービス間の契約や互換性にあたる項目は見当たらないので(本ガイドの確認)、Part 7 で別に書きます。次の Part 3 はステップ 2 で、どのデータが正で、誰が持つかを決めます。

PART 3 記録のシステムと導出データ、所有
スライド 33 のテキストと解説
PART 3 記録のシステムと 導出データ、所有 正を 1 つに決め、ほかは導出データとする。分けるのは機械より先に、誰が書き、誰が責任を持つか このPartで答えられるようになる問い どのデータが正で、どれが導出か 共有 DB の何が問題で、何は問題でないか データの所有を、誰が書くかでどう決めるか どこまで分け、どこで分けるのをやめるか 33
解説

Part 3 は、9 つのステップの 2 番目、データの所有を扱います。問いは「どのデータを誰が持ち、どれが正か」です。結論を先に言います。データごとに正を 1 つに決め、ほかはすべて導出データとして扱います。次に、共有データベースの問題は、物理サーバーを共有することではなく、同じ表を複数のサービスが読み書きすることだと整理します。そのうえで、表に書くサービスを手がかりに所有を決め、データの所有者とアプリケーションの所有者を分けます。最後に、分けすぎないための歯止めも示します。根拠は『データ指向アプリケーションデザイン 第2版』、『ソフトウェアアーキテクチャ・ハードパーツ』、『大規模データ管理 第2版』と、AWS と Azure の設計指針です。データをどう流すかは Part 6、共通基盤ごとの当てはめは Part 13 で扱います。

記録のシステムは最初に書く場所、導出は作り直せるもの
スライド 34 のテキストと解説
記録のシステムは最初に書く場所、導出は作り直せるもの 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 食い違ったら、定義上、記録のシステムの値が正しい。導出データは失っても元から作り直せる 書籍 『データ指向アプリケーションデザイン 第2版』1.1.3 節 p.10〜11/『大規模データ管理 第2版』2.1.3 節 p.24 正(新しいデータを最初に書く) 導出データ(正を変換・処理して作る) 記録のシステム system of record 例:注文サービスの注文 DB キャッシュ 注文画面の表示用 検索インデックス 注文の検索用 分析基盤の表 売上の集計用 学習済みモデル 需要の予測用 記録のシステム 新しいデータを最初に書く それぞれの事実を 1 回だけ表す 食い違ったら、定義上こちらが正しい 導出データ 別のシステムのデータを変換・処理した結果 失っても元から作り直せる 区別は製品ではなく、使い方で決まる 対応する語:信頼できる情報源(source of truth)、ゴールデンソース(ある文脈の信頼できるデータを管理する、権威あるアプリケーション) 34
解説

最初に 2 つの用語を定義します。記録のシステムは、英語で system of record、信頼できる情報源とも呼ばれます。新しいデータが最初に書き込まれる場所で、それぞれの事実を 1 回だけ表します。ほかのシステムと値が食い違ったら、定義上、記録のシステムの値が正しいとされます。このガイドでは短く「正」とも呼びます。導出データは、別のシステムのデータを変換または処理した結果です。失っても元から作り直せます。キャッシュ、インデックス、マテリアライズドビュー、学習済みモデルがこれに当たります。大事なのは、この区別が製品の種類ではなく使い方で決まることです。同じ PostgreSQL が、あるデータでは正に、別のデータでは導出になります。『大規模データ管理 第2版』のゴールデンソースは近い考え方で、ある文脈の信頼できるデータを管理する、権威あるアプリケーションを指します。次のスライドで、この区別を表に書き出します。

データごとに、正・所有者・導出先を 1 行で書く
スライド 35 のテキストと解説
データごとに、正・所有者・導出先を 1 行で書く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 全体のデータを棚卸しする。「作り直せるか」に答えられない行が、最初に直す箇所 書籍 DDIA 2e 1.1.3 節 p.11/『大規模データ管理 第2版』2.5 節 p.53(ゴールデンソースの一覧と所有者) データ | 正はどこか | 所有者 | 導出先 | 作り直せるか 注文 | 注文サービスの注文 DB | 注文チーム | 検索インデックス、分析基盤の注文の表 | 作り直せる(注文 DB から取り込み直す) 在庫数 | 在庫サービスの在庫 DB | 在庫チーム | 注文画面のキャッシュ、分析基盤の在庫の表 | 作り直せる(在庫 DB から読み直す) 決済の結果 | 決済サービスの決済 DB | 決済チーム | 注文 DB の「支払い済み」の印、売上の集計 | 作り直せる(決済 DB から) 通知の送信履歴 | 通知サービスの DB | 通知チーム | 分析基盤の通知の表 | 作り直せる(通知の DB から) 店舗の人気順位 | 未定(分析基盤で計算し、注文画面へ書き戻している) | 未定 | 注文画面の並び順 | 計算はやり直せる。画面側で手直しした値は失われる 表の列と例は本ガイドの提案(架空の宅配注文サービス)。正が「未定」「両方」の行と、作り直すと失われる値がある行から直す 35
解説

ステップ 2 で最初にやることは、全体のデータの棚卸しです。データごとに 1 行を使い、正はどこか、所有者は誰か、導出先はどこか、導出先を作り直せるか、を書きます。例は架空の宅配注文サービスです。注文、在庫数、決済の結果、通知の送信履歴は、どれも正が 1 つに決まり、導出先は正から作り直せます。問題は最後の行です。店舗の人気順位は分析基盤で計算し、注文画面へ書き戻しています。どこが正かが決まっておらず、画面側で手直しした値は、計算をやり直すと失われます。このように、表にすると決まっていない箇所が見えます。『データ指向アプリケーションデザイン 第2版』は、どのデータがどのデータから導出されるかを明らかにすることが、構成の見通しをよくすると述べています。『大規模データ管理 第2版』も、ゴールデンソースを一覧にして所有者を特定することを、移行の前提に挙げています。列の構成はこのガイドの提案です。

正を 1 つに決めないと、食い違いを直せない
スライド 36 のテキストと解説
正を 1 つに決めないと、食い違いを直せない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 よくある誤りは 3 つ。どれも、導出のはずのデータが第 2 の正になっている 書籍 DDIA 2e 1.1.2〜1.1.3 節 p.10〜11/『大規模データ管理 第2版』2.4 節 p.47(取得と修正はゴールデンソースで) よくある誤り | 何が起きるか | 代わりにどうするか 「同期しているので、両方が正」 | 食い違ったとき、どちらに合わせるかが決まらない。調査のたびに判断が変わる | 正を 1 つに決めて表に書く。もう片方は導出として、正から更新する 導出側にしかない項目がある(検索やキャッシュにだけ書いた値) | 作り直すとその項目が消える。作り直せないので、障害のときに戻せない | 項目を正に移す。導出は、正だけから作れる状態に保つ 分析の結果を業務側へ書き戻し、業務側でも上書きする | 同じ事実の正が 2 つになる。次の計算で、手直しした値が消える | 新しい事実なら、正と所有者を新しく決める。修正は正でだけ行う 本ガイドの考え(一次資料なし) 3 行目(書き戻し)を名指しで警告する権威の文書は見つからなかった。記録のシステムの定義と、「取得と修正はゴールデンソースで」の原則からの推論 36
解説

正を 1 つに決めないと何が起きるかを、よくある誤りで見ます。1 つ目は「同期しているので両方が正」という扱いです。値が食い違ったとき、どちらに合わせるかが決まらず、直せません。記録のシステムの定義は、食い違ったらこちらが正しい、というものでした。2 つ目は、導出側にしかない項目です。検索インデックスやキャッシュにだけ書いた項目があると、作り直したときに消えます。それは導出ではなく、第 2 の正です。3 つ目は、分析の結果を業務側へ書き戻し、業務側でも上書きする形です。分析の出力を業務のシステムへ渡す流れは、リバース ETL と呼ばれます。『大規模データ管理 第2版』は、データの取得と修正はゴールデンソースでだけ行うこと、新しい事実を作ったら新しい所有が生じることを原則にしています。なお、書き戻しの危険を名指しで警告する権威の文書は見つかりませんでした。3 行目は定義からの推論です。公開された事後報告ではなく、よくある誤りとして示しています。

問題は機械の共有ではなく、同じ表の読み書き
スライド 37 のテキストと解説
問題は機械の共有ではなく、同じ表の読み書き 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 先に分けるのは所有(スキーマと表)。指針は任意で、AWS は条件つきで共有を認める 指針・報告 AWS Prescriptive Guidance/Azure Architecture Center(2026-11 確認) 書籍 DDIA 2e 1.3.2 節 p.21 置き場所の選択 | 得るもの | 払うもの サービスごとに DB サーバーも分ける | スキーマ変更の独立。製品を選べる。障害とスケールの分離 | サービスをまたぐトランザクションと問い合わせの仕組み。運用する DB の数 スキーマと表はサービスごと、サーバーは共有 | 所有の境界を保てる。運用は軽い | 性能と障害は共有のまま(次のスライド) 同じ表を複数のサービスが読み書き | 1 つのトランザクションと結合。運用は 1 つ | 変更のたびに調整(開発時の結合)。ロックの巻き添え(実行時の結合) Azure の指針(任意) 2 つのサービスはデータストアを共有すべきでない、とする。ただし「同じ物理 DB サーバーの共有は安全。問題は同じスキーマ・同じ表の読み書き」と注記 AWS の指針(任意) 共有 DB を条件つきの選択肢に挙げる。複数のサービスが書く表を避け、変更を後方互換にすることが条件。開発時と実行時の結合が生じると明記 37
解説

共有データベースの何が問題かを整理します。置き場所の選択は、表のとおり 3 つあります。Azure の指針は、2 つのサービスはデータストアを共有すべきでないと書いています。ただし注記で、同じ物理データベースサーバーの共有は安全で、問題が起きるのは同じスキーマや同じ表を読み書きするときだ、としています。AWS の指針は共有データベースを禁じていません。既存のコードを大きく変えたくない、ACID のトランザクションで整合性を保ちたい、運用する DB を 1 つにしたい、といった条件のもとで選択肢に挙げています。そのとき、複数のサービスが書く表を避け、変更を後方互換にすることを求めています。どちらも任意の指針で、標準や法令の要求ではありません。文書名は、Azure が「Data considerations for microservices」、AWS が「Enabling data persistence in microservices」です。どちらも 2026 年 11 月に確認しました。

共有 DB では、変更の調整と停止の影響が全サービスに及ぶ
スライド 38 のテキストと解説
共有 DB では、変更の調整と停止の影響が全サービスに及ぶ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 1 つの DB に依存するサービス群は、壊す変更で全体の調整が要り、DB が止まれば一緒に止まる 書籍 『ソフトウェアアーキテクチャ・ハードパーツ』2.1 節 p.28〜32・6 章 p.130〜132・6.2.4 節 p.158/DDIA 2e p.21 共有 DB:量子は 1 つ サービスごとの DB:量子は 3 つ 注文 在庫 決済 共有 DB(同じ表) 注文 DB 在庫 DB 決済 DB 注意 スキーマを分けても、同じ DB に依存する間は量子は 1 つのまま(『ハードパーツ』p.158)。性能や耐障害性に響きうる。同書は共有を禁じてはいない。サービスベースの構成では共有してよいとする(p.130) アーキテクチャ量子(『ハードパーツ』の用語) 独立してデプロイできる単位 動くのに要るもの(DB を含む)も内側に数える 単一の DB に依存するシステムの量子は 1 つ 場面 | 共有すると起きること 開発時 | 表や列を壊す変更のたびに、その表を使う全サービスの更新・テスト・デプロイが要る。DB の構造全体が API の一部になる 実行時 | あるサービスの問い合わせが、ほかのサービスの性能に響く。DB が止まると、依存する全サービスが止まる 38
解説

共有データベースで何を払うかを、『ハードパーツ』のアーキテクチャ量子という考え方で説明します。量子はこの本の用語で、『データ指向アプリケーションデザイン』には出てきません。独立してデプロイできる単位のことで、動くのに必要なもの、たとえばデータベースも、その単位の内側に数えます。同書の定義には機能的な凝集と結合の条件も入っていますが、ここではデプロイの面だけを使います。単一のデータベースに依存するシステムは、量子が 1 つです。影響は 2 つの場面に出ます。開発時には、表や列を壊す変更のたびに、その表を使う全サービスの更新とテストとデプロイが要ります。『データ指向アプリケーションデザイン』も、共有するとデータベースの構造全体が実質的に API の一部になると述べています。実行時には、あるサービスの問い合わせがほかの性能に響き、データベースが止まると全サービスが止まります。なお『ハードパーツ』は、スキーマを分けても同じデータベースに依存する間は量子は 1 つのままで、スケーラビリティや耐障害性や性能に悪い影響が出うる、としています。前のスライドの Azure の注記と見ている面が違う、というのはこのガイドの読み方です。大事な断りがあります。同書は共有を禁じてはいません。6 章の冒頭で、マイクロサービスではデータを分ける必要があるが、サービスベースアーキテクチャなどの構成では、複数のサービスが 1 つのデータベースを共有してもよい、と書いています。共有は選択肢で、このスライドはその費用を示しています。

分ける理由 6 つと、まとめる理由 2 つを並べる
スライド 39 のテキストと解説
分ける理由 6 つと、まとめる理由 2 つを並べる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 「マイクロサービスだから分ける」ではなく、どの理由がどれだけ重いかで決める 書籍 『ハードパーツ』6.1.1 節 p.131〜132・6.1.2 節 p.144〜146・6.2 節 p.149〜150・6.2.4〜6.2.5 節 p.157〜159 分ける理由(データ分解要因) | 問い 変更制御 | 表を変えると、いくつのサービスが影響を受けるか コネクション管理 | 複数のサービスからの接続を、DB は処理できるか スケーラビリティ | サービスの要求に応じて、DB をスケールできるか 耐障害性 | DB の停止で、いくつのサービスが影響を受けるか アーキテクチャ量子 | 共有 DB が、望まない範囲を 1 つの量子にしていないか データベース種別の最適化 | 種類の違う DB を使えば、データを最適化できないか まとめる理由(データ統合要因) | 問い データ関係 | 表の間に、外部キー・トリガー・ビューの密な関係があるか データベーストランザクション | 整合性のために、単一のトランザクションが要るか リーダーの視点 どちらが重いかを先に言葉にする。例:変更制御と、外部キーの維持のどちらを取るか 1 分析 データドメインを特定 2 割り当て 表をドメインへ移す 3 接続の分離 ドメインごとに分ける 4 サーバーの分離 スキーマを別サーバーへ 5 切り替え 接続先を新サーバーへ 39
解説

データを分けるかどうかは、理由を並べて決めます。『ハードパーツ』は、分ける理由をデータ分解要因、まとめる理由をデータ統合要因と呼びます。分解要因は 6 つです。表の変更で影響を受けるサービスの数、接続の数、スケール、DB が止まったときの影響範囲、前のスライドの量子、データに合った種類の DB を使いたいか、です。統合要因は 2 つです。表の間に外部キーやトリガーやビューの密な関係があるか、1 つのトランザクションでまとめて更新する必要があるか、です。本書は、たとえば変更制御と外部キーの維持のどちらが重要かを明らかにすることで、分けるかどうかと粒度を判断できる、としています。分けると決めたら、一度に切り離さず 5 段階で進めます。ここでのデータドメインは、関連して一緒に使われる表やビューや外部キーのまとまりを指します。先にスキーマと接続を分け、サーバーを分けるのはそのあとです。4 段階目でスキーマを別のサーバーへ移す方法として、同書は 2 つを挙げます。バックアップしてリストアする方法は、通常、移すときに停止が要ります。レプリケーションを使う方法は停止が生じませんが、設定と調整の作業が増えます。5 段階目で接続先を切り替え、古いサーバーからスキーマを消します。これは同じ製品の別のサーバーへ移す手順です。別の製品へ、照合と切り戻しの窓を持って移す手順は Part 15 で扱います。

誰が書くかで所有を決める:3 つのシナリオ
スライド 40 のテキストと解説
誰が書くかで所有を決める:3 つのシナリオ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 経験則は「表に書くサービスが所有者」。書き手が複数のときは、シナリオに分けて考える 書籍 『ハードパーツ』9.1〜9.3 節 p.252〜255(3 つのシナリオ)・9.4〜9.5 節 p.255〜263(共同所有の 4 技法、表 9-1〜9-4) シナリオ | 状況 | 所有の決め方 単独所有 | 1 つのサービスだけが表に書く | 書くサービスが所有する。読むだけのサービスは所有に関係しない 全体共有 | ほとんど、またはすべてのサービスが同じ表に書く(例:監査の記録) | 専用のサービスを唯一の所有者にし、ほかは書き込みを依頼する 共同所有 | 同じドメインの少数のサービスが同じ表に書く | 下の 4 つの技法から、払うものを見て選ぶ 共同所有の技法 | やること | 得るもの | 払うもの テーブルの分割 | 表を分け、各サービスが一部ずつ持つ | 単独所有に戻る | 表の間の同期。ACID トランザクションが無い データドメイン | 共有のスキーマに置き、複数のサービスが書く | 性能と整合性を保てる | スキーマ変更の調整。書き込み責任の統制 委譲 | 1 つを所有者にし、ほかは更新を依頼する | 単独所有。変更制御が容易 | サービスの結合。依頼側はアトミックに書けない サービスコンソリデーション | 書き手のサービスを 1 つにまとめる | アトミックなトランザクション | 粒度が粗くなる。テスト範囲とリスクが広がる 40
解説

どのサービスがどの表を所有するかの決め方です。『ハードパーツ』の経験則は、表に書き込むサービスがその表の所有者、というものです。読むだけのサービスは所有に関係しません。書き手が 1 つなら、これで決まります。本書は、まずこの単独所有から片づけることを勧めています。書き手が複数のときは 2 つに分かれます。ほとんどのサービスが書く全体共有は、監査の記録が典型です。専用のサービスを唯一の所有者にして、ほかのサービスは書き込みを依頼します。同じドメインの少数のサービスが書く共同所有には、4 つの技法があります。表を分ける、共有のスキーマに置く、1 つを所有者にしてほかは依頼する、サービスを 1 つにまとめる、です。たとえば委譲は、依頼する側がアトミックに書けないので、結果整合性を許せる書き込みに向きます。ここでのデータドメインは『ハードパーツ』の用語で、次のスライドの『大規模データ管理』の同じ語とは意味が違います。サービスをまたぐ整合性は Part 11 で扱います。

データの所有者とアプリケーションの所有者を分ける
スライド 41 のテキストと解説
データの所有者とアプリケーションの所有者を分ける 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 表を持つサービスとは別に、データの意味と品質に責任を持つ人を決める 書籍 『大規模データ管理 第2版』8.1.1.1 節 p.218〜220(役割)・2.3.2.4 節 p.40〜41(共有されるシステムの所有) データの所有者(データオーナー) データの品質・定義・分類・使用目的を管理する 業務の文脈の深い理解が要る アプリケーションの所有者 アプリケーションのコアとインタフェース、アクセス制御を管理する 技術のエンジニアリングのスキルが要る 分ける理由(『大規模データ管理 第2版』) | 架空の宅配注文サービスでの例(本ガイドの例) アプリケーションは複数のドメインで共有されうる | 分析基盤は基盤チームが動かす。中にある注文データの定義と品質は、注文チームが決める 専門が違う | 「配達先」の項目の意味を決める人と、取り込みのパイプラインを組む人は、別でよい 共有されるシステムでは、ドメインごとにデータプロダクトを分ける方法と、1 つの中に所有を示す列を持たせる方法がある(同書 p.40〜41) 41
解説

ここまでは、どのサービスが表を所有するかの話でした。もう 1 つ、誰が責任を持つかという人の側の所有があります。『大規模データ管理 第2版』は、データオーナーとアプリケーションオーナーを別の役割として挙げています。データオーナーは、データの品質、定義、分類、使用目的を管理します。アプリケーションオーナーが受け持つのは、アプリケーションの中核とそのインタフェース、それにアクセス制御です。本書は、データメッシュの理論では 1 つの役割にまとめる、と断ったうえで、まとめない理由を挙げます。ここでは 2 つを取り上げます。アプリケーションが複数のドメインで共有されうること、そして専門が違うことです。データを所有するには業務の文脈の深い理解が要り、アプリケーションを所有するには技術のスキルが要ります。本書のデータドメインは、この所有の境界を指します。共通基盤はまさに、複数のドメインで共有されるアプリケーションです。表の右の例はこのガイドが作ったものです。役割の名前や構成は組織によって違う、と本書も断っています。共通基盤への当てはめは次のスライドと Part 13 で扱います。

共通基盤が持つデータも、正か導出かを先に決める
スライド 42 のテキストと解説
共通基盤が持つデータも、正か導出かを先に決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 基盤の種類では決まらない。データごとに 2 つの問いで見分ける(基盤ごとの検討は Part 13) 書籍 DDIA 2e 1.1.3 節 p.11/『大規模データ管理 第2版』2.4 節 p.47(新しい事実と新しい所有) この基盤にしかない事実はあるか あれば、そのデータの正はこの基盤 所有者を決め、失わない備えを持つ 消したら、どこから作り直すか 答えられれば導出データ 作り直しの手順と所要時間を持つ(Part 12) 基盤 | 持つデータの例 | 正か導出か 分析基盤 | 業務サービスから取り込んだ表 | 通常は導出(DDIA 2e p.11) AI 基盤 | 学習済みモデル | 導出(DDIA 2e p.11) 分析基盤 | 取り込んだデータから作った新しい事実(単純な変換を除く) | 新しい正になりうる。所有者を決める(『大規模データ管理 第2版』p.47) ログ基盤 | 監査の記録 | ほかに元が無ければ正(本ガイドの考え) 認証基盤 | 利用者の資格情報 | ほかに元が無ければ正(本ガイドの考え) ログ基盤と認証基盤の行は、定義を当てはめた本ガイドの考え。7 つの基盤ごとの検討は Part 13 42
解説

共通基盤が持つデータにも、同じ区別を当てはめます。問いは 2 つです。この基盤にしかない事実はあるか。あれば、そのデータの正はこの基盤です。次に、消したらどこから作り直すか。答えられれば導出データです。『データ指向アプリケーションデザイン 第2版』は、分析システムは別の場所で作られたデータの消費者なので、通常は導出データシステムだと述べ、学習済みモデルも導出データに含めています。ただし、基盤の中で新しい事実が生まれることがあります。『大規模データ管理 第2版』は、データを消費して新しい事実を作ると新しい所有が生じ、フィルターや結合や名前の変更のような単純な変換では生じない、としています。監査の記録や利用者の資格情報のように、ほかに元が無いデータは、その基盤が正になります。この 2 行は一次資料が無く、定義を当てはめたこのガイドの考えです。7 つの基盤それぞれの検討は Part 13 で、基盤が止まったときのふるまいは Part 14 で扱います。

1 つで足りるなら分けない
スライド 43 のテキストと解説
1 つで足りるなら分けない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 分ける利点が出るのは、1 つでは要件を満たせないときだけ。要らない規模に備えて分けない 指針・報告 AWS Prescriptive Guidance「Database-per-service pattern」2026-11 確認 書籍 DDIA 2e 13.2.1.4 節 p.546〜547・1.3.2 節 p.21〜22/『ハードパーツ』p.262〜263 状況 | 判断 | 根拠 1 つの技術、1 つの DB で、必要なことをすべて満たせている | 分けない。そのまま使う | DDIA 2e p.547 いまは要らない規模に備えて、先に分けておきたい | 見送る。「早すぎる最適化の一形態」 | DDIA 2e p.546 複数のサービスが同じ表に書き、1 つのトランザクションが要る | サービスを 1 つにまとめることも選択肢 | 『ハードパーツ』p.145・p.262〜263 表の変更のたびに複数チームの調整が要る。DB が止まると全サービスが止まる | 所有を分ける。スキーマと接続から始める | 『ハードパーツ』p.131〜132・p.149〜150 採用判断 分けると、またぐ問い合わせと整合性の仕組みが要る(Part 6・Part 11)。その費用より、分ける理由(6 つの分解要因)が重いときに分ける 43
解説

分けすぎないための歯止めです。『データ指向アプリケーションデザイン 第2版』は、可動部品は少ないほうが賢明だと述べています。必要のない規模のために作ることは、早すぎる最適化の一形態だ、とも書いています。単一の技術で必要なことをすべて満たせるなら、それをそのまま使うのがおそらく最善で、分離と構成の利点が出るのは、単一のソフトウェアでは要件を満たせない場合に限られます。この箇所は、データベースの機能を複数の製品に分ける文脈の記述です。サービスの分け方については、同じ本の 1 章が、マイクロサービスは人にまつわる問題への技術的な解決策で、チームの少ない小さな会社では不要な負担になりやすいと述べています。『ハードパーツ』も、書き手のサービスを 1 つにまとめることを技法の 1 つに挙げています。AWS の指針は、サービスごとに DB を分けたら、またぐ問い合わせのために別のパターンが要るとしています。データの流れは Part 6、サービスをまたぐ整合性は Part 11 で扱います。

設計レビューで問うこと:正と所有
スライド 44 のテキストと解説
設計レビューで問うこと:正と所有 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 答えが「両方」「場合による」「基盤チームが全部」になる問いが、設計の決まっていない箇所 指針・報告 AWS Prescriptive Guidance/Azure Architecture Center(Part 3 に既出) 書籍 DDIA 2e p.10〜11・p.21/『ハードパーツ』p.131・p.145・p.252/『大規模データ管理 第2版』p.219〜220 問い | なぜ問うか | 危ない兆候 このデータの正は、どのサービスのどのストアか。1 つに決まっているか | 食い違ったとき、どちらが正しいかを定義で決めるため | 「両方」「同期しているので同じ」 導出データをすべて消したら、正から作り直せるか | 作り直せないなら、導出ではなく第 2 の正 | 導出側にしかない項目。手順が無い この表に書くサービスはいくつか。権限で強制しているか | 書くサービスが所有者。書き手が複数なら決め方が変わる | 全サービスが同じ DB ユーザーを使う 表や列を変えるとき、何チームの調整が要るか | 共有すると、DB の構造全体が API の一部になる | 列名の変更に複数チームの合意が要る データの所有者(人)は決まっているか。基盤の所有者と別か | 業務の文脈の理解と、技術の専門は別 | 「基盤チームが全部持つ」 分ける理由と、まとめる理由を並べたか | 分けると、またぐ問い合わせと整合性の費用を払う | 「マイクロサービスだから分ける」 44
解説

ステップ 2 の設計レビューで問うことを 6 つにまとめます。1 つ目は、このデータの正はどのサービスのどのストアか、です。食い違ったときに、定義で決められるようにするためです。2 つ目は、導出データをすべて消したら正から作り直せるか、です。作り直せないなら、それは第 2 の正です。3 つ目は、この表に書くサービスはいくつか、権限で強制しているか、です。書くサービスが所有者という経験則を、仕組みで守れているかを確かめます。4 つ目は、表や列を変えるときに何チームの調整が要るか、です。5 つ目は、データの所有者が人として決まっているか、です。6 つ目は、分ける理由とまとめる理由を並べたか、です。危ない兆候の列は、調査で集めたよくある答えを、このガイドが整理したものです。権限での強制と DB ユーザーの分離は、指針に直接の記述がなく、このガイドの考えです。この 6 つは Part 17 の一覧表に入ります。

まとめ:正を 1 つに決め、書き手で所有を決める
スライド 45 のテキストと解説
まとめ:正を 1 つに決め、書き手で所有を決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 2 棚卸しの表を 1 枚作り、正・所有者・導出先・作り直せるかを全員が同じように答えられる状態にする 指針・報告 AWS Prescriptive Guidance/Azure Architecture Center(2026-11 確認) 書籍 DDIA 2e p.10〜11・p.21・p.546〜547/『ハードパーツ』6・9 章/『大規模データ管理 第2版』p.24・p.219〜220 正を 1 つに決める ほかは導出データ。正から作り直せる状態に保つ 棚卸しの表に「未定」「両方」を残さない 問題は同じ表の読み書き 先に分けるのは、スキーマと表と書き手 同じ DB に依存する間、性能と障害は共有される 所有は 2 つの層で決める サービス:表に書くサービスが所有者 人:データの所有者と、アプリケーションの所有者 分けすぎない 1 つで足りるなら分けない 分ける理由 6 つと、まとめる理由 2 つを並べる 次は Part 4(データモデル)。正から導出への流れは Part 6、共通基盤ごとの当てはめは Part 13 45
解説

Part 3 のまとめです。1 つ目に、データごとに正を 1 つに決め、ほかは導出データとして、正から作り直せる状態に保ちます。棚卸しの表がその道具です。2 つ目に、共有データベースの問題は、機械の共有ではなく、同じ表を複数のサービスが読み書きすることです。先に分けるのは、スキーマと表と書き手です。ただし同じデータベースに依存する間は、性能と障害は共有されます。3 つ目に、所有は 2 つの層で決めます。サービスの層では、表に書くサービスが所有者です。人の層では、データの所有者とアプリケーションの所有者を分けます。4 つ目に、分けすぎないことです。1 つで足りるなら分けず、分ける理由とまとめる理由を並べて決めます。AWS と Azure の指針は任意のもので、AWS は条件つきで共有を認めています。次の Part 4 では、決めた正を、どのデータモデルで持つかを選びます。正から導出へどう流すかは Part 6 で、共通基盤ごとの当てはめは Part 13 で扱います。

PART 4 データモデルを選ぶ
スライド 46 のテキストと解説
PART 4 データモデルを選ぶ モデルは、関係の形と問い合わせの形で選ぶ。イベントソーシングと CQRS は、費用を伴う選択 このPartで答えられるようになる問い 一対多・多対多・多段の関係に、どのモデルが合うか 正規化と非正規化は、何を買い、何を払うか イベントで持つと、何を得て、何を失うか モデルの選択は、後のステップに何を残すか 46
解説

Part 4 は、ステップ 3 のデータモデルの選択です。データモデルとは、データをどんな形で表し、どう問い合わせるかの取り決めです。表と行、入れ子の文書、頂点と辺、イベントの列などがあります。結論を先に言うと、モデルは製品の人気ではなく、データの関係の形と、問い合わせの形で選びます。一対多の木ならドキュメント、多対多ならリレーショナル、つながりが複雑になるほどグラフが自然になります。この Part では、リレーショナルとドキュメントの得失、正規化と非正規化、グラフ、イベントソーシングと CQRS、分析のためのスキーマ、1 つのデータベースの中で複数のモデルを組み合わせる方法を順に見ます。イベントソーシングと CQRS は得るものが大きい一方で、費用を伴う選択であることを確認します。最後に、ここでの選択が、後のステップである流れ・契約・分割に何を残すかを整理します。主な根拠は『データ指向アプリケーションデザイン 第2版』の 3 章です。

モデルは、関係の形と問い合わせの形で選ぶ
スライド 47 のテキストと解説
モデルは、関係の形と問い合わせの形で選ぶ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 3 一対多の木ならドキュメント、多対多ならリレーショナル、つながりが複雑になるほどグラフが自然になる 書籍 『データ指向アプリケーションデザイン 第2版』3 章 p.63〜64、3.1.5 節 p.77、3.2 節 p.81、3.3 節 p.98、3.5 節 p.104 関係の形と問い合わせの形 | 合うモデル | 宅配注文サービスなら(架空の例) 一対多の木。通常まるごと読む | ドキュメント | 1 件の注文と、その明細・配達先 多対一・多対多。両方向から問い合わせる | リレーショナル | 注文と店舗、注文と商品、店舗と配達員 何でも何にでも関係しうる。何段もたどる | グラフ | 配達の経路、「この商品を頼んだ人はこれも」 読み方が多く、1 つの表現では満たせない | イベントログ+読み取り用のビュー | 注文の状態の履歴と、店舗用・利用者用の画面 ポイント モデルどうしは、ある程度まねできる。ただし結果は扱いにくくなる(DDIA 2e p.104)。合わないモデルの費用は、問い合わせの長さに出る 本ガイドの考え(一次資料なし) 「モデルは後から変えにくい」と DDIA 3 章は直接述べていない。ただ、変えるにはデータの移行と、新旧の形式が並ぶ期間が要る(Part 7・15)。主な問い合わせを先に書き出して確かめる 47
解説

DDIA 第 2 版の 3 章は、モデルごとに得意な関係の形が違うことを示しています。データが主に一対多の関係、つまり木の構造で、レコードどうしのほかの関係がほとんど無いなら、ドキュメントモデルが適しています。多対一や多対多の関係があるなら、ID で参照して結合で読むリレーショナルモデルが向きます。つながりがさらに複雑になり、何段もたどる問い合わせが増えると、グラフとして表すほうが自然になります。そして、すべての読み方を満たす 1 つの表現が見つからないときは、書く形と読む形を分け、追記のみのイベントログから読み取り用の表現を導出する方法があります。表の右の列は架空の例です。右下は本ガイドの考えです。「モデルは後から変えにくい」とは、同書の 3 章は直接述べていません。ただ、モデルを変えるにはデータの移行と、新旧の形式が並ぶ期間が要ります。だから、主な問い合わせを先に書き出して確かめることを勧めます。

リレーショナルとドキュメントは、得失が逆になる
スライド 48 のテキストと解説
リレーショナルとドキュメントは、得失が逆になる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 3 結合と参照に強いのがリレーショナル、まとめて読む木に強いのがドキュメント。スキーマの置き場所も違う 書籍 DDIA 2e 3.1.5 節 p.77〜81(どのモデルをいつ使うか、スキーマの柔軟性、局所性、収束) 観点 | リレーショナル | ドキュメント 得意な関係 | 多対一・多対多。結合で読む | 一対多の木。まとめて 1 回で読む 参照 | どの行も ID で直接指せる | 入れ子の項目を ID で直接指せない スキーマ | 書き込み時に DB が適合を保証する(スキーマオンライト) | 読むコードが構造を前提にする(スキーマオンリード)。「スキーマレス」は誤解を招く 局所性 | 1 件が複数の表に分かれ、読むのに複数の索引検索が要る | 大部分を同時に使うなら速い。更新は通常まるごと書き換え 形式を変えるとき | マイグレーション。全行の書き換えは大きな表で遅い | 新しい形式で書き始め、読む側が古い形式にも対応し続ける 向く場合 | 全レコードが同じ構造。入れ子の項目を外から参照する | 型が多数ある。構造を外部のシステムが決める 2 つは収束している。リレーショナル DB は JSON 型を、一部のドキュメント DB は結合と索引を足した(DDIA 2e p.81)。二者択一にせず、どの部分を文書にするかを問う 48
解説

根拠は DDIA 第 2 版の 3.1.5 節です。参照では、リレーショナルはどの行も ID で直接指せますが、ドキュメントは入れ子の項目を直接指せません。スキーマでは、リレーショナルは書き込み時にデータベースが適合を保証します。これをスキーマオンライトと呼びます。ドキュメントはスキーマレスと呼ばれることがありますが、同書は誤解を招く表現だとしています。読むコードが構造を前提にしており、暗黙のスキーマはあるからです。こちらはスキーマオンリードと呼びます。局所性では、文書全体を頻繁に読むならドキュメントが有利ですが、更新は通常まるごとの書き換えになります。同書は、文書を比較的小さく保ち、頻繁な小さな更新を避けることが一般に勧められる、と述べています。形式を変えるときの違いは、Part 7 の契約の話につながります。2 つのモデルは収束しており、組み合わせ方は 7 枚目で扱います。

非正規化したデータは、導出データとして扱う
スライド 49 のテキストと解説
非正規化したデータは、導出データとして扱う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 3 正規化は書き込みが速く、読むのに結合が要る。非正規化はその逆で、コピーを更新する仕組みが要る 書籍 DDIA 2e 3.1.2 節 p.69〜73(正規化・非正規化・結合、正規化のトレードオフ、タイムラインの例) | 正規化(ID で持つ) | 非正規化(値を複製して持つ) 書き込み | 速い(コピーは 1 つ) | 高くつく(更新するコピーが多い) 読み取り | 結合が要る | 速い(結合が少ない) 食い違い | 起きない(1 か所にだけある) | 起きうる(一部のコピーだけが更新された状態) 向く場面 | OLTP。小〜中規模では最善のことが多い | 分析。非常に大規模で結合の費用が問題になるとき 何を複製し、何を残すか DDIA のタイムラインの例:事前計算した結果に持つのは、投稿の ID と投稿者の ID だけ 本文やプロフィールは、読むときに ID から引く 頻繁に変わる値は複製しない リーダーの視点 非正規化を選んだら、ステップ 2 の問いが付いてくる。どれが正か。コピーを、いつ、どう更新するか。更新の途中で落ちたらどうなるか(Part 3・6) 49
解説

正規化と非正規化は、ID で持つか、値そのものを持つかの違いです。ID で持てば、意味のある情報は 1 か所にだけ置かれ、変わっても 1 か所を直せば済みます。その代わり、表示のたびに ID を解決する結合が要ります。値を複製して持てば読み取りは速くなりますが、DDIA 第 2 版は、より多くのコード、書き込み、ディスク容量が要り、一部のコピーだけが更新された不整合の危険があると述べています。同書は、非正規化したデータは導出データの一種と見ると理解しやすい、とも書いています。コピーを更新する仕組みを用意する必要があるからです。規模については、小規模から中規模では正規化したモデルが最善であることが多い、としています。同書のタイムラインの例では、事前に計算したタイムラインに持つのは投稿の ID と投稿者の ID だけで、本文やプロフィールは読むときに引きます。頻繁に変わる値は複製しない、という判断です。正のデータと導出データの区別は Part 3、更新の流れは Part 6 で扱います。

多対多が複雑になったら、グラフを検討する
スライド 50 のテキストと解説
多対多が複雑になったら、グラフを検討する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 3 単純な多対多は関連テーブルで足りる。たどる段数が決まらない問い合わせは、SQL では再帰が要り長くなる 仕様・文書 ISO/IEC 39075:2024(GQL。2024-04 発行。ISO の書誌を 2026-11 確認) 書籍 DDIA 2e 3.1.3 節 p.73〜75(多対多)、3.2 節 p.81〜89(グラフ、Cypher と SQL、GQL) 4 行と 31 行 同じ問い合わせを Cypher と SQL で書いた行数(DDIA 2e p.88 の例。たどる段数が決まらない探索) 選択 | 得るもの | 払うもの 関連テーブル(リレーショナル) | 既存の DB のまま。両方の ID の索引で、両方向から引ける | 多段の探索は再帰共通テーブル式になり、長くなる 頂点と辺の 2 つの表を RDB に置く | 製品を増やさずにグラフを表せる | 問い合わせは SQL のままで、長い グラフ DB | 多段の探索を短く書ける。何と何をつなぐかをスキーマで縛らず、構造を足しやすい | 製品が 1 つ増える。標準の GQL は 2024 年に公開(DDIA 2e p.89) プロパティグラフ 頂点(もの)と辺(関係)が、ラベルとプロパティを持つ 任意の頂点どうしをつなげる 本ガイドの考え(一次資料なし) 「関係が多いから」でグラフ DB を足さない。まず、主な問い合わせが何段たどるか、段数が決まっているかを数える 50
解説

リレーショナルモデルでは、多対多は関連テーブルで表し、両方の ID に索引を張って両方向から引きます。単純な場合はこれで足ります。つながりが複雑になり、何段もたどる問い合わせが出てくると、グラフとして表すほうが自然になります。プロパティグラフは、頂点と辺がそれぞれラベルとプロパティを持つモデルです。DDIA 第 2 版は、グラフをリレーショナルデータベースの 2 つの表、頂点の表と辺の表としても表せることを示しています。ただし、たどる辺の数が事前に決まらない問い合わせは、SQL では再帰共通テーブル式が要ります。同書の例では、Cypher というグラフ用の言語で 4 行の問い合わせが、SQL では 31 行になります。グラフ用の問い合わせ言語 GQL は、2024 年に ISO の標準として公開されたと同書は書いています。標準の番号は ISO/IEC 39075:2024 です。右下は本ガイドの考えです。関係が多いというだけでグラフデータベースを足さず、まず問い合わせが何段たどるかを数えます。

イベントで持つ設計は、費用を伴う選択である
スライド 51 のテキストと解説
イベントで持つ設計は、費用を伴う選択である 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 3 追記のみのイベントログを正とし、読み取り用のビューを導出する。履歴と作り直しを得て、複雑さを払う 指針・報告 Azure Architecture Center「Event Sourcing」「CQRS」(2026-11 確認) 書籍 DDIA 2e 3.3 節 p.98〜101 コマンド 利用者の要求。検証する イベント 起きた事実。過去形で名づける イベントログ 追記のみ。これが正 ビュー 読み取り用に導出。作り直せる 得るもの(DDIA 2e p.100〜101) なぜ起きたかという意図が残る ビューをログから作り直せる。新しいビューも足せる 監査ログになる。誤りは取り消しのイベントで直せる 払うもの・要るもの(DDIA 2e p.101、Azure) 処理を決定的に保つ。再処理で副作用を繰り返さない 不変のログと削除要求の衝突(Part 16) 要件:全ビューが、ログと同じ順序で処理する保証 ビューは遅れる。誤ったイベントも残る。版の扱いが要る 全体の標準にしない。Azure の指針:複雑なパターンで、入るのも出るのも高くつく。ほとんどのシステムでは従来のデータ管理で足りる。台帳や注文処理など、一部に選んで使う 51
解説

イベントソーシングは、追記のみのイベントログを信頼できる情報源とし、そこから読み取り用のビューを導出する方法です。読み取り用の表現を書き込み用と別に持つ原則が CQRS、コマンドクエリ責務分離です。利用者の要求はコマンドと呼び、検証を通って初めて事実、つまりイベントとしてログに入ります。イベントは過去形で名づけ、変更も削除もしません。得るものとして DDIA 第 2 版は、意図が伝わること、ビューを作り直せること、監査ログになることを挙げます。欠点として同書が挙げるのは 3 つです。外部の値を処理時に引くと再計算の結果が変わること、不変のログと削除要求との衝突、再処理での副作用です。これとは別に、全ビューがログと同じ順序でイベントを処理する保証を、ただ 1 つの重要な要件として挙げています。Azure Architecture Center は、ビューが遅れること、誤ったイベントも残ること、イベントの版の扱いを加えています。同じ文書は、入るのも出るのも高くつき、ほとんどのシステムでは従来のデータ管理で足りると書いています。作り直しの前提条件は Part 12、削除は Part 16 で扱います。

分析には、ファクトを中心にしたスタースキーマ
スライド 52 のテキストと解説
分析には、ファクトを中心にしたスタースキーマ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 3 1 行が 1 つの出来事のファクトテーブルを、誰が・何を・どこで・いつを表すディメンションテーブルで囲む 書籍 DDIA 2e 3.1.4 節 p.75〜77(スターとスノーフレーク、One Big Table) dim_customer 誰が dim_item 何を dim_store どこで dim_date いつ fact_orders 注文 1 件が 1 行 架空の宅配注文サービスの例 形 | つくり | 得失 スター | ファクトをディメンションで囲む | アナリストに扱いやすく、しばしば好まれる スノーフレーク | ディメンションを、さらにサブディメンションに分ける | スターより正規化の度合いが高い One Big Table | ディメンションを、ファクトの列に畳み込む | 容量は増えるが、問い合わせが速くなることもある ポイント 分析では、この非正規化は問題になりにくい。データが、変更されない過去の履歴だから(DDIA 2e p.77)。分析側は導出データになる。Part 5・13 で扱う 52
解説

DDIA 第 2 版によれば、データウェアハウスは通常リレーショナルで、スタースキーマという形がよく使われます。中心にファクトテーブルがあり、その 1 行が 1 つの出来事を表します。まわりを囲むのがディメンションテーブルで、その出来事の、誰が、何を、どこで、いつ、どのように、なぜを表します。左の図は、架空の宅配注文サービスに当てはめた例です。スノーフレークは、ディメンションをさらに分けて正規化の度合いを上げたものです。同書は、アナリストが扱いやすいのはスタースキーマのほうで、こちらが選ばれることが多い、と述べています。One Big Table は、ディメンションをファクトに畳み込んだ形で、容量は増えますが、問い合わせが速くなることもあります。分析では、こうした非正規化が問題になりにくいとされています。データが通常、変更されない過去の履歴だからです。業務側のモデルとは別に決めてよく、分析側は導出データになります。その費用は Part 5 と Part 13 で扱います。

1 つの DB の中で、表と文書を組み合わせられる
スライド 53 のテキストと解説
1 つの DB の中で、表と文書を組み合わせられる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 3 リレーショナル DB が JSON 型を持ち、同じ DB の中で両方を使える(例:PostgreSQL 18 の jsonb) 仕様・文書 PostgreSQL 18 文書 8.14 JSON Types(18.7 のページ。2026-11 確認) 書籍 DDIA 2e 3.1.5.4 節 p.81(収束) -- 決まった構造は列に、揺れる部分だけ文書に CREATE TABLE orders ( id bigint PRIMARY KEY, store_id bigint NOT NULL REFERENCES stores(id), status text NOT NULL, ordered_at timestamptz NOT NULL, options jsonb -- 店舗ごとに違うオプション ); CREATE INDEX ON orders USING GIN (options jsonb_path_ops); 架空の例(本ガイドでは未実行) 危ない兆候(右の記述から) 1 つの文書に追記し続ける配列。複数の書き手が同じ文書を更新する設計。どちらも、行のロックの競合を増やす 論点 | PostgreSQL 18 の文書(8.14)が述べること 構造 | 柔軟さが要る場合でも、JSON 文書はある程度決まった構造を持つことを勧める 更新とロック | どの更新も、行全体に行レベルのロックを取る。文書を扱える大きさに抑え、競合を減らす 文書の単位 | それ以上分けて独立に更新できない単位が理想 索引(GIN) | 既定の jsonb_ops はキーの存在演算子も使える。jsonb_path_ops は使えないが、通常は小さく、検索も速い ほかの DB・クラウド製品の JSON 対応は、表の対象外(未検証) 53
解説

DDIA 第 2 版は、リレーショナルとドキュメントは、同じデータベースの中で両方を組み合わせられるときに最もうまく機能する、と述べています。左は PostgreSQL での書き方の例です。決まった構造の項目は列に置き、店舗ごとに違う注文のオプションだけを jsonb の列に置いています。これは説明用の架空の例で、本ガイドでは実行していません。右の表は、PostgreSQL 18 の公式文書が述べていることです。柔軟さが要る場合でも、文書はある程度決まった構造を持つことを勧めています。また、どの更新も行全体に行レベルのロックを取るので、文書を扱える大きさに抑えてロックの競合を減らすよう勧めています。理想は、それ以上分けて独立に更新できない単位を 1 つの文書にすることです。左下は、この記述から導いた危ない兆候です。1 つの文書に追記し続ける配列や、複数の書き手が同じ文書を更新する設計は、ロックの競合を増やします。ほかの製品の JSON 対応は、この表の対象外です。

モデルの選択は、流れ・契約・分割に残る
スライド 54 のテキストと解説
モデルの選択は、流れ・契約・分割に残る 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 3 データモデルは、1 つのデータベースの中の話で終わらない。後のステップで払うものを、ここで見積もる 指針・報告 Azure Architecture Center「Event Sourcing」(イベントの版。2026-11 確認) 書籍 DDIA 2e 3 章 p.71・75・78〜79・100〜101 ここで選んだもの | 後のステップに残るもの | 根拠 | 扱う Part スキーマを DB が強制する(リレーショナル) | 形式の変更はマイグレーション。全行の書き換えは大きな表で遅い | DDIA 2e p.78〜79 | 7・15 スキーマを読む側が解釈する(ドキュメント) | 読むすべての箇所が、古い形式に対応し続ける | DDIA 2e p.78 | 7 非正規化、事前に計算したビュー | コピーを更新する流れ。途中で落ちたときの一貫性 | DDIA 2e p.71 | 3・6・12 イベントログを正にする | 全ビューが同じ順序で処理する保証。イベントの形式は残り続ける | DDIA 2e p.100〜101/Azure | 6・7・12 分析用に別のスキーマを持つ | 業務側のデータを変換して運ぶ流れ(ETL) | DDIA 2e p.75 | 5・13 まとめて読み書きする単位 | 分割のキーを選ぶときの出発点になる | 本ガイドの考え | 8 本ガイドの考え(一次資料なし) モデルを決める場で、この表の「残るもの」を誰が持つかまで決める 54
解説

1 行目と 2 行目は、スキーマの置き場所です。データベースが強制するなら、形式の変更はマイグレーションになります。DDIA 第 2 版は、全行を書き換える変更は大きな表で遅く、運用上の難しさが残ると述べています。読む側が解釈するなら、読むすべての箇所が、古い形式に対応し続けることになります。どちらも Part 7 の契約と、Part 15 の移行で扱います。3 行目は非正規化です。コピーを更新する流れと、途中で落ちたときの一貫性が残ります。4 行目はイベントログです。全ビューがログと同じ順序で処理する保証が要ります。DDIA 第 2 版はこれを欠点ではなく、重要な要件として書いています。イベントの形式は書き換えずに残り続けます。5 行目は分析用のスキーマで、業務側のデータを変換して運ぶ流れ、ETL が残ります。最後の行は本ガイドの考えです。まとめて読み書きする単位は、Part 8 で分割のキーを選ぶときの出発点になります。下の注記も本ガイドの考えです。

設計レビューで問うこと:データモデル
スライド 55 のテキストと解説
設計レビューで問うこと:データモデル 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 3 製品名より先に、主な問い合わせと関係の形を書いてもらう 仕様・文書 PostgreSQL 18 文書 8.14.2(2026-11 確認) 指針・報告 Azure Architecture Center「Event Sourcing」ほか 書籍 DDIA 2e 3 章 p.71・77〜79・88・101 問い | なぜ問うか | 危ない兆候 主な問い合わせを 3〜5 個書けるか。 関係は一対多か、多対多か | モデルは、関係の形と問い合わせの形で決まる | 問い合わせを書かずに、製品名から決めている 入れ子の項目を、外から直接参照する必要はないか | ドキュメントは、入れ子の項目を ID で直接指せない | 文書の中の配列の「何番目」を、別の所が持っている 複製した値は、どれが正で、いつ、どう更新されるか | 非正規化は導出データ。更新する仕組みが要る | 同じ値が複数の場所にあり、 更新の経路を説明できない jsonb の文書は、独立に更新される部分を含んでいないか | PostgreSQL では、更新は行全体のロックになる | 追記し続ける配列。複数の書き手が同じ文書を更新 多段の問い合わせは、何段たどるか。段数は決まっているか | 段数が決まらないと、SQL では再帰が要る | 「関係が多いから」でグラフ DB を足す イベントソーシングと CQRS は、 どの範囲に、何のために使うか | イベントソーシングは入るのも出るのも高くつく。CQRS も複雑さを増す | 全サービスの標準にしている。 イベントの版の方針が無い 形式を変えるとき、何を、どの順に変えるか | モデルの選択は、契約と移行に残る | 「スキーマレスだから変更は自由」 55
解説

1 つ目は、主な問い合わせを書き出せるかです。モデルは関係の形と問い合わせの形で決まるので、問い合わせが書かれていない設計は、製品名から決めている可能性があります。2 つ目は、入れ子の項目を外から参照していないかです。ドキュメントは入れ子の項目を ID で直接指せません。3 つ目は、複製した値の正と、更新の経路です。非正規化は導出データなので、更新する仕組みが要ります。4 つ目は jsonb の文書の単位です。PostgreSQL では更新が行全体のロックになるので、独立に更新される部分を 1 つの文書に入れていないかを見ます。5 つ目は、多段の問い合わせが何段たどるかです。6 つ目は、イベントソーシングと CQRS の範囲と目的、そしてやめるときの費用です。Azure の指針は、イベントソーシングについて、入るのも出るのも高くつくとしています。CQRS については、とくにイベントソーシングと組むと設計がかなり複雑になりうる、としています。7 つ目は、形式を変えるときの手順です。スキーマレスだから変更は自由、という説明は危ない兆候です。暗黙のスキーマは読む側のコードにあります。出典の補足:Azure Architecture Center「CQRS」(複雑さの記述)。

まとめ:関係と問い合わせを書いてからモデルを選ぶ
スライド 56 のテキストと解説
まとめ:関係と問い合わせを書いてからモデルを選ぶ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 3 どのモデルにも得失がある。選んだ理由と、後のステップに残るものを書いておく 仕様・文書 PostgreSQL 18 文書 8.14 JSON Types 指針・報告 Azure Architecture Center「Event Sourcing」ほか 書籍 DDIA 2e 3.5 節 p.104〜105(まとめ) 選び方 一対多の木はドキュメント、多対多はリレーショナル 複雑なつながりを何段もたどるならグラフ 正規化と非正規化 小〜中規模では、正規化が最善のことが多い 非正規化したデータは導出データ。更新の仕組みが要る イベントで持つ 履歴と作り直しを得て、決定性・順序・複雑さを払う 全体の標準にせず、一部に選んで使う 組み合わせる 同じ DB の中で、表と文書を組み合わせる 分析には、業務側とは別のスキーマを使う 次は Part 5(基礎)。選んだモデルを支えるストレージと索引が、何を買い、何を払うかを見る 56
解説

Part 4 のまとめです。モデルは、関係の形と問い合わせの形で選びます。一対多の木はドキュメント、多対多はリレーショナル、つながりが複雑で何段もたどるならグラフです。正規化と非正規化は、読み書きのどちらを速くするかの選択です。小規模から中規模では、正規化が最善のことが多いとされています。非正規化したデータは導出データで、更新する仕組みが要ります。イベントソーシングと CQRS は、履歴と作り直しを得る代わりに、決定性、順序、削除要求への対応、複雑さを払います。全体の標準にせず、一部に選んで使います。入るのも出るのも高くつく、という Azure の記述はイベントソーシングについてのものです。そして、リレーショナルとドキュメントは収束しており、同じデータベースの中で表と文書を組み合わせられます。分析には、業務側とは別のスキーマを使います。最後に、モデルの選択は、後のステップである流れ・契約・分割に残ります。選んだ理由と、残るものを書いておきます。次の Part 5 は基礎の Part で、ここで選んだモデルを支えるストレージと索引が、何を買い、何を払うかを見ます。出典の補足:Azure Architecture Center「CQRS」。

PART 5 ストレージと索引:何を買い、何を払うか
スライド 57 のテキストと解説
PART 5 ストレージと索引: 何を買い、何を払うか どの構造も、書き込み・読み取り・空間・運用のどこかで払う。別のストアへ写した先は導出データになり、遅れ・検査・再構築を払う このPartで答えられるようになる問い LSM ツリーと B ツリーは、何が違うか 索引と列指向は、何を速くし、何を遅くするか 分析や検索のストアを足すと、何が増えるか 足す前に、設計レビューで何を問うか 57
解説

Part 5 は基礎の Part で、ストレージと索引を扱います。主題は、製品の内部の解説ではありません。設計で選んだものが、何を買い、何を払っているかを言えるようになることです。前半は、OLTP 向けのストレージエンジンの 2 つの系統、ログ構造化の LSM ツリーと、同じ場所を上書きする B ツリーを図で説明します。続いて、PostgreSQL の MVCC が運用で払う費用と、索引が導出データであることを確かめます。後半は、行指向と列指向、OLTP と分析を分ける理由と費用、分けない判断、クラウドのデータウェアハウスとオープンテーブル形式、全文検索とベクトル検索の索引を扱います。最後に、ストアを足す前に問うことと、設計レビューの問いをまとめます。根拠は『データ指向アプリケーションデザイン 第2版』の 4 章と、各製品の公式文書です。

エンジンの中身は、費用と限界として設計に出る
スライド 58 のテキストと解説
エンジンの中身は、費用と限界として設計に出る 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 自作するために学ぶのではない。選ぶため、調整するため、レビューで費用を問うために知る 書籍 『データ指向アプリケーションデザイン 第2版』(以下 DDIA 2e)4 章 章頭 p.111 エンジンの中身 | 設計に出る形 | この Part 追記してまとめるか、同じ場所を上書きするか | 書き込み・読み取り・空間のどれかが重くなる | LSM ツリーと B ツリー 行の版を複数持つ(MVCC) | 古い版の掃除と監視が、運用の仕事になる | PostgreSQL の VACUUM 索引を足す | 読み取りは速くなり、書き込みは遅くなる | 索引は導出データ 行ごとに置くか、列ごとに置くか | 1 件の読み書きに合うか、大量の走査に合うか | 行指向と列指向 別のストアへ写す | 写した先は導出データ。遅れ・検査・再構築を払う | 分析・検索・ベクトル 書籍が挙げる理由 中身を知る理由は 2 つ。合うエンジンを選ぶためと、負荷に合わせて調整するため(DDIA 2e p.111) 本ガイドの考え(一次資料なし) 3 つ目の理由:設計レビューで「この選択は何を払っているか」を問うため 58
解説

なぜテックリーダーが、ストレージエンジンの中身を知る必要があるのでしょうか。DDIA の 4 章は、理由を 2 つ挙げています。1 つは、多くのエンジンの中から自分のアプリケーションに合うものを選ぶため。もう 1 つは、自分の負荷に合わせて調整するためです。自分でエンジンを実装するためではありません。本ガイドは、ここに 3 つ目を足します。設計レビューで、その選択が何を払っているかを問うためです。表は、エンジンの中身が設計にどう出るかを、この Part の順に並べたものです。追記してまとめるか、同じ場所を上書きするかで、書き込み・読み取り・空間のどれが重くなるかが変わります。行の版を複数持つ方式は、掃除と監視が運用に乗ります。別のストアへ写せば、写した先は導出データになります。3 つ目の理由は本ガイドの考えで、書籍の主張ではない点に注意してください。

LSM ツリーは、追記してあとでまとめ、読み取りで払う
スライド 59 のテキストと解説
LSM ツリーは、追記してあとでまとめ、読み取りで払う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 ログ構造化:書いたファイルは変えない。メモリにためてキー順に書き出し、背後でまとめる 書籍 DDIA 2e 4.1.1.2 p.116〜118(しくみ)、4.1.1.3 p.118〜119、4.1.3.1 p.125(読み取りと一時停止) 書き込み メムテーブル メモリ上・キー順 復旧用のログ(追記のみ。メムテーブルを戻すため) 書き出し セグメント 3(新しい) セグメント 2 セグメント 1(古い) ディスク上の不変のファイル(SSTable) マージとコンパクション 背後でファイルを結合し、上書きされた値と削除された値を捨てる 読み取り:メムテーブル → 新しいセグメント → 古いセグメントの順に探す。「このキーは無い」はブルームフィルタで早く分かる 買うもの 書き込みの速さ。散らばった小さな書き込みを、少数の大きな連続した書き込みに変える 払うもの 読み取りは複数のファイルを見る。コンパクションが追いつかないと、読み書きを一時停止するエンジンがある。削除はマーカーの追記で、すぐには消えない 59
解説

ログ構造化ストレージの代表、LSM ツリーのしくみです。ここで言うログは、追記だけができるレコードの並びのことです。書き込みは、まずメモリ上の、キー順に並んだ構造に入ります。これをメムテーブルと呼びます。クラッシュで失わないように、同時に復旧用のログにも追記します。メムテーブルがしきい値、通常は数メガバイトを超えると、キー順のファイルとしてディスクに書き出します。このファイルは書いた後は変えません。読み取りは、メムテーブル、新しいファイル、古いファイルの順に探します。背後では、ファイルをまとめて、上書きされた値や削除された値を捨てます。これがマージとコンパクションです。買うものは書き込みの速さです。払うものは 3 つあります。読み取りで複数のファイルを見ること、コンパクションが追いつかないと読み書きを一時停止するエンジンがあること、削除がマーカーの追記で表され、すぐには消えないことです。

B ツリーは、同じ場所を上書きし、読み取りが安定する
スライド 60 のテキストと解説
B ツリーは、同じ場所を上書きし、読み取りが安定する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 固定サイズのページの木。ルートから参照をたどり、各階層で 1 ページずつ読む 書籍 DDIA 2e 4.1.2 p.121〜124(しくみと数字)、4.1.3.1 p.125、4.1.3.3 p.127 ルートページ(キーの境界と参照) キー < 400 400 ≦ キー < 700 700 ≦ キー リーフ … リーフ:520・521・522 リーフ … 「キー 521 を探す」:濃い色のページだけを、上から 1 枚ずつ読む ① WAL に追記 変更を先にログへ ② ページを上書き 同じ場所で ③ 満杯なら分割 親ページも更新 書き込みの手順 数字の目安(DDIA 2e p.121〜123) ページは固定サイズ。PostgreSQL は 8 KiB 分岐係数は通常、数百 多くの DB は 3〜4 階層に収まる 買うもの 点検索も範囲検索も速く、応答時間を予測しやすい 払うもの 散らばった小さな書き込み。数バイトの変更でもページ全体を書くことがある 60
解説

もう 1 つの系統、B ツリーです。B ツリーは、データベースを固定サイズのページに分けます。ページの大きさは従来 4 キビバイトで、DDIA によれば PostgreSQL は 8 キビバイトです。検索はルートのページから始め、キーの範囲に合う参照をたどって、リーフのページに着きます。1 ページが持つ子への参照の数を分岐係数と呼び、通常は数百です。そのため木は浅く、多くのデータベースは 3 から 4 階層に収まります。書き込みは、該当するページを同じ場所で上書きします。空きが無ければページを 2 つに分け、親のページも更新します。途中で落ちると木が壊れるので、変更を先に WAL、つまり先行書き込みログに追記します。買うものは、読み取りの速さと予測しやすさです。払うものは、散らばった小さな書き込みと、数バイトの変更でもページ全体を書くことがある点です。

どちらも、書き込み・読み取り・空間のどれかを払う
スライド 61 のテキストと解説
どちらも、書き込み・読み取り・空間のどれかを払う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 比較は「おおまかな目安」。書籍に数値は無く、自分の負荷で測るよう勧めている 仕様・文書 RocksDB Tuning Guide「Amplification factors」(最終編集 2023-03。2026-11 確認) 書籍 DDIA 2e 4.1.3 p.125〜128、4.4 p.146 観点 | ログ構造化(LSM ツリー) | 同一位置更新(B ツリー) 書き込み | 少数の大きな連続した書き込み。同じ機器なら書き込みスループットが高い傾向 | 散らばった小さな書き込み。WAL とページで、少なくとも 2 回書く 読み取り | 複数のファイルを調べる。範囲検索は点検索より高くつく | 各階層で 1 ページ。速く、予測しやすい傾向 空間 | 断片化が少なく、圧縮が効きやすい。上書き分はコンパクションまで残る | 削除で空きページが残り、断片化する。再配置の処理が要る 運用に出る形 | コンパクションが追いつかないと遅延が跳ねる。削除はすぐには消えない | PostgreSQL では VACUUM(次のスライド) 採用例(DDIA) | RocksDB、HBase、ScyllaDB、Cassandra | ほぼすべてのリレーショナル DB の標準の索引 3 つの増幅(RocksDB の文書の定義) 書き込み増幅=ストレージに書いた量 ÷ DB に書いた量。読み取り増幅=1 回の問い合わせあたりのディスク読み取り回数。空間増幅=ファイルの大きさ ÷ データの大きさ ケーススタディ 題材 C で容量・取り込み時間・問い合わせ時間を同じ環境で測る。LSM と B ツリーは直接比べない 61
解説

2 つの系統を、書き込み・読み取り・空間の 3 つの観点で並べます。DDIA は、LSM ツリーは書き込みの多い用途に、B ツリーは読み取りに向く、と述べますが、これは「おおまかな目安」と断ったうえでの記述です。本書に性能の数値はありません。ベンチマークの結果は負荷の詳細に左右されるので、自分の負荷で試すよう勧めています。下の 3 つの増幅は、RocksDB の公式のチューニングガイドの定義です。同じガイドは、コンパクションの設定が 3 つの釣り合いを変えること、どれを最適化すべきかが明らかでない場合があることを書いています。このガイドは 2023 年 3 月の編集で、定義としてだけ引いています。測るときの注意も DDIA にあります。空の LSM ツリーはまだコンパクションが走らないので、影響が見えるまで長く測る必要があります。題材 C では、LSM と B ツリーの直接の比較はしません。行指向・列指向・ファイルを同じ環境で比べます。

PostgreSQL の MVCC は、VACUUM で払う
スライド 62 のテキストと解説
PostgreSQL の MVCC は、VACUUM で払う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 MVCC は行の版を複数持つ。読み書きが互いを待たない代わりに、古い版の回収を払う 仕様・文書 PostgreSQL 18 文書 13.1・24.1・24.1.5・66.7 (2026-11 確認) 指針・報告 Sentry(2015-07-20 発生)/Mailchimp Mandrill(2019-02-04 発生)の事後報告 書籍 DDIA 2e 4.1.3.4 p.128 行を更新 古い版は上書きしない 新しい版を追加 読み手は自分の時点の版を見る 古い版が残る 死んだ行。領域を使う VACUUM が回収 背後で定期的に(autovacuum) 払うもの | PostgreSQL 18 の文書の記述 領域 | 標準の VACUUM は、空いた領域を OS に返さない(末尾のページが空き、排他ロックをすぐ取れる場合を除く) 索引 | 更新は索引エントリの追加を伴いうる。索引の列を変えず、同じページに空きがあれば省ける(HOT) XID の周回 | XID は 32 ビット。残り約 4,000 万で警告、300 万未満で新しい XID の割り当てを拒否(読み取りと VACUUM は可) 事後報告(事業者の自己申告) Sentry(2015-07-20):周回の保護が働いて書き込みが止まり、米国の営業日の大半で停止。Mailchimp Mandrill(2019-02-04〜05):負荷が偏ったシャードで autovacuum が遅れたとみられ(失敗の可能性もあると報告は書く)、XID が上限に達して安全停止。VACUUM は最長 40 日と見積もられ、大きな表を切り捨てて復旧。2018-11 に兆候を把握し、差し迫っていないと判断して、監視の追加はバックログのチケットにしていた 62
解説

PostgreSQL は MVCC、多版型の並行制御を使います。各 SQL 文は、ある時点のスナップショットを見ます。読み取りと書き込みは互いを妨げません。その代わり、更新のたびに古い行の版が残ります。これを回収するのが VACUUM です。払うものは 3 つです。領域、索引、そしてトランザクション ID の周回です。標準の VACUUM は、表の末尾のページが空き、排他ロックをすぐ取れる場合を除き、領域を OS に返しません。ID は 32 ビットで、PostgreSQL 18 の文書では、残り約 4,000 万で警告を出し、300 万を切ると新しい ID の割り当てを拒否します。つまり書き込みが止まります。同じ文書によれば、この状態でも進行中のトランザクションは続けられ、読み取り専用のトランザクションは始められ、VACUUM も普通に実行できます。Sentry の報告は 2015 年のもので、当時の版のしきい値は今と違います。Mailchimp の報告は、autovacuum が負荷で遅れたとみられるが、失敗していた可能性もあり、どちらかは特定できない、と書いています。前の年の 11 月に周回の可能性に気づき、差し迫った脅威ではないと判断して、監視の追加をバックログのチケットにしていました。そのチケットがどうなったかは報告に書かれていません。復旧では、ダンプとリストアも試しましたが遅く、大きな 2 つの表を切り捨てて VACUUM を終わらせました。周回はケーススタディでは再現しません。

索引は、読み取りを買い、書き込みと領域で払う導出データ
スライド 63 のテキストと解説
索引は、読み取りを買い、書き込みと領域で払う導出データ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 索引を足しても DB の内容は変わらない。変わるのは、問い合わせの速さと書き込みの重さ 書籍 DDIA 2e 4.1 p.113〜114、4.1.4〜4.1.5 p.128〜130、4.2.4 p.139〜140、1.1.3 p.11 書き込み 1 件 表(元のデータ) 索引 A 索引 B 索引 C 種類 | 買うもの | 払うもの セカンダリインデックス | 主キー以外の列での検索 | 書き込みのたびに更新。領域 一部の列を中に持つ索引 | 一部の問い合わせに索引だけで答える | さらに領域を使い、書き込みも遅くなる マテリアライズドビュー | 同じ問い合わせの繰り返しが速い | 元が変わるたびに更新が要る 全文・ベクトルの索引 | 語や、意味の近さでの検索 | あとのスライドで扱う 索引は全部には張らない。問い合わせの形を知っている人が、効くものを選ぶ(DDIA 2e p.114) 本ガイドの考え(一次資料なし) 索引を作り直す時間と、その間の問い合わせの遅さを、障害対応と移行の計画に入れておく 63
解説

索引の位置づけです。DDIA は、索引を、プライマリデータから導出された付加的な構造、と定義しています。足しても消しても、データベースの内容は変わりません。変わるのは問い合わせの速さです。その代わり、データを書くたびに索引も更新するので、書き込みは遅くなり、ディスクの領域も使います。本書はこれを、ストレージの重要なトレードオフと呼びます。だからデータベースは既定で全部には索引を張らず、問い合わせの形を知っている人が選びます。表は、同じ考え方で読めるものを並べました。主キー以外の列で探すセカンダリインデックス、一部の列を索引の中に持つ索引、問い合わせの結果を実体として持つマテリアライズドビューです。どれも、読み取りを買い、書き込みと領域で払います。導出データは元から作り直せますが、作り直しには時間がかかります。この点は本ガイドの考えとして添えています。マテリアライズドビューの更新のしくみは Part 12 で扱います。

行指向は 1 件の読み書き、列指向は大量の走査に合う
スライド 64 のテキストと解説
行指向は 1 件の読み書き、列指向は大量の走査に合う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 分析の問い合わせは、多数の行の、少数の列しか使わない。列ごとに置けば使う列だけ読める 書籍 DDIA 2e 4.2.2 p.133〜138(列は 100 超、使うのは 4〜5 列:p.133)、1.1.1 p.5〜6 行指向:1 行の値を隣り合わせに置く 行 1:注文 ID・日付・店舗・商品・数量・金額 行 2:注文 ID・日付・店舗・商品・数量・金額 行 3:注文 ID・日付・店舗・商品・数量・金額 列指向:列ごとにまとめて置く(濃い色=集計で読む列) 注文 ID 日付 店舗 商品 数量 金額 | 行指向 | 列指向 向く問い合わせ | キーで少数の行を読み書きする(OLTP) | 多数の行を走査して集計する(分析) 買うもの | 1 件の読み書きが 1 か所で済む | 使う列だけ読む。並べた列は圧縮がよく効く 払うもの | 少数の列の集計でも、行を丸ごと読む | 1 行ずつの書き込みは非効率。ためてまとめて書く 題材 C で、PostgreSQL(行)・ClickHouse(列)・DuckDB+Parquet(ファイル)の容量・取り込み時間・問い合わせ時間を測る(結果はケーススタディ) 64
解説

行指向と列指向の違いです。多くの OLTP のデータベースは行指向で、1 行に属する値を隣り合わせに置きます。一方、分析の問い合わせは、多数の行にまたがって集計しますが、使う列は少数です。DDIA は、ファクトテーブルの列は 100 を超えることもよくあるのに、典型的な問い合わせが一度に触れるのは 4 つか 5 つ、と書いています。行指向では、その少数の列のために行を丸ごと読むことになります。列指向は、列ごとにまとめて置くので、使う列だけを読めます。図の例では、日付ごとの数量の合計に、日付と数量の 2 列だけを読みます。同じ列には同じ値が繰り返し出るので、圧縮もよく効きます。払うものは書き込みです。並べて圧縮した列の途中に 1 行ずつ書くのは非常に非効率なので、ためてからまとめて書きます。題材 C では、PostgreSQL、ClickHouse、DuckDB と Parquet で、容量・取り込み時間・問い合わせ時間を同じ環境で比べます。

分析を分けると、分析側は導出データになる
スライド 65 のテキストと解説
分析を分けると、分析側は導出データになる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 分ける理由は 4 つある。分けた先は読み取り専用のコピーで、遅れ・検査・再構築を払う 指針・報告 Azure Architecture Center「Materialized View pattern」(2026-11 確認) 書籍 DDIA 2e 1.1.2 p.6〜8(理由は p.7)、1.1.3 p.11、4.2 p.131 OLTP の DB 記録のシステム。行指向 運ぶ処理 ETL、CDC(Part 6) 分析用の DB 導出データ。読み取り専用のコピー 分ける理由(DDIA 2e p.7) データが複数の DB に分かれ、1 つの問い合わせで結合しにくい OLTP に合うスキーマと配置は、分析に向かない 高コストな問い合わせが、ほかの利用者の性能に響く セキュリティなどの理由で、直接つなげない場合がある 払うもの | 中身(本ガイドの整理) 遅れ | 取り込みの間隔と処理の遅れの分だけ古い 検査 | 欠落・重複が無いかを、元と突き合わせる スキーマ変更の伝播 | 元の表の変更を、流れと分析側に通す 再構築 | 壊れたとき、元から作り直す手順と時間 HTAP の製品も、内部はストレージとクエリのエンジンが別々の 2 つに分かれつつある(DDIA 2e p.131) 65
解説

OLTP と分析を分ける理由と、その費用です。DDIA は、分析のために OLTP のデータベースへ直接問い合わせるのは通常望ましくないとして、理由を 4 つ挙げています。データが複数のシステムに分かれていること、OLTP に合うスキーマや配置は分析に向かないこと、高コストな問い合わせがほかの利用者の性能に響くこと、セキュリティやコンプライアンスの理由で直接つなげない場合があること、です。そこで、読み取り専用のコピーを別のデータベースに集めます。大事なのは、分けた先が導出データになることです。本書も、分析システムは通常、導出データのシステムだと述べ、元が変わったときに導出データを更新するプロセスが要る、と書いています。右の表の 4 つは、その費用を本ガイドが整理したものです。Azure の設計指針は、更新の合図が失われるとビューは黙って古い結果を返すので、新しさを監視するよう勧めています。流れの設計は Part 6、作り直しの前提条件は Part 12 で扱います。

1 つで足りるうちは分けない、も正当な判断
スライド 66 のテキストと解説
1 つで足りるうちは分けない、も正当な判断 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 分ければ導出データの費用を払う。分ける理由は、測った数字で示す 指針・報告 Azure「Understand data models」/AWS Well-Architected Framework PERF03-BP01(2026-11 確認) 書籍 DDIA 2e 1.1.2 p.7〜8、4.2 p.131(線引きの記述は無い) 選択 | 得るもの | 払うもの | 見直す合図 1 つの RDB で兼ねる | 導出データが無い。 運用する製品が 1 つ | 大きな集計が OLTP の資源を使う。行指向のまま走査する | 集計が、OLTP の応答時間の SLO を脅かす 読み取りレプリカに分析を逃がす | 構成が単純。スキーマが同じ | 行指向のまま。複製の遅れがある(Part 8) | 走査の量が増え、列指向が要る 列指向の分析 DB に写す | 走査と圧縮の利得 | 遅れ・検査・スキーマ変更の伝播・再構築 | — 本ガイドの考え(一次資料なし) この表は本ガイドの整理。「1 つで足りるなら分けない」を規範として定める文書は見つからなかった。兼ねてよい規模の線引きは DDIA にも無い。境目は題材 C の実測で示す 設計指針の言い方(どちらも任意の推奨) Azure:多くの本番システムは複数のモデルを使うとしたうえで、早すぎる細分化を避け、1 つのサービスが性能・規模・統制の目標を満たすうちは 1 つを使う。AWS:用途に合うデータストアを選ぶ。使い慣れているという理由で 1 つのエンジンに統一しない 66
解説

分けない、という判断です。集計の量が小さいうちは、1 つの RDB で兼ねる、あるいは読み取りレプリカに分析を逃がす、という選択があります。書き方に注意があります。この表は本ガイドの整理で、規範ではありません。1 つで足りるなら分けない、と定める権威の文書は見つかりませんでした。DDIA も、兼ねてよい規模の線引きは書いていません。近い記述は Azure の設計指針にあります。この文書は、1 つのデータストアがすべてのアクセスの形を効率よく満たすことはまれで、多くの本番システムは複数のモデルを使う、と始めます。そのうえで早すぎる細分化を避けるよう勧め、1 つのサービスが性能・規模・統制の目標を満たすうちは 1 つを使い、アクセスの形や寿命がはっきり分かれるときだけ組み合わせる、としています。一方 AWS の指針は、用途に合うデータストアを選ぶよう勧め、使い慣れているという理由で 1 つのエンジンに統一して、すべての負荷をそこへ載せることを誤りに挙げます。どちらも任意の推奨です。境目は、題材 C で、データ量と問い合わせの形を変えて測ります。

計算と保存を分けた先に、開いた表形式がある
スライド 67 のテキストと解説
計算と保存を分けた先に、開いた表形式がある 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 公式文書の記述(2026-11 確認)。未検証。不変のファイルに、どれが表かを決める層を重ねる 仕様・文書 Iceberg Table Spec/BigQuery・Snowflake の公式文書(2026-11 確認) 書籍 DDIA 2e 4.2.1 p.131〜133、4.2.2.3 p.137〜138 クエリエンジン:問い合わせを実行(計算) データカタログ:どの表があるか テーブルフォーマット:どのファイルが表か(Iceberg など) ストレージフォーマット:ファイルの中の並び(Parquet など) オブジェクトストレージ:不変のファイル(保存) 製品・仕様 | 公式文書の記述 BigQuery | 保存と計算を分け、別々に伸縮する。 表のデータは列形式で保存する Snowflake | 保存・計算・クラウドサービスの 3 層。読み込んだデータを、内部の圧縮した列形式に直す Iceberg の仕様 | 版 1〜3 は採択済み。版 4 は開発中で未採択。古い読み手が新しい機能を正しく読めなくなる変更で、版が上がる 各社の Iceberg の表 | BigQuery:利用者のバケットに Parquet で置く。外からファイルを変えると失敗やデータ損失が起きうる。 Snowflake:外部からの書き込みの可否は、文書内で記述が分かれ未確認 書き手だけ新しい版にしない。読む全エンジンが対応する版と機能を、先に確かめる。開発中の版 4 を前提にした設計は、草案として扱う 67
解説

クラウドのデータウェアハウスと、レイクハウスです。公式文書の記述に基づき、実測はしていません。クラウド専用のデータウェアハウスは、データをローカルディスクではなくオブジェクトストレージに置き、計算の層と保存の層を分けます。保存の容量と、問い合わせの計算資源を、別々に増減できます。さらに、分析の保存先がオブジェクトストレージ上のデータレイクへ移るにつれて、1 つの製品だった部品が、左の図のように分かれました。これがレイクハウスと呼ばれる構成です。Parquet などのファイルは書いた後は変えません。行の挿入や削除を扱うために、どのファイルが表を成すかを決めるテーブルフォーマットを重ねます。Iceberg の仕様は、メタデータファイルの原子的な差し替えを、直列化可能な分離の土台としています。版は 1 から 3 が採択済みで、4 は開発中です。開いた形式は置換性を上げますが、製品ごとに制限があります。BigQuery の文書は、BigQuery の外からデータファイルを変えると、問い合わせの失敗やデータの損失が起きうると書いています。Snowflake は、自社をカタログにした表への外部からの書き込みについて、公式文書の中に、できないとする記述と、条件つきでできるとする記述の両方があります。どちらが現行のふるまいかを確かめられなかったので、表には未確認と書きました。

全文検索の転置索引は、1 件の更新が多数の索引更新になる
スライド 68 のテキストと解説
全文検索の転置索引は、1 件の更新が多数の索引更新になる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 転置索引は「語 → その語を含む文書の一覧」。検索を速くする導出データで、更新で払う 仕様・文書 PostgreSQL 18 文書 65.4.4.1 GIN Fast Update Technique・65.4.5(2026-11 確認) 書籍 DDIA 2e 4.3.1 p.142〜143 文書 1:「配達 が 遅い」 文書 2:「配達 先 の 変更」 文書 3:「注文 の 変更」 語 | 文書の一覧 配達 | 1、2 変更 | 2、3 注文 | 3 遅い | 1 複数の語で探す 「配達」かつ「変更」は、2 つの一覧の AND を取る。答えは文書 2 製品 | 更新の払い方 PostgreSQL の GIN | 1 行の挿入が多数の索引挿入になり、遅い。保留リストにためられるが、大きいと検索が遅くなる。大量投入時は索引を落として作り直すことを勧める Lucene(Elasticsearch・Solr) | 語から一覧への対応をソート済みのファイルに持ち、ログ構造化の方式で背後でマージする(DDIA 2e p.143) 単語の間に空白が無い言語では、語に分ける処理が要る。n-gram にすると索引がかなり大きくなる(DDIA 2e p.142〜143) 68
解説

全文検索は、文章のどこかに出てくる語で文書を探します。そのために、語ごとに、その語を含む文書の ID の一覧を持ちます。これが転置索引です。図の例では、配達という語は文書 1 と 2 に、変更という語は文書 2 と 3 に出てきます。配達かつ変更、という検索は、2 つの一覧の AND を取り、文書 2 を返します。払うものは更新です。1 つの文書には多くの語が含まれるので、1 件の追加や更新が、多数の索引の更新になります。更新を保留リストにためて先送りできますが、リストが大きいと検索が大幅に遅くなります。大量に投入するときは、索引を落として、あとで作り直すことを勧めています。Lucene は、語から一覧への対応をソート済みのファイルに持ち、LSM ツリーと同じログ構造化の方式で、背後でマージします。

ベクトル索引は近似で、作り直しが要る導出データ
スライド 69 のテキストと解説
ベクトル索引は近似で、作り直しが要る導出データ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 HNSW は速いが近似。総当たりは正確だが遅い。再現率を測ってから選ぶ 仕様・文書 pgvector README v0.8.7(2026-11 確認)/Malkov・Yashunin の HNSW 論文(arXiv:1603.09320、2016/IEEE TPAMI 2020) 書籍 DDIA 2e 4.3.2 p.143〜145 上の層:少数の点。大まかに近づく 中の層:点が増える 最下層:すべての点。近い点を返す HNSW:上の層で近い点を見つけ、下の層へ降りながら、より近い点を探す 項目 | pgvector 0.8.7 の README の記述 索引なし | 厳密な最近傍検索。再現率は完全 HNSW | IVFFlat より、速さと再現率の釣り合いがよい。構築は遅く、メモリを多く使う。既定は m=16、ef_construction=64、ef_search=40 IVFFlat | 構築が速く、メモリが少ない。問い合わせの性能は HNSW に劣る 絞り込み | 近似の索引では、索引の走査の後に適用する。条件が 10% に当たると、既定では平均 4 行しか残らない 次元の上限 | 索引できるのは、vector 型で 2,000 次元まで(halfvec 型は 4,000 次元まで) 本ガイドの考え(一次資料なし) 埋め込みモデルを替えると、ベクトルは全件作り直し。元の文書を記録のシステムに残し、新しい索引を並べて作ってから切り替える手順を持つ 69
解説

ベクトル検索の索引です。意味の近さで探すセマンティック検索は、埋め込みモデルで文書を数値のベクトルに変え、近いベクトルを探します。全件を比べる方式は正確ですが遅いので、近似の索引を使います。代表が HNSW で、層になったグラフを上から下へたどります。右の表は pgvector 0.8.7 の README の記述です。索引が無いときは厳密な検索で、再現率は完全です。HNSW の既定値は m が 16、ef_construction が 64、ef_search が 40 です。注意が要るのは絞り込みです。近似の索引では、絞り込みは索引を走査した後に適用されます。条件が全体の 10% に当たるなら、既定では平均 4 行しか残りません。0.8.0 から、足りないとき走査を続ける機能があります。下の注記は本ガイドの考えです。埋め込みモデルを替えると、ベクトルは全件作り直しになります。DDIA は、索引の構築や作り直しの費用には触れていません。

ストアを足す前に、既存の DB の拡張で足りるかを問う
スライド 70 のテキストと解説
ストアを足す前に、既存の DB の拡張で足りるかを問う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 足したストアは導出データになる。流れ・検査・作り直し・運用が、1 組ずつ増える 仕様・文書 pgvector README v0.8.7/PostgreSQL 18 文書 65.4 GIN(2026-11 確認) 指針・報告 Azure Architecture Center「Understand data models」(2026-11 確認) 用途 | 既存の DB の拡張 | 専用のストア | 専用に切り替える合図 集計・分析 | 同じ RDB、読み取りレプリカ | 列指向の分析 DB、DWH | 集計が OLTP の SLO を脅かす。走査の量が行指向で払えない 全文検索 | PostgreSQL の GIN | Lucene 系の検索エンジン | 更新か検索の遅さが要件を超える。言語ごとの処理が要る ベクトル検索 | pgvector | 専用のベクトル DB | 次元の上限。絞り込み併用時の件数。構築の時間とメモリ どの用途でも増えるもの | 索引の更新の重さ。OLTP と資源を分け合う | 流れ(Part 6)、検査、作り直し(Part 12)、運用する製品 | — 本ガイドの考え(一次資料なし) この表は本ガイドの整理。専用か拡張かを定める中立の規範は、一次資料に見つからなかった Azure の設計指針は、検索インデックスが主たるデータストアになることを、よくある誤りに挙げる 70
解説

ストアを足す前の判断の表です。分析、全文検索、ベクトル検索のどれも、既存のデータベースの拡張で始める道と、専用のストアを足す道があります。拡張で始めれば、導出データは同じデータベースの中の索引で済みます。払うものは、索引の更新の重さと、OLTP と資源を分け合うことです。専用のストアを足せば、用途に合った速さを買えますが、データを運ぶ流れ、欠落や重複の検査、作り直しの手順、運用する製品が 1 組ずつ増えます。右端の列は、専用に切り替える合図です。ベクトル検索なら、pgvector の次元の上限、絞り込みと併用したときの件数、索引の構築の時間とメモリが材料になります。次元の上限は vector 型で 2,000 次元ですが、halfvec 型に替えれば 4,000 次元まで索引できます。この表は本ガイドの整理です。専用か拡張かを定める中立の規範は、一次資料に見つかりませんでした。関連する記述として、Azure の設計指針は、検索インデックスが主たるデータストアになることを、よくある誤りに挙げています。

設計レビューで問うこと:ストレージと索引
スライド 71 のテキストと解説
設計レビューで問うこと:ストレージと索引 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 仕様・文書 PostgreSQL 18 文書 24.1.5/pgvector README v0.8.7/Iceberg Table Spec(2026-11 確認) 指針・報告 ClickBench README(ClickHouse のチームが運営)/Azure「Materialized View pattern」 書籍 DDIA 2e 4.1 p.113〜114、1.1.3 p.11 問い | なぜ問うか | 危ない兆候 この表・索引・ビューは、記録のシステムか導出データか。作り直しを最後に実行したのはいつか | 導出データの価値は、作り直せること。手順は実行して確かめる | 「作り直せるはず」。実行の記録が無い 分析を分ける理由は、測った数字か | 分けると、遅れ・検査・再構築を払う | 「分析は DWH で」が前提。今の RDB での実測が無い XID の年齢、死んだ行、autovacuum の遅れを監視しているか | 周回の保護は、書き込みを止める | XID の年齢を見ていない。autovacuum を止めた表がある この索引は、どの問い合わせのためか。書き込みへの影響を測ったか | 索引は書き込みを遅くし、領域を使う | 理由を説明できない索引がある ベクトル検索の再現率を測ったか。 絞り込みと併用して件数は足りるか | 近似の索引は、絞り込みを後で適用する | 厳密な検索との比較が無い 表形式の版と機能に、読む全エンジンが対応しているか | 新しい版の機能は、古い読み手が正しく読めない | 書き手だけ新しい版にしている ベンチマークの数字は、自分の負荷に近いか。誰が運営しているか | ClickBench はベンダー運営・単一の表・逐次実行 | 順位表だけで製品を決めている 問いの芯は「何を買い、何を払っているか」。払う先(運用・監視・作り直し)の担当が決まっているかまで聞く 71
解説

設計レビューの問いは 7 つです。1 つ目は、この表や索引やビューが、記録のシステムか導出データか、です。導出データなら、作り直しを最後に実行したのはいつかを聞きます。手順は、実行して確かめるまで手順とは言えません。2 つ目は、分析を分ける理由が測った数字かどうかです。3 つ目は PostgreSQL の監視で、XID の年齢と autovacuum の遅れを見ているかを聞きます。4 つ目は索引で、どの問い合わせのために張ったかを説明できるかです。5 つ目はベクトル検索の再現率、6 つ目は表形式の版と読み手の対応です。7 つ目はベンチマークです。ClickBench は ClickHouse のチームが作り、使っているベンチマークで、約 1 億行の 1 つの平らな表に、43 本の問い合わせを 1 本ずつ流します。README 自身が、結果は割り引いて受け取るよう書いています。順位表は、同じ種類の負荷での目安です。

まとめ:買うものと払うものを、対で言えるようにする
スライド 72 のテキストと解説
まとめ:買うものと払うものを、対で言えるようにする 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 ストレージの選択は、書き込み・読み取り・空間・運用のどこで払うかの選択 仕様・文書 PostgreSQL 18 文書 24.1(2026-11 確認) 書籍 DDIA 2e 4.4 p.146〜147 選択 | 買うもの | 払うもの LSM ツリー | 書き込みの速さ | 読み取りで複数のファイルを見る。コンパクション B ツリー | 読み取りの速さと、予測しやすさ | 散らばった書き込み。断片化 MVCC(PostgreSQL) | 読み書きが互いを待たない | VACUUM と、XID の監視 索引 | 読み取りの速さ | 書き込みの遅さと、領域 列指向 | 使う列だけの走査と、圧縮 | 1 行ずつの書き込みの非効率 分析・検索・ベクトルのストアを足す | 用途に合った速さ | 導出データの遅れ・検査・再構築 次の Part 6 は、ストアの間をデータがどう流れるか。足したストアを作り直す前提条件は Part 12、基盤への当てはめは Part 13 で扱う 72
解説

この Part で見た選択を、買うものと払うものの対で並べました。LSM ツリーは書き込みの速さを買い、読み取りとコンパクションで払います。B ツリーは読み取りの速さと予測しやすさを買い、散らばった書き込みと断片化で払います。PostgreSQL の MVCC は、読み書きが互いを待たないことを買い、VACUUM と XID の監視で払います。索引は読み取りを買い、書き込みと領域で払います。列指向は走査と圧縮を買い、1 行ずつの書き込みで払います。そして、分析・検索・ベクトルのストアを足すと、用途に合った速さを買い、導出データの遅れ・検査・再構築で払います。DDIA の比較はどれも目安や傾向で、数値はありません。数字は題材 C の実測と、各製品の公式文書で補います。次の Part 6 では、ストアの間をデータがどう流れるかを設計します。作り直しの前提条件は Part 12、基盤への当てはめは Part 13 です。

PART 6 データの流れを設計する
スライド 73 のテキストと解説
PART 6 データの流れを設計する 順序を決める場所を 1 つにし、ほかはその記録を同じ順に読む。どの運び方も重複しうるので、受け手を冪等にする このPartで答えられるようになる問い コピーを読むか、正を直接呼ぶかを、何で決めるか 二重書き込みは、なぜエラーなしで食い違うのか アウトボックスと CDC は、何を保証し、何を保証しないか CDC の受け手が止まると、正の DB に何が起きるか 73
解説

Part 6 は、ステップ 4「データの流れを設計する」です。Part 3 で、どのデータの正がどこにあるかを決めました。この Part では、その正から、ほかのサービスや共通基盤へ、データをどう運ぶかを扱います。最初に、流れの 3 つの形と、コピーを読むか正を直接呼ぶかの判断基準を見ます。次に、よくある誤りである二重書き込みを、図で説明します。そのうえで、ログを 1 本の正にする考え方、トランザクショナル・アウトボックス、チェンジデータキャプチャ(CDC)のしくみへ進みます。後半は、どの方式でも重複が起きること、CDC の受け手が止まると正の DB のディスクが埋まりうることを、公式文書の既定値で確かめます。流れるデータの形、つまり契約は Part 7、サービスをまたぐ整合性は Part 11、導出データの作り直しは Part 12 で扱います。

データの流れは 3 つの形に分けて考える
スライド 74 のテキストと解説
データの流れは 3 つの形に分けて考える 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 DB 経由・サービス呼び出し・非同期のイベント。形ごとに、だれが書き、だれが読むかが違う 指針・報告 AWS 規範ガイダンス Shared-database-per-service/Azure Data considerations(2026-11 確認) 書籍 『データ指向アプリケーションデザイン 第2版』5.2 節 p.171〜172・p.186 形 | だれが書き、だれが読むか | 得るもの | 失うもの | 危ない兆候 DB 経由 (同じ表を複数のサービスが読み書き) | 書いたサービスとは別のサービス、別の版のコードが読む | その場で同じ値が見える。結合できる | ロックの巻き添え。表の形が全員との契約になる | 列名の変更に、複数チームの合意が要る サービス呼び出し (同期の API) | 呼ぶ側が要求を書き、呼ばれる側が応答を書く | 持ち主から直接の値。契約が明示的 | 呼び先の遅延と停止を引き継ぐ | 1 つの要求が、複数のサービスを直列に呼ぶ 非同期のイベント (ブローカー経由) | 送り手が書き、受け手があとで読む | 送り手は受け手を待たない。受け手を足しやすい | 反映が遅れる。重複と順序の扱いが要る | 受け手が冪等でない。スキーマが公開されていない リーダーの視点 互換性は、データを書くプロセスと読むプロセスの関係。流れごとに「だれが書き、だれが読むか」を問う(DDIA 2e 5.2 節)。契約の検査は Part 7 74
解説

サービスや基盤の間をデータが流れる形を、3 つに分けます。1 つ目は DB 経由です。あるサービスが書いた表を、別のサービスが読みます。その場で同じ値が見え、結合もできますが、表の形が全員との契約になります。AWS の指針は、共有 DB が開発時の結合と実行時の結合を生むと書いています。「規範ガイダンス」は AWS の資料の名前で、一事業者の推奨です。標準や規制という意味の規範ではありません。2 つ目はサービス呼び出しで、同期の API です。持ち主から直接値を取れますが、呼び先の遅延と停止を引き継ぎます。3 つ目は非同期のイベントで、送り手は受け手を待ちません。受け手を足しやすい代わりに、反映の遅れ、重複、順序を引き受けます。『データ指向アプリケーションデザイン 第2版』の 5.2 節は、本文ではワークフローエンジンを含む 4 つを挙げ、章のまとめでは 3 つのモードに整理しています。同書は、互換性を、データを書くプロセスと読むプロセスの関係だと説明します。だから、流れごとに、だれが書き、だれが読むかを問います。契約の検査は Part 7 で扱います。

コピーを読むか、正を直接呼ぶかを先に決める
スライド 75 のテキストと解説
コピーを読むか、正を直接呼ぶかを先に決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 コピーか直接かは、許せる遅れと照合の要否で決める(本ガイドの考え) 書籍 『大規模データ管理 第2版』7.1.2〜7.1.4 節 p.197〜201(運び方の考慮点 2 つは p.199) コピーを読む(データ流通) 結果整合の読み出し。同じデータを何度も読める 運び方:API・バッチ・イベント(状態の転送、CDC) 向く:分析、集約、大量の読み出し 正を直接呼ぶ(アプリケーション統合) 記録のシステムから直接読む。コマンドを送る 運び方:同期の API。時間の制約が無ければ非同期 向く:速さと「強一貫性」(同書の語)が欠かせない場合 コピーの運び方を選ぶときの考慮点(同書 p.199) | 見ること 変更が読み出しに反映されるまで、どれだけの遅れを許せるか | 1 日の終わりのデータで足りるのか、1 分以内に要るのか。数分〜数秒以内なら、API かイベントの運び方を検討する 定期の(たとえば月末の)照合や監査が要るか | 要るなら、バッチの経路を持つ 本ガイドの考え(一次資料なし) 同書の 2 点は、コピーの運び方を選ぶときの考慮点。「その遅れを許せないなら、正を直接呼ぶ」と、コピーか直接かの判断に使うのは本ガイドの考え。同期の API で呼んでも、返る値が最新とは限らない(正の DB の複製と分離レベルしだい。Part 8・9) 75
解説

別のサービスのデータを使うとき、最初に決めるのは、コピーを読むのか、正を直接呼ぶのかです。『大規模データ管理 第2版』は、前者をデータ流通、後者をアプリケーション統合と呼んで分けています。データ流通は、結果整合の読み出しで、同じデータを何度も読めます。同書は、その運び方を選ぶときの考慮点を 2 つ挙げます。1 つ目は、変更が読み出しに反映されるまでの遅れを、どこまで許せるか。数分から数秒以内に要るなら、API かイベントの運び方を検討します。2 つ目は、月末のような定期の照合や監査が要るかで、要るならバッチの経路を勧めています。アプリケーション統合は、同書によれば、速さと強一貫性が欠かせない場合に使い、記録のシステムから直接取るなら同期の API です。この 2 点を、コピーか直接かの判断にも使うのは、本ガイドの考えです。遅れを許せないなら、正を直接呼びます。1 つ注意があります。同書は 7 章で「強一貫性」を、「正確な」と言い添えるだけで使います。6.4.1 節(p.188)の説明は、ストリーミングの順序と伝搬の話で、読み出しが最新であることの定義ではありません。同期で呼んでも、返る値が最新とは限りません。複製と分離レベルは Part 8 と Part 9 で扱います。

別のサービスのデータが要るとき、選択肢は 4 つ
スライド 76 のテキストと解説
別のサービスのデータが要るとき、選択肢は 4 つ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 呼ぶ・写して持つ・メモリに複製を持つ・表を共有する。どれを選んでも何かを払う 書籍 『ソフトウェアアーキテクチャ・ハードパーツ』10 章 p.285〜295(表 10-1〜10-4) 選択肢 | しくみ | 得るもの | 失うもの サービス間通信(持ち主を呼ぶ) | 持ち主のサービスをリモートで呼ぶ | 単純。データ量の課題がない | 遅延が積み重なる。呼び先が止まると自分も止まる。契約が要る 列スキーマレプリケーション (列を写して持つ) | 必要な列を自分の表に複製する | 読みが速い。呼び先に依存しない | 同期が要る。整合性と所有権が揺らぐ レプリケーションキャッシュ (メモリに複製) | 各サービスのメモリに同じデータを持ち、製品が同期する | 読みが速い。所有権が保たれる | 大きいデータ、更新の多いデータに向かない。初回の起動が持ち主に依存 データドメイン(表を共有) | 読む側と持つ側の表を、 同じスキーマに置く | 結合と外部キーが使える。サービスへの依存がない | 変更の影響範囲が広がる。所有権の統制とアクセス制御 リーダーの視点 写して持つなら、同期の手段と「写した側が勝手に更新しない」統制を先に決める。その同期の運び方が、次のスライドからの主題 76
解説

別のサービスが持つデータを読みたいときの選択肢を、『ソフトウェアアーキテクチャ・ハードパーツ』の 10 章が 4 つに整理しています。1 つ目はサービス間通信で、持ち主のサービスを呼びます。単純ですが、遅延が積み重なり、呼び先が止まると自分も止まります。2 つ目は列スキーマレプリケーションで、必要な列を自分の表に写して持ちます。読みは速く、呼び先に依存しませんが、同期が要り、写した側が勝手に更新できてしまうので、整合性と所有権が揺らぎます。同書は、この同期には非同期の通信が望ましいとしています。3 つ目はレプリケーションキャッシュで、各サービスのメモリに同じデータを持ち、製品が同期します。大きいデータや更新の多いデータには向きません。4 つ目はデータドメインで、表を同じスキーマに置いて共有します。結合と外部キーが使えますが、表のスキーマがそのまま契約になり、変更の影響範囲が広がります。表は同書の表 10-1 から 10-4 の要約です。写して持つ場合の運び方が、この先の主題です。

二重書き込み:アプリが 2 つのシステムへ別々に書く
スライド 77 のテキストと解説
二重書き込み:アプリが 2 つのシステムへ別々に書く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 DB に書いたあと、ブローカーや検索索引へも自分で書く。簡単だが、そろえる仕組みが無い 指針・報告 AWS 規範ガイダンス Transactional outbox pattern(2026-11 確認) 書籍 DDIA 2e 12.2.1 節 p.497〜498 注文サービス アプリのコードが 2 回書く ① 書く 注文 DB 記録のシステム ② 別に書く ブローカー・検索索引・キャッシュ 導出データ そろえる仕組みが無い 両方成功か、両方失敗かにする仕組みがない どちらのシステムも相手に従っていない 書き込みの順序を決める者がいない // よくある形 db.commit(order); // ① 記録のシステムに書く broker.publish(orderPlaced); // ② 別のシステムに書く 定義 データが変わるたび、アプリのコードが各システムへ個別に書くこと(DDIA 2e 12.2.1 節) 77
解説

二重書き込みは、データが変わるたびに、アプリケーションのコードが各システムへ個別に書くことです。『データ指向アプリケーションデザイン 第2版』の 12.2.1 節は、DB に書き、次に検索索引を更新し、そのあとキャッシュを無効化する、という例を挙げています。定期の全件ダンプでは遅すぎるときの代わりの手段として使われる、と説明されています。AWS の指針も、アプリケーションが 2 つの異なるシステムに書くことを二重書き込みと呼び、片方の失敗でデータが不整合になりうるとしています。架空の宅配注文サービスで言えば、注文サービスが注文 DB にコミットし、続けてブローカーへ「注文を受けた」というイベントを発行する形です。問題は、この 2 つの書き込みが別々の操作であることです。両方成功か両方失敗かにそろえる仕組みがなく、どちらのシステムも相手に従っていないので、書き込みの順序を決める者がいません。次のスライドで、ここから起きる不整合を 2 つの型に分けます。

二重書き込みの不整合は 2 つの型で起きる
スライド 78 のテキストと解説
二重書き込みの不整合は 2 つの型で起きる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 片方だけ成功する型と、並行した更新が逆順に届く型。後者はエラーが 1 件も出ない 指針・報告 AWS 規範ガイダンス Transactional outbox pattern(2026-11 確認) 書籍 DDIA 2e 12.2.1 節 p.498(図 12-4 の考え方を、宅配注文の例に置き換え) 型 1:片方だけ成功する DB は成功、発行は失敗:受け手は変更を知らない DB は失敗、発行は成功:DB にない出来事が流れる そろえるにはアトミックコミットが要り、費用がかかる。Part 11 で扱う 型 2:並行した更新が逆順に届く(A と B が同じ注文を同時に更新) 時刻 | 起きること(すべて成功) | 注文 DB | 検索索引 t1 | A が DB に「調理中」を書く | 調理中 | — t2 | B が DB に「配達中」を書く | 配達中 | — t3 | B が索引に「配達中」を書く | 配達中 | 配達中 t4 | A が索引に「調理中」を書く | 配達中 | 調理中 最終値 | エラーは 0 件 | 配達中 | 調理中(食い違う) 注意 並行した書き込みを検出する仕組みがなければ、起きたことにすら気づかない。一方の値が、もう一方を黙って上書きする ケーススタディ 題材 A で、障害を入れない並行更新だけで食い違う件数を実測する(結果はケーススタディ) 78
解説

二重書き込みの不整合は 2 つの型に分かれます。型 1 は、片方だけが成功する型です。DB の更新は成功したがイベントの発行に失敗すると、受け手は変更を知りません。逆に、DB の更新が失敗したのにイベントだけが出ると、DB にない出来事が流れます。両方をそろえるにはアトミックコミットが要り、費用がかかります。型 2 は、並行した更新が 2 つのシステムに逆の順で届く型です。右の表は、宅配注文の状態を 2 つのクライアントが同時に更新する例です。A は「調理中」、B は「配達中」を書きます。DB には A、B の順で届き、検索索引には B、A の順で届くと、DB の最終値は「配達中」、索引の最終値は「調理中」になります。4 回の書き込みはすべて成功していて、エラーは 1 件もありません。『データ指向アプリケーションデザイン 第2版』は、検出の仕組みがなければ、起きたことにすら気づかないと書いています。題材 A では、障害を入れない並行更新だけで、この食い違いが何件起きるかを数えます。

順序を決める場所を 1 つにし、ほかはログを読む
スライド 79 のテキストと解説
順序を決める場所を 1 つにし、ほかはログを読む 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 正の DB をリーダー、ほかをフォロワーにする。運ぶのはログベースのブローカー 書籍 DDIA 2e 12.1.2 節 p.491〜496/12.2.2 節 p.499〜500/13.2.2.3 節 p.550 正の DB 書き込みの順序を決める 変更のログ 追記のみ。同じ順に読める 受け手 検索索引・分析基盤・ほかのサービス 順序が 1 つに決まる DB がコミットした順にログへ出る 受け手は同じ順に適用する 受け手を足せる・読み直せる 新しい受け手は、ログの読み手を足すだけ 位置を戻せば読み直せる(Part 12) 払うもの 通常は非同期。反映は遅れる 順序の保証はパーティションの中だけ 1 件失うと、導出データは正とずれる 用語 ログベースのブローカー:メッセージを追記のみのログに保存し、受け手が順に読む方式。Apache Kafka など。読んでも消えない 79
解説

二重書き込みの根は、順序を決める者が 2 人いることでした。そこで、順序を決める場所を 1 つにします。正の DB がコミットした順に変更をログへ出し、検索索引や分析基盤は、そのログを同じ順に読んで適用します。『データ指向アプリケーションデザイン 第2版』は、これを、1 つの DB をリーダーに、ほかをフォロワーに変えることだと説明しています。運ぶ役に向くのが、ログベースのメッセージブローカーです。メッセージを追記のみのログに保存し、受け手が順に読む方式です。利点は 3 つです。順序が 1 つに決まること、受け手を足すだけで新しい導出データを作れること、位置を戻して読み直せることです。読み直しと作り直しの条件は Part 12 で扱います。払うものもあります。通常は非同期なので、反映は遅れます。順序が保たれるのはパーティションの中だけです。そして、メッセージを 1 件失うだけで、導出データは正とずれたままになります。

アウトボックス:2 つの書き込みを 1 つの DB に畳む
スライド 80 のテキストと解説
アウトボックス:2 つの書き込みを 1 つの DB に畳む 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 業務データと送るイベントを、同じ DB の同じトランザクションで書く。送るのは別の処理 指針・報告 AWS 規範ガイダンス Transactional outbox pattern(2026-11 確認) 書籍 DDIA 2e 12.2.2.5 節 p.504(アウトボックスパターン) 1 つのトランザクション(注文 DB) 注文の表 内部の形。自由に変えられる アウトボックスの表 外向きのイベントの形 中継 別のプロセス ブローカー 受け手 得るもの 両方書かれるか、両方書かれないかになる 内部の表を変えても、外向きの形は保てる 払うもの 内部の形とアウトボックスの形の、変換の保守 DB が書くデータ量が増える 送る処理は別に要り、そこで重複しうる 80
解説

トランザクショナル・アウトボックスは、2 つのシステムへの書き込みを、1 つの DB の 1 つのトランザクションに畳む方法です。注文サービスは、注文の表を更新するのと同じトランザクションで、アウトボックスの表に「注文を受けた」というイベントを 1 行書きます。両方書かれるか、両方書かれないかのどちらかになります。ブローカーへ送る処理は、別のプロセスが担います。『データ指向アプリケーションデザイン 第2版』は、アウトボックスを、内部のスキーマと外向きのスキーマを分ける一般的な方法として紹介しています。同書は「二重書き込みのように見えますが、実際にそうです」と認めています。それでも二重書き込みの問題を避けられるのは、書き込み先がどちらも同じ DB で、1 つのトランザクションで済むからです。払うものも書かれています。内部の形とアウトボックスの形の変換を保守し続けること、DB が書くデータ量が増えることです。もう 1 つ、送る処理は別に要り、そこで重複が起きえます。次のスライドで、その運び方を 2 つ比べます。

アウトボックスの運び方は 2 つ:ポーリングと CDC
スライド 81 のテキストと解説
アウトボックスの運び方は 2 つ:ポーリングと CDC 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 二択ではない。アウトボックスの表を CDC で読む組み合わせがある 仕様・文書 Debezium 3.7 文書 Outbox Event Router (2026-11 確認) 指針・報告 AWS 規範ガイダンス Transactional outbox/microservices.io(個人サイト) 書籍 DDIA 2e 12.2.2.5 節 p.504 観点 | アウトボックス+ポーリング | アウトボックス+CDC(ログを読む) 何を読むか | アウトボックスの表への問い合わせ。コミット済みの行が見える | DB のトランザクションログ(PostgreSQL では WAL) 順序 | AWS は、時刻と連番で順序を保つ設計だと書く。microservices.io は難しいとする(食い違う) | ログの順に届く。キーは集約の ID(Outbox Event Router の既定) 遅れ | ポーリングの間隔しだい | 書き込みの直後に流せる。中継が健全である間 DB への負担 | 問い合わせと、送った行の削除 | 受け手が止まると WAL が溜まる(3 枚あと) 要る部品 | 定期実行の処理だけ。どの SQL の DB でも動く | Kafka Connect、コネクタ、スロットの監視 重複 | 中継が重複して送ることがある | 中継が異常終了すると、直前のイベントを出し直す ケーススタディ 連番の順に読むポーリングは、あとからコミットされた小さい番号の行を読み飛ばすか。一次資料では確かめられなかった。題材 A で、長いトランザクションを混ぜて実測する 81
解説

アウトボックスの表からブローカーへ運ぶ方法は 2 つあります。1 つ目はポーリングで、別の処理がアウトボックスの表を定期的に読み、送れたら行を消します。AWS の指針の実装例がこの形で、表を ID の順に読みます。どの SQL の DB でも動きます。順序については、資料が食い違います。AWS の指針は、アウトボックスの表に時刻と連番を持たせるこの設計が順序を保つと書き、別に、通知の順序を注意点に挙げています。個人のサイトである microservices.io は、順序どおりの発行が難しいことを欠点に挙げています。2 つ目は CDC で、DB のトランザクションログを読みます。Debezium 3.7 の Outbox Event Router は、集約の ID をメッセージのキーにし、イベントの id をヘッダーに出します。大事なのは、この 2 つが二択ではないことです。『データ指向アプリケーションデザイン 第2版』も、アウトボックスを CDC に公開する表として説明しています。連番の順に読むポーリングが行を読み飛ばすかは、一次資料で確かめられなかったので、題材 A で測ります。

CDC のしくみ:WAL を論理デコードして流す
スライド 82 のテキストと解説
CDC のしくみ:WAL を論理デコードして流す 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 PostgreSQL 18 の論理デコードを Debezium 3.7 が読む。既定値は意図と違うことがある 仕様・文書 Debezium 3.7 文書 PostgreSQL コネクタ(2026-11 確認)/PostgreSQL 18 文書 47.1・47.2 書籍 DDIA 2e 12.2.2 節 p.499〜500(CDC の定義と実装) WAL wal_level=logical 論理デコード 出力プラグイン(pgoutput など) スロット 読んだ位置を DB が覚える Debezium Kafka Connect のコネクタ ブローカー 受け手が順に読む Debezium 3.7 の設定 | 既定値 | 意味と注意 plugin.name | decoderbufs | pgoutput を使うなら、明示して指定する publication.autocreate.mode | all_tables | pgoutput のときだけ効く。publication が無ければ全テーブルを対象に作る。絞るなら filtered heartbeat.interval.ms | 0(送らない) | 取り込む表の更新が少ないと、位置を確認応答する機会がなく、WAL が残りうる slot.failover | false | フェイルオーバー用のスロットを作らない。PostgreSQL 16 以前では作れない 版 Debezium 3.7.1.Final(2026-11-06)。試験済みの PostgreSQL は 14〜18。「stable」の URL は最新版を指すので、設定は使う版の文書で確かめる 82
解説

チェンジデータキャプチャ、CDC は、DB に書かれた変更をすべて観察し、ほかのシステムへ複製できる形で取り出すしくみです。PostgreSQL では、先行書き込みログ、WAL を論理デコードして取り出し、その前提として wal_level を logical にします。どこまで読んだかは、レプリケーションスロットが DB の側で覚えます。Debezium は、Kafka Connect の上で動くコネクタとして、このスロットから変更を読み、ブローカーへ流します。下の表は、Debezium 3.7 の既定値で、2026 年 11 月に公式文書で確かめたものです。plugin.name の既定は decoderbufs で、pgoutput を使うなら明示します。publication.autocreate.mode は pgoutput を使うときだけ効く設定で、publication が無ければ全テーブルを対象に作ります。ハートビートは既定で送らず、フェイルオーバー用のスロットも作りません。3.7 系の最新は 3.7.1.Final で、試験済みの PostgreSQL は 14 から 18 です。

どの方式も既定は「少なくとも 1 回」
スライド 83 のテキストと解説
どの方式も既定は「少なくとも 1 回」 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 重複は障害のあとに起きる。受け手を冪等にすることが、どの方式でも前提になる 仕様・文書 PostgreSQL 18 文書 47.2.2/Debezium 3.7 文書/Kafka 4.4 文書(2026-11 確認) 指針・報告 AWS 規範ガイダンス Transactional outbox pattern 書籍 DDIA 2e 12.1.2.3 節 p.494 経路 | 重複が起きる場面 | 出典 PostgreSQL のスロット | 位置の保存はチェックポイント時だけ。クラッシュ後は前の位置に戻り、直近の変更を送り直す | PostgreSQL 18 文書 47.2.2 Debezium(Kafka Connect) | 異常終了すると、最後に記録したオフセットから再開し、直前のイベントを出し直しうる | Debezium 3.7 文書 アウトボックス+ポーリング | 中継が重複して送ることがある。受け手を冪等にするよう勧めている | AWS Prescriptive Guidance Apache Kafka | 既定は少なくとも 1 回。外のシステムまで厳密に 1 回にするには、相手側の協力が要る | Kafka 4.4 文書 Design ログの受け手 | オフセットを記録する前に落ちると、再開後に同じメッセージを 2 回処理する | DDIA 2e p.494 冪等:1 回実行しても、何回実行しても、効果が同じになること イベントに ID を持たせ、処理済みの ID を記録する Outbox Event Router は、イベントの id をヘッダーに出す 参照 冪等の説明、冪等な受け手の作り方、「厳密に 1 回」が成り立つ範囲は Part 11 83
解説

二重書き込みをやめても、重複は残ります。PostgreSQL のスロットは、通常は各変更を 1 回だけ出しますが、位置を保存するのはチェックポイントのときだけなので、クラッシュのあとは前の位置に戻り、直近の変更を送り直します。文書は、同じメッセージを 2 回扱う害を避けるのはクライアントの責任だと書いています。Debezium は、Kafka Connect が異常終了すると、最後に記録したオフセットから再開するので、直前のイベントを出し直すことがあります。AWS の指針は、アウトボックスの中継が重複して送ることがあるので、受け手を冪等にするよう勧めています。Kafka 4.4 の文書も、既定は少なくとも 1 回としています。冪等とは、1 回実行しても、何回実行しても、効果が同じになることです。受け手で言えば、同じイベントが 2 回届いても、効果は 1 回分です。イベントに ID を持たせ、処理済みの ID を記録するのが基本です。冪等な受け手の作り方と、「厳密に 1 回」が成り立つ範囲は、Part 11 で扱います。

CDC の受け手が止まると、正の DB の WAL が溜まる
スライド 84 のテキストと解説
CDC の受け手が止まると、正の DB の WAL が溜まる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 既定では上限が無い。導出の側の停止が、正の DB のディスクを埋めうる 仕様・文書 PostgreSQL 18 文書 19.6・29.8・47.2.2・リリースノート(2026-11 確認) 書籍 DDIA 2e 12.2.2.1 節 p.500(通常は非同期)/6.1.3.1 節 p.199(ログの保持) PostgreSQL 18 の項目 | 既定・ふるまい | 意味 レプリケーションスロット | 接続が無くても WAL を保持 | 受け手の状態を知らない。要らなくなったら落とす、と文書にある max_slot_wal_keep_size | -1(無制限) | 上限を付けると、超えたスロットは必要な WAL を消され、続きを読めなくなりうる idle_replication_slot_timeout | 0(無効)。18 で追加 | 使われていないスロットを、時間で無効にする。判定はチェックポイント時 DDL | 複製されない | スキーマの変更は手で合わせる。Debezium も DDL のイベントを出せない シーケンス・ラージオブジェクト | 複製されない | 切り替え先にするなら、シーケンスを進めておく必要がある リーダーの視点 上限なしは、正の DB のディスクを危険にさらす。上限ありは、スロットが使えなくなり、取りこぼしと取り直しの危険に変わる。どちらを守るかを先に決める ケーススタディ 題材 A で、受け手を止めたときの WAL の増え方と、上限を付けたときの欠落を実測する(結果はケーススタディ) 84
解説

CDC の落とし穴を、PostgreSQL 18 の文書(表示は 18.7)で確かめます。レプリケーションスロットは受け手の状態を知らず、接続が 1 本も無くても、必要な WAL を保持し続けます。文書は、要らなくなったスロットは落とすよう書いています。保持の上限を決める max_slot_wal_keep_size の既定は -1 で、無制限です。上限を付けると、今度は、超えたスロットが必要な WAL を消され、続きを読めなくなりえます。PostgreSQL 18 は、使われていないスロットを時間で無効にする idle_replication_slot_timeout を加えましたが、既定は 0 で無効です。つまり、正の DB を守るか、取りこぼさないことを守るかを、先に決める必要があります。また、論理レプリケーションは、DDL、シーケンスのデータ、ラージオブジェクトを複製しません。『データ指向アプリケーションデザイン 第2版』は、遅い受け手を足しても正にあまり影響しないと書いていますが、このガイドの読みでは、スロットの保持はその例外に当たります。同書も 6.1.3.1 節で、長く戻らないフォロワーのためにログを持ち続けると、リーダーのディスクを使い果たす危険があると書いています。

公開された事後報告は見つからなかった
スライド 85 のテキストと解説
公開された事後報告は見つからなかった 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 2026-11-18 の調査では、この 2 つを原因と明記した大手事業者の事後報告は見つからなかった 仕様・文書 PostgreSQL 18 文書 47.2.2/Debezium 3.7 文書(2026-11 確認) 指針・報告 Zalando 2023-11-09・2025-12-19/Meta 2022-06-08(技術記事・自己申告) 見つからなかったもの 二重書き込みを原因と明記した、事業者の事後報告 スロットの WAL でディスクが埋まり、正の DB が止まったとする、事業者の事後報告 CDC の遅れが、利用者に見える障害になったとする、事業者の報告 見つかったもの(事後報告ではない) 公式文書の警告:PostgreSQL 18、Debezium 3.7 Zalando の技術記事(2023-11-09、2025-12-19):更新の少ない DB でスロットが進まず、WAL がディスクを使い切る問題と修正 Meta の技術記事(2022-06-08):キャッシュの充填と無効化の競合で、古い値が残る型 注意 「事故が無い」ではない。事業者の事後報告を、この調査では見つけられなかっただけ。技術記事には、WAL がディスクを使い切り、ノードが読み取り専用に降格することがあった、という自己申告がある(Zalando 2023-11-09。日時と影響範囲の記載は無い) ケーススタディ だから題材 A で実測する:二重書き込み/アウトボックス+ポーリング/アウトボックス+CDC の、欠落・重複・順序のずれ(結果はケーススタディ) 85
解説

二重書き込みと WAL の保持について、公開された事後報告を探しました。2026 年 11 月 18 日の調査の範囲では、大手の事業者が二重書き込みを原因と明記した事後報告も、スロットの WAL でディスクが埋まり正の DB が止まったと書いた事後報告も、見つかりませんでした。CDC の遅れが利用者に見える障害になったという報告も同じです。見つかったのは、公式文書の警告と、技術記事です。Zalando は 2023 年 11 月 9 日と 2025 年 12 月 19 日の記事で、更新の少ない DB でスロットが進まず WAL が溜まる問題と、JDBC ドライバーと Debezium への修正を報告しています。2023 年の記事は、WAL がディスクを使い切り、ノードが読み取り専用に降格することがあった、と書いています。Meta は 2022 年 6 月 8 日の記事で、キャッシュの充填と無効化の競合で古い値が残り続ける型を説明しています。どちらも自己申告の技術記事で、事後報告ではありません。日時や影響範囲は書かれていません。事故が無いという意味ではありません。だから、このガイドは題材 A で実測します。

分散モノリスの兆候:分けたのに一緒にしか動かせない
スライド 86 のテキストと解説
分散モノリスの兆候:分けたのに一緒にしか動かせない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 標準や公的な指針に定義は見当たらない。指針にある兆候を、本ガイドが 4 つに整理した 指針・報告 AWS 規範ガイダンス Shared-database-per-service/Azure Data considerations/.NET Microservices(2026-11 確認) 兆候 | 何が起きるか | 書いている文書 同じ表を複数のサービスが読み書きする | スキーマの変更に全員の調整が要る。長いトランザクションが、ほかのサービスを待たせる | AWS(共有 DB)、Azure 1 つの要求に、同期呼び出しの連鎖が要る | 1 つが遅いと全体が遅くなる。呼び先が落ちると応答できない | Microsoft .NET Microservices 変更を複数のサービスで同時に出さないと壊れる | 独立したデプロイができない。DB の変更は後方互換であることが条件になる | AWS(後方互換が条件)、Azure(独立したデプロイ) 2 つのサービスが、絶えず細かくやり取りする | 境界の引き直しの合図。まとめるか、機能を分け直す | Azure 本ガイドの整理 標準や公的な指針に定義は見当たらない。書籍に定義の例がある(Newman『Monolith to Microservices』。本ガイドは現物を確かめていない)。上の 4 つは、別々の文書の兆候を本ガイドが並べたもの。共通するのは「サービスは分けたが、データの流れに結合が残った」状態 86
解説

「分散モノリス」という語は広く使われますが、標準や公的な指針に定義は見当たりません。書籍には定義の例があります。Newman の『Monolith to Microservices』です。ただし、本ガイドは現物を確かめていません。そこで、このガイドでは、指針に別々に書かれている兆候を 4 つに整理します。1 つ目は、同じ表を複数のサービスが読み書きしていることです。AWS の指針は、共有 DB が開発時の結合と実行時の結合を生むと書き、長いトランザクションがほかのサービスの表をロックする例を挙げています。Azure の指針は、問題は物理サーバーの共有ではなく、同じスキーマや同じ表を読み書きすることだと注記しています。2 つ目は、1 つの要求を返すのに同期呼び出しの連鎖が要ることです。Microsoft の .NET 向けの本は、これをアンチパターンと図で示しています。3 つ目は、変更を複数のサービスで同時に出さないと壊れることです。AWS の指針は、共有 DB では変更をすべて後方互換にするよう求めています。Azure の指針は、データストアを分けると独立したデプロイの機敏さが保たれると書いています。4 つ目は、2 つのサービスが絶えず細かくやり取りしていることで、Azure は境界の引き直しを勧めています。なお、AWS は共有 DB を、既存のコードを大きく作り替えたくない場合などの選択肢として載せていて、禁じてはいません。どれも任意の指針で、規範ではありません。

データの流れについて、設計レビューで問うこと
スライド 87 のテキストと解説
データの流れについて、設計レビューで問うこと 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 運び方より先に、「順序をだれが決めるか」「止まったら何が溜まるか」を問う 仕様・文書 PostgreSQL 18 文書 19.6・47.2.2/Debezium 3.7 文書(2026-11 確認) 指針・報告 AWS 規範ガイダンス Transactional outbox/.NET Microservices 書籍 DDIA 2e p.498・p.504/『大規模データ管理 第2版』p.199 問い | なぜ問うか | 危ない兆候 1 つの処理で、DB と別のシステムの両方に書く箇所はどこか | 二重書き込みは、片方だけ成功しうる | commit の直後に publish。 失敗を握りつぶす再送 同じキーへの並行した更新が、 2 つのシステムに同じ順で届く保証は何か | エラーなしで食い違いが残る型がある | 「めったに起きない」「時刻で後勝ち」 コピーを読むのか、正を直接呼ぶのか。遅れをどこまで許すか | 許せる遅れと照合の要否で、運び方が決まる | 遅れの上限を決めていない 受け手は冪等か。同じイベントが 2 回届いても、効果は 1 回分か | どの方式も、既定は少なくとも 1 回 | イベントに ID が無い。「厳密に 1 回なので不要」 外に出しているのは内部の表の形か、外向きに決めた形か | 表の CDC は、内部のスキーマを 公開の契約に変える | 列を消すと下流が壊れる。だれが読んでいるか分からない スロットの保持量をだれが監視し、上限はいくつか | 既定は無制限。正の DB のディスクが埋まりうる | 上限の設定が既定のまま。使っていないスロットがある 1 つの要求を返すのに、同期でいくつのサービスを直列に呼ぶか | 連鎖は、応答時間と可用性を悪くする | 呼び先が落ちると自分も落ちる 87
解説

この Part の内容を、設計レビューで使う問いにまとめます。1 つ目は、1 つの処理で DB と別のシステムの両方に書いている箇所を洗い出す問いです。コミットの直後に発行している箇所が、二重書き込みです。2 つ目は、同じキーへの並行した更新が、2 つのシステムに同じ順で届く保証を問います。「めったに起きない」という答えは、保証ではありません。3 つ目は、コピーを読むのか正を直接呼ぶのか、遅れをどこまで許すのかです。4 つ目は、受け手の冪等性です。どの方式も既定は少なくとも 1 回なので、イベントに ID が無ければ重複を見分けられません。5 つ目は、外に出している形です。表をそのまま CDC で流すと、内部のスキーマが公開の契約に変わります。6 つ目は、スロットの保持量の監視と上限です。既定は無制限です。7 つ目は、同期呼び出しの連鎖の長さです。これらの問いは、Part 17 の一覧表にまとめ直します。

まとめ:順序を決める場所を 1 つにし、重複に備える
スライド 88 のテキストと解説
まとめ:順序を決める場所を 1 つにし、重複に備える 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 4 形を選び、二重書き込みをやめ、既定値を確かめ、止まったときに溜まるものを決める 仕様・文書 PostgreSQL 18 文書 19.6・29.8・47.2.2/Debezium 3.7 文書(2026-11 確認) 書籍 DDIA 2e 5.2 節・12.2.1〜12.2.2 節(p.497〜504)/『大規模データ管理 第2版』p.197〜201 流れは 3 つの形 DB 経由・サービス呼び出し・非同期のイベント コピーか正かは、許せる遅れと照合の要否で決める(本ガイドの考え) 二重書き込みをしない 片方だけ成功する型と、逆順に届く型がある 後者は、エラーなしで食い違いが残る アウトボックスと CDC は組み合わせる 業務データとイベントを同じトランザクションで書く 運び方はポーリングか CDC。受け手は冪等に CDC は正の DB に跳ね返る 受け手が止まると WAL が溜まる。既定は上限なし DDL とシーケンスは流れない リーダーの視点 次の Part 7 は、流れるデータの「形」を契約にして、動かしたまま変える方法。整合性は Part 11、作り直しは Part 12 88
解説

Part 6 のまとめです。1 つ目に、データの流れは、DB 経由、サービス呼び出し、非同期のイベントの 3 つの形で考えます。コピーを読むか正を直接呼ぶかは、許せる遅れと照合の要否で決める、というのが本ガイドの考えです。2 つ目に、二重書き込みをしません。不整合には、片方だけ成功する型と、並行した更新が逆順に届く型があり、後者はエラーなしで食い違いが残ります。3 つ目に、アウトボックスと CDC は二択ではなく、組み合わせられます。業務データとイベントを同じトランザクションで書き、運び方はポーリングか CDC から選びます。どちらでも重複は起きるので、受け手を冪等にします。4 つ目に、CDC は正の DB に跳ね返ります。受け手が止まると WAL が溜まり、PostgreSQL 18 の既定では上限がありません。DDL とシーケンスは流れません。公開された事後報告は見つからなかったので、題材 A で実測します。次の Part 7 では、流れるデータの形を契約にして、動かしたまま変える方法を扱います。

PART 7 動かしたまま変える契約
スライド 89 のテキストと解説
PART 7 動かしたまま変える契約 逐次更新では前方・後方の両方の互換が要る。検査は書き手側と CI に置き、設定やルールもデータとして同じに扱う このPartで答えられるようになる問い 新旧が同時に動く間、何が何を読めればよいか 形式とレジストリは、何を検査し、何を検査しないか 契約の強制と検査を、どこに置くか DB のスキーマと設定を、止めずにどう変えるか 89
解説

Part 7 は、9 つのステップの 5 番目、契約です。Part 6 で、サービスと基盤の間のデータの流れを決めました。流れを決めると、その上を通るデータの形を、動かしたまま変える必要が出てきます。この Part では、まず逐次更新の途中で新旧が同時に動くことを図で確かめ、後方互換と前方互換を定義します。次に、Avro、Protocol Buffers、JSON Schema の規則の違い、スキーマレジストリの互換性モードと既定値、契約を強制する場所を扱います。後半は、API とイベントの仕様、データ契約、データベースのスキーマ変更、そして設定やルールのデータが引き金になった事故 3 件です。最後に、設計レビューで問うことをまとめます。製品の版と既定値は、2026 年 11 月に公式文書で確かめたものです。

逐次更新の間は、新旧の版が同時に動く
スライド 90 のテキストと解説
逐次更新の間は、新旧の版が同時に動く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 コードは数分で入れ替わる。途中の時間と、残ったデータは、新旧が混ざる 書籍 『データ指向アプリケーションデザイン 第2版』5 章 章頭 p.155〜156、5.2.1 節 p.172 更新前 旧 v1 旧 v1 旧 v1 データ:旧形式だけ 更新の途中 新 v2 新 v2 旧 v1 データ:旧形式+新形式 更新後 新 v2 新 v2 新 v2 データ:旧形式も残る 途中で起きる 2 つの読み方 新が旧を読む:新しいコードが、古いコードの書いたデータを読む 旧が新を読む:古いコードが、新しいコードの書いたデータを読む 切り戻し:古いコードに戻しても、新しい形式のデータは残る リーダーの視点 「データはコードより長生きする」(DDIA 2e p.172)。5 年前に書いた値も、書き換えない限り元の形式で残る。「全部同時に更新する」は前提にできない 90
解説

逐次更新は、新しい版を数ノードずつ配り、様子を見ながら全体へ広げる更新のしかたです。止めずに更新できる代わりに、途中の時間は、新しいコードと古いコードが同時に動きます。図の中央がその状態です。新しいノードが書いたデータを、まだ古いノードが読みます。逆に、新しいノードは、以前に古いコードが書いたデータを読みます。更新が終わっても、データベースやログには古い形式のデータが残ります。『データ指向アプリケーションデザイン 第2版』は、5 年前に書いた値が元の形式のまま残ることを指して、データはコードより長生きする、と表現しています。問題が見つかって切り戻すと、今度は古いコードが、新しい形式で書かれたデータを読むことになります。ですから「全部同時に更新するから大丈夫」という前提は置けません。次のスライドで、この 2 つの読み方に名前を付けます。

後方互換と前方互換:向きが更新の順序を決める
スライド 91 のテキストと解説
後方互換と前方互換:向きが更新の順序を決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 後方互換は、新しい読み手が古いデータを読めること。前方互換はその逆 仕様・文書 Confluent Platform 8.4 文書 Schema Evolution and Compatibility(2026-11 確認) 書籍 DDIA 2e 5 章 章頭 p.156〜157、5.2.2.4 節 p.179〜180 互換の向き | 定義 | 先に更新する側 | 守れないと起きること 後方互換(backward) | 新しいコードが、古いコードの書いたデータを読める | 読み手 | 新しい読み手が、残っている古いデータを読めない 前方互換(forward) | 古いコードが、新しいコードの書いたデータを読める | 書き手 | まだ古い読み手が、新しいデータを読めない 両方(full) | どちらの向きにも読める | 順序を問わない | 代わりに、許される変更が狭くなる サービスの呼び出しの場合 サーバーが先、クライアントが後と仮定できる リクエストに後方互換、レスポンスに前方互換 組織をまたぐ相手には、更新を強制できない 注意 前方互換のほうが難しい。古いコードが未知のフィールドを読んで書き戻すとき、それを落とすと値が消える(DDIA 2e p.156〜157) 91
解説

2 つの読み方に名前を付けます。後方互換は、新しいコードが、古いコードの書いたデータを読めることです。前方互換は、古いコードが、新しいコードの書いたデータを読めることです。この向きは、DDIA 第2版の 5 章と、Confluent の文書で同じです。互換の向きは、どちらを先に更新するかを決めます。Confluent の文書は、後方互換だけなら読み手、つまりコンシューマーをすべて先に更新し、前方互換だけなら書き手を先に更新し、両方なら独立に更新できる、と書いています。サービスの呼び出しでは、サーバーを先に、クライアントを後に更新すると仮定できるので、リクエストには後方互換、レスポンスには前方互換だけあれば足ります。ただし、組織をまたぐ相手には更新を強制できません。前方互換のほうが難しい点にも注意します。古いコードが未知のフィールドを読んで書き戻すとき、それを落とすと、値が消えます。

形式ごとに、新旧を対応づける規則が違う
スライド 92 のテキストと解説
形式ごとに、新旧を対応づける規則が違う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 Avro は名前と既定値、Protobuf は番号。JSON Schema の仕様には、互換の規則が無い 仕様・文書 Avro 仕様 1.12.0/protobuf.dev proto3 ガイド/JSON Schema Draft 2020-12(2026-11 確認) 指針・報告 Confluent Platform 8.4 文書 Schema Evolution 書籍 DDIA 2e 5.1.2〜5.1.4 節 p.159〜170 | Avro | Protocol Buffers | JSON Schema 対応づけの鍵 | フィールドの名前。書き手と読み手のスキーマを突き合わせる | フィールドの番号。バイナリに名前は載らない | プロパティの名前 互換の規則 | 仕様の Schema Resolution 節が定める | 公式文書が、変更を安全でない・安全・条件つきに分ける | 仕様に、版の間の互換の規則は無い 読み手が知らないフィールド | 無視する | 未知のフィールドとして保持する(バイナリの場合。JSON に直すと失われる) | 既定は通す。additionalProperties が false なら拒否 書き手が書いていないフィールド | 読み手の既定値を使う。無ければエラー | 型の既定値(0、空文字列など)で埋まる | スキーマの書き方しだい 気をつける点 | 読むのに書き手のスキーマが要る | 番号を再利用しない。JSON にすると名前が契約になる | 互換の判定は、レジストリの実装が決める 形式が増えると、覚える規則も検査も増える。同時に使うスキーマの形式は少なくする(DDIA 2e p.171) 92
解説

Avro は、書き手のスキーマと読み手のスキーマを突き合わせ、フィールドを名前で対応づけます。読み手に無いフィールドは無視し、書き手に無いフィールドは読み手の既定値で埋めます。既定値が無ければエラーです。Protocol Buffers は、フィールドを番号で対応づけます。バイナリには名前が載らないので、名前は変えられますが、番号は変えられません。知らない番号のフィールドは、未知のフィールドとして保持します。ただし公式文書は、JSON に直列化したり、フィールドを 1 つずつ写したりすると失われる、と書いています。JSON Schema は事情が違います。Draft 2020-12 の仕様の本文には、2 つの版のスキーマが互換かどうかを決める規則がありません。Confluent の文書も、JSON Schema は互換の規則を明示的には定義していない、と書いています。つまり、JSON Schema の互換の判定は、使うレジストリの実装が決めます。Avro の仕様は 1.12.0 の文書で確かめました。リリースは 1.12.2 まで出ていますが、仕様の差分は確かめていません。

両方向に安全な変更は、既定値つきの追加と削除
スライド 93 のテキストと解説
両方向に安全な変更は、既定値つきの追加と削除 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 名前の変更と型の変更は、形式と向きで安全かどうかが変わる。新旧を並べて出す 仕様・文書 Avro 仕様 1.12.0 Schema Resolution・Aliases/protobuf.dev proto3 Updating A Message Type(2026-11 確認) 書籍 DDIA 2e 5.1.3.1 節 p.164〜165、5.1.4.2 節 p.168〜169 変更 | Avro | Protocol Buffers(バイナリ) | どうするか フィールドの追加 | 既定値があれば両方向に安全。無ければ後方互換が壊れる | 新しい番号を割り当てれば安全 | 既定値を付けて足す フィールドの削除 | 既定値があれば両方向に安全。無ければ前方互換が壊れる | 安全。消した番号は reserved にする | 使う読み手がいなくなってから消す 名前の変更 | 別名に対応した実装なら後方互換(仕様上は任意)。前方互換にはならない | バイナリでは安全。JSON にすると規則が変わる | 新しい名前で足し、新旧を並べて出す 型の変更 | 決まった昇格だけ(int から long など) | 一部は読めるが、値が切り捨てられることがある | 新しいフィールドを足して移す 番号・意味の再利用 | — | 解析エラー、情報の漏えい、破損につながる | 再利用しない JSON Schema は、未知のプロパティを通すか拒否するかで判定が変わる。仕様に規則が無いので、使うレジストリの文書で確かめる ケーススタディ 題材 B で実測する:この変更を 3 形式で流し、登録の拒否と、壊れた受け手を数える(結果はケーススタディ) 93
解説

フィールドの追加と削除は、既定値があれば両方向に安全です。Avro では、既定値の無いフィールドを足すと、新しい読み手が古いデータを読めず、後方互換が壊れます。既定値の無いフィールドを消すと、古い読み手が新しいデータを読めず、前方互換が壊れます。Protocol Buffers では、新しい番号で足すのも、消すのも安全です。ただし公式文書は、消した番号を reserved、つまり予約済みにするよう求めています。番号を再利用すると、解析のエラー、個人情報の漏えい、データの破損につながる、と文書は挙げています。名前の変更は、Avro では別名に対応した実装なら後方互換になりますが、前方互換にはなりません。仕様上、別名を使うかどうかは実装の任意です。型の変更は、読めても値が切り捨てられることがあります。この 2 つは、新しいフィールドを足して新旧を並べて出し、あとで古いほうを消します。JSON Schema は仕様に規則が無いので、表に入れていません。

互換性モードは、向きと比べる範囲の 2 軸で選ぶ
スライド 94 のテキストと解説
互換性モードは、向きと比べる範囲の 2 軸で選ぶ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 スキーマレジストリは、スキーマの版を保存し、新しい版の登録時に互換性を検査する 仕様・文書 Confluent Platform 8.4 文書 Schema Evolution/Redpanda 26.2 文書 Schema Registry API(2026-11 確認) 書籍 DDIA 2e 5.1.4.3 節 p.169、5.2.4.1 節 p.184 モード | 登録時に検査すること | 比べる相手 | 先に更新する側 BACKWARD | 新しいスキーマの読み手が、前の版のデータを読める | 直前の版 | 読み手 BACKWARD_TRANSITIVE | 同上 | 登録済みのすべての版 | 読み手 FORWARD | 前の版の読み手が、新しいスキーマのデータを読める | 直前の版 | 書き手 FORWARD_TRANSITIVE | 同上 | 登録済みのすべての版 | 書き手 FULL | 両方向 | 直前の版 | 順序を問わない FULL_TRANSITIVE | 両方向 | 登録済みのすべての版 | 順序を問わない NONE | 検査しない | — | 同時に更新するか、別のトピックへ移す リーダーの視点 モードは「どちらを先に更新するか」という運用の決まりと対で決める。BACKWARD のまま書き手を先に出すと、古い読み手が読める保証は無い 94
解説

スキーマレジストリは、スキーマの版を保存し、新しい版を登録するときに、過去の版と互換かどうかを検査するサービスです。DDIA 第2版も、ブローカーと並べて置くのが一般的だと書いています。検査の内容は、互換性モードで決まります。モードは 2 つの軸の組み合わせです。1 つ目の軸は向きで、BACKWARD、FORWARD、FULL です。2 つ目の軸は比べる範囲で、名前に TRANSITIVE が付かないモードは直前の版とだけ比べ、付くモードは登録済みのすべての版と比べます。これに、検査しない NONE を足して 7 つです。Confluent と Redpanda は同じ 7 つを持ちます。モードは、どちらを先に更新するかという運用の決まりと対になります。BACKWARD を選んだのに書き手を先に出すと、古い読み手が新しいデータを読める保証はありません。次のスライドで、既定値を見ます。

既定は直前の版とだけ比べ、古いデータは守らない
スライド 95 のテキストと解説
既定は直前の版とだけ比べ、古いデータは守らない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 Confluent と Redpanda の既定は BACKWARD。Apicurio は、設定しなければ何も検査しない 仕様・文書 Confluent Platform 8.4/Redpanda 26.2/Apicurio Registry 3.3.x の各文書(2026-11 確認) 書籍 DDIA 2e 5.1.5 節 p.171(デプロイ前に互換性を検査) 製品(公式文書の記述。2026-11 確認) | 既定 | 文書にある補足 Confluent Schema Registry(Platform 8.4) | BACKWARD | 非推移。Protobuf には BACKWARD_TRANSITIVE を勧める Redpanda 内蔵(26.2) | BACKWARD | モードは同じ 7 つ。全体と subject ごとに設定する Apicurio Registry(3.3.x) | 規則なし | 全体の規則が無ければ何も適用しない。AsyncAPI・GraphQL は互換性の検査なし v1 検査する v2 検査する v3 検査しない:v3 の読み手が v1 のデータを読めるか 読み直すと古い版が出てくる 先頭から読むと v1 のデータに当たる すべての版を読むなら TRANSITIVE ケーススタディ 題材 B で実測する:段ごとには通る v1→v2→v3 を作り、先頭からの読み直しで落ちる件数を数える。Confluent と Apicurio は未検証 95
解説

表は 2026 年 11 月に確かめた公式文書の記述です。Confluent と Redpanda の既定は BACKWARD で、TRANSITIVE ではありません。つまり、直前の版とだけ比べます。Apicurio Registry は、全体の規則を設定しなければ、規則は何も適用されません。直前の版とだけ比べると、何が起きるでしょうか。たとえば Avro で、版 1 に無いフィールドを版 2 で既定値つきで足し、版 3 でその既定値を外します。段ごとの検査は通りますが、版 3 の読み手は版 1 のデータを読めません。トピックを先頭から読み直すと、版 1 のデータが出てきます。Confluent の文書も、すべての版のデータを読む必要があるなら BACKWARD_TRANSITIVE を使うよう書いています。Confluent と Apicurio は未検証で、Redpanda は題材 B で測ります。作り直しは Part 12 で扱います。

契約の強制は、書き手側と CI に置く
スライド 96 のテキストと解説
契約の強制は、書き手側と CI に置く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 レジストリが検査するのは登録のときだけ。登録せずに書く書き手は、別の場所で止める 仕様・文書 Redpanda 26.2 文書 Server-Side Schema ID Validation・Licenses・Schema Registry API(2026-11 確認) 書籍 DDIA 2e 5.1.5 節 p.171、5.2.4.1 節 p.184 置く場所 | 止められるもの | 止められないもの・条件 CI(マージの前) | 互換でないスキーマの変更を、配備の前に止める | CI を通らない書き手 書き手(シリアライザ) | 自動登録を切れば、登録済みのスキーマでしか書けない | シリアライザを使わない書き手 レジストリ(登録時) | 互換でない版の登録 | 登録せずに書く書き手。モードが NONE、規則なしの場合 ブローカー(書き込み時) | 未登録のスキーマ ID を持つレコード(Redpanda の場合) | Redpanda では企業版のライセンスが要る。中身は検査しない 読み手(取り込み時) | 想定外の入力を、最後に止める | 拒否したあとの動作を決めておく必要がある ブローカーは通常、データモデルを強制しない(DDIA 2e p.184)。検証の機能は製品とエディションで範囲が違う。公式文書で確かめてから設計に入れる 96
解説

契約を検査できる場所は 5 つあります。レジストリは登録のときに検査しますが、登録せずに書く書き手は止められません。DDIA 第2版が書くとおり、ブローカーはふつう、流れるデータの形を決めて守らせることはしません。ブローカーから見れば、メッセージの中身はバイト列です。Redpanda のサーバー側のスキーマ ID 検証は、文書によれば企業版のライセンスが要ります。しかも、レコードに埋められたスキーマ ID が登録済みかを見るだけで、中身がスキーマに合うかは検査しません。Confluent のスキーマ規則も、Enterprise と、Stream Governance の Advanced パッケージを付けた Confluent Cloud に限る、と文書にあります。ですから、強制の中心は書き手側と CI に置きます。CI では、マージの前に互換性を検査します。書き手では、シリアライザの自動登録を切り、登録済みのスキーマでしか書けないようにします。読み手の検査は、あとの事故のスライドで扱います。

API とイベントの仕様は、互換の規則までは決めない
スライド 97 のテキストと解説
API とイベントの仕様は、互換の規則までは決めない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 OpenAPI と AsyncAPI は記述の形式、CloudEvents は封筒。互換の判定は、別の検査で補う 仕様・文書 OpenAPI 3.2.1/AsyncAPI 3.1.0/CloudEvents 1.0.2・Primer(2026-11 確認) 書籍 DDIA 2e 5.2.4.1 節 p.184/『ハードパーツ』13.1 節 p.367〜369、13.1.2.2 節 p.374 仕様(版) | 決めること | 決めないこと OpenAPI 3.2.1(2026-09-10) | HTTP API の記述。スキーマは JSON Schema Draft 2020-12 の上位集合 | API の版の間の互換の規則。info.version は記述文書の版 AsyncAPI 3.1.0 | メッセージで動く API の記述(チャネル・操作・メッセージ) | 構成や方式を仮定しない。互換の規則は定めない CloudEvents 1.0.2 | イベントの封筒。必須は id・source・specversion・type | data の中身の形式。版づけの方式は出す側が決める CloudEvents の手引き(非規範) 互換の変更:type を変えない 非互換の変更:type を変え、新旧をしばらく両方出す 契約の厳しさには幅がある 厳格:名前・型・順序まで一致。変更が波及しやすい 緩い:コンシューマー駆動コントラクトで検査を補う 97
解説

OpenAPI は、HTTP の API を記述する形式です。3.2.1 のスキーマは、JSON Schema Draft 2020-12 の上位集合です。API の版の間で何が互換かは定めていません。AsyncAPI は、メッセージで動く API を記述する形式で、3.1.0 の本文は、ソフトウェアの構成や方式を仮定しない、と書いています。CloudEvents が決めるのは、イベントの封筒です。必須の属性は id、source、specversion、type の 4 つで、中身の形式は制限しません。版づけの方式も、イベントを出す側に任せています。規範ではない手引きは、互換でない変更では type を変え、新旧の両方をしばらく出すよう勧めています。『ハードパーツ』13 章は、契約の厳しさには幅があるとし、緩い契約を補う方法として、コンシューマー駆動コントラクトを挙げます。受け手が必要な項目を契約にし、出し手がビルド時に検証します。

データ契約は、スキーマに品質と条件を足した合意
スライド 98 のテキストと解説
データ契約は、スキーマに品質と条件を足した合意 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 提供者と消費者が、どのデータを何の目的で使うかを合意したもの。スキーマはその一部 仕様・文書 ODCS v3.2.0(Bitol、2026-09-08)/Confluent Platform 文書 Data Contracts(2026-11 確認) 指針・報告 Thoughtworks Radar:ODCS(2026-11)・Data Contract CLI(2025-11) 書籍 『大規模データ管理 第2版』8.1.5 節 p.229〜231 契約に入れるもの 技術面:スキーマ、互換性、版、SLA、品質 業務面:利用の目的、プライバシー、制限 使い方:テストに変え、破壊的な変更を見つける ODCS(書く形式) 版:v3.2.0(2026-09-08) 形式:YAML でデータ契約を宣言する 管理:Bitol(LF AI & Data の Graduated) 位置:業界の標準。公的な標準ではない Thoughtworks Radar ODCS:Adopt(2026-11) Data Contract CLI:Trial(2025-11。現行の号には非掲載) 性格:一企業の経験に基づく意見 調査の限界 標準化団体による「データ契約」の規範的な定義は、本調査(2026-11)では見つからなかった。策定中とされる仕様はある(EKGF/OMG 系統の dprod-contracts v0.7。本体は未確認)。定義は ODCS、製品の文書、書籍で少しずつ違う。採用するときは、自分たちの定義を先に書く 98
解説

『大規模データ管理 第2版』は、データの提供者と消費者が、どのデータを何の目的で使うかを正式に合意すること、と定義しています。技術の面では、インタフェースの互換性、版、SLA、品質を含みます。業務の面では、利用の目的、プライバシー、制限を含みます。同書は、契約をテストに変えて破壊的な変更を見つける使い方も紹介しています。Confluent の文書も、スキーマはデータ契約の 1 つの要素にすぎない、と書いています。書く形式には ODCS があります。YAML でデータ契約を宣言する業界の標準で、2026 年 9 月 8 日に v3.2.0 が出ています。管理は LF AI & Data の Bitol プロジェクトです。Thoughtworks の Technology Radar は、2026 年 11 月の号で ODCS を Adopt に置きました。ただし、標準化団体による規範的な定義は、今回の調査では見つかりませんでした。策定中とされる仕様はあります。W3C の ODRL ワークショップへの意見書が、EKGF と OMG の系統の dprod-contracts(v0.7)に触れています。仕様の本体は確かめていません。

expand/contract:非互換の変更を 3 段階に分ける
スライド 99 のテキストと解説
expand/contract:非互換の変更を 3 段階に分ける 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 新旧の両方を支える期間を置き、利用側が移り終えてから、古いほうを消す 指針・報告 Danilo Sato「ParallelChange」martinfowler.com(個人サイトの記事、2014-05-13) 書籍 DDIA 2e 5.2.1 節 p.172〜173(考え方) 1. 広げる(expand) 新しい列を足す。古い列は残す。両方に書く 2. 移す(migrate) 既存の行を埋め戻す。読み手を順に切り替える 3. 縮める(contract) 古い列の利用が無いことを確かめて消す 段階 | 注文表の列 | 書き込み | 読み取り 開始 | address | address | address 1. 広げる | address+postal_code・address_line | 両方に書く | address 2. 移す | 同上(既存の行を埋め戻す) | 両方に書く | 新しい 2 列へ順に切り替える 3. 縮める | postal_code・address_line | 新しい 2 列 | 新しい 2 列 費用は、2 つの版を並べて保つ期間。縮める段階をやり残すと、始める前より悪い状態になりうる(ParallelChange)。入れ替えの全体は Part 15 99
解説

データベースのスキーマを、止めずに、互換でない形に変える手順です。Danilo Sato の 2014 年の記事は、互換でない変更を、広げる、移す、縮めるの 3 段階に分けています。例は、架空の宅配注文サービスの注文表です。住所を 1 列で持っていたのを、郵便番号と住所の 2 列に分けます。まず広げます。新しい 2 列を足し、古い列は残します。アプリは両方に書きます。次に移します。既存の行を埋め戻し、読み手を 1 つずつ新しい列へ切り替えます。この間、新旧のどの版のアプリも動けます。最後に縮めます。古い列を読む利用側がいないことを確かめてから消します。費用は、2 つの版を並べて保つ期間です。同じ記事は、縮める段階をやり残すと、始める前より悪い状態になりうる、と注意しています。入れ替えの全体は Part 15 で扱い、各段階の失敗の数は題材 B で測ります。

PostgreSQL の DDL は、ロックと書き換えを調べる
スライド 100 のテキストと解説
PostgreSQL の DDL は、ロックと書き換えを調べる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 ALTER TABLE は、明記がなければ ACCESS EXCLUSIVE を取る。これは SELECT も止める 仕様・文書 PostgreSQL 18 文書 ALTER TABLE・CREATE INDEX・13.3 Explicit Locking・19.11 lock_timeout(2026-11 確認) 操作 | PostgreSQL 18 の文書の記述 | 避け方 列の追加(volatile でない DEFAULT) | 表を書き換えない。既定値はメタデータに記録する | そのまま実行できる(ロックは ACCESS EXCLUSIVE) 列の追加(volatile な DEFAULT) | 表と索引を、全部書き換える | 列を足してから、分けて埋める 列の型の変更 | 通常は、表と索引を全部書き換える | 新しい列を足して移す(expand/contract) 制約の追加(CHECK・外部キー・NOT NULL) | 既存の行を走査して確かめる。その間、更新は待たされる。外部キーのロックは SHARE ROW EXCLUSIVE | NOT VALID で足し、あとで VALIDATE 索引の作成 | 通常の作成は、書き込みを止める(読み取りは可) | CONCURRENTLY。失敗時は INVALID が残る lock_timeout の既定は 0(無効)。ロックは解放まで無期限に待つ。DDL には lock_timeout を付け、失敗したら再試行する手順にする ケーススタディ 題材 B で実測する:操作ごとの書き込みの停止時間と、長いトランザクションの後ろに並んだときの待ち(結果はケーススタディ) 100
解説

PostgreSQL 18 の文書によれば、ALTER TABLE は、明記がなければ ACCESS EXCLUSIVE というロックを取ります。SELECT も待たせる、最も強いロックです。明記がある例が外部キーの追加で、SHARE ROW EXCLUSIVE を、参照先の表にも取ります。書き換えの無い列の追加も、取るロックは ACCESS EXCLUSIVE です。表には、文書で確かめた操作だけを載せました。volatile でない既定値を付けた列の追加は、表を書き換えません。volatile な既定値を付けると、表と索引を全部書き換えます。列の型の変更も、通常は書き換えです。制約は、NOT VALID で足せば既存の行の走査を省け、あとで VALIDATE CONSTRAINT を実行します。こちらのロックは SHARE UPDATE EXCLUSIVE です。索引は CONCURRENTLY で作ります。もう 1 つ、lock_timeout の既定は 0 で、無効です。ロックは、解放されるまで無期限に待ちます。長いトランザクションの後ろに DDL が並んだときに何が起きるかは、文書に明記が見つからなかったので、題材 B で測ります。

設定やルールもデータで、契約と段階配布が要る
スライド 101 のテキストと解説
設定やルールもデータで、契約と段階配布が要る 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 3 件とも、書き手と読み手の想定がずれたデータが、短時間で全体に届いた(本ガイドの整理) 指針・報告 CrowdStrike RCA(2024-08-06)/Google Cloud 事後報告(2025-06-12 発生)/Cloudflare 事後報告(2025-11-18) 事故(事業者の事後報告) | 想定のずれ | 全体への届き方 | 事業者が挙げた対策と、段階配布の有無 CrowdStrike 2024-07-19(検知ルール) | 型の定義は入力 21 個、センサーのコードが渡すのは 20 個。範囲外を読んだ | ルールを段階的に配っていなかった (所見 6) | 入力数の検査、境界検査。 段階配布:挙げた(ルールの段階配布) Google Cloud 2025-06-12(ポリシーのデータ) | 意図しない空のフィールド(blank fields)を含むポリシーのデータ。読むコードに適切なエラー処理が無く、フラグの保護も無かった | ポリシーのデータは数秒で全世界に複製された | フラグで保護する。 段階配布:挙げた(複製を段階的に伝える) Cloudflare 2025-11-18(特徴量ファイル) | ファイルが倍になり、読み手の上限 200 個を超えた | 5 分ごとに作られ、全体へ配られた | 自社で作った設定も、利用者の入力と同じに検査。 段階配布:挙げていない リーダーの視点 3 件を同じ型にまとめるのは本ガイドの整理:コードは配備済みで、引き金はあとから届いたデータ。段階配布を対策に挙げたのは CrowdStrike と Google で、Cloudflare は挙げていない。設定・ルール・ポリシーにも、スキーマ、読み手の検査、段階配布を用意する 事故の型と、止まったときのふるまいの設計は Part 14 で扱う 101
解説

設定、検知ルール、ポリシーも、書き手と読み手がいるデータです。事後報告を 3 件見ます。どれも事業者の自己申告で、3 件を同じ型にまとめるのは本ガイドの整理です。CrowdStrike の 2024 年 7 月 19 日の件では、ルールの型の定義は入力を 21 個としていましたが、センサーのコードが渡すのは 20 個でした。21 番目を見るルールが配られ、配列の範囲外を読みました。Google Cloud の 2025 年 6 月 12 日の件では、意図しない空のフィールドを含むポリシーのデータが書き込まれ、数秒で全世界に複製されました。読む側のコードには適切なエラー処理が無く、フィーチャーフラグでも保護されていませんでした。Cloudflare の 2025 年 11 月 18 日の件では、特徴量のファイルが倍の大きさになり、読む側の上限の 200 個を超えました。段階的な配布を対策に挙げたのは、CrowdStrike と Google です。Cloudflare が挙げた対策は、自社で作った設定ファイルの取り込みの強化や、機能を全体で止めるスイッチの追加などで、段階的な配布は入っていません。Google の報告は、コードは地域ごとに段階的に配ったが、問題の経路はその間に実行されなかった、と書いています。事故の型と止まり方の設計は Part 14 で扱います。

未知の入力の扱いは、寛容さに頼らず仕様に書く
スライド 102 のテキストと解説
未知の入力の扱いは、寛容さに頼らず仕様に書く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 想定外の入力を受け入れることは、どの場面でも最良の慣行とは見なされなくなった 仕様・文書 RFC 9413 Maintaining Robust Protocols(IAB、Informational、2023-06)§2・§2.2・§3・§4.1・§5.1 仕様に書いた範囲で無視する 未知のフィールドの扱いを仕様に書く Avro は無視、Protobuf は保持(バイナリ) 新しい項目が「想定内」になる(§2.2) 仕様に無い逸脱を黙って通す 型の違い、上限超え、必須の欠落 誤りが定着し、周りがそれに合わせる プロトコルの腐食(§4.1) 仕様に無い逸脱は拒否する 規定のない状態を致命的なエラーにする 欠陥に注意が向く(§5.1) 拒否で全体を止めない設計と組にする RFC 9413 の位置づけ IAB の Informational 文書で、標準ではない。対象はインターネットに配備されるプロトコルで、実装を更新できることが前提(§3) 本ガイドの考え(一次資料なし) 「未知のフィールドを無視する」は、仕様に書いてあれば拡張点で、寛容さではない。左の 3 つへの当てはめは、RFC の文言ではなく本ガイドの解釈 102
解説

「送るものは厳密に、受け取るものには寛容に」という頑健性原則は、長く設計の指針でした。2023 年 6 月の RFC 9413 は、想定外の入力を許容するという解釈は、もはやすべての場面で最良の慣行とは見なされない、と述べています。拡張性は、未知の入力の扱いを仕様で決めておくことで得るもので、実装の寛容さに頼るのは良い戦略ではない、とします。寛容に受け続けると、実装の誤りが定着し、ほかの実装もそれに合わせることになります。逆に、規定のない状態を致命的なエラーにすると、欠陥に注意が向きます。この Part の話に当てはめます。Avro が読み手に無いフィールドを無視し、Protocol Buffers が未知のフィールドを保持するのは、仕様に書かれた拡張点です。一方、型の違いや上限超えを黙って通すのは、契約に無い逸脱です。この読み分けは本ガイドの解釈です。RFC 9413 は IAB の Informational 文書で、標準ではありません。対象はインターネットに配備されるプロトコルで、実装を更新できることが前提です。社内のデータ契約への当てはめは類推です。なお、Protocol Buffers が未知のフィールドを保持するのは、バイナリで扱う場合です。

設計レビューで問うこと:契約と変更
スライド 103 のテキストと解説
設計レビューで問うこと:契約と変更 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 変更の提案を見たら、向き、検査の場所、ロック、配り方の順に問う 仕様・文書 Confluent Platform 8.4・Redpanda 26.2・PostgreSQL 18 の各文書(2026-11 確認) 指針・報告 事後報告:CrowdStrike 2024-07-19/Google Cloud 2025-06-12/Cloudflare 2025-11-18 書籍 DDIA 2e 5.3 節 p.185〜186 問い | なぜ問うか | 危ない兆候 この変更は後方互換か、前方互換か。 途中の時間に、どちらがどちらを読むか | 逐次更新と切り戻しは、両方向の互換を要する | 「全部同時に更新するから大丈夫」 レジストリのモードは何か。意図して選んだか。 先に更新する側と合っているか | 既定は製品で違い、非推移は直前の版しか見ない | 読み直しがあるのに、 既定の BACKWARD のまま 互換性の検査は CI で走るか。登録せずに書く書き手を、何が止めるか | レジストリが検査するのは、登録のときだけ | 本番で、スキーマの自動登録が有効 消したフィールドの番号・名前・フラグを、再利用していないか | 新旧が混ざる間は、古い意味もまだ生きている | 「もう誰も使っていないはず」 この DDL はどのロックを取り、表を書き換えるか。 lock_timeout はあるか | 既定では、ロックを無期限に待つ | 移行ツールが作った DDL を、 そのまま本番に流す 設定やルールを段階的に配っているか。 読み手は想定外の値でどうなるか | 事故 3 件に共通するのは、全体への速い配布と読み手の検査の不足(本ガイドの整理) | 「設定の変更なので、配備の手順は不要」 103
解説

1 つ目は互換の向きです。変更が後方互換か前方互換かを言えない提案は、途中の時間を考えていません。2 つ目はレジストリのモードです。既定のままなのか、意図して選んだのかを聞きます。トピックを先頭から読み直す設計なのに、直前の版とだけ比べるモードのままなら、危ない兆候です。3 つ目は検査の場所です。互換性の検査が CI で走るか、登録せずに書く書き手を何が止めるかを聞きます。4 つ目は再利用です。新旧が混ざる間は、古い意味もまだ生きています。5 つ目はデータベースの DDL です。どのロックを取り、表を書き換えるか、lock_timeout を付けているかを聞きます。6 つ目は設定とルールです。段階的に配っているか、読み手が想定外の値を受けたときにどうなるかを聞きます。Part 17 で、9 つのステップの問いをまとめて見直します。

まとめ:契約は、向き・検査の場所・配り方で決める
スライド 104 のテキストと解説
まとめ:契約は、向き・検査の場所・配り方で決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 5 互換の向きを決め、検査を書き手側と CI に置き、データも段階的に配る 仕様・文書 Confluent Platform 8.4・Redpanda 26.2・Apicurio Registry 3.3.x・PostgreSQL 18 の各文書(2026-11 確認) 書籍 DDIA 2e 5 章 p.155〜186/『ハードパーツ』13 章/『大規模データ管理 第2版』8.1.5 節 向き:逐次更新の間は新旧が同時に動く。後方・前方の両方の互換を保つ 形式:Avro は名前と既定値、Protobuf は番号。JSON Schema は仕様に規則が無い レジストリ:既定は、直前の版とだけ比べるか、検査なし。読み直すデータには TRANSITIVE 強制:書き手側と CI に置く。ブローカーの検証は、製品とエディションで範囲が違う DB:互換でない変更は expand/contract。DDL はロックと書き換えを調べてから流す 設定:設定やルールもデータ。読み手の検査と段階配布の両方を用意する リーダーの視点 更新性は「動かしたまま、利用側を止めずに変えられること」。契約は、それを検査できる形にしたもの。次の Part 8 は複製と分割 104
解説

逐次更新の間は新旧が同時に動くので、後方と前方の両方の互換を保ちます。互換の規則は形式で違います。Avro は名前と既定値、Protocol Buffers は番号で対応づけ、JSON Schema は仕様に規則が無いので、レジストリの実装で決まります。レジストリの既定は、Confluent と Redpanda が直前の版とだけ比べる BACKWARD、Apicurio は検査なしです。先頭から読み直すデータには、TRANSITIVE の付くモードを選びます。契約の強制は、書き手側と CI に置きます。データベースの互換でない変更は、expand/contract で 3 段階に分け、DDL はロックと書き換えを調べてから流します。設定やルールもデータなので、読み手の検査と段階配布の両方を用意します。更新性、つまり動かしたまま利用側を止めずに変えられることは、契約を検査できる形にして初めて確かめられます。次の Part 8 では、ステップ 6 の複製と分割を扱います。

PART 8 複製と分割
スライド 105 のテキストと解説
PART 8 複製と分割 設定名は保証を意味しない。どこまで失ってよく、どこまで待てるかを先に決め、フェイルオーバーの取り決めと、後から変えにくい分割のキーと数を設計する このPartで答えられるようになる問い 応答済みの書き込みは、どの設定で何台に置くか 同期の複製にすると、何が止まるようになるか フェイルオーバーで、誰が何を決めるのか 分割のキーと数は、後から何を変えられないか 105
解説

Part 8 はステップ 6、複製と分割です。複製は同じデータを複数のマシンに置くこと、分割はデータを複数のマシンに分けて持つことです。この Part の問いは「どこまで失ってよく、どこまで待てるか」です。前半は複製です。目的、シングルリーダーのしくみ、同期と非同期の代償を見たあと、PostgreSQL 18 の設定を例に、設定の名前と実際の保証がずれることを確かめます。続いて、フェイルオーバーで誰が何を決めるのかを整理し、GitHub と GitLab の事後報告を取り決めの観点で読みます。後半は分割です。キーの決め方、パーティションの数、セカンダリ索引、マルチテナントの分離方式を扱います。分離レベルは Part 9、合意とフェンシングの詳細は Part 10 で扱います。

複製の目的は可用性・読み取りの拡張・近さの 3 つ
スライド 106 のテキストと解説
複製の目的は可用性・読み取りの拡張・近さの 3 つ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 目的ごとに、要る構成と払う代償が違う。まず、どの目的のための複製かを決める 指針・報告 GitLab 事後報告(2017-01-31 発生。複製は災害復旧の手段ではない) 書籍 『データ指向アプリケーションデザイン 第2版』6 章 p.191–192 可用性と永続性 得る:一部が故障しても動き続ける 要る:切り替え(フェイルオーバー)の取り決め 払う:同期にすれば書き込みの待ち、非同期なら損失の可能性 読み取りの拡張 得る:読み取りを処理できるマシンが増える 要る:読み取りの行き先を決める規則 払う:複製先は遅れ、古いデータを読みうる 近さ 得る:利用者に近い場所から応答できる 要る:複数リージョンの構成 払う:リージョン間の遅延と通信費。障害の型が増える 注意 複製はバックアップの代わりにならない。誤って消したデータは、削除そのものが複製先へ伝わる。過去の時点へ戻すにはバックアップが要る(DDIA 2e p.192) 106
解説

複製、つまりレプリケーションは、同じデータのコピーを、ネットワークでつながった複数のマシンに置くことです。『データ指向アプリケーションデザイン 第2版』の 6 章は、理由を 3 つ挙げています。障害が起きても動き続けること、読み取りを処理できるマシンを増やすこと、利用者の近くにデータを置くことです。目的が違えば、要る構成も代償も違います。可用性が目的なら、切り替えの取り決めが要ります。読み取りの拡張が目的なら、古いデータを読むことを受け入れます。近さが目的なら、リージョンをまたぐ遅延と通信費を払います。もう 1 つ大切なのは、複製はバックアップの代わりにならないことです。誤って消したデータは、削除そのものが複製先へ伝わるので、複製からは戻せません。GitLab の 2017 年 1 月の事後報告も、複製は主にフェイルオーバーのためで、災害復旧のためではないと書いています。次のスライドで、最も広く使われているシングルリーダーのしくみを見ます。

シングルリーダー:書き込みは 1 か所、変更を順に配る
スライド 107 のテキストと解説
シングルリーダー:書き込みは 1 か所、変更を順に配る 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 リーダーだけが書き込みを受け、変更のログをフォロワーへ送る。フォロワーは同じ順序で適用する 仕様・文書 PostgreSQL 18 文書 26.2 Log-Shipping Standby Servers(2026-11 確認) 書籍 DDIA 2e 6.1 節 p.192–194(図 6-1 の考え方を本ガイドの図に描き直し) アプリケーション 書き込み リーダー 書き込みを受け、変更をログに記録 フォロワー 1 ログを同じ順序で適用 フォロワー 2 ログを同じ順序で適用 アプリケーション 読み取り 役割 | DDIA 2e の呼び名 | PostgreSQL の呼び名 | ほかの呼び名 書き込みを受ける | リーダー | プライマリ | ソース 変更を受け取る | フォロワー | スタンバイ | リードレプリカ、セカンダリ、ホットスタンバイ 分割していれば、シャードごとにリーダーが 1 つ。Raft など合意に基づく複製もシングルリーダーが土台で、交代を自動にしたもの(Part 10) 107
解説

シングルリーダーレプリケーションのしくみです。コピーを持つノードをレプリカと呼び、そのうち 1 つをリーダーに決めます。書き込みはリーダーだけが受けます。リーダーは変更を手元に書き、変更のログをフォロワーへ送ります。フォロワーは、リーダーが処理したのと同じ順序で適用します。読み取りは、リーダーにもフォロワーにも出せます。呼び名は製品で違い、PostgreSQL の文書はリーダーをプライマリ、フォロワーをスタンバイと呼びます。PostgreSQL、MySQL など多くのリレーショナルデータベースが、この方式を組み込みで持っています。Raft などの合意アルゴリズムを使う複製も、シングルリーダーが土台で、リーダーが故障したときの交代を自動にしたものです。合意は Part 10 で扱います。順序が 1 本に決まることが、この方式の強みです。弱みは、リーダーが止まったときの交代と、フォロワーの遅れです。順に見ていきます。

非同期では、応答済みの書き込みも失われうる
スライド 108 のテキストと解説
非同期では、応答済みの書き込みも失われうる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 同期は「失わない」を、非同期は「止まらない」を買う。どちらにも代償がある 仕様・文書 PostgreSQL 18 文書 26.2.8 Synchronous Replication(2026-11 確認) 書籍 DDIA 2e 6.1.1 節 p.194–195 方式 | リーダーが成功を返す時点 | 得るもの | 失うもの 同期 | フォロワーが受け取りを確認した後 | リーダーが壊れても、フォロワーに最新のコピーが残る | 同期先が応答しないと、書き込みが止まって待つ 1 台だけ同期(準同期) | 同期の 1 台が確認した後。残りは待たない | 少なくとも 2 台に最新のコピーがある | 同期の 1 台が止まると、別の 1 台への切り替えが要る 過半数が同期 | 過半数(例:リーダーを含め 5 台中 3 台)が確認した後 | 少数が止まっても書ける。合意と組み合わせやすい | 過半数に届かないと書けない 完全に非同期 | 手元に書いた後。フォロワーを待たない | 速い。フォロワーが全部遅れていても書ける | 応答済みの書き込みも失われうる 注意 リーダーが復旧できないと、まだ届いていない書き込みは失われる。成功を返したあとの書き込みでも、残るとは限らない。遅れは通常 1 秒以内だが保証はなく、数分以上になることもある(DDIA 2e p.195) 108
解説

同期と非同期の違いは、リーダーがいつクライアントに成功を返すかです。同期では、フォロワーから受け取りの確認が来てから返します。リーダーが急に壊れても、同じデータがフォロワーにあると言えます。その代わり、同期の相手が応答を返さない間、リーダーは書き込みを受けられず、相手が戻るのを待ちます。全部のフォロワーを同期にすると、1 台が止まるだけで全体が止まります。そこで現実には、同期にするのは 1 台だけ、という構成が多く、準同期とも呼ばれます。過半数を同期にする方式はクォーラムの一例で、合意を使う製品でよく使われます。本書の例は、リーダーを含めて 5 台中 3 台です。クォーラムの定義は、リーダーレスのスライドで示します。完全に非同期の構成では、リーダーが復旧できなくなると、フォロワーへ届く前だった書き込みは残りません。本書は、成功の応答を返したあとの書き込みでも失われうるので、応答は永続性の裏づけにならない、と説明しています。遅れはふつう 1 秒以内ですが、上限の保証はなく、数分を超えることもあります。それでも非同期は広く使われています。次のスライドで、PostgreSQL 18 の設定がどちらに当たるかを見ます。

synchronous_commit = on でも既定は非同期
スライド 109 のテキストと解説
synchronous_commit = on でも既定は非同期 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 PostgreSQL 18 は synchronous_standby_names が空(既定)なら、手元のフラッシュしか待たない 仕様・文書 PostgreSQL 18 文書 19.5 synchronous_commit(表 19.1)・19.6.2・26.2.8(2026-11 確認) synchronous_commit | コミットが待つもの(同期スタンバイがあるとき) | 手元で残る | スタンバイの DB が落ちても残る | スタンバイの OS が落ちても残る | スタンバイで読める remote_apply | スタンバイが受け取り、ディスクに書き、適用した | ○ | ○ | ○ | ○ on(既定) | スタンバイが受け取り、ディスクにフラッシュした | ○ | ○ | ○ | — remote_write | スタンバイが受け取り、OS に書いた | ○ | ○ | — | — local | 手元のフラッシュだけ(複製を待たない) | ○ | — | — | — off | 何も待たない | — | — | — | — # 既定:複製は非同期 synchronous_commit = on synchronous_standby_names = '' # 同期:s1 か s2 のどちらか 1 台の確認を待つ synchronous_standby_names = 'ANY 1 (s1, s2)' 注意 「on です」は答えにならない。2 つの設定を組で確かめる。off でも DB は壊れないが、直近のコミットを失いうる(最大で wal_writer_delay の 3 倍) 109
解説

PostgreSQL 18 の 2 つの設定です。synchronous_commit は、成功を返す前に、WAL の処理をどこまで待つかを決めます。既定は on です。もう 1 つの synchronous_standby_names は、同期の対象にするスタンバイの名前の一覧で、既定は空です。公式文書は、この一覧が空のとき、意味のある値は on と off だけで、remote_apply、remote_write、local は on と同じ手元の同期になる、と書いています。つまり on は「同期の複製が有効」という意味ではありません。ストリーミングレプリケーションは既定で非同期だ、とも明記しています。表は、文書の表 19.1 をもとにした各値の違いです。remote_apply だけが、スタンバイで読めることまで待ちます。off は何も待たず、直近のコミットを失うことがありますが、データベースが不整合になることはない、と文書は書いています。レビューでは 2 つの設定を組で確かめます。

損失ゼロの設定は、別の止まり方を持ち込む
スライド 110 のテキストと解説
損失ゼロの設定は、別の止まり方を持ち込む 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 同期スタンバイが足りなくなると、コミットは完了しないまま待つ。候補を複数にして設計する 仕様・文書 PostgreSQL 18 文書 26.2.8.3・26.2.8.4(2026-11 確認) 書籍 DDIA 2e 6.1.1 節 p.195 構成(PostgreSQL 18) | 応答済みのコミットがある場所 | スタンバイが 1 台落ちると 非同期(既定) | プライマリだけのことがある | 書き込みは続く。昇格すると、届いていないコミットを失う 同期・1 台だけ名指し('s1') | プライマリと s1 | s1 が落ちると、コミットが完了しないまま待つ 同期・'ANY 1 (s1, s2)' | プライマリと、s1 か s2 の少なくとも 1 台 | 残りの 1 台の確認で続く。2 台とも落ちると待つ 注意 待つ間もロックは持ったまま。待っている最中にプライマリが再起動すると、そのトランザクションはコミット済みになる。「応答が無い=書かれていない」とは言えない ケーススタディ 題材 D で実測する:同期スタンバイを止めたとき、コミットが返らない時間。非同期で昇格したとき、失われた応答済みコミットの件数(結果はケーススタディ) 110
解説

同期の複製にすれば、応答済みのコミットは 2 台にあります。その代わり、別の止まり方が入ります。PostgreSQL 18 の文書は、同期スタンバイのどれか 1 台が落ちると、コミットが完了しないことがある、と書いています。対策として文書が挙げるのは、同期スタンバイの候補を複数名指ししておくことです。どうしても足りなければ、待つ数を減らすか同期を無効にして、設定を再読み込みします。もう 2 つ、見落としやすい点があります。1 つは、待っている間、資源は使いませんが、トランザクションのロックは持ったままになることです。応答時間と競合が増えます。待ち時間の下限は、プライマリとスタンバイの往復時間です。読み取り専用のトランザクションとロールバックは待ちません。もう 1 つは、待っている最中にプライマリが再起動すると、待っていたトランザクションはコミット済みになることです。応答が返らなかったことは、書かれなかったことを意味しません。この止まり方は、ケーススタディの題材 D で実測します。

フェイルオーバーは検知・昇格・遮断を誰が決めるか
スライド 111 のテキストと解説
フェイルオーバーは検知・昇格・遮断を誰が決めるか 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 PostgreSQL 本体は、障害を検知して知らせる仕組みを持たない。外部の道具と手順で取り決める 仕様・文書 PostgreSQL 18 文書 26.3 Failover(2026-11 確認) 書籍 DDIA 2e 6.1.3.2 節 p.199–201 1 検知 確実な方法は無く、タイムアウトで判定する 2 昇格 最新のデータを持つフォロワーを選ぶ 3 切り替えと遮断 書き込み先を変え、旧リーダーを止める 段階 | 取り決めること | 取り決めが無いと 検知 | 誰が、何秒の無応答で障害とみなすか | 短いと不要な切り替え、長いと復旧の遅れ 昇格 | どのフォロワーを、どの範囲で昇格させるか(リージョンをまたぐか) | 遅れたフォロワーを選び、応答済みの書き込みを失う 遮断(フェンシング) | 旧リーダーが書き込みを受けないことを、何が保証するか | スプリットブレイン:両方がリーダーだと思い、データを失う リーダーの視点 PostgreSQL 18 の文書は、定期的な切り替えをフェイルオーバーの試験にし、手順を文書にすることを勧める。自動に対応した製品でも、手動を選ぶ運用チームがある(DDIA 2e p.200) 111
解説

リーダーが止まったとき、フォロワーの 1 つを新しいリーダーにすることをフェイルオーバーと呼びます。本書は 3 つの段階に分けています。障害の検知、新しいリーダーの選出、新しいリーダーを使うための再設定です。検知に確実な方法はなく、多くはタイムアウトで判定します。本書の例は 30 秒です。短すぎると、一時的な負荷や遅延で不要な切り替えが起き、長すぎると復旧が遅れます。選出では、最新のデータを持つフォロワーを選ぶことが最も重要です。再設定では、旧リーダーが戻ってきたときに、自分がまだリーダーだと思い込む場合があります。2 つのノードが両方リーダーだと思う状態がスプリットブレインで、旧リーダーを止めて防ぐことがフェンシングです。フェンシングの詳細は Part 10 で扱います。PostgreSQL 18 の文書は、プライマリの障害を見つけてスタンバイに知らせるソフトウェアは提供しないと明記しています。昇格の命令はありますが、いつ、誰が実行するかは利用者が決めます。

フェイルオーバーの事故は、取り決めの欠陥で起きた
スライド 112 のテキストと解説
フェイルオーバーの事故は、取り決めの欠陥で起きた 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 GitHub の報告では、製品は設定どおりに動いた。欠けていたのは昇格の範囲と復元の検証の取り決め 指針・報告 GitHub 事後報告(2018-10-21 発生、2018-10-30 公開)/GitLab 事後報告(2017-01-31 発生、2017-02-10 公開) GitHub 2018-10-21(MySQL) 保守作業で、拠点間の接続が 43 秒切れた Orchestrator が、西海岸の DB へ書き込み先を切り替えた 東西の両方に、相手に無い書き込みが残った。西へ複製されず東に残った分は、最も忙しいクラスタの 1 つで 954 件 劣化は 24 時間 11 分。対策の 1 つは、リージョンをまたぐ昇格を防ぐ設定 GitLab.com 2017-01-31(PostgreSQL) 負荷でセカンダリの複製が遅れて止まった。WAL アーカイブは使っていなかった 作り直しの途中、セカンダリのつもりでプライマリのデータを削除(約 300 GB) 日次の pg_dump は失敗し続け、通知メールも届いていなかった 約 6 時間前の手動スナップショットから復元。コピーに約 18 時間 本ガイドの整理 問うのは「製品が何をするか」より「何を取り決めたか」:昇格の範囲、障害とみなす条件、旧リーダーに残った書き込みの扱い、復元の検証。事実は各社の事後報告(自己申告)。取り決めへの当てはめは本ガイドの整理 112
解説

事後報告を 2 件、取り決めの観点で読みます。数字は事業者の自己申告です。1 件目は GitHub の 2018 年 10 月 21 日です。光学機器の交換で、東海岸の拠点間の接続が 43 秒切れました。Orchestrator が、西海岸のデータセンターへ書き込み先を切り替えました。東海岸には複製されていない書き込みが残り、西海岸にも約 40 分ぶんの新しい書き込みが入りました。西へ複製されなかった書き込みは比較的少なく、最も忙しいクラスタの 1 つで 954 件だった、と報告は書いています。西海岸に入った件数は書かれていません。Orchestrator は設定どおりに動いた、というのも GitHub の報告の言葉です。劣化は 24 時間 11 分続き、最終的に利用者のデータは失われなかったとしています。2 件目は GitLab の 2017 年 1 月 31 日です。作り直しの途中、セカンダリのつもりでプライマリのデータディレクトリを消しました。日次の pg_dump は、9.6 のデータベースに 9.2 のバイナリを使っていて失敗し続けていました。失われた変更は、プロジェクト約 5,000、コメント約 5,000、新規ユーザー約 700 と見積もられています。

複製の遅れは、読み取りに 3 つの異常を起こす
スライド 113 のテキストと解説
複製の遅れは、読み取りに 3 つの異常を起こす 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 遅れに上限は無い。異常ごとに、どの保証で防ぐかを決める 仕様・文書 PostgreSQL 18 文書 19.5 synchronous_commit(2026-11 確認) 書籍 DDIA 2e 6.1.5〜6.1.6 節 p.203–210 異常 | 利用者に見えること | 防ぐ保証 | 対策の例 自分の書き込みが読めない | 更新した直後に再表示すると、更新が消えたように見える | リードアフターライト整合性 | 本人が変えうるデータはリーダーから読む。更新の直後はリーダーから読む 時間が戻る | 再読み込みすると、さっき見えたものが消える | モノトニックリード | 同じ利用者は、いつも同じレプリカから読む 順序が入れ替わる | 質問より先に、その答えが見える | 一貫した順序での読み取り | 因果関係のある書き込みを、同じシャードに置く 製品の機能の例 PostgreSQL 18 の remote_apply は、同期スタンバイでの適用までコミットが待つ。そのスタンバイでは直後に読めるが、コミットの遅れはほかの値よりずっと大きい(文書の記述) ケーススタディ 題材 D で実測する:書き込みの直後にスタンバイを読み、古い値が返った割合(結果はケーススタディ) 113
解説

非同期のフォロワーから読むと、古いデータが返ることがあります。書き込みを止めて待てばいずれ追いつくので、結果整合性と呼ばれます。ただし「いずれ」に上限はありません。通常は 1 秒未満でも、限界に近い負荷や障害のときには数秒から数分になります。本書は、遅れから起きる異常を 3 つ挙げ、それぞれを防ぐ保証に名前を付けています。1 つ目は、自分の書き込みが読めないことです。防ぐ保証がリードアフターライト整合性で、本人の更新だけを保証します。2 つ目は、時間が戻って見えることです。遅れの違うレプリカを続けて読むと起きます。防ぐ保証がモノトニックリードです。3 つ目は、順序が入れ替わって見えることです。シャードごとに遅れが違うと、質問より先に答えが見えます。防ぐ保証が、一貫した順序での読み取りです。本書は、遅れが数分や数時間になったときのふるまいを先に考えるよう勧めています。分離レベルの異常は別の話で、Part 9 で扱います。

マルチリーダーとリーダーレスはコンフリクトを引き受ける
スライド 114 のテキストと解説
マルチリーダーとリーダーレスはコンフリクトを引き受ける 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 書き込める場所を増やすと、並行した書き込みの食い違い(コンフリクト)を自分で解決することになる 書籍 DDIA 2e 6.2.1 節 p.210–212/6.2.3.2 節 p.218–219/6.3.1.2〜6.3.1.3 節 p.226–229 方式 | 得るもの | 引き受けるもの | 向く場面 シングルリーダー | コンフリクトが無い。制約を強制できる | リーダーに届かないと書けない。フェイルオーバーの取り決め | 残高や一意性など、制約のあるデータ マルチリーダー | 各リージョンで書ける。リージョン間の通信が切れても書ける | コンフリクトの解決。最終書き込み優先(LWW)は 正常に処理された書き込みを暗黙のうちに捨てる | 複数リージョンの運用。可能なら避ける領域とみなされることが多い リーダーレス | フェイルオーバーが要らない。遅いノードを待たずに済む | 並行した書き込みの検出と解決。クォーラムでも古い値を読みうる | 結果整合性を許容できるデータ 注意 クォーラム=読み書きを有効とみなすのに要る、最小の確認の数。n 個のレプリカのうち、書き込みは w 個、読み取りは r 個(DDIA 2e p.226)。w + r > n でも保証ではない。読み書きが並行したとき、書き込みが一部のレプリカだけで成功したとき、時計で新旧を決めるときなどに、古い値が返りうる(p.228–229) 114
解説

シングルリーダーの弱みは、リーダーに届かないと書けないことです。マルチリーダーは、複数のノードが書き込みを受けます。リーダーレスは、リーダーを置かず、どのレプリカも書き込みを受けます。どちらも、互いを知らずに行われた並行の書き込みが食い違う、コンフリクトを引き受けます。解決の方法の 1 つが最終書き込み優先です。本書は、並行した書き込みのどちらが後かは未定義で、正常に処理された書き込みが暗黙のうちに破棄される、と書いています。収束はしますが、データを失います。マルチリーダーでは、残高がマイナスにならない、ユーザー名が一意である、といった制約も守れません。制約を強制したいならシングルリーダーが適切です。リーダーレスはクォーラムを使います。クォーラムは、読み取りや書き込みを有効とみなすのに要る、最小の確認の数です。n 個のレプリカのうち、書き込みに w 個、読み取りに r 個の確認を求めます。w + r > n なら最新が読めると期待できますが、本書は古い値が返る場合を 6 つ挙げ、絶対的な保証と受け取らないよう注意しています。

クラウド製品も、構成ごとに失う量と止まり方が違う
スライド 115 のテキストと解説
クラウド製品も、構成ごとに失う量と止まり方が違う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 公式文書の記述(2026-11 確認)。未検証。数字は公称。「未確認」は読んだページに記述なし 仕様・文書 Aurora ユーザーガイド/DynamoDB 開発者ガイド/Spanner 文書 Replication・Instance configurations(各 2026-11 確認) 製品・構成 | 応答の前にどこまで複製するか | フェイルオーバー(公称) | 注意点(文書の記述) Aurora(1 リージョン) | 複数 AZ の 6 つのストレージノードへ同期 | レプリカがあれば通常 60 秒未満。無ければ通常 10 分未満 | レプリカの遅れは通常 100 ミリ秒よりずっと小さい Aurora Global Database | リージョン間は非同期 | RPO は通常は秒単位、RTO は分単位。計画的な切り替えは RPO 0 | 書き込みの遮断は最善努力。スプリットブレインがありうる DynamoDB(1 リージョン) | 未確認 | 未確認 | 読み取りの既定は結果整合。GSI は強整合で読めない DynamoDB global tables MREC(既定) | リージョン間は非同期(通常 1 秒以内) | RPO は複製の遅れに等しい(通常は数秒) | コンフリクトは最終書き込み優先 DynamoDB global tables MRSC | 少なくとももう 1 つのリージョンへ同期 | RPO 0 | ちょうど 3 リージョン。TTL・LSI・トランザクション操作は不可 Spanner(リージョナル) | Paxos。3 つの読み書きレプリカのうち 2 つ | 未確認 | 可用性の SLA は 99.99% 以上 Spanner(デュアルリージョン) | Paxos。クォーラムがリージョンをまたぐ | RPO 0。手動は通常 1 分以内、自動は最長 45 分 | 障害時は、手動で切り替えるかを利用者が判断する 115
解説

すべて公式文書の記述で、検証していません。数字は公称です。確かめられなかったセルは未確認と書きました。Aurora は、ストレージ層が複数のアベイラビリティゾーンの 6 つのストレージノードへ同期で複製します。リージョンをまたぐ Aurora Global Database は非同期で、障害時のフェイルオーバーでは RPO が秒単位のゼロでない値になります。文書は、旧プライマリへの書き込みの遮断が最善努力で、スプリットブレインがありうると明記しています。既定の MREC は非同期で、コンフリクトは最終書き込み優先です。MRSC は RPO ゼロをうたいますが、ちょうど 3 リージョンが要り、TTL、ローカルセカンダリ索引、トランザクションの操作が使えません。Spanner は Paxos による同期の複製です(Paxos の語は Replication のページ、数字は Instance configurations のページにあります)。デュアルリージョンは RPO ゼロと書きますが、自動のフェイルオーバーは最長 45 分かかりうるとしています。

分割は、1 台で足りなくなってから選ぶ重い手段
スライド 116 のテキストと解説
分割は、1 台で足りなくなってから選ぶ重い手段 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 読み取りが足りないだけなら複製で足りる。分割するのは、データ量か書き込みが 1 台を超えるとき 書籍 DDIA 2e 7 章 導入・7.1 節 p.245–248 得るもの:台数で伸ばせる シャーディング=データを複数のノードに分けて持つこと。分けた 1 つがシャード データ量と書き込みのスループットを、マシンの追加で伸ばせる シャードごとに、データとクエリを並列に処理できる 払うもの:複雑さ パーティションキーを選ぶ。キーが分からない検索は全シャードを探す シャード間の書き込みは分散トランザクションが要り、遅い(Part 9・11) 方式を後から変えるのは難しい。結合とセカンダリ索引も難しくなる 状況 | まず選ぶもの 読み取りのスループットが足りない | 複製して、読み取りをフォロワーへ散らす(遅れの異常は前述) データ量か書き込みのスループットが 1 台で足りない | 分割(シャーディング) 1 台で処理できている | 分割しない。シングルシャードのままにする 116
解説

ここから後半、分割です。シャーディングは、データを複数のノードに分けて持つことです。分けた 1 つをシャードと呼びます。呼び名は製品ごとに違います。たとえば CockroachDB はレンジ、Kafka はパーティションと呼びます。本書では、ネットワーク分断とは別の言葉です。どのレコードも、属するシャードは 1 つだけで、シャードごとに複製を持つのが普通の組み合わせです。分割の方式と複製の方式は、ほぼ独立に選べます。本書は、シャーディングを重量級の解決策と位置づけています。分割する主な理由は、データ量と書き込みのスループットが 1 台で足りないことです。1 台で処理できる範囲なら、分割を避けてシングルシャードのままにするほうがよい、と勧めています。理由は複雑さです。パーティションキーを選ぶ必要があり、キーが分からない検索は全シャードを探します。方式の変更も困難です。複数のシャードにまたがる書き込みで一貫性を保つには分散トランザクションが要り、遅くなります。これは Part 9 と Part 11 で扱います。

キー範囲は走査に、ハッシュは分散に強い
スライド 117 のテキストと解説
キー範囲は走査に、ハッシュは分散に強い 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 どちらを選んでも、1 つのキーに集中する負荷(ホットキー)は、分割しただけでは散らない 書籍 DDIA 2e 7.3 節 p.250–258(キー範囲 p.250–252、ハッシュ p.252–257、ホットスポット p.258) 方式 | しくみ | 得るもの | 失うもの キー範囲 | 連続するキー範囲をシャードに割り当てる | 範囲スキャンが速い。分割と併合で境界を動かせる | 時刻など、近いキーへの書き込みが 1 シャードに集中する ハッシュ ÷ ノード数の余り | ハッシュをノード数で割った余りで決める | 計算が簡単 | ノード数が変わると、ほとんどのキーが移動する ハッシュ+固定数のシャード | ノード数よりずっと多いシャードを最初に作る | 書き込みが散る。増減はシャードごと移す | 数は後から変えにくい。誤ると高くつくリシャーディング ハッシュ範囲 | シャードがハッシュ値の範囲を持つ | 書き込みが散る。必要に応じて分割できる | パーティションキーの範囲クエリは非効率 注意 ホットキーの対策:専用のシャードに置く。または、キーに乱数を付けて書き込みを分ける(読み取りは、分けたキーをすべて読んで結合する)。ハッシュが均一にするのはキーの分布で、負荷ではない(DDIA 2e p.258) 117
解説

レコードをどのシャードに入れるかの決め方です。キー範囲による方式は、連続したキーの範囲をシャードに割り当てます。範囲スキャンが速くなります。欠点は、近いキーへの書き込みが多いと、1 つのシャードに集中することです。ハッシュによる方式は、キーをハッシュしてからシャードに対応づけます。書き込みは散りますが、範囲では読めません。ハッシュをノード数で割った余りで決める方式は、ノード数が変わるとほとんどのキーが移動するので、再配置が非常に非効率です。そこで、ノード数よりずっと多い固定数のシャードを最初に作る方式や、シャードがハッシュ値の範囲を持つ方式が使われます。固定数の方式は、見積もりを誤ると高くつくリシャーディングが要ります。最後にホットキーです。ハッシュが均一にするのはキーの分布で、負荷ではありません。著名人の投稿のように 1 つのキーに負荷が集まると、専用のシャードに置く、キーに乱数を付けて書き込みを分ける、といった対策が要ります。

Kafka のパーティションは増やせるが、減らせない
スライド 118 のテキストと解説
Kafka のパーティションは増やせるが、減らせない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 増やすとキーの行き先が変わり、既存のデータは動かない。キーごとの順序に頼る設計に効く 仕様・文書 Kafka 4.4 文書 Basic Kafka Operations/Redpanda 文書 rpk topic add-partitions(2026-11 確認) 書籍 DDIA 2e 7.3.2.2 節 p.253–255(考え方) パーティション数 3 キー A のハッシュ ÷ 3 の余り → パーティション 1 数を 4 に増やす パーティション数 4 同じキー A の新しいメッセージ → 別のパーティションへ行きうる 製品 | 増やす | 減らす | 既存のデータ Apache Kafka 4.4 | できる | できない(文書が明記) | 自動では再配置しない。同じキーが別のパーティションへ行き、順序の保証に影響しうる Redpanda | できる(rpk topic add-partitions) | 未確認(読んだページに記述なし) | 新しく足したパーティションへ再配置されない リーダーの視点 キーごとの順序に頼るなら、パーティションの数は最初の決定が残る。数の根拠(見込みのスループット、消費者の数)を設計書に書く ケーススタディ 欠落を数える題材は、Redpanda を本番相当の設定で測る。開発モードは write caching が既定で有効で、fsync も省く(文書の記述) 118
解説

Apache Kafka 4.4 の文書は、トピックのパーティション数を減らすことは現在サポートしていない、と書いています。増やすことはできます。ただし、キーのハッシュをパーティション数で割って行き先を決めている場合、数を増やすと対応が変わります。同じキーのメッセージが、増やした後は別のパーティションへ行くことがあり、既存のキーについて順序の保証に影響しうる、と文書は注意しています。Kafka は、既存のデータを自動では再配置しません。Kafka 互換の Redpanda にも、パーティションを増やすコマンドがあります。文書は、既存のトピックのデータは新しく足したパーティションへ再配置されない、と書いています。減らす操作については、読んだページに記述を確認できなかったので、未確認としました。キーごとの順序に頼る設計、たとえば同じ注文のイベントを順に処理する設計では、最初に決めた数が制約になります。

セカンダリ索引は、ローカルかグローバルかを選ぶ
スライド 119 のテキストと解説
セカンダリ索引は、ローカルかグローバルかを選ぶ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 ローカルは書き込みが軽く、検索が全シャードに広がる。グローバルは検索が狭く、書き込みが広がる 仕様・文書 DynamoDB 開発者ガイド Read consistency(2026-11 確認。未検証) 書籍 DDIA 2e 7.5 節 p.262–265 種類 | 置き方 | 書き込み | キーを含まない検索 | 例(文書の記述。未検証) ローカル | 各シャードが、自分のレコードだけの索引を持つ | 1 つのシャードで済む | 全シャードに問い合わせて結合。遅いシャードに引きずられやすい | DynamoDB の LSI(強整合で読める) グローバル | 全シャードを覆う索引を作り、索引の値で別に分割する | 索引の複数のシャードに及ぶ。同期なら分散トランザクション、非同期なら索引が古い | 単一の条件なら、索引の 1 つのシャードを読めば済む | DynamoDB の GSI(常に結果整合) 非同期のグローバル索引を読んだ結果で書き込みを決めると、古い値にもとづく判断になりうる 「キーを含まない検索は、どの索引で、どの整合性で答えるか」を、主要な検索ごとに確かめる 119
解説

色が赤い車をすべて探す、のようにキー以外の値で探すには、セカンダリ索引が要ります。置き方は 2 つです。ローカルセカンダリ索引は、各シャードが自分のレコードだけの索引を持ちます。書き込みは 1 つのシャードで済みます。代わりに、パーティションキーが分からない検索は、すべてのシャードに問い合わせて結果を結合します。並列に問い合わせても、いちばん遅いシャードに引きずられやすく、シャードを足しても検索のスループットは上がりません。グローバルセカンダリ索引は、全シャードを覆う索引を作り、索引そのものを索引の値で分割します。単一の条件の検索は、索引の 1 つのシャードで済みます。代わりに、1 件の書き込みが索引の複数のシャードに及びます。本書は、DynamoDB のグローバル索引は非同期に反映されるので古いことがある、と書いています。DynamoDB の文書でも、強整合の読み取りはテーブルとローカルセカンダリ索引だけです。

テナントの分離は、費用と分離の強さの交換
スライド 120 のテキストと解説
テナントの分離は、費用と分離の強さの交換 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 共有からセルへ進むほど、分離は強く、費用と運用は増える。サービスごとに混ぜてよい 指針・報告 AWS SaaS Lens/AWS セルベースの指針/Azure マルチテナントのデータ設計(2026-11 確認) 書籍 DDIA 2e 7.2 節 p.248–249 方式 | しくみ | 得るもの | 失うもの | 見直しの合図 共有(プール) | 同じ表に全テナント。テナント ID の列で分ける | 最も安い。運用の対象が 1 つ | ノイジーネイバー。1 テナントだけの復元が難しい。漏えいを防ぐのはアプリケーション側 | 特定のテナントが資源の上限に当たる スキーマ分離 | 同じ DB の中で、テナントごとにスキーマ | 論理的な区切り。テナント単位で移しやすい | スキーマ変更の運用が、テナント数に比例して重くなる。Azure の指針は、1 つの DB にテナントごとの表を作る形を、避けるべき形に挙げる | スキーマ変更の所要時間が伸び続ける DB 分離(サイロ) | テナントごとに専用の DB | 強い分離。テナントごとのバックアップと復元 | 費用が高い。台数ぶんの運用と自動化が要る | 自動化なしでは追えない台数 セル | テナント群ごとに、サービスと DB の一式を独立して持つ | 障害と配布の失敗を、1 つのセルに閉じ込める | セルルーターが新しい共通の依存。セルをまたぐ処理が難しい | 1 回の配布の失敗が全テナントに及ぶことを許せない 「スキーマ分離」の行と「見直しの合図」の列は本ガイドの整理(一次資料なし)。Azure の指針は、テナントごとの表の代わりに、テナント ID の列を持つ共有の表か、テナントごとの DB を勧める。引いた指針はいずれも任意で、規範ではない 120
解説

テナントは、ほかと独立したデータのまとまりを持つ利用者の単位で、SaaS なら契約した企業です。本書は、分割をテナントの分離に使う利点を 7 つ挙げています。資源の分離、権限の分離、セルベースアーキテクチャ、テナントごとのバックアップと復元、規制への対応、所在地の要件への対応、段階的なスキーマ変更です。課題も 3 つ挙げています。1 台に収まらない大きなテナント、小さなテナントが多いときの費用と成長時の移動、テナントをまたぐ機能の難しさです。AWS の SaaS Lens は、専用の資源を与える型をサイロ、共有する型をプール、混ぜる型をブリッジと呼びます。セルベースは、ワークロード一式の独立した複製をセルとし、パーティションキーで要求を振り分けます。障害を 1 つのセルに閉じ込める代わりに、セルルーターという新しい共通の層を持ちます。Azure の指針は、共有データベースではノイジーネイバーと、1 テナントだけの復元の難しさに注意するよう書いています。同じ指針は、1 つのデータベースにテナントごとの表を作る形を、多数のテナントを支えられないとして、避けるべきアンチパターンに挙げています。指針の言葉は「表」ですが、スキーマ分離はこの形に当たるので、表に指針の評価を添えました。これらの指針はすべて任意で、規範ではありません。

設計レビューで問うこと:複製と分割
スライド 121 のテキストと解説
設計レビューで問うこと:複製と分割 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 仕様・文書 PostgreSQL 18 文書 19.5・26.2.8・26.3/Apache Kafka 4.4 文書(各 2026-11 確認) 指針・報告 GitHub 事後報告(2018-10-21 発生)/GitLab 事後報告(2017-01-31 発生) 書籍 DDIA 2e 6 章 p.195・200–201・209/7 章 p.247・258 問い | なぜ問うか | 危ない兆候 応答済みの書き込みは、何台に置いてから応答するか | 非同期が既定の製品では、昇格で応答済みの書き込みを失いうる | 「synchronous_commit は on です」だけ 同期先が足りなくなったら、書き込みはどうなるか | PostgreSQL は、コミットが完了しないまま待つ | 同期スタンバイを 1 台だけ名指ししている 誰が障害を検知し、昇格を決め、旧リーダーを止めるか | PostgreSQL 本体は検知を持たない。遮断が無いとスプリットブレイン | 障害とみなす条件としきい値を、誰も言えない リージョンをまたぐ昇格を、自動で許すか | 非同期では、両側に相手に無い書き込みが残りうる (GitHub 2018-10) | 昇格してよい範囲に制限が無い 書き込み直後の読み取りは、どこへ送るか。遅れが数分になったら | 自分の書き込みが読めない異常は、利用者に直接見える | 遅れを測っていない。しきい値と警報が無い 複製とは別にバックアップを持ち、復元を試したか | 削除は複製先へ伝わる(GitLab 2017-01) | 「レプリカがあるので不要」。復元の所要時間を知らない 分割のキーは何か。最も熱いキーの負荷と、数を変えたときの影響は | キーと数は後から変えにくい。ホットキーは分割しても散らない | キーが時刻や連番。数の根拠が無い 121
解説

この Part の問いを、設計レビューで使う形にまとめました。1 つ目は、応答済みの書き込みを何台に置いてから応答するかです。設定の名前ではなく、保証で答えてもらいます。2 つ目は、同期先が足りなくなったときの書き込みのふるまいです。損失ゼロの設定は、止まり方とセットで確かめます。3 つ目は、フェイルオーバーの 3 つの段階を、誰が、何を根拠に決めるかです。4 つ目は、リージョンをまたぐ昇格を自動で許すかです。GitHub の事後報告は、対策の 1 つに、リージョンの境界をまたぐ昇格を防ぐ設定を挙げました。5 つ目は、書き込み直後の読み取りの行き先と、遅れが伸びたときのふるまいです。6 つ目は、複製とは別のバックアップと、復元の検証です。7 つ目は、分割のキーと数です。危ない兆候の列は、レビューで実際に聞く答えの形で書きました。兆候があれば、その場で設定値と手順書を見せてもらいます。ガイド全体の問いの一覧は Part 17 にまとめます。

まとめ:失う量と止まり方を、設定と取り決めで決める
スライド 122 のテキストと解説
まとめ:失う量と止まり方を、設定と取り決めで決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 6 「どこまで失ってよく、どこまで待てるか」を先に決め、設定の名前ではなく保証で確かめる 仕様・文書 PostgreSQL 18 文書 19.5・26.2.8・26.3/Apache Kafka 4.4 文書(各 2026-11 確認) 書籍 DDIA 2e 6.4 節 p.237–239/7.6 節 p.265–267 設定名は保証を意味しない PostgreSQL 18 は既定で非同期。synchronous_commit と synchronous_standby_names を組で確かめる 損失ゼロは別の止まり方を持ち込む 同期スタンバイが足りないと、コミットが待つ。候補を複数にして設計する フェイルオーバーは取り決め 検知・昇格・遮断を誰が決めるか。昇格の範囲と、復元の検証まで決める 分割のキーと数は後から変えにくい Kafka のパーティションは減らせない。ホットキーは分割しても散らない 次へ 複製の上で起きる並行の異常と分離レベルは Part 9、合意とフェンシングは Part 10、サービスをまたぐ整合性は Part 11、共通基盤の障害の型は Part 14 122
解説

Part 8 のまとめです。1 つ目、設定名は保証を意味しません。PostgreSQL 18 のストリーミングレプリケーションは既定で非同期で、synchronous_commit が on でも、スタンバイの名前が空なら手元のフラッシュしか待ちません。2 つ目、損失ゼロにすると別の止まり方をします。同期スタンバイが足りないとコミットは待ち続けるので、候補を複数にします。3 つ目、フェイルオーバーは取り決めです。検知、昇格、遮断を誰が決めるか、昇格の範囲はどこまでか、復元を試したか。GitHub と GitLab の事後報告は、製品ではなく取り決めの側に欠けていたものを示しています。4 つ目、分割は後から変えにくい決定です。キーと数を最初に決め、ホットキーは分割しても散らないことを前提にします。実測は題材 D で行い、結果はケーススタディにまとめます。次の Part 9 は、複製の上で並行して動くトランザクションの異常を、どの水準で防ぐかを扱います。

PART 9 正しさの水準を決める
スライド 123 のテキストと解説
PART 9 正しさの水準を決める 分離レベルは名前ではなく「どの異常を防ぐか」で選ぶ。先にトランザクションの範囲を確かめ、必要な箇所だけ強くして、再試行を設計する このPartで答えられるようになる問い トランザクションは何を肩代わりし、何を肩代わりしないか 並行して起きる異常には、どんな型があるか 同じ名前の分離レベルは、製品ごとに何が違うか どの異常を、どの手段で、いくら払って防ぐか 123
解説

Part 9 は、ステップ 7「正しさの水準を決める」です。Part 8 では、データを何台に置き、どこまで失ってよいかを決めました。ここでは、1 つのデータベースの中で、並行して走る処理が互いに干渉したときに、どこまでを異常として防ぐかを決めます。先に結論を言うと、分離レベルは名前で選べません。同じ「Repeatable Read」が、製品によって別のものを指すからです。そこで、この Part では、異常を 4 つの型に分けて図で示し、製品ごとに「どの異常を防ぐか」で比べます。そのうえで、分離レベルより先にトランザクションの範囲を確かめること、強い水準は必要な箇所だけに使い、再試行を設計することを説明します。サービスをまたぐ整合性、サーガ、冪等性、2 相コミットは Part 11 で扱います。

トランザクションは失敗と並行の後始末を肩代わりする
スライド 124 のテキストと解説
トランザクションは失敗と並行の後始末を肩代わりする 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 途中で失敗しても、並行して走っても、アプリケーションが個別に後始末を書かずに済むための道具 書籍 『データ指向アプリケーションデザイン 第2版』8 章導入 p.271–272、8.1.2.3 節 p.282–283 失敗したら全部捨てる 落ちても、半端な書き込みが残らない だから最初からやり直せる 並行の干渉を隠す ほかの処理の途中の状態を、決めた範囲で見せない どこまで隠すかが分離レベル コミット後は失わない 成功を返した書き込みを保つ 複製があるときの意味は Part 8 肩代わりしないもの 何が正しい状態かを決めること。DB の外の副作用(メール、他サービスの呼び出し)の取り消し。応答が届かなかった成功をやり直したときの二重実行 リーダーの視点 「トランザクションを使っている」は答えにならない。どの範囲を囲み、どの干渉を隠しているかを問う 124
解説

まず、トランザクションが何のためにあるかを確かめます。『データ指向アプリケーションデザイン 第2版』の 8 章は、トランザクションを、アプリケーションを書く側の負担を軽くする目的で用意された仕組みだと位置づけています。自然の決まりごとではなく、人が目的をもって作った道具です。肩代わりしてくれるのは 3 つです。途中で失敗したら書き込みを全部捨てること、並行する処理の干渉を決めた範囲で隠すこと、コミットした書き込みを失わないことです。全部捨てられるので、アプリケーションは安心してやり直せます。一方で、肩代わりしないものもあります。何が正しい状態かを決めるのはアプリケーションです。メール送信のようなデータベースの外の副作用は、アボートしても取り消されません。コミットは成功したのに応答だけが届かなかった場合、やり直すと二重に実行されます。次のスライドで、ACID の 4 文字を 1 つずつ見ます。

ACID の 4 文字は製品で意味が違う
スライド 125 のテキストと解説
ACID の 4 文字は製品で意味が違う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 「ACID 準拠」という表示からは、保証の中身は分からない。特に C と I は、文字から想像する意味とずれる 仕様・文書 Aurora DSQL 文書「Migrating from PostgreSQL」(2026-11 確認。未検証) 書籍 DDIA 2e 8.1.1 節 p.273–277 文字 | 意味(DDIA 2e の整理) | 製品ごとに確かめること A 原子性 | 途中で失敗したら書き込みを全部捨てられる。並行性の話ではない | 1 トランザクションに入る量の上限。例:Aurora DSQL は変更 3,000 行まで(公式文書の記述) C 一貫性 | 不変条件が保たれる。何が正しいかはアプリケーションが決める | 不変条件を制約として宣言しているか。宣言しないものを DB は守れない I 分離性 | 並行するトランザクションが互いに邪魔をしない。教科書ではシリアライザブル | 既定の分離レベルと、その名前の中身。多くの製品の既定はシリアライザブルより弱い D 永続性 | コミットした書き込みは失われない | 「コミット成功」が何台への書き込みを意味するか(Part 8) リーダーの視点 CAP の「一貫性」は線形化可能性のことで、ACID の C とは別の意味(Part 10)。会話でどちらの意味かを確かめる 125
解説

『データ指向アプリケーションデザイン 第2版』は、この言葉が 1983 年に作られたこと、そして、あるデータベースの ACID が別のデータベースの ACID と同等とは限らないことを述べています。4 文字のうち、特に注意が要るのは C と I です。C の一貫性は、不変条件が保たれることを指します。不変条件とは、在庫は 0 以上、のように、常に成り立っていてほしい条件のことです。これはアプリケーションが決めるもので、データベースが守れるのは、制約として宣言されたものだけです。CAP の定理の「一貫性」は線形化可能性のことで、別の意味です。I の分離性は、教科書ではシリアライザブル、つまり 1 つずつ順に実行したのと同じ結果になることを指します。しかし、多くの製品の既定は、それより弱い水準です。製品によっては 1 つのトランザクションに入る量に上限があります。表の Aurora DSQL の値は公式文書の記述で、本ガイドでは検証していません。

読み取りの異常:途中の状態や、混ざった時点を読む
スライド 126 のテキストと解説
読み取りの異常:途中の状態や、混ざった時点を読む 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 架空の宅配注文サービスの在庫で考える。T1 と T2 は、並行して走る 2 つのトランザクション 仕様・文書 Berenson ほか 1995(A5A Read Skew。4.2 節)/Hermitage README(G1・G-single) 書籍 DDIA 2e 8.2.1.1 節 p.284–285、8.2.2 節 p.287–289(図 8-6 の考え方を倉庫の例に置き換え) ダーティリード コミットされていない値を読む。在庫は初め 10 T1 T2 在庫を 10→9 に 更新(未コミット) 在庫を読む:9 ロールバック (在庫は 10) 9 を前提に 処理を続ける 時間 結果 T2 は、存在しなかった値 9 で判断した リードスキュー 別々の時点のコミット済みの値を読む。倉庫 A=50、B=50 T1 T2 B を読む:50 A から B へ 10 移してコミット A を読む:40 合計は 90 と集計 時間 結果 実際の合計は 100。集計とバックアップが狂う ダーティリードはリードコミッテッドでも防がれる。リードスキューはリードコミッテッドでは防がれず、スナップショット分離か、読んだ行のロックを最後まで持つ Repeatable Read で防がれる(Berenson ほか 1995) 126
解説

ここから、並行して起きる異常を 4 つ、時系列の図で見ます。左はダーティリードです。T1 が在庫を 10 から 9 に書き換え、まだコミットしていません。その値を T2 が読みます。その後 T1 がロールバックすると、T2 は、どこにも存在しなかった 9 という値をもとに処理を進めたことになります。右はリードスキューです。倉庫 A から倉庫 B へ在庫を 10 個移す処理と、合計を数える処理が並行します。集計の T2 は、B を移動の前に読み、A を移動の後に読みます。どちらもコミット済みの値ですが、時点が混ざっているので、合計は 90 に見えます。実際は 100 です。本書は、リードスキューが困る場面にバックアップと分析や整合性の検査を挙げ、リードスキューをノンリピータブルリードの一例として扱います。Berenson らの論文では向きが逆で、ノンリピータブルリードがリードスキューの特殊な場合です。ダーティリードは、リードコミッテッドでも防がれます。リードスキューは、リードコミッテッドでは防がれません。論文の整理では、防ぐのはスナップショット分離と、読んだ行のロックを最後まで持つ Repeatable Read です。論文はこの 2 つを、強弱を比べられない関係としています。

書き込みの異常:読んだ前提が、書く前に古くなる
スライド 127 のテキストと解説
書き込みの異常:読んだ前提が、書く前に古くなる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 どちらも「読む → 判断する → 書く」の形。違いは、同じ行を書くか、別々の行を書くか 仕様・文書 Berenson ほか 1995(P4 Lost Update・A5B Write Skew)/Hermitage README(P4・G2-item) 書籍 DDIA 2e 8.2.3 節 p.293–294、8.2.4 節 p.297–302 ロストアップデート 同じ行を読んで書き戻す。在庫は初め 10 T1 T2 在庫を読む:10 在庫を読む:10 9 を書いて コミット 9 を書いて コミット 時間 結果 2 個売れたのに在庫は 9。T1 の更新が消えた ライトスキュー 別々の行を書く。決まり:稼働中の配達員は 1 人以上。初めは A・B T1 T2 稼働中は 2 人 と確認 稼働中は 2 人 と確認 A を休憩にして コミット B を休憩にして コミット 時間 結果 稼働中が 0 人。上書きが無いので検出されにくい 「まだ無いこと」を確かめてから挿入する処理(配達枠の二重予約など)は、ロックする行が無い。行ロックでは防げない 127
解説

書き込みの異常を 2 つ見ます。左はロストアップデートです。在庫 10 を、T1 と T2 がそれぞれ読みます。どちらも 1 を引いて 9 を書き、コミットします。2 個売れたのに、在庫は 9 です。片方の更新が、もう片方に上書きされて消えました。右はライトスキューです。エリアには稼働中の配達員を最低 1 人残す、という決まりがあるとします。稼働中は A さんと B さんの 2 人です。2 人が同時に休憩を申請すると、どちらの処理も「稼働中は 2 人」と確認し、自分の行だけを休憩に変えます。結果は 0 人です。書いた行が別々なので、上書きは起きていません。そのため、ロストアップデートを検出する仕組みでも見つかりません。『データ指向アプリケーションデザイン 第2版』は同じ型を病院の当直医の例で説明し、ライトスキューをロストアップデートの一般化と位置づけています。本書によれば、自動で防ぐには真のシリアライザブルが要ります。それが使えない場合の次善の手が、前提にした行の明示的なロックです。

分離レベルは「どの異常を許すか」の約束
スライド 128 のテキストと解説
分離レベルは「どの異常を許すか」の約束 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 草案の本文は「更新は失われない」と書くが、表にあるのは 3 つの現象だけ。水準は 1 列に並ばない 仕様・文書 SQL-92 公開草案 4.28 節・表 9(現行版の条文は未確認)/Berenson ほか 1995/Hermitage README(2026-11 確認) 書籍 DDIA 2e 8.2.2.4 節 p.293、8.5 節 p.330–331 SQL-92 草案の表 9(現行版は未確認) 水準 | ダーティ リード | ノンリピータブル リード | ファントム READ UNCOMMITTED | 起こりうる | 起こりうる | 起こりうる READ COMMITTED | 起きない | 起こりうる | 起こりうる REPEATABLE READ | 起きない | 起きない | 起こりうる SERIALIZABLE | 起きない | 起きない | 起きない Hermitage の結果:PostgreSQL の 3 つの水準 PostgreSQL での名前 | 実際の水準 | リード スキュー | ロスト アップデート | ライト スキュー Read Committed (既定) | monotonic atomic view | 防がない | 防がない | 防がない Repeatable Read | snapshot isolation | 防ぐ | 防ぐ | 防がない Serializable | serializable | 防ぐ | 防ぐ | 防ぐ 標準の定義の限界 草案の本文は 4 水準とも「更新は失われない」と書くが、表 9 にその列は無い。Berenson ほか(1995)は、READ COMMITTED でロストアップデート(P4)が起こりうること、現象を狭く読むとスナップショット分離が 3 現象を起こさないままライトスキュー(A5B)を許すことを示した 読み方 水準は強い順の 1 列に並ばない。Berenson ほかは、ロックによる REPEATABLE READ(ファントムを許す)とスナップショット分離(ライトスキューを許す)を、強弱を比べられない関係とする。右の表:3 水準ともダーティリードは防ぐ。Hermitage は試験の集まりで証明ではなく、防ぎ方と性能は示さない 128
解説

左の表は SQL 標準の定義です。確かめたのは SQL-92 の公開草案の 4.28 節と表 9 で、現行の ISO/IEC 9075 の条文は確認できていません。Jepsen の 2023 年 12 月の報告は、同じ定義が 2023 年版にも残ると書いています。これは二次資料です。草案の本文は、4 つの水準のどれでも更新は失われないと書いています。そのうえで、水準の違いを、ダーティリード、ノンリピータブルリード、ファントムという 3 つの現象で示します。表に、ロストアップデートとライトスキューの列はありません。Berenson らの 1995 年の論文は、この定義の曖昧さを指摘しました。論文によれば、READ COMMITTED ではロストアップデートが起こりえます。スナップショット分離は、現象を狭く読むと 3 つとも起こさないのに、ライトスキューを許します。論文は、ロックによる REPEATABLE READ とスナップショット分離を、強弱を比べられない関係としています。分離レベルは、強い順の 1 列には並びません。右の表は、Hermitage という公開の試験集が PostgreSQL の 3 つの水準について報告した結果で、試験から分かった「実際の水準」を示します。試験の集まりで、証明ではありません。

同じ名前の分離レベルが製品で別のものを指す
スライド 129 のテキストと解説
同じ名前の分離レベルが製品で別のものを指す 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 公式文書・Hermitage・Jepsen で確かめたセルだけ(2026-11 確認)。PostgreSQL 以外は未検証 仕様・文書 PostgreSQL 18 文書 13.2/MySQL 8.4 マニュアル 17.7.2.1/Oracle AI Database Concepts ほか 指針・報告 Hermitage README(試験の版は記載なし)/Jepsen「MySQL 8.0.34」(2023-12-19) 書籍 DDIA 2e p.276・p.293・p.299 製品 | 既定 | 「Repeatable Read」の中身 | 「Serializable」の中身 PostgreSQL 18 | Read Committed | スナップショット分離(文書、Hermitage) | SSI。直列化の異常を検査して失敗を返す(文書) MySQL 8.4(InnoDB) | REPEATABLE READ | ロストアップデートを防がない(Hermitage・Jepsen が一致)。水準の名前は食い違う。題材 D で測る | 通常の SELECT を SELECT ... FOR SHARE に変える(文書。autocommit 無効時) Oracle AI Database | Read Committed | 文書が挙げる水準は Read Committed・Serializable・読み取り専用 | Hermitage:snapshot isolation。 ライトスキュー(G2-item)を防がない SQL Server | READ COMMITTED | 共有ロックを終了まで保持。ファントムは起こる(文書) | Hermitage:serializable。SNAPSHOT は別の水準 CockroachDB | SERIALIZABLE | 文書(v26.4 表示)は水準を 2 つと書く。Hermitage には行がある(食い違い。理由は未確認) | Hermitage:serializable。競合は 40001(文書) Spanner | serializable | スナップショット分離。ライトスキューが起こりうると文書が明記 | 外部整合性を伴う(文書) Aurora DSQL | Repeatable Read に固定 | スナップショット分離。変更できない(文書) | 選べない(文書) 129
解説

既定の分離レベルと、Repeatable Read、Serializable の中身を並べました。まず Repeatable Read です。PostgreSQL、Spanner、Aurora DSQL ではスナップショット分離です。SQL Server では、読んだ行の共有ロックを最後まで持つ方式で、文書はファントムが起こると書いています。MySQL は、Hermitage の試験でも、Jepsen の 2023 年の報告でも、ロストアップデートを防ぎませんでした。実際の水準の名前は、2 つの報告で食い違います。次に Serializable です。Oracle の Serializable は、Hermitage の試験ではスナップショット分離で、別々の行を読んだライトスキューを防ぎませんでした。CockroachDB は、公式文書(v26.4 の表示)が分離レベルを 2 つと書く一方、Hermitage には repeatable read の行があり、食い違っています。理由は確かめられていません。Hermitage は各製品をどの版で試したかを README に書いていません。PostgreSQL 以外は未検証です。出典の補足:SQL Server・CockroachDB・Spanner・Aurora DSQL は、各製品の公式文書です。

DB を入れ替えると、既定の正しさの水準が変わる
スライド 130 のテキストと解説
DB を入れ替えると、既定の正しさの水準が変わる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 既定の分離レベルは製品ごとに違う。置換性を考えるなら、移行の計画に「分離レベルの差」の項目を入れる 仕様・文書 PostgreSQL 18 文書 13.2/MySQL 8.4 マニュアル 17.7.2.1/SQL Server・Aurora DSQL の文書 書籍 DDIA 2e 8.2.1.3 節 p.286(考え方) Read Committed が既定 PostgreSQL 18 Oracle AI Database SQL Server(中身はオプションで変わる) Repeatable Read が既定・固定 MySQL 8.4(InnoDB):既定 Aurora DSQL:固定(スナップショット分離) Serializable が既定 CockroachDB Spanner 入れ替えの例 | 既定の変化 | アプリケーション側で見直すこと(公式文書の記述から。未検証) PostgreSQL → Aurora DSQL | Read Committed → Repeatable Read 固定 | ロック待ちを前提にした箇所。競合はコミット時に 40001 で返るので、再試行と冪等性 PostgreSQL → CockroachDB | Read Committed → SERIALIZABLE | 40001 を受けたときの、クライアント側の再試行 MySQL → PostgreSQL | REPEATABLE READ → Read Committed | 同じ名前の Repeatable Read を指定すると、競合した更新は失敗として返る。再試行が要る 130
解説

既定の分離レベルを 3 つの組に分けました。Read Committed の組のうち SQL Server は、READ_COMMITTED_SNAPSHOT というデータベースのオプションで中身が変わります。SQL Server の既定は OFF で共有ロックを使い、Azure SQL Database の既定は ON で、文ごとのスナップショットを読みます。これは置換性の論点です。データベースを入れ替えると、アプリケーションのコードを 1 行も変えなくても、防がれる異常の範囲が変わります。たとえば PostgreSQL から Aurora DSQL へ移すと、ロックで待つ代わりに、コミットの時点で競合が判定され、SQLSTATE 40001 が返ります。この表は本ガイドでは検証していません。PostgreSQL と MySQL の差は、題材 D で実機で測ります。出典の補足:SQL Server は「SET TRANSACTION ISOLATION LEVEL」(2025-09-26 付)、Aurora DSQL は「Concurrency control」のページです。

MySQL の既定はロストアップデートを防がない
スライド 131 のテキストと解説
MySQL の既定はロストアップデートを防がない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 既定の REPEATABLE READ で読んで書き戻すと、更新が黙って消えうる。この点は 3 つの報告が一致 仕様・文書 Hermitage README/ACIDRain(Warszawski・Bailis、SIGMOD 2017)脚注 6 指針・報告 Jepsen「MySQL 8.0.34」(2023-12-19)3.3 節・3.5 節 書籍 DDIA 2e 8.2.3.3 節 p.295–296 Hermitage ロストアップデート(P4)の試験を防がなかった 既定の repeatable read の実際の水準を monotonic atomic view とする(手作業の試験の範囲での分類) Jepsen(2023-12) 対象は 8.0.34。障害の無い 1 台でも発生 1 回の試験で、成功した 9,048 トランザクションのうち 446 件が、198 件のロストアップデートの事例に関与 monotonic atomic view も満たさないと報告 ACIDRain 脚注 6(2017) MySQL の Repeatable Read で、ロストアップデートを起こせたと著者が記す 条件 3 つが一致するのは「ロストアップデートを防がない」点だけ。それ以外のふるまいは題材 D で測る。Jepsen の対象は 8.0.34 で、8.4・9 系でも同じかは一次資料で未確認 ケーススタディ 題材 D で、PostgreSQL と MySQL の同じ名前の分離レベルを実機で測る(結果はケーススタディ) 131
解説

MySQL の InnoDB の既定は REPEATABLE READ です。この水準は、ロストアップデートを検出しません。Hermitage は、ロストアップデートの試験を防がなかったと報告しています。Jepsen の 2023 年 12 月の報告も同じ結論です。対象は MySQL 8.0.34 で、障害を入れていない 1 台の構成でも起きました。リスト追記の負荷をかけた 1 回の試験で、成功した 9,048 トランザクションのうち 446 件が、198 件のロストアップデートの事例に関わっていました。ACIDRain 論文の脚注も同じことを述べています。DDIA 第2版の 296 ページも、文献を引いて同じことを書いています。3 つの報告が一致するのは、この点だけです。実際の水準の名前は一致していません。Hermitage は monotonic atomic view としますが、Jepsen は、それも満たさないと報告しています。PostgreSQL の Repeatable Read は、同じ場面でエラーを返して片方を失敗させます。Jepsen の結果が MySQL 8.4 や 9 系でも同じかは、一次資料で確認できていません。ロストアップデート以外のふるまいも含めて、題材 D で PostgreSQL と MySQL を実機で測ります。

分離レベルより先に、トランザクションの範囲を問う
スライド 132 のテキストと解説
分離レベルより先に、トランザクションの範囲を問う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 読む処理と書く処理が別々のトランザクションなら、分離レベルを最も強くしても防げない 仕様・文書 ACIDRain(Warszawski・Bailis、SIGMOD 2017)1 節・4 節 書籍 DDIA 2e 8.2 節 p.283(考え方) 17 / 22 件 トランザクションの使い方(範囲)の誤り。最も強い保証のもとでも成立(EC アプリ 12 本、2017 年) 範囲が分かれている:間に別の処理が入る ギフト券の残高を読む(単独でコミット) 別のリクエストが同じ残高を読む 残高を書く(単独でコミット) 1 つの業務操作を 1 つの範囲に:ここで初めて分離レベルが効く BEGIN → 残高を読む → 判断する → 残高を書く → COMMIT 脆弱性の種類 | 件数 | 破られた不変条件 在庫 | 9 | 在庫の帳簿が実際と合う ギフト券 | 8 | 額面を超えて使えない カート | 5 | 支払った額と注文の中身が合う リーダーの視点 1 つの API 呼び出しの中に、自動コミットの文が複数ないか。ORM が作るトランザクションの境界を、SQL のログで確かめる 132
解説

ACIDRain は、2017 年の SIGMOD で発表された論文です。自前で運用する型の EC アプリケーション 12 本を調べ、同時にリクエストを送る攻撃が成立する脆弱性を 22 件見つけました。内訳は、在庫が 9 件、ギフト券が 8 件、カートが 5 件です。重要なのは、22 件のうち 17 件が、トランザクションの使い方の誤りだったことです。論文は、この 17 件は、データベースが提供する最も強い保証のもとでも成立すると述べています。たとえば、残高を読む文と、残高を書く文が、それぞれ自動コミットで別々に実行されていれば、データベースから見ると 2 つの独立したトランザクションです。その間に別の処理が入っても、どの分離レベルも止めてくれません。レビューでは、1 つの業務操作が 1 つのトランザクションに収まっているかを先に確かめます。なお、この調査は 2017 年時点の 12 本が対象で、すべてのアプリケーションに当てはまる割合ではありません。

ロストアップデートの防ぎ方は 5 つ、費用が違う
スライド 133 のテキストと解説
ロストアップデートの防ぎ方は 5 つ、費用が違う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 本ガイドの整理:安い順に検討する。上の手段で書けるなら、下の手段は要らない 仕様・文書 PostgreSQL 18 文書 13.2.2・13.5/Aurora DSQL「Concurrency control」(未検証) 書籍 DDIA 2e 8.2.3.1〜8.2.3.4 節 p.294–296(4 つの手段。制約の追加と並び順は本ガイドの整理) 手段 | やること | 費用と弱点 | 向く場面 アトミックな更新 | SET stock = stock - 1 のように、1 文で読んで書く | 1 文で書ける更新に限る。ORM が読んで書き戻す形を作ると使えない | カウンター、在庫、残高の増減 明示的なロック | SELECT ... FOR UPDATE で読んだ行をロックしてから判断する | 付け忘れを機械が見つけない。ロック待ちとデッドロック | 判断が 1 文に収まらない更新 バージョン列 | 読んだ版番号のままのときだけ更新する(条件付き書き込み) | 競合時のやり直しを呼び出し側が書く | 画面での編集、API 越しの更新 分離レベルを上げる | PostgreSQL は Repeatable Read と Serializable で自動検出 | 失敗(40001)が返るので再試行が要る。MySQL の Repeatable Read は検出しない | 読んで書く箇所が多く、個別に直しきれない 制約(本ガイドが追加) | CHECK・一意性制約で不変条件を DB に宣言 | 表せる条件が限られる。更新が消えること自体は検出しない | 最後の守り。コードを通らない書き込みにも効く 題材 D で、手段を 1 つずつ足したときの異常の件数・失敗の件数・再試行の回数を測る(結果はケーススタディ) 133
解説

ロストアップデートを防ぐ手段を、費用と並べます。本書の 8.2.3 節が挙げる手段は、アトミックな更新、明示的なロック、自動検出、条件付き書き込みの 4 つです。そこに制約を足して 5 つにし、安い順に並べたのは本ガイドの整理です。1 つ目はアトミックな更新です。在庫を読んで書き戻すのではなく、在庫から 1 を引く、という 1 文の更新にします。『データ指向アプリケーションデザイン 第2版』は、これで表せるなら通常は最良だと述べています。2 つ目は明示的なロックで、SELECT FOR UPDATE で読んだ行をロックします。弱点は、必要な箇所に付け忘れても誰も教えてくれないことと、デッドロックです。3 つ目はバージョン列で、読んだときの版番号のままなら更新する、という条件付きの書き込みです。4 つ目は、ロストアップデートを自動で検出する水準に上げることです。PostgreSQL では Repeatable Read と Serializable です。失敗が返るので再試行が要ります。MySQL の Repeatable Read は検出しません。5 つ目は制約で、本書のこの節には無い、本ガイドが足した手段です。更新が消えること自体は検出しませんが、在庫が負にならない、といった不変条件を最後に守ります。

Serializable の実装は 3 つ、費用の出方が違う
スライド 134 のテキストと解説
Serializable の実装は 3 つ、費用の出方が違う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 逐次実行は 1 コアに縛られ、2 相ロックは待たせ、SSI は失敗を返す。SSI を選ぶなら再試行を設計する 仕様・文書 PostgreSQL 18 文書 13.2.3・13.5 Serialization Failure Handling(2026-11 確認) 書籍 DDIA 2e 8.3 節 p.302–303、8.3.2 節 p.308–310、8.3.3 節 p.312–317、p.282–283 逐次実行 方法:1 スレッドで 1 つずつ実行 費用:処理能力が 1 コアに縛られる。トランザクションを短く 例:VoltDB、Redis 2 相ロック(2PL) 方法:読み手と書き手が互いを待たせる 費用:高パーセンタイルの遅延、デッドロック 例:MySQL(InnoDB)、SQL Server SSI 方法:待たせずに進め、危ない並びを見つけたら失敗させる 費用:失敗と再試行。競合が多いほど増える 例:PostgreSQL、CockroachDB BEGIN から実行 判断のロジックも含む COMMIT 成功なら終わり 40001 が返る 直列化の失敗 間隔を空ける 回数に上限を置く 全体を最初から 途中の文だけやり直さない 再試行される範囲に、メール送信や他サービスの呼び出しを置かない。置くなら受け手を冪等にする(Part 11) 134
解説

シリアライザブルは、並行に実行しても、1 つずつ順に実行したのと同じ結果になることを保証します。『データ指向アプリケーションデザイン 第2版』は、実装を 3 つに分けています。1 つ目は、本当に 1 つずつ実行する方式です。2 つ目は 2 相ロックです。シリアライザブルをこの方式で実装している製品に、MySQL(InnoDB)と SQL Server があります。読み手と書き手が互いを待たせるので、高いパーセンタイルの応答時間が不安定になります。3 つ目は SSI、シリアライザブルスナップショット分離です。PostgreSQL のシリアライザブルと CockroachDB が使っています。互いを待たせない代わりに、危ない並びを見つけると片方を失敗させます。PostgreSQL は SQLSTATE 40001 を返し、文書は、どの SQL を出すかを決めるロジックも含めて、トランザクション全体をやり直すよう求めています。再試行される処理の中にメール送信などの外への副作用を置くと、その分だけ繰り返されます。

必要な箇所だけ強くし、受け入れる異常は理由を残す
スライド 135 のテキストと解説
必要な箇所だけ強くし、受け入れる異常は理由を残す 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 不変条件ごとに、守る手段を安い順に当てはめる。全体を一律に強くする前に、どこで何を守るかを書き出す 仕様・文書 PostgreSQL 18 文書 13.4 Data Consistency Checks at the Application Level(2026-11 確認) 書籍 DDIA 2e 8.2.3〜8.2.4 節 p.293–302、8.3 節 p.302–303(考え方) 不変条件を書く 処理ごとに 1 文 制約にする 一意性・CHECK 1 文の更新に直す アトミックな更新 残りを強くする Serializable+再試行、または行ロック 受け入れを記録 起こりうる異常と理由 処理の例(架空の宅配注文サービス) | 不変条件 | 守り方の例 在庫の引当 | 在庫は 0 以上 | アトミックな更新+CHECK 制約 配達枠の予約 | 1 つの枠に予約は 1 件 | 一意性制約 配達員の休憩 | エリアに稼働中が 1 人以上 | Serializable+再試行、または前提にした行のロック 商品の閲覧数 | 多少のずれは許す | 既定の水準のまま。理由を設計記録に残す 本ガイドの考え(一次資料なし) この手順と当てはめは本ガイドの整理。PostgreSQL の文書は、全体を Serializable にして再試行を共通化する道も示す。保護はスタンバイに及ばない点に注意 135
解説

ここまでの材料を、判断の手順にまとめます。この手順は本ガイドの考えで、一次資料がそのまま示しているものではありません。まず、守りたい不変条件を、処理ごとに 1 文で書きます。次に、制約で宣言できるものは制約にします。1 文の更新に直せるものは直します。残った、読んで判断して書く処理に、シリアライザブルと再試行、または明示的なロックを使います。最後に、弱い水準のまま受け入れる処理は、起こりうる異常と理由を記録します。下の表は、架空の宅配注文サービスでの当てはめの例です。なお、PostgreSQL の公式文書の立場は少し違います。文書は、すべての書き込みと、一貫した見え方が要る読み取りにシリアライザブルを使い、失敗を自動で再試行する共通の仕組みを持てば、ほかの工夫は要らないと述べています。もう 1 つ注意があります。PostgreSQL の文書は、シリアライザブルによる保護が、ホットスタンバイと論理レプリカにはまだ及ばないと警告しています。

設計レビューで問うこと:正しさの水準
スライド 136 のテキストと解説
設計レビューで問うこと:正しさの水準 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 答えが製品の文書か実測で返ってくるかを見る。「ACID だから大丈夫」は答えになっていない 仕様・文書 PostgreSQL 18 文書 13.4・13.5/ACIDRain(SIGMOD 2017) 指針・報告 Hermitage README/Jepsen「MySQL 8.0.34」(2023-12-19) 書籍 DDIA 2e 8.2 節 p.283、8.3 節 p.302–303 問い | なぜ問うか | 危ない兆候 この DB の既定の分離レベルは何か。その名前が防ぐ異常を、文書か実測で言えるか | 既定も、名前の中身も、製品ごとに違う | 「Repeatable Read だから更新は消えない」 守りたい不変条件を、処理ごとに 1 文で書けるか | 分離レベルは不変条件に対して選ぶ | 不変条件がコードの if 文にしか無い トランザクションの範囲は、1 つの業務操作の全体を囲んでいるか | 範囲が別々なら、分離レベルを上げても防げない | 1 回の API 呼び出しに自動コミットの文が複数ある 読んで、判断して、書く処理はどこにあるか。1 文の更新か制約に直せるか | ロストアップデートとライトスキューに共通する形 | ORM で読み込み、属性を変えて保存、が標準の書き方 40001 の再試行は、どこに、何回、どんな間隔で実装されているか | SSI と楽観的な DB は、失敗を返すことが前提 | 再試行が無い。再試行の範囲に外部呼び出しがある 残高・在庫・クーポンの API に、並行に呼ぶ試験があるか | 同時実行が少ないと表に出ない。外からは作れる | 負荷試験が正常系だけ 136
解説

設計レビューで問うことを 6 つにまとめました。1 つ目は、既定の分離レベルと、その名前の中身です。2 つ目は不変条件です。分離レベルは不変条件に対して選ぶものなので、不変条件が書かれていなければ、選びようがありません。3 つ目はトランザクションの範囲です。ACIDRain の調査では、22 件のうち 17 件が範囲の誤りでした。4 つ目は、読んで判断して書く処理の場所です。ロストアップデートとライトスキューに共通する形だからです。5 つ目は再試行です。シリアライザブルや、楽観的な並行性制御を使うデータベースでは、失敗が返ることが前提です。6 つ目は並行の試験です。これらの異常は、同時実行が少ないと表に出ません。一方で、API を公開していれば、外から同時実行を作れます。サービスをまたぐ処理の問いは Part 11 で扱います。

まとめ:名前ではなく、防ぐ異常で水準を決める
スライド 137 のテキストと解説
まとめ:名前ではなく、防ぐ異常で水準を決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 どの異常を、どこで防ぐか。範囲 → 不変条件 → 手段 → 再試行の順に決める 仕様・文書 PostgreSQL 18 文書 13.2・13.5/Hermitage README/ACIDRain(SIGMOD 2017) 書籍 DDIA 2e 8 章 p.271–332(8.5 節 まとめ p.330–332) 名前ではなく異常で比べる 同じ Repeatable Read が製品で別のもの 文書と試験の結果で確かめる 入れ替えると水準が変わる 既定は製品ごとに違う 移行の計画に「分離レベルの差」を入れる 先に範囲を問う 範囲の誤りは、強い水準でも防げない 1 つの業務操作を 1 つのトランザクションに 強くするなら再試行を設計する SSI は失敗(40001)を返す 全体をやり直す。外への副作用を中に置かない リーダーの視点 次は Part 10「分散システムで信用できないもの」。サービスをまたぐ整合性(サーガ・冪等性・2 相コミット)は Part 11 137
解説

Part 9 のまとめです。1 つ目に、分離レベルは名前で選べません。同じ Repeatable Read が、製品によってスナップショット分離であったり、ロックの保持であったり、ロストアップデートを防がない水準であったりします。比べるときは、どの異常を防ぐかで比べます。2 つ目に、既定の水準は製品ごとに違います。データベースを入れ替えると、コードを変えなくても、防がれる異常の範囲が変わります。3 つ目に、分離レベルより先に、トランザクションの範囲を確かめます。4 つ目に、強い水準は費用を伴います。シリアライザブルスナップショット分離は失敗を返すので、再試行を設計します。ここまでは、1 つのデータベースの中の話でした。次の Part 10 では、ネットワーク、時計、プロセスの継続という、分散システムで信用できないものを扱います。その上で Part 11 で、サービスをまたぐ整合性に進みます。題材 D の実測の結果は、ケーススタディで示します。

PART 10 分散システムで信用できないもの
スライド 138 のテキストと解説
PART 10 分散システムで 信用できないもの ネットワーク・時計・プロセスの継続は信用できない。合意の理論を覚えるより先に、どこで合意に頼り、進まなくなったら何が止まるかを問う このPartで答えられるようになる問い どこで合意に頼っているか それが進まなくなったら、何が止まるか 時計に頼って順序を決めていないか 138
解説

Part 10 は基礎の Part です。分散システムでは、単一のサーバーでは当てにできた 3 つのもの、つまりネットワーク、時計、プロセスが動き続けていること、が当てにできなくなります。この Part は合意アルゴリズムの解説ではありません。テックリーダーが設計レビューで問うべきことを 3 つに絞ります。どこで合意に頼っているか。その合意が進まなくなったとき、何が止まるか。時計の時刻に頼って順序や勝ち負けを決めていないか、です。前半で、部分障害、再試行、時計、プロセスの停止を扱います。後半で、線形化可能性とその代償、合意が要る場面、調整サービス(書籍の訳語ではコーディネーションサービス)の事故、ID の生成、製品の主張の確かめ方を扱います。書籍では『データ指向アプリケーションデザイン 第2版』の 9 章と 10 章に当たります。複製は Part 8、分離レベルは Part 9、サービスをまたぐ整合性は Part 11、共通基盤が止まる型は Part 14 で扱います。

単一ノードと違うのは、一部だけが壊れること
スライド 139 のテキストと解説
単一ノードと違うのは、一部だけが壊れること 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 応答が来ないとき、原因は区別できない。タイムアウトは障害の検出ではなく推測 指針・報告 Amazon Builders' Library「Timeouts, retries, and backoff with jitter」(2019-12-05) 書籍 『データ指向アプリケーションデザイン 第2版』9.1 節 p.342、9.2 節 p.343〜344、9.2.4 節 p.348 注文サービス (送り手) 在庫サービス (相手) ① 要求が途中で失われた(相手には届いていない) ② 相手が止まっている。または、遅いだけで動いている ③ 相手の処理は済んだが、応答が途中で失われた 送り手から見えるのは、どれも「まだ応答が無い」だけ タイムアウトの値 | 得るもの | 失うもの 長い | 遅いだけの相手を、止まったと誤って判断しにくい | 本当に止まった相手を長く待つ。利用者も待つ 短い | 障害に早く気づける | 遅いだけの相手を止まったと判断し、仕事を移して負荷を増やす(連鎖障害) 値を既定のままにしない。許す誤タイムアウトの率(例 0.1%)を決め、相手の遅延の分布(例 p99.9)から決める 139
解説

単一のコンピュータは、動くか、壊れて止まるかのどちらかになるよう作られています。分散システムでは、一部だけが予測できない形で壊れ、残りは動き続けます。これを部分障害と呼びます。図は、注文サービスが在庫サービスに引当を頼んだ場面です。応答が来ない原因は、要求が失われた、相手が止まっているか遅いだけ、処理は済んだが応答が失われた、のどれもありえます。送り手から見えるのは「まだ応答が無い」ことだけです。そこでタイムアウトを使いますが、これは推測です。長くすれば止まった相手を長く待ち、短くすれば遅いだけの相手を止まったと誤って判断します。仕事をほかへ移すと負荷が増え、連鎖障害になることもあります。Amazon の Builders' Library は、許容する誤タイムアウトの率、例えば 0.1% を先に決め、相手の遅延の p99.9 から値を決める方法を紹介しています。③で再試行すると二重実行になりうる点は、Part 11 で扱います。

危ないのは、半分動く障害と再試行の増幅
スライド 140 のテキストと解説
危ないのは、半分動く障害と再試行の増幅 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 検知器には健全に見える障害と、きっかけが消えても続く過負荷が、障害を長引かせる 仕様・文書 Huang ほか 2017(HotOS)/Bronson ほか 2021(HotOS)§1/Huang ほか 2022(OSDI)§2・表 1 指針・報告 Amazon Builders' Library「Timeouts, retries, and backoff with jitter」(2019-12-05) 書籍 DDIA 2e p.36 コラム、9.4.4 節 p.378 グレー障害(gray failure) 定義:現れ方が微妙で、素早く確定できない障害 核心:利用する側と検知する側で、見え方が違う 例:処理は詰まっているのに、ハートビートは返る 準安定障害(metastable failure) 定義:きっかけを取り除いても、悪い状態が続く 維持:仕事を増やす帰還ループ。再試行が代表 回復:再起動や、負荷の大幅な削減が要る 数字・性質 | 何を指すか(条件) 50% 超 | 公開報告 21 件(Huang ほか 2022 の表 1)の準安定障害のうち、再試行が障害を保っていた割合(11 件) 1.5〜73.53 時間 | 同論文の本文が書く停止の長さ(表 1 にはより短い件もある)。記載のある件では 4〜10 時間が最多(35%) 掛け算で増える | 各層が独立に再試行すると、層を重ねるごとに下の層への負荷が掛け算で増える(Builders' Library) 再試行は 1 か所で行い、回数と総量に上限をつける。過負荷のときに負荷を落とす手段を、先に用意する 140
解説

完全に止まった部品は、むしろ扱いやすい障害です。危ないのは 2 つの型です。1 つ目はグレー障害です。Huang ほかの 2017 年の論文は、現れ方が微妙で、素早く確定的に検知できない障害をこう呼びました。核心は、影響を受ける側と、検知を担う側とで見え方が違うことです。2 つ目は準安定障害です。Bronson ほかの 2021 年の論文の定義では、きっかけを取り除いても悪い状態が続く障害です。続かせるのは仕事を増やす帰還ループで、抜け出すには再起動や負荷の大幅な削減が要ります。表の数字は、Huang ほかの 2022 年の論文の 2 節によります。要旨は 11 の組織の 22 件と書きますが、公開報告として表 1 に載るのは 21 件で、数字はこの表についての記述です。最も多い維持の仕組みは再試行で、論文は 50% を超える事例に関わるとし、11 件を挙げています。停止の長さの下限 1.5 時間は本文の記述で、表 1 にはこれより短い件もあります。Builders' Library は、各層が独立に再試行すると、層を重ねるごとに再試行が掛け算で増えると説明しています。倍率は層の数と各層の回数で変わります。同じ記事は、再試行を 1 か所で行うこと、トークンバケットで総量を抑えること、間隔にばらつき(jitter)を入れることを勧めています。

時計は飛び、戻る。順序の根拠にしない
スライド 141 のテキストと解説
時計は飛び、戻る。順序の根拠にしない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 経過時間はモノトニッククロックで測る。実時間クロックの時刻で、書き込みの勝ち負けを決めない 指針・報告 Cloudflare 事後報告「How and why the leap second affected Cloudflare DNS」(発生 2017-01-01) 書籍 DDIA 2e 9.3.1 節 p.355〜356、9.3.3 節 p.358〜360 | 実時間クロック(wall-clock) | モノトニッククロック(単調に進む時計) 返すもの | カレンダー上の現在時刻 | ある時点からの経過。絶対値に意味は無い 飛ぶ・戻る | ある。NTP による合わせ直しや、うるう秒で | 無い。進む速さだけが調整される 使いどころ | 時点の記録。ほかのマシンの時刻と比べるなら誤差がある前提で | タイムアウト、応答時間、リースの残り時間 最終書き込み優先(LWW)の危険 最大のタイムスタンプを持つ書き込みを残し、ほかを捨てる方式。時計がわずかにずれるだけで、後から行った書き込みがエラーなしに消える 失敗例:Cloudflare 2017-01-01(うるう秒) 時刻の差で応答時間を測っていた DNS のコードで値が負になり、パニックが起きた(捕捉された)。一部の DNS 解決が失敗し、ピーク時に問い合わせの約 0.2% に影響(事業者の報告) 時計のずれによる異常は、ケーススタディ(単一ホスト)では再現できないため未検証。このスライドは書籍と事後報告による 141
解説

コンピュータには少なくとも 2 種類の時計があります。実時間クロックは現在時刻を返します。Linux では CLOCK_REALTIME です。NTP に合わせ直されて過去へ飛ぶことがあり、うるう秒でも飛びます。モノトニッククロックは常に前へ進む時計で、Linux では CLOCK_MONOTONIC です。タイムアウトや応答時間は、こちらで測ります。失敗例は Cloudflare の 2017 年 1 月 1 日の障害です。報告によると、DNS のソフトウェアが時刻の差で応答時間を測っており、うるう秒でその値が負になりました。負の値を乱数の関数に渡した所でパニック(panic)が起き、これは捕捉されましたが、一部の DNS 解決が失敗しました。プロセスが異常終了したとは書かれていません。修正の展開は 06:45 UTC に終わりました。もう 1 つの危険は、最終書き込み優先、LWW です。時計がわずかにずれるだけで、後の書き込みがエラーを出さずに捨てられます。書籍は、同期した時計に頼るなら、マシン間のずれの監視が欠かせないとしています。時計のずれはケーススタディの環境では再現できないので、このスライドは書籍と事後報告だけに基づきます。

ロックだけでは守れない。資源の側で古い番号を拒む
スライド 142 のテキストと解説
ロックだけでは守れない。資源の側で古い番号を拒む 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 リース(期限つきのロック)は、持ち主が止まっているあいだに切れる。止まっていた本人は気づかない 仕様・文書 Jepsen「etcd 3.4.3」(2020-01-30)/Redis 文書「Distributed Locks with Redis」(2026-11 確認) 書籍 DDIA 2e 9.3.4 節 p.362〜365、9.4.2 節 p.369〜373(図は同書の図 9-6 をもとに作図) ワーカー A ロックサービス ワーカー B 資源(注文 DB) ① リースを取得(番号 7) 停止(GC、VM の一時停止など)。本人は気づかない ④ 番号 7 を付けて書き込む 番号 7 を貸す A は期限切れ。番号 8 を貸す ② リースを取得(番号 8) ③ 番号 8 で書き込む 受理。最大の番号 8 を記憶 拒否:7 は 8 より古い 時間 注意 番号の検査が無いと④が通り、B の結果を上書きする。Jepsen は etcd 3.4.3 のロックで、応答済みの更新の約 18% が失われた試験を報告(リース 2 秒、5 プロセス、5 秒ごとに一時停止) リーダーの視点 「どのロックサービスか」より「資源が古い持ち主を拒めるか」。書き込み先が 1 つで条件つき書き込みを持つなら、それで直接守れる。重複しても無駄になるだけの処理は、ロックだけでよい 142
解説

プロセスは、ガベージコレクションや仮想マシンの一時停止などで、任意の時点で長く止まることがあります。本人は気づきません。図は、架空の宅配注文サービスで、配達の割り当てジョブを 2 つのワーカーが取り合う場面です。ワーカー A が番号 7 でリースを取り、長く止まります。その間に期限が切れ、ロックサービスは B に番号 8 で貸します。B が書き込んだあと、A が目を覚まし、まだ持ち主だと思って番号 7 で書き込みます。注文 DB が、見た最大の番号より小さい番号の書き込みを拒めば、B の結果は守られます。この番号がフェンシングトークンです。ZooKeeper では zxid、etcd ではリビジョン番号が使えます。書籍は p.372 で、etcd についてリース ID との組み合わせを挙げています。大事なのは、検査するのが資源の側だという点です。Jepsen は etcd 3.4.3 の検証で、etcd のロックは相互排他を与えないと報告しました。Redis の公式文書も、正しさを気にするならフェンシングトークンを実装するよう注意書きを置いています。

線形化可能性は、コピーが 1 つに見えること
スライド 143 のテキストと解説
線形化可能性は、コピーが 1 つに見えること 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 書き込みが完了したら、以後の読み取りは必ずその値を見る。分離の保証(直列化可能性)とは別物 仕様・文書 Herlihy・Wing 1990「Linearizability」ACM TOPLAS 12(3)(原論文) 書籍 DDIA 2e 10.1 節 p.398〜403、コラム「線形化可能性と直列化可能性」p.404 ① 書き込みが完了 「在庫 = 0」に応答が返った ② 利用者 A が読む 追いついたレプリカ →「在庫 = 0」 ③ そのあと利用者 B が読む 遅れたレプリカ →「在庫 = 1」 ③ は違反:新しい値が一度見えたあとで、古い値が見えている | 線形化可能性 | 直列化可能性 何の保証か | 最新性:複製があっても、コピーが 1 つに見える | 分離:ある直列の順で実行したのと同じ結果になる 対象 | 個々のオブジェクトの読み書き | 複数のオブジェクトをまたぐトランザクション これだけでは残るもの | ライトスキューは防げない | 古い値の読み取りは許される このガイドでは | この Part | Part 9(分離レベル) 両方を満たすのが「厳密な直列化可能性」。どちらが要るかは、操作ごとに決める 143
解説

線形化可能性は、複製されたデータが、コピーが 1 つしか無いかのように見える、という保証です。書き込みが完了したら、そのあとに読むすべてのクライアントは、その値を見なければなりません。書籍はこれを最新性保証と呼びます。図は違反の例です。在庫を 0 にする書き込みが完了し、利用者 A は 0 を読みました。そのあとで利用者 B が遅れたレプリカから 1 を読むと、線形化可能ではありません。よく混同されるのが直列化可能性です。こちらは、複数のオブジェクトを扱うトランザクションの分離の保証で、何らかの直列の順で実行したのと同じ結果になることを言います。直列化可能性は古い値の読み取りを許し、線形化可能性はライトスキューを防げません。両方を満たすものを厳密な直列化可能性と呼びます。書籍は、一貫性モデルと分離レベルは、ほぼ独立に選べるとしています。分離レベルは Part 9、複製の方式との関係は Part 8 を参照してください。

線形化可能性の代償は性能。CAP を軸にしない
スライド 144 のテキストと解説
線形化可能性の代償は性能。CAP を軸にしない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 線形化可能な操作は、分断のときだけでなく平常時も遅い。問うのは「この操作に最新性が要るか」 仕様・文書 Gilbert・Lynch 2002「Brewer's Conjecture…」§2(3 つの性質の定義) 書籍 DDIA 2e 10.1.4 節 p.410〜413(CAP の評価 p.412、性能の代償 p.413) 払うもの:平常時の遅延 線形化可能性を捨てる主な理由は、耐障害性ではなく性能 Attiya・Welch の証明:応答時間は、ネットワーク遅延の不確かさに少なくとも比例する 分断時は、リーダーに届かない側が書き込みも最新の読み取りもできない CAP 定理が扱う範囲は狭い 一貫性は線形化可能性だけ、障害はネットワーク分断だけ 可用性は「故障していないノードが受けた要求は必ず応答を返す」こと。稼働率ではない 遅延、ノードの停止、弱い一貫性モデルには触れない 注意 「3 つから 2 つ選ぶ」は誤解を招く。分断は選ぶものではなく起きるもの。DDIA 2e は CAP を、設計上の「実用的な価値はほとんどありません」と評価する(p.412) 製品を「CP か AP か」で分けて選定を終えない。操作ごとに、最新性が要るか、要るなら遅延をいくら払えるかを書く 144
解説

このガイドは CAP 定理を軸にしません。理由は 2 つです。1 つ目に、書籍は p.413 で、多くの分散データベースが線形化可能性を提供しないのは、主に性能のためであり、耐障害性のためではないと述べています。線形化可能な読み書きの応答時間は、ネットワーク遅延の不確かさに少なくとも比例する、という証明も紹介しています。代償は平常時にいつも払うのです。2 つ目に、CAP 定理が扱う範囲は狭いからです。Gilbert と Lynch の 2002 年の論文の定義では、一貫性は線形化可能性のことで、可用性は、故障していないノードが受け取った要求は必ず応答を返す、という性質です。稼働率のことではありません。書籍は p.412 で、設計上の「実用的な価値はほとんどありません」と評価しています。レビューで「この製品は CP です」と言われたら、どの操作に最新性が要り、遅延をいくら払えるのかを聞き返してください。

分断中でも守れる保証は、意外に多い
スライド 145 のテキストと解説
分断中でも守れる保証は、意外に多い 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 Bailis ほか(VLDB 2014)の整理。守れないのは、並行する更新の調停と最新性が要る保証 仕様・文書 Bailis ほか PVLDB 7(3)(VLDB 2014。高可用トランザクション HAT の論文)§3・§5、表 3 書籍 DDIA 2e 10.1.1 節 p.403(線形化可能性より弱い一貫性モデル) 分断中の扱い | 保証(主なもの) | 宅配注文サービスでの例(本ガイドの当てはめ) どのノードでも応答できる | リードコミッテッド、モノトニックリード、Monotonic Atomic View など | 確定前の注文が他人に見えない。一覧が前より古い状態に戻らない 同じノードにつながり続ければ応答できる (sticky) | 自分の書き込みの読み取り、因果一貫性、PRAM | 自分が入れた注文が、自分の画面にすぐ出る 応答を続けるなら守れない | スナップショット分離、リピータブルリード(Adya らの定義)、直列化可能性、線形化可能性など | 在庫の最後の 1 個を 2 人に売らない。同じクーポンを 2 回使わせない 守れない理由は 3 つ ロストアップデートを防ぐ、ライトスキューを防ぐ、最新性を保証する。どれも、ほかのレプリカとの調整が要る リーダーの視点 全部を最強にも、全部を結果整合にもしない。操作ごとに、表のどの行が要るかを書く。同論文の調査では、18 の DB のうち既定で直列化可能だったのは 3 つ(2013 年時点) 145
解説

「分断に強くしたいなら一貫性は諦める」という二択は粗すぎます。Bailis ほかの論文は、分断が続いても応答し続けるシステムで、どの保証が守れるかを 3 つに分けました。表はその表 3 を、このガイドの言葉で書き直したものです。1 行目は、どのノードでも応答できる保証です。2 行目は、クライアントが同じノードにつながり続ける限り守れる保証で、論文は sticky と呼びます。3 行目は、応答を続けるなら守れない保証です。ここのリピータブルリードは Gray、Berenson、Adya らの定義のもので、論文は、切り口の分離(Item Cut Isolation)のような変種なら 1 行目に入るとしています。論文は守れない理由を、ロストアップデートを防ぐこと、ライトスキューを防ぐこと、最新性を保証すること、の 3 つにまとめています。右の列の例は、このガイドが架空の宅配注文サービスに当てはめたもので、論文の例ではありません。同じ論文は、調べた 18 のデータベースのうち、既定で直列化可能だったのは 3 つだけだったと報告しています。2013 年時点の調査です。分離レベルの中身は Part 9 を参照してください。

合意が要るのは「1 つに決める」場面
スライド 146 のテキストと解説
合意が要るのは「1 つに決める」場面 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 合意は安全性を常に守るが、進むのは過半数が通信できるときだけ。要らない場面には使わない 仕様・文書 Bailis ほか PVLDB 7(3) 表 3(調整なしで守れる保証) 書籍 DDIA 2e 10.1.2 節 p.405〜406、10.3 節 p.422〜425・434、10.3.3 節 p.434〜437、10.4 節 p.438〜439 合意が要る:全員が同じ 1 つを選ぶ リーダーの選出、ロックとリース:持ち主は 1 つ ユニーク性制約:同じ名前を 2 人に渡さない アトミックコミット:全員がコミットか、全員がアボートか 共有ログ:全員が同じ順序で同じ書き込みを見る CAS・fetch-and-add:条件つき更新、重複しない発番 合意が要らない:古くてもよい、後で直せる 設定の配布:起動時に読み、通知か定期取得で追う サービスディスカバリ:最新性より、可用性と速さ 障害検出と変更通知:それ自体は合意を必要としない 調整なしで守れる保証:前のスライドの上 2 行 後で直せる制約:超過は後から埋め合わせる 過半数の算数:3 ノードで 1 台、5 ノードで 2 台の障害まで。過半数に届かない側は、誤った答えを出すのではなく、進まなくなる 合意は自作せず、ZooKeeper・etcd・Consul などのコーディネーションサービス(以下、調整サービス)に任せる。頼った分だけ、止まったときの影響もそこに集まる 146
解説

合意とは、複数のノードが 1 つの値に決め、決めたら覆さないことです。書籍は 10 章のまとめで、合意に帰着する問題を並べています。CAS、ロックとリース、ユニーク性制約、共有ログ、アトミックなコミット、fetch-and-add です。左の箱はこれを言い換えたものです。一方、書籍は、設定の配布に合意の側面は必要なく、サービスディスカバリに合意を使うのは多くの場合やりすぎだと述べています。もう 1 つ押さえたいのは、安全性と活性の区別です。ほとんどの合意アルゴリズムは、誤った決定をしないという安全性を、過半数のノードが落ちても守ります。ノードが嘘をつかない、つまりビザンチン障害が無いという前提です。しかし決定が進むという活性は、過半数のノードが動いていて通信できるときだけです。FLP の結果が言うのも、決して合意できないということではなく、必ず終わるとは保証できないということです。合意の実装は難しいので自作せず、検証されたサービスを使います。

事故では、合意は誤らず、進まなくなった
スライド 147 のテキストと解説
事故では、合意は誤らず、進まなくなった 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 被害を決めたのは、調整サービスや制御プレーンが止まったとき、頼る側がどう作られていたか 指針・報告 Roblox 事後報告(2022-01-20 公開)/Cloudflare 事後報告(2020-11-27 公開)/OpenAI 事後報告(発生 2024-12-11) 書籍 DDIA 2e 10.3.2.4 節 p.434、10.3.3.2 節 p.437 事故(事業者の報告) | 進まなくなったもの | 頼る側で起きたこと Roblox 2021-10-28〜31 停止 73 時間 | 全バックエンドが載る 1 つの Consul クラスタ。streaming 機能の競合と BoltDB の性能問題が原因 | Nomad と Vault が Consul に依存し、コンテナの配置と秘密情報の取得が止まった。テレメトリも Consul に循環依存 Cloudflare 2020-11-02 API と管理画面が 6 時間 33 分劣化 | スイッチが部分的に動く状態になり、etcd がリーダー選出を繰り返して読み取り専用に。スイッチは 6 分後に回復 | DB の同期レプリカが自動で昇格。昇格後に全レプリカの作り直しが必要になった。API の成功率は最低 75% OpenAI 2024-12-11 15:16〜19:38(PST) | 新しいテレメトリの設定が Kubernetes API に大きな負荷をかけ、制御プレーンが停止 | DNS が制御プレーンに依存。キャッシュが切れると互いを見つけられない。制御プレーンに入れず、すぐに取り除けなかった 本ガイドの考え(一次資料なし) 3 件の報告は、合意が誤った値を返したとは書いていない。共通するのは「進まない・応答しない」状態と、それに頼りきった作り。止まったら「止まる」か「最後に得た情報で続ける」かを、設計で先に決める(型と対策は Part 14) 147
解説

事業者自身の事後報告に書かれた範囲で、3 件を見ます。Roblox は 2021 年 10 月に 73 時間止まりました。すべてのバックエンドが 1 つの Consul クラスタに載っており、Nomad と Vault も Consul に頼っていました。テレメトリも循環して依存していました。Cloudflare は 2020 年 11 月 2 日、スイッチが部分的に動く状態になり、etcd がリーダーの選出を繰り返して読み取り専用になりました。スイッチは 6 分後に戻りましたが、データベースの自動昇格が起き、影響は 6 時間 33 分続きました。OpenAI は 2024 年 12 月 11 日、新しいテレメトリの設定が Kubernetes の API に大きな負荷をかけ、制御プレーンが止まりました。DNS が制御プレーンに頼っていたため、キャッシュが切れるとサービスが互いを見つけられなくなりました。下の注記は報告を読んだこのガイドの解釈です。型と対策は Part 14 で整理します。

ID の方式は、順序・局所性・漏れる情報で選ぶ
スライド 148 のテキストと解説
ID の方式は、順序・局所性・漏れる情報で選ぶ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 どの方式も何かを払う。時刻に基づく ID の大小を「どちらが先か」の判定に使わない 仕様・文書 RFC 9562(2024-05)§2.1・§6.13・§8/PostgreSQL 18 文書 9.14(2026-11 確認) 指針・報告 Twitter Snowflake README(2010 年版) 書籍 DDIA 2e 10.2 節 p.414〜416 方式 | 作り方 | 得るもの | 払うもの 連番(単一の発番元) | 1 つのノードが数を増やして配る | ID の順序が作成順と一致する | 発番元が単一障害点とボトルネックになる。離れたリージョンからは遅い UUIDv4 | 乱数 122 ビット | どのノードでも、調整なしで作れる | 時刻順でなく、DB の索引の局所性が悪い。新旧を比べられない UUIDv7 | 先頭 48 ビットが Unix 時刻(ミリ秒)。残りは乱数など | 調整なしで、おおよそ時刻順。PostgreSQL 18 に uuidv7() がある | 生成した時刻が ID から分かる。別のノードが作った ID との前後は保証されない Snowflake 方式 | 64 ビット:時刻 41+マシン ID 10+連番 12 | 64 ビットに収まり、おおよそ時刻順 | マシン ID の割り当てが要る。時計が戻ると、追いつくまで発番を拒む 注意 RFC 9562 §8:UUID を推測されにくいものと仮定しない(SHOULD NOT)。持っているだけで権限になる識別子として使ってはならない(MUST NOT)。DB には、可能なら 128 ビットのバイナリで格納する(§6.13、SHOULD) 148
解説

単一のノードが連番を配る方式は、ID の順序が作成順と一致します。書籍は問題を 3 つ挙げます。単一障害点になること、離れたリージョンから遅いこと、ボトルネックになることです。UUID のバージョン 4 は乱数で、調整なしで作れますが、RFC 9562 は 2.1 節で、時刻順でない UUID は索引の局所性が悪いと述べています。バージョン 7 は先頭に Unix 時刻のミリ秒を置きます。PostgreSQL 18 には uuidv7() 関数があります。公式文書のこのページには、単調に増えることの保証の範囲は書かれていません。Snowflake 方式は 2010 年の README によると 64 ビットで、時計が戻ると、最後に発番した時刻を過ぎるまで発番を拒みます。書籍は、時刻に基づく方式の順序の保証は連番よりかなり弱いとしています。分散 SQL での書き込みの偏りは、確かめられる一次資料が無かったので、この表には入れていません。出典の補足:RFC 9562 は §5.4 と §5.7 も参照しています。

製品の主張は、第三者の検証と版で確かめる
スライド 149 のテキストと解説
製品の主張は、第三者の検証と版で確かめる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 「強い一貫性」と書いてあることと、障害の下でそう動くことは別。どの検証も不在の証明にはならない 仕様・文書 Jepsen 分析一覧・「etcd 3.4.3」(2026-11 確認)/Yuan ほか 2014(OSDI)Finding 3・9・10 書籍 DDIA 2e 9.4.5 節 p.380〜384 手法 | 何を動かすか | 分かること | 限界・費用 モデル検査(TLA+ など) | 設計を書き下した仕様 | 設計の段階の誤り | 実装が仕様どおりとは限らない 決定的シミュレーション(DST) | 実際のコード。ネットワーク・時計・I/O は模擬 | 失敗した実行を、同じ順序で再現できる | 決定的に動かすための作り込みが要る フォールトインジェクション(Jepsen など) | 実際のバイナリと実際のクラスタ | 障害の下での実際のふるまい | 実行は非決定的。誤りは見つかるが、正しさは証明できない Jepsen の一覧を版まで見る(2026-11 確認) CockroachDB は beta-20160829(2017-02)、Redpanda は 21.10.1(2022-04)が対象 Spanner・DynamoDB・Aurora は一覧に無い(RDS for PostgreSQL 17.4 は 2025-04 にある) etcd 3.4.3:KV は試験の範囲で厳密な直列化可能性に違反なし。ロックは相互排他なし 自分のコードも対象(Yuan ほか 2014) 5 つの分散システムの障害 198 件を分析 壊滅的な障害 48 件の 92% は、致命的でないエラーの処理の誤り 全体の 98% は 3 ノード以下、77% は単体テストで再現できる 149
解説

確かめる手法は大きく 3 つあります。モデル検査は、仕様のすべての状態を調べます。書籍は、仕様と実装が食い違っていく危険を指摘しています。決定的シミュレーションテストは、ネットワークや時計を模擬に置き換え、実際のコードを多数の順序で動かします。書籍は FoundationDB と TigerBeetle を例に挙げています。フォールトインジェクションは、動いている実物に障害を入れる手法で、代表が Jepsen です。Jepsen 自身が、誤りは見つけられるが正しさは証明できないと書いています。2026 年 11 月に分析の一覧を確かめたところ、CockroachDB は 2017 年公開の beta 版が対象で、Spanner、DynamoDB、Aurora の名前はありませんでした。マネージド製品では、Amazon RDS for PostgreSQL 17.4 の分析が 2025 年 4 月にあります。etcd 3.4.3 の KV についての結論も、試験の範囲で違反が見つからなかった、というものです。検証の有無だけでなく、どの版で何が見つかったかを読みます。右の箱は自分たちのコードの話です。Yuan ほかの論文は、Cassandra など 5 つのシステムの障害 198 件を分析しました。小さな構成でのテストに意味があります。

設計レビューで問うこと:頼り先が止まったら
スライド 150 のテキストと解説
設計レビューで問うこと:頼り先が止まったら 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 合意の証明は要らない。頼り先・止まり方・時計・古い持ち主を、根拠つきで答えられるかを見る 仕様・文書 Jepsen「etcd 3.4.3」/Bailis ほか PVLDB 7(3)/Huang ほか 2017・2022 指針・報告 Amazon Builders' Library(2019-12)/Roblox・Cloudflare・OpenAI の事後報告 書籍 DDIA 2e 9 章 p.341〜386、10 章 p.397〜440 問い | なぜ問うか | 危ない兆候 どこで合意に頼っているか(リーダー選出・ロック・一意性・発見) | 合意は、過半数が通信できるときだけ進む | 依存の一覧が無い。全サービスが 1 つのクラスタに載る それが進まなくなったら、何が止まるか。試したか | 事故の被害は、頼る側の作りで決まった | 要求のたびに引く。キャッシュが無い。監視も同じ基盤 時計の時刻で、順序や勝ち負けを決めていないか | LWW は、ずれた時計で書き込みを黙って捨てる | 「NTP で同期しているから大丈夫」。端末の時計を使う 経過時間と期限を、どの時計で測っているか | 実時間クロックは飛び、戻る | 現在時刻の差で測る。負の経過時間を想定していない ロックの後の書き込みを、資源の側は古い持ち主から拒めるか | リースは、止まったプロセスの上で切れる | 「ロックしているから二重実行は無い」。番号の検査が無い タイムアウトと再試行は、どの層で何回か。負荷を落とせるか | 再試行は、層を重ねると掛け算で増える | 既定値のまま。全層で再試行。上限もばらつきも無い ヘルスチェックは、利用者から見た成功率・遅延と合うか | グレー障害は、検知器には健全に見える | ハートビートとプロセスの生存だけを見ている この操作に要るのは最新性か、分離か。なぜその水準か | 水準ごとに、遅延と分断時のふるまいが違う | 「強整合」「CP」の一言で済ませる。全部を最強にする 製品の主張は、どの版で、誰が、どう確かめたか | 文書の主張と障害時のふるまいは食い違いうる | 「強い一貫性と書いてある」。検証の版が使う版より古い 150
解説

この Part の内容を、設計レビューの問いにまとめます。上の 3 行が、扉で挙げた 3 つの問いです。1 行目は、リーダーの選出、ロック、ユニーク性制約(一意性の保証)、サービスの発見が、どのクラスタに載っているかを一覧にできるかを聞きます。2 行目は、答えが「分からない」なら、障害を入れて試す価値があります。3 行目は時計で、「NTP で同期しているから大丈夫」は答えになりません。5 行目はロックです。「ロックしているから二重実行は無い」という説明には、資源の側が古い持ち主を拒めるかを聞き返します。6 行目の、既定値のまま、全層で再試行、上限なし、という組み合わせは、準安定障害の入口です。8 行目は、「強整合」や「CP」の一言で終わらせず、操作ごとに何が要るかを聞きます。9 行目は、検証の版が使う版より古くないかを見ます。この表は、Part 17 の一覧表にも入ります。

まとめ:信用できない前提で、頼り先と止まり方を決める
スライド 151 のテキストと解説
まとめ:信用できない前提で、頼り先と止まり方を決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 基礎 合意の理論を覚えるより、3 つの問いに答えられる設計にする 指針・報告 Roblox・Cloudflare・OpenAI の事後報告(Part 14 で型に整理) 書籍 DDIA 2e 9.5 節 p.384〜386、10.4 節 p.437〜440 どこで合意に頼っているか 「1 つに決める」場面だけに使う 設定の配布や発見は、古くてもよい作りに 自作せず、検証された調整サービスを使う 進まなくなったら何が止まるか 合意は、誤るのではなく進まなくなる 止まるか、最後の情報で続けるかを決める 監視と復旧の手段を同じ基盤に載せない 時計で順序を決めていないか 経過時間はモノトニッククロックで測る 時刻で書き込みの勝ち負けを決めない ロックの後は、資源の側で古い番号を拒む 線形化可能性の代償は平常時の遅さ。CAP で二分せず、操作ごとに要る保証を書く。製品の主張は、第三者の検証と版で確かめる Part 11 は、トランザクションの外で正しさを保つ方法(冪等な受け手、サーガ、照合)を扱う 151
解説

Part 10 のまとめです。ネットワークは遅れ、失われ、その区別がつきません。時計は飛び、戻ります。プロセスは任意の時点で止まります。この前提の上で、3 つの問いに答えられる設計にします。1 つ目は、どこで合意に頼っているかです。合意が要るのは、1 つに決める場面です。設定の配布やサービスの発見は、古くてもよい作りにできます。2 つ目は、合意が進まなくなったら何が止まるかです。事後報告の 3 件では、進まなくなったときに、頼る側の作りが被害を決めました。止まるのか、最後に得た情報で続けるのかを、先に決めておきます。3 つ目は、時計に頼って順序を決めていないかです。加えて、線形化可能性の代償は平常時の遅さなので、CAP で二分せず、操作ごとに要る保証を書きます。次の Part 11 では、サービスをまたぐ整合性を扱います。フェンシングトークンの考え方はそこでも使います。

PART 11 サービスをまたぐ整合性
スライド 152 のテキストと解説
PART 11 サービスをまたぐ整合性 遅れは許し、食い違いは許さない。分散トランザクションを避け、冪等な受け手・サーガ・照合で完全性を保つ このPartで答えられるようになる問い サービスをまたぐと、DB のトランザクションの何が使えなくなるか 「厳密に 1 回」は、何から何までの保証か サーガは何を保証し、何を保証しないか 仕組みを入れたあと、正しさをどう確かめるか 152
解説

Part 11 は、ステップ 7 の続きです。Part 9 では、1 つのデータベースの中で、どの異常をどこで防ぐかを決めました。この Part では、処理が複数のサービスにまたがるときを扱います。サービスごとにデータベースを分けると、1 つのトランザクションで全体を囲むことはできません。そこで、まず選択肢の地図を見て、2 相コミットを異なるシステムの間で使うと何が起きるかを確かめます。次に、一貫性という言葉を、適時性と完全性の 2 つに分けます。遅れは許せても、食い違いは許せない、という整理です。そのうえで、冪等な受け手、厳密に 1 回という言葉の範囲、サーガ、補償の限界、耐久実行、最後の照合を順に見ます。アウトボックスと CDC のしくみは Part 6、分離レベルは Part 9 で扱っているので、ここでは繰り返しません。

サービスをまたぐと DB のトランザクションは届かない
スライド 153 のテキストと解説
サービスをまたぐと DB のトランザクションは届かない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 原子性と分離性を、どの手段に置き換えるか。選択肢ごとに得るものと払うものが違う 指針・報告 AWS Prescriptive Guidance saga orchestration(2026-11 確認。任意の推奨) 書籍 DDIA 2e 8.4.2 節 p.323〜324・8.4.3 節 p.328/『ハードパーツ』9.7 節 p.264〜268 選択肢 | 得るもの | 払うもの 境界を引き直し、1 つの DB に収める | 原子性と分離性を DB が受け持つ | サービスの独立性(Part 3) 異なる技術をまたぐ 2 相コミット(XA) | 複数の資源にまたがる原子性 | コーディネーターが落ちると、ロックを持ったまま止まる 分散 DB の内部のトランザクション | その製品のノード間の原子性と分離性 | 製品の外(他サービス、ブローカー、外部 API)には届かない 冪等な受け手+少なくとも 1 回の配信 | 分散トランザクションなしで、実質 1 回の効果 | 冪等キーの設計と保存 サーガ(ローカルトランザクションの列) | 各サービスが自分の DB でコミット。長いロックなし | 分離性が無い。補償を書く。補償は失敗しうる 耐久実行(ワークフローエンジン) | 進み具合を失わない。再試行を基盤が持つ | 分離性は得られない。新しい共通の依存先になる 照合と謝罪 | 食い違いを検出して直せる | 業務側の手順(返金、取り消し、人の対応) 「分散トランザクション」と聞いたら、同じ製品の中の話か、異なる技術をまたぐ話かを先に確かめる 153
解説

架空の宅配注文サービスで考えます。注文を受けると、注文、在庫、決済、通知の 4 つのサービスが動きます。それぞれが自分のデータベースを持つので、1 つのトランザクションで全部を囲めません。選択肢は表のとおりです。1 つ目は、境界を引き直して 1 つのデータベースに収めることで、これは今でも有効な選択です。2 つ目は、異なる技術をまたぐ 2 相コミットで、次のスライドで弱点を見ます。3 つ目の分散データベース内部のトランザクションは、同じ名前でも別物で、その製品の中だけを受け持ちます。DDIA はこの 2 種類がよく混同されると注意しています。『ハードパーツ』は「分散トランザクション」を、サービスをまたぐ業務処理そのものの意味で使うので、読むときは語の範囲に気をつけます。4 つ目以降が、この Part の中心です。どれか 1 つを選ぶのではなく、冪等な受け手を土台に、必要な所でサーガや耐久実行を足し、最後に照合で確かめる、という組み合わせになります。

2 相コミットは、調整役が落ちると参加者が止まる
スライド 154 のテキストと解説
2 相コミットは、調整役が落ちると参加者が止まる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 「はい」と答えた参加者は、自分だけではコミットもアボートもできず、ロックを持ったまま待つ 仕様・文書 PostgreSQL 18 文書 PREPARE TRANSACTION(2026-11 確認) 書籍 DDIA 2e 8.4.1 節 p.319〜323・8.4.2 節 p.325〜327・8.4.3 節 p.328 コーディネーター 参加者 1(DB) 参加者 2(ブローカー) ① 準備を依頼 ②「はい」と約束 ②「はい」と約束 ③ コミットを決定し、 ログに記録 落ちる(④ を送る途中) 未確定:ロックを持ったまま待つ ④ コミット済み 未確定(in doubt) タイムアウトでは解けない。参加者 1 だけがアボートすると、コミット済みの参加者 2 と食い違う。コーディネーターが戻るまで、行のロックが残る 異なるシステム間(XA)で避ける理由 コーディネーターは、アプリと同じプロセスで動くことが多い そのログを失うと、管理者が手作業で解決する システム間のデッドロック検出や SSI とは連携できない 154
解説

2 相コミットは、複数のノードにまたがって、全部コミットか全部アボートかを保証する手順です。調整役をコーディネーター、データベースやブローカーを参加者と呼びます。フェーズ 1 で、コーディネーターは全参加者に準備を依頼します。参加者は「はい」と答えた時点で、後で必ずコミットできると約束し、アボートする権利を手放します。全員が「はい」なら、コーディネーターはコミットの決定を自分のログに書き、フェーズ 2 でコミットを送ります。問題は図の右端です。決定の後、全員に伝える前にコーディネーターが落ちると、まだ聞いていない参加者は、コミットもアボートもできません。この状態を未確定と呼びます。未確定の間、参加者は行のロックを持ち続けるので、ほかのトランザクションが待たされます。PostgreSQL の公式文書も、準備済みのまま長く置くとロックが残り VACUUM を妨げると警告し、トランザクションマネージャを書くのでなければ使わないほうがよいと書いています。出典の補足:PostgreSQL 18 文書の該当箇所は、PREPARE TRANSACTION の Notes と Caution です。

一貫性を「適時性」と「完全性」に分けて考える
スライド 155 のテキストと解説
一貫性を「適時性」と「完全性」に分けて考える 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 遅れは待てば解消する。食い違いは待っても直らない。許せるのは前者だけ 書籍 『データ指向アプリケーションデザイン 第2版』13.3.3 節 p.566〜567(引用は p.567) 適時性(timeliness) 意味:利用者が最新の状態を見られる 破れると:一時的。待って読み直せば解消する 例:カードの明細に、直近の取引がまだ出ていない 完全性(integrity) 意味:欠落・矛盾・誤りが無い。導出データが元と合っている 破れると:残り続ける。検査と修復が要る 例:請求したのに、加盟店に支払われていない | 適時性 | 完全性 ACID のトランザクション | まとめて提供する | まとめて提供する 非同期のイベントで結ぶ | 待つ仕組みを作らない限り、保証されない | 分散トランザクションなしで保てる(次のスライド) 本書は「完全性の違反は壊滅的」と書く。どこまでの遅れを許すかは業務と決め、食い違いは仕組みで防ぐ 155
解説

ここが、この Part の考え方の中心です。DDIA は 13.3.3 節で、一貫性という言葉が、別々に考える価値のある 2 つの要件を混ぜていると述べます。1 つは適時性で、利用者が最新の状態を見られることです。破れても一時的で、待って読み直せば解消します。もう 1 つは完全性で、データの欠落や矛盾や誤りが無いことです。こちらは破れると残り続け、待っても直りません。検査と修復が要ります。本書は、ほとんどのアプリケーションでは完全性のほうがはるかに重要だとし、完全性の違反は壊滅的だと書いています。例はクレジットカードの明細です。直近 24 時間の取引がまだ出ていなくても驚きませんが、残高の合計が合わない、請求したのに加盟店に払われていない、は許されません。ACID のトランザクションは 2 つをまとめて提供するので、区別を意識せずに済みました。非同期のイベントで結ぶと 2 つは切り離されます。だから、サービス間では、どこまでの遅れを許すかを業務と決め、完全性は別の仕組みで守ります。

完全性は、4 つの仕組みの組み合わせで保てる
スライド 156 のテキストと解説
完全性は、4 つの仕組みの組み合わせで保てる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 1 件のイベントに書き、残りはそこから導出し、要求 ID で重複を捨て、作り直せるようにする 書籍 DDIA 2e 13.3.3 節 p.567〜569(4 つの仕組みは p.567〜568、緩やかな制約は p.568〜569) 仕組み | 何をするか | このガイドで扱う場所 1. 書き込みを 1 件のメッセージにする | 1 回の操作を 1 件のイベントにして、1 か所にアトミックに書く | アウトボックス、ログ(Part 6) 2. 残りは決定的に導出する | ほかの状態の更新は、そのイベントから、同じ入力なら同じ結果になる処理で作る | 導出データ(Part 12) 3. 要求 ID を端から端まで通す | クライアントが作った ID を全段に渡し、重複を捨てる | 冪等な受け手(次のスライド) 4. メッセージを不変にする | 処理のバグで壊れても、元のイベントから導出し直せる | 作り直し(Part 12) 制約は、後で直してよいことが多い 在庫を超えて売った → 追加で仕入れ、遅れを詫びる 謝罪の費用を許容できるかは、業務の判断 注意 取り返しのつかない操作(送金、発送)の前には、検証を済ませる。ここだけは同期の調整を入れてよい 156
解説

DDIA は、分散トランザクションやアトミックコミットを使わずに完全性を保つ仕組みを、4 つ挙げています。1 つ目は、書き込み操作の内容を 1 件のメッセージにして、1 か所にアトミックに書くことです。Part 6 のアウトボックスは、これを自分のデータベースの 1 トランザクションで行う方法です。2 つ目は、ほかの状態の更新を、そのイベントから決定的な処理で導出することです。3 つ目は、クライアントが作った要求 ID を、すべての段に渡して、重複を捨てることです。次のスライドで詳しく見ます。4 つ目は、メッセージを不変にして、導出データを作り直せるようにすることです。処理のバグで壊れても、元のイベントからやり直せます。これは Part 12 で扱います。本書はさらに、在庫を超えて売らないといった制約の多くは、一時的に破れて後で直してもよいと述べます。そうした謝罪の費用を許容できるかは業務の判断です。ただし、取り返しのつかない操作の前には検証を置きます。

冪等な受け手:処理済みの記録と更新を同時に書く
スライド 157 のテキストと解説
冪等な受け手:処理済みの記録と更新を同時に書く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 冪等キーは要求を出した端が作り、状態を変える端まで通す 仕様・文書 Stripe API Idempotent requests/draft-ietf-httpapi-idempotency-key-header-08(2026-10 付の草案。未成立。2026-11 確認) 書籍 DDIA 2e 8.4.4 節 p.328〜330・13.3.1 節 p.558〜560 クライアント 冪等キーを作る 送り手のサービス キーをそのまま渡す ブローカー 少なくとも 1 回届ける 受け手のサービス キーで重複を捨てる -- 受け手:1 つのトランザクションで BEGIN; INSERT INTO processed_requests (idem_key) VALUES (:key); -- ユニーク性制約。重複ならアボート UPDATE stock SET reserved = reserved + :qty WHERE item_id = :item; COMMIT; -- コミットの後で確認応答を返す 決めること | 例(文書の記述。未検証) 誰がキーを作るか | 要求を出した端(クライアント) いつまで保存するか | Stripe v1:24 時間以上で消されうる 同じキーで中身が違う要求 | Stripe:エラー。IETF 草案:422 処理中に届いた重複 | IETF 草案:409(いずれも SHOULD) ケーススタディ 冪等キーなし/ありで、障害を入れたときの重複件数を題材 A で実測する(結果はケーススタディ) 157
解説

冪等とは、1 回実行しても、何回実行しても、効果が同じになることです。配信は少なくとも 1 回が既定なので(Part 6)、受け手は同じメッセージが 2 回来る前提で作ります。DDIA の手順はこうです。メッセージごとに一意の ID を持たせ、受け手のデータベースに処理済み ID の表を用意します。受け手は、1 つのトランザクションの中で、ID を挿入し、業務の更新を行い、コミットします。コミットの後でブローカーに確認応答を返します。コミットの後、確認応答の前に落ちると、同じメッセージがもう一度届きますが、ID がすでにあるので捨てられます。大事なのは、キーを誰が作るかです。受け手やブローカーが採番すると、利用者がタイムアウトで押し直した 2 回目の要求は、別の要求に見えます。だから、要求を出した端がキーを作ります。Stripe の API v1 は、同じキーでパラメータが違えばエラーにします。IETF の Idempotency-Key は 2026 年 10 月付の草案で、RFC ではなく、内容は変わりえます。Stripe のふるまいは公式文書の記述で、このガイドでは検証していません。

「厳密に 1 回」は、その枠組みの中だけの保証
スライド 158 のテキストと解説
「厳密に 1 回」は、その枠組みの中だけの保証 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 製品ごとに「1 回」の範囲が違う。公式文書の記述(2026-11 確認)で、クラウド製品は未検証 仕様・文書 Apache Kafka 4.4 文書 Design/BigQuery Storage Write API/Pub/Sub exactly-once 指針・報告 AWS Step Functions「Choosing workflow type」 書籍 DDIA 2e 13.3.1 節 p.560〜561(エンドツーエンド原則。原典は Saltzer ほか 1984、ACM TOCS 2(4)) 製品 | 「1 回」が成り立つ範囲と条件 | 範囲の外・既定 Apache Kafka 4.4 | Kafka から読み、処理し、Kafka に書く流れ。トランザクション+read_committed で読む | 外部の DB への書き込みは相手の協力が要る。既定は少なくとも 1 回 BigQuery Storage Write API | committed 型のストリームで、クライアントがオフセットを指定したとき | 既定のストリームは少なくとも 1 回 Pub/Sub | pull 型の購読で、購読者が同じリージョンで接続したときの配信 | push・export 型は対象外。複数リージョンにまたがると重複しうる Step Functions(Standard) | Retry を指定しない限り、タスクと状態を 2 回以上実行しない | Express は非同期が少なくとも 1 回、同期が多くとも 1 回 よくある誤り 「Kafka が厳密に 1 回だから、DB 側は重複を考えない」。Kafka の保証は Kafka の中まで。DB に書く受け手は冪等にするか、オフセットを出力と同じ場所に保存する リーダーの視点 下の層の「1 回」は、利用者の押し直しやタイムアウト後の再試行を消せない。重複の抑制は端から端までで設計する 158
解説

Kafka 4.4 の公式文書は、Kafka のトピックから読み、処理し、Kafka のトピックに書く流れについて、トランザクションを使うプロデューサーと、read_committed で読むコンシューマーを組み合わせれば厳密に 1 回にできる、と書いています。ほかのシステムへ書くときは、相手との協力が要るとし、2 相コミットではなく、出力と同じ場所にオフセットを保存する方法を勧めています。それ以外の既定は、少なくとも 1 回です。プロデューサーの冪等性は既定で有効ですが、これはプロデューサーの再送による重複を防ぐもので、トランザクションは既定では使われません。コンシューマーの isolation.level の既定は read_uncommitted で、中断されたトランザクションのメッセージも読みます。BigQuery の Storage Write API は、既定のストリームが少なくとも 1 回で、厳密に 1 回はクライアントがオフセットを指定したときだけです。Pub/Sub の厳密に 1 回は pull 型の購読だけが対象で、push 型と export 型は対象外です。DDIA は、Saltzer ほかの 1984 年の論文のエンドツーエンド原則を引いて、下の層の重複の抑制は、利用者の再操作による重複を消せないと述べます。だから受け手の冪等性が要ります。

サーガは分離性を持たない:原論文の時点から
スライド 159 のテキストと解説
サーガは分離性を持たない:原論文の時点から 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 各サービスが自分の DB でコミットし、失敗したら補償で打ち消す。途中の状態は他から見える 仕様・文書 Garcia-Molina・Salem「Sagas」SIGMOD 1987 §1 指針・報告 AWS Prescriptive Guidance saga/Azure Architecture Center Saga(2026-11 確認。任意) 書籍 DDIA 2e 13.3.3 節 p.568(補正トランザクション) T1 注文を作る 注文サービスがコミット T2 在庫を引き当てる 在庫サービスがコミット T3 決済する 失敗 C1 注文を取り消す C2 引当を戻す 逆向きに補償する 保証するのは「全部終わる」か「途中まで+その補償」のどちらか。T2 の後、C2 の前に、他の処理は引当済みの在庫を見る 原論文(1987 年) 対象は 1 つの DB の中の、長いトランザクション 目的は、長く握るロックを手放すこと 途中の結果は、ほかから見える 補償は、元の状態に戻すとは限らない リーダーの視点 サーガを選ぶと、原子性の代わりは補償、分離性の代わりは自分たちの設計(「保留中」の状態、セマンティックロックなど)になる 159
解説

サーガは、補償つきのローカルトランザクションの列です。図は宅配注文の例です。決済が失敗したら、在庫の引当を戻し、注文を取り消す、という補償を逆向きに実行します。原論文は、Garcia-Molina と Salem が 1987 年の SIGMOD で発表したものです。動機は、長く生きるトランザクションがデータベースの資源を長く握ることでした。紙幅の都合で、1 つの集中型のシステムだけを扱うと断っていて、マイクロサービスのための提案ではありません。保証するのは、全部が終わるか、途中までとその補償が実行されるか、のどちらかです。サーガはほかのサーガの途中の結果を見ることがある、と最初から書かれています。AWS と Azure の設計指針は、サービスごとにデータベースを持つ構成でサーガを示し、注意点に、分離性が無いこと、参加者を冪等にすることを挙げます。DDIA の本文にサーガという語は無く、補正トランザクションとして原論文を引いています。

サーガは 3 つの軸で整理し、調整役の得失で選ぶ
スライド 160 のテキストと解説
サーガは 3 つの軸で整理し、調整役の得失で選ぶ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 通信・整合性・調整の 3 軸で 8 通り。まず決めるのは、流れと状態を誰が持つか 指針・報告 AWS Prescriptive Guidance saga choreography・orchestration/Azure Saga(任意) 書籍 『ハードパーツ』表 12-1 p.324・表 11-1 p.306・表 11-5 p.315・11.3 節 p.316〜317 軸 | 2 つの値 | 問うこと 通信 | 同期 / 非同期 | 呼び出し側は結果を待つか 整合性 | アトミック(補償で全部戻す)/ 結果整合性 | 失敗したとき、全部戻すか、後で揃えるか 調整 | オーケストレーション / コレオグラフィ | 流れと状態を誰が持つか | オーケストレーション | コレオグラフィ 進め方 | 中央の調整役が順に指示し、状態を持つ | 各サービスがイベントを受けて、次へ渡す 得るもの | 流れ・状態・エラー処理が 1 か所に集まる | 応答性、拡張性、サービスの分離 払うもの | 調整役が単一障害点になり、並列性も下がる | 状態の持ち主がいない。エラー処理と回復が難しい 向く場面 | 境界条件やエラー条件の多い、複雑な流れ | エラーがまれで、高いスケールが要る単純な流れ 用語の範囲:『ハードパーツ』は 8 通りすべてをサーガと呼び、「アトミック」に分離性は含まない。DDIA 2e の本文に「サーガ」の語は無い 160
解説

『ハードパーツ』は、サービスをまたぐ処理の形を 3 つの軸で整理します。通信が同期か非同期か、整合性がアトミックか結果整合性か、調整がオーケストレーションかコレオグラフィか、です。組み合わせは 8 通りで、同書は名前を付けていますが、暗記させる意図は無いと書いています。ここで用語に注意が要ります。同書の「アトミック」は、失敗時に補償で全部戻すことを狙う、という意味で、分離性はありません。また同書は 8 通りすべてをサーガと呼びますが、原論文や AWS・Azure の指針でいうサーガは、補償つきのローカルトランザクションの列です。各パターンの評価値は著者の定性的な評価なので、このガイドでは使いません。オーケストレーションは、中央の調整役が流れと状態とエラー処理を持ちます。コレオグラフィは、調整役を置かず、各サービスがイベントを受けて次へ渡します。同書の判断基準は、エラー条件が多い複雑な流れならオーケストレーション、エラーがまれで高いスケールが要るならコレオグラフィ、です。

補償は失敗しうる。巻き戻さず状態で管理する案
スライド 161 のテキストと解説
補償は失敗しうる。巻き戻さず状態で管理する案 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 補償の問題は 4 つ。失敗を「状態」として持ち、裏で直す設計が代案になる 指針・報告 Azure Architecture Center Compensating Transaction(2026-11 確認。任意の推奨) 書籍 『ハードパーツ』12.4 節 p.357〜362(表 12-12 は p.362)・12.2 節 p.350〜354(表 12-11 は p.354) 補償の問題 | 何が起きるか 分離できない | 途中の状態が、ほかの処理から見える 副作用が残る | 取り消す前に、下流がそのデータで先へ進む 補償が失敗しうる | 利用者に何を返すかが決まらない。人の介入が要る 応答が遅くなる | 補償が終わるまで、利用者を待たせる 代案:巻き戻さず、状態として持つ 失敗を状態にして、利用者には成功を返す 裏で再試行し、直らなければ人に通知する 取りうる状態と遷移を、表に書き出す 払うもの:揃うまで、データがずれたまま 注文済み 決済済み 配達手配済み 通知未送信 裏で再試行中 完了 リーダーの視点 まず再試行、補償は最後の手段。取り消せない操作(送金、発送、メール)は、検証が済んでから行う 161
解説

補償は、いつも成功するとは限りません。『ハードパーツ』は 12.4 節で補償の問題を説明し、表 12-12 で 4 つにまとめています。分離ができない、取り消す前にほかのサービスが先へ進む、補償そのものが失敗しうる、補償が終わるまで利用者を待たせる、の 4 つです。原論文も、補償が完了できないときの答えは人手の介入で、美しくはないが実用的だと書いていました。同書の代案は、巻き戻す代わりに、サーガの状態を管理することです。宅配注文の例なら、通知の送信に失敗しても注文は取り消さず、通知未送信という状態にして、利用者には成功を返します。裏で再試行し、直らなければ人に知らせます。取りうる状態と遷移を表に書き出すと、エラー条件の洗い出しにも使えます。払うものは、揃うまでデータがずれたままになることです。Azure の指針も、まず再試行し、補償は最後の手段にすること、補償の各ステップを冪等にして進み具合を記録すること、取り消せない操作は検証の後に置くことを勧めています。

耐久実行は進み具合を守る。分離性と冪等性は別
スライド 162 のテキストと解説
耐久実行は進み具合を守る。分離性と冪等性は別 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 ワークフローエンジンは、各ステップの結果を記録し、障害の後は続きから再開する 仕様・文書 Temporal 文書 Activities(2026-11 確認。未検証) 書籍 DDIA 2e 5.2.3 節 p.180〜183 ワークフローのコード 注文 → 在庫 → 決済 → 通知 エンジンが記録する 各ステップの呼び出しと結果をログへ 障害の後 済んだステップは飛ばし、続きから再開 受け持つこと どこまで進んだか、を失わない 失敗したタスクの再実行 済んだ呼び出しは実行せず、記録した結果を返す 受け持たないこと 分離性(途中の状態は他から見える。本ガイドの整理) 外部の API への重複。呼ばれる側の冪等キーが要る コードの決定性。乱数、時計、呼び出し順の変更で壊れる よくある誤り 「ワークフローエンジンがあるから、補償も冪等性も要らない」は誤り。エンジンの「1 回」は、エンジンが記録した範囲の中の話 162
解説

耐久実行は、DDIA の訳では「耐久性のある実行」です。ワークフローエンジンのうち、Temporal や Restate のように、処理の進み具合を失わないことを受け持つものを指します。しくみは、呼び出しと状態の変更を、先行書き込みログのような永続ストレージにすべて記録することです。タスクが失敗すると、エンジンは再実行しますが、すでに完了した呼び出しは飛ばし、記録してある結果を返します。ただし、分離性は得られません。これは書籍の記述ではなく、本ガイドの整理です。また、外部のサービスを呼んだ後、結果を記録する前に落ちれば、再実行で相手には 2 回届きます。DDIA は、外部のサービスが冪等な API を提供し、開発者が一意の ID を付け忘れないことが要ると書いています。Temporal の公式文書も、アクティビティを冪等にするよう勧めています。もう 1 つの制約は決定性です。再実行で同じ順序の呼び出しを期待するので、乱数や時計、呼び出し順の変更で壊れます。基盤そのものが共通の依存先になる点は、Part 14 で扱います。

最後は照合で確かめる:信頼しつつも検証する
スライド 163 のテキストと解説
最後は照合で確かめる:信頼しつつも検証する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 どの仕組みにもバグはある。食い違いを端から端まで検査し、直す手順を用意する 書籍 DDIA 2e 13.3.4 節「信頼しつつも検証を」p.570〜573(監査は p.571、エンドツーエンドの検査は p.572) 記録のシステム 注文サービスの DB 流れ アウトボックス、CDC、ブローカー 相手のサービス・導出データ 在庫、決済、分析基盤 端から端まで突き合わせる(途中の部品は、まとめて検査の対象になる) DDIA が勧めること 壊れていないかを見つけ、直し、原因を追える 検査は端から端までで行う バックアップからの復元も、ときどき試す 本ガイドの考え(一次資料なし) 突き合わせるもの:件数、金額の合計、キーの集合。見つけた後の修復と謝罪(返金、取り消し、人の対応)の手順も決めておく ケーススタディ 書き手の ID と連番で、欠落・重複・順序のずれを題材 A で実測する(結果はケーススタディ) 163
解説

ここまでの仕組みを全部入れても、正しさは保証されません。DDIA は 13.3.4 節で、広く使われているデータベースにもバグがあり、アプリケーションのコードにはもっと多いと述べます。だから、データが壊れていないかを見つける方法を持ち、直して、原因を追えるようにします。検査は端から端までで行うのがよい、というのが本書の主張です。検査に含める範囲を広げるほど、途中にある記憶装置も、通信も、個々のサービスや計算の手順も、まとめて確かめたことになります。サービスをまたぐ処理では、これを照合と呼ぶことにします。宅配注文なら、注文と決済の件数と金額の合計が合うか、注文のイベントと在庫の引当が 1 対 1 で対応しているか、です。何を突き合わせるかの具体は、一次資料が無いので、本ガイドの考えとして示します。食い違いが見つかったときの修復と、利用者への謝罪、つまり返金や取り消しや人の対応の手順も、設計の一部です。題材 A では、書き手の ID と連番を使って、欠落、重複、順序のずれを数えます。

設計レビューで問うこと:サービスをまたぐ整合性
スライド 164 のテキストと解説
設計レビューで問うこと:サービスをまたぐ整合性 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 範囲を問う。何から何までの保証か、破れたら誰がどう気づくか 指針・報告 Azure Architecture Center Saga・Compensating Transaction(任意の推奨) 書籍 DDIA 2e 8.4.2〜8.4.4 節 p.323〜330・13.3 節 p.558〜573/『ハードパーツ』12.2〜12.4 節 p.350〜362 問い | なぜ問うか | 危ない兆候 この処理は、遅れを許すのか、食い違いを許すのか | 適時性と完全性は別の要件 | 「結果整合性だから」で話が終わる 「分散トランザクション」は製品の中の話か、異なる技術をまたぐ話か | 後者は調整役の障害でロックが残る | 分散 DB の保証が、ブローカーや他サービスに及ぶと見なす 受け手は冪等か。キーは誰が作り、どこまで通し、いつまで持つか | 配信は少なくとも 1 回。再試行は端でも起きる | キーを受け手側で採番する。保存期間が再試行の間隔より短い 「厳密に 1 回」は、何から何までの範囲か | 保証は、その枠組みの中だけ | 「Kafka が保証するので DB は重複を考えない」 サーガの途中の状態を、他の処理が読むと何が起きるか | サーガに分離性は無い | 「保留中」の状態が無く、途中の値がそのまま見える 補償が失敗したら、誰がどう気づくか。取り消せない操作はいつ行うか | 補償は失敗しうる。原論文の答えも人手 | 補償が未実装。最初のステップが外部への送金 食い違いをどう検出し、誰が直すか | 仕組みを信頼しても、検証は要る | 照合の処理も、取り消しの手順も無い 164
解説

この Part の観点を、設計レビューの問いにまとめます。共通しているのは、範囲を問うことです。1 つ目は、遅れと食い違いを分けているかです。結果整合性という言葉だけで話が終わっていたら、どこまでの遅れを許すのか、食い違いをどう防ぐのかを聞きます。2 つ目は、分散トランザクションという言葉の中身です。分散データベースの保証を、ブローカーやほかのサービスにまで及ぶと見なしていないかを確かめます。3 つ目と 4 つ目は、冪等性と、厳密に 1 回の範囲です。キーを受け手の側で採番していると、利用者の押し直しを見分けられません。5 つ目と 6 つ目はサーガです。途中の状態が見えたとき何が起きるか、補償が失敗したら誰が気づくかを聞きます。補償が未実装のまま、というのはよくある兆候です。取り消せない操作が最初のステップにあるのも危ない形です。7 つ目は照合です。仕組みを入れた後に、食い違いを見つける手段と、直す手順があるかを確かめます。これらの問いは、Part 17 の一覧表にも入れます。

まとめ:遅れは許し、食い違いは仕組みと照合で防ぐ
スライド 165 のテキストと解説
まとめ:遅れは許し、食い違いは仕組みと照合で防ぐ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 7 書籍 DDIA 2e 8.4 節 p.317〜330・13.3 節 p.558〜573/『ハードパーツ』11・12 章 p.299〜363 2 相コミットは避ける 調整役が落ちると、参加者がロックを持ったまま止まる 適時性と完全性を分ける 遅れは業務と決めて許す。食い違いは許さない 受け手を冪等にする キーは要求を出した端が作る。「厳密に 1 回」は枠組みの中だけ サーガは分離性を持たない 補償は失敗しうる。途中の状態と、失敗時の扱いを設計する 耐久実行は進み具合を守る 分離性と、呼ばれる側の冪等性は、別に要る 最後は照合で確かめる 端から端まで突き合わせ、直す手順と謝罪の手順を持つ 次は Part 12(ステップ 8):1 件のイベントから導出データを作り、作り直す 165
解説

Part 11 のまとめです。サービスをまたぐと、データベースのトランザクションは届きません。異なる技術をまたぐ 2 相コミットは、コーディネーターが落ちると参加者がロックを持ったまま止まるので、避けます。代わりに、一貫性を適時性と完全性に分け、遅れは業務と決めて許し、食い違いは仕組みで防ぎます。土台は冪等な受け手です。冪等キーは要求を出した端が作り、状態を変える端まで通します。厳密に 1 回という言葉は、その枠組みの中だけの保証なので、範囲を確かめます。サーガは分離性を持たず、補償は失敗しうるので、途中の状態と、失敗したときの扱いを設計します。耐久実行は進み具合を守る道具で、分離性と冪等性は別に要ります。最後に、照合で確かめます。ステップ 7 はここまでです。次の Part 12 はステップ 8 で、導出データを作り、作り直す話に進みます。この Part で見た、1 件のイベントから残りを決定的に導出する、という考え方が、そのまま出発点になります。

PART 12 導出データを作り、作り直す
スライド 166 のテキストと解説
PART 12 導出データを作り、 作り直す 導出データの価値は、入力から作り直せること。ただし、作り直せるための前提は、既定の設定のままでは成り立たない このPartで答えられるようになる問い バッチとストリームは、何が同じで何が違うか ログから作り直すには、何がそろっている必要があるか 順序と時間について、ログは何を保証しないか 導出ストアを、止めずにどう入れ替えるか 166
解説

Part 12 は、9 つのステップの 8 番目、導出データを作り、作り直す話です。導出データとは、検索の索引、集計の表、キャッシュ、学習済みのモデルのように、ほかのデータを変換して作ったデータのことです。Part 3 で、正を 1 つに決め、ほかは導出データとすると決めました。この Part では、その導出データをどう作り、壊れたときや要件が変わったときに、どう作り直すかを扱います。前半でバッチとストリーム、従来のキューとログベースのブローカーの違いを説明します。中盤で、ログから作り直すための 6 つの前提、順序の限界、時間の扱いを見ます。後半で、導出ストアを入れ替える手順、マテリアライズドビューの製品ごとの違い、検査と系譜、削除の伝わり方を扱います。ストレージと列指向は Part 5、CDC のしくみは Part 6 で扱いました。

導出データの価値は、入力から作り直せること
スライド 167 のテキストと解説
導出データの価値は、入力から作り直せること 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 失っても、元のデータから再作成できる。だから、直せて、変えられて、捨てられる 指針・報告 Azure Architecture Center:Materialized View pattern(2026-11 確認) 書籍 DDIA 2e 1.1.3 節 p.10〜11、11 章 p.447〜448、13.1.2.2 節 p.541 記録のシステム 注文・在庫・決済の DB(正) 変更の流れ ログ、ファイル 導出の処理 バッチ、ストリーム 導出データ 索引・集計・キャッシュ・モデル 直せる バグで出力が壊れたら、コードを戻して再実行する 読み書きする DB の多くでは、書いた誤りは戻らない 変えられる 既存のデータを再処理し、別のモデルに組み替える 新旧のビューを並べて、少しずつ移せる 捨てられる 失っても、元から再作成できる 作り直しにかかる時間は、別に見積もる 本ガイドの考え(一次資料なし) 「作り直せるはず」は、実行するまで確かめられていない。レビューでは、作り直しを最後に実行した日と、かかった時間を問う 167
解説

最初に、導出データの価値を確かめます。『データ指向アプリケーションデザイン 第2版』は、導出データを、別のシステムの既存のデータを変換または処理した結果と定義し、失っても元のソースから再作成できると書いています。この性質から、3 つの利点が出ます。1 つ目は、直せることです。バグで出力が壊れても、コードを戻して再実行すれば、出力は正しくなります。本書はこれを、人為的障害への耐性と呼びます。読み書きするデータベースの多くでは、コードを戻しても、書いてしまった誤りは戻りません。2 つ目は、変えられることです。既存のデータを再処理すれば、まったく別のモデルに組み替えられます。3 つ目は、捨てられることです。Azure の設計指針は、ビューは完全に使い捨てにできると書いています。下の注記は本ガイドの考えです。作り直せるという性質は、手順を実行して初めて確かめられます。次のスライドから、作り方を順に見ます。

バッチ:入力を変えず、出力を丸ごと作り直す
スライド 168 のテキストと解説
バッチ:入力を変えず、出力を丸ごと作り直す 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 やり直せるのは、入力が読み取り専用で、処理が決定的で、再実行が置き換えになっているとき 仕様・文書 Apache Airflow 3.4.0 文書 Best Practices(2026-11 確認) 書籍 DDIA 2e 1.1.2 節 p.6〜7、11 章 p.447〜448、11.4.1 節 p.472〜473、11.4.4 節 p.476〜477 性質 | 中身 | 崩れる書き方 入力は読み取り専用 | 入力を変えないので、何度でもやり直せる | 入力の表やファイルを、ジョブが書き換える 出力は丸ごと作り直す | 失敗した出力は捨てる。再実行は追記ではなく置き換えにする | INSERT の再実行で行が重複する(UPSERT か、区画の置き換えにする) 処理は決定的 | 同じ入力から同じ出力。日付は、実行の対象期間から取る | now() で計算する。「最新のデータ」を読む 副作用を外に出さない | 本番の DB へは、まとめてロードするか、ストリームに流す | ジョブの中から、本番の DB へ 1 件ずつ書く ETL と ELT ETL:抽出 → 変換 → ロード ELT:ロードしてから、DWH の中で変換する どちらの出力も導出データ。作り直せる形に保つ オーケストレーターの役割 いつ、どの順で動かすか。失敗の再試行と記録 例:Airflow、Dagster、Prefect 再実行して同じ結果になるように書くのは、書き手の仕事 168
解説

バッチのジョブは、読み取り専用の入力を受け取り、出力を毎回ゼロから作ります。出力が気に入らなければ、消して、ロジックを直して、再実行できます。この性質を保つ条件を表にしました。Airflow の公式文書は、タスクの再実行で INSERT を使うと行が重複するので UPSERT に置き換えること、最新のデータではなく特定のパーティションを読み書きすること、タスクの中で Python の datetime の now() を重要な計算に使わないことを勧めています。4 行目は、導出データを本番に戻すときの話です。本書は、ジョブの中から本番のデータベースへ 1 件ずつ書くのは悪い方法だとし、ストリームに流すか、まとめてロードする方法を挙げています。下の左は言葉の整理です。ETL は抽出、変換、ロードの順で、ロードのあとにデータウェアハウスの中で変換する場合を ELT と呼びます。右のオーケストレーターは、ジョブをいつ、どの順で動かすかと、失敗時の再試行を受け持ちます。再実行して同じ結果になるように書くのは、タスクの書き手の仕事です。

ストリームは終わりのないバッチ:同じ計算の 2 つの形
スライド 169 のテキストと解説
ストリームは終わりのないバッチ:同じ計算の 2 つの形 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 違いは、入力が有限か、終わりがないか。区切りを短くしていった先がストリーム処理 書籍 DDIA 2e 12 章 p.483〜484、12.3 節 p.510、12.3.2 節 p.515、13.1.2 節 p.540 日次のバッチ 1 日分をまとめて 毎時のバッチ 1 時間分 毎秒のバッチ 1 秒分 ストリーム イベントごと。終わらない 観点 | バッチ | ストリーム 入力 | 有限。読み終わりが分かる | 終わりがない。「全部そろった」が分からない 結果が出るまで | 実行の間隔より短くならない | 短い 失敗したとき | 出力を捨てて、最初からやり直す | 最初からは難しい。チェックポイントから再開する 時間の扱い | イベントに入っている時刻を使うので決定的 | 処理した機械の時計で窓を切ると、再処理で変わる 向く場面 | 量が多く、鮮度がそれほど要らない | 変更を、短い遅れで導出データに反映したい どちらを選んでも、出力は導出データ。選ぶ軸は「許せる遅れ」と「やり直し方」 169
解説

バッチとストリームの関係です。本書は 12 章の冒頭で、日次のバッチでは入力の変更が出力に出るのが 1 日後になるので、区切りを毎時、毎秒と短くし、最後は区切りをやめてイベントごとに処理する、これがストリーム処理の考え方だと説明します。13 章では、両者には多くの共通の原則があり、根本的な違いは、入力が既知の有限の大きさか、終わりがないかだと書いています。どちらの出力も導出データです。表は、その違いが何に効くかの整理です。バッチは、読み終わりが分かるので、失敗したら出力を捨ててやり直せます。ストリームは終わらないので、数年動いてきたジョブを最初からやり直すのは現実的でない場合があり、チェックポイントのような別のしくみが要ります。時間の扱いも変わります。バッチはイベントに入っている時刻を使うので決定的ですが、ストリームで処理した機械の時計を使うと、再処理で結果が変わります。時間は、あとのスライドで扱います。

キューは配ると消え、ログは残って読み直せる
スライド 170 のテキストと解説
キューは配ると消え、ログは残って読み直せる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 導出データを作り直す土台になるのは、読んでも消えず、読む位置を戻せるログベースのブローカー 仕様・文書 Apache Kafka 4.4 文書 Design、Upgrading(2026-11 確認) 書籍 DDIA 2e 12.1.1.5 節 p.489〜490、12.1.2 節 p.491〜496(図 12-3 は p.492) 従来のキュー(AMQP・JMS 型) 送り手 m3 m2 m1 受け手 確認応答を受けると、キューから消す ログベース(Kafka 型):1 つのパーティション 0 1 2 3 4 5 6 7 ← 追記 グループ B:2 まで グループ A:6 まで(戻して読み直せる) 観点 | 従来のキュー(AMQP・JMS 型) | ログベース(Kafka 型) 配ったあと | 確認応答を受けると、メッセージを消す | 消さない。保持の設定に従って残る どこまで読んだか | ブローカーがメッセージごとに追う | 受け手ごとのオフセット(整数 1 つ) 後から加わる受け手 | 登録より前のメッセージは読めない | 残っている範囲を、最初から読める 並列と順序 | 受け手を増やせる。再配信で順序が入れ替わる | 並列はパーティション数まで。中では順序を保つ 向く用途 | 1 件の処理が重く、順序が要らない仕事 | 順序が要る流れ。導出データの作り直し Kafka は 4.2 から、1 件ずつ確認応答するキュー型の読み方(share groups)も本番向けとしている(公式文書の記述。未検証) 170
解説

メッセージを運ぶブローカーの 2 つの型です。ブローカーとは、送り手と受け手の間でメッセージを預かるしくみです。従来のキュー、つまり AMQP や JMS の型は、受け手に配って確認応答を受けると、メッセージを消します。受信が破壊的な操作なので、同じ受け手をもう一度動かしても同じ結果にはなりません。ログベースの型は、追記だけのログにメッセージを書き、受け手は順に読みます。どこまで読んだかは、受け手ごとのオフセットという番号で表します。Kafka の設計文書は、多くのメッセージングシステムが消費の記録をブローカー側に持つのに対し、Kafka では受け手の位置がパーティションごとに 1 つの整数で、古いオフセットに戻して読み直せると説明しています。代わりに、並列に動かせる受け手の数はパーティションの数までで、遅い 1 件が後続を止めます。下の注記のとおり、Kafka は 4.2 から、1 件ずつ確認応答するキュー型の読み方も本番向けとしています。こちらは実測していません。

Kafka の既定は 7 日保持。削除の印は 1 日後に消えうる
スライド 171 のテキストと解説
Kafka の既定は 7 日保持。削除の印は 1 日後に消えうる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 Apache Kafka 4.4 のトピック設定の既定値(公式文書、2026-11 確認)。残し方は 2 通りある 仕様・文書 Apache Kafka 4.4 文書 Topic Configs、Design(Log Compaction)(2026-11 確認) 書籍 DDIA 2e 12.1.2.4 節 p.494〜495、12.2.2.3 節 p.501〜502 設定(トピック) | 既定値 | 意味 cleanup.policy | delete | 古いセグメントを捨てる。compact にすると、キーごとに最新の値を残す retention.ms | 604800000(7 日) | これより古いセグメントを捨てる(delete のとき) retention.bytes | -1(上限なし) | パーティションの大きさの上限 delete.retention.ms | 86400000(1 日) | compact のとき、削除の印(トゥームストーン)を残す時間の下限。過ぎると消えうる コンパクション前 コンパクション後 0:k1=A 1:k2=B 2:k1=C 2:k1=C 3:k2=null 3:k2=null 4:k3=D 4:k3=D (同じキーの古い値は消える) キーごとに、少なくとも最後の値が残る 順序とオフセットは変わらない 値が null のレコードが削除の印。既定で 1 日は残り、そのあと消えうる 最初から読む受け手が、delete.retention.ms のうちにログの末尾まで追いつかないと、削除の印を見落としうる(題材 B で実測する) 171
解説

ログがどれだけ残るかです。Kafka 4.4 の公式文書で、トピックの設定の既定値を確かめました。cleanup.policy の既定は delete で、古いセグメントを捨てます。retention.ms の既定は 604800000、つまり 7 日です。もう 1 つの残し方が compact、ログコンパクションです。キーごとに、少なくとも最後の値を残します。設計文書は、メッセージの順序は保たれ、オフセットは変わらないと書いています。キーと null の値を持つレコードは削除を表し、トゥームストーンと呼びます。本書の訳は削除マーカーです。delete.retention.ms は、この印を残す時間の下限で、Kafka 4.4 の既定は 1 日です。1 日でちょうど消えるのではなく、過ぎると、コンパクションで消えうるようになります。設計文書は、ログの最初から読む受け手が削除の印をすべて見られるのは、この時間のうちにログの末尾に達した場合だと書いています。つまり、作り直しに 1 日より長くかかると、削除を見落としえます。Redpanda など Kafka 互換の製品の既定値は、ここでは確かめていません。

作り直せるための 6 つの前提は、既定では成り立たない
スライド 172 のテキストと解説
作り直せるための 6 つの前提は、既定では成り立たない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 「ログがあるから作り直せる」は、6 つがそろったときだけ。1 つずつ、実行して確かめる 仕様・文書 Kafka 4.4 文書 Topic Configs/Airflow 3.4.0 文書 Best Practices(2026-11 確認) 指針・報告 M. Fowler「Event Sourcing」(2005-12-12) 書籍 DDIA 2e 12.2.2.2 節 p.501、12.3.4.3 節 p.524〜525 前提 | 崩れると起きること | 確かめ方 ① 保持期間が、作り直す範囲を覆う | 古いログが消えていて、最初から読めない (Kafka 4.4 の既定は 7 日) | retention.ms と、作り直しに要る期間を突き合わせる ② 足りない分はスナップショット | 初期の状態が無い。 ログ上の位置と対応しないと、続きを当てられない | スナップショット+以降のログで、実際に作り直す ③ コンパクションの意味を知る | 途中の値は残らない。 期限(既定 1 日)を過ぎると、削除の印も消えうる | 履歴が要るなら compact にしない。 作り直しの所要時間を測る ④ スキーマに互換がある | 古いイベントを今のコードが読めず、 再生が止まるか、誤って読む | 最古のレコードから読む試験をする(Part 7) ⑤ 処理が決定的 | 流すたびに結果が変わる (now()、乱数、「最新」の参照、処理時間の窓) | 同じ入力で 2 回流して、差分を取る ⑥ 外部への副作用を止められる | 再生で、メールや決済を二重に実行する | 副作用を出口(ゲートウェイ)に集め、再生中は無効にする 本ガイドの整理(事故の一次報告なし) 6 つは公式文書と原典の記述から整理した。失敗の一次報告は見つからなかった(2026-11 調査)。題材 B で実測する 172
解説

ログから導出データを作り直すには、6 つの前提が要ります。1 つ目は保持期間です。Kafka の既定は 7 日なので、既定のままでは、7 日より前の出来事から作り直せる保証はありません。2 つ目はスナップショットです。本書は、ログの全履歴が無ければ、まず整合の取れたスナップショットを用意して出発点にすることになり、そのスナップショットはログ上の既知の位置に対応していなければならない、と書いています。3 つ目はコンパクションの意味です。途中の値は残らず、削除の印も、既定では 1 日を過ぎると消えうるようになります。4 つ目はスキーマの互換で、古いイベントを今のコードが読めることです。5 つ目は決定性です。本書は、冪等性に頼る前提として、同じ順序での再生と決定的な処理を挙げています。6 つ目は副作用です。Fowler は、再生のあいだは外部システムへの出口をゲートウェイで包み、無効にできるようにすると書いています。この 6 つは、本ガイドが公式文書と原典から整理したもので、作り直しに失敗した事故の一次報告は見つかっていません。

別サービスのイベント間に、決まった順序は無い
スライド 173 のテキストと解説
別サービスのイベント間に、決まった順序は無い 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 注文サービスの「取消」と在庫サービスの「引当」のどちらが先かは、ログを並べても決まらない 書籍 DDIA 2e 13.1.1.3〜13.1.1.4 節 p.538〜539、12.3.3.4 節 p.522〜523 シャードをまたぐ 1 台で運べない量になると、ログを分ける。シャード間の順序は曖昧になる リージョンをまたぐ データセンターごとにリーダーを置く。その間の順序は未定義 サービスをまたぐ サービスごとに状態を持つ。別サービスのイベント間に順序は無い クライアントの状態 確認を待たずに画面を更新する。サーバーと順序が食い違う 順序が要るとき | やり方 | 限界 同じ対象の更新 | 同じキーで、同じパーティションに送る | パーティションをまたぐ順序は付かない 別の流れとの結合(例:販売時の税率) | 相手の版の識別子か、値そのものをイベントに含める | 版をすべて残すと、コンパクションできない サービスをまたぐ因果 | 見ていた状態を記録したイベントを、後のイベントが参照する | DDIA は「簡単な答えはない」とする(p.539) 173
解説

ログを正とする設計の限界です。全順序とは、すべてのイベントに前後が 1 通りに決まっていることです。本書は 13 章で、全順序のログは小さなシステムなら作れるが、規模が大きくなると限界が出るとし、4 つの場合を挙げています。量が 1 台で扱える範囲を超えてシャードに分けた場合、複数のリージョンにリーダーを置いた場合、マイクロサービスとしてサービスごとに状態を持つ場合、そしてクライアント側に状態を持つ場合です。3 つ目について本書は、別々のサービスで起きた 2 つのイベントのあいだには、決まった順序が無いと書いています。下の表は対処です。同じ対象の更新は、同じキーで同じパーティションに送れば順序が付きます。別の流れと結合するときは、相手の版の識別子か値をイベントに含めると決定的になりますが、版をすべて残すのでコンパクションができなくなります。サービスをまたぐ因果については、本書も簡単な答えはないとしています。合意のしくみは Part 10 で扱いました。

窓はイベント時間で切り、遅れて届く分の扱いを決める
スライド 174 のテキストと解説
窓はイベント時間で切り、遅れて届く分の扱いを決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 処理時間で窓を切ると、遅れや再処理で結果が変わる。イベント時間で切ると「いつ締めるか」が残る 仕様・文書 Apache Flink 2.3 文書 Timely Stream Processing、Windows(2026-11 確認) 書籍 DDIA 2e 12.3.2 節 p.515〜518(図 12-8 は p.516) 10:00 の窓 10:01 の窓 10:02 の窓 イベント時間 起きた時刻で並べる 処理時間 届いて処理した時刻で並べる a b c d a c d b b は端末が圏外で、2 分遅れて届いた。処理時間で数えると、10:00 の窓は 1 件少なく、10:02 の窓は 1 件多い 締めたあとに届いた分 | 得るもの | 失うもの 無視する(件数は監視する) | 単純。締めた結果は変わらない | 数え落とす。遅れが増えると誤差が広がる 補正を出す(締めた窓の値を更新する) | 結果があとから正しくなる | 下流が、あとからの訂正を受け取れる必要がある ウォーターマーク:「この時刻より前のイベントは、もう来ない」と宣言する印。Flink 2.3 の既定では、これが窓の終わりを過ぎたあとの要素は捨てる(許容する遅れの既定は 0。公式文書の記述。未検証) 174
解説

時間の話です。イベント時間は、出来事が起きた時刻です。処理時間は、処理する機械の時計の時刻です。本書の 12 章は「イベントの時刻」「処理の時刻」と訳しています。窓、つまりウィンドウは、集計のために時間を区切った範囲です。図では、b というイベントが 10 時 0 分台に起きましたが、端末が圏外で、届いたのは 10 時 2 分台です。処理時間で数えると、b は 3 つ目の窓に入り、1 つ目の窓は少なく数えられます。Flink の公式文書は、処理時間は決定性を与えないと書いています。イベント時間で切れば b は正しい窓に入りますが、1 つ目の窓をいつ締めるかが決められません。ウォーターマークは、この時刻より前のイベントはもう来ない、と宣言する印です。締めたあとに届く分の扱いは、本書によれば大きく 2 つで、無視して件数を監視するか、補正を出すかです。Flink 2.3 の既定は破棄で、許容する遅れの既定は 0 です。ストリーム処理の枠組みは実機に含めておらず、この挙動は実測していません。

導出ストアは、新旧を並べて作り、照合して切り替える
スライド 175 のテキストと解説
導出ストアは、新旧を並べて作り、照合して切り替える 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 一括で切り替えない。同じ元データから 2 つのビューを作り、どの段階でも旧に戻せるようにする 指針・報告 Azure:Materialized View pattern(2026-11 確認)/Kreps(2014-07-02) 書籍 DDIA 2e 13.1.2.2 節 p.541〜542、13.2.1.1 節 p.543〜544/『ハードパーツ』6.2.4〜6.2.5 節 p.157〜159 1. 新を作る 同じ元データから。スナップショット → たまった分 → 追従 2. 並べて維持 新旧 2 つのビューを同時に更新する 3. 照合する 件数と集計値を、新旧と元で比べる 4. 少しずつ移す 少数の読み手から始め、割合を増やす 5. 旧をやめる 読み手がいなくなれば消す 観点 | 並べて切り替える | 一括で切り替える 戻せるか | どの段階でも、旧のビューに戻せる | 問題が出たとき、戻れる動作中のシステムが無い 払うもの | 出力の保存域が一時的に 2 倍。2 つを更新する期間の運用 | 保存域は 1 つ分で済む 前提 | 元データから作り直せること(6 つの前提) | 同じ。作り直せなければ、どちらもできない ケーススタディ 題材 B で実測する:導出ストアの差し替え、作り直しの一致率と所要時間(結果はケーススタディ) リーダーの視点 記録のシステムそのものの入れ替えは、この手順だけでは足りない。Part 15 で扱う 175
解説

導出ストアを入れ替える手順です。たとえば、検索の索引を別の製品に替える、集計の表の形を変える、といった場面です。本書は 13 章で、古いスキーマと新しいスキーマを、1 つの元データから別々に導出した 2 つのビューとして並べて保ち、少数の利用者から新しいビューに移し、割合を増やし、最後に古いビューをやめる、と書いています。利点は、すべての段階が容易に元へ戻せることです。新しいビューの作り方は、索引の作成と同じ形です。整合したスナップショットを読み、その間にたまった変更を当て、以後は追従します。3 番目の照合は、Azure の設計指針が、新しいビューを作って検証し、検証が済んでから切り替えるよう勧めていることによります。払うものもあります。Kreps は、出力の保存域が一時的に 2 倍要ると書いています。この手順は、前のスライドの 6 つの前提がそろっていることが条件です。記録のシステムそのものの入れ替えは別の話です。同じ製品の別のサーバーへ移して接続先を切り替える手順は『ハードパーツ』6.2.4〜6.2.5 節にありますが、別の製品へ、照合と切り戻しの窓を持って移す手順は、書籍 4 冊に見当たりません。Part 15 で扱います。

マテリアライズドビューは、製品で意味が違う
スライド 176 のテキストと解説
マテリアライズドビューは、製品で意味が違う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 同じ名前でも、いつ・何を計算し直すかが違う。公式文書の記述(2026-11 確認)。挙動は題材 B で測る 仕様・文書 PostgreSQL 18 文書/ClickHouse 文書(増分 MV、refreshable MV、CREATE VIEW)(2026-11 確認) 指針・報告 Azure:Materialized View pattern(2026-11 確認) 書籍 DDIA 2e 12.3.1.3 節 p.512〜513 観点 | PostgreSQL 18 | ClickHouse 増分 MV | ClickHouse refreshable MV いつ更新されるか | REFRESH MATERIALIZED VIEW を実行したとき | 元の表に挿入があったとき(挿入されたブロックに問い合わせを走らせるトリガー) | 決めた間隔で、定期的に 何を計算し直すか | 全体。中身を完全に置き換える | 挿入された分だけ | 全体。結果を原子的に入れ替える(追記の指定もある) 追随しない変更 | 次の REFRESH までの、元の表の変更すべて | 結合の右側の表の変更(発火は左端の表への挿入だけ) | 次の更新までの変更すべて 気をつける点 | CONCURRENTLY は読み取りを妨げないが、UNIQUE 索引が要る | 元の表の既存データの更新・削除・パーティション削除は、ビューを変えない(文書に明記) | 毎回、全体に問い合わせを実行する 「MV だから常に最新」は成り立たない。更新の合図が失われると、黙って古い結果を返す。新しさを監視する(Azure の指針) ケーススタディ 題材 B で実測する:REFRESH 中の読み取りの待ち、増分 MV で元の行を更新・削除したときの不一致(結果はケーススタディ) 176
解説

マテリアライズドビューは、問い合わせの結果を前もって計算して保存したものです。名前は同じでも、製品で意味が違います。PostgreSQL 18 の文書は、REFRESH MATERIALIZED VIEW がビューの中身を完全に置き換えると書いています。CONCURRENTLY を付けると読み取りを妨げずに更新できますが、列名だけを使い全行を含む UNIQUE 索引が 1 つ以上要ります。文書は、データは常に最新とは限らないとも書いています。ClickHouse の増分マテリアライズドビューは、文書の言葉では、挿入されたブロックに問い合わせを走らせるトリガーです。発火するのは問い合わせの左端の表への挿入だけで、結合の右側の表が変わってもビューは更新されません。元の表の既存のデータへの変更、つまり更新、削除、パーティションの削除などは、ビューを変えません。SQL リファレンスの CREATE VIEW のページが、マテリアライズドビューは挿入のトリガーに近い実装だとして、そう明記しています。集計も、新しく挿入されたまとまりにだけ適用されます。refreshable のほうは、問い合わせを定期的に全体に対して実行し、結果を原子的に入れ替えます。なお、本書の 513 ページは、変更された分だけを計算し直す増分のビューを提供するデータベースの例に ClickHouse を挙げています。何に追随するかは、製品の文書で確かめてください。

Lambda と Kappa:どちらも核は「計算し直せること」
スライド 177 のテキストと解説
Lambda と Kappa:どちらも核は「計算し直せること」 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 2 つの原典が言っていることを並べる。違いは、計算し直す経路を別に持つか、同じ経路で流し直すか 仕様・文書 Marz「How to beat the CAP theorem」(2011)/Kreps「Questioning the Lambda Architecture」(2014) 書籍 DDIA 2e 13.1.2.3 節 p.542 Lambda:Marz の提案(2011 年) 問い合わせを「全データの関数」と捉える 不変のデータ全体から計算し直すバッチの層 直近の分だけを補うリアルタイムの層を足す 強調する利点:人の誤りに耐えること 原典の投稿に「Lambda」の語は出てこない Kappa:Kreps の代案(2014 年) 指摘:同じ結果を出すコードを、2 つの分散システムで保守する負担 代案:ログを保持し、同じ処理の新しいジョブを最初から流す 新しい表に書き、追いついたら読み手を切り替える 払うもの:出力の保存域が一時的に 2 倍 名前は「Kappa と呼べるかもしれない」と控えめに出した 1 つのしくみでバッチとストリームを扱うのに要る機能(DDIA 2e p.542) 同じエンジンで、過去のイベントを再生できる 厳密に 1 回のセマンティクス 処理時間ではなく、イベント時間で窓を切れる DDIA 2e p.542 は、ラムダは問題が多く今は使われなくなったとし、同じしくみで過去と現在を処理する形を紹介する。これは同書の評価で、標準や中立の調査ではない。本ガイドは優劣を定めず、上の 3 つの機能で見る 177
解説

2 つの原典の整理です。Lambda のもとは、Nathan Marz の 2011 年 10 月 13 日の投稿です。データは不変で、問い合わせは全データの関数だと捉え、全データから計算し直すバッチの層に、直近の分だけを補うリアルタイムの層を足します。利点として強調するのは、人の誤りに耐えることです。この投稿に Lambda という語は出てきません。Kappa のもとは、Jay Kreps の 2014 年 7 月 2 日の記事です。同じ結果を出すべきコードを 2 つの分散システムで保守する負担を指摘し、代案として、ログを保持し、処理を変えたら同じしくみの新しいジョブを最初から流し、新しい出力の表に書き、追いついたら読み手を切り替える方法を示しました。名前について Kreps は、Kappa と呼べるかもしれないが、ギリシャ文字を付けるほどの考えではないかもしれない、と控えめに書いています。本書は 13 章の 542 ページで、ラムダアーキテクチャには多くの問題があり、現在では使われなくなったと評価しています。そのうえで、より新しいシステムは過去のデータの再処理と到着するイベントの処理を同じしくみで行えるとし、この形がカッパーアーキテクチャと呼ばれることもあると紹介して、統合に要る機能を 3 つ挙げます。これは同書の評価で、標準や中立の調査ではありません。本ガイドは優劣を定めず、この 3 つの機能がそろうかで見ます。

導出データにも出力の検査が要る:照合と系譜
スライド 178 のテキストと解説
導出データにも出力の検査が要る:照合と系譜 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 作り直せても、壊れた出力を配れば下流は止まる。4 つの道具は、答える問いが違う 仕様・文書 OpenLineage 仕様(文書 1.55.0、2026-11 確認) 指針・報告 Cloudflare 事後報告(2025-11-18 発生)/Azure:Materialized View pattern 書籍 DDIA 2e 11 章 p.448/『ハードパーツ』14.3 節 p.397〜400 道具 | 答える問い | 中身と位置づけ 照合 | 導出データは、元と一致しているか | 件数や集計値を元と比べる。前回の出力との差を測る監視のジョブも同じ考え 出力の検査 | この出力を、下流に配ってよいか | 件数・一意性・大きさの上限。落ちたら、前の完全な版を使い続ける 新しさの監視 | このビューは、古くなっていないか | 最後に更新した時刻を測り、許せる古さを超えたら知らせる 系譜(OpenLineage) | どのジョブが、どのデータを読み書きしたか | 実行・ジョブ・データセットを記録する仕様。検査はしない(検査の結果を載せる枠はある) 失敗例:Cloudflare 2025-11-18(事業者の事後報告) DB の権限変更で問い合わせが重複した行を返し、5 分ごとに作るボット対策の特徴量ファイルが約 2 倍になった。読む側の上限(200 個)を超えて異常終了し、5xx を返した。再発防止策に、自社で生成した設定ファイルの取り込みを堅くすることを挙げる(詳しくは Part 14) 178
解説

4 つの道具を、答える問いで分けました。照合は、導出データが元と一致しているかを確かめます。本書は、同じ入力を使い、前回の出力と比べて差異を測る監視のジョブを例に挙げています。出力の検査は、この出力を下流に配ってよいかを確かめます。『ハードパーツ』14 章は、不完全な 1 日分より、その日が丸ごと無いほうがよいと判断し、完全な 1 日分か無しかを ADR と適応度関数で保証する例を示しています。系譜の OpenLineage は、実行、ジョブ、データセットのメタデータを集める仕様で、検査そのものはしません。失敗例は、Cloudflare の 2025 年 11 月 18 日の障害です。事業者の事後報告によると、データベースの権限の変更で問い合わせが重複した行を返し、5 分ごとに生成していたファイルが約 2 倍になり、読む側の上限を超えました。再発防止策の 1 つ目に、自社が生成した設定ファイルの取り込みを、利用者の入力と同じように堅くすることを挙げています。

削除は、導出データまで届いて完了する
スライド 179 のテキストと解説
削除は、導出データまで届いて完了する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 正から消しただけでは、索引・集計・キャッシュに残る。削除も、同じ流れに載せて導出側へ届ける 仕様・文書 Debezium 3.7 文書 PostgreSQL コネクタ/Kafka 4.4 文書 Design(2026-11 確認) 指針・報告 Azure:Materialized View pattern(Data lifecycle on views) 書籍 DDIA 2e 12.2.2.3 節 p.501〜502、12.2.3.4 節 p.508〜509 正で消す 記録のシステムで DELETE 削除を流す CDC が削除イベントと、値が null の印を出す ログから消える コンパクションが、同じキーの過去を消す 導出側で消す 受け手ごとに、削除を当てる 受け手ごとに実装が要る 削除イベントを受け取っても、消す処理が無ければ残る 遅れた受け手は見落としうる 削除の印は、既定で 1 日を過ぎると消えうる(Kafka 4.4)。そのあと最初から読むと見落としうる 集計やモデルには効かない 行の単位では消せない。正から消して、導出を作り直す 本ガイドの考え(一次資料なし) 残る 3 点の整理は本ガイドによる。作り直せること(6 つの前提)は、削除を完了させる手段にもなる 期限や対象の範囲は法の要求で決まる(Part 16)。解釈は法務に確認する。題材 B で、削除が届くまでの時間と取りこぼしを測る 179
解説

削除の話です。記録のシステムから行を消しても、そこから作った導出データには残ります。削除を導出側に届ける自然な道は、ほかの変更と同じ流れです。Debezium 3.7 の PostgreSQL コネクタは、tombstones.on.delete の既定が true で、削除イベントのあとに、同じキーで値が null のトゥームストーンを出します。それでも 3 つの点が残ります。1 つ目は、受け手ごとに削除の実装が要ることです。2 つ目は、遅れた受け手です。削除の印を残す時間の下限は、Kafka 4.4 の既定で 1 日です。それを過ぎるとコンパクションで消えうるので、そのあとに最初から読む受け手は見落としえます。3 つ目は、集計の表や学習済みのモデルで、行の単位では消せません。正から消して導出を作り直すことになり、ここで 6 つの前提が効きます。Azure の指針も、元データの保持と削除の要件をすべてのビューに当てはめるよう求めています。期限や対象の範囲は法の要求で決まるので、Part 16 で扱い、解釈は法務に確認します。

設計レビューで問うこと:導出データ
スライド 180 のテキストと解説
設計レビューで問うこと:導出データ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 「作り直せるか」を、実行の記録と数字で答えてもらう 仕様・文書 Kafka 4.4・Airflow 3.4.0・Flink 2.3 の各公式文書(2026-11 確認) 書籍 DDIA 2e 11 章 p.447〜448、12.3.2 節 p.515〜517、13.1.2.2 節 p.541〜542 問い | なぜ問うか | 危ない兆候 この表・索引・ビューは正か導出か。導出なら、作り直しを最後に実行したのはいつか | 作り直せることが導出データの価値。手順は、実行して初めて確かめられる | 「作り直せるはず」。 手順書はあるが、実行の記録が無い 作り直しに要るログは、保持期間の中にあるか。足りない分のスナップショットはあるか | Kafka 4.4 の既定の保持は 7 日 | 保持が既定のまま。スナップショットの時点が分からない 同じ入力で 2 回流して、同じ出力になるか。再実行は追記か、置き換えか | 再実行と再処理の前提。INSERT の再実行は重複を生む | now()、「最新」の参照、処理時間の窓、INSERT 窓はイベント時間か。遅れて届く分はどこまで待ち、そのあとどう扱うか | 「全部そろった」とは分からない。 Flink 2.3 の既定は破棄 | 遅れた件数を数えていない。待つ長さの根拠が無い このマテリアライズドビューは、元の更新・削除・結合の相手の変更に追随するか | 製品で、更新の契機と範囲が違う | 「MV だから常に最新」。新しさの監視が無い 削除は、どの導出ストアまで、どれだけの時間で届くか | 遅れた受け手は、削除の印を見落としうる(Kafka の既定 1 日) | 導出ストアの一覧が無い。作り直しの所要時間を測っていない 180
解説

この Part の問いを、設計レビューで使える形にまとめました。1 つ目は、対象が正か導出かと、作り直しを最後に実行した日です。作り直せるはずだ、という答えは、まだ確かめていないという意味です。2 つ目は保持期間とスナップショットです。Kafka の保持が既定の 7 日のままなら、作り直せると当てにできる範囲は 7 日です。3 つ目は決定性と再実行の形です。同じ入力で 2 回流して差分を取れば確かめられます。4 つ目は時間です。窓がイベント時間か処理時間か、遅れて届く分をどこまで待つかを聞き、待つ長さの根拠を確かめます。5 つ目はマテリアライズドビューです。製品で更新の契機と範囲が違うので、元の表の更新、削除、結合の相手の変更に追随するかを聞きます。6 つ目は削除です。どの導出ストアまで、どれだけの時間で届くかを聞きます。導出ストアの一覧が無ければ、この問いには答えられません。全体の問いの一覧は Part 17 にまとめます。

まとめ:作り直せる導出データが、置換と更新の土台
スライド 181 のテキストと解説
まとめ:作り直せる導出データが、置換と更新の土台 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 8 導出データを作り直せれば、壊れても直せ、形を変えられ、ストアを入れ替えられる 仕様・文書 Apache Kafka 4.4 文書 Topic Configs(2026-11 確認) 書籍 DDIA 2e 11 章 p.447〜448、13.1.1.3 節 p.538、13.1.2 節 p.540〜542 価値:導出データは、失っても入力から作り直せる。だから直せて、入れ替えられる 同じ計算:バッチとストリームの違いは、入力が有限か、終わりがないか 土台:ログは残して読み直せる。ただし既定の保持は 7 日、削除の印が残る保証は 1 日(Kafka 4.4) 前提:保持・スナップショット・コンパクション・スキーマ互換・決定性・副作用の停止 限界:別サービスのイベント間に順序は無い。遅れて届く分の扱いを決める 入れ替え:新旧を並べて作り、照合してから少しずつ切り替える。どの段階でも戻せる 検査と削除:導出データにも出力の検査が要る。削除は導出データまで届いて完了する リーダーの視点 次の Part 13 で、この考え方を 7 つの共通基盤に当てはめる。入れ替えの全体は Part 15、削除と法は Part 16 181
解説

導出データの価値は、入力から作り直せることでした。バッチとストリームは同じ計算の 2 つの形で、違いは入力が有限か終わりがないかです。ログベースのブローカーは、読んでも消えず、位置を戻して読み直せるので、作り直しの土台になります。ただし、Kafka 4.4 の既定では保持は 7 日で、削除の印が残る保証は 1 日です。過ぎると、コンパクションで消えうるようになります。作り直せるための 6 つの前提、つまり保持期間、スナップショット、コンパクションの意味、スキーマの互換、決定性、副作用の停止は、既定のままでは成り立ちません。ログにも限界があり、別のサービスのイベントの間に順序は無く、時間については、遅れて届く分の扱いを決める必要があります。入れ替えは、新旧を並べて作り、照合して少しずつ切り替えます。最後に、導出データにも出力の検査が要り、削除は導出データまで届いて完了します。数字で確かめる部分は、題材 B の結果をケーススタディで示します。次の Part 13 では、ここまでの考え方を 7 つの共通基盤に当てはめます。

PART 13 7つの共通基盤に当てはめる
スライド 182 のテキストと解説
PART 13 7 つの共通基盤に 当てはめる どの基盤も同じ 4 つの問いで設計する。正か導出か、流れと契約、止めずに変える契約、止まったときのふるまい このPartで答えられるようになる問い 共通基盤とは何で、作る前に何を問うか 4 つの問いへの答えは、基盤ごとにどう違うか データ・ETL・ログ・分析の各基盤で、何を契約にするか 認証・AI・セキュリティの各基盤は、止まったときどうふるまうか 182
解説

Part 13 は、ステップ 9 です。ここまでの 8 つのステップで身につけた考え方を、7 つの共通基盤に当てはめます。データ基盤、ETL 基盤、ログ基盤、認証基盤、AI 基盤、分析基盤、セキュリティ基盤です。結論を先に言うと、どの基盤も同じ 4 つの問いで設計します。1 つ目は、その基盤のデータは記録のシステムか導出データか、所有者は誰か。2 つ目は、データがどう流れ込み、どう出ていくか、利用側との契約は何か。3 つ目は、利用側を止めずに変える、入れ替えるために、何を契約にするか。4 つ目は、基盤が止まったとき、利用側はどうふるまうか、です。この Part の前半では、共通基盤の定義、4 つの問い、7 基盤の一覧表を示したあと、データ基盤、ETL 基盤、ログ基盤、分析基盤を順に見ます。後半で認証、AI、セキュリティの各基盤を扱います。基盤が全体を止める型は Part 14、入れ替えと廃止の手順は Part 15 で扱うので、ここでは参照にとどめます。なお、『データ指向アプリケーションデザイン 第2版』は基盤の運営をほとんど扱わないので、この Part は仕様、公式文書、事後報告を主な根拠にします。

共通基盤は内部の利用者に出す製品。作る前に問う
スライド 183 のテキストと解説
共通基盤は内部の利用者に出す製品。作る前に問う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 2 つの定義はどちらも、内部の利用者に製品として出すことを含む 指針・報告 CNCF TAG App Delivery「Platforms White Paper」v1.0(2026-11 確認。任意の指針) 書籍 『プラットフォームエンジニアリング』1.1 節 p.4、5.2.1 節 p.104、5.4.2 節 p.122(考え方) CNCF Platforms White Paper 利用者の必要に合わせて出す、能力の統合された集まり 7 つの属性:製品として扱う、セルフサービス ほか 外部のサービスに頼り、ほかに無い能力だけを作る 『プラットフォームエンジニアリング』 API・ツール・知識・サポートを社内向けの製品にした基盤 利用側は連携の手間を減らし、速く機能を出せる Wiki のページと「クラウド」そのものは含めない 作る前に問うこと | なぜ問うか | 危ない兆候 代わりの手段を試したか(データを捨てる、手順を変える、既存の DB の調整) | 作れば、運用と移行の費用を持ち続ける | 「大手がやっているから」が理由になっている 同じ問題への既存の解は何世代残っているか。消す計画はあるか | 重なった解は利用側を混乱させる | 3 世代が並び、消す計画が無い 利用側は 1 年にどれだけの変化を受け止められるか | 利用側が一度に吸収できる変化には限りがある(変化予算) | 必須でない移行を同時にいくつも求める CNCF の能力の一覧(13 領域)には可観測性・データ・ID と秘密情報・セキュリティが入る。AI と分析に当たる項目は無い 183
解説

共通基盤、英語でプラットフォームの定義を 2 つ確かめます。1 つ目は CNCF の Platforms White Paper です。プラットフォームを、利用者の必要に合わせて定義して出す、能力の統合された集まりとしています。属性は 7 つで、製品として扱う、利用者体験、文書と導入、セルフサービス、認知負荷の軽減、任意で組み合わせ可能、既定で安全、です。基盤チームはできるだけ外部のサービスに頼り、ほかで手に入らない能力だけを自分で作る、とも書いています。この白書は、経営層、エンタープライズアーキテクト、基盤チームの責任者に向けた TAG の白書です。CNCF の適合要件ではなく、本ガイドは任意の指針として読みます。Web ページには日付の表示が無く、PDF の名前が v1.0 です。2 つ目は『プラットフォームエンジニアリング』1.1 節の定義で、API、ツール、サービス、知識、サポートをまとめ、社内の利用者が使いたくなる製品に仕立てた基盤、としています。Wiki のページと、クラウドそのものは含めません。下の表は、同書 5 章から、作る前に問うことを 3 つ選んだものです。変化予算は、利用側が一度に吸収できる変化には限りがある、という同書の用語です。同書の記述は著者の経験に基づく考え方として引いています。次のスライドで、基盤を設計するときの 4 つの問いを示します。

どの基盤も、同じ 4 つの問いで設計する
スライド 184 のテキストと解説
どの基盤も、同じ 4 つの問いで設計する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 問いは同じで、答えが基盤ごとに違う。その違いを設計レビューの出発点にする 書籍 『データ指向アプリケーションデザイン 第2版』1 章 p.10–11(記録のシステムと導出データ)、13.2.1.2 節 p.544 ① 記録のシステムか導出か。所有者は誰か 正なら失えない。導出なら作り直せる 守り方と、止まったときのふるまいが変わる(Part 3) ② どう流れ込み、出ていくか。契約は何か 同期か非同期か。利用側が握っているのは何か 流れは Part 6、契約は Part 7 ③ 止めずに変えるには、何を契約にするか 標準の口を握らせれば、裏の製品を替えられる 入れ替えの手順は Part 15 ④ 止まったとき、利用側はどうふるまうか 要求の経路に同期の依存があると、全体が止まる 止まる型と対策は Part 14 本ガイドの整理(一次資料なし) 4 つの問いは、ステップ 1〜8 の考え方を基盤に当て直した本ガイドの整理。基盤の担当に同じ順で聞くと、答えが決まっていない問いが見つかる 184
解説

4 つの問いです。1 つ目は、その基盤が持つデータは記録のシステムか導出データか、所有者は誰か、です。記録のシステムなら失えません。導出データなら、元から作り直せます。この区別で、守り方も、止まったときのふるまいも変わります。考え方は Part 3 で扱いました。2 つ目は、データがどう流れ込み、どう出ていくか、利用側との契約は何か、です。同期か非同期か、利用側が握っているのは何か、を確かめます。流れは Part 6、契約は Part 7 です。3 つ目は、利用側を止めずに変える、入れ替えるために、何を契約にするか、です。利用側が標準の口を握っていれば、裏の製品を替えられます。製品固有の口を握っていれば、入れ替えは利用側の改修になります。手順は Part 15 で扱います。4 つ目は、基盤が止まったとき、利用側はどうふるまうか、です。利用側の要求の経路に同期の依存があると、基盤の停止が全体の停止になります。型と対策は Part 14 で扱います。この 4 つの問いは、一次資料にある枠組みではなく、ここまでのステップを基盤に当て直した本ガイドの整理です。『データ指向アプリケーションデザイン 第2版』は、組織全体のデータの流れを 1 つの巨大なデータベースのように見る見方を示しており、共通基盤をその部品として見ると、同じ問いが使えます。

7 基盤 × 4 つの問い:答えは基盤ごとに違う
スライド 185 のテキストと解説
7 基盤 × 4 つの問い:答えは基盤ごとに違う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 仕様・文書 OTLP 1.11.1/Apache Iceberg 表仕様/Airflow 3.4.0 Best Practices(2026-11 確認) 指針・報告 CNCF Platforms White Paper v1.0/Google SRE Workbook 13 章/NIST SP 800-53 Rev.5 AU-5 書籍 『大規模データ管理 第2版』4・9・11 章/DDIA 2e 11.4 節 基盤 | ① 正か導出か・所有者 | ② 流れと契約 | ③ 止めずに変える契約 | ④ 止まったとき データ | 大半は導出。所有はドメイン。 カタログは正 | 非同期で入る。 出口は表・ビュー・トピック | 表の仕様とカタログの API | 分析が古くなるだけにする。 カタログの読み取りは※ ETL | 出力は導出。正は実行の記録と設定 | 非同期。決まった範囲を読み、 冪等に書く | 冪等なタスクと 2 段階の変更 | 下流は古いデータで続ける。 入力がそろうまで待つ ログ | テレメトリは失いうる記録。 監査ログは正 | 非同期の押し出し。 OTLP と意味の規約 | Collector を継ぎ目に送り先を替える | アプリは止めず、捨てて数える。 監査ログは AU-5。選び方は※ 認証 | 利用者・鍵・方針は正。 トークンと鍵・方針の写しは導出 | 発行は同期。検証は手元か、 都度の問い合わせ | 鍵は kid を足してから替え、 古い鍵を残す | 手元の検証は期限まで続く。 拒否か通すかは選んで書く AI | 特徴量・索引・モデルは導出。 元のデータと作り方の版を残す | 学習は非同期、推論は同期 | 索引は並行して作り直し、 切り替える※ | ゲートウェイは単一障害点に なりうる。AI なしの経路は※ 分析 | 集計とマートは導出。 指標の定義の所有は※ | 非同期。SQL・ビュー・BI で読む | 意味の層を見せ、裏の表を替える | 業務は続く。 結果を業務に戻す連携は※ セキュリティ | KEK と監査ログは正。 分類は所有者が付ける | KMS が DEK を包む・ほどく。 データ本体は渡さない | 鍵の ID を変えずに鍵素材を替える | 監査ログを書けないときの 行動を決めておく(AU-5) 本ガイドの考え(一次資料なし) ※の 6 セルは、その点を直接述べる一次資料が見つからなかった。本ガイドの考えとして、各基盤のスライドで理由とともに示す。ほかのセルにも、一次資料を組み合わせた整理を含む 185
解説

7 つの基盤に 4 つの問いを当てた一覧です。細かい根拠は続くスライドで示すので、ここでは横に見比べてください。1 列目を見ると、データ基盤、ETL 基盤、分析基盤、AI 基盤の中身は、大半が導出データです。一方、認証基盤の利用者、鍵、方針と、セキュリティ基盤の KEK や監査ログは、記録のシステムです。ログ基盤は、失いうる診断のテレメトリと、失えない監査ログが同居します。2 列目では、非同期の基盤と、同期で呼ばれる基盤が分かれます。同期で呼ばれるのは、認証の発行、AI の推論、鍵を包む、ほどく操作です。4 列目の、止まったときのふるまいは、この同期と非同期の違いでほぼ決まります。3 列目は、利用側に握らせる契約です。表の仕様、OTLP、鍵の ID のように、製品ではなく標準や識別子を握らせると、裏を替えられます。※を付けた 6 つのセルは、その点を直接述べる一次資料を見つけられなかった箇所です。ログの行の※は、監査ログを書けないときにどの行動を選ぶか、です。NIST SP 800-53 Rev.5 の AU-5 は、失敗時の行動を組織が定めておくことを求めますが、どれを選ぶかを一律に決める標準は見当たりません。SP 800-53 は米連邦の情報システム向けで、それ以外には任意です。本ガイドの考えとして、それぞれの基盤のスライドで示します。認証、AI、セキュリティの行は、この Part の後半で詳しく扱います。クラウドの製品に関わる記述は公式文書に基づくもので、実測はしていません。

データ基盤の中身は導出。所有はドメインに置く
スライド 186 のテキストと解説
データ基盤の中身は導出。所有はドメインに置く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 基盤チームが持つのは仕組み。データの中身と品質は、発生源のドメインが持つ 指針・報告 Z. Dehghani「How to Move Beyond a Monolithic Data Lake…」(2019-05-20) 書籍 『大規模データ管理 第2版』4.1 節 p.96、3.1 節 p.60–61、4.5.10 節 p.132–133/DDIA 2e p.473 業務サービス 記録のシステム(注文・在庫・決済) データプロダクト 読み出し用の写し。発生源のドメインが出す 利用側 分析・機械学習・ほかのドメイン 分析データの所有 | 得るもの | 失うもの 中央のチームが集めて持つ | 全社で同じデータを使う報告をそろえやすい | ドメインの変化に追いつけない。機能を 1 つ足すと全段に変更が及ぶ ドメインがデータプロダクトとして持つ | 変更が局所で済む。品質の責任が発生源に寄る | 標準への準拠は自然には起きない。機能の重複、人材の確保 契約はデータプロダクトの出口 発見できる・アドレスで指せる・信頼できる 自己記述的・相互運用できる・安全 パイプラインはドメインの内部実装。契約にしない リーダーの視点 データ基盤を業務の要求の経路に置かない(本ガイドの考え)。重要性が高く、基盤が止まっても動かす必要がある利用側は、統制のもとで写しを持つのが合理的な場合がある(『大規模データ管理 第2版』p.133) 186
解説

データ基盤の 1 枚目です。データ基盤に入っているデータの大半は、業務サービスの記録のシステムから作った、読み出し用の写しです。つまり導出データです。『大規模データ管理 第2版』p.96 は、データプロダクトを、利用されるために出す、データの論理的なまとまりで、自律した単位だと定義します。問題は、誰がそれを持つかです。Dehghani の 2019 年の論考は、中央のチームが集めて持つ形の失敗を 3 つ挙げました。一枚岩であること、パイプラインの段で分割すること、専門家がドメインから切り離されることです。提案は、ドメインがデータを持って提供し、パイプラインはドメインの内部実装とすることです。出口の性質は左下の 6 つです。ただし『大規模データ管理 第2版』p.60〜61 は、完全に連合した形が難しい理由を挙げています。標準への準拠は自然には起きない、機能の重複、粒度が細かすぎる、人材の確保、です。全社で同じデータを使う報告では、データをまとめるのが典型的な解だとも書きます。止まったときについては、同書 p.133 が条件つきで触れています。統制されていない複製は避けるのが望ましいとしたうえで、利用側のアプリケーションがとくに重要で、データプロダクトの基盤が止まっても動かす必要があるときは、複製が合理的な場合もある、という書き方です。どの方式を採るかを、全社のアーキテクチャの統制のもとで決めるよう求めています。データ基盤を業務の要求の経路に置かない、というのは同書の言葉ではなく、本ガイドの考えです。

カタログは表の現在を持つ正。系譜は実行側が出す
スライド 187 のテキストと解説
カタログは表の現在を持つ正。系譜は実行側が出す 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 メタデータにも正と導出がある。利用側が握るのは、表の仕様とカタログの API 仕様・文書 Apache Iceberg 表仕様(形式 v1〜v3)・REST カタログ仕様(文書サイト 1.12.0)/OpenLineage 1.55.0(2026-11 確認) 書籍 『大規模データ管理 第2版』2.4.3 節 p.52、9 章 p.255–256、9.2.4 節 p.266 メタデータ | 正か導出か | 利用側との契約 | 根拠 表の現在(カタログ) | 正(カタログを使う構成で)。コミットは表メタデータの原子的な入れ替え | Iceberg の表仕様と REST カタログの API | Iceberg 仕様 スキーマの進化 | 表の仕様が進め方を定める | 列の追加・削除・並べ替え・改名が安全 | Iceberg 仕様 系譜(リネージ) | 実行時に出すイベントが記録。グラフは受け側で組む | OpenLineage の Run・Job・Dataset | OpenLineage 1.55.0 用語・所有者・品質 | ドメインが提供する | メタデータの標準、スキーマの登録 | 『大規模データ管理 第2版』p.52 入れ替えの継ぎ目 REST カタログは OpenAPI で定義した共通の API。1 つのクライアント実装でどのカタログにもつなげるので、エンジンとカタログを別々に替えられる。表形式の v4 は策定中 本ガイドの考え(一次資料なし) カタログが止まると、コミットはできない(原子的な入れ替えはカタログを通る。仕様からの推論)。読み取りがどうなるかを述べる資料は確かめられていない。使う製品で止めて確かめる 187
解説

データ基盤の 2 枚目は、カタログとメタデータです。メタデータは、データについてのデータです。ここでは正か導出かで見ます。Apache Iceberg の表仕様では、コミットは、表のメタデータファイルを別のファイルへ原子的に入れ替えることで行われ、仕様はこれを直列化可能な分離の基礎としています。つまり、カタログを使う構成では、表の現在を指す情報はカタログにしか無く、カタログが記録のシステムです。仕様の付録には、カタログを使わずファイルシステムの改名でコミットする方式も載っていますが、非推奨で安全でないとされ、版 4 で削除すると注記されています。なお、根拠の行の 1.12.0 は文書サイトのリリース番号で、表形式の版とは別です。スキーマの進化は、列の追加、削除、並べ替え、改名が安全にできると仕様が述べています。REST カタログは、OpenAPI で定義した共通の API で、新しい言語やエンジンが 1 つのクライアント実装でどのカタログにもつなげることを狙います。表形式の版は 1 から 4 まで仕様に載っていますが、4 は策定中で正式には採用されていません。系譜、つまりリネージは、OpenLineage 1.55.0 が、実行、ジョブ、データセットのイベントの形を定めます。実行のイベントは実行時に出します。右下は一次資料が無い点です。カタログが止まるとコミットできないことは仕様から読み取れますが、読み取りがどうなるかは、製品ごとのキャッシュのふるまいを確かめていません。使う製品で実際に止めて確かめてください。

取り込みは、スキーマが揺れたときの動きを先に決める
スライド 188 のテキストと解説
取り込みは、スキーマが揺れたときの動きを先に決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 止める・保留する・黙って落とす・通す。決めていないと、実装の偶然で決まる 書籍 『大規模データ管理 第2版』2.4.3 節 p.52、4.4.3 節 p.116/『データ指向アプリケーションデザイン 第2版』11.4.1 節 p.472–473 揺れたときの動き | 得るもの | 失うもの | 向く場面 止める | 誤ったデータが下流へ行かない | 鮮度。上流の変更で下流が止まる | 金額など、誤りを許せない表 保留して所有者に確認 | 正しい分は進み、問題が記録に残る | 保留を見る人と手順が要る | 品質のしきい値を決められる表 黙って落とす・既定値で埋める | 止まらない | 欠けたことに気づくのが遅れる | 選ばない そのまま通す | 取り込みは止まらない | 読む側のすべてが揺れを扱う | 形を約束しない生の入力 所有と契約 パイプラインの所有はドメイン 品質の問題は発生源で直す 上流との契約と検査は Part 7 本ガイドの整理(一次資料なし) 4 つの分け方と「向く場面」は本ガイドの整理。「保留」は『大規模データ管理 第2版』p.116 の考え方による ケーススタディ 項目が揺れたときの失敗の出方を、題材 C で実測する (結果はケーススタディ) 188
解説

ETL 基盤の 1 枚目です。ETL は、発生源からデータを抽出し、変換して、下流に読み込む処理です。ETL 基盤の出力は導出データです。基盤にしか無いのは、何を、どの入力で、いつ流したかという実行の記録と設定だ、というのが本ガイドの整理です。取り込みで最初に決めるのは、上流のスキーマが揺れたとき、つまり型が変わった、項目が増えた、欠けた、というときの動きです。選択肢は表の 4 つです。『大規模データ管理 第2版』p.116 は、品質がしきい値を下回ったらデータを保留し、データの所有者に確認を求める枠組みを示し、品質の問題は発生源のシステムで直すよう求めています。『データ指向アプリケーションデザイン 第2版』p.473 は、入力に項目が欠けていた場合に、ファイルを調べて、変換か上流のジョブを直して再実行できることを、バッチの利点に挙げています。黙って落とす動きは、欠けたことに気づくのが遅れるので選びません。パイプラインの所有は、『大規模データ管理 第2版』p.52 のとおりドメインです。上流との契約と互換性の検査は Part 7 で扱いました。項目が揺れたときの失敗の出方は、題材 C で測ります。

再実行しても同じ結果になるタスクが作り直しの前提
スライド 189 のテキストと解説
再実行しても同じ結果になるタスクが作り直しの前提 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 タスクをトランザクションのように扱う。「最新」ではなく、決まった範囲を読んで置き換える 仕様・文書 Apache Airflow 3.4.0 Best Practices(2026-11 確認) 指針・報告 Google『The Site Reliability Workbook』13 章 Data Processing Pipelines(任意の実践) 書籍 DDIA 2e 11.4.4 節 p.476 -- 本ガイドの例(架空の宅配注文サービスの日次の集計) -- 悪い例:再実行で行が重なる。範囲が「今」で決まる INSERT INTO daily_sales SELECT … FROM orders WHERE ordered_at >= now() - interval '1 day'; -- 良い例:決まった範囲を、1 トランザクションで置き換える DELETE FROM daily_sales WHERE day = :interval_start; INSERT INTO daily_sales SELECT … FROM orders WHERE ordered_at >= :interval_start AND ordered_at < :interval_end; やること | 根拠 再実行のたびに同じ結果を出す | Airflow INSERT ではなく UPSERT を使う | Airflow 「最新」を読まず、決まった分割を読む | Airflow 重要な計算に Python の now() を使わない | Airflow 一時的な場所に書き、検証してから適用 | SRE Workbook バックフィル 過去の範囲を指定して流し直す 冪等なら何度流しても同じ 作り直しの前提条件は Part 12 止まったとき 下流は古いデータで動き続ける 古いデータは、ほぼ常に誤りよりまし 鮮度は全段の合計で測る ケーススタディ 同じ範囲を 2 回流したときの重複の件数を、題材 C で実測する (結果はケーススタディ) 189
解説

ETL 基盤の 2 枚目は、冪等と再実行です。冪等は、Part 11 で定義したとおり、1 回実行しても何回実行しても効果が同じになることです。Airflow 3.4.0 の Best Practices は、タスクをデータベースのトランザクションと同じに扱い、不完全な結果を出さず、再実行のたびに同じ結果を出すよう求めています。具体的には、再実行で行が重複するので INSERT ではなく UPSERT を使う、最新のデータを読まず決まった分割を読む、タスクの中で Python の datetime の now() を重要な計算に使わない、です。左のコードは本ガイドが作った例で、同じ考えを SQL の now() に当てはめています。バックフィルは、過去の範囲を指定して流し直すことで、冪等なタスクならそのまま行えます。Google の SRE Workbook 13 章は、冪等な変更と、一時的な場所に書いて検証してから適用する 2 段階の変更を勧めます。また、古いデータは、ほとんどの場合、誤ったデータよりましだとし、利用側が気にするのは全段の合計の SLO だと書いています。これが 4 つ目の問いへの答えで、ETL が止まったら下流は古いデータで動き続けます。『データ指向アプリケーションデザイン 第2版』p.476 は、ジョブから本番のデータベースへ 1 件ずつ書くのを避けるよう述べています。作り直しの前提条件は Part 12 で扱いました。

ログ基盤の契約は OTLP と規約。安定度はシグナルで違う
スライド 190 のテキストと解説
ログ基盤の契約は OTLP と規約。安定度はシグナルで違う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 契約にするのは Stable のものだけ。Collector を挟むと、送り先を設定で替えられる 仕様・文書 OpenTelemetry Specification Status Summary(2026-11-18 閲覧。日付・版の表示なし)/OTLP 1.11.1/Logs 仕様/Collector 文書/セマンティック規約 1.45.0 サービス SDK。既存のロガーはブリッジで載せる Collector OTLP で受信し、加工して送出。再試行・バッチ バックエンド 保管と検索。製品は替えうる シグナル | API | SDK | プロトコル(OTLP) | 読み方(本ガイド) トレース | Stable | Stable | Stable | 契約にできる メトリクス | Stable | Mixed | Stable | 使う言語の SDK の状況を確かめる ログ | Stable(Bridge API) | Stable | Stable | 既存のロガーをブリッジで載せる プロファイル | 記載なし | 記載なし | Development | まだ契約にしない 注意 Collector も部品ごとに安定度が違う(公式の表記は mixed)。使う部品の安定度を確かめる。属性の名前と意味は、セマンティック規約 1.45.0 が領域ごとに定める。規約も領域や項目で安定度が違う 190
解説

ログ基盤の 1 枚目です。ここでログ基盤は、ログ、メトリクス、トレースを集めて保管する可観測性の基盤を指します。OpenTelemetry は、テレメトリの API、SDK、送信のプロトコルである OTLP、属性の名前を決めるセマンティック規約を定める仕様です。安定度はシグナルごとに違います。仕様のステータスページでは、トレースは API、SDK、プロトコルのすべてが Stable です。メトリクスは API とプロトコルが Stable で、SDK は Mixed です。ログは、既存のロガーから載せるための Bridge API、SDK、プロトコルが Stable です。プロファイルは、プロトコルが Development で、API と SDK の記載はありません。このページには日付と版の表示が無いので、2026 年 11 月 18 日に閲覧した内容として扱ってください。ログの仕様は、既存のロギングを置き換えず、ブリッジで載せる立場です。Collector は、テレメトリを受信、加工、送出する部品で、公式文書は、再試行、バッチ、暗号化、機微な情報の除去を引き受けられるので、サービスの横に置くことを勧めています。Collector 自体の安定度は部品ごとに違います。セマンティック規約も、領域や項目ごとに安定度が違います。たとえば 1.45.0 の HTTP のスパンの規約は Stable ですが、同じページに Development の項目もあります。表の「読み方」の列は本ガイドの解釈です。次のスライドで、費用と、失う設計を見ます。

テレメトリは失いうる前提。監査の記録は経路を分ける
スライド 191 のテキストと解説
テレメトリは失いうる前提。監査の記録は経路を分ける 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 仕様・文書 OTLP 1.11.1/OTel Collector Resiliency・Sampling/Prometheus 命名の指針(2026-11 確認) 指針・報告 Cloudflare 事後報告(2024-11-14 発生、2024-11-26 公開)/NIST SP 800-53 Rev.5 AU-5(連邦向け。ほかは任意) 費用を決めるもの | 何で増えるか | 設計での操作 保持 | 期間 × 1 日の量 | 種類ごとに期間を決める。古い分は安い媒体へ移すか、集約だけ残す カーディナリティ | ラベルの組み合わせ 1 つが時系列 1 本になる | ユーザー ID など、上限の無い値をラベルにしない サンプリング | 残すトレースの割合 | 先頭は安いがエラーを必ずは残せない。末尾は状態を持つ仕組みが要る Collector の送信 | 下流が止まると | まだ失う場面(題材 C で実測する) メモリのキュー(既定) | 満杯で新しいデータを捨てる。再試行は既定で 5 分まで | クラッシュ、キューあふれ、再試行の時間切れ ディスクの WAL | 再起動をまたいで残る | ディスクの障害と満杯。専用のキューほど強くない Kafka を間に置く | 下流が戻るまで Kafka にたまる | Kafka の障害、保持期限の超過。運用は複雑になる Cloudflare 2024-11-14(事後報告。事業者の自己申告) 失わないためのフェイルオープンが全顧客分を下流へ流し、バッファが約 40 倍に。約 3.5 時間、送るはずのログの約 55% を失った 本ガイドの考えと、標準の定め 診断のログと監査の記録は、経路を分ける。監査ログを書けないときの行動は、SP 800-53 AU-5 が組織に定めさせる(停止は AU-5(4))。どれを選ぶかを一律に決める標準は見当たらない(法務に確認) 191
解説

ログ基盤の 2 枚目です。上の表は費用を決める 3 つです。カーディナリティは、値の種類の数です。Prometheus の文書は、ラベルの組み合わせ 1 つが新しい時系列になるので、ユーザー ID のような上限の無い値をラベルにしないよう書いています。サンプリングは、OpenTelemetry の文書が毎秒 1000 トレース以上を検討の目安の 1 つに挙げています。下の表は Collector の送信の設計です。既定はメモリ上のキューで、多くの場合 1000 バッチです。満杯になると入ってくるデータを捨て、再試行は既定で 5 分までです。OTLP 1.11.1 も、保証は 1 組のクライアントとサーバーの間だけとし、再試行できないエラーではデータを捨て、件数を数えるよう求めます。Cloudflare の 2024 年 11 月 14 日の事後報告では、設定が得られないときに全顧客分を送るフェイルオープンの安全策が働き、バッファが通常の 100 万超から約 40 倍に増えて下流が応答しなくなりました。変更は 5 分未満で戻されましたが、約 3.5 時間、顧客へ送るはずのログの約 55% が失われました。右下の注記は監査の記録です。NIST SP 800-53 Rev.5 の AU-5 は、監査ログの処理が失敗したときの行動を組織が定めておくことを求めます。止める選択肢は、拡張の AU-5(4) にあります。どれを選ぶかを一律に決める標準は見当たらないので、法令と業務の要件で決め、法務に確認します。SP 800-53 は米連邦の情報システム向けで、機関に代わって請負業者が運用するシステムを含みます。それ以外の組織には任意です。下流を止めたときに失う件数は、題材 C で測ります。

分析基盤は導出。指標の定義だけは所有者を決める
スライド 192 のテキストと解説
分析基盤は導出。指標の定義だけは所有者を決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 集計・マート・ダッシュボードは作り直せる。作り直せないのは「何をどう数えるか」 書籍 DDIA 2e p.10、11.4.2 節 p.474、11.4.4 節 p.476、13.1.2 節 p.540/『大規模データ管理 第2版』7.2 節 p.207、11.4.1 節 p.320–321 4 つの問い | 分析基盤での答え | 根拠 ① 正か導出か | 集計・マート・ダッシュボードは導出。事前集計と、対話的な問い合わせの 2 つの型がある | DDIA 2e p.540(導出)、p.474(2 つの型) ② 流れと契約 | 非同期で入る。利用側には、業務の用語で読める意味の層(セマンティックレイヤー)を見せる | 『大規模データ管理 第2版』p.320 ③ 止めずに変える | 意味の層が裏のデータストアを切り離す。構造を変えても、レポートにすぐには響かない | 同 p.321 ④ 止まったとき | 運用レポートは運用システムを直接読む(p.207)。だから分析が止まっても業務は続く、は本ガイドの整理 | 同 p.207(前半) 本ガイドの考え(一次資料なし):指標の定義 「売上」「有効な注文」の数え方は、導出ではなく正として扱い、所有者と版を決める。定義の所有を直接述べる資料は確かめられていない 本ガイドの考え:逆向きの連携の止まり方 分析の結果を業務へ戻す連携(DDIA 2e p.10 のいうリバース ETL)では、分析基盤が業務の依存先になる。戻し方は DDIA 2e 11.4.4 節(直接書かず、ストリームへ)。止まったとき古い結果で続けてよいかは、機能ごとに決める 192
解説

分析基盤です。本ガイドでは、データ基盤を保管、カタログ、共有の仕組み、分析基盤をその上の集計、BI、指標の定義、と分けています。この分け方は本ガイドの整理です。1 つ目の問いの答えは、集計、マート、ダッシュボードはすべて導出データだ、ということです。『データ指向アプリケーションデザイン 第2版』p.540 は、バッチ処理とストリーム処理の出力を導出データセットと呼びます。同書 p.474 は、分析の問い合わせを、定期的にロールアップしておく事前集計と、応答時間が重要な対話的な問い合わせの 2 つに分けています。2 つ目と 3 つ目は、セマンティックレイヤーです。『大規模データ管理 第2版』p.321 は、これが裏のデータストアを切り離すので、構造を変えても、レポートにすぐに影響が及ぶとは限らないとします。作り方は 2 つあり、キャッシュする方式ではデータが少し古くなることがあります。4 つ目について、同書 p.207 は、運用レポートは運用システムを直接読み、分析レポートと区別するとします。だから分析が止まっても業務は続く、というのは同書の言葉ではなく、本ガイドの整理です。下の 2 つは本ガイドの考えです。分析の結果を業務に戻す逆向きの連携は、『データ指向アプリケーションデザイン 第2版』p.10 がリバース ETL と呼ぶものです。このとき分析基盤が業務の依存先になる、というのは本ガイドの考えです。戻し方は同じ本の 11.4.4 節にありますが、止まったときに古い結果で続けてよいかは、機能ごとに決めてください。認証、AI、セキュリティの各基盤は、この Part の後半で扱います。

認証基盤:利用者・鍵・方針が正で、トークンは導出
スライド 193 のテキストと解説
認証基盤:利用者・鍵・方針が正で、トークンは導出 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 問い①。記録のシステムは利用者・署名鍵・方針。トークンと、検証側が持つ鍵や方針は、そこから作った写し 仕様・文書 RFC 9068 §4/OpenID Connect Core 1.0 §10.1.1/OPA 文書 Bundles(2026-11 確認) 書籍 (関連)『大規模データ管理 第2版』8.2.5〜8.2.6 節 p.241 データ | 記録のシステムか導出か | 作られ方 | 古くなる・失うと起きること 利用者・資格情報 | 記録のシステム | 登録・変更の操作で書く | ここが正。失えば作り直せない 署名鍵と公開鍵の一覧(jwks_uri) | 記録のシステム | 認証基盤が生成し、公開する | 消すと、その鍵のトークンを検証できない 認可の方針・関係データ | 記録のシステム | 方針を書くチームが変更する | ここが正。配った写しの元になる アクセストークン(JWT) | 導出(発行時点の写し) | 発行時に利用者と方針から作る | exp まで、発行時の内容のまま通る 検証側の鍵のキャッシュ | 導出 | jwks_uri から取得する | 知らない kid を見たら取り直す 各サービスに配った方針 | 導出 | バンドルを定期的に取得する | 更新は結果整合。届くまで古い方針 本ガイドの当てはめ 「記録のシステム/導出」は仕様の用語ではなく、本ガイドの当てはめ。所有者は認証基盤のチーム。守る順番と、作り直せるかどうかが、この分け方で決まる 193
解説

ここから認証基盤です。最初の問いは、どのデータが記録のシステムで、どれが導出か、です。利用者と資格情報、署名に使う鍵、認可の方針は、認証基盤にしか無い記録のシステムです。一方、アクセストークンは、発行した時点の利用者と方針から作った写しです。RFC 9068 の JWT のアクセストークンは、受け取ったサービスが公開鍵を使って手元で検証します。検証側が持つ公開鍵のキャッシュも、各サービスに配った方針も、元から作り直せる導出データです。OpenID Connect Core の 10.1.1 節は、署名鍵を入れ替える手順の説明として、検証側は知らない kid を見たら鍵の一覧を取り直す、と書いています。この文に規範の語は付いていません。SHOULD が付くのは、最近やめた署名鍵を妥当な期間残すことです。OPA の文書は、方針とデータをバンドルで配り、更新は結果整合だと書いています。なお、記録のシステムと導出という分け方は、仕様の用語ではなく本ガイドの当てはめです。次のスライドで、この分け方が止まり方と失効の速さを決めることを見ます。出典の補足:RFC 9068 は 2021 年 10 月発行、OpenID Connect Core 1.0 は errata set 2 です。書籍の p.241 は、PIP と ID プロバイダーの箇所です。

手元の検証は、止まらなさと失効の遅さの交換
スライド 194 のテキストと解説
手元の検証は、止まらなさと失効の遅さの交換 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 問い②。手元で検証すれば認証基盤に毎回は頼らない。その代わり、失効は期限まで届かない 仕様・文書 RFC 9068 §4(2021-10)/RFC 7662 §4(2015-10)/OpenID Connect Core 1.0 §10.1.1(2023-12-15) 検証の方式 | 得るもの | 失うもの | 根拠 手元で署名を検証(JWT) | 要求ごとに認証基盤へ問い合わせない | 発行後の失効や変更が、exp まで届かない | RFC 9068 §4 から整理 都度の問い合わせ(イントロスペクション) | 失効がすぐ効く | 認証基盤が、全要求の同期の依存先になる | RFC 7662 問い合わせの結果をキャッシュ | 認証基盤の負荷と依存が減る | キャッシュの間は、失効したトークンが通りうる。exp を超えて持たない | RFC 7662 §4 ① 新しい鍵を足す jwks_uri の JWK Set に公開 ② kid を付けて署名 ヘッダーに鍵の ID を入れる ③ 検証側が取り直す 知らない kid を見たとき ④ 古い鍵を残す 移行のため妥当な期間 本ガイドの考え(一次資料なし) 「止まっても期限までは動く」「失効が exp まで届かない」は、手元で検証できることからの本ガイドの整理。期限の長さは、止まってよい時間と失効を待てる時間の両方で決める 194
解説

トークンの検証には 2 つの方式があります。1 つ目は、JWT の署名を手元で検証する方式です。RFC 9068 の 4 節は、認可サーバーが署名鍵をメタデータの jwks_uri で知らせることを推奨し(SHOULD)、受け取る側は typ、iss、aud、署名、exp を確かめなければならない(MUST)と定めています。要求のたびに認証基盤へ問い合わせないので、認証基盤が止まっても、有効期限までは検証を続けられます。代わりに、発行した後の失効や権限の変更は、期限が来るまで届きません。この得るものと失うものは、どちらも仕様の文言ではなく、手元で検証できることからの本ガイドの整理です。2 つ目は、RFC 7662 のイントロスペクションで都度問い合わせる方式です。失効はすぐ効きますが、認証基盤が全要求の同期の依存先になります。応答をキャッシュしてよいとされていますが、性能と安全の釣り合いを考えなければならず、exp を超えてキャッシュしてはいけません。下の流れは、OpenID Connect Core 10.1.1 節の署名鍵の入れ替えです。同節はこれを手順の説明として書いており、SHOULD が付くのは④の、古い鍵を妥当な期間残すことだけです。出典の補足:OpenID Connect Core 1.0 は errata set 2 です。

止まったとき拒否するか通すかは、選んで書く
スライド 195 のテキストと解説
止まったとき拒否するか通すかは、選んで書く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 問い④。決めていなければ、障害のときに実装の既定で決まる。既定は製品ごとに違う 仕様・文書 Kubernetes v1.37・Entra・OPA の各文書(2026-11 確認。未検証) 指針・報告 Google Cloud 事後報告 Incident #20013(2020-12-14。自己申告) Google 2020-12-14(事後報告) 認証のサービスは、古いデータを検出すると要求を拒む作り(安全のため) 割当が誤って下がり、書き込めなくなって、読み取りの大半が古くなった 影響は 03:46〜04:33(US/Pacific、本文の時系列) 社内の道具も同じ認証に依存し、連絡が遅れた 製品(公式文書の記述) | 基盤に届かないとき | 選べること・注意 Kubernetes アドミッション Webhook | 既定は Fail:呼び出しの失敗で要求を拒否 | Ignore にすると、失敗を無視して通す Microsoft Entra 条件付きアクセス | 既存のセッションが対象(新規とゲストは対象外)。評価できない条件は開始時の情報で評価 | 既定で有効。方針ごとに無効にでき、そのとき評価できなければ拒否 OPA(方針のバンドル) | 保存した直近のバンドルで起動できる(persist 設定時) | 更新は結果整合。署名の検証に失敗したら今の版を使う 方針をデータとして配る OPA は方針とデータをバンドルで配る。Cedar 4.6 は方針の言語。AuthZEN Authorization API 1.0(2026-01-11 Final)は PEP と PDP の間の API だけを定め、方針の言語と PDP の構成は範囲外 基盤ごと・操作ごとに「拒否する/何を根拠に、いつまで通す」を書いたか 195
解説

認証基盤に届かないとき、利用側は拒否するのか、通すのか。これは選んで書くことです。失敗例は Google の 2020 年 12 月 14 日の障害です。事後報告によると、アカウントの ID を扱う User ID Service は、安全のために、古いデータを検出すると要求を拒む作りでした。割当の仕組みの移行で割当が誤って下げられ、Paxos のリーダーが書けなくなり、読み取りの大半が古くなって認証の参照がエラーになりました。本文の時系列では 03:46 から 04:33、約 47 分です。同じページの見出しは 04:07 から 06:23、速報は 50 分と書いており、数字が一致しません。本ガイドは本文の時系列を使います。右の表は公式文書の記述で、実機では確かめていません。Kubernetes の Webhook の既定は拒否です。Entra のバックアップ認証は既存のセッションだけが対象で、新規のセッションとゲストの認証は対象外です。実時間で評価できない条件は、既定では、セッションの開始時に集めた情報で評価します。評価の結果、通るとは限りません。操作ごとに書いたかを問います。全体が止まる型は Part 14 で扱います。

特徴量・埋め込み・索引・モデルは導出データ
スライド 196 のテキストと解説
特徴量・埋め込み・索引・モデルは導出データ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 問い①。作り直せるように、元のデータと、作り方(コード・モデル・引数)の版を残す 仕様・文書 Sculley ほか 2015/Google Cloud・Azure AI Search 文書(2026-11 確認。未検証) 指針・報告 Google「Rules of ML」#11(任意) 書籍 DDIA 2e 13.2.2.1 節 p.548 元のデータ 業務データ・文書・ラベル 特徴量・埋め込み 変換のコード、埋め込みモデル モデル・ベクトル索引 学習のコード、引数 推論の出力 入力とモデルから 導出データ | 何から作るか | 残す版・記録 特徴量 | 業務データ + 変換のコード | データの版、定義、コードの版。列ごとの所有者と文書 埋め込み・ベクトル索引 | 文書 + 埋め込みモデル | 埋め込みモデルの名前と版、次元数。元の文書 学習済みモデル | 学習データ + 学習のコード | パイプラインと部品の版、引数、成果物への参照、評価指標 推論の出力 | 入力 + モデル | モデルの版と入力(2 枚あと) 注意 入力の信号が黙って変わると、それを使うモデルに影響が出る。対策は版つきの写し。ただし、古くなる危険と、複数の版を保つ費用がある(Sculley ほか 2015) 196
解説

AI 基盤に移ります。特徴量、埋め込み、ベクトル索引、学習済みモデルは、どれも元のデータとコードから作る導出データです。DDIA 第 2 版の 548 ページは、モデルは訓練データから導出されたものと考えることができ、推論の出力は入力とモデルから導出される、と書いています。導出データなので、作り直せることが設計の条件です。そのために残すものが、元のデータと作り方の版です。Google Cloud の MLOps の文書は、実行のたびに、パイプラインと部品の版、引数、成果物への参照、前のモデルへの参照、評価指標をメタデータとして記録する、と書いています。ベクトル索引は、同じ埋め込みモデルの埋め込みで埋めたベクトル項目から成り、次元数はモデルで決まります。注意は、入力の信号が黙って変わることです。Sculley ほかの 2015 年の論文は、対策として版つきの写しを挙げ、古くなる危険と複数の版を保つ費用も指摘しています。AI 基盤は実機で測っていません。出典の補足:Sculley ほかの論文は NIPS 2015、Google Cloud の文書は MLOps のページです。

学習と推論のずれは、同じ定義と時点の正しさで防ぐ
スライド 197 のテキストと解説
学習と推論のずれは、同じ定義と時点の正しさで防ぐ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 問い②③。定義・時点・版のどれかがずれても、エラーにはならない。測らなければ気づけない 仕様・文書 Feast・Azure AI Search の各文書(2026-11 確認。未検証) 指針・報告 Google「Rules of ML」#29・#32・#37(実践の紹介。任意) 学習と推論のずれ 学習時と推論時の性能の差 原因:データの扱いの違い、データの変化、フィードバックループ 対策:推論時の特徴量を記録して学習に使う。コードを共有し、ずれを測る 時点の正しさ 学習データの各行に、その行の時刻の時点の値を結合する 基準は各行の時刻。さかのぼる幅は TTL まで 後から埋め戻した値が混ざりうる。作成時刻でも絞る 索引の作り直し 索引は、同じ埋め込みモデルの埋め込みで埋める 次元数はモデルで決まる 既存の項目の変更・削除は、削除して全体を作り直すことが多い 本ガイドの考え(一次資料なし) 埋め込みモデルを替えるときは、新しい索引を別に作り、確かめてから切り替える。元の文書を残していなければ作り直せない 未検証 認証・AI・セキュリティ基盤は実機にしていない。公式文書と事後報告に基づく 197
解説

AI 基盤の 2 枚目は、データの流れと、変えるときの契約です。1 つ目は学習と推論のずれです。Google の「Rules of Machine Learning」は、これを学習時の性能と推論時の性能の差と定義し、原因に、学習と推論でのデータの扱いの違い、学習から推論までのデータの変化、モデルとアルゴリズムの間のフィードバックループを挙げます。対策は、推論時に使った特徴量を記録して学習に使うこと、コードを共有すること、ずれを測ることです。2 つ目は時点の正しさです。Feast の文書によると、学習データの各行に、その行の時刻の時点の特徴量を結合します。さかのぼる幅は TTL までで、基準は問い合わせの時刻ではなく各行の時刻です。3 つ目は索引の作り直しです。Azure AI Search の文書は、既存の項目の変更や削除には、削除して全体を作り直すことが多いと書いています。並行して作って切り替える手順は、本ガイドの考えです。いずれも公式文書の記述で、実機では測っていません。出典の補足:Feast の文書は Point-in-time joins、Azure AI Search の文書は Create a vector index のページです。

推論の入出力を記録し、AI なしの経路を決めておく
スライド 198 のテキストと解説
推論の入出力を記録し、AI なしの経路を決めておく 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 問い④。記録は、再現・監視・学習への還流に使う。止まったときのふるまいは、機能ごとに決める 仕様・文書 Sculley ほか 2015/Google Cloud MLOps/Azure Architecture Center(2026-11 確認) 指針・報告 Google「Rules of ML」#29/AWS「Avoiding fallback…」(2019) 書籍 『大規模データ管理 第2版』11.5.2 節 p.328 記録するもの | 何に使うか | 根拠 推論時に使った特徴量 | 学習データにして、学習と推論の一致を確かめる | Rules of ML #29 パイプラインと部品の版、引数 | 再現と、前のモデルへの巻き戻し | Google Cloud MLOps 予測の分布(予測の偏り) | 世界の変化に気づく。警告に使える | Sculley ほか 2015 行動の上限 | 自動の行動の歯止め。達したら人が調べる | Sculley ほか 2015 実験の引数・指標・出力 | 保存したデータで結果を再現する | 『大規模データ管理』p.328 LLM ゲートウェイの代償(Azure) 単一障害点になりうる 生の要求と応答が通るので、法令対応の範囲に入る 呼び出しごとに遅延が増える 合意した SLO を守れなくなるなら入れない 本ガイドの考え(一次資料なし) プロンプトと応答の全文をどこまで残すか、AI が使えないときに「AI なしの経路へ落とす/待たせる/誤りを返す」のどれにするかを定める標準は、見つけられなかった。機能ごとに決めて書く。AI なしの経路は障害時だけ通る経路になりやすいので、普段から一部の要求で通して試す。個人データを含む記録の保持は法務に確認(Part 16) 198
解説

AI 基盤の 3 枚目は、記録と、止まったときのふるまいです。記録するものは表のとおりです。推論時に使った特徴量は、学習データに使い、学習と推論の一致を確かめるために残します。全件が無理なら一部でもよい、と Rules of Machine Learning は書いています。Sculley ほかの論文は、監視の出発点として、予測の分布と実際の分布を比べる予測の偏りと、自動の行動に上限を置くことを挙げています。右は LLM ゲートウェイです。Azure Architecture Center の文書は、単一障害点になりうること、生の要求と応答が通るので法令対応の範囲に入ること、遅延が増えることを挙げ、合意した SLO を守れなくなるなら入れるな、と書いています。一方、プロンプトと応答をどこまで残すか、AI が使えないときにどうふるまうかを定める標準は、見つけられませんでした。下の注記は本ガイドの考えです。個人データを含む記録の保持は法務に確認します。出典の補足:Sculley ほかの論文は NIPS 2015、AWS の論考は「Avoiding fallback in distributed systems」です。

監査ログは記録のシステム。書けないときを決める
スライド 199 のテキストと解説
監査ログは記録のシステム。書けないときを決める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 問い①④。診断のログは失いうる前提。監査ログは、ほかから作り直せないので、同じ経路に載せない 仕様・文書 AWS CloudTrail User Guide ログファイルの整合性の検証(2026-11 確認。未検証) 指針・報告 NIST SP 800-53 Rev.5(5.2.0)AU-5・AU-9(連邦の情報システム向け。ほかは任意) 書籍 DDIA 2e 13.3.4.5 節 p.573 観点 | 診断のログ・メトリクス・トレース | 監査ログ | 根拠(監査ログ) 位置づけ | 起きたことの観測。失いうる前提で設計する(ログ基盤のスライド) | 「誰が・いつ・何に・何をしたか」の記録のシステム。ほかから作り直せない | 本ガイドの当てはめ 守ること | — | 不正な参照・変更・削除から、記録と道具を守る | SP 800-53 AU-9 改ざんと欠落の検出 | — | ファイルごとのハッシュ。1 時間ごとの署名つきダイジェスト。前のダイジェストの署名を含めて連ねる | AWS CloudTrail の例 書けないとき | (ログ基盤のスライド) | 警告し、決めておいた行動を取る。例:最も古い記録を上書き/システムを止める/記録の生成を止める | SP 800-53 AU-5 本ガイドの考え(一次資料なし) AU-5 は、行動を組織が定めるとする(止める選択肢は AU-5(4))。一律に決める標準は見当たらない。選ぶ基準は本ガイドの考え: 権限の変更や個人データの参照のように、後から説明が要る操作は「書けなければ拒む」側に、それ以外は「手元にためて後で送る」側に寄せ、操作ごとに書く。法令の要件は法務に確認 199
解説

セキュリティ基盤の 1 枚目は監査ログです。診断のためのログやメトリクスは、失いうる前提で設計しました。監査ログは違います。誰が、いつ、何に、何をしたかの記録は、ほかのデータから作り直せないので、記録のシステムとして扱います。この位置づけは本ガイドの当てはめです。守り方の根拠は NIST SP 800-53 Rev.5 です。AU-9 は、監査の情報と道具を、不正な参照、変更、削除から守ることを求めます。AU-5 は、監査ログの処理が失敗したときに警告し、組織が定めた追加の行動を取ることを求め、例として、最も古い記録の上書き、システムの停止、記録の生成の停止を挙げます。警告だけで追加の行動を取らない選択も認めています。止める選択肢は、拡張の AU-5(4) にあります。どれを選ぶかを一律に決める標準は見当たりません。SP 800-53 は米連邦政府の情報システム向けで、機関に代わって請負業者が運用するシステムも含みます。それ以外の組織には任意です。改ざんの検出の例は AWS CloudTrail です。DDIA の 573 ページも、自作の監査テーブルでは完全性の保証が依然として難しいと書いています。監査ログに書く中身は Part 16 で扱います。

鍵の入れ替えは再暗号化ではない
スライド 200 のテキストと解説
鍵の入れ替えは再暗号化ではない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 問い③。鍵の ID を契約にすれば、利用側を変えずに鍵素材を替えられる。既存のデータは古い鍵素材のまま 仕様・文書 AWS KMS Developer Guide「Rotate AWS KMS keys」/Google Cloud KMS 文書(2026-11 確認。未検証) データ DEK で暗号化 手元で生成。書き込みごとに新しく 暗号文 + 包んだ DEK データの近くに保存 KMS の中の KEK 中央に置き、KMS の外に出ない KEK は DEK を包む・ほどくのに使う。データ本体は KMS に渡さない 操作 | 起きること | 起きないこと・注意 ローテーション(AWS KMS) | KMS キー(ID)は同じまま、現在の鍵素材だけ替わる。復号の鍵素材は KMS が選ぶ | データは再暗号化されず、データキーも替わらない。漏れたデータキーには効かない ローテーション(Google Cloud KMS) | 新しい鍵の版ができる | 暗号化済みのデータは、新しい版で再暗号化されない 再暗号化(不正使用が疑われるとき) | 復号 → 新しい主版で暗号化 → 古い版を無効化または破棄予約 | ローテーションとは別の手順として持つ 「毎年ローテーションしているので安全」とは言えない。漏えいが疑われるときの手順を別に持つ 200
解説

セキュリティ基盤の 2 枚目は鍵です。上の図はエンベロープ暗号化です。データを暗号化する鍵を DEK、DEK を包む鍵を KEK と呼びます。Google Cloud KMS の文書は、DEK は手元で生成し、書き込みのたびに新しくし、包んだ形でデータの近くに置くこと、KEK は中央に置くことを勧めています。同じ文書は、暗号化と復号の流れの説明で、KEK は Cloud KMS の外に出ないと書いています。これは勧めではなく、製品のふるまいの説明です。AWS KMS の文書によると、ローテーションで替わるのは現在の鍵素材だけで、KMS キーは同じ論理的な資源のままです。復号では、暗号化に使った鍵素材を KMS が自動で選ぶので、利用側のコードは変わりません。ただし、守っているデータは再暗号化されず、データキーも替わりません。漏れたデータキーの影響も緩和しない、と明記されています。自動ローテーションの周期は、指定しなければ 365 日です。Google Cloud KMS も同じく再暗号化はしません。不正使用が疑われるときの手順は別にあります。いずれも公式文書の記述で、実機では確かめていません。出典の補足:Google Cloud KMS の文書は Envelope encryption と Re-encrypt data のページです。

分類は所有者が決め、製品の更新は段階的に配る
スライド 201 のテキストと解説
分類は所有者が決め、製品の更新は段階的に配る 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 問い①③。分類の一覧は中央、付けるのはデータの所有者。セキュリティ製品が配る検出の内容も「データ」 指針・報告 CrowdStrike 暫定報告(2024-07-24)・RCA(2024-08-06)。自己申告 書籍 『大規模データ管理 第2版』8.1.1.1 節 p.219、8.2.2〜8.2.5 節 p.235〜241 決めること | 誰が・どう持つか | 根拠(書籍) 分類の一覧とラベル | 中央で管理し、増やしすぎない。分類からラベル(極秘〜公開の 4 段)を自動で付けるルールの例を示す | p.236〜237 データへの分類の付与 | データオーナー。品質・定義・分類・使用目的・ラベルを管理する | p.219 判断と施行の仕組み | 施行(PEP)・判断(PDP)・ 情報(PIP)・管理(PAP)に分け、 ドメイン境界の端で統制する | p.235〜241 CrowdStrike 2024-07-19(事後報告) 04:09 UTC に Windows 向けの検出内容の更新を配り、05:27 UTC に戻した その間に更新を受けた、センサー 7.11 以降の Windows が影響を受けた 型は入力 21 個、センサーが渡すのは 20 個。検証役は 21 個を前提に通した 対策:カナリアを通ったものから段階的に配る。顧客が時期と場所を選べる リーダーの視点 検出の内容・方針・設定は「データ」として配られる。互換性の検査(Part 7)と段階配布の両方を持つかを問う。全体を止める型は Part 14 201
解説

セキュリティ基盤の 3 枚目は、分類とアクセス制御を誰が持つか、そしてセキュリティ製品自身の更新です。『大規模データ管理 第2版』は、分類の一覧を中央で管理し、増やしすぎないことを勧め、分類から機密度のラベルを自動で付けるルールの例を示します。データに分類を付けて管理する責任は、データオーナーにあります。アクセス制御は、施行、判断、情報、管理の 4 つの点に分け、ドメインの境界を信頼境界として、その端で統制します。なお、この本は PDP を「ポリシー定義点」と訳していますが、原綴りは Decision です。仕組みを基盤が持つ、という割り当ては本ガイドの読み方です。右は CrowdStrike の 2024 年 7 月 19 日の事後報告です。型は入力を 21 個と定義し、センサーが渡すのは 20 個でした。RCA は、この内容を設定データと呼び、コードでもカーネルドライバーでもないと書いたうえで、段階的に配るべきだったとしています。全体を止める型は Part 14 で扱います。

共通の型:先に配っておき、手元の情報で動く
スライド 202 のテキストと解説
共通の型:先に配っておき、手元の情報で動く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 静的な安定性:依存先が傷んでも、していたことを続けられる作り。変更の仕組みと日々の処理を分ける 指針・報告 AWS Builders' Library 2 論考(2019-12-05)/AWS 白書 Fault Isolation Boundaries(2026-11 確認。未検証。任意) 型 | 内容 | 出どころ | 例(本ガイドの当てはめ) 先に配っておく | 要るデータを前もって押し込む。例:IAM ロールの認証情報は各インスタンスへ先に配られ、何時間も有効(論考の記述。未検証) | AWS「Avoiding fallback in distributed systems」 | 公開鍵、方針のバンドル、検出の内容 手元の情報で動く | 依存先が傷んでも全体は動き続ける。データプレーンは、制御プレーンが傷んでも今の状態を保つ | AWS「Static stability using Availability Zones」 | トークンの手元での検証。直近の方針での判断 制御とデータを分ける | 制御プレーン=変更を加える仕組み。複雑で依存が多い。データプレーン=日々の処理。意図して単純に作る | AWS 白書 Fault Isolation Boundaries | 鍵の発行・方針の変更と、検証・判断を分ける フォールバックを避ける | 代わりに、主経路の信頼性を上げる/呼び出し側に誤りを返す/先に配る/フェイルオーバーに変える/再試行とタイムアウトをフォールバックにしない | AWS「Avoiding fallback in distributed systems」 | AI なしの経路を、普段から通して試す 注意 代償は古さ。先に配った鍵・方針・トークンは、変更や失効が届くまで古いまま使われる。期限と更新のきっかけを一緒に決める。Google 2020-12-14 でも、既存のネットワーク構成は動き続け、変更の操作だけが失敗した(詳しくは Part 14) 202
解説

7 つの基盤に共通する設計の型をまとめます。軸は静的な安定性です。AWS Builders' Library の Mike Furr の論考は、静的に安定した設計では、依存先が傷んでも全体は動き続ける、と説明します。制御プレーンはシステムに変更を加える仕組み、データプレーンはその資源の日々の仕事です。データプレーンは、制御プレーンが傷んでも今の状態を保って動き続けます。AWS の白書は、制御プレーンは複雑で依存が多く、データプレーンは意図して単純に作るので、広い障害はデータプレーンのほうが起きにくい、と書いています。もう 1 つの論考は、フォールバックを避け、代わりに要るデータを先に配ることを勧めます。IAM ロールの認証情報が先に配られて何時間も有効だという例は、この論考の記述で、実機では確かめていません。同じ論考は、再試行とタイムアウトをフォールバックにしないことも挙げています。右端の列は本ガイドの当てはめです。代償は古さです。先に配った鍵や方針やトークンは、変更が届くまで古いまま使われます。これらは事業者の実践の紹介で、規範ではありません。全体を止める 8 つの型は Part 14 で扱います。出典の補足:2 つの論考は「Static stability using Availability Zones」と「Avoiding fallback in distributed systems」です。

設計レビューで問うこと:7 つの基盤に 1 問ずつ
スライド 203 のテキストと解説
設計レビューで問うこと:7 つの基盤に 1 問ずつ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 基盤の名前が変わっても、問うのは同じ 4 つ。ここでは基盤ごとに、最初に問う 1 問を選んだ 仕様・文書 RFC 7662 §4/AWS KMS 文書 Rotate AWS KMS keys(2026-11 確認) 指針・報告 NIST SP 800-53 Rev.5 AU-5(連邦向け。ほかは任意)/AWS「Static stability…」(任意) 書籍 DDIA 2e 13.2.2.1 節 p.548(考え方) 基盤 | 問い | なぜ問うか | 危ない兆候 データ | ここにしか無いデータ(正)は何か。 導出は、何から何時間で作り直せるか | 正と導出で、守り方と 止まったときのふるまいが変わる | 「全部大事」で区別が無い ETL | 同じ入力で 2 回流しても、結果は同じか | 再実行と埋め戻しの前提になる | 追記だけ。範囲を「今」で決める ログ | 監査ログは、診断のログと別の経路か。書けないときの扱いは | 失ってよい記録と、 作り直せない記録は扱いが違う | 同じ「失ってよい」経路に載っている 認証 | トークンの期限と、失効が効くまでの時間は。 届かないとき拒否か通すか | 手元の検証は、失効の遅れと引き換え | 期限が長く、失効の手段が無い。「たぶん落ちる」 AI | 索引とモデルを、どのデータとどの版から作ったか記録しているか | 版が無ければ、作り直せず、ずれも測れない | 索引に埋め込みモデルの名前が無い 分析 | 分析の結果を業務に戻して使う箇所で、古い結果のまま動いてよいか | 導出データが要求の経路に入ると、 止まり方が変わる | 分析基盤が止まると業務の画面も止まる セキュリティ | 鍵の入れ替えで、既存のデータは再暗号化されるか。 漏えい時の手順は | ローテーションは再暗号化をしない | 「毎年替えているので安全」 203
解説

Part 13 の設計レビューの問いです。7 つの基盤に 1 問ずつ選びました。どれも、冒頭の 4 つの問いのどれかを、その基盤の言葉に直したものです。データ基盤では、正と導出の区別と、作り直しにかかる時間を問います。ETL 基盤では、同じ入力で 2 回流しても同じ結果になるかを問います。ログ基盤では、監査ログが診断のログと別の経路かを問います。認証基盤では、トークンの期限と失効が効くまでの時間、届かないときに拒否か通すかを問います。AI 基盤では、索引とモデルを、どのデータとどの版から作ったかを問います。分析基盤では、分析の結果を業務に戻して使う箇所を問います。セキュリティ基盤では、鍵の入れ替えと再暗号化の区別を問います。危ない兆候の列は、答えが曖昧なときの典型です。「たぶん落ちる」「毎年替えているので安全」が出たら、決めていないという合図です。問いの全体は Part 17 の一覧表にまとめます。

まとめ:基盤も、正と導出・契約・止まり方で設計する
スライド 204 のテキストと解説
まとめ:基盤も、正と導出・契約・止まり方で設計する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 7 つの基盤は別々の製品でも、設計で決めることは同じ 4 つ 仕様・文書 RFC 9068/OpenID Connect Core 1.0/AWS・Google Cloud KMS 文書(2026-11 確認) 指針・報告 AWS「Static stability…」/NIST SP 800-53 Rev.5 AU-5(連邦向け。ほかは任意) 書籍 DDIA 2e p.548/『大規模データ管理 第2版』p.219・p.235〜241 ① 記録のシステムか導出か 利用者・鍵・方針、KEK、監査ログは正。トークン、配った方針、特徴量・索引・モデルは導出で、元と版から作り直す ② 流れと契約 鍵は jwks_uri と kid、方針はバンドル、特徴量は定義と時点。診断のログと監査ログは経路を分ける ③ 止めずに変える 鍵は足してから切り替える。鍵素材は ID を変えずに替える。索引は並行して作る。検出の内容は段階的に配る ④ 止まったときのふるまい 拒否か通すかを操作ごとに書く。要るものを先に配り、手元の情報で動く。代償は古さ 未検証と、次の Part 認証・AI・セキュリティ基盤は実機で測っていない(公式文書と事後報告に基づく)。次の Part 14 で、共通基盤が全体を止める 8 つの型を見る 204
解説

Part 13 のまとめです。7 つの共通基盤を、同じ 4 つの問いで見てきました。1 つ目、記録のシステムか導出か。認証基盤では利用者と鍵と方針が正で、トークンは導出です。AI 基盤では特徴量も索引もモデルも導出で、元のデータと作り方の版を残します。セキュリティ基盤では KEK と監査ログが正です。2 つ目、流れと契約。鍵は jwks_uri と kid、方針はバンドル、特徴量は定義と時点が契約です。3 つ目、止めずに変える方法。鍵は足してから切り替え、鍵素材は ID を変えずに替え、索引は並行して作り、検出の内容は段階的に配ります。4 つ目、止まったときのふるまい。拒否か通すかを操作ごとに書き、要るものを先に配って手元の情報で動けるようにします。代償は古さです。認証、AI、セキュリティの各基盤は実機で測っておらず、公式文書と事後報告に基づきます。次の Part 14 では、公開された事後報告から、共通基盤が全体を止める 8 つの型を見ます。

PART 14 共通基盤が全体を止める8つの型
スライド 205 のテキストと解説
PART 14 共通基盤が全体を止める 8 つの型 全体が止まる条件は、要求の経路にある同期の依存。公開された事後報告を 8 つの型に分け、型ごとに設計レビューで問うことを決める。対策の軸は静的な安定性 このPartで答えられるようになる問い この基盤が止まったら、利用側の要求は通るか 停止の引き金は、機器の障害と変更のどちらが多いか 被害を広げる設計には、どんな型があるか 段階配布をしていれば、防げるのか 205
解説

Part 14 は、ステップ 9 の続きです。Part 13 では 7 つの共通基盤を 4 つの問いで設計しました。この Part は、その 4 つ目の問い、つまり基盤が止まったときのふるまいを、公開された事後報告から掘り下げます。扱うのは、事業者自身が公開した事後報告 24 件です。まず読み方と数え方を断り、引き金の多くが、機器・電源・ネットワークの障害や乱れではなく、変更や操作だったことを確かめます。次に、全体が止まる条件を 1 枚の図で示し、被害を広げた設計を 8 つの型に分けます。後半は、設定やルールもデータであること、段階配布の限界、静的な安定性という対策の軸、設計レビューで問うことの順に進みます。書籍にはこの領域の記述がほとんど無いので、根拠は事後報告と事業者の設計指針です。

事後報告 24 件を原文で読み、型に分けた
スライド 206 のテキストと解説
事後報告 24 件を原文で読み、型に分けた 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 事後報告は事業者の自己申告。書かれたことだけを使い、数字は報告の区間のまま書く 指針・報告 各事業者の事後報告 24 件(URL と確かめた事実は research/reviews/verify_p14.md)/Meta 2021-10-04/Cloudflare 2025-12-05 項目 | この Part の扱い 対象 | 事業者自身が公開した事後報告 24 件(2015〜2026 年、13 事業者)。調査で表にした 28 件のうち原文を開けた件と、認証基盤の調査の 1 件 選び方 | 計画で指定した 19 件と、調査で足した 5 件。原文を開けなかった件は使わない 型の数え方 | 1 件を複数の型に入れる。型ごとの件数の合計に意味はない 引き金の数え方 | 指定の 19 件を、報告が最初に挙げる出来事で 1 件 1 分類に(Part 1 と同じ) 日付と数字 | 日付は発生日で書く(公開日が無い報告があるため)。数字は報告にあるものだけを、報告の区間のまま書く 自己申告であること 原因の切り方と、何を書かないかは事業者が選ぶ。Meta 2021 の報告は停止時間を書いていない 再発防止策は約束で、実施の確認ではない。Cloudflare は 2025-12 の報告で、2025-11 の後の対策が未完だったと書いた 詳しい報告を出す事業者に偏る。件数を業界全体の頻度として読まない 報告に無い内部の事情は推測しない 8 つの型への分類と、引き金の分類は、書き手によるもの。事業者がそう分類したわけではない 206
解説

この Part の材料と読み方です。対象は、事故を起こした事業者自身が公開した事後報告 24 件で、2015 年から 2026 年、13 の事業者にわたります。調査の段階では 28 件を表にしましたが、スライドに載せるのは、書き手が原文を開いて日付・影響・原因・再発防止策を確かめた件だけです。開けなかった件は使っていません。数え方も先に断ります。1 件は複数の型に入るので、型ごとの件数を足しても意味はありません。引き金の分類だけは、Part 1 と同じく、指定の 19 件を 1 件 1 分類で数えました。右の注意が大事です。事後報告は自己申告で、何を原因と呼ぶか、何を書かないかは事業者が選びます。再発防止策は約束であって、実施の確認ではありません。報告に無い内部の事情は、このガイドでは推測しません。

19 件の事後報告で、引き金の多くは変更・操作
スライド 207 のテキストと解説
19 件の事後報告で、引き金の多くは変更・操作 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 変更・操作 13 件(境界の取り方で 12〜14 件)、機器・電源・ネットワークの障害や乱れ 3 件 指針・報告 各事業者の事後報告 19 件(発生日 2015-09-20〜2025-11-18。一覧は verify_p14.md) 書籍 『プラットフォームエンジニアリング』6.3.2 節 p.145〜146(考え方) 報告が最初に挙げる出来事 | 件数 | 該当する件 変更:設定・ルール・ポリシーの変更と配布 | 3 | CrowdStrike 2024、Cloudflare 2024-11・2025-11 変更:人が打ったコマンド・スクリプト | 3 | S3 2017、Meta 2021、Atlassian 2022 変更:ソフトウェアの更新、機能の有効化 | 4 | Roblox 2021(機能の有効化)、Slack 2022(エージェント更新)、Datadog 2023(OS の自動更新)、Google Cloud 2025(境界:先に挙がるのは 5/29 のコードの配布。停止は 6/12 のポリシーの変更から) 変更:容量の追加、自動のスケール | 2 | Kinesis 2020(容量追加)、AWS 2021(自動の容量調整) 変更:機器を交換する保守作業 | 1 | GitHub 2018(光機器の交換で 43 秒の切断) 機器・電源・ネットワークの障害や乱れ | 3 | DynamoDB 2015(短いネットワークの乱れ)、Cloudflare 2020(スイッチの部分故障)、Cloudflare 2023(境界:最初の出来事は電力会社の計画外の保守。拠点の電源喪失) 負荷の増加 | 2 | GitLab 2017(境界:最初の出来事は負荷の増加。データを失った直接の原因は誤操作)、Slack 2021(休暇明けの最初の営業日) 変更を伴わない潜在的な不具合 | 1 | AWS 2025(DNS 管理の自動化に潜んでいた競合) 引き金は小さい。43 秒の切断が 24 時間 11 分の劣化になった(GitHub 2018)。被害の大きさは、広げる側の設計で決まった 207
解説

Part 1 で示した数を、件の名前つきで開きます。数え方は Part 1 と同じで、指定の 19 件を、報告が最初に挙げる出来事で 1 件 1 分類にしました。変更と操作が 13 件で、境界の取り方によって 12 件から 14 件の幅があります。内訳は、設定・ルール・ポリシーの変更と配布が 3 件、人が打ったコマンドやスクリプトが 3 件、ソフトウェアの更新や機能の有効化が 4 件、容量の追加と自動のスケールが 2 件、機器を交換する保守作業が 1 件です。機器・電源・ネットワークの障害や乱れは 3 件、負荷の増加が 2 件、変更を伴わない潜在的な不具合の発現が 1 件でした。分類は本ガイドによるもので、境界の件が 3 つあります。Google Cloud 2025 は、報告が先に挙げるのが 5 月 29 日のコードの配布なので、ソフトウェアの更新に数えました。停止が始まったのは 6 月 12 日のポリシーの変更のときです。Cloudflare 2023 は、最初の出来事が電力会社の計画外の保守で、障害や乱れに数えました。GitLab 2017 は、最初の出来事が負荷の増加なのでそこに入れましたが、データを失った直接の原因は誤操作です。AWS 2025 は、変更ではなく、自動化に潜んでいた競合が現れた件です。『プラットフォームエンジニアリング』は、基盤は状態を持ち、中断に敏感な利用者も抱えるので、完全な自動化は高くつき、その投資が進むように変更管理が前提になると述べます。次のスライドで、引き金が小さくても全体が止まる条件を見ます。

全体が止まる条件は、要求の経路にある同期の依存
スライド 208 のテキストと解説
全体が止まる条件は、要求の経路にある同期の依存 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 要求のたびに基盤へ問い合わせる利用側は、基盤と一緒に止まる 仕様・文書 AWS Builders' Library「Static stability using Availability Zones」(2019-12-05) 指針・報告 Google Cloud 2020-12-14/Microsoft Azure 2024-01-21(NKRF-1TG)/AWS 2021-12-07 の事後報告 要求のたびに問い合わせる 利用者の要求 注文サービス 共通基盤(停止中) 要求も止まる 先に配られた写しで動く 利用者の要求 注文サービス+手元の写し 共通基盤(停止中) 要求は通る 下の段:配布は要求の経路の外にある。基盤が止まっている間は、新しい変更(鍵・方針・設定)が届かない 件 | 依存の形(報告の記述) | 起きたこと Google 2020-12-14 | 認証情報を扱う User ID Service は、古いデータを検出すると要求を拒む作り | 47 分、OAuth を要する顧客向けサービスが利用不能 Azure 2024-01-21 | Storage・Key Vault・Event Hubs・Service Bus が、RBAC の方針を ARM から取得 | キャッシュが切れた時点で、要求を拒み始めた AWS 2021-12-07(逆の例) | 稼働中の EC2 と既存の DNS 応答は、混雑した内部ネットワークを通らない | 影響なし。不調だったのは起動や変更の API 208
解説

この Part の中心の図です。上の段は、注文サービスが要求のたびに共通基盤へ問い合わせる形です。基盤が止まると、注文サービスが健全でも要求は通りません。下の段は、鍵・方針・設定などを先に配っておき、手元の写しで判断する形です。基盤が止まっても要求は通ります。失うのは鮮度で、止まっている間の新しい変更は届きません。下の表は報告に書かれた実例です。Google の 2020 年 12 月の件では、認証情報を扱うサービスが古いデータを検出すると要求を拒む作りで、47 分のあいだ OAuth を要する顧客向けのサービスが使えませんでした。Azure の 2024 年 1 月の件では、Key Vault などが RBAC の方針を ARM から取得しており、キャッシュが切れた時点で要求を拒み始めました。逆に AWS の 2021 年 12 月の件では、稼働中の EC2 インスタンスと既存の DNS 応答は影響を受けませんでした。

被害を広げた設計は、8 つの型にまとまる
スライド 209 のテキストと解説
被害を広げた設計は、8 つの型にまとまる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 引き金はばらばらでも、広げる側の設計は少数の型に集まる(1 件が複数の型に入る) 指針・報告 各事業者の事後報告 24 件(型ごとの該当と URL は research/reviews/verify_p14.md) 型 | 何が起きるか | 該当する件 | 問うこと ① 設定・ルールの一斉配布 | コードは段階的に配るのに、挙動を決めるデータは短時間で全体に届く | CrowdStrike 2024、Google 2025、Cloudflare 2025-11 ほか 3 件 | このデータは何秒で、どこまで届くか ② 基盤への集中と循環依存 | 全サービスが 1 つの基盤に載り、その不調が全体に届く | Roblox 2021、DynamoDB 2015、Kinesis 2020 ほか 3 件 | 全体で 1 つしかないものは何か。この基盤が 1 時間止まったら、どのサービスが止まるか。その一覧は誰が持つか ③ 復旧・監視の手段が同じ基盤上 | 障害時に、監視・展開・連絡の道具も一緒に使えなくなる | AWS 2021、Meta 2021、Slack 2021 ほか 6 件 | 監視と連絡は、この基盤なしで動くか ④ 自動化の誤動作 | 自動の昇格・判定・縮小が、想定外の状況で被害を広げる | GitHub 2018、Cloudflare 2020、AWS 2025 ほか 2 件 | 自動化は、どこまで自分で変えてよいか ⑤ 再試行の嵐 | 引き金が消えても、再試行と再接続が過負荷を保つ | DynamoDB 2015、Google 2025、Slack 2022 ほか 4 件 | 全員が同時に再試行したら何が起きるか ⑥ 復元できないバックアップ | バックアップはあるが戻せない。または戻すのが遅い | GitLab 2017、Atlassian 2022、GitHub 2018 | 最後に復元したのはいつで、何時間か ⑦ 削除の単位の誤り | 道具や API が、意図より広い範囲を一度に消す・外す | Atlassian 2022、S3 2017、Cloudflare 2026-02 ほか 2 件 | 対象の種類と数を、どう確かめるか ⑧ 隠れた共有 | 独立のはずの単位が、同じ時刻・同じ部品・同じ表を共有している | Datadog 2023、Cloudflare 2023、Google 2025 | 独立と言う単位は、何を共有しているか 209
解説

24 件を、被害を広げた設計で分けると 8 つの型になりました。1 つ目は、設定やルールの一斉配布です。2 つ目は、1 つの基盤への集中と循環依存です。3 つ目は、復旧・監視・連絡の手段が同じ基盤に載っていることです。4 つ目は、安全のための自動化の誤動作です。5 つ目は、引き金が消えても続く再試行の嵐です。6 つ目は、復元できない、または復元が遅いバックアップです。7 つ目は、削除や操作の単位の誤りです。8 つ目は、独立のはずの単位の隠れた共有です。1 件は複数の型に入ります。たとえば AWS の 2025 年 10 月の件は、型 2・4・5・7 に入れました。分類は書き手によるもので、件数は公開されやすさを映します。業界全体の頻度として読まないでください。右端の問いは、最後の設計レビューのスライドでもう一度まとめます。型 2 だけは問いが 2 つあります。全体で 1 つしかないものは何か、そして、この基盤が 1 時間止まったらどのサービスが止まり、その一覧を誰が持つかです。ここから型ごとに、事例と、事業者が挙げた対策を見ます。

型①:挙動を決めるデータが、短時間で全体に届く
スライド 210 のテキストと解説
型①:挙動を決めるデータが、短時間で全体に届く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 設定・ルール・ポリシーが、短時間で全体に届いた 4 件(1 つの型にまとめるのは本ガイド) 指針・報告 CrowdStrike 2024-07-19(RCA 2024-08-06)/Google Cloud 2025-06-12/Cloudflare 2025-11-18・2025-12-05 の事後報告 件 | 配られたもの | 読む側で起きたこと | 事業者が挙げた対策 CrowdStrike 2024-07-19 | 検知ルール(Channel File 291)。定義は入力 21 個、センサーが渡すのは 20 個 | 21 番目を見る条件が初めて入り、配列の外を読んだ | 項目数の検査、境界検査、ルールの段階配布 Google Cloud 2025-06-12 | 意図しない空のフィールド(blank fields)を含むポリシーのデータ。数秒で全世界に複製 | 適切なエラー処理が無く、Service Control が null 参照で落ち、再起動を繰り返した | 全世界に複製するデータは段階的に流して検証。検査に失敗しても要求を通す Cloudflare 2025-11-18 | 5 分ごとに作り直す特徴量ファイル。行が重複し、大きさが 2 倍に | 特徴量の上限 200 個を超え、プロキシが落ちた | 自社生成の設定も利用者入力と同じに検査。全体の停止スイッチを増やす Cloudflare 2025-12-05 | 試験用ルールを止める設定。段階配布をしない仕組みで、数秒で全体へ | 旧プロキシが 500 を返した。約 25 分、HTTP 通信の約 28% | 設定にも健全性の確認と速い巻き戻し。不正なら既知の良い状態で続ける 同じ型:Cloudflare 2024-11-14(空の設定)、Google 2020-12-14(使用量 0 の報告で割当を自動引き下げ)。型にまとめるのは本ガイドの整理。段階的な配布を対策に挙げたのは CrowdStrike・Google Cloud・Cloudflare 2025-12。Cloudflare 2025-11-18 の報告の対策には無い 210
解説

型 1 は、設定やルールの一斉配布です。4 件を並べました。CrowdStrike の 2024 年 7 月の件では、検知ルールの定義は入力を 21 個としていましたが、センサーが渡すのは 20 個でした。21 番目を実際に見る条件が初めて配られ、配列の外を読みました。Google Cloud の 2025 年 6 月の件では、意図しない空のフィールド(blank fields)を含むポリシーのデータが数秒で全世界に複製されました。新しいコードには適切なエラー処理が無く、各リージョンの Service Control が null 参照で落ちました。Cloudflare の 2025 年 11 月の件では、5 分ごとに作り直す特徴量ファイルが 2 倍になり、上限の 200 個を超えてプロキシが落ちました。12 月の件は、同じ作業の中で、バッファの拡大は段階配布、試験用ルールの停止は数秒で全体に届く仕組み、と配り方が分かれていました。約 25 分、同社が扱う HTTP 通信の約 28% に影響したと報告しています。この 4 件を 1 つの型にまとめるのは本ガイドの整理で、事業者がそう呼んだわけではありません。対策も分かれます。段階的な配布を対策に挙げたのは、CrowdStrike、Google Cloud、Cloudflare の 12 月の報告です。Cloudflare の 11 月 18 日の報告が挙げた対策は、取り込みの検査と停止スイッチなどで、段階的な配布は入っていません。Datadog の 2023 年の件は、配られたのがデータではなく OS の更新なので、この型には入れず、型 8 に置きました。

型②⑧:1 つの基盤、1 つの共有が全体に届く
スライド 211 のテキストと解説
型②⑧:1 つの基盤、1 つの共有が全体に届く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 全体で 1 つしかないものと、独立のはずの単位が共有しているものを探す 指針・報告 Roblox 2021-10-28/AWS DynamoDB 2015-09-20・Kinesis 2020-11-25/Datadog 2023-03-08/Cloudflare 2023-11-02/PagerDuty 2025-08-28 型 | 件 | 何が 1 つだったか、何を共有していたか | 事業者が挙げた対策 ② | Roblox 2021-10-28 | サービス発見・ヘルスチェック・ロック・KV を 1 つの Consul クラスタで。停止は 73 時間 | 重要なサービスを専用のクラスタに分ける。拠点とゾーンを増やす ② | DynamoDB 2015-09-20 | ストレージサーバーが担当範囲を 1 つのメタデータサービスに問い合わせる。エラー率は約 55% で推移 | メタデータサービスを分割し、それぞれが一部のサーバーだけを受け持つ ② | Kinesis 2020-11-25 | Cognito は利用状況の送信に Kinesis を使う(ベストエフォートの設計)。バッファの不具合で Web サーバーが塞がった | フロントエンドのセル分割を前倒し。大口の利用サービスは別の群へ ⑧ | Datadog 2023-03-08 | 直接の接続が無い 5 リージョン(クラウド 3 社)が、OS 既定の更新時刻 06:00〜07:00 UTC を共有 | 旧い更新経路を止め、同種を監査。同じ規模の劣化を試験に入れる ⑧ | Cloudflare 2023-11-02 | 高可用クラスタの上のサービスが、1 拠点にしか無い Kafka と ClickHouse に依存 | GA の製品は高可用クラスタに載せる。拠点を丸ごと外す試験 リーダーの視点 付随の機能が本流を止めた例がある。Cognito の利用状況の送信(Kinesis 2020)、API の利用分析の新機能(PagerDuty 2025-08-28)。「止まってもよいはず」の依存は、実際に止めて確かめたかを問う 211
解説

型 2 と型 8 は、依存の形の問題なので 1 枚にまとめました。型 2 は集中です。Roblox の 2021 年 10 月の件では、サービス発見・ヘルスチェック・ロック・KV を 1 つの Consul クラスタが担っており、停止は 73 時間に及びました。DynamoDB の 2015 年の件では、ストレージサーバーが担当範囲を 1 つのメタデータサービスに問い合わせる作りで、エラー率は約 55% で推移しました。Kinesis の 2020 年の件では、Cognito が利用状況の送信に Kinesis を使っていました。ベストエフォートの設計でしたが、バッファの潜在的な不具合で Web サーバーが塞がりました。型 8 は隠れた共有です。Datadog の件では、直接の接続が無い 5 つのリージョンが、OS 既定の更新時刻を共有していました。Cloudflare の 2023 年の件では、高可用クラスタの上のサービスが、1 拠点にしか無い Kafka と ClickHouse に依存していました。対策は、分割と、止めて確かめる試験に向かっています。

型③:監視と連絡の道具が、同じ障害で止まる
スライド 212 のテキストと解説
型③:監視と連絡の道具が、同じ障害で止まる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 9 件で、監視・展開・状況ページ・連絡先のどれかが、壊れた基盤に依存していた 指針・報告 AWS 2017-02-28・2020-11-25・2021-12-07/Meta 2021-10-04/Roblox 2021-10-28/Slack 2021-01-04 ほか(ノートに補足) 監視と展開が使えない AWS 2021:監視と展開の仕組みが、混雑した内部ネットワークの上 Roblox 2021:監視が Consul に依存する循環 Slack 2021:ダッシュボードが DB と別の VPC。飽和した経路に依存 状況を伝えられない S3 2017:状況ダッシュボードの管理画面が S3 に依存 Kinesis 2020:投稿の道具が Cognito に依存。予備の道具は使い慣れず遅れた Google Cloud 2025:状況ページの基盤も落ち、最初の掲示は約 1 時間後 入れない・連絡できない Meta 2021:DNS が消えて社内の道具が使えず、現地に人を送った。防御が復旧を遅らせた Atlassian 2022:サイトと一緒に顧客の連絡先の一部が消え、通常の問い合わせができなかった 事業者が挙げた対策 監視を監視対象に依存させない(Roblox)/状況ダッシュボードとサポートの仕組みを複数リージョンで動かす(AWS)/予備の道具を定期的に訓練する(AWS)/主要な連絡先の控えを改善し、URL や ID が無い顧客も問い合わせられるようにする(Atlassian)/障害時に外へ掲示する道具と手順を改善する(9 件目の Google 2020-12-14) 212
解説

型 3 は、直すための道具が同じ障害で使えなくなる型です。24 件のうち 9 件が該当しました。左は監視と展開です。AWS の 2021 年 12 月の件では、監視も展開の仕組みも、混雑した内部ネットワークの上にありました。Roblox では監視が Consul に依存する循環がありました。Slack の 2021 年 1 月の件では、ダッシュボードが DB と別の VPC にあり、飽和した Transit Gateway に依存していました。中央は状況の連絡です。S3 の件では、状況ダッシュボードの管理画面が S3 に依存していました。Kinesis の件では、予備の投稿の道具は動きましたが、手作業が多く使い慣れておらず、掲示が遅れました。右は入口と連絡先です。Meta の件では、DNS が消えて社内の道具が使えず、現地に人を送りました。同社は、防御が復旧を遅らせたことを、受け入れる価値のある取引だと述べています。9 件は、AWS 2021、Roblox 2021、Slack 2021、S3 2017、Kinesis 2020、Google Cloud 2025、Meta 2021、Atlassian 2022、Google 2020 です。9 件目の Google の 2020 年 12 月の件は、箱には載せていません。報告は対策として、社内の道具に及ぶ停止のときに外へ掲示する道具と手順の信頼性を上げるとしています。下に、事業者が挙げた対策をまとめました。Atlassian の対策は、主要な連絡先の控えを改善し、有効な URL や ID が無い顧客も技術サポートに直接連絡できるようにする、というものです。出典の補足:Atlassian 2022-04-05、Google Cloud 2025-06-12、Google 2020-12-14 の事後報告。

型④:安全のための自動化が、被害を広げる
スライド 213 のテキストと解説
型④:安全のための自動化が、被害を広げる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 昇格・掃除・縮小の自動化が、想定の外の状況で被害を大きくした 指針・報告 GitHub 2018-10-21/Cloudflare 2020-11-02/AWS 2025-10-19〜20/Slack 2021-01-04/Meta 2021-10-04 の事後報告 件 | 自動化がしたこと | 結果 | 事業者が挙げた対策 GitHub 2018-10-21 | 43 秒の切断で、Orchestrator が西海岸の DB を一次に昇格 | アプリは大陸をまたぐ遅延に耐えられず、24 時間 11 分の劣化 | リージョンをまたぐ昇格をしない設定に Cloudflare 2020-11-02 | スイッチの部分故障で etcd が読み取り専用に。管理系が同期複製を一次に昇格 | 昇格で全複製の作り直しが要る不具合。API とダッシュボードが 6 時間 33 分劣化 | 作り直しの不具合を修正。自動の昇格を急がない設定に変更 AWS 2025-10-19〜20 | DNS 管理の自動化の競合で、掃除の処理が現用の計画を消した | DynamoDB の入口の DNS レコードが空に。自動では直らず人手で復旧 | 自動化を全世界で止め、直してから再開。NLB は 1 回に外せる容量を制限 Slack 2021-01-04 | ネットワークの待ちで CPU 使用率が下がり、自動スケーリングが Web 層を縮めた | その後 1,200 台の追加を試み、供給の仕組みが詰まった | 供給の仕組みを定期的に負荷試験 Meta 2021-10-04:DNS サーバーは、データセンターに届かないと自分を不健全と見なし、経路広告を取り下げる作りだった。動いているのに、外から見えなくなった 213
解説

型 4 は、守るための自動化が被害を広げる型です。GitHub の 2018 年 10 月の件では、43 秒の切断のあいだに Orchestrator が西海岸の DB を一次に昇格させました。報告は、Orchestrator は設定どおりに動いたが、アプリの層はその構成を支えられなかったと書いています。Cloudflare の 2020 年 11 月の件では、スイッチの部分故障で etcd が読み取り専用になり、管理系が同期複製を一次に昇格させました。昇格のたびに全複製を作り直す不具合があり、認証を担う DB が過負荷になりました。同社は不具合を直したうえで、少なくとも 1 つの DB では昇格をそれほど急いで始めないほうがよいとして、設定を変えています。AWS の 2025 年 10 月の件では、DNS を管理する自動化の競合で、掃除の処理が現用の計画を消し、入口のレコードが空になりました。Slack の 2021 年 1 月の件では、ネットワークの待ちで CPU 使用率が下がり、自動スケーリングが Web 層を縮めました。対策は、自動化が及ぶ範囲を狭める方向です。合意と部分故障の基礎は Part 10 を見てください。

型⑤:引き金が消えても、再試行が過負荷を保つ
スライド 214 のテキストと解説
型⑤:引き金が消えても、再試行が過負荷を保つ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 戻すには、流入を絞ってから少しずつ戻す操作が要った 指針・報告 AWS DynamoDB 2015-09-20・2025-10-19〜20/Google Cloud 2025-06-12/Slack 2022-02-22/Microsoft Azure 2024-01-21 の事後報告 引き金 短い障害、再起動、キャッシュの冷え 一斉の再試行・再接続 全員が同時に取り直す 基盤が過負荷 応答が遅れる 時間切れ また再試行を生む。引き金が消えても続く 件 | 何が過負荷を保ったか | どう戻したか DynamoDB 2015-09-20 | 担当範囲を取れないサーバーが再試行を続け、メタデータサービスの負荷が減らない | メタデータサービスへの要求を止め、容量を足してから再開 Google Cloud 2025-06-12 | us-central1 で、再起動した Service Control が Spanner を過負荷に。乱数つきの指数バックオフが無かった | タスクの生成を絞った。この地域の解消まで最大約 2 時間 40 分 Slack 2022-02-22 | キャッシュの命中率が落ち、全シャードに散る問い合わせで DB が過負荷。時間切れでキャッシュを埋め直せない | クライアントの起動要求を絞った Azure 2024-01-21 | 失敗した ARM 呼び出しの再試行で、West Europe の通信が 20 倍超に | 要求の絞り込みを強めた AWS 2025-10-19〜20 | DynamoDB 復旧後、EC2 の管理系がリースの再確立に追いつかず、進めなくなった | 流入を絞り、ホストを選んで再起動 214
解説

型 5 は、引き金を取り除いても自力で戻らない過負荷です。上の流れのとおり、短い障害や再起動のあと、全員が一斉に再接続や再試行をし、基盤が過負荷になり、時間切れがまた再試行を生みます。DynamoDB の 2015 年の件では、担当範囲を取れないサーバーが再試行を続け、メタデータサービスの負荷が下がりませんでした。容量を足す管理の要求すら通らず、いったん要求を止めてから容量を足しています。Google Cloud の 2025 年 6 月の件では、us-central1 で再起動した Service Control が Spanner を過負荷にしました。報告は、乱数つきの指数バックオフが実装されていなかったと書いています。Slack の 2022 年 2 月の件では、報告自身がこの状態を連鎖障害と呼び、負荷を大きく減らすか容量を増やさないと戻らないと述べています。メタステーブル障害の定義と再試行の設計は Part 10 で扱いました。

型⑥⑦:広く消せる道具と、戻せないバックアップ
スライド 215 のテキストと解説
型⑥⑦:広く消せる道具と、戻せないバックアップ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 消す側に歯止めが無く、戻す側の手順は実際に試されていなかった 指針・報告 GitLab 2017-01-31/Atlassian 2022-04-05/AWS S3 2017-02-28/Cloudflare 2026-02-20/GitHub 2018-10-21 の事後報告 件 | 消えたもの・外れたもの | なぜ広がり、なぜ長引いたか | 事業者が挙げた対策 GitLab 2017-01-31 | 二次側のつもりで、一次側の DB のディレクトリを消した(約 300 GB) | 日次の pg_dump は版の不一致で失敗し、通知のメールは届いていなかった。約 6 時間前の手動スナップショットから復元。停止は約 18 時間 | バックアップの監視、復元の自動テスト、責任者を置く Atlassian 2022-04-05 | アプリの ID の代わりにサイトの ID を渡し、883 サイト(顧客 775)を即時に削除 | API は ID の種類を確かめない。多数のサイトを一括で戻す自動化が無く、復元に最長 14 日 | ソフトデリートを全体に。複数サイトの復元を自動化 S3 2017-02-28 | 入力の誤りで、意図より多くのサーバーを外した | 道具が多くの容量を速く外せた。全面再起動は想定より長くかかった | 外す速度を落とす。最低限の容量を割る操作を止める Cloudflare 2026-02-20 | 値なしのフラグを API が「全件」と解釈。BYOIP の約 1,100 プレフィックスを取り下げ | 検証環境のデータと模擬データが足りず、事前に見つけられなかった。約 300 は人手で復旧。全体で 6 時間 7 分 | API のスキーマを定める。速すぎる・広すぎる取り下げを止める遮断器 GitHub 2018-10-21:バックアップからクラスタ全体を作り直したことはそれまで無く、数テラバイトの復元に数時間かかった 215
解説

型 6 と型 7 は対で起きるので 1 枚にしました。GitLab の 2017 年 1 月の件では、担当者が二次側のつもりで一次側の DB のディレクトリを消しました。日次の pg_dump は、9.6 の DB に対して 9.2 のバイナリで動いて失敗しており、失敗を知らせるメールも届いていませんでした。約 6 時間前に手で取ったスナップショットから戻し、停止は約 18 時間でした。Atlassian の 2022 年 4 月の件では、削除の API がサイトの ID もアプリの ID も受け取り、種類を確かめませんでした。883 サイトが即時に消え、復元は最長 14 日かかりました。同社は、RPO は満たしたが RTO は満たせなかったと書いています。S3 の件は、入力の誤りで意図より多くのサーバーを外した件です。Cloudflare の 2026 年 2 月の件では、値をつけないフラグを API が全件の意味に取りました。対策は、消す側の歯止めと、戻す手順の自動化と演習です。

設定やルールもデータ。検査と段階配布の両方が要る
スライド 216 のテキストと解説
設定やルールもデータ。検査と段階配布の両方が要る 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 作る側と読む側の取り決めの食い違いは、スキーマの互換性と同じ問題(Part 7) 指針・報告 CrowdStrike RCA(2024-08-06)/Cloudflare 2024-11-14・2025-11-18・2026-02-20、「Code Orange: Fail Small」(2025-12-19)/Google 2020-12-14 食い違い | 件 | 作る側 | 読む側 項目の数 | CrowdStrike 2024-07-19 | 定義は入力 21 個。検証器は 21 個を前提に通した | 渡されるのは 20 個。21 番目を読んで範囲の外へ 大きさの上限 | Cloudflare 2025-11-18 | 問い合わせの結果に行が重複し、ファイルが 2 倍に | 特徴量は 200 個まで。超えると落ちた 空の意味 | Cloudflare 2024-11-14 | 不具合で、空の設定を渡した | 設定が取れないときの安全装置が働き、全顧客分のログを送った 値なしの意味 | Cloudflare 2026-02-20 | フラグに値をつけずに API を呼んだ | 空文字を「全件」の要求と解釈した 0 の意味 | Google 2020-12-14 | 旧い仕組みが、使用量を 0 と報告し続けた | 猶予の期限が切れ、自動で割当を下げた 互換性検査 読む側で、項目数・大きさ・空を検査する。不正なら落ちずに、既知の良い状態で続ける(Cloudflare の対策) 段階配布 設定の変更も、ソフトウェアと同じ段階配布・健全性の確認・巻き戻しを通す(CrowdStrike・Google Cloud 2025・Cloudflare 2025-12 の対策) 216
解説

型 1 を、Part 7 の契約の言葉で読み直します。設定・ルール・ポリシーは、コードの挙動を変えるデータです。CrowdStrike の報告は、問題の内容更新を設定データであって、コードでもカーネルドライバーでもないと位置づけています。そのうえで、項目数の検査と段階配布の両方を対策に入れました。表は、作る側と読む側の取り決めが食い違った 5 件です。項目の数、大きさの上限、空の意味、値なしの意味、0 の意味。どれも、スキーマの互換性検査で扱う種類の食い違いです。互換性検査だけでは足りません。検証器が誤った前提で通した CrowdStrike の例があります。段階配布だけでも足りません。次のスライドで見ます。Cloudflare は 2025 年 12 月の計画で、ネットワークに配る設定の変更にも、ソフトウェアのリリースと同じ管理された段階配布を求めるとしています。互換性の規則そのものは Part 7 を見てください。

段階配布は万能ではない。何を見て進むかを問う
スライド 217 のテキストと解説
段階配布は万能ではない。何を見て進むかを問う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 段階配布の途中で起きた件と、段階配布を通り抜けたあとに起きた件がある 指針・報告 Slack 2022-02-22/PagerDuty 2025-08-28/Google Cloud 2025-06-12 の事後報告 書籍 『プラットフォームエンジニアリング』6.3.2 節 p.145 脚注(考え方) Slack 2022-02-22 Consul エージェントの更新を 25% ずつ進めた 前の週の 2 回の 25% は、何も起きずに通った 3 回目は、その日のピークの通信と重なり、連鎖障害に入った PagerDuty 2025-08-28 新機能を 1% → 5% → 25% と設定で拡大 25% の段階で 1 回目の障害。機能との関係に気づかず 75% に上げ、2 回目 Kafka の監視が薄く、段階配布があっても防げなかったと報告 Google Cloud 2025-06-12 5/29 のコードの変更は、リージョンごとの段階配布を通った 落ちる経路は、引き金になるポリシーの変更が無く、配布の間に一度も通らなかった 6/12 にポリシーのデータが入り、全リージョンで落ちた レビューで問うこと 各段で、どの指標を、どれだけの時間見てから次へ進むか その指標は、遅れて現れる問題(メモリの増加、キャッシュの冷え)を拾えるか 各段は、負荷の高い時間帯を含むか。戻す手順は試してあるか 217
解説

段階配布をしていれば防げた、とは報告からは言えません。3 件を並べます。Slack の 2022 年 2 月の件では、Consul エージェントの更新を 25% ずつ進めていました。前の週の 2 回は何も起きず、3 回目に、その日のピークの通信と重なって連鎖障害に入りました。PagerDuty の 2025 年 8 月の件では、新機能を 1%、5%、25% と設定で広げ、25% の段階で 1 回目の障害が起きました。機能との関係に気づかないまま 75% に上げ、2 回目が起きています。報告は、Kafka の監視が薄く、段階配布の手順があっても防げなかったと書いています。Google Cloud の 2025 年 6 月の件では、5 月 29 日のコードの変更はリージョンごとの段階配布を通りました。しかし、落ちる経路は、引き金になるポリシーの変更が無かったので、配布の間に一度も通りませんでした。6 月 12 日にポリシーのデータが入ると、全リージョンで落ちています。報告は、機能フラグで守っていれば検証環境で見つかったはずだと書いています。3 件から言えるのは、段階に分けるだけでは見つからず、各段で何を見るかを決める必要がある、ということです。これは本ガイドの読み取りです。Cloudflare の 2026 年 2 月の件は、ここには入れていません。報告は変更が順に適用されたと書くだけで段階配布とは呼んでおらず、影響を検出して戻したとも書いているからです。『プラットフォームエンジニアリング』も、カナリアは安全機構でありテストの代わりではないと注記しています。

対策の軸は静的な安定性:手元の情報で動き続ける
スライド 218 のテキストと解説
対策の軸は静的な安定性:手元の情報で動き続ける 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 依存先が傷んでも、それまでしていたことを続けられる作り(3 つに分けるのは本ガイド) 仕様・文書 AWS Builders' Library「Static stability using Availability Zones」「Avoiding fallback in distributed systems」(ともに 2019-12-05) 指針・報告 Cloudflare 2024-11-14・2025-12-05/Google 2020-12-14/Azure 2024-01-21 の事後報告 先に配っておく IAM ロールの認証情報は、各インスタンスへ先に配られ、何時間も有効。配布が止まっても動き続ける(AWS の例) 手元の情報で動く データプレーンは既存の状態を保ち、コントロールプレーンが傷んでも動く。変更は届かない 障害時だけの迂回路を作らない フォールバックは試しにくく、それ自体が失敗し、読めない負荷をかける。代わりに先に配る、誤りを呼び出し側へ返す 依存先に届かないとき | 得るもの | 失うもの | 報告の例 拒む | 古い情報で通さない | 依存する全体が止まる | Google 2020-12-14、Azure 2024-01-21 通す | 止まらない | 検査や保護が外れる。下流が量を受けきれない | Cloudflare 2024-11-14(全顧客分を送り、下流が応答不能に) 手元の版で続ける | 止まらない。ふるまいを予測できる | 新しい変更が届かない。良い版を保持する仕組みが要る | Cloudflare 2025-12-05 の対策(既知の良い状態で続ける) 218
解説

型ごとの対策を貫く軸が、静的な安定性です。AWS の Builders' Library は、依存先が傷んでも、それまでしていたことが動き続ける設計をこう呼びます。3 つに分けるのは本ガイドの整理です。1 つ目は、先に配っておくことです。同じ Builders' Library の別の記事は、IAM ロールの認証情報を各インスタンスへ先に配り、何時間も有効にしておく例を挙げます。配布が止まっても動き続けます。2 つ目は、手元の情報で動くことです。データプレーンは既存の状態を保ち、コントロールプレーンが傷んでも動き続けます。3 つ目は、障害時だけの迂回路を作らないことです。フォールバックは試しにくく、それ自体が失敗し、読めない負荷をかけます。これは 2 つ目の記事の主張で、その記事自身は静的な安定性という語を使っていません。同じ軸に束ねたのは本ガイドです。Cloudflare の 2024 年 11 月の件は、設定が取れなければ全顧客分を送るという安全装置が下流を倒した例です。下の表は判断の分かれ目です。どれを選んでも失うものがあるので、基盤ごと、操作ごとに決めて文書にします。認証基盤での選び方は Part 13 を見てください。

設計レビューで問うこと:型ごとに 1 問
スライド 219 のテキストと解説
設計レビューで問うこと:型ごとに 1 問 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 指針・報告 各事業者の事後報告(中央の列に事業者と発生年。URL は research/reviews/verify_p14.md) 型 | 問い | なぜ問うか(事後報告) | 危ない兆候 ① | この設定・ルール・ポリシーは、何秒でどこまで届くか。読む側は不正な値で何をするか | コードは段階的でも、データは数秒で全体に届いた(Google 2025、Cloudflare 2025-12) | 「設定変更なのでリリースではない」 ② | 全体で 1 つしかないものは何か。この基盤が 1 時間止まったら、どのサービスが止まるか。その一覧は誰が持つか | 1 つの Consul、1 つのメタデータサービスに全体が載っていた(Roblox 2021、DynamoDB 2015) | 依存の一覧が無い。「そこは落ちない前提」 ③ | 監視・展開・状況ページ・連絡先は、守ろうとしている基盤なしで動くか | 9 件で、道具が壊れた基盤に依存していた(AWS 2021、Slack 2021 ほか) | 監視が本番と同じネットワーク・同じ認証 ④ | 自動の昇格や修復は、どこまで自分で変えてよいか。切り替えた先でアプリは動くか | 設定どおりに昇格したが、アプリは支えられなかった (GitHub 2018) | フェイルオーバーの試験が DB 単体 ⑤ | 全クライアントが同時に再試行したら何が起きるか。流入を絞る手段はあるか | 再試行が過負荷を保った(DynamoDB 2015、Google 2025) | 再試行に上限・乱数なし。絞る手段が無い ⑥ | 最後に本番相当のデータを復元したのはいつで、何時間かかったか | バックアップは失敗しており、通知は届いていなかった (GitLab 2017) | 「バックアップは取っている」 ⑦ | 破壊的な操作は、対象の種類と数をどう確かめるか。取り消せるか | ID の種類を確かめない API が、サイトごと消した (Atlassian 2022) | 同じ API が複数の種類の ID を受ける ⑧ | 独立と言う単位(リージョン・拠点)が共有しているものは何か | 直接の接続が無いリージョンが、更新時刻を共有していた (Datadog 2023) | 「リージョンは独立なので」 219
解説

型ごとに 1 問ずつ、設計レビューで問うことをまとめました。型 1 は、挙動を決めるデータが何秒でどこまで届くか、読む側は不正な値で何をするかです。型 2 は問いが 2 つです。全体で 1 つしかないものは何か。そして、この基盤が 1 時間止まったらどのサービスが止まるか、その一覧を誰が持つかです。型 3 は、監視・展開・状況ページ・連絡先が、守ろうとしている基盤なしで動くかです。型 4 は、自動の昇格や修復がどこまで自分で変えてよいか、切り替えた先でアプリが動くかです。型 5 は、全クライアントが同時に再試行したら何が起きるか、流入を絞る手段があるかです。型 6 は、最後に本番相当のデータを復元した日と所要時間です。型 7 は、破壊的な操作が対象の種類と数をどう確かめるかです。型 8 は、独立と言う単位が共有しているものです。中央の列は、なぜ問うかを事後報告で示しています。右の危ない兆候は、本ガイドの整理で、レビューの場でよく出る答え方を並べたものです。

まとめ:止まる条件を先に問い、型で点検する
スライド 220 のテキストと解説
まとめ:止まる条件を先に問い、型で点検する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 ステップ 9 この基盤が止まったら、利用側の要求は通るか。答えを設計の段階で決めておく 指針・報告 各事業者の事後報告 24 件(verify_p14.md) 書籍 『プラットフォームエンジニアリング』6.3.2 節 p.145〜146(考え方) 引き金は小さい。変更・操作が 19 件中 13 件(境界の取り方で 12〜14 件)。被害の大きさは広げる側の設計で決まった 止まる条件は 1 つ。要求の経路に、基盤への同期の依存があるかどうか 広げる設計は 8 つの型。一斉配布、集中、道具の同居、自動化、再試行、復元、削除、隠れた共有。型ごとに 1 問で点検する 設定やルールもデータ。互換性検査と段階配布の両方が要る。段階ごとに何を見るかを決める 対策の軸は静的な安定性。先に配る。手元の情報で動く。障害時だけの迂回路を作らない(束ね方は本ガイド) 限界 24 件の自己申告からの整理で、一般法則ではない。件数は公開されやすさを映す 次は Part 15 変更が引き金になるなら、変更の手順そのものを設計する。止めずに入れ替え、やめる方法へ 220
解説

Part 14 のまとめです。1 つ目、読んだ 19 件では、引き金の多くは、機器・電源・ネットワークの障害や乱れではなく、変更や操作でした。変更・操作は 13 件で、境界の取り方で 12 件から 14 件の幅があります。引き金は小さく、被害の大きさは広げる側の設計で決まっていました。2 つ目、全体が止まる条件は、要求の経路にある同期の依存です。3 つ目、広げる設計は 8 つの型にまとまり、型ごとに 1 問でレビューできます。4 つ目、設定やルールもデータで、互換性検査と段階配布の両方が要ります。段階に分けるだけでは問題は見つからないので、各段で何を見るかを決めます。5 つ目、対策の軸は静的な安定性です。先に配り、手元の情報で動き、障害時だけの迂回路を作りません。この 3 つに束ねたのは本ガイドです。最後に限界です。これは 24 件の自己申告からの整理で、一般法則ではありません。次の Part 15 では、基盤や DB を止めずに入れ替え、やめる方法を扱います。変更が引き金になるなら、変更の手順そのものを設計する必要があるからです。出典の補足:静的な安定性は AWS Builders' Library「Static stability using Availability Zones」(2019-12-05)。

PART 15 止めずに入れ替え、やめる
スライド 221 のテキストと解説
PART 15 止めずに入れ替え、やめる v2 を別に作らず、稼働させたまま作り直す。移行の作業の大部分は基盤側が引き受ける。導出データは作り直して並べ、記録のシステムは照合と切り戻しの窓を持って移す このPartで答えられるようになる問い 基盤や DB を入れ替えると、API のほかに何が変わるか 導出データと記録のシステムで、入れ替えの手順はどう違うか 作り直しの費用は誰が負い、提案には何を書くか 使われなくなった基盤を、どういう条件でやめるか 221
解説

Part 15 は、動かしたまま入れ替え、やめるための Part です。Part 7 では契約の互換と expand/contract を、Part 12 では導出データの作り直しを扱いました。ここでは、それらを使って、基盤やデータベースそのものを入れ替える場面を扱います。前半は置換性です。入れ替えで変わるのは API だけではないこと、同じ「PostgreSQL 互換」でも幅が違うことを見ます。中ほどで、導出データの入れ替えと、記録のシステムの入れ替えを分けます。後者について書籍にあるのは、同じ製品の別のサーバーへ移して接続先を切り替える手順(『ハードパーツ』6.2.4〜6.2.5 節)と、版上げの進め方(DDIA 2e p.202)までです。別の製品へ、照合と切り戻しの窓を持って移す手順は、参考にした 4 冊に見当たりません。そこは公式文書と事業者の記事、そして題材 B の実測で補います。後半は『プラットフォームエンジニアリング』を手がかりに、作り直しの進め方、移行の作業を誰が引き受けるか、やめ方を扱い、最後に EU の Data Act と、設計レビューで問うことをまとめます。

置換性は、入れ替えるときに分かるのでは遅い
スライド 222 のテキストと解説
置換性は、入れ替えるときに分かるのでは遅い 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 入れ替えで変わるのは API だけではない。既定の正しさ、待ち方、上限、周りの道具も変わる 仕様・文書 PostgreSQL 18 文書 13.2/Aurora DSQL ユーザーガイド(2026-11 確認) 書籍 『プラットフォームエンジニアリング』1.4.3 節 p.16・9.2.3 節 pp.211–212(考え方) 層 | 入れ替えで変わるもの(例) | 製品を選ぶ時点で数えておくこと 接続と SQL | ワイヤプロトコルは同じでも、使える文と機能は一部(トリガー、手続き言語、一時表など) | 使っている機能の一覧。互換の根拠が製品ページの見出しだけになっていないか 既定の分離レベル | Read Committed が既定の製品から、Repeatable Read 固定や Serializable 既定の製品へ(Part 9) | 既定の水準を前提にした処理(残高の検査、在庫の引き当てなど) 同時実行の扱い | ロックで待つ方式から、コミット時に失敗して再試行する方式へ | ロック待ちを前提にした箇所。再試行の実装と冪等性 上限と制限 | 1 トランザクションで変更できる行数、接続の長さ、DDL の扱い | 最大のバッチと最長のトランザクションが上限に収まるか 周りの道具 | CDC・複製・バックアップ・監視の口が製品ごとに違う | 下流の導出データと運用手順のうち、作り直すもの リーダーの視点 置換性は、入れ替えを計画する日ではなく、製品を選ぶ日に決まる。誰がどの機能に依存しているかの一覧を、自動で取り続ける 222
解説

置換性は、Part 1 で JIS X 25010 の replaceability に対応づけました。同じ目的の別の製品に置き換えられる度合いです。この性質は、入れ替えを決めた日に初めて調べると手遅れになります。理由は、入れ替えで変わるものが API だけではないからです。表の 1 行目は接続と SQL です。ワイヤプロトコルが同じでも、トリガーや手続き言語のように使えない機能があります。2 行目は既定の分離レベルで、Part 9 で見たとおり製品ごとに違います。3 行目は同時実行の扱いです。ロックで待つ製品から、コミット時に失敗を返す製品へ移ると、再試行の実装が要ります。4 行目は上限、5 行目は CDC や監視などの周りの道具です。右の列は、製品を選ぶ時点で数えておくことです。『プラットフォームエンジニアリング』は、利用状況のメタデータを集めて依存を見えるようにすることを、移行の費用を下げる手段の 1 つに挙げています。次のスライドで、製品ごとの違いを具体的に見ます。

「PostgreSQL 互換」の幅は製品ごとに違う
スライド 223 のテキストと解説
「PostgreSQL 互換」の幅は製品ごとに違う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 同じ「互換」でも、既定の正しさ・待ち方・使える機能が違う(公式文書の記述。未検証) 仕様・文書 Aurora DSQL・Spanner・CockroachDB v26.4・PostgreSQL 18 の公式文書(2026-11 確認) 製品(文書の版) | 既定の分離レベル | 同時実行の扱い | 使えない・違うと文書が書くもの(例) PostgreSQL 18(基準) | Read Committed | ロックを取り、相手の終了を待つ | — Aurora DSQL | Repeatable Read に固定 | 楽観的。待たずに進み、衝突はコミット時に直列化エラー。再試行が前提 | トリガー、PL/pgSQL、一時表、TRUNCATE。1 トランザクションで変更できるのは 3,000 行まで。接続は 1 時間で切れる Spanner(PostgreSQL インターフェース) | Serializable(Repeatable Read も選べる) | 競合の扱いの説明ではないが、非対応の一覧に「細かい同時実行制御」がある | トリガー、SERIAL 列、SAVEPOINT、トランザクション内の DDL、部分索引、拡張、ユーザー定義の型・関数 CockroachDB v26.4 | Serializable | 再試行の処理をクライアントが持つ | 範囲型、XA、列単位の権限、外部データラッパーなど。整数の割り算の結果が decimal になる、などの違いもある 未検証 公式文書の記述(2026-11 確認)で、実機では測っていない。Aurora PostgreSQL は、既定の分離レベルを書いた固有のページを確かめられず、表に入れていない 223
解説

「PostgreSQL 互換」をうたう製品を、公式文書の記述で並べました。確認は 2026 年 11 月で、実機では測っていません。基準の PostgreSQL 18 は、既定が Read Committed で、競合するとロックを待ちます。Aurora DSQL は、分離レベルが Repeatable Read に固定です。衝突はコミット時に直列化エラーとして返り、アプリケーションが再試行します。トリガー、PL/pgSQL、一時表、TRUNCATE は使えず、1 トランザクションで変更できるのは 3,000 行までです。Spanner の PostgreSQL インターフェースは、既定が Serializable で、Repeatable Read も選べます。文書は、ほかのデータベースから移すワークロードには Repeatable Read を勧めています。「細かい同時実行制御」は非対応の一覧にある項目で、競合の扱い方の説明ではありません。トリガー、SERIAL 列、SAVEPOINT、拡張なども非対応に挙げています。CockroachDB は v26.4 の文書で、既定が Serializable です。Aurora PostgreSQL は、固有のページを確かめられず、表に入れていません。既定の違いが何を起こすかは Part 9 で扱いました。

導出データの側は、作り直して入れ替えられる
スライド 224 のテキストと解説
導出データの側は、作り直して入れ替えられる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 同じ元データから新旧 2 つのビューを並べ、利用者を少しずつ移す。どの段階からも戻れる 書籍 DDIA 2e 13.1.2.2 節 pp.541–542 1. 新しいビューを作る 同じ元データを再処理する 2. 新旧を並べて維持 旧は動かしたまま 3. 利用者を少しずつ移す 少数から。割合を上げる 4. 旧ビューを廃止 全員が移ってから なぜ戻せるか 元データ(記録のシステム、ログ)に手を付けない どの段階でも、動いている旧ビューへ戻れる 戻せるので、変更を速く進められる 成り立つための前提(Part 12) 元データが残っている(保持期間、スナップショット) 再処理が同じ結果になる(決定性、副作用の停止) 新旧を同時に持つ容量と費用 ケーススタディ 検索の索引、キャッシュ、分析用の表、ベクトル索引の入れ替えはこの形。題材 B で、導出ストアの差し替えと、ログからの再構築の一致率を実測する(結果はケーススタディ) 224
解説

入れ替えの対象が導出データなら、手順は本にあります。『データ指向アプリケーションデザイン 第2版』の 13.1.2.2 節です。同じ元データを再処理して新しいビューを作り、古いビューと並べて維持します。まず少数の利用者を新しいビューへ移し、性能を確かめ、不具合を探します。割合を少しずつ上げ、最後に古いビューを廃止します。本書は、この進め方の利点を、すべての段階が容易に元へ戻せることだと述べています。戻れるので、変更を進める自信が持て、結果として速く動けます。検索の索引、キャッシュ、分析用の表、ベクトル索引の入れ替えはこの形に当てはまります。ただし、これが成り立つには前提があります。元データが残っていること、再処理が同じ結果になること、新旧を同時に持つ容量があることです。前提の中身は Part 12 で扱いました。題材 B では、導出ストアの差し替えと、ログからの再構築の一致率を測ります。次は、元データそのものを入れ替える場合です。

記録のシステムの入れ替えは、書籍の手順だけでは足りない
スライド 225 のテキストと解説
記録のシステムの入れ替えは、書籍の手順だけでは足りない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 正は作り直せない。書籍の手順は別サーバーへの移動まで。別の製品へは公式文書と実測で書く 仕様・文書 PostgreSQL 18 文書 29.8(2026-11 確認) 指針・報告 Stripe 2017-02-02「Online Migrations at Scale」(事業者の記事) 書籍 『ハードパーツ』6.2.4〜6.2.5 節 p.157〜159/DDIA 2e p.202 1. 並行稼働 新旧の両方へ書く、または複製する 2. 埋め戻し 既存データを新へ写す 3. 照合 新旧を両方読み、差を数える 4. 読みを切替 読む先を新へ。少しずつ 5. 書きを切替 正を新へ。切り戻しの窓を開ける 6. 旧を削除 窓を閉じてから消す 資料で裏づけられる部分 別サーバーへ移して接続先を切り替える(『ハードパーツ』p.157〜159)。版上げは DDIA 2e p.202 二重書き込み → 読みの切替 → 書きの切替 → 旧の削除と、読みの照合(Stripe 2017) 並列実行と切替、二重書き込みに各 1 文(『プラットフォームエンジニアリング』p.225・p.309) 本ガイドの考え(一次資料なし) 別の製品へ、照合と切り戻しの窓を持って移す手順は、4 冊に見当たらない。段階の分け方、照合の合格基準、窓(書きを切り替えた後も旧へ戻せる期間)の置き方は、本ガイドの整理。窓の間は、新に入った書き込みを旧へ戻す手段が要る ケーススタディ 題材 B で実測する:新旧のアプリを混在させた各段階の失敗数、書き込みが止まった時間、再構築の一致率(結果はケーススタディ) 225
解説

記録のシステム、つまり正のデータベースを入れ替える場合は、別の難しさがあります。導出データと違い、再処理する元データがほかにありません。しかも、入れ替えの間も書き込みを受け続けます。書籍にある手順は 2 つで、どちらも同じ製品の中の話です。『ハードパーツ』6.2.4〜6.2.5 節は、Part 3 で見た 5 段階の最後の 2 つで、スキーマを別のデータベースサーバーへ移し、接続先を切り替えます。移し方は、バックアップとリストアか、レプリケーションです。前者は通常ダウンタイムが要り、後者は止めずに済む代わりに設定の作業が増える、と同書は書いています。DDIA の p.202 は版上げです。複製の方式が版の違いを許すなら、フォロワーを先に上げて昇格させ、止めずに上げられるとします。一方、別の製品へ、照合と切り戻しの窓を持って移す手順は、参考にした 4 冊に見当たりません。『プラットフォームエンジニアリング』は p.225 と p.309 に、それぞれ 1 文で触れるだけです。p.225 は移行スクリプト、性能の退行テスト、本番での並列実行、切り替えを並べ、p.309 は互換を確かめるための二重書き込みに触れます。そこで図の 6 段階は、事業者の記事と公式文書を手がかりに、本ガイドが整理したものです。Stripe の 2017 年の記事は、二重書き込み、読みの切り替え、書きの切り替え、古いデータの削除の 4 段階と、本番での読みの照合を書いています。段階の細かい分け方、照合の合格基準、切り戻しの窓の置き方は、一次資料で裏づけられていません。題材 B で、新旧を混在させた各段階の失敗数と、止まった時間を測ります。次のスライドで、並行稼働の中身を見ます。出典の補足:DDIA 2e p.541 は導出ビューの入れ替えで、正の入れ替えではありません。

移行中の二重書き込みは Part 6 の問題を持ち込む
スライド 226 のテキストと解説
移行中の二重書き込みは Part 6 の問題を持ち込む 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 二重書き込みは 2 つの型で食い違う。移行では、照合と埋め直しがその後始末になる 仕様・文書 PostgreSQL 18 文書 29.8(2026-11 確認) 指針・報告 Stripe 2017-02-02「Online Migrations at Scale」(事業者の記事) 書籍 DDIA 2e 12.2.1 節 pp.497–498(二重書き込みの問題) 起きること | 移行での現れ方 | 代わりに・加えてすること 片方だけ成功する | 旧への書き込みは成功し、新は失敗する。新に行が欠ける | 差を数える照合を、並行稼働の間ずっと流す。欠けを埋め直す手順を持つ 並行更新が逆順に届く | 同じ行への 2 つの更新が、旧と新で違う順に入り、最後の値が食い違う | 正を旧に決め、新は旧の変更ログから作る(CDC、論理レプリケーション) 埋め戻しと新しい書き込みが競う | 埋め戻しが、新しい値を古い値で上書きする | 埋め戻しは「無ければ入れる」にするか、版を比べ古ければ捨てる 複製が運ばないものがある | PostgreSQL 18 の論理レプリケーションは、DDL とシーケンスの値を運ばない | スキーマは手で合わせる。切り替えの前にシーケンスを進める 本ガイドの考え(一次資料なし) 3 行目(埋め戻しとの競合)と右の列は、本ガイドの整理 題材 A で二重書き込みの食い違いを、題材 B で移行の各段階の失敗数を実測する(結果はケーススタディ) 226
解説

並行稼働を二重書き込みで行うと、Part 6 で見た問題をそのまま持ち込みます。DDIA は二重書き込みの問題を 2 つ挙げています。1 つは競合状態で、同じ行への 2 つの更新が、2 つの保存先に違う順で届きます。もう 1 つは、片方の書き込みだけが成功することです。移行では、これが新旧の食い違いとして現れます。だから照合は、切り替えの前に 1 回だけ行う検査ではなく、並行稼働の間ずっと流す仕組みになります。別の方法は、正を旧に決めたまま、新を旧の変更ログから作ることです。PostgreSQL なら論理レプリケーションが使えます。ただし PostgreSQL 18 の文書は、スキーマと DDL は複製されないこと、シーケンスの値は複製されないことを制限として書いています。切り替え先として使うなら、シーケンスを最新の値まで進める必要があります。3 行目の、埋め戻しと新しい書き込みの競合と、右の列の対処は、本ガイドの整理です。題材 A と題材 B で実測します。

v2 を別に作らず、稼働させたまま作り直す
スライド 227 のテキストと解説
v2 を別に作らず、稼働させたまま作り直す 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 別に作る v2 は、過去の誤りの修正と新機能を同時に抱え、利用側に移行を求める 書籍 『プラットフォームエンジニアリング』8 章 pp.182–187・8.3 節 pp.194–196・8.5 節 p.204(考え方) | v2 を別に作る | 稼働させたまま作り直す(リアーキテクチャ) やり方 | 別のアーキテクチャと機能を持つ新システムを作り、利用側が v1 から v2 へ移る | 負荷を処理し続けながら、アーキテクチャを反復的に再実装する 変更の量 | 過去の誤りの修正と、新機能の追加が重なる。範囲が膨らみやすい | 既存の論理構造の中で段階的に届けるので、変更に自然な上限がある 利用側から見えるもの | 移行の作業。届いた頃には、別の手段へ移っていることもある | 見える変化の量を絞れる 重ねた先(著者の観察) | 同じ領域に基盤が並び、非推奨のものと準備中のものが混ざる | それでも非常に難しい、と著者は書く リーダーの視点 著者の経験に基づく考え方で、規範ではない。作り直すなら、互換性・テスト・段階的な配布の歯止めを先に作る。破壊的な変更は新しい API として足し、移行の期間を置いてから旧を止める(契約の互換は Part 7) 227
解説

ここからは、基盤そのものを作り直す話です。『プラットフォームエンジニアリング』8 章は、2 つのやり方を比べています。1 つは v2 方式で、別のアーキテクチャと機能を持つ新しいシステムを作り、利用側が v1 から v2 へ移ります。もう 1 つがリアーキテクチャで、負荷を処理し続けながら、アーキテクチャを反復的に再実装します。著者はこれを「飛行中の飛行機のエンジンを交換する」と表現しています。著者が v2 を勧めない理由は 2 つです。v2 は過去の誤りの修正と新機能の追加を同時に抱え、範囲が膨らみます。また、基盤の組織の文化は、白紙から速く試す仕事に合いません。作り直しは、既存の論理構造の中で段階的に届けるので、変更に自然な上限があります。ただし著者自身、作り直しも非常に難しいと書いています。これは著者の経験に基づく考え方で、規範ではありません。作り直しを選ぶなら、互換性、テスト、段階的な配布という歯止めを先に作ります。契約の互換は Part 7 で扱いました。

移行の作業の大部分は基盤側が引き受け、変化予算を守る
スライド 228 のテキストと解説
移行の作業の大部分は基盤側が引き受け、変化予算を守る 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 最も楽な移行は、利用側が作業せず、起きたことにも気づかないもの(同書 p.209) 書籍 『プラットフォームエンジニアリング』1.4.3 節 pp.15–16・p.111・p.122・9.1〜9.2 節 pp.206–215・p.219(考え方) 費用を下げる手段(p.16) | 効き方 部品の種類を減らす | 種類が少ないほど、移行が要る機会が減る OSS・ベンダー製品を API で包む | 完全でなくても、下の変更から利用側を守れる 利用状況のメタデータを集める | 誰がどこに依存しているかが見え、更新の負担が減る 開発者のいるチームが所有する | 透過的に移す道具を、基盤側で作れる 変化予算(p.122) 利用側が一度に受け止められる変化には限りがある ほかの仕事と合わせて、予算として数える 必須でない変化は、採用に時間がかかる 移行の作業時間は、基盤の利用費用として測る(p.111) リーダーの視点 避けたい進め方(pp.206–207):背景を伝えない期限、不明確な要件、誰も試していない移行先、チェックリストで追い回す監視役。期限と催促の前に、自動化で利用側の作業を減らす(p.213) 228
解説

移行の作業を誰が引き受けるか、です。『プラットフォームエンジニアリング』は、移行の管理を基盤の価値の重要な部分と位置づけ、費用を下げる手段を 4 つ挙げています。部品の種類を減らすこと、OSS やベンダー製品を API で包むこと、利用状況のメタデータを集めること、開発者のいるチームが所有することです。4 つ目は訳文の主語が読み取りにくく、本ガイドは前後の文から、道具を作るのは基盤側と読みました。API は完全でなくても、実装の多くを隠せば、下の変更から利用側を守れます。右は変化予算です。利用側が一度に受け止められる変化には限りがあり、ほかの仕事と合わせて予算として数える、という考え方です。同書は、基盤の指標の 1 つに、移行の作業時間を基盤を使う費用として挙げています。下の注記は、同書が挙げる 4 つの避けたい進め方です。期限やチェックリストで人を動かす前に、自動化で利用側の作業を減らします。同書は、期限とチェックリストが最後の手段として要る場合もある、とも書いています。誰が引き受けるかについての同書の言い方は、基盤側が利用側の移行の作業の大半を計画し、自分で担う、です(p.214)。全部とは書いていません。最後に残る利用者の分を誰が負うかは、基盤側と利用側の交渉になる、とも書いています(p.219)。これらは著者の経験に基づく考え方で、数値の基準ではありません。次は、作り直しを提案するときに書くことです。

作り直しの提案には、移行費用と 12 か月の成果を書く
スライド 229 のテキストと解説
作り直しの提案には、移行費用と 12 か月の成果を書く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 移行の費用が入っていない提案は、全体像の重要な部分を欠く(同書 p.201) 書籍 『プラットフォームエンジニアリング』8.4 節 pp.196–204(4 ステップの一覧は p.197。考え方) ステップ(p.197) | 提案に書くこと | 危ない兆候 1. 最終の姿を大きく考える | 作り直しが終わったとき、機能・効率性・信頼性・セキュリティの何が変わるか | 1 つの面だけの改善にとどまっている 2. 移行の費用を入れる | 既存の利用者がどう移るか。その工数と、移行の計画を立てる計画 | 「既存の利用者はどう移るのか」に答えが無い 3. 12 か月の成果を決める | 12 か月で届き、新しい構成の力を示し、すぐ使うと約束した利用チームがある成果 | 価値が出るのが、計画の終盤だけ 4. 賛同を得て、待つ用意をする | 「いまではない」と言われたときの次の手 | 「できるだけ早く全部を置き換える」が出発点 考え方として引く 著者は、分析して初めて移行に数百人年かかると分かった例を挙げる(RDBMS 前提のコードをキー・バリューストアへ移す、など)。年数・人年は著者の経験で、目安として読む 229
解説

作り直しを提案するときに書くことです。『プラットフォームエンジニアリング』8.4 節は、計画の枠組みを 4 つのステップで示しています。1 つ目は、最終の姿を大きく考えることです。機能・効率性・信頼性・セキュリティの 4 つの面すべてで大きな前進を狙います。2 つ目は、移行の費用を計算に入れることです。著者は、既存の利用者はどう移るのかと問われて初めて検討を始める提案を見てきた、と書いています。分析すると数百人年の工数になった例として、RDBMS を前提にした数百万行のコードをキー・バリューストアへ移す場合を挙げています。3 つ目は、12 か月ごとの成果を決めることです。著者は、多くの作り直しに 3 年から 5 年かかるとし、終盤まで価値が出ない計画は危ういと述べます。4 つ目は、賛同を得て、待つ用意をすることです。年数や人年は著者の経験による目安で、基準ではありません。提案の書き方は、Part 17 の ADR の型にもつながります。

やめるときは、先に移行先を用意する
スライド 230 のテキストと解説
やめるときは、先に移行先を用意する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 代替なしで止めるのは 3 つの場合に限る。広く使われているものは、移行の手順に乗せる 書籍 『プラットフォームエンジニアリング』9.3.3 節 pp.218–219・9.4 節 pp.221–225・p.296 脚注(考え方) 代替なしの終了を考える場合(pp.221–222) 利用者が多くない 支える費用が高い(ほかの変更を難しくする、間接の費用を含む) ほかに集中したいことがある 検討する選択肢(pp.223–225) | 中身 利用チームへ運用を引き渡す | 使い続けたいチームが、自分で運用する 出口戦略を用意する | 別のシステムへ移る手順を文書にし、支援を出す 期限を利用者と決める | 選択肢を説明し、意見を入れた日程にする 並行稼働の費用 最後の 2 割が残る(同書の言い回し。割合は例えで、目安):大半を移しても、残りを移すまで旧は消せない。その間、誰かが旧を運用し続ける(pp.218–219) 考え方として引く 著者の挙げる例:2 種類のデータストアの提供を完全にやめる計画は 5 年がかりで、執筆時点で 2 年目(p.296 脚注)。1 社の例で、目安として読む 230
解説

やめる、つまり廃止です。『プラットフォームエンジニアリング』は、同等の移行先が無いまま止めることをサービス終了と呼び、移行と区別しています。広く使われているものは、直接終了に進まず、まず移行先を用意して、移行の手順に乗せるよう勧めています。代替なしの終了は 3 つの場合に限る、としています。利用者が多くない場合、支える費用が高い場合、ほかに集中したいことがある場合です。費用には、その機能があるためにほかの変更が難しくなる、という間接の費用も含みます。進め方として同書は、利用チームへの運用の引き渡し、出口戦略の用意、利用者と話して決める期限を、検討する選択肢に挙げます。引き渡せないときに出口戦略へ進みます。移行でも終了でも、最後に残る利用者が難所です。同書は「最後の 20%」という言い方で、大半を移しても残りを移すまで旧を消せず、その間は誰かが旧を運用し続けると書いています。80% や 20% は例え話の数字で、測った値ではありません。目安として読みます。残りを誰が負うかは基盤側と利用側の交渉になる、とも書いています。著者の挙げる例では、2 種類のデータストアの提供をやめる計画が 5 年がかりでした。これも 1 社の例で、目安です。

入れ替えの途中で止まった 2 件:最後の段と 3 回目の段
スライド 231 のテキストと解説
入れ替えの途中で止まった 2 件:最後の段と 3 回目の段 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 事後報告に書かれた範囲で 2 件。止まったのは、最後に表を入れ替える段と、25% ずつの更新の 3 回目 指針・報告 GitHub Availability Report: November 2021(2021-12-01)/Slack「Slack’s Incident on 2-22-22」(2022-04-26) 件(事業者の報告) | していたこと | 起きたこと | 報告が書く対応 GitHub 2021-11-27(2 時間 50 分) | 大きな MySQL の表のスキーマ変更。最後に、変更済みの表を所定の位置へ移す | 最後の段で、読み取り複製のかなりの部分がデッドロックし、クラッシュ回復に入った。残った複製では足りなくなった。データの破損は無いと記載 | スキーマ変更を一時停止。1 つのシャードで先に試せるよう、機能ごとの分割を進める。複製の余裕を増やす Slack 2022-02-22 | Consul エージェントの更新を 25% ずつ。前の週の 2 回は問題なく通っていた | 再起動でキャッシュのノードが空の予備に替わり、命中率が低下。全シャードに散る問い合わせで DB が過負荷になり、キャッシュを埋め直せなくなった | 起動の要求を絞って負荷を下げ、少しずつ戻した。問い合わせを、キャッシュに無い分だけ読む形に直した 本ガイドの読み取り(報告は断定していない) 段階を踏んでも、段階の間に見る指標と負荷の条件が合っていなければ素通りしうる。最後の一歩(表の入れ替え、切り替え)を小さな範囲で先に試せるか、失敗したら何へ戻るかを手順に書く 231
解説

入れ替えや更新の途中で起きた件を、事業者の事後報告から 2 件引きます。どちらも自己申告です。1 件目は GitHub の 2021 年 11 月 27 日です。大きな MySQL の表のスキーマ変更で、変更済みの表を所定の位置へ移す最後の段に、読み取り複製のかなりの部分がデッドロックし、クラッシュ回復に入りました。残った複製では要求をさばけず、2 時間 50 分続きました。報告はデータの破損は無いと書き、公開時点で原因は調査中でした。2 件目は Slack の 2022 年 2 月 22 日です。Consul エージェントの更新を 25% ずつ進め、前の週の 2 回は問題なく通っていました。3 回目で、再起動によりキャッシュのノードが空の予備に入れ替わり、命中率が落ちました。全シャードに散る問い合わせでデータベースが過負荷になりました。段階を踏んでも素通りしうる、という読み取りは本ガイドのもので、報告は断定していません。全体を止める型は Part 14 で扱いました。

乗り換えやすさは、EU では法律の要求でもある
スライド 232 のテキストと解説
乗り換えやすさは、EU では法律の要求でもある 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 EU の Data Act は、データ処理サービスの提供者に、乗り換えの障害を取り除くよう求める 仕様・文書 Regulation (EU) 2023/2854(Data Act)23・25・29・31・50 条(EU 官報の本文。2026-11 確認) 条 | 定めていること(要旨) | 設計の側で数えておくこと 50 条 | 2025-09-12 から適用。乗り換えの章(VI 章)に、契約の締結時期による区別は無い(29 条の料金は別に日付を持つ) | 自社は提供者か、顧客か。対象のサービスか(31 条の除外) 23 条 | 別の提供者やオンプレミスへの乗り換えを妨げる、契約前・商業的・技術的・契約的・組織的な障害を課さず、取り除く | 乗り換えを難しくしている依存の一覧 25 条 | 契約に書く事項。通知期間は最長 2 か月、移行期間は最長 30 暦日(技術的に不可能なら理由を示し、最長 7 か月の代替期間)。取り出し期間は 30 暦日以上。その後の完全な消去 | 書き出せるデータとデジタル資産の一覧。取り出しにかかる日数 29 条 | 乗り換えの料金は 2027-01-12 から課せない。2024-01-11 からそれまでは、直接かかった費用を上限に減額した料金 | 出口の費用の見積もり(転送、並行稼働の期間) 法務に確認 要旨で、法的助言ではない。対象か、どの条が効くかは法務に確認する。作り込みのサービスと試験用の版には除外がある(31 条)。改正案(Digital Omnibus)は審議中で未成立。中身は未確認 本ガイドの考え(一次資料なし) 右の列は本ガイドの整理。「何が書き出せるデータか」「何日で取り出せるか」を、製品を選ぶときに書いておく 232
解説

置換性は、EU では法律の要求にもなっています。Data Act、規則 2023/2854 です。EU の官報の本文で確かめた範囲だけを載せます。50 条によれば、この規則は 2025 年 9 月 12 日から適用されています。50 条が契約の締結時期で適用を分けているのは IV 章の不公正な契約条項で、乗り換えを定める VI 章にその区別はありません。VI 章では、29 条の料金が別に日付を持つだけです。23 条は、データ処理サービスの提供者に、別の提供者やオンプレミスへの乗り換えを妨げる障害を課さず、取り除くよう求めています。障害として挙がるのは、契約前、商業的、技術的、契約的、組織的の 5 つです。25 条は契約に書く事項で、乗り換え開始の通知期間は最長 2 か月、移行期間は最長 30 暦日です。技術的に不可能な場合は、理由を示して最長 7 か月の代替期間を示します。データの取り出し期間は 30 暦日以上です。顧客は移行期間を 1 回延長できます。その後の完全な消去は、乗り換えが成功裏に終わったことが条件です。29 条は、乗り換えの料金を 2027 年 1 月 12 日から課せないとしています。これは要旨で、法的助言ではありません。31 条には除外があります。顧客ごとに作り込まれ、広く商用提供されていないサービスには一部の条が、試験・評価用の非本番の版には VI 章全体が適用されません。自社が提供者か顧客か、対象のサービスかは、法務に確認してください。Data Act を改める規定を含む改正案(Digital Omnibus、手続番号 2025/0360(COD))が欧州議会で審議中で、2026 年 11 月の時点で未成立です。改正案の中身は確かめていません。自社が提供者の側なら、25 条の完全な消去には、Part 16 で見る「命令してもすぐには物理的に消えない」という性質も同時に効きます。右の列は本ガイドの整理です。

設計レビューで問うこと:入れ替える前・やめる前
スライド 233 のテキストと解説
設計レビューで問うこと:入れ替える前・やめる前 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 仕様・文書 PostgreSQL 18 文書 29.8(2026-11 確認) 指針・報告 GitHub 2021-11-27/Slack 2022-02-22 の報告 書籍 『プラットフォームエンジニアリング』8・9 章(考え方)/DDIA 2e pp.541–542 問い | なぜ問うか | 危ない兆候 いまの製品のどの機能・既定値・上限に依存しているか。一覧はあるか | 入れ替えで変わるのは API だけではない | 互換の根拠が、製品ページの見出しだけ 入れ替える対象は導出データか、記録のシステムか | 導出側は作り直して並べられる。正は作り直せない | 両者を同じ手順書で扱っている 移行中の正はどちらか。二重書き込みなら、照合と埋め直しは誰が持つか | 二重書き込みは 2 つの型で食い違う(Part 6) | 「両方に書くので安全」とだけ書いてある 各段階から何へ戻れるか。書きを切り替えた後、いつまで戻れるか | 戻れる段階は、速く安全に進められる | 切り戻しの手順が「旧へ向け直す」の 1 行 v2 を別に作る案か、稼働させたまま作り直す案か。移行の工数は入っているか | 移行の費用で頓挫する提案がある | 既存の利用者の移り方が書かれていない 利用側に求める作業は何時間か。同じ時期のほかの変化と合わせて受け止められるか | 利用側の変化予算には限りがある | 期限と催促だけで進める計画 やめる対象を誰が使っているか。旧を消す条件と期日はあるか | 残りを移すまで、新旧の二重の運用が続く | 利用者の一覧が無い。旧をやめる期日が無い 233
解説

共通基盤やデータベースを入れ替える前、やめる前に、設計レビューで問うことを 7 つにまとめました。1 つ目は依存の一覧です。互換の根拠が製品ページの見出しだけなら、危ない兆候です。2 つ目は、対象が導出データか、記録のシステムかです。手順が違うので、同じ手順書で扱っていたら立ち止まります。3 つ目は、移行中の正はどちらかです。二重書き込みをするなら、照合と埋め直しの持ち主を決めます。4 つ目は、各段階から何へ戻れるかです。書きを切り替えた後に戻れる期間、つまり切り戻しの窓を、いつまで開けるかを問います。5 つ目は、v2 を別に作る案かどうかと、移行の工数が入っているかです。6 つ目は、利用側の変化予算です。7 つ目は、やめる条件と期日です。旧を消す条件が無いと、新旧の二重の運用が続きます。なぜ問うかの列には、この Part で示した根拠を書きました。4 つ目の窓の考え方は本ガイドの整理です。この表は Part 17 の一覧表に入ります。

まとめ:入れ替えは、製品を選ぶ日に始まっている
スライド 234 のテキストと解説
まとめ:入れ替えは、製品を選ぶ日に始まっている 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 置換と更新 止めずに入れ替えられるかは、依存の一覧、戻れる段階、費用の持ち方で決まる 仕様・文書 Regulation (EU) 2023/2854(Data Act。2026-11 確認) 指針・報告 GitHub 2021-11-27/Slack 2022-02-22 の報告 書籍 『プラットフォームエンジニアリング』8・9 章(考え方)/DDIA 2e p.202・pp.541–542/『ハードパーツ』p.157〜159 置換性は、選ぶ日に決まる 変わるのは API だけではない 依存の一覧を、自動で取り続ける 導出側と正では、手順が違う 導出データは、作り直して並べる 正は、照合と切り戻しの窓を設計する 移行の作業の大部分は基盤側が引き受ける v2 を別に作らず、稼働させたまま 残りを誰が負うかは交渉。変化予算を数える やめるところまでが入れ替え 旧を消す条件と期日を、先に決める EU では法律の要求でもある(法務に確認) この Part の根拠の扱い 同じ製品の別サーバーへ移す手順は『ハードパーツ』p.157〜159 に、版上げは DDIA 2e p.202 にある。別の製品へ、照合と切り戻しの窓を持って移す手順は 4 冊に見当たらない。公式文書と題材 B の実測で書き、一次資料の無い部分は「本ガイドの考え」と明示した 234
解説

Part 15 のまとめです。1 つ目に、置換性は製品を選ぶ日に決まります。入れ替えで変わるのは API だけではなく、既定の分離レベル、待ち方、上限、周りの道具も変わります。2 つ目に、導出データと記録のシステムでは手順が違います。導出データは、同じ元データから新旧を並べて、少しずつ移せます。記録のシステムは作り直せないので、並行稼働、照合、切り替え、切り戻しの窓を設計します。書籍にあるのは、同じ製品の別のサーバーへ移して接続先を切り替える手順と、版上げの進め方までです。別の製品へ、照合と切り戻しの窓を持って移す手順は 4 冊に見当たらず、本ガイドは公式文書と事業者の記事、題材 B の実測で書きます。3 つ目に、基盤の作り直しは、v2 を別に作らず稼働させたまま進め、移行の作業の大部分を基盤側が引き受けます。残りを誰が負うかは交渉になります。これは『プラットフォームエンジニアリング』の考え方です。4 つ目に、やめるところまでが入れ替えです。旧を消す条件と期日を先に決めます。EU では、乗り換えやすさが法律の要求にもなっています。次の Part 16 では、法・プライバシー・ガバナンスを設計に入れる話に進みます。

PART 16 法・プライバシー・ガバナンスを設計に入れる
スライド 235 のテキストと解説
PART 16 法・プライバシー・ガバナンスを設計に入れる 削除は導出データまで届いて完了する。保持・目的・所在・系譜は、データの流れを作る時に決める。条文の解釈が分かれる点は、法務に確認する このPartで答えられるようになる問い 設計の段階で、何を決めておくか なぜ、後から足すと作り直しになるのか 削除を命令した後、データはどこに、いつまで残るか 不変のログと消去の要求を、どう両立させるか 235
解説

Part 16 は、法・プライバシー・ガバナンスを、設計のどこに入れるかを扱います。最初にお断りします。この Part は法律の解説ではなく、法的な助言でもありません。条文が自社に適用されるか、どう解釈するかは、事業と契約によって変わります。個別の判断は、法務と個人情報保護の担当に確認してください。扱うのは、テックリーダーが設計の段階で決めておくことです。Part 3 で、正を 1 つに決め、ほかは導出データとしました。削除の要求は、Part 6 と Part 12 で設計した同じ流れをたどって、導出データまで届かなければ完了しません。後付けできない理由、削除が届く範囲、製品ごとに物理的に消える時点、不変のログとの両立、決めることの表、データの倫理、レビューの問いの順に進みます。日付と製品のふるまいは、2026 年 11 月に一次資料と公式文書を開いて確かめたものだけを書いています。

保持・目的・所在・系譜は流れに埋まり、後から足せない
スライド 236 のテキストと解説
保持・目的・所在・系譜は流れに埋まり、後から足せない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 責任 どれもスキーマ・キー・保存先・データの流れに埋め込まれる。後から足すと作り直しになる 仕様・文書 GDPR 25 条 1 項(EUR-Lex、2026-11 確認)。事例ごとの条は、各発表による 指針・報告 Datatilsynet 2019-03-25/ベルリン州監督機関 2019-11-05・地裁 2026-06-09/DPC 2024-09-26 書籍 DDIA 2e 1.4 節 p.23〜24 保持 起算点の日時が無いデータは、後から期限を計算できない 目的 取得した時の目的は、後から復元できない。結合や学習の後では縛れない 所在 複製・バックアップ・ログにも置き場がある。分け直しは移行になる 系譜 過去の流れは後で再現できない。消す対象を列挙できなくなる 公開された事例(発表元・日付)/発表が挙げる条 | 発表に書かれていること | 設計で決めておくこと Taxa 4x35(デンマーク Datatilsynet、2019-03-25) 消去しなかった件(ページに条番号なし) | 氏名は 2 年で消したが、電話番号は 5 年残した。会社の説明は「電話番号がデータベースのキー」。乗車記録 約 887 万件が個人に結びついたまま | キーに個人を識別する値を使わない Deutsche Wohnen(ベルリン州監督機関 2019-10-30 決定) 25 条 1 項・5 条(地裁は 5 条 1 項 (c)(e) ほか) | 不要になったデータを取り除く手段を備えないアーカイブシステム。当初 約 1,450 万ユーロ。2026-06-09 に地裁が 90 万ユーロ(未確定) | 選んで消せる保存先だけを選ぶ Meta Platforms Ireland(アイルランド DPC 2024-09-26 決定) 33 条 1 項・5 項、5 条 1 項 (f)・32 条 1 項 | 利用者のパスワードを、平文で内部システムに保存していた。過料は 3 件の合計で 9,100 万ユーロ | ログに出す項目を許可リストで絞る 236
解説

保持・目的・所在・系譜の 4 つは、どれもデータの流れに埋まります。保持期間は、起算点の日時を列として持っていなければ後から計算できません。利用目的は、取得した時点でしか分かりません。所在は、複製、バックアップ、ログにも及びます。系譜は、過去の分を後から再現できません。表は、監督機関と裁判所の発表を 2026 年 11 月に開いて確かめた 3 件で、書かれていること以上は推測していません。3 件は同じ条文の執行例ではないので、発表が挙げる条を件ごとに添えました。Taxa 4x35 は、顧客の情報を消去しなかった件です。会社が、電話番号はデータベースのキーなので消していないと説明した、と発表にあります。発表のページに条番号はありません。Datatilsynet は自分では過料を科せず、警察に告発して 120 万クローネの罰金を求めました。同じページの追記によれば、地裁で 10 万、高裁で 25 万クローネです。Deutsche Wohnen は、監督機関の発表が 25 条 1 項と 5 条の違反を挙げ、当初の過料が約 1,450 万ユーロでした。2026 年 6 月 9 日に地裁が、5 条 1 項 (c)(e) の違反と、個別の件での 6 条 1 項の違反を認め、90 万ユーロを言い渡しました。裁判所は判決を未確定としています。Meta は、33 条 1 項・5 項と、5 条 1 項 (f)・32 条 1 項の違反で、発表は 25 条を挙げていません。25 条 1 項が挙がるのは Deutsche Wohnen の監督機関の発表だけです。その GDPR 25 条 1 項は、処理の手段を決める時点にも措置を求めています。自社への適用は法務に確認してください。このスライドは法的な助言ではありません。

削除は、導出データまで届いて完了する
スライド 237 のテキストと解説
削除は、導出データまで届いて完了する 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 責任 記録のシステムから消しただけでは終わらない。流れの先と、流れの外に、複製が残る 仕様・文書 Apache Kafka 4.4 Design(Log Compaction)/Debezium 3.7 PostgreSQL コネクタ(2026-11 確認) 指針・報告 EDPB 消去権の協調執行報告(2026-02-10 採択)4.2.6 書籍 DDIA 2e 1.4 節 p.24・12.2.3.4 節 p.508〜509 記録のシステム 本人の行を DELETE する ログ(CDC・イベント) 削除イベントと トゥームストーンが流れる 検索索引 受け手が削除を実装して初めて消える DWH・集計 集計済みの値は行単位に消せない 特徴量・学習済みモデル 作り直しで消す(Part 12) 流れの外にも残る(削除イベントは届かない) バックアップ・スナップショット WAL・レプリカ アプリのログ・デッドレター 委託先・提供先にある複製 削除が届かない 3 つの場合 (1) 受け手ごとに削除の実装が要る (2) delete.retention.ms より遅れた受け手は、トゥームストーンを見逃しうる(Kafka 4.4) (3) 集計・特徴量・モデルには行単位の削除が効かない。(1)(3) は本ガイドの整理 ケーススタディ 題材 B で実測する:トゥームストーンの期限を過ぎてからの再構築で、削除が落ちるか(結果はケーススタディ) 237
解説

削除がどこまで届けば完了か、の図です。左から、記録のシステム、ログ、導出データです。Part 6 のチェンジデータキャプチャの流れに、削除も載せられます。Debezium は、削除イベントの後にトゥームストーンを出します。キーと null の値を持つレコードで、同じキーの過去のレコードを消す合図です。ただし、届かない場合が 3 つあります。受け手が削除を実装していない場合。受け手が保持期間より長く遅れた場合。Kafka 4.4 の設計文書は、delete.retention.ms より遅れた受け手は削除の印を見逃しうると書いています。そして、集計、特徴量、学習済みモデルです。ここは正を消してから作り直します。Part 12 と同じ土台です。下の段は流れの外に残るものです。DDIA は、複製が多くの場所にあり、バックアップは意図して不変にしてあることが多いので、本当に削除するのは難しいと述べています。どの複製が法の対象に入るかは、法務に確認してください。

削除を命令しても、すぐには物理的に消えない
スライド 238 のテキストと解説
削除を命令しても、すぐには物理的に消えない 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 責任 命令の直後は「見えなくなる」だけ。物理的に消える時点は、製品と設定で決まる 仕様・文書 PostgreSQL 18 文書 24.1.2/Apache Kafka 4.4 Design・Topic Configs/ClickHouse DELETE(2026-11 確認) 書籍 DDIA 2e 4.1.3.4 節 p.128(削除マーカーが行き渡るまで残りうる) 製品・版 | 削除を命令した直後 | 物理的に消える時点 | 設計で気をつけること PostgreSQL 18 | UPDATE・DELETE は、古い行の版をすぐには取り除かない(MVCC) | VACUUM が不要な行の版を取り除き、領域を再利用に回す | WAL・バックアップ・レプリカには別に残る(本ガイドの整理) Apache Kafka 4.4(コンパクション) | キーと null の値のレコード(トゥームストーン)が削除を表す | クリーナーがコンパクションした時。書き込み中のセグメントは対象外 | キーが本人単位でないと、本人単位に消せない(本ガイドの整理) 同上(トゥームストーン自体) | 同じキーの過去のレコードを消す合図として残る | delete.retention.ms(既定 1 日)は印を残す時間の下限。過ぎると、コンパクションで消えうる | これより遅い受け手は削除を見逃しうる Debezium 3.7(PostgreSQL コネクタ) | 削除イベントの後にトゥームストーンを出す (tombstones.on.delete の既定は true) | Kafka 側のコンパクションによる | 受け手が削除を処理するかは別の問題 ClickHouse(版の表示なし) | 軽量 DELETE は、行に削除の印を付けるだけ | 次のマージ。期間は不定と文書が明記 | 期限が要るなら min_age_to_force_merge_seconds か ALTER TABLE … DELETE 公式文書の記述(2026-11 確認)。未検証。見えなくなるまでと、物理的に消えるまでの時間は、題材 B で実測する(結果はケーススタディ) 238
解説

製品ごとに、削除を命令した直後と、物理的に消える時点を並べました。公式文書の記述を 2026 年 11 月に確かめたもので、実機では未検証です。PostgreSQL 18 の文書は、UPDATE や DELETE は古い行の版をすぐには取り除かないと書いています。ほかのトランザクションから見える可能性があるためで、回収は VACUUM が行います。Kafka 4.4 では、キーと null の値のレコードが削除を表します。書き込み中のセグメントはコンパクションされません。トゥームストーン自体にも期限があります。delete.retention.ms、既定 1 日は、印を残す時間の下限です。過ぎると、コンパクションで消えうる、という意味で、1 日で必ず消えるわけではありません。コンパクションまでの最大の遅れを決める設定もありますが、文書は確実な保証ではないとしています。ClickHouse の軽量 DELETE は印を付けるだけで、物理的な削除は次のマージです。文書は、その期間は不定だと明記しています。「本ガイドの整理」と付けたセルは、文書の記述からの推論です。どの状態を法的に消去と扱えるかは、法務に確認してください。

不変のログと消去要求:両立の選択肢は 4 つ
スライド 239 のテキストと解説
不変のログと消去要求:両立の選択肢は 4 つ 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 責任 どれを選ぶかは、ログに何を載せるかの決定。書いたイベントは、後から書き直せない 仕様・文書 NIST SP 800-88 Rev.2(2025-09)3.2 節/Apache Kafka 4.4 Design 指針・報告 EDPB Guidelines 02/2025 v2.0(ブロックチェーン。2026-07-07 採択) 書籍 DDIA 2e 3.3 節 p.101・12.2.3.4 節 p.508〜509 選択肢 | やり方 | 得るもの | 失うもの・残る危険 保持期間で消す | 個人データを載せるトピックは、短い保持期間にする | 単純。設定で済む | 保持期間が、消去までの最長の遅れになる。ログから作り直せる範囲も、保持期間まで トゥームストーン(コンパクション) | キーを本人単位にし、null の値のレコードを書く | 最新の状態を残したまま、本人単位に消せる | 遅れた受け手は削除を見逃しうる。書き込み中のセグメントには残る 参照だけを載せる | 個人データは消せる 1 か所に置き、ログには ID だけを載せる | ログは不変。消去は 1 か所で済む | 作り直しても、消した本人の分は戻らない(意図どおり)。参照先に依存する 鍵を捨てる(暗号シュレッディング) | 本人ごとの鍵で暗号化して載せ、消去の時に鍵を捨てる | 複製された暗号文が、まとめて読めなくなる | 鍵の全ての複製を消せることが条件。平文で書いた先には効かない。暗号文は残る 鍵を捨てる方法を、法的に「消去」と扱えるかは未確定。NIST は ISO/IEC 27040 の条件を引き、媒体のサニタイズの手法として扱う(連邦の情報システム向け。民間は任意)。EDPB のブロックチェーンの指針は「暗号化された個人データは、なお個人データ」とし、チェーンの外に置くよう勧める。次善の策として設計に入れ、法務に確認する 239
解説

追記だけのログに個人データを載せると、消去の要求とぶつかります。DDIA は 3.3 節と 12.2.3.4 節で、個人データをイベントの外に置く方法と、後で捨てられる鍵で暗号化する方法を挙げています。表はそれに、保持期間とトゥームストーンを足した 4 つです。得失の列は本ガイドの整理です。4 つ目の鍵を捨てる方法は、暗号シュレッディングと呼ばれます。DDIA は、問題を鍵の保管場所に移しただけでもあり、どのデータを同じ鍵で暗号化するかを事前に決める必要がある、と述べています。NIST SP 800-88 Rev.2 は、これを媒体のサニタイズ(パージ)の手法として扱います。条件は ISO/IEC 27040 を引いて挙げており、平文で保存したことが無いこと、対象の鍵の全ての複製を消せることです。暗号文は残るので、長く守る必要のある情報には受け入れられない場合がある、とも書いています。連邦の情報システム向けの指針で、民間は任意で使えます。個人データの消去に当たるかを定める文書ではありません。EDPB はブロックチェーンの指針で、暗号化された個人データはなお個人データだとし、個人データはチェーンの外に置くよう勧めています。51 段落と 104 段落です。法的に消去と扱えるかは未確定です。法務に確認してください。

設計の段階で決めること:9 つの決定
スライド 240 のテキストと解説
設計の段階で決めること:9 つの決定 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 責任 仕様・文書 GDPR 5 条 1 項 (b)(c)(e)・17 条 1 項・25 条 1 項。EUR-Lex の本文(2026-11 確認) 指針・報告 個人情報保護委員会 ガイドライン(通則編)3-4-1(令和 8 年 6 月一部改正。2026-11 確認) 書籍 『大規模データ管理 第2版』8 章 p.217〜218・8.2.4 節 p.237〜238 決めること | なぜ後付けできないか | どの基盤に効くか 列の単位のデータ分類(個人データ・秘密・業務・公開) | 分類のないまま導出データとログに広がると、どこに何があるかを調べ直すことになる | データ・ログ・分析・AI・セキュリティ 利用目的を、データの属性として持つ | 取得した時の目的は、後から復元できない。結合や学習に使った後では縛りを掛け直せない | データ・分析・AI・認証 キーに個人を識別する値を使わない(代理キー) | キーの変更は、全ての表と、全ての下流の作り直しになる | 各サービスの DB・データ・ログ 本人単位の消去の経路と、最長の所要日数 | 受け手ごとの実装と、遅れた受け手の扱いは、流れの設計そのもの | データ・ETL・分析・AI 不変のログへの、個人データの載せ方 | 書いたイベントは書き直せない。方式の変更は、全イベントの移行になる | ETL・ログ・セキュリティ 保持期間を、目的 × 種類ごとに、起算点の列つきで決める | 起算点の日時を持たないデータは、後から期限を計算できない | ログ・分析・データ ログ・トレースに出す項目の許可リスト | 出てしまったログは、保持期間まで複数の基盤に残り、選んで消しにくい | ログ・セキュリティ・全サービス データの所在(複製・バックアップ・ログを含む)と、分ける単位 | 地域で分け直すのは、シャードの切り直しと同じ費用がかかる | 各サービスの DB・データ・認証 系譜の収集を、流れを作る時に仕込む | 過去の流れは後から再現できない。消去の対象と、漏えいの範囲を列挙できなくなる | ETL・データ・分析・AI 表は本ガイドの整理で、法の義務の一覧ではない。個別の適用は法務に確認する 240
解説

この Part の中心の表です。調査で拾った 23 個の決定から、データの流れに深く埋まる 9 個に絞りました。表は本ガイドの整理で、法の義務の一覧ではありません。列の単位の分類は、消去、保持、アクセス制御、ログへの出力の全てが頼る土台です。利用目的は、データの属性として持ちます。『大規模データ管理』8 章も、データがどこから来て何のために使われているかを文書にすることが求められると述べ、利用の場面の分類を中央で持つ方法を示しています。同書の分類はアクセス制御のためのもので、取得した時の目的を属性として持つのは本ガイドの整理です。不変のログへの載せ方は、前のスライドの 4 つから選びます。保持期間は、ストアの単位ではなく、目的と種類の組み合わせで、起算点と一緒に決めます。GDPR では 5 条 1 項 (e) の保存の制限に当たります。所在の分ける単位は、Part 8 のシャードのキーと一緒に決めます。個人情報保護委員会のガイドラインは、消去を、削除のほか、特定の個人を識別できないようにすることなどを含むと説明しています。この説明が付く法 22 条の消去は、努めなければならない、という努力義務として書かれています。GDPR 17 条の義務と同じ強さではありません。本人の請求による消去は別の規定なので、どの規定の話か、どの処理が消去に当たるかは、法務に確認してください。

予測は偏りを学び、出力が入力に戻ると強まる
スライド 241 のテキストと解説
予測は偏りを学び、出力が入力に戻ると強まる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 責任 DDIA 14 章の考え方。倫理は点検表を埋めることではない。設計では、経路と記録に落とす 仕様・文書 EU AI 規則(2024/1689)10 条 2 項 (b)(f)(高リスク AI が対象)。EUR-Lex の公布時の本文(2026-11 確認) 書籍 DDIA 2e 14 章 p.580〜583(予測分析)・14.2.6 節 p.589〜590(考え方) 過去のデータ 偏りを含みうる モデルが学ぶ 相関を学び、理由は見えにくい 判定・推薦 人の機会を左右する 人の行動・結果 判定に沿って変わる 出力が、次の学習データになる(フィードバックループ) DDIA 14 章の論点 | 何が起きるか(同書) | 設計に落とすと(本ガイドの整理) バイアスと差別(14.1.1) | 入力の体系的な偏りを学習し、出力で増幅する。住む地域が分かれていると、郵便番号も保護された属性の代わりになりうる | 学習データの出所と当初の目的を、モデルの版から辿れるようにする 責任と説明責任(14.1.2) | 判断がどう導かれたかを把握しにくい。誤ったデータによる判断は、救済がほぼ不可能 | 判定ごとに、使った特徴量とモデルの版を記録する フィードバックループ(14.1.3) | 予測が人の生活に影響すると、自己強化の循環が起きる | 出力が学習データに戻る経路を系譜に書き、偏りを検査する時点を決める データ最小化(14.2.6) | 集められるだけ集め、予期しない目的で探索する考え方と対立する | 取らない・写さない。目的をデータの属性として持つ 241
解説

データの倫理を 1 枚で扱います。DDIA 14 章の考え方です。同書は、倫理は点検表を確認して法令順守を満たすことではなく、結果への説明責任を伴う、繰り返しの振り返りだと述べています。上の図はフィードバックループです。同書は、雇用主が採用に信用スコアを使う例を挙げています。不運で支払いが滞るとスコアが下がり、仕事が見つかりにくくなり、さらにスコアが下がる、という循環です。表の左と中央は同書の論点です。保護された属性を使わなくても、住む地域が人種で分かれている場合には、郵便番号のような値がその代わりになりえます。右の列は本ガイドの整理で、出所を辿れること、判定ごとに特徴量とモデルの版を残すこと、出力が戻る経路を系譜に書くことです。EU の AI 規則は、高リスクの AI システムの学習・検証・テスト用のデータについて、10 条 2 項 (f) で、出力が将来の入力に影響する場合の偏りの検査に触れています。自社のシステムが対象か、いつから適用されるかは、法務に確認してください。

設計レビューで問うこと:法・プライバシー
スライド 242 のテキストと解説
設計レビューで問うこと:法・プライバシー 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 責任 答えが「たぶん」「はず」で始まるなら、そこが決まっていない 仕様・文書 GDPR 12 条 3 項・17 条 1 項(EUR-Lex、2026-11 確認)/Apache Kafka 4.4 Design 指針・報告 EDPB 消去権の協調執行報告(2026-02-10 採択)4.2.6/Datatilsynet 2019-03-25 書籍 DDIA 2e 12.2.3.4 節 p.508〜509(考え方) 問い | なぜ問うか | 危ない兆候 ある本人のデータを全て消すとき、触るストアを列挙できるか | 導出データ・ログ・バックアップにも複製がある | 一覧が人の記憶にある。系譜がない 消去はどの経路で導出データに届き、最長で何日かかるか | 「不当な遅滞なく」(GDPR 17 条)に、数字で答えるため | 「次のバッチで消えるはず」 イベントのキーは何か。保持とコンパクションの設定は | コンパクションはキーの単位、保持は時間の単位 | キーが注文 ID。保持が無期限 バックアップの保持期間は。復元後に消去を再適用する手順はあるか | EDPB の報告は、請求の追跡と、復元後の適用を挙げる | 保持期間が決まっていない キーや索引に、個人を識別する値を使っていないか | 消去が、スキーマの変更になる(Taxa 4x35) | 電話番号やメールアドレスが主キー 保持期間は、目的 × 種類ごとに、起算点つきで決まっているか | 起算点が無いと、期限で消すジョブが書けない | 「とりあえず全部残す」 ログ・トレースに、リクエストの本文や秘密が出ていないか | ログは、統制の弱い導出データになりやすい | 「デバッグのため全部出している」 法務に確認した点と、未確認の点はどれか | 技術的に読めないことと、法的な評価は別 | 技術側だけで「消えているから大丈夫」 242
解説

設計レビューで問う 8 つです。1 つ目は、ある本人のデータを全て消すとき、触るストアを列挙できるかです。2 つ目は、消去が導出データに届くまでの最長の日数です。GDPR 17 条 1 項は、不当な遅滞なく消去する義務を定めています。何日なら足りるかは技術側では決められないので、数字を出して法務に確認します。手がかりとして、12 条 3 項は、請求への対応の通知を原則 1 か月以内としています。消去の完了との関係は、法務に確認します。4 つ目はバックアップです。EDPB の 2026 年 2 月の報告は、バックアップを変更しないほうがよい場合があるとしたうえで、消去の請求を追跡し、復元したシステムで可能な限り満たす手続きを持つべきだとしています。これは監督機関による協調執行の結果をまとめた報告で、指針そのものではありません。同じ報告は、追加の指針を検討しうるとしており、詳細な基準はまだ固まっていません。最後の 8 つ目が最も大切です。技術的に読めないことと、法的な評価は別です。確認した点と、未確認の点を分けて書いてください。「なぜ問うか」の列は本ガイドの整理を含みます。このスライドは法的な助言ではありません。

まとめ:消せることと説明できることを設計に入れる
スライド 243 のテキストと解説
まとめ:消せることと説明できることを設計に入れる 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 責任 法は動く。日付は確認月つきで読み、解釈が分かれる点は法務に確認する 仕様・文書 GDPR 25 条 1 項(EUR-Lex、2026-11 確認) 指針・報告 個人情報保護委員会 令和 8 年改正法のページ・法律の本文 附則 1 条(2026-11 確認)/EDPB 報告 2026-02 書籍 DDIA 2e 1.4 節 p.23〜24 削除は導出データまで 消去の経路は、データの流れと同じ。届かない先は、正を消して作り直す すぐには消えない 見えなくなる時点と物理的に消える時点は別。製品と設定で決まる 後付けできない 4 つ 保持・目的・所在・系譜は流れを作る時に決める 法・指針 | 状態(2026-11 確認) | 設計への意味 個人情報保護法の改正法(日本) | 2026-07-10 成立、07-17 公布。主な規定は未施行(公布から 2 年を超えない範囲で政令が定める日)。一部は公布の日、または公布から 6 月を経過した日に施行(附則 1 条) | 政令・規則・ガイドラインは検討中。どの規定がいつ施行かは法務に確認する GDPR 25 条 1 項(EU) | 適用中 | 処理の手段を決める時点にも措置を求める。設計レビューで扱う理由になる EDPB 消去権の協調執行報告 | 2026-02-10 採択 | バックアップでの消去と「不当な遅滞なく」は、追加の指針を検討しうる、という段階 243
解説

Part 16 のまとめです。削除は導出データまで届いて完了します。削除を命令しても、すぐには物理的に消えません。保持・目的・所在・系譜は、流れを作る時に決めます。下の表は、2026 年 11 月に公的な資料を開いて確かめた状態です。日本の個人情報保護法の改正法は、2026 年 7 月 10 日に成立し、7 月 17 日に公布されました。施行期日は、法律の附則 1 条が、公布の日から 2 年を超えない範囲内で政令で定める日としています。主な規定は、まだ施行されていません。ただし同じ条のただし書に例外があります。附則の一部は公布の日に施行されました。附則 1 条 3 号が挙げる一部の条の改正、たとえば 125 条、163 条、176 条、178 条から 180 条の改正などは、公布から 6 月を経過した日に施行されます。委員会のページは、政令・規則・ガイドラインを検討中としており、政令で定める施行日は、このガイドでは確認できていません。どの規定がいつ施行されるかは、法務に確認してください。EDPB の報告は 2026 年 2 月 10 日の採択です。ここに書いた日付と状態は、読む時点で変わっている可能性があります。確認月を見て、最新の状態は法務と一緒に確かめてください。次の Part 17 では、9 つのステップの問いを 1 つの一覧にまとめます。

PART 17 設計レビューで問うこと
スライド 244 のテキストと解説
PART 17 設計レビューで問うこと 9 つのステップは、設計レビューで問う順番でもある。問いを選び、決定を残し、測って確かめる このPartで答えられるようになる問い 明日のレビューで、何から問うか 4 つの性質は、どのステップの問いで確かめるか 決定を、後から読める形でどう残すか このガイドは、どこまで確かめ、何が未検証か 244
解説

Part 17 は、このガイドのまとめです。新しい事実や数字は足しません。Part 1 から 16 で示した問いと結論を、設計レビューで使う順に並べ直します。結論を先に言うと、9 つのステップは、設計するときの順番であると同時に、設計レビューで問う順番でもあります。前半では、9 つのステップをもう一度 1 枚で見たあと、ステップごとに最初に問う 1〜2 問を選びます。問いの文言は各 Part のままで、Part 番号を添えています。次に、4 つの性質から問いを引く表と、共通基盤を作る前、入れ替える前、やめる前の問いを示します。後半では、決定を残す ADR の型、トレードオフを自分で分析する手順、最初の 90 日でやることを扱います。最後に、このガイドの限界とケーススタディで確かめること、4 冊の本の章と Part の対応、用語集を置きます。

9 つのステップは、レビューで問う順番でもある
スライド 245 のテキストと解説
9 つのステップは、レビューで問う順番でもある 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 まとめ 前のステップの答えが無いと、次のステップの問いに答えられない。レビューも同じ順に進める 書籍 順番と問いは本ガイドの構成(Part 0 の 5 枚目)。各ステップの根拠は、該当する Part の根拠の行 ステップ | 答える問い | 決めること | Part 1 要件 | 何を、どの数字で約束するか | 負荷・応答時間・SLO・RPO/RTO を、条件つきの数字で 1 枚に | 2 2 所有 | どのデータを誰が持ち、どれが正か | データごとの正・所有者・導出先。書き手で所有を決める | 3 3 モデル | 関係の形と問い合わせの形に、どのモデルが合うか | 主な問い合わせと関係の形に合うモデル。イベントで持つ範囲 | 4 4 流れ | サービスと基盤の間を、データはどう流れるべきか | 順序を決める場所を 1 つに。コピーか正か。受け手の冪等性 | 6 5 契約 | 何を契約にし、どう検査するか | 互換の向き、検査を置く場所(書き手側と CI)、配り方 | 7 6 複製 | どこまで失ってよく、どこまで待てるか | 応答までに置く台数、フェイルオーバーの取り決め、分割のキーと数 | 8 7 正しさ | どの異常を、どこで防ぐか | 防ぐ異常とトランザクションの範囲。またぐ箇所は冪等・サーガ・照合 | 9・11 8 導出 | ログから作り直せるか | 作り直しの 6 つの前提と、新旧を並べて切り替える手順 | 12 9 基盤 | 各基盤を、同じ 4 つの問いでどう設計するか | 4 つの問いへの基盤ごとの答えと、止まったときのふるまい | 13・14 245
解説

9 つのステップをもう一度並べます。左から、ステップ、答える問い、そのステップで決めること、扱った Part です。問いは Part 0 の全体地図と同じ文言です。決めることの列は、各 Part のまとめから拾いました。設計レビューでは、この表を上から順に使います。たとえば、ステップ 1 の数字が無いと、ステップ 6 で「どこまで失ってよいか」に答えられません。ステップ 2 で正が決まっていないと、ステップ 4 の流れも、ステップ 8 の作り直しも決められません。レビューの場で答えが出ない問いがあったら、その前のステップに戻ってください。ステップの前後には、考え方の Part 1、基礎の Part 5 と 10、入れ替えと廃止の Part 15、法とガバナンスの Part 16 があります。この順番は本ガイドの構成で、本の章立てとは違います。次の 3 枚で、ステップごとに最初に問うことを選びます。

ステップ 1〜3:数字と正と問い合わせを先に問う
スライド 246 のテキストと解説
ステップ 1〜3:数字と正と問い合わせを先に問う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 まとめ 各 Part の「設計レビューで問うこと」から 1〜2 問を選んだ。文言は各 Part のまま 書籍 DDIA 2e 2 章 p.39〜50、1.1.3 節 p.10〜11、3 章 p.71〜79/『ハードパーツ』p.252(各 Part の根拠の行) ステップ | まず問うこと | 危ない兆候 | 詳しくは 1 要件 | 負荷を表す数字は何か。ピークは平均の何倍か | 「利用者数」だけで、読み書きの比やピークが無い | Part 2 1 要件 | RPO・RTO は、どの障害を想定した数字か。試したか | 可用性の % と混同。復旧の演習の記録が無い | Part 2 2 所有 | このデータの正は、どのサービスのどのストアか。1 つに決まっているか | 「両方」「同期しているので同じ」 | Part 3 2 所有 | この表に書くサービスはいくつか。権限で強制しているか | 全サービスが同じ DB ユーザーを使う | Part 3 3 モデル | 主な問い合わせを 3〜5 個書けるか。関係は一対多か、多対多か | 問い合わせを書かずに、製品名から決めている | Part 4 3 モデル | イベントソーシングと CQRS は、どの範囲に、何のために使うか | 全サービスの標準にしている。イベントの版の方針が無い | Part 4 基礎 | 分析を分ける理由は、測った数字か | 「分析は DWH で」が前提。今の RDB での実測が無い | Part 5 246
解説

ここから 3 枚で、ステップごとに最初に問う 1〜2 問を選びます。問いと危ない兆候の文言は、各 Part の「設計レビューで問うこと」のスライドのままです。全部の問いは右端の Part にあります。ステップ 1 は、負荷を表す数字と、RPO・RTO です。負荷を数字で言えないと、成長の議論ができません。RPO・RTO は 1 回の出来事の上限で、可用性のパーセントとは別の数字です。ステップ 2 は、正がどのストアか、そして、その表に書くサービスがいくつあるかです。答えが「両方」になるなら、そこが決まっていない箇所です。ステップ 3 は、主な問い合わせを書けるか、イベントソーシングと CQRS をどの範囲に使うかです。最後の行は基礎の Part 5 から選びました。分析用のストアを足すと、遅れ・検査・再構築の費用を払うので、分ける理由が測った数字かを問います。選び方は本ガイドの判断です。チームの弱い所に合わせて、入れ替えて使ってください。

ステップ 4〜6:書く箇所、互換の向き、置く台数を問う
スライド 247 のテキストと解説
ステップ 4〜6:書く箇所、互換の向き、置く台数を問う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 まとめ 運び方・形式・設定の名前より先に、順序と互換と保証を、言葉で答えてもらう 仕様・文書 PostgreSQL 18・Debezium 3.7・Kafka 4.4 の各文書(Part 6〜8。2026-11 確認) 書籍 DDIA 2e p.498・504、5.3 節 p.185〜186、6 章 p.195・200〜201 ステップ | まず問うこと | 危ない兆候 | 詳しくは 4 流れ | 1 つの処理で、DB と別のシステムの両方に書く箇所はどこか | commit の直後に publish。失敗を握りつぶす再送 | Part 6 4 流れ | 受け手は冪等か。同じイベントが 2 回届いても、効果は 1 回分か | イベントに ID が無い。「厳密に 1 回なので不要」 | Part 6 5 契約 | この変更は後方互換か、前方互換か。途中の時間に、どちらがどちらを読むか | 「全部同時に更新するから大丈夫」 | Part 7 5 契約 | 互換性の検査は CI で走るか。登録せずに書く書き手を、何が止めるか | 本番で、スキーマの自動登録が有効 | Part 7 6 複製 | 応答済みの書き込みは、何台に置いてから応答するか | 「synchronous_commit は on です」だけ | Part 8 6 複製 | 誰が障害を検知し、昇格を決め、旧リーダーを止めるか | 障害とみなす条件としきい値を、誰も言えない | Part 8 6 複製 | 複製とは別にバックアップを持ち、復元を試したか | 「レプリカがあるので不要」。復元の所要時間を知らない | Part 8 247
解説

ステップ 4 から 6 です。ステップ 4 は、1 つの処理で DB と別のシステムの両方に書く箇所を探します。二重書き込みは片方だけ成功しうるうえ、並行した更新が逆の順で届くと、エラーなしで食い違いが残ります。もう 1 問は受け手の冪等性です。どの運び方も既定は少なくとも 1 回なので、受け手は冪等か、同じイベントが 2 回届いても効果は 1 回分かを問います。ステップ 5 は、互換の向きです。逐次更新の間は新旧の版が同時に動くので、途中の時間にどちらがどちらを読むかを言えるかを見ます。続けて、検査が CI で走るか、登録せずに書く書き手を何が止めるかを問います。ステップ 6 は、応答済みの書き込みを何台に置いてから応答するかです。設定の名前だけの答えは、保証の説明になっていません。最後は、障害の検知、昇格の決定、旧リーダーの停止を誰が行うかです。製品の既定値と版は、Part 6、7、8 の根拠の行を見てください。ここでは繰り返しません。

ステップ 7〜9:範囲、作り直し、止まり方を問う
スライド 248 のテキストと解説
ステップ 7〜9:範囲、作り直し、止まり方を問う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 まとめ 「ACID だから」「作り直せるはず」「そこは落ちない前提」で終わる答えを、記録と一覧に変える 指針・報告 各事業者の事後報告(Part 10・14。事業者の自己申告) 書籍 DDIA 2e 8.2 節 p.283、13.3 節 p.558〜573、13.1.2.2 節 p.541〜542 ステップ | まず問うこと | 危ない兆候 | 詳しくは 7 正しさ | トランザクションの範囲は、1 つの業務操作の全体を囲んでいるか | 1 回の API 呼び出しに自動コミットの文が複数ある | Part 9 7 正しさ | この処理は、遅れを許すのか、食い違いを許すのか | 「結果整合性だから」で話が終わる | Part 11 基礎 | どこで合意に頼っているか(リーダー選出・ロック・一意性・発見) | 依存の一覧が無い。全サービスが 1 つのクラスタに載る | Part 10 8 導出 | この表・索引・ビューは正か導出か。導出なら、作り直しを最後に実行したのはいつか | 「作り直せるはず」。手順書はあるが、実行の記録が無い | Part 12 8 導出 | 作り直しに要るログは、保持期間の中にあるか。足りない分のスナップショットはあるか | 保持が既定のまま。スナップショットの時点が分からない | Part 12 9 基盤 | ここにしか無いデータ(正)は何か。導出は、何から何時間で作り直せるか | 「全部大事」で区別が無い | Part 13 9 基盤 | 全体で 1 つしかないものは何か。この基盤が 1 時間止まったら、どのサービスが止まるか。その一覧は誰が持つか | 依存の一覧が無い。「そこは落ちない前提」 | Part 14 248
解説

ステップ 7 から 9 です。ステップ 7 の 1 問目は、トランザクションの範囲です。範囲が分かれていれば、分離レベルを上げても異常は防げません。2 問目は Part 11 から、遅れを許すのか、食い違いを許すのかです。適時性と完全性は別の要件なので、「結果整合性だから」で話を終わらせません。3 行目は基礎の Part 10 から選びました。どこで合意に頼っているかの一覧が無いと、それが進まなくなったときに何が止まるかを言えません。ステップ 8 は、正か導出か、そして作り直しを最後に実行したのはいつかです。手順は、実行して初めて確かめられます。続けて、作り直しに要るログが保持期間の中にあるかを問います。ステップ 9 は、ここにしか無いデータは何か、そして Part 14 の型 2 の 2 つの問いです。全体で 1 つしかないものは何か。この基盤が 1 時間止まったらどのサービスが止まるか、その一覧は誰が持つか。7 つの基盤ごとの問いは Part 13、8 つの型ごとの問いは Part 14 にあります。次のスライドは、4 つの性質から問いを引く表です。

4 つの性質から、効くステップと問いを引く
スライド 249 のテキストと解説
4 つの性質から、効くステップと問いを引く 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 まとめ 仕様・文書 JIS X 25010:2025 の特性・副特性の名前(対応づけは Part 1。本ガイドの解釈) 書籍 DDIA 2e 2.4 節 p.47、2.5 節 p.51/『ハードパーツ』1.5 節 p.6〜9(適応度関数) 性質 | 効くステップと Part | 問い(文言は各 Part のまま) | 出す数字の例(Part 1) 柔軟性 | ステップ 2 所有(Part 3) ステップ 4 流れ(Part 6) | 表や列を変えるとき、何チームの調整が要るか(Part 3) 外に出しているのは内部の表の形か、外向きに決めた形か(Part 6) | 所有者以外からの接続数 拡張性 | ステップ 1 要件(Part 2) ステップ 6 複製と分割(Part 8) | 負荷を表す数字は何か。ピークは平均の何倍か(Part 2) 分割のキーは何か。最も熱いキーの負荷と、数を変えたときの影響は(Part 8) | 応答時間の 99 パーセンタイル 置換性 | ステップ 5 契約(Part 7) ステップ 8 導出(Part 12) 入れ替え(Part 15) | いまの製品のどの機能・既定値・上限に依存しているか。一覧はあるか(Part 15) この表・索引・ビューは正か導出か。導出なら、作り直しを最後に実行したのはいつか(Part 12) | 作り直しの所要時間、一致率 更新性 | ステップ 5 契約(Part 7) ステップ 8 導出(Part 12) 入れ替え(Part 15) | この変更は後方互換か、前方互換か。途中の時間に、どちらがどちらを読むか(Part 7) 各段階から何へ戻れるか。書きを切り替えた後、いつまで戻れるか(Part 15) | 互換性違反の件数 性質とステップの対応、数字の例は本ガイドの整理。「拡張性」は負荷への対応だけを指す(Part 1) 249
解説

「拡張性を高めたい」「置換性が心配だ」のように、性質の名前から相談が始まることがあります。そのときに使う逆引きの表です。性質の定義と主な Part は Part 1 のとおりです。柔軟性は、ステップ 2 の所有とステップ 4 の流れで決まります。表や列を変えるのに何チームの調整が要るか、外に出しているのが内部の表の形かを問います。拡張性は、このガイドでは負荷への対応だけを指します。ステップ 1 で負荷を数字にし、ステップ 6 で分割のキーと数を問います。置換性と更新性は、どちらもステップ 5 の契約、ステップ 8 の導出、そして Part 15 の入れ替えに関わります。置換性では、いまの製品への依存の一覧と、作り直しの実行の記録を問います。更新性では、互換の向きと、各段階から戻れるかを問います。右端の列は、Part 1 で示した、検査に出す数字の例です。性質とステップの対応、数字の例は、どちらも本ガイドの整理と提案で、規格や書籍の主張ではありません。

基盤は、作る前・入れ替える前・やめる前に問う
スライド 250 のテキストと解説
基盤は、作る前・入れ替える前・やめる前に問う 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 まとめ 共通基盤は全サービスに届く。節目ごとに、費用を誰が持ち、止まったら何が起きるかを確かめる 指針・報告 各事業者の事後報告(Part 14。事業者の自己申告) 書籍 『プラットフォームエンジニアリング』5.4.2 節 p.122、9 章 p.214・219、8 章(考え方。Part 13・15) 節目 | 問い | 危ない兆候 | 詳しくは 作る前 | 代わりの手段を試したか(データを捨てる、手順を変える、既存の DB の調整) | 「大手がやっているから」が理由になっている | Part 13 作る前 | 同じ問題への既存の解は何世代残っているか。消す計画はあるか | 3 世代が並び、消す計画が無い | Part 13 動かす前 | この設定・ルール・ポリシーは、何秒でどこまで届くか。読む側は不正な値で何をするか | 「設定変更なのでリリースではない」 | Part 14 動かす前 | 監視・展開・状況ページ・連絡先は、守ろうとしている基盤なしで動くか | 監視が本番と同じネットワーク・同じ認証 | Part 14 入れ替える前 | 移行中の正はどちらか。二重書き込みなら、照合と埋め直しは誰が持つか | 「両方に書くので安全」とだけ書いてある | Part 15 入れ替える前 | 利用側に求める作業は何時間か。同じ時期のほかの変化と合わせて受け止められるか | 期限と催促だけで進める計画 | Part 15 やめる前 | やめる対象を誰が使っているか。旧を消す条件と期日はあるか | 利用者の一覧が無い。旧をやめる期日が無い | Part 15 250
解説

共通基盤について、節目ごとに問うことを Part 13 から 15 から選びました。作る前の 2 問は Part 13 のものです。代わりの手段を試したか、同じ問題への既存の解が何世代残っているかを問います。作れば、運用と移行の費用を持ち続けるからです。動かす前の 2 問は Part 14 の型から選びました。設定やルールが何秒でどこまで届くか、そして監視や連絡の道具が、守ろうとしている基盤なしで動くかです。Part 1 で数えた 19 件の事後報告では、引き金の多くが変更・操作でした。13 件で、境界の取り方によって 12 から 14 件です。入れ替える前の 2 問は Part 15 のものです。移行中の正はどちらか、利用側に求める作業が何時間かを問います。移行の作業の大部分を基盤側が引き受ける、というのが『プラットフォームエンジニアリング』の考え方です。残りを誰が負うかは交渉になる、とも同書は書いています。やめる前は、誰が使っているか、旧を消す条件と期日があるかです。同書の記述は著者の経験に基づく考え方として引いています。事後報告は事業者の自己申告です。

決定は ADR に残し、データの 3 項目を足す
スライド 251 のテキストと解説
決定は ADR に残し、データの 3 項目を足す 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 まとめ ADR は 1 つの決定を 1〜2 ページで書く短い文書。選ばなかった案と、受け入れた代償を残す 書籍 『ハードパーツ』1.4 節 p.5〜6(ADR の型)、14.3 節 p.399〜400(ADR の例)/DDIA 2e 2.5.3 節 p.53 項目 | 書くこと | 書き方の例(架空の宅配注文サービス) 題名 | 決定を含む短い名詞句 | 注文イベントの配信に、アウトボックスと CDC を使う コンテキスト | 問題を 1〜2 文で。案を並べる | 注文の確定を、通知と分析へ伝える。案は、二重書き込み/アウトボックス+ポーリング/アウトボックス+CDC 決定 | 決定と、その根拠 | 業務データとイベントを同じトランザクションで書く。二重書き込みは、エラーなしで食い違いが残りうる 影響 | 影響と、検討したトレードオフ | 受け手を冪等にする。受け手が止まると正の DB に WAL が溜まるので、保持量を監視する + 記録のシステムはどれか | 正のストアと所有者(Part 3) | 注文サービスの DB。通知と分析の側は導出データ + 作り直せるか | 導出側を、何から作り直すか(Part 12) | 保持期間の中のログと、足りない分のスナップショットから + 戻せるか | 戻す経路と、戻せる期限(Part 1・15) | 公開したイベントの項目は消しにくい。項目の追加は既定値つきで行う +の 3 行は本ガイドの提案で、『ハードパーツ』の型(上の 4 行)には無い。右の列は書き方の例で、構成の推奨ではない 251
解説

決定の残し方です。『ハードパーツ』は、アーキテクチャの決定を ADR、アーキテクチャデシジョンレコードで文書化しています。ADR は特定の決定を書いた短い文書で、通常は 1〜2 ページです。同書の型は、題名と 3 つの節です。題名は、決定を含む短い名詞句にします。コンテキストには、問題を 1〜2 文で書き、案を並べます。決定には、決定とその根拠を書きます。影響には、決定がもたらす影響と、検討したトレードオフを書きます。同書の 14 章には、適応度関数の節を足した例もあります。表の下の 3 行は、同書には無い、本ガイドの提案です。データに関わる決定では、記録のシステムはどれか、導出側を作り直せるか、戻せるか、を足します。Part 1 で見たとおり、戻せない変更は危険が大きいからです。右の列は、架空の宅配注文サービスでの書き方の例で、Part 6 の内容を使いました。書き方を示すためのもので、この構成を勧める結論ではありません。

トレードオフは、3 つの手順で自分で分析する
スライド 252 のテキストと解説
トレードオフは、3 つの手順で自分で分析する 考え方 一般論の比較表は出発点。自分たちの文脈と場面を足して、表を作り直す 書籍 『ハードパーツ』15 章 p.402(3 つの手順)、15.1.1 節 p.403、15.2 節 p.405〜418、15.3 節 p.418(考え方) 1 絡み合う部分を見つける 「X を変えたら、Y も変える必要があるか」 2 結合の仕方を分析する 選択肢の組み合わせを軽く描き、比べる特性を決める 3 影響を見て評価する 変更したときの影響を見極め、トレードオフを表にする 進め方の注意 | 何をするか | 『ハードパーツ』 同じ土俵で並べる | 選択肢は、重なりなく、漏れなく並べる。有力な候補を落とさない | 15.2.2 節 p.406 文脈を足す | 一般論の表だけで決めない。自分たちの条件を足すと、結論が裏返ることがある | 15.2.3 節 p.407〜409 場面を描く | 起こりそうな場面を描き、案ごとに何が起きるかを比べる | 15.2.4 節 p.410〜412 肝心な点に絞る | 関係者には、業務の場面での結果の違いを、少数の点で示す | 15.2.5 節 p.412〜413 悪い面も書く | 推す案の不利な点を削らない。懸念を確かめる検査を添える | 15.2.6 節 p.414〜418 定性的な評価であること 同書の表の多くは定性的で、数値にもとづくものは少ない(15.2.1 節 p.405〜406)。このガイドの「判断の分かれ目」の表も、実測と書いた箇所を除いて定性的 ケーススタディ 試して測ると、分析は定性から定量に変わる(15.3 節 p.418)。題材 A〜D で実測する(結果はケーススタディ) 252
解説

このガイドの表は、判断の材料であって、答えではありません。自分のシステムでは、自分で分析し直します。その手順を『ハードパーツ』の 15 章から、考え方として借ります。同書の手順は 3 つです。どの部分が互いに絡み合っているかを見つける。それらがどう結合しているかを分析する。変更したときの影響を見て、トレードオフを評価する。結合の問いは単純で、X を変えたら Y も変える必要があるか、です。下の表は、同書が挙げる進め方の注意を、このガイドの言葉でまとめたものです。選択肢は同じ土俵のものを、重なりなく漏れなく並べます。一般論の表だけで決めず、自分たちの文脈を足します。起こりそうな場面を描いて比べます。関係者には、業務の場面での違いに絞って示します。推す案の悪い面も書きます。大事な但し書きがあります。同書は、自分たちの表の多くが定性的だと認め、真の定量的な分析ができる機会は少ないと述べています。そのうえで、試して測れば、分析は定性から定量に変わるとも書いています。ケーススタディは、そのための実測です。

最初の 90 日は、棚卸し・特定・測るの順に進める
スライド 253 のテキストと解説
最初の 90 日は、棚卸し・特定・測るの順に進める 要件 所有 モデル 流れ 契約 複製 正しさ 導出 基盤 まとめ 全部を一度に直さない。まず一覧を作り、危ない箇所を選び、1 つずつ実行して数字を出す 指針・報告 事業者の事後報告 19 件(Part 1・14。事業者の自己申告) 書籍 DDIA 2e 1.1.3 節 p.10〜11、2.5.3 節 p.53/『ハードパーツ』1.4 節 p.5〜6、1.5 節 p.6〜9(考え方) 1 棚卸し(〜30 日) データごとに、正・所有者・導出先・作り直せるかを 1 行で書く(Part 3) 共通基盤への依存の一覧を作る(Part 14・15) 要件を、数字と条件つきで 1 枚に書く(Part 2) 2 危ない箇所の特定(〜60 日) 二重書き込みの箇所(Part 6) 要求の経路にある同期の依存(Part 14) 戻しにくい決定(Part 1) 既定のままの設定:複製・保持・互換性モード(Part 7・8・12) 3 測る(〜90 日) 導出データを 1 つ作り直し、所要時間と一致率を出す(Part 12) バックアップから復元し、時間を測る(Part 8・14) 互換性の検査を CI に入れる(Part 7) 決定を ADR に残す 本ガイドの提案 30 日ごとの区切りと順番は本ガイドの提案(一次資料なし)。各項目の根拠は、かっこ内の Part にある 253
解説

全体設計を任されて最初の 90 日に何をするかを、ここまでの Part から組み立てました。30 日ごとの区切りと順番は本ガイドの提案で、一次資料はありません。規模や体制に合わせて変えてください。最初は棚卸しです。Part 3 の表を作り、データごとに、正、所有者、導出先、作り直せるかを 1 行で書きます。あわせて、共通基盤への依存の一覧と、要件の 1 枚を用意します。次に、危ない箇所を特定します。二重書き込みの箇所、要求の経路にある同期の依存、戻しにくい決定、既定のままの設定です。Part 1 と 14 で見たとおり、19 件の事後報告で、引き金の多くは変更・操作でした。13 件で、境界の取り方によって 12 から 14 件です。変更が通る経路を優先して見ます。最後に測ります。導出データを 1 つ選んで実際に作り直し、所要時間と一致率を出します。バックアップから復元して時間を測ります。互換性の検査を CI に入れます。そして、決めたことを ADR に残します。「はず」を、実行の記録と数字に置き換えるのが、この 90 日の目的です。

このガイドの限界と、ケーススタディで確かめること
スライド 254 のテキストと解説
このガイドの限界と、ケーススタディで確かめること まとめ 題材 A〜D はこれから測る。結果の数字はケーススタディ側に書き、このガイドでは先取りしない 指針・報告 事後報告の読み方は Part 14、法の扱いは Part 16、調査日と限界は Part 0 書籍 『ハードパーツ』15.3 節 p.418(試して測る。考え方) 題材 | 比べるもの | 測るもの(結果はケーススタディ) A 基盤をまたぐデータ統合 | 二重書き込み/アウトボックス+ポーリング/アウトボックス+CDC | 欠落・重複・順序のずれ。CDC の受け手を止めたときの WAL の増え方 B 置換と更新の演習 | 互換性検査の有無とモード、expand/contract、導出ストアの差し替え、ログからの再構築 | 壊れた受け手の数、書き込みが止まった時間、再構築の一致率 C 共通基盤の費用と性能 | 行指向(PostgreSQL)/列指向(ClickHouse)/ファイル(DuckDB+Parquet) | 容量、取り込み時間、問い合わせ時間(同じ環境の中での相対比較) D 整合性の異常の再現 | 分離レベル(PostgreSQL と MySQL)、同期と非同期の複製、手動の昇格 | ロストアップデート・ライトスキューの発生、昇格で失われた応答済みコミット 未検証 クラウドのマネージド製品と、認証・AI・セキュリティ基盤は実機で確かめていない。公式文書の記述による 自己申告 事後報告は事業者の自己申告。詳しい報告を出す事業者に偏る。件数を業界全体の頻度として読まない 法の記述 法律に関わる記述は助言ではない。設計の段階で決める点を示すにとどめる。解釈は法務に確認 254
解説

このガイドの限界と、ケーススタディで確かめることです。ケーススタディは、1 つの架空の宅配注文サービスの上で、4 つの題材を測ります。題材 A は、基盤をまたぐデータ統合です。二重書き込みと、アウトボックスの 2 つの運び方を比べ、欠落、重複、順序のずれを数えます。題材 B は、置換と更新の演習です。互換性検査の有無、expand/contract、導出ストアの差し替え、ログからの再構築を比べます。題材 C は、行指向、列指向、ファイルで、容量と時間を比べます。題材 D は、分離レベルと複製の設定で、異常が起きるかを確かめます。結果はまだ無いので、ここに数字は書きません。数値は 1 台の Docker 環境の中での相対比較になります。限界は 3 つ挙げておきます。クラウドのマネージド製品と、認証・AI・セキュリティ基盤は実機で確かめていません。事後報告は事業者の自己申告で、件数は業界全体の頻度ではありません。法律に関わる記述は助言ではなく、解釈は法務に確認してください。

4 冊の章から、対応する Part へたどる
スライド 255 のテキストと解説
4 冊の章から、対応する Part へたどる まとめ 書籍 4 冊の目次と、各 Part の根拠の行(章・節・印刷ページ)から作成。4 冊の書誌は Part 0 の 7 枚目 DDIA 2e の章 | 使った Part 1 章 データシステムアーキテクチャにおけるトレードオフ | 0・1・3・5・16 2 章 非機能要件を定義する | 1・2 3 章 データモデルとクエリ言語 | 4 4 章 ストレージと検索 | 5 5 章 エンコーディングと発展性 | 6・7 6 章 レプリケーション | 8・15 7 章 シャーディング | 8 8 章 トランザクション | 9・11 9 章 分散システムの厄介な問題 | 10 10 章 一貫性と合意 | 10 11 章 バッチ処理 | 12・13 12 章 ストリーム処理 | 6・12・16 13 章 ストリーミングシステムの哲学 | 3・11・12・13・15 14 章 正しいことをする | 16 書名 | 主な章 | 使った Part 『ハードパーツ』 | 1 章(1.4 節 ADR、1.5 節 適応度関数) | 0・1・17 | 6 章 業務データの分解 | 3・15 | 9 章 データの所有権と分散トランザクション | 3・11 | 10 章 分散データアクセス | 6 | 11・12 章 分散ワークフロー、サーガ | 11 | 13 章 コントラクト | 7 | 14 章 分析データの管理 | 12 | 15 章 独自のトレードオフ分析を構築する | 17 『大規模データ管理 第2版』 | 2 章 データドメインを利用したデータの整理 | 3・13 | 4 章 データプロダクト管理(ほか 9・11 章) | 13 | 7 章 すべてをまとめる | 6 | 8 章 データガバナンスとデータセキュリティ | 3・7・13・16 『プラットフォームエンジニアリング』 | 5 章 プロダクトとしてのプラットフォーム | 13・15 | 6 章 プラットフォームの運用 | 14 | 8 章 プラットフォームのリアーキテクチャ | 15 | 9 章 プラットフォームのマイグレーションと廃止 | 15 255
解説

4 冊の本の章と、このガイドの Part の対応表です。左は『データ指向アプリケーションデザイン 第2版』の 14 章です。右は残りの 3 冊で、このガイドが使った主な章だけを載せています。対応は、各 Part の根拠の行に書いた章、節、ページから拾いました。その章を主に使った Part だけを示しているので、1 か所だけ引いた Part は省いています。章の題は各書の目次のとおりですが、右の表では一部を短くしています。読み方の注意が 2 つあります。1 つ目、このガイドは本の章立てではなく、判断の問いの順に並べ直しています。たとえば DDIA の 13 章は、Part 3、11、12、13、15 に分かれて出てきます。2 つ目、『ハードパーツ』の CDC はコンシューマー駆動コントラクトのことで、このガイドの CDC、チェンジデータキャプチャとは別です。『プラットフォームエンジニアリング』は、著者の経験に基づく考え方として引いています。ページはすべて印刷ページです。

用語集:訳語は DDIA 2e に揃えた
スライド 256 のテキストと解説
用語集:訳語は DDIA 2e に揃えた まとめ 仕様・文書 AWS Builders' Library「Static stability using Availability Zones」 書籍 DDIA 2e p.10・41・44・51・156・177・195・203・226・293・298・371・398・566(訳語と原語)/『プラットフォームエンジニアリング』p.122 用語 | 原語・出どころ | このガイドでの意味(短くしたもの) | 初出 記録のシステム | system of record | 新しいデータが最初に書かれ、食い違えば正とされるもの | Part 1・3 導出データ | derived data | 正を変換・処理した結果。失っても作り直せる | Part 1・3 障害/機能不全 | fault/failure | 一部が正しく動かない/全体がサービスを提供できない | Part 2 逐次更新 | rolling upgrade | 1 ノードずつ再起動して、止めずに更新する方法 | Part 1・7 発展性 | evolvability | 要件が変わったとき、変更を加えやすいこと | Part 1 後方互換/前方互換 | backward/forward compatibility | 新しいコードが古いデータを読める/古いコードが新しいデータを読める | Part 7 チェンジデータキャプチャ(CDC) | change data capture | DB の変更を取り出して、ほかへ伝える仕組み | Part 0・6 冪等 | idempotence | 1 回実行しても、何回実行しても、効果が同じになること | Part 6・11 クォーラム | quorum | 読み書きを有効とみなすのに要る、最小の確認の数 | Part 8 ロストアップデート/ライトスキュー | lost update/write skew | 更新が上書きで消える/別々の行を書いた結果、決まりを破る | Part 9 線形化可能性 | linearizability | 複製されたデータが、コピー 1 つに見えるという保証 | Part 10 フェンシングトークン | fencing token | ロックに付く番号。資源の側が、古い番号の書き込みを拒む | Part 10 適時性/完全性 | timeliness/integrity | 最新の状態を見られる/欠落・矛盾・誤りが無い | Part 11 静的な安定性 | static stability(AWS) | 依存先が傷んでも、していたことが動き続ける設計 | Part 14 変化予算 | change budget | 利用側が一度に吸収できる変化には限りがある、という考え方 | Part 13・15 更新性 | 本ガイドの定義 | 動かしたまま、利用側を止めずに変えられること | Part 1 256
解説

最後に用語集です。このガイドの訳語は『データ指向アプリケーションデザイン 第2版』に揃えました。表の上から 13 行は同書の訳語と原語で、原語は同書が訳語に添えているものです(単数形に直しました)。意味の列は、各 Part で初めて出したときの 1 行の説明を、さらに短くしたものです。正確な定義は、右端の Part と、同書の該当ページを見てください。静的な安定性は AWS の Builders' Library の用語、変化予算は『プラットフォームエンジニアリング』の用語です。最後の更新性は、規格にも 4 冊にも同じ名前の語が無いので、このガイドで定義しました。動かしたまま、利用側を止めずに変えられること、です。注意する語が 2 つあります。CDC は、このガイドではチェンジデータキャプチャだけを指します。『ハードパーツ』の CDC は別の意味です。拡張性は、このガイドでは負荷への対応だけを指します。これでガイドは終わりです。明日のレビューでは、9 つのステップの最初の問いから始めてください。