TSB 银行系统迁移事故:为什么一次计划了两年的系统迁移,会在上线当天让近两百万客户用不了账户?
把核心系统当成一个可以一次性切换的项目,而不是需要长期并行验证的工程
TSB 银行系统迁移事故:巅峰期英国拥有数百万零售客户的中型银行,从大型银行集团分拆独立后,计划通过自建技术平台摆脱对原集团的系统依赖;终局是 2018 年数据迁移失败,约 190 万客户长时间无法正常使用账户,CEO 辞职,损失超过 3 亿英镑,并被监管处以巨额罚款。
英国拥有数百万零售客户的中型银行,从大型银行集团分拆独立后,计划通过自建技术平台摆脱对原集团的系统依赖
2018 年数据迁移失败,约 190 万客户长时间无法正常使用账户,CEO 辞职,损失超过 3 亿英镑,并被监管处以巨额罚款
3,010 票参与
1 方案 · 1 见解
投稿会先进入待审,通过后才进入公开目录和站点地图。
核心败因全民归因公投
投票选择您认为导致该企业/项目最终死亡的最核心死穴,认同即可实时投票计入权重
核心系统迁移缺少充分的并行验证
新旧系统没有长时间并行比对,问题在切换后才暴露
回退与应急预案不足
切换失败后缺少可执行的快速恢复路径,故障持续数周
把迁移当成一次性项目
按上线日期倒排计划,风险控制让位于时间表
对外部平台的依赖缺少压力测试
新平台在真实业务量与场景下的表现未被充分验证
时间线:从高峰到终局
分拆与筹备
从大型银行集团分拆独立,启动核心系统迁移计划
迁移切换
客户数据迁至新平台,切换后出现大规模登录失败、交易异常与账户错账
持续故障
故障持续数周,大量客户无法正常使用账户,投诉与监管问询集中出现
问责与罚款
CEO 辞职,迁移相关的损失超过 3 亿英镑,此后被监管处以巨额罚款
四大维度全景复盘剖析
发展背景与全盛期基石
银行从原集团分拆后需要建立自己的技术平台,管理层选择把客户数据与核心业务从原集团的系统迁移到新的第三方平台,并为此进行了长期筹备与外部合作巅峰期的成绩单是:英国拥有数百万零售客户的中型银行,从大型银行集团分拆独立后,计划通过自建技术平台摆脱对原集团的系统依赖。此时的它拥有渠道、品牌与资本的合力,看起来没有任何理由会输。
致命转折点的战略误判
新平台在高并发与真实业务场景下的表现与测试环境差距很大,迁移在切换后出现大规模故障,而回退方案与应急处理能力不足,导致问题持续数周底层架构的缺陷被增长掩盖了很多年,真正爆发时表现为线上事故、体验崩塌与迭代停滞,修复成本远高于当年重做的代价。
内部组织文化与盲目傲慢
技术决策长期被短期交付目标绑架,「先上线,以后再改」变成永久状态,没人对架构健康度负责。
轰然倒塌的崩盘推演
2018 年数据迁移失败,约 190 万客户长时间无法正常使用账户,CEO 辞职,损失超过 3 亿英镑,并被监管处以巨额罚款。TSB 银行系统迁移事故的结局不是某一次意外,而是上面这些判断在数年里不断叠加、又始终没有被纠正的必然结果。
商业落地避坑实操法则
以血淋淋的商业代价淬炼出的创业与经营行动准则(DOs & DONTs)
核心系统迁移要按「随时切回去」来设计
没有回退方案的切换,等于把全部风险压在一个日期上。
- •在切换前让新旧系统长时间并行运行并逐日对账
- •准备可在数小时内执行的回退路径
- •不要为上线日期压缩验证
- •不要把核心系统的控制权完全交给外部平台
绝地求生模拟器:如果你是当时的CEO,在关键转折点该如何挽狂澜于既倒?
历史不可更改,但思维可以淬炼。针对核心转折点,提出手术刀式改革方案与资源调配破局法,交由全网创业者与投资人可行度公投。
先确保能回退,再谈切换;切换后新旧系统并行对账
关键干预时点:2018 年 4 月切换后出现大规模故障时
- •停止在新系统上继续叠加变更
- •停止按原计划关闭旧系统
- •停止把故障描述为个别客户问题
- •立即评估并把可迁移的业务回退到旧平台
- •让新旧系统并行运行并逐日对账后再逐步切换
- •对全部受影响客户做账务核对与补偿
迁移与并行运行的成本列为必须投入,上线日期不再作为唯一考核指标。
客户在故障期内快速恢复可用,账务差错被控制在小范围,公司避免数亿英镑损失与监管重罚。
行家深度复盘见解
来自创业者、投资人、前员工和行业专家的真实第一手复盘反思
银行筹备了两年的迁移,在测试环境里表现尚可,但真实业务量、产品组合与历史数据的一致性远比测试复杂。切换后大量客户无法登录、账务出现差错,而更严重的是没有一条能在当天回到旧系统的路。于是故障从几个小时的窗口变成持续数周的瘫痪,损失和监管后果远超迁移本身节省的成本。
关键系统切换的前置条件只有一个:回退方案要先被验证过。
商业复盘与避坑备忘录 · TSB 银行系统迁移事故
为什么一次计划了两年的系统迁移,会在上线当天让近两百万客户用不了账户?
# 商业复盘备忘录:TSB 银行系统迁移事故 > 为什么一次计划了两年的系统迁移,会在上线当天让近两百万客户用不了账户? > 周期: 2015 - 2019 | 行业: 金融与科技 > 巅峰: 英国拥有数百万零售客户的中型银行,从大型银行集团分拆独立后,计划通过自建技术平台摆脱对原集团的系统依赖 > 终局: 2018 年数据迁移失败,约 190 万客户长时间无法正常使用账户,CEO 辞职,损失超过 3 亿英镑,并被监管处以巨额罚款 ## 核心概览 把核心系统当成一个可以一次性切换的项目,而不是需要长期并行验证的工程。巅峰期英国拥有数百万零售客户的中型银行,从大型银行集团分拆独立后,计划通过自建技术平台摆脱对原集团的系统依赖;终局是 2018 年数据迁移失败,约 190 万客户长时间无法正常使用账户,CEO 辞职,损失超过 3 亿英镑,并被监管处以巨额罚款。 ## 社区公投头号死因 1. [产品技术] 核心系统迁移缺少充分的并行验证 (990 票) 2. [组织管理] 回退与应急预案不足 (832 票) 3. [战略决策] 把迁移当成一次性项目 (673 票) ## 可执行教训 ### 核心系统迁移要按「随时切回去」来设计 > 没有回退方案的切换,等于把全部风险压在一个日期上。 - ✅ 推荐做 (DOs): - 在切换前让新旧系统长时间并行运行并逐日对账 - 准备可在数小时内执行的回退路径 - ❌ 绝不能做 (DON'Ts): - 不要为上线日期压缩验证 - 不要把核心系统的控制权完全交给外部平台 ## 救亡方案 ### 先确保能回退,再谈切换;切换后新旧系统并行对账 — 良略编辑部 干预时点: 2018 年 4 月切换后出现大规模故障时 - 必须断腕: - 停止在新系统上继续叠加变更 - 停止按原计划关闭旧系统 - 停止把故障描述为个别客户问题 - 破局动作: - 立即评估并把可迁移的业务回退到旧平台 - 让新旧系统并行运行并逐日对账后再逐步切换 - 对全部受影响客户做账务核对与补偿 - 预期结果: 客户在故障期内快速恢复可用,账务差错被控制在小范围,公司避免数亿英镑损失与监管重罚。 ## 社区见解 ### 核心系统的迁移,不是「什么时候切」的问题,而是「切坏了怎么回去」的问题。 — 良略编辑部 (工程师) 银行筹备了两年的迁移,在测试环境里表现尚可,但真实业务量、产品组合与历史数据的一致性远比测试复杂。切换后大量客户无法登录、账务出现差错,而更严重的是没有一条能在当天回到旧系统的路。于是故障从几个小时的窗口变成持续数周的瘫痪,损失和监管后果远超迁移本身节省的成本。 - 如果重来一次的纠偏招式 关键系统切换的前置条件只有一个:回退方案要先被验证过。 --- 来源: 良略 · https://www.lianglue.com/c/tsb-bank