Telstra outage: The night a network decided the year was 2006
8 hours ago
- 墨尔本的一个GPS接收器在计划维护后错误地认为年份是2006年，导致Telstra网络大规模中断，影响语音通话、短信、紧急服务、火车和支付系统。
- 现代移动网络，尤其是使用TDD的5G，依赖精确的时间同步以使小区同步切换方向；时间不准确会导致自干扰。
- Telstra的时间分配架构存在漏洞：2020年的一次升级引入了对等模式并减少了冗余，导致出现定时环路，服务器从下游节点获取时间。
- 两种NTP防御机制（层级权重和异常值投票）被逐步禁用：首先通过对等模式，然后通过激活一个GPS卡，将一台服务器提升为层级1且无人反对。
- GPS接收器的固件已过时，导致重启后因周数翻转而认为年份是2006年，且没有其他来源能够纠正它。
- 关键教训包括将时间视为关键基础设施、记录所有变更、确保设备和专业知识的冗余，以及使用点对点连接而非对等模式。
- 尽管NTP正常工作，中断仍然发生，凸显了组织和架构决策是根本原因。