稳定性方法论：可灰度 & 可监控 & 可回滚
💡
原文中文，约3900字，阅读约需10分钟。
📝
内容提要
业务系统核心目标是挣钱，系统稳定性建设核心是防止丢钱。稳定性治理的框架包括可灰度、AB、链路和沙箱灰度。监控是重要的，包括机器、链路、网络和业务监控。可回滚是兜底，需要评估应用、数据库DDL和数据回滚的可行性。
🎯
关键要点
- 业务系统的核心目标是挣钱，系统稳定性建设的核心是防止丢钱。
- 稳定性治理框架包括可灰度、AB、链路和沙箱灰度。
- 监控是重要的，包括机器、链路、网络和业务监控。
- 可回滚是兜底措施，需要评估应用、数据库DDL和数据回滚的可行性。
- 变更是导致线上事故的最大诱因，需通过灰度、监控和回滚降低风险。
- 可灰度发布允许逐步放量，减少对用户的影响。
- 机器灰度、AB灰度、全链路灰度和沙箱灰度是常用的灰度发布方式。
- 监控系统应全方位覆盖，及时发现和处理线上故障。
- 监控的核心指标是漏报率和误报率，需要平衡这两个指标。
- 可回滚是必须的，确保每次变更都能快速恢复，避免长时间影响客户。
➡️
