The Cloudflare Blog
·
2024年11月14日Cloudflare事件导致日志丢失
💡
原文英文，约1700词，阅读约需7分钟。
📝
内容提要
2024年11月14日，Cloudflare因系统配置错误导致55%的日志未发送，影响大多数客户，事件持续约3.5小时，造成数据丢失。公司将采取措施防止类似问题，并计划定期测试以确保系统稳定性。
🎯
关键要点
- 2024年11月14日，Cloudflare因系统配置错误导致55%的日志未发送，影响大多数客户，事件持续约3.5小时，造成数据丢失。
- Cloudflare的网络是一个全球分布的系统，生成的事件日志包含详细的元数据，客户用于合规、可观察性和会计等多种方式。
- Cloudflare的系统架构由数万个服务器和网络硬件组成，Logpush服务用于将日志以可预测的文件大小推送给客户。
- 事件发生时，Logfwdr的配置系统出现错误，导致未能正确转发客户日志，触发了后续的系统过载问题。
- Buftee系统未能处理突发的缓冲区增加，导致系统崩溃，恢复过程耗时数小时。
- Cloudflare将采取措施防止类似问题，包括创建警报、修复特定错误和进行定期的过载测试。
➡️
