The Cloudflare Blog
·
2025年3月21日Cloudflare事件
内容提要
2025年3月21日，Cloudflare的R2对象存储服务发生了1小时7分钟的故障，导致100%的写操作失败和约35%的读操作失败。故障源于R2网关服务凭证错误部署，影响了生产环境对新凭证的访问。虽然没有数据丢失，但服务可用性受到影响。故障后，Cloudflare采取了防范措施。
关键要点
-
2025年3月21日，Cloudflare的R2对象存储服务发生了1小时7分钟的故障。
-
故障导致100%的写操作失败和约35%的读操作失败，影响了多个Cloudflare服务。
-
故障源于R2网关服务凭证错误部署，影响了生产环境对新凭证的访问。
-
故障期间没有数据丢失，但服务可用性受到影响。
-
Cloudflare在识别根本原因后迅速恢复了服务可用性。
-
故障的发生是由于人为错误，缺乏对凭证使用情况的可见性。
-
Cloudflare采取了多项措施以防止类似故障再次发生，包括添加日志标签和改进凭证轮换流程。
-
未来将扩展健康检查系统，以确保新凭证的全球传播和状态报告。
延伸解读
故障原因分析
此次Cloudflare R2服务故障的根本原因是由于凭证错误部署，导致生产环境无法访问新凭证。这一人为错误突显了在关键操作中缺乏可见性的问题，提醒企业在进行系统更新时，必须确保所有环境的配置一致性。
服务影响范围
故障期间，Cloudflare的多个服务受到影响，包括图像上传和视频流服务，写操作100%失败，读操作约35%失败。虽然没有数据丢失，但服务可用性显著下降，用户体验受到影响，企业需重视服务的冗余设计以降低风险。
改进措施与未来展望
Cloudflare在故障后采取了多项改进措施，包括添加日志标签和改进凭证轮换流程。这些措施旨在提高系统的可见性和可靠性，未来将扩展健康检查系统，以确保新凭证的有效性和及时传播，增强服务的稳定性。
延伸问答
Cloudflare的R2对象存储服务在2025年3月21日发生了什么故障？
Cloudflare的R2对象存储服务在2025年3月21日发生了1小时7分钟的故障，导致100%的写操作失败和约35%的读操作失败。
这次故障的主要原因是什么？
故障的主要原因是R2网关服务凭证错误部署，导致生产环境无法访问新凭证。
故障期间是否有数据丢失？
故障期间没有数据丢失，所有成功的上传或变更都得到了保存。
Cloudflare采取了哪些措施来防止类似故障再次发生？
Cloudflare采取了多项措施，包括添加日志标签、改进凭证轮换流程和扩展健康检查系统。
故障对Cloudflare其他服务有什么影响？
故障影响了多个Cloudflare服务，包括Cache Reserve、Images、Log Delivery等，导致相关操作失败或延迟。
Cloudflare如何快速恢复服务可用性？
一旦识别出根本原因，Cloudflare迅速部署了更新的凭证，恢复了服务可用性。
