The Cloudflare Blog
·
Quicksilver v2：全球分布式关键值存储的演变（第二部分）
💡
原文英文，约3100词，阅读约需12分钟。
📝
内容提要
Quicksilver是Cloudflare的关键值数据库，支持全球330个城市的服务器，能够快速响应请求并存储超过50亿个键值对。为了解决磁盘空间不足的问题，Quicksilver采用分层缓存架构，提高了缓存命中率，确保高效处理请求。
🎯
关键要点
- Quicksilver是Cloudflare的关键值数据库，支持全球330个城市的服务器。
- Quicksilver能够快速响应请求，90%的请求在1毫秒内完成，99.9%的请求在7毫秒内完成。
- 目前Quicksilver包含超过50亿个键值对，总大小为1.6 TB。
- Quicksilver面临磁盘空间不足的问题，采用分层缓存架构以提高缓存命中率。
- Quicksilver V1存储所有键值对在每个服务器上，但不适合扩展，导致磁盘空间迅速耗尽。
- Quicksilver V1.5引入了代理模式，减少了每个服务器的磁盘空间使用。
- Quicksilver V1.5的实例大小不稳定，导致负载不均衡。
- 新的解决方案是只在少数服务器上维护完整数据集，其他服务器仅保留缓存。
- 通过预取机制提高缓存命中率，确保在数据中心内的缓存命中率达到99.9%。
- 引入分片缓存以解决大数据中心的缓存需求，优化数据本地性。
- Quicksilver V2有三级存储：本地缓存、数据中心范围的分片缓存和存储节点上的完整数据集。
- 通过增加第二层缓存，最差的实例缓存命中率超过99.99%。
- Quicksilver的架构经历了多次迭代，确保在迁移过程中不影响客户服务。
🏷️
标签
➡️
