The Cloudflare Blog
·
Quicksilver v2：全球分布式关键值存储的演变（第二部分）
内容提要
Quicksilver是Cloudflare的关键值数据库，支持全球330个城市的服务器，能够快速响应请求并存储超过50亿个键值对。为了解决磁盘空间不足的问题，Quicksilver采用分层缓存架构，提高了缓存命中率，确保高效处理请求。
关键要点
-
Quicksilver是Cloudflare的关键值数据库，支持全球330个城市的服务器。
-
Quicksilver能够快速响应请求，90%的请求在1毫秒内完成，99.9%的请求在7毫秒内完成。
-
目前Quicksilver包含超过50亿个键值对，总大小为1.6 TB。
-
Quicksilver面临磁盘空间不足的问题，采用分层缓存架构以提高缓存命中率。
-
Quicksilver V1存储所有键值对在每个服务器上，但不适合扩展，导致磁盘空间迅速耗尽。
-
Quicksilver V1.5引入了代理模式，减少了每个服务器的磁盘空间使用。
-
Quicksilver V1.5的实例大小不稳定，导致负载不均衡。
-
新的解决方案是只在少数服务器上维护完整数据集，其他服务器仅保留缓存。
-
通过预取机制提高缓存命中率，确保在数据中心内的缓存命中率达到99.9%。
-
引入分片缓存以解决大数据中心的缓存需求，优化数据本地性。
-
Quicksilver V2有三级存储：本地缓存、数据中心范围的分片缓存和存储节点上的完整数据集。
-
通过增加第二层缓存，最差的实例缓存命中率超过99.99%。
-
Quicksilver的架构经历了多次迭代，确保在迁移过程中不影响客户服务。
延伸解读
Quicksilver的架构演变
Quicksilver的架构经历了多次迭代，从最初的V1到V2，逐步解决了磁盘空间不足的问题。V1将所有键值对存储在每个服务器上，导致扩展性差。V1.5引入代理模式，减少了每个服务器的存储需求，但仍面临负载不均衡的问题。V2通过分层缓存架构，优化了数据存储和访问效率，确保了高缓存命中率。
缓存命中率的重要性
Quicksilver V2的设计重点在于提高缓存命中率，尤其是在处理大量请求时。通过引入三级存储结构，最差实例的缓存命中率超过99.99%。这种高命中率不仅提升了响应速度，还减轻了后端存储的压力，确保了系统的高效运行。
预取机制的应用
Quicksilver V2采用了预取机制，以提高缓存命中率。通过分析缓存未命中的请求，系统能够主动预取可能再次被请求的键值。这种反应式预取策略有效提升了数据中心内的缓存效率，确保了更快的响应时间，尤其对延迟敏感的应用至关重要。
延伸问答
Quicksilver的主要功能是什么？
Quicksilver是Cloudflare的关键值数据库，支持全球330个城市的服务器，快速响应请求并存储超过50亿个键值对。
Quicksilver V2与V1和V1.5相比有什么改进？
Quicksilver V2引入了分层缓存架构，减少了每个服务器的磁盘空间使用，并提高了缓存命中率，确保更高效的请求处理。
Quicksilver是如何解决磁盘空间不足的问题的？
Quicksilver通过采用分层缓存架构和只在少数服务器上维护完整数据集来解决磁盘空间不足的问题。
Quicksilver的缓存命中率如何？
Quicksilver的缓存命中率在最差的实例中超过99.99%，大多数实例的命中率高于99.999%。
Quicksilver V2的存储层级是怎样的？
Quicksilver V2有三级存储：本地缓存、数据中心范围的分片缓存和存储节点上的完整数据集。
Quicksilver如何处理缓存未命中的请求？
Quicksilver通过中继机制将缓存未命中的请求转发到存储节点的副本，以获取完整数据集。
