【可观测性工程】时序数据库内核：TSM、TSI、倒排索引与 Gorilla 压缩
内容提要
本文探讨了时序数据库的核心机制，包括Prometheus TSDB、InfluxDB TSM/TSI和VictoriaMetrics的写入特性与压缩算法。重点分析了Gorilla压缩算法的数学原理，以及时序数据的写入特性、查询优化和存储效率。最后对比了ClickHouse在Metrics存储中的适用场景，强调了不同数据库在写入吞吐、查询延迟和磁盘占用等方面的权衡与选择。
关键要点
-
时序数据的写入特征包括追加写、高 QPS 写入、时间局部性和低基数查询。
-
Prometheus TSDB 的写入路径包括内存追加器、WAL、Head Block 和磁盘块。
-
WAL 是 Prometheus 崩溃恢复的基础，记录序列定义、样本、删除标记等信息。
-
InfluxDB 的 TSM 引擎通过 WAL 和内存缓存优化写入路径，支持高效的合并策略。
-
Gorilla 压缩算法通过 Delta-of-Delta 和 XOR 编码实现高效的时序数据压缩。
-
VictoriaMetrics 使用 mergeset 存储引擎，优化了时序数据的写入和查询性能。
-
ClickHouse 适合需要 SQL 灵活查询的场景，支持高写入吞吐和 Metrics 存储。
-
不同数据库在写入吞吐、查询延迟和磁盘占用等方面存在权衡与选择。
延伸问答
时序数据库的写入特征有哪些？
时序数据库的写入特征包括追加写、高 QPS 写入、时间局部性和低基数查询。
Gorilla 压缩算法的核心原理是什么？
Gorilla 压缩算法通过 Delta-of-Delta 和 XOR 编码实现高效的时序数据压缩，压缩率可达 12:1。
Prometheus TSDB 的写入路径是怎样的？
Prometheus TSDB 的写入路径包括内存追加器、WAL、Head Block 和磁盘块，支持崩溃恢复。
InfluxDB 的 TSM 引擎是如何优化写入路径的？
InfluxDB 的 TSM 引擎通过 WAL 和内存缓存优化写入路径，支持高效的合并策略。
ClickHouse 在 Metrics 存储中适合什么场景？
ClickHouse 适合需要 SQL 灵活查询的场景，支持高写入吞吐和 Metrics 存储。
不同数据库在写入吞吐和查询延迟方面的权衡是什么？
不同数据库在写入吞吐、查询延迟和磁盘占用等方面存在权衡，选择时需考虑具体需求。
