【存储工程】ZFS：数据完整性优先的存储栈
内容提要
ZFS以数据完整性为核心，通过端到端校验和、写时复制及自愈机制确保数据正确。其三层架构（zpool、vdev、dataset）简化管理，支持快照、压缩、去重及RAID-Z冗余。文章详述ARC缓存、ZIL日志加速及性能调优，强调scrub巡检与冗余配置对防静默损坏的关键作用，并讨论生产部署要点与局限性。
延伸解读
端到端校验：ZFS 与 Btrfs 的路径差异
ZFS 将校验和存储在父块指针中，形成 Merkle 树结构，而 Btrfs 使用独立的校验和树。文章指出，在错位写入场景下，两种结构对数据和校验同时损坏的概率模型不同，但尚无同行评审结论证明一方全面优于另一方。ZFS 更强调自愈与冗余副本、scrub 的闭环，这与其设计哲学一致。理解这一差异有助于评估不同文件系统在极端故障下的行为。
scrub 与冗余：防静默损坏的关键组合
文章强调，定期 scrub 能主动发现并修复静默数据损坏，降低数据丢失窗口。在 raidz1 池中，若一块磁盘有静默损坏而另一块故障，重建可能失败；定期 scrub 可在第二块磁盘故障前修复损坏，避免数据丢失。因此，生产环境建议至少每月运行一次 scrub，并配置适当的冗余级别（如 RAID-Z2），以应对大容量磁盘重建时间长的风险。
去重的高内存代价与适用场景
ZFS 去重依赖常驻内存的 DDT，每 TB 独立数据（recordsize=128K）约需 2.5GB 内存，小 recordsize 时需求更高。文章建议在绝大多数场景下避免使用去重，除非是虚拟机镜像或备份服务器等去重比高的场景，并先用 zdb -S 模拟评估。OpenZFS 2.2 的快速去重仍在成熟中，需谨慎评估。
SLOG 设备选型：低延迟与断电保护缺一不可
SLOG 用于加速同步写，其写入延迟直接影响 fsync 性能，因此需选择低延迟（<100μs）且具备断电保护（PLP）的高耐久性 SSD。容量通常 8-32GB 足够，并强烈建议镜像配置以防 SLOG 故障导致数据丢失。消费级 SSD 因缺乏 PLP 和高耐久性，不适合作为 SLOG 设备。
Q&A
ZFS 如何保证数据完整性？
ZFS 通过端到端校验和、写时复制（CoW）和自愈机制保证数据完整性。每个数据块都有校验和，存储在父块指针中，读取时验证；写操作采用 CoW，确保原子性；在冗余配置下，检测到错误时自动从冗余副本修复。
ZFS 的 scrub 是什么？为什么重要？
scrub 是 ZFS 主动读取池中所有数据块并验证校验和的操作，能发现并修复静默数据损坏。它重要是因为能降低数据丢失窗口，尤其在 RAID-Z 中，定期 scrub 可在磁盘故障前修复损坏块，避免重建失败。
ZFS 的写时复制（CoW）有什么优点？
CoW 带来原子性（写操作要么完全完成要么未发生）、无需日志（天然崩溃一致性）、快照几乎免费（保留旧根指针）等优点。
ZFS 的 ARC 缓存是什么？如何调优？
ARC 是 ZFS 的自适应替换缓存，用于缓存数据和元数据，比传统 LRU 更适应扫描负载。调优包括设置 zfs_arc_max 限制大小、调整元数据占比（zfs_arc_meta_limit_percent），以及根据负载类型（如元数据密集或顺序读）调整策略。
ZFS 的 SLOG 设备有什么作用？如何选择？
SLOG 是独立日志设备，用于存放 ZIL 记录，加速同步写（如 fsync）。选择时需低延迟（<100μs）、高耐久性（高 DWPD）、具备断电保护（PLP），容量通常 8-32GB，建议镜像配置。
ZFS 的 RAID-Z 与传统 RAID 5/6 相比有什么优势？
RAID-Z 通过写时复制和变宽条带消除了传统 RAID 的写洞问题，确保条带一致性。它支持单、双、三校验（RAID-Z1/Z2/Z3），且能检测并修复静默损坏。
ZFS 去重有什么优缺点？什么场景适合使用？
优点：节省存储空间。缺点：内存需求极高（DDT 常驻内存），写入性能下降，恢复复杂。适合虚拟机镜像存储或备份服务器等重复数据多的场景，但需先用 zdb -S 评估。
ZFS 的 recordsize 如何设置？
recordsize 是数据块最大大小，默认 128K。数据库应匹配页大小（如 PostgreSQL 8K、MySQL 16K），大文件顺序 I/O 用 512K-1M，小文件密集用默认。
ZFS 在生产部署中需要注意哪些关键点？
硬件上建议 ECC 内存、UPS、HBA 直通、SLOG 带 PLP；池配置 ashift=12、RAID-Z2 或镜像、启用压缩；监控定期 scrub、zpool status、ARC 命中率；备份用快照和异地 send/receive。
ZFS 有哪些局限性？
内存需求高（1TB 存储至少 1GB RAM）、vdev 无法收缩、RAID-Z 无法扩展（2.3+ 开始解决）、可能碎片化、Linux 内核兼容性问题、CDDL 与 GPL 许可证不确定性。
