3FS 的一些性能测试

💡 原文中文,约8500字,阅读约需21分钟。
📝

内容提要

本文介绍了对 NVMe SSD 和 3FS 集群的性能测试。测试结果显示,3FS 在多线程大块读写操作中表现优越,单线程和多线程下的读写速率和 IOPS 数据均有良好表现。checkpoint 存储速度为 246.50 MB/s,模型加载时间为 10 至 12 分钟,总带宽约为 1~1.2 GBps。

🎯

关键要点

  • 测试使用了两块 NVMe SSD 和两个节点组成的 3FS 集群。

  • 单线程下,128K 块大小的读速率为 2211 MiB/s,写速率为 3703 MiB/s,IOPS 分别为 17.7k 和 29.6k。

  • 多线程下,128K 块大小的读速率为 6237 MiB/s,写速率为 3873 MiB/s,IOPS 分别为 49.9k 和 31.0k。

  • 3FS 在多线程大块读写操作中表现优越,单线程小块读写操作性能较差。

  • Checkpoint 存储速度为 246.50 MB/s。

  • 模型加载时间为 10 至 12 分钟,总带宽约为 1~1.2 GBps。

延伸问答

3FS 集群的性能测试结果如何?

3FS 在多线程大块读写操作中表现优越,单线程小块读写操作性能较差。

在单线程下,3FS 的读写速率是多少?

单线程下,128K 块大小的读速率为 2211 MiB/s,写速率为 3703 MiB/s。

多线程下,3FS 的性能表现如何?

多线程下,128K 块大小的读速率为 6237 MiB/s,写速率为 3873 MiB/s。

3FS 的 checkpoint 存储速度是多少?

Checkpoint 存储速度为 246.50 MB/s。

模型加载时间大约需要多久?

模型加载时间为 10 至 12 分钟。

3FS 在单线程和多线程下的 IOPS 数据分别是多少?

单线程下的 IOPS 为 17.7k(读)和 29.6k(写),多线程下的 IOPS 为 49.9k(读)和 31.0k(写)。

➡️

继续阅读