陈少文的博客
·
为什么 NFS Over RDMA 比 NFS 的 FIO 大块读性能好很多
内容提要
在测试NFS Over RDMA性能时，4M文件的读取速度达到45GB/s，远超磁盘的6GB/s。NFS Over RDMA通过减少数据拷贝和CPU负担，实现更高的吞吐量和更低的延迟，适合高性能计算和大规模存储。
关键要点
-
在测试NFS Over RDMA性能时，4M文件的读取速度达到45GB/s，远超磁盘的6GB/s。
-
NFS Over RDMA通过减少数据拷贝和CPU负担，实现更高的吞吐量和更低的延迟。
-
NFS的传输路径涉及多次数据拷贝和较高的CPU占用，延迟较高。
-
NFS Over RDMA的传输路径绕过内核网络协议栈，减少了数据拷贝和CPU负担，提供更高的带宽。
-
NFS适用于一般网络环境，而NFS Over RDMA适用于高性能计算和大规模分布式存储。
-
RDMA的速度可以达到45GB/s，而内存的读写速度分别为145GB/s和79.9GB/s，显示出RDMA网络传输速度是瓶颈。
延伸解读
NFS Over RDMA的优势
NFS Over RDMA通过绕过内核网络协议栈，显著减少了数据拷贝和CPU负担，从而实现了更高的吞吐量和更低的延迟。这使得它在高性能计算和大规模存储场景中表现优异，适合需要快速数据传输的应用。
适用场景的对比
传统NFS适用于一般网络环境，适合低成本存储共享，而NFS Over RDMA则更适合高性能计算和大规模分布式存储。用户在选择时需考虑自身的网络环境和性能需求，以便选择合适的解决方案。
部署复杂度与硬件要求
虽然NFS易于部署，适合标准以太网，但NFS Over RDMA需要支持RDMA的专用网卡（如RoCE或InfiniBand），这增加了部署的复杂度和成本。用户在实施时需评估现有硬件是否支持RDMA，以避免不必要的投资。
延伸问答
NFS Over RDMA的读取速度有多快？
NFS Over RDMA的读取速度可以达到45GB/s。
NFS和NFS Over RDMA的主要区别是什么？
NFS需要多次数据拷贝和较高的CPU占用，而NFS Over RDMA通过直接内存访问减少了拷贝和CPU负担。
为什么NFS Over RDMA适合高性能计算？
NFS Over RDMA提供更高的带宽和更低的延迟，适合高性能计算和大规模分布式存储。
NFS的传输路径是怎样的？
NFS的传输路径涉及多次数据拷贝，包括内核态和用户态之间的缓冲区。
NFS Over RDMA如何减少延迟？
NFS Over RDMA绕过内核网络协议栈，直接进行DMA访问，从而减少延迟。
RDMA的速度与内存读写速度相比如何？
RDMA的速度为45GB/s，而内存的读写速度分别为145GB/s和79.9GB/s，显示出RDMA是瓶颈。
