陈少文的博客 ·

NFS Over RDMA

💡 原文中文，约7500字，阅读约需18分钟。

📝

内容提要

本文介绍了NFS Over RDMA的配置与性能测试，结果显示其在大文件和小文件的性能均优于传统NFS，尤其在读取大文件时表现突出。同时，文章探讨了RDMA的缓存机制对性能的影响。

🎯

🔎

在配置NFS Over RDMA时，确保RDMA设备的IP地址正确设置，并安装必要的驱动和依赖。特别是使用Mellanox网卡时，安装驱动时需添加特定参数。此外，服务端和客户端的配置步骤需严格遵循，以避免挂载失败或性能下降。

性能测试表明，NFS Over RDMA在处理大文件时的读取性能显著优于传统NFS，尤其在顺序读写场景中表现突出。这意味着在需要高效数据传输的应用场景中，NFS Over RDMA可能是更优的选择，尤其是在大数据处理和存储环境中。

文章提到RDMA的缓存机制可能是NFS Over RDMA性能优越的原因之一。这提示用户在使用NFS Over RDMA时，需关注缓存设置对性能的影响，合理配置缓存策略可能进一步提升数据传输效率。

❓

在RDMA网络中设置IP地址，安装相关驱动和依赖，启动NFS服务并配置挂载目录，客户端通过特定参数挂载NFS Over RDMA。

性能测试显示，NFS Over RDMA在4K随机读写、128K和4M顺序读写等场景中均优于传统NFS，尤其在读取大文件时表现突出。

RDMA的缓存机制可能是导致NFS Over RDMA性能优越的原因之一。

NFS Over RDMA在大文件和小文件的性能均优于传统NFS，尤其在读取大文件时表现显著更好。

一台主机上不能同时挂载普通NFS和NFS Over RDMA。

写性能随着文件大小的增加而接近主机磁盘性能。

🏷️