适用于 Lustre 的 Amazon FSx 可将 GPU 实例的吞吐量提升高达 15 倍

适用于 Lustre 的 Amazon FSx 可将 GPU 实例的吞吐量提升高达 15 倍

💡 原文中文,约3300字,阅读约需8分钟。
📝

内容提要

Amazon FSx 现已支持适用于 Lustre 的 EFA 和 GDS,提升客户端吞吐量至 1500 Gbps,适合深度学习等高性能应用。用户可通过简单设置创建文件系统,利用强大计算实例加速工作负载,EFA 和 GDS 提供更高的数据传输效率和更大存储容量。

🎯

关键要点

  • Amazon FSx 现已支持适用于 Lustre 的 EFA 和 GDS,提升客户端吞吐量至 1500 Gbps。
  • EFA 使得大规模运行需要高级别节点间通信的应用程序成为可能。
  • GDS 能够在本地或远程存储与 GPU 内存之间建立直接的数据传输路径。
  • 适用于 Lustre 的 FSx 支持 EFA/GDS,使每个客户端吞吐量最高可提升 15 倍。
  • 用户可以通过简单设置创建文件系统,利用强大计算实例加速工作负载。
  • EFA 通过绕过操作系统优化数据传输,GDS 通过实现文件系统与 GPU 内存间的直接数据传输提升性能。
  • 创建支持 EFA 的适用于 Lustre 的 Amazon FSx 文件系统时,需选择持久、SSD 和支持 EFA 选项。
  • 在 Amazon EC2 控制台中启动实例时,需选择与 FSx Lustre 文件系统相同的子网和安全组。
  • 支持 EFA 的文件系统无需支付额外费用,自动使用 EFA。
  • 支持 EFA 的文件系统有更大的最小存储容量增量要求。
  • 支持 EFA 的文件系统与非 EFA 工作负载兼容,流量可通过传统 TCP/IP 网络传输。
➡️

继续阅读