导航器:用于延迟敏感机器学习工作流的分散调度器

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

我们提出了Navigator,一个统一GPU内存管理和任务调度的新框架,能够高效利用资源、满足数据依赖关系、有效管理GPU内存。与其他调度程序相比,Navigator能够明显缩短完成时间,同时所需资源量更少。在一个案例中,处理相同工作负载只需要一半的服务器。

🎯

关键要点

  • 提出了Navigator,一个统一GPU内存管理和任务调度的新框架。
  • Navigator能够高效利用资源,满足数据依赖关系。
  • 任务被放置在满足数据依赖关系的位置,来自同一作业的任务被放置在一起。
  • 有效管理GPU内存,完成时间明显缩短。
  • 所需资源量相同或更少,处理相同工作负载只需要一半的服务器。
➡️

继续阅读