💡
原文中文,约3700字,阅读约需9分钟。
📝
内容提要
中科加禾发布了第一代异构原生AI算力工具,可以让不同种类的芯片大规模并行,提高效率。该工具已在国产算力的AI基础设施上发挥作用,降低时延、提升吞吐率和能效比。中科加禾与多家算力提供和应用方合作,提供基础软件平台层帮助用户迁移AI模型和芯片架构,助力国产AI生态发展。
🎯
关键要点
- 中科加禾发布第一代异构原生AI算力工具,支持不同芯片大规模并行,提高效率。
- 该工具在国产算力的AI基础设施上降低时延、提升吞吐率和能效比。
- 中科加禾与多家算力提供和应用方合作,提供基础软件平台,助力国产AI生态发展。
- 目标实现AI大模型应用在不同芯片上的零成本迁移、零损耗使用和零延迟部署。
- 工具包含异构原生大模型推理引擎SigInfer、微调引擎SigFT和算子自动生成工具SigTrans。
- SigInfer支持多种AI加速卡,具备高性能和跨平台能力,优化AI算力的使用。
- 中科加禾的技术路线围绕编译技术展开,提升算力资源的利用效率。
- 公司致力于构建通用化、低成本、高性能的算力资源,推动国产AI生态的繁荣。
- 中科加禾希望成为算力使用方和提供方之间的桥梁,促进双方合作与发展。
➡️