京东零售基于国产芯片的AI引擎技术

💡 原文中文,约7600字,阅读约需18分钟。
📝

内容提要

随着大模型的普及,AI算力成为竞争的关键。京东在美国芯片禁令下需确保算力安全,面临国产芯片在硬件架构、软件生态和业务需求等方面的挑战。九数算法中台推出基于国产芯片的AI引擎技术,提高算力利用率,推动京东在多个业务场景中应用国产芯片。

🎯

关键要点

  • AI算力已成为竞争焦点,影响大模型性能与效果。
  • 京东面临美国芯片禁令,需确保算力安全。
  • 国产芯片在硬件架构、软件生态和业务需求方面存在挑战。
  • 九数算法中台推出基于国产芯片的AI引擎技术,提高算力利用率。
  • 京东的算力基础对业务场景至关重要。
  • 硬件架构差异显著,需提升集群对多种异构芯片的兼容性。
  • 软件生态尚未成熟,开发人员面临高迁移成本。
  • 业务场景需求复杂,需灵活适配多种应用。
  • 九数算法中台搭建了基于国产芯片的端到端训练推理解决方案。
  • 高性能训练引擎支持多种主流底座模型的适配与优化。
  • 高性能推理引擎支持一键部署与推理加速。
  • 国产芯片应用性提升,已在多个业务场景落地。
  • 京东零售与华为昇腾共建Openmind开源社区。
  • 未来将实现万卡级别高性能网络及调度能力。
  • 持续优化国产芯片调度策略,保障高效使用。

延伸问答

京东如何应对美国芯片禁令带来的挑战?

京东通过推出基于国产芯片的AI引擎技术,确保算力安全,并提升算力利用率,以应对美国芯片禁令带来的挑战。

国产芯片在京东的应用面临哪些主要挑战?

主要挑战包括硬件架构差异、软件生态不成熟以及业务场景需求复杂。

九数算法中台的AI引擎技术有什么特点?

九数算法中台的AI引擎技术具有高效、统一、灵活的特点,支持多种主流底座模型的适配与优化。

京东如何提升国产芯片的算力利用率?

通过搭建千卡规模集群和优化调度策略,京东提升了国产芯片的算力利用率。

京东的AI引擎技术在业务场景中有哪些应用?

该技术已应用于搜索推荐、广告创意生成、智能客服和数据自动分析等多个场景。

京东与华为的合作有什么具体成果?

京东与华为共同建立了Openmind开源社区,并发布了基于昇腾大模型推理解决方案的优秀实践。

➡️

继续阅读