NVIDIA在Graph500基准测试中以每秒410万亿边的速度获胜，使用8192个H100 GPU处理2.2万亿顶点和35万亿边，性能是其他方案的两倍，推动高性能计算的发展。

李飞飞的实验室推出了RTFM技术，能够实时生成3D世界模型。与传统模型不同，RTFM可以从一张图片生成可交互场景，并且仅需一块H100 GPU高效运行。该技术通过学习大量视频数据，具备复杂的视觉效果和空间记忆，允许用户在生成的世界中持续互动。

由于需求超过供应，Nvidia的H100 GPU变得抢手和昂贵，成为首家市值万亿美元的公司。微软、Meta、OpenAI、亚马逊和谷歌等开始研发自己的AI处理器。Nvidia和AMD、英特尔等芯片制造商正在进行新一轮的AI芯片竞争。

Prime Intellect于11月22日宣布完成去中心化训练的10B模型INTELLECT-1，并开源相关资源。该模型在112台H100 GPU上训练，展示了去中心化训练的潜力。尽管汉语能力较弱，但整体获得AI社区积极反馈。未来，Prime Intellect计划扩大模型规模，推动开源AGI发展。

Meta正在构建两个大规模AI集群，每个集群由24,576张H100 GPU组成，以支持未来的AI任务。这些集群基于之前Research SuperCluster的经验，采用自研硬件和网络架构，优化性能和灵活性。Meta还与Hammerspace合作开发并行网络文件系统，提升调试效率。到2024年底，Meta计划拥有35万张H100 GPU，以满足不断增长的AI需求。