新工具让用户修复AI生成的3D模型，然后按自己的意愿进行制造
内容提要
麻省理工学院等机构开发了AI工具InstructMesh，结合TRELLIS三维生成与GPT-4，让用户通过高亮和自然语言编辑3D模型，便于打印实用物品。测试中约90%的新手能识别并修复设计缺陷，还可制作眼镜、机器人等。未来或融入AR与物理模拟。
延伸解读
AI生成3D模型的结构缺陷与修复
文章指出，AI模型擅长理解物体外观，却不了解其工作原理，导致生成的设计往往不实用。测试中，TRELLIS生成的模型近80%存在结构缺陷。InstructMesh通过高亮和自然语言编辑，让新手也能识别并修复这些缺陷，成功率约90%。这表明，在3D打印前进行人工干预和修复，是确保设计可用性的关键步骤。
InstructMesh的技术组合与交互方式
InstructMesh结合了微软的TRELLIS三维生成系统和GPT-4大语言模型，将视觉与文本知识融合。用户可以通过高亮特定部分并输入自然语言描述来编辑模型，系统在生成模型的潜在空间中进行操作，并创建可解释的几何变化供用户评估和批准。这种交互方式降低了3D建模的门槛，让没有专业知识的用户也能表达创意。
从个性化物品到功能机器人的应用潜力
InstructMesh不仅能制作杯子、眼镜等日常物品，还能用于更复杂的应用，如外观像牛仔裤的膝盖支架，以及内置无线组件的机器人外壳（如“刷毛机器人”）。这些案例展示了该工具在个性化制造和功能原型开发上的潜力。未来，它可能融入增强现实平台，根据周围环境快速生成并3D打印物品，甚至结合物理模拟来预测设计在不同使用场景下的表现。
Q&A
InstructMesh是什么？它由哪些机构开发？
InstructMesh是由麻省理工学院计算机科学与人工智能实验室（CSAIL）、谷歌和东北大学的研究人员开发的一款AI设计软件，旨在让用户通过高亮和自然语言编辑3D模型，便于3D打印实用物品。
InstructMesh如何让用户编辑AI生成的3D模型？
用户可以在生成的3D设计蓝图上高亮特定部分，并用自然语言描述想要修改的内容，InstructMesh会理解这些编辑意图并调整模型几何形状，供用户评估和批准。
InstructMesh结合了哪些AI技术？
InstructMesh结合了微软的TRELLIS系统（用于从文本和图像生成3D模型）和GPT-4大语言模型（提供推理能力），从而融合视觉和文本知识。
新手使用InstructMesh修复设计缺陷的效果如何？
在测试中，TRELLIS重新生成的Thingiverse热门3D模型中近80%存在结构缺陷，而新手使用InstructMesh后，约90%的情况下能识别并修复这些缺陷（由专家评审确认）。
InstructMesh可以用于制作哪些类型的物品？
InstructMesh可以制作日常物品、配件和机器人等，例如龙形马克杯、贝壳口哨、蝴蝶翅膀眼镜、章鱼饮料分配器、牛仔布外观的膝盖支架，以及类似彩色虾的“bristle bot”机器人。
InstructMesh未来可能有哪些发展方向？
未来可能融入增强现实（AR）平台，让用户结合周围环境提示系统并快速3D打印物品；还可能加入物理模拟来预测设计在特定使用下的反应（如碗掉落是否破碎），并集成更新的TRELLIS.2以优化更小特征。
