从计算机视觉走向医疗AI,对话上海交大谢伟迪:定义问题比解决问题更重要

💡 原文中文,约5900字,阅读约需14分钟。
📝

内容提要

2012年,谢伟迪从通信领域转向计算机视觉,专注于医疗人工智能。他认为通用医疗AI系统能够整合多模态数据,促进疾病诊断。团队利用网络爬虫收集医学数据,构建多模态模型,强调知识驱动的重要性,未来将关注临床需求和基因组学研究。

🎯

关键要点

  • 2012年,谢伟迪从通信领域转向计算机视觉,专注于医疗人工智能。

  • 他认为通用医疗AI系统能够整合多模态数据,促进疾病诊断。

  • 团队利用网络爬虫收集医学数据,构建多模态模型,强调知识驱动的重要性。

  • 通用模型可以建立不同模态数据之间的隐层联系,产生智能涌现。

  • 团队汇集了超3万本医学书籍和400万篇医学文献,构建了丰富的数据集。

  • 希望将影像、文本、基因组学等多模态数据联合训练,覆盖全部检查信息。

  • 谢伟迪在牛津大学获得全额奖学金,顺利完成博士学业。

  • 他认为知识是计算机视觉与医疗的本质区别,医疗领域更注重系统性知识。

  • 团队与医学领域专家合作,确保研究方向具备实际医学价值。

  • 谢伟迪强调知识驱动比单纯的数据驱动更重要。

  • 未来计划构建面向临床的super instruction,解决实际临床需求。

  • 团队开始研究基因组学,期待为罕见病诊断和新药研发创造更多可能性。

延伸问答

谢伟迪教授为何选择从通信领域转向医疗人工智能?

谢伟迪教授在通信领域感到兴趣不足,选择出国深造后发现计算机视觉更符合他的兴趣,因此转向医疗人工智能。

通用医疗AI系统的优势是什么?

通用医疗AI系统能够整合多模态数据,建立不同模态数据之间的隐层联系,从而促进疾病诊断,尤其是对成因不明确的疾病。

谢伟迪教授如何收集医学数据以构建模型?

团队利用网络爬虫收集医学数据,包括超3万本医学书籍和400万篇医学文献,以构建多模态模型。

谢伟迪教授认为知识驱动在医疗AI中的重要性是什么?

他认为知识驱动比单纯的数据驱动更重要,因为医疗领域需要系统性知识来支持模型的有效性和实用性。

未来谢伟迪教授的团队有哪些研究计划?

团队计划构建面向临床的super instruction,解决实际临床需求,并开始研究基因组学,以推动罕见病诊断和新药研发。

谢伟迪教授如何看待定义问题的重要性?

他认为定义问题比解决问题更重要,明确有意义的问题能够引导后续的研究和解决方案。

➡️

继续阅读