大模型赋能智慧医疗：挑战和未来
---iMED中国第七十二讲学术分享会
2026年4月16日，中国科学院宁波材料技术与工程研究所智能医学影像团队开展了“医学图像/眼科影像专题学术分享会——iMED中国第七十二讲”。香港科技大学陈浩研究员受邀担任主讲嘉宾，以“大模型赋能智慧医疗：挑战和未来”为题作学术报告。
报告从人工智能在医疗领域的发展出发，介绍了大模型技术在视觉计算与自然语言处理中的突破，并指出其在医学影像分析和临床辅助诊疗中的应用潜力。同时，围绕X-ray、CT、磁共振及病理影像四类医学影像基础模型，系统梳理了不同模态的特点与发展现状，强调医学AI正由单模态向多模态融合方向发展，尝试整合影像、临床及分子等多源信息以提升疾病建模能力。然而，受限于多模态数据获取困难、样本规模有限以及异构数据差异显著等因素，在融合建模及实际应用中仍面临较大挑战。
在此基础上，陈浩研究员重点分享了其团队在医疗多模态大模型方面的研究进展，包括结合多源数据开展模型构建及其在疾病诊断、疗效预测和预后评估中的应用探索，同时指出多模态数据获取困难、规模有限等问题仍对模型发展形成制约。通过多模型对比实验发现，不同模型在各类任务中的表现差异明显，尚未形成统一最优模型，反映出该领域仍处于持续探索阶段。此外，报告还介绍了基于概念的可解释性方法以及相关系统在智能问诊和辅助诊疗中的初步应用，强调在提升模型性能的同时加强其可靠性与可解释性的重要性。
会后的交流讨论环节中，与会人员围绕医学图像与大语言模型的结合方式、多模态数据的表达与利用、模型训练中的数据划分与评估，以及生成式方法在医学影像中的应用等问题，与陈浩研究员进行了热烈交流。
此次分享会围绕模型研究与实际应用中的具体问题，参会人员在数据规模把控、模型选择及技术实现路径等方面形成了更加清晰的认识，进一步加深了团队成员对医疗大模型相关研究的理解，并为后续相关工作的开展提供了参考。