关键词:大模型,医学AI,上下文学习,自监督学习,多模态


论文题目:Foundation models for generalist medical artificial intelligence

论文来源:Nature

论文链接:https://www.nature.com/articles/s41586-023-05881-4


医疗+AI 已有了广泛的应用,但主要还是利用医学影像进行辅助诊断。现有的医疗AI模型大多数仍只能完成特定任务,譬如病灶检测、目标脏器分割等等。何时才能有“全才”AI医生呢?全才(Generalist)意味着它能超越特定任务,广泛用于医疗领域。


最近发表在 Nature 的这篇文章探索了训练大模型(Foundation models)的医学全才AI(generalist medical AI,GMAI),大模型是最新一代人工智能,在大量不同数据集上训练,同时应用广泛。


GMAI 模型应用了多模态架构(multimodal architectures)、自监督学习(self-supervised learning)和上下文学习(in-context learning)等技术,训练大量、多样化的数据集,可以结合医学影像、电子健康记录、基因组学等数据灵活地给出解释和建议,展现了先进的医学推理能力。


GMAI 很少需要特定的标记数据,且应用广泛。这篇文章讨论了此模型的潜在应用和挑战,并列出了实现这些应用所需的特定技术和数据集。他们认为,GMAI 的应用将大大改变医疗实践。


图1. GMAI模型流程概述。


图2. 举例说明GMAI的三个潜在应用。




编译|朱欣怡

AI+Science 读书会启动


详情请见:
人工智能和科学发现相互赋能的新范式:AI+Science 读书会启动


推荐阅读

1. 大语言模型做科研的N种可能性:从自主进行科学实验到写综述文章
2. 网络医学新发现:西地那非具有防治阿尔茨海默症潜力
3. 老药新用治疗新冠疾病?网络医学框架加速药物研发
4. 《张江·复杂科学前沿27讲》完整上线!
5. 成为集智VIP,解锁全站课程/读书会
6. 加入集智,一起复杂!


点击“阅读原文”,报名读书会