Google 研究将 AMIE 扩展至实时视频问诊
Google Research 介绍 AMIE(Video),通过异步多智能体架构在模拟视频问诊中实现与初级保健医生相当的评估表现,但研究完全基于模拟场景与受训患者演员,尚未经真实患者验证。
用途与变化
Google Research 于 2026 年 8 月 11 日发布博客,介绍其医疗 AI 研究系统 AMIE 的视频配置 AMIE(Video)。该系统基于 Gemini 与 Project Astra 构建,可进行同步临床视频问诊,感知非语言临床线索、引导患者演员完成虚拟体格检查,并实时进行诊断推理。来源称这是首次展示 AI 系统在实时临床视频问诊中达到专家级表现。
技术设计
为兼顾对话速度与深层推理,AMIE(Video)采用异步多智能体架构,三个专门智能体并行工作:
- Talker 智能体:面向患者,负责低延迟的语音交互与自然对话流。
- Planner 智能体:在后台持续更新鉴别诊断与管理计划,识别信息缺口。
- Perception 智能体:持续审听音频与视觉流,识别临床相关的非语言线索。
研究还依据医学文献构建了远程医疗音视频能力分类体系,并据此搭建自动化评测套件,包含单轮音视频评估与多轮模拟音频问诊。
评测方式与主要结果
研究为随机对照的 OSCE 形式,覆盖心肺、腹部、头颈、神经精神、肌骨五个系统共 100 个临床场景,15 名受训患者演员完成 300 次标准化问诊,分三组:AMIE(Video)、纯文本版 AMIE(Text)、10 名委员会认证的初级保健医生(PCP,视频)。20 名独立 PCP 评审采用通用临床能力量表与病例特定评分。
关键结果:在病史采集、诊断准确性、管理适当性与沟通质量等核心维度,评审对 AMIE(Video)的评分与 PCP 相当,且不低于或优于 AMIE(Text);在引出体征与主动引导虚拟检查方面,AMIE(Video)平均评分显著高于 PCP 与 AMIE(Text);患者演员更偏好同步视频界面,并在同理心、融洽度与照护信心方面对 AMIE(Video)给出较好评价。
限制与待核实事项
- 研究完全在模拟临床环境中由专业患者演员完成,不涉及真实患者,演员无法完全复现真实问诊的复杂性与不可预测性,场景也限于可通过表演真实呈现的病症。
- 定向自动化评测显示系统仍存在偶发的感知与推理错误,并存在间歇性技术问题影响对话自然度。
- Project Astra 属于原型,相关问题可能需在系统层面解决。
- 来源明确表示,在得出真实世界效用结论前,必须在真实患者与真实临床条件下开展研究,并需配套安全框架。来源提到此前与 Beth Israel Deaconess Medical Center 的文本版可行性研究,以及与 Included Health 正在进行的全国性随机研究,但这些尚未覆盖音视频能力。
来源与核对说明
- Google Research 官方博客 ↗https://research.google/blog/advancing-amie-towards-expert-level-audio-visual-clinical-consultations/
本文经 AI 整理及独立自动校对,未做运行验证;自动校对仍可能遗漏问题,请以原始资料为准。
这篇内容对你有帮助吗?
点赞与收藏保存在当前浏览器。
继续阅读
实时环境下的智能体评测与教学:RealtimeBench 与 TORSI 方法 →
EvolvingBrain:面向开放世界多模态智能体自进化的自适应技能系统 →