使用人工智能的脓毒症护理医疗记录抽象改善质量:一项整群随机试验

Medical Record Abstraction for Quality Improvement in Sepsis Care Using Artificial Intelligence: A Cluster Randomized Trial

作者信息Aaron Boussina, Claire Allison, Kimberly Quintero, Sonia Jain, Chad VanDenBerg, Michael Hogarth, Amy M Sitapati, Karandeep Singh, Atul Malhotra, Michael T McCurdy, Christopher A Longhurst, James S Ford, Theodore Chan, Paul Ishimine, Richard Childers, Shamim Nemati, Gabriel Wardi
PMID42348212
发布时间2026-06-01
DOI10.1001/jamanetworkopen.2026.11885

实验完整度

高

该试验为整群随机对照试验,包含随机化分配、混合效应模型分析的干预效果评估、专家与LLM判定一致性核验,以及患者临床结局(30天死亡率、ICU入住)等独立证据层级,并进行了功能验证与机制验证。

主要模型

急诊科脓毒症患者队列 急诊科主治医师群体(66名)

重点核对

医师纳入标准:在UCSD急诊科工作且研究前每月至少排班3次 干预方式:LLM判定SEP-1依从性并在出院时发送个性化反馈,对照组按标准流程延迟反馈 患者纳入标准:符合CMS严重脓毒症和脓毒性休克SEP-1标准,且时间零点发生在急诊科 主要结局:SEP-1总体依从性,使用混合效应模型(固定效应:干预组;随机效应:医生) LLM参数:Llama 3.1 8B instruct,测试时缩放3次,多数投票

摘要

重要性 医院质量报告仍是一个手动、成本高昂的过程,且作为改善护理结局的机制存在严重局限性。 目的 评估由大语言模型(LLMs)实现的近实时质量测量能否改善以医疗保险和医疗补助服务中心(CMS)严重脓毒症和脓毒性休克管理集束化(SEP-1)质量指标衡量的质量绩效。 设计、设置和参与者 这项单盲、非分层整群随机试验于2024年12月13日至2025年7月8日在加利福尼亚大学圣迭戈分校(UCSD)卫生系统内的2个学术性急诊科(EDs)进行。参与者包括所有在UCSD EDs执业且在试验开始前每月工作超过3个班次的66名主治医师。 干预 参与者被随机分配接受在患者出院时由大语言模型确定的SEP-1依从性反馈,或接受标准流程。 主要结局和测量指标 主要结局是SEP-1的总体依从性。次要结局包括专家对LLM SEP-1判定的一致率、30天死亡率以及急诊科严重脓毒症和/或脓毒性休克患者的重症监护病房入住率。效应量通过混合效应逻辑回归模型估计,其中干预组作为固定效应,医生作为随机截距。 结果 研究人群包括66名医师,他们治疗了301名符合CMS SEP-1纳入标准的患者(对照组121名,干预组180名;中位年龄64.3[IQR,51.1-75.7]岁;171[56.8%]名男性;52[17.3%]名患有慢性肾脏病;52[17.3%]名患有慢性心力衰竭)。对照组的SEP-1依从率为70.1%,而干预组为82.9%。在混合效应模型中,干预组的分配导致SEP-1依从性绝对改善13.0%(95% CI,2.5%-23.4%;比值比2.10[95% CI,1.15-3.81];P = .02)。干预组和对照组之间最大的差异在于30-mL/kg液体推注组分未完成(3/180[1.7%]对16/121[13.2%]),这是该质量测量中一个对文件记录敏感的组分。LLM判定与专家评审的一致率为92%。在重症监护病房入住率或30天死亡率方面没有显著差异。 结论和相关性 在这项针对脓毒症护理的人工智能(AI)医疗记录抽象的整群随机试验中,快速评估SEP-1绩效并提供针对性反馈改善了总体依从性。AI驱动的质量临床整合可能解决现有医院质量报告的局限性,并更好地支持学习型卫生系统。 试验注册 ClinicalTrials.gov 标识符:NCT07581340

实验结论

提炼研究问题、关键发现与证据,快速把握文章的核心贡献。

研究问题
由大语言模型自动评估复杂医疗质量指标并实时发送个性化反馈,能否改善急诊科医师对CMS SEP-1质量指标的依从性?
核心机制
实时生成并反馈个体化质量指标绩效,强化反馈回路,针对未能达标的指标提供具体改进建议,从而改善SEP-1依从性。
主要证据
整群随机试验(66名急诊科医师,301例脓毒症患者)证实,干预组SEP-1依从率82.9%显著高于对照组70.1%(绝对差异13.0%,95%CI 2.5%-23.4%,OR2.10,P=.02);LLM判定与专家评审一致率为92%。
研究意义
AI驱动的质量临床整合可能赋能学习型卫生系统,解决现有医院质量报告中高成本、手动且不及时的局限性,改善临床医生绩效。

研究路径

按研究推进顺序梳理实验设计、验证步骤与关键观察。

1

研究设计与随机化

评估AI驱动下的实时质量测量加上个性化反馈是否能改善SEP-1依从性。

在2个急诊科进行单盲、非分层整群随机试验,将66名符合条件的主治医师随机分配到干预组(收到LLM生成的SEP-1反馈)或对照组(标准质量报告反馈)。

2

患者识别与数据抽象

确定符合CMS SEP-1标准的患者并提供相关临床数据给。

使用CMS严重脓毒症和脓毒性休克标准识别患者,并通过临床诊断而非账单诊断进行识别。通过LLM自动评估SEP-1依从性,由专家对结果进行核查。

3

干预实施:反馈系统

为干预组医师提供及时的、个性化的SEP-1绩效反馈以改善依从性。

对干预组所有合格病例在出院时自动生成SEP-1依从性结果,不合格情况通过电子邮件反馈给医师,并附上明确原因和改进建议;严重时由医疗主任打电话。对照组仅按标准抽样送报CMS。

4

结局测量与统计比较

量化干预对SEP-1依从性及其他结局的影响。

比较干预组和对照组的SEP-1依从率、30天死亡率、ICU入住率、LLM与专家判定一致性,使用混合效应逻辑回归模型和二次分析(t检验)评估干预效果。

研究方法

按研究目的归类文中使用的方法,便于定位所需技术。

产品清单

实验环节名称品牌货号
Epic ClarityEpic Systems Corporation--
Llama 3.1 8B instructMeta Platforms Inc--

关键环节

汇总复现实验时建议重点确认的条件及原文阅读提示。

环节核对要点
研究设计与随机化
集群随机化方法:是否单盲和非分层;研究中心数量:2个学术急诊科;
阅读提示:Methods 'Study Design and Setting'
参与者纳入标准
医师纳入标准:在UCSD急诊科工作且每月至少3班次;患者纳入标准:符合CMS SEP-1标准,且发病时间在急诊科。
阅读提示:Methods 'Study Design and Setting'
干预措施
反馈时机:出院时;反馈方式:邮件和必要时电话;反馈内容:非依从原因和改进建议。对照组反馈延迟3-4个月。
阅读提示:Methods 'LLM Architecture'
主要结局测量
SEP-1依从性定义;混合效应模型是否指定干预固定效应和医生随机截距。
阅读提示:Methods 'Statistical Analysis'
LLM参数和抽象流程
LLM版本:Llama 3.1 8B;是否进行测试时缩放(3次多数投票);提示词和架构。
阅读提示:Methods 'LLM Architecture'
数据分析
使用R版本4.5.2,lme4版本1.1.38,performance版本0.16.0。
阅读提示:Methods 'Statistical Analysis'