内镜袖状胃成形术视频标注:三位标注者达到操作熟练度的学习曲线分析

Endoscopic sleeve gastroplasty video annotation: analysis of the learning curve of three annotators to achieve procedure proficiency

作者信息Maria Vannucci, Matyas Fehervari, Hutan Ashrafian, Mohamed El Sharkawy, Nicolien Heikens, María Rita Rodríguez-Luna, Silvana Perretta
PMID42682465
发布时间2026-05-21
DOI10.1097/JS9.0000000000005019

实验完整度

低

本研究为回顾性视频标注分析,不涉及前瞻性实验或功能验证,主要进行观察性统计,实验细节有限。

主要模型

40例内镜袖状胃成形术(ESG)视频(来自单一中心、单一操作者)

重点核对

标注者经验水平(专家顾问医师、二年级住院医师、工程专业学生) 标注阶段和特征定义(依据标注手册) 标注者间一致性(Cohen's kappa) 学习曲线计算方法(期望最大化算法与移动平均优化模型)

摘要

引言:内镜介入技能的习得通常依赖于学徒制培训。这种学习模式的局限包括培训师的可用性和人为因素偏见。手术和内镜视频录制与存储的增加促进了基于视频的学习(VBL)方法。VBL可能通过提高培训师的可用性并民主化对内镜袖状胃成形术(ESG)等由少数专家操作者进行的手术的培训机会,从而缩短学习曲线。本研究的目的是评估视频标注作为ESG学习工具的价值。方法:收集了在单一中心进行的ESG手术视频并进行标注。由一位ESG专家制定标注手册,并由三位具有不同内镜和ESG专业知识水平的标注者使用。采用两两Cohen's kappa评估评估者间信度(IRR)。对于ESG的每个阶段和特征,完成学习曲线定义为标注者之间一致的概率,并通过期望最大化算法的移动平均优化模型进行估计。结果:共标注了40个ESG视频。IRR两两kappa得分介于0.44(标注者1和3)和0.58(标注者2和3)之间。学习曲线分析显示,掌握ESG不同阶段需要标注不同数量的手术,其中“其他缝合阶段”需要最多(n=36)。整体学习曲线在ESG的不同方面显示变异性,达到熟练度平均需要28.40个手术。结论:不同受训者的学习过程有所不同,这反映在掌握ESG所需的手术数量上。针对不同受训者定制培训可能缩短学习曲线。ESG的某些特征掌握较快;然而,仔细和重复的练习对于在更复杂的特征中减少错误至关重要。VBL可能在高级学习的民主化中发挥作用。

实验结论

提炼研究问题、关键发现与证据,快速把握文章的核心贡献。

研究问题
评估视频标注作为ESG学习工具的可行性,探究不同经验标注者达到熟练度所需标注的手术数量。
核心机制
文中未明确提出机制,但指出个体学习过程差异影响掌握ESG所需标注数量,经验水平与学习曲线长度相关。
主要证据
三位标注者共同标注40个ESG视频,通过Cohen's kappa评估IRR(0.44-0.58),采用期望最大化算法估计学习曲线,平均需28.40次标注达到熟练度;不同阶段和特征要求差异显著。
研究意义
研究支持视频标注作为ESG培训工具,可能有助于民主化培训机会,并强调针对不同受训者定制培训以缩短学习曲线。

研究路径

按研究推进顺序梳理实验设计、验证步骤与关键观察。

1

视频选取与标注

收集ESG视频并由不同经验标注者进行标注,评估标注者间一致性。

选取2016年10月至2018年5月由单一操作者连续进行的40例ESG视频,由专家外科医师、住院医师和工程专业学生三位标注者独立根据标注手册进行标注。

研究方法

按研究目的归类文中使用的方法,便于定位所需技术。

产品清单

实验环节名称品牌货号
MOSaiC----

关键环节

汇总复现实验时建议重点确认的条件及原文阅读提示。

环节核对要点
视频标注
标注者经验层次、标注手册内容(包含阶段和特征定义)、视频数量和来源(单一中心、单一操作者)、标注平台(MOSaiC)
阅读提示:Methods - Video annotation 部分
统计分析与学习曲线评估
Cohen's kappa系数、期望最大化算法、移动平均优化模型参数(如滑动窗口大小)
阅读提示:Methods - Statistical analysis 部分