数据集构建
获取多中心、高质量的腹腔镜胃切除术视频数据以训练和验证AI模型。
从4家三级医院收集18个腹腔镜胃切除术视频,以5秒间隔提取JPEG帧,去除冗余和模糊帧后,由两名委员会认证外科医生使用Labelme对18个类别进行语义分割标注。
Real-time multicenter semantic segmentation for laparoscopic gastrectomy: development, external validation and operating room deployment of an AI navigation system
该研究包含多中心视频数据训练与外部验证、实时手术室部署及临床可用性评估等多个独立证据层级,并明确包含功能验证(外科医生认知负荷评估,NASA-TLX)和机制验证(系统生成的语义分割可视化引导)。
腹腔镜胃切除术视频帧(来自4家三级医院) YOLOv10模型 AI导航系统的实时手术室部署(15例患者)
训练集4308帧、内部测试集1803帧、外部验证集721帧,分别含41066、17211、6685个标签 外部验证集来自3家独立医院,每个医院各1个视频 外部验证mAP@50为0.832,AP@[0.50–0.95]为0.684 平均处理时间31.8±10.7 ms/帧 术后住院时间中位数7天(IQR 6–9天)
提炼研究问题、关键发现与证据,快速把握文章的核心贡献。
按研究推进顺序梳理实验设计、验证步骤与关键观察。
获取多中心、高质量的腹腔镜胃切除术视频数据以训练和验证AI模型。
从4家三级医院收集18个腹腔镜胃切除术视频,以5秒间隔提取JPEG帧,去除冗余和模糊帧后,由两名委员会认证外科医生使用Labelme对18个类别进行语义分割标注。
开发并内部评估一个基于YOLOv10的AI模型,用于实时语义分割。
在训练集上微调YOLOv10模型,监控损失和性能曲线,并在内部测试集上评估框检测和掩码分割性能。
评估模型在不同医院数据上的泛化能力。
使用外部验证集测试模型的性能,并与内部测试集结果对比。
将AI导航系统集成到手术室环境中,并评估其可行性和临床实用性。
将训练好的模型集成到用户界面(UI)中,连接腹腔镜系统与笔记本电脑,在15例患者的手术中实时运行,并进行认知负荷和可用性评估。
按研究目的归类文中使用的方法,便于定位所需技术。
| 实验环节 | 名称 | 品牌 | 货号 |
|---|---|---|---|
| 视频采集 | Aesculap EinsteinVision 2.0内窥镜系统 | Aesculap | -- |
| Karl Storz IMAGE1 S 3D系统 | Karl Storz | -- | |
| 视频帧标注 | Labelme | -- | -- |
| 实时推理 | Intel Core i9 | Intel | -- |
| NVIDIA GeForce RTX 4070 | NVIDIA | -- | |
| Jiuyinjiushi HD90录像单元 | -- | -- |
汇总复现实验时建议重点确认的条件及原文阅读提示。
| 环节 | 核对要点 |
|---|---|
| 数据集构建 | 纳入标准:2022年5月至2024年12月之间进行的全腹腔镜胃切除术,视频分辨率1920×1080,25帧/秒;采样间隔为5秒;最终数据集规模(训练集4308帧,内部测试集1803帧,外部验证集721帧) 阅读提示:Methods部分中的Video dataset段落 |
| 模型训练与评估 | 模型架构为YOLOv10默认架构;训练轮次100 epochs,采用早停法;评估指标包括mAP@50、AP@[0.50–0.95]、precision、recall、F1 score 阅读提示:Methods部分中的Model development and evaluation metrics段落 |
| 实时手术室部署 | 硬件配置:Intel Core i9 CPU,64GB DDR5 RAM,NVIDIA GeForce RTX 4070 GPU;UI集成方式;目标类别选择(按需显示) 阅读提示:Methods部分中的Intraoperative deployment和Results部分中的Real-time intraoperative deployment and clinical relevance段落 |
| 认知负荷与可用性评估 | 使用NASA-TLX和SUS量表;NASA-TLX得分均值26.72±6.51,SUS得分均值78.33±5.20;评估对象为首席外科医生 阅读提示:Methods部分中的Cognitive load and system usability和Results部分中的Real-time intraoperative deployment and clinical relevance段落 |