密集视频描述的软组织肿瘤切除手术记录自动生成系统的研发与临床应用

摘要：

目的:探讨密集视频描述的自动化良性软组织肿瘤切除术手术记录生成方法及应用价值。方法:应用Transformer深度学习模型建立自动化手术记录生成系统，回顾性分析2021年9月至2023年8月空军军医大学西京医院骨科收治的30例良性软组织肿瘤患者手术视频。将患者数据按照8∶1∶1的比例随机分为训练集、验证集和测试集。在测试集上采用BLEU-1、BLEU-2、BLEU-3、BLEU-4、Meteor、Rouge、CIDEr共7个评价指标对模型生成手术记录文本质量进行评估，并与视频密集描述领域的经典算法并行解码的密集视频描述方法(PDVC)进行对比。结果:该手术记录自动生成系统在测试集中运行的结果：BLEU-1、BLEU-2、BLEU-3、BLEU-4、Rouge、Meteor、CIDEr分别为16.80、15.23、13.01、11.68、16.01、12.67、62.30。经典算法PDVC的运行结果：BLEU-1、BLEU-2、BLEU-3、BLEU-4、Rouge、Meteor、CIDEr分别为15.63、14.17、11.90、10.45、12.97、11.99、53.64。本研究提出的方法所有指标均较PDVC有明显提升，BLEU-4、Rouge、Meteor、CIDEr分别提升了1.23、3.04、0.68、8.66，证明模型可以更好地抓取视频中的关键信息，有助于生成更有效的文本记录。结论:基于密集视频描述的自动化良性软组织肿瘤切除术手术记录生成方法表现出良好的性能。

关键词：软组织肿瘤、人工智能、手术室信息系统、深度学习、手术记录生成

所属期刊栏目：26

资助基金：陕西省自然科学基金项目2022SF-054;西京医院2021年学科助推计划项目XJZT21CM32;国家自然科学基金62102296;西京医院2023年医务人员技术提升项目2023XJSM12;Natural Science Foundation of Shaanxi Province2022SF-054;2021 Discipline Booster Program of Xijing HospitalXJZT21CM32;National Natural Science Foundation of China62102296;2023 Medical Staff Technology Upgrading Project of Xijing Hospital2023XJSM12

在线出版日期：2024-01-30（万方平台首次上网日期，不代表论文的发表时间）

页数：共7页

页码：43-49