人工智能辅助内镜下识别食管癌研究进展-凯发娱乐官网

人工智能辅助内镜下识别食管癌研究进展
research progress on artificial intelligence-assisted endoscopic identification of esophageal cancer
doi: , , html, ,   
作者: , 刘 虹, 张贝贝, 李国栋*:山东第一医科大学第一附属医院(山东省千佛山医院)消化内科,山东 济南
关键词: ;;;;;; deep learning
摘要: 食管癌目前是我国最常见的癌症之一,食管癌及时的发现及治疗能明显延长患者生存期。随着计算机技术的日益进步,越来越多基于深度学习技术的计算机辅助诊断模型应用于消化系统疾病的研究当中。目前基于深度学习技术建立的模型已经部分应用于消化内镜下辅助诊断食管癌,并且获得较高诊断率,本文就目前的研究进展做出总结,并对其未来方向做出预测。
abstract: esophageal cancer is currently one of the most common cancers in china, and timely detection and treatment of esophageal cancer can significantly prolong the survival of patients. with the advancement of computer technology, more and more computer-aided diagnostic models based on deep learning technology are applied to the study of digestive diseases. at present, the model based on deep learning technology has been partially applied to the auxiliary diagnosis of esophageal cancer under digestive endoscopy, and has obtained a high diagnosis rate. this article reviews the current research progress and looks forward to its future.
文章引用:王浩, 刘虹, 张贝贝, 李国栋. 人工智能辅助内镜下识别食管癌研究进展[j]. 临床医学进展, 2024, 14(9): 715-720.

1. 引言

食管癌是全世界范围内最常见的恶性肿瘤之一,我国是世界范围内食管癌的高发地区,我国食管癌的发病率及死亡率分别位列全部恶性肿瘤的第6位及第4位[1]。食管癌的早期发现及早期治疗对于延长患者的生存预期尤为重要,早期食管癌内镜下的完全切除率可达90%以上[2],因此能否早期发现病变是食管癌诊疗过程中的重要一环。

早期食管癌没有特征性的临床表现及明显的辅助检查异常,早期食管癌均为内镜下筛查发现,其内镜下特征为片状黏膜发红,食管上皮乳头内毛细血管袢(intrapapillary capillary loops, ipcl)改变等,但是部分疾病如食管炎也具有类似表现。因此食管癌的诊出率在不同医师及地区之间存在较大差异[3],如何帮助低年资医师及地区经济欠发达地区医师提高食管癌的诊出率就成为食管癌筛查的重点。

基于卷积神经网络技术(convolutional neural network, cnn)的人工智能(artificial intelligence, ai)模型近年来越来越多的应用于消化系统疾病的诊断[4] [5],ai通过学习大量内镜图片中的特征性标志,将上述特征逐级转化为逻辑语言,从而应用简单的模型即可学习复杂的功能[6]。ai目前在识别消化系统癌症当中已取得令人满意的成绩,本文就ai辅助识别食管癌的相关研究进行综述,并对其未来的发展进行展望。

2. 人工智能及卷积神经网络

人工智能通过模仿人脑的工作原理,用来解决复杂问题。其中的一种方式便是对输入输出的数据进行相应的学习,以获取其内部存在的规律及关系。卷积神经网络是一种深度学习模型,属于人工神经网络(artificial neural network, ann)中的一种,主要用于图像识别和计算机视觉任务。其基本原理是通过多层卷积层和池化层来提取图像的特征并通过全连接层进行分类或回归。包括卷积层、激活函数、池化层、全连接层、反向传播。cnn的优点是能够自动学习图像的特征表示,无需手动设计特征。它在图像识别、目标检测和语义分割等任务上取得了很好的效果,并成为计算机视觉领域的重要工具[7],因此cnn常应用于消化内镜图片的识别。

3. ai辅助白光、窄带及放大内镜等诊断食管癌

目前内镜下诊断早期食管癌可采用多种方式,如普通白光(white light image, wli),窄带成像(narrow-band imaging, nbi)及窄带成像结合放大内镜(magnification endoscopy, me)、内镜下碘染色等。诸多学者对ai模型诊断食管癌进行了研究。horie等[8]首次联合wli和cnn来辅助诊断食管癌,收集了384名患者的8428张食管癌训练图像,并使用这些图像开发了深度学习模型。研究结果显示,该cnn模型能够以98%的灵敏度正确检测出食管癌病例,并能够检测出所有直径小于10毫米的癌症病灶。鲍瀛等[9]收集了食管癌患者的白光内镜检查图像,构建了一个深度卷积神经网络结构,将ai诊断的结果与内镜医师的诊断的结果进行比较,最终结果显示该模型的独立测试集上的诊断准确率达到89.83%,且模型对早期食管鳞状细胞癌的敏感性和特异性明显高于资深内镜医生。li等[10]基于计算机辅助设计(computer aided design, cad)构建模型来识别早期食管鳞状细胞癌。选取2167张早期食管鳞状细胞癌的异常非放大窄带成像内镜(nm-nbi)图像和2568张正常图像作为训练数据集训练cad系统。验证结果显示:cad-nbi的敏感性、特异性、准确性、阳性预测值和阴性预测值(91.0%、96.7%、94.3%、95.3%和93.6%)均较好,cad-wli的敏感性和阴性预测值(98.5%、98.7%)较好。特异性、准确性、阳性预测值(83.1%、89.5%、80.8%)欠佳。但内镜医生通过使用联合使用cad-nbi和cad-wbi,可较大程度提升诊断效能。yang等[11]的研究中,构建了识别放大内镜图像及碘染色图像的人工智能模型,模型在最终的测试中对放大内镜图像识别的准确性为88.1%,在碘染色图像识别中准确度、灵敏度和特异性达到了为97.0%、97.2%、96.4%。

上文所述人工智能在常见的食管鳞状细胞癌中所得出的结果令人满意。胃食管结合部癌也是食管常见肿瘤之一,iwagami等[12]在亚洲国家首次进行了人工智能与胃食管结合部癌的研究,其选取了病理证实的浅表胃食管交界部癌及正常的胃食管交界部黏膜图片来训练人工智能模型。结果提示:人工智能系统的敏感性(94%)较好,在特异性(42%)及准确性(66%)方面与内镜专家(43%、63%)相比无明显差别。hashimoto r等[13]使用卷积神经网络开发了一种人工智能算法,用于实时检测barrett食管中早期食管肿瘤。结果显示该算法对于barrett食管的不典型增生诊断敏感性为96.4%,特异性为94.2%,准确性为95.4%。

人工智能模型不仅在静态图片的诊断能力优秀,还在动态视频诊断方面出色,yuan等[14]进行了人工智能模型对于动态视频诊断能力测试,选取了42段视频来比较人工智能模型与11位有经验的内镜医师的诊断能力,人工智能模型在视频验证中的灵敏度为89.5%~100%,特异性为73.7%~89.5%,并且在早期食管癌白光内镜下的诊断中敏感性优于内镜医师。waki等[15]使用了静态图像来构建人工智能系统。并在验证的过程中,使内窥镜以恒定速度通过食管而不聚焦病变,使用人工智能模型与21名内窥镜医师对于100个验证视频进行诊断,在人工智能的协助下,内镜医生进行评估,与未使用人工智能相比,特异性(91.6%, p = 0.756)未见明显变化,而其敏感性由75.0%提高到77.7% (p = 0.00696)。

4. ai辅助判断早期食管癌浸润深度及范围

食管癌的浸润深度对于治疗方式的选择及预后至关重要,根据中国最新的食管癌诊疗指南,浸润深度为上皮内(ep)及黏膜固有层(lpm)病变绝对可行内镜下治疗,浸润至黏膜肌层(mm)及黏膜下层上1/3 (sm1)因其具有淋巴结转移风险及脉管浸润等,是内镜治疗的相对适应证,而黏膜下层中1/3 (sm2)以深的病变则需手术或根治性放化疗[16]。tokai等[17]使用了1751张高质量内镜图像进行模型训练,其结果与13位内镜医师的诊断结果对比,人工智能诊断系统在测量食管鳞状细胞癌的浸润深度方面表现出较高的诊断准确率(80.9%),该系统的准确率超过了12位内镜医师,并且其曲线下面积(auc)超过所有内镜医师。nakagawa等[18]使用独立的验证数据集对ai系统进行评估。他们从验证集中选择了3至6个代表性的非放大内镜(non-me)和放大内镜(me)图像,并使用ai系统进行独立诊断。16名专家对与ai系统相同的数据集进行浸润深度的判断,最终得出该人工智能系统的食管鳞状细胞癌的浸润深度诊断准确率(91.0%)与经验丰富的内窥镜医生诊断准确率(89.6%)相当,相对于人工诊断能更好的减少个人差异性。shimamoto团队[19]在动态内镜视频和食管浅表鳞状细胞癌的静态图像中收集了wli和nbi/bli图像,用于训练人工智能的模型。在与消化内镜专家诊断浸润深度sm2-3的对比中,人工智能系统对非放大内镜及放大内镜的准确率均高于内镜专家,但其在放大内镜下诊断ep-sm1 (94.9%)低于内镜专家(97.3%)。

准确的判断病变范围能够协助内镜下治疗。在病变范围的判断中,人工智能依旧发挥出色,liu等[20]使用wli图像来训练和测试人工智能模型。最后使用216张图像来比较模型和内窥镜医师之间的对肿瘤区域的描绘。最终人工智能对病变边界的勾画表现出与内窥镜专家相当的水平(98.1% vs 95.3%),明显高于高级内窥镜医师(78.6%)。hashimoto r等[13]的算法模型不仅能准确判断barrett食管癌,还能够准确地定位barrett食管中早期食管肿瘤区域,平均精度为0.7533,灵敏度为95.6%,阳性预测值为89.2%。yuan等[21]首次报道利用人工智能系统在临床内窥镜检查中实时检测和描绘早期食管鳞状细胞癌的研究。其团队基于yolact模型构建了自己的人工智能模型,该模型整合了多种内窥镜成像模态,能够实时检测和描绘早期食管鳞状细胞癌的边缘。该人工智能系统不仅能够正确识别每种内窥镜成像模态,还能够准确检测和描绘大小约为3毫米的平坦型粘膜癌在白光成像、狭带成像、放大内窥镜和碘染色下的边缘,该人工智能系统直接连接到内窥镜医生常用的内窥镜监控设备,更适合临床使用。

5. ai辅助识别食管鳞状上皮乳头内毛细血管袢

ipcl形态目前存在井上、有马、jes等多种分型,jes分型中的将ipcl分为a、b型相较于其他类型分型而言更为简便,临床应用较广,根据ipcl jes分型的描述,a型血管提示正常食管黏膜或低级别上皮内瘤变,b1型、b2型和b3型血管分别提示ep-lpm病变、mm-sm1病变和sm2及更深层病变[22],根据上文已知浸润深度对于治疗的选择至关重要,故利用ai通过内镜图像来判断早期食管癌ipcl ab分型具有重要临床意义,根据国内外已有实验结果可证明所训练模型对于早期食管癌ipcl分型诊断率较高甚至一定程度上高于内镜医师。zhao等[23]回顾性地收集了ipcl a、b1、b2型图像进行cad模型的训练和测试,该模型在病灶水平和像素水平的平均诊断准确率分别为89.2%和93.0%。对所有病灶的诊断性能均优于非专家(p < 0.001)。此外,该模型对b2型病变的诊断性能与专家的诊断性能无显著差异(p > 0.001)。m everson等[24]选取了来自17名患者(10名escn患者,7名正常患者)的连续高清me-nbi图像来训练cnn,最终证实该cnn以93.7%的准确率区分异常与正常ipcl模式,对异常ipcl模式进行分类的敏感性和特异性分别为89.3%和98%,yuan等[25]研究的ai系统能够识别和区分四种不同类型的ipcl血管(a型、b1型、b2型和b3型),并预测浸润深度。最终在外部验证集的测试中,人工智能诊断ipcl亚型的准确率达到了89.8%,该系统在预测ipcl亚型和浸润深度方面比内窥镜医生有更好的表现,在ai系统的辅助下,高级内镜医生的诊断时间略有缩短,初级内镜医生的诊断准确率显著提高。

6. ai在非消化内镜领域协助诊断食管癌

除消化内镜外,人工智能在诸多领域也可以帮助食管癌的诊断[26],消化内镜由于成本高、有侵入性等特点使其并不能成为广泛的普查方式,gao等[27]深入于食管海绵细胞学检查研究,该检查简单、廉价并且诊断效果良好,其团队应用食管鳞状细胞癌患者及正常病人的图像训练人工智能模型,在验证表现中,人工智能辅助细胞学检查诊断高级别病变的敏感性为90%,特异性为93.7%。gao的团队在食管海绵细胞学检查于人工智能领域不断深入,继续完善人工智能模型,在最近的全国性前瞻性研究中[28],其共招募了14,597名40~75岁之间的成年人,其中一部分数据进行测试,另一部分进行验证,最终人工智能诊断模型的敏感性达到了90.0%,特异性为93.7%,auroc为0.964,其优秀的性能可使92.8%的患者免于消化内镜的检查。

影像学检查在食管癌的诊断当中也极为重要,越来越多及应用人工智能方式的影像学方法应用于消化系统疾病的诊断[29]。食管癌治疗方式当中,淋巴结是否转移为一个重要的因素。chen等[30]利用人工智能技术建立了一个预测淋巴结转移风险的模型,在最终的结果验证中,人工智能模型的特异性(91.20% vs 72.59%)、ppv (56.49% vs 39.78%)、准确性(90.72% vs 74.49%)、c指数(0.915 vs 0.868)均优于传统的logistic回归模型。

7. 总结与展望

目前,人工智能领域的研究已经深入食管癌诊治的各个环节,无论是人工智能模型的单独诊断还是辅助内镜医师进行诊断都取得了令人满意的结果,可以有效的帮助低年资医师提高诊断正确率,帮助高年资医师快速发现病变等。但仍有部分地方值得我们去做更深入的研究:(1) 目前针对人工智能辅助识别食管癌浸润深度的研究多局限于单一白光等,现在已有研究多种方式联合(如放大内镜窄带光成像联合内镜超声)来判断食管癌的浸润深度,下一步可以进行人工智能能否在多种方式联合的内镜检查中发挥价值。(2) 目前人工智能的研究多为静态图片或者动态视频的研究,能否将人工智能应用于实际临床操作过程中,在进镜时由人工智能根据食管黏膜进行大致判断以区分是否为食管癌高危人群,再由临床医师根据人工智能的判断及实际情况去选择是否需要对该患者进行更精细的检查。若能实现即可大幅度减轻临床工作量。(3) 人工智能目前在食管癌病理方面的研究较少,病理结果往往是诊断食管癌的金标准,希望未来能有此类研究成果的发表。

notes

*通讯作者。

参考文献

[1] 中华医学会肿瘤学分会早诊早治学组. 中国食管癌早诊早治专家共识[j]. 中华肿瘤杂志, 2022, 44(10): 1066-1075.
[2] lagergren, j. and lagergren, p. (2010) oesophageal cancer. british medical journal, 341, c6280.
[3] chen, w., zheng, r., zhang, s., zeng, h., xia, c., zuo, t., et al. (2017) cancer incidence and mortality in china, 2013. cancer letters, 401, 63-71.
[4] yoshii, s., mabe, k., watano, k., ohno, m., matsumoto, m., ono, s., et al. (2019) validity of endoscopic features for the diagnosis of helicobacter pylori infection status based on the kyoto classification of gastritis. digestive endoscopy, 32, 74-83.
[5] jayatilake, s.m.d.a.c. and ganegoda, g.u. (2021) involvement of machine learning tools in healthcare decision making. journal of healthcare engineering, 2021, 1-20.
[6] 张佳, 孙凯. 人工智能深度学习在心血管影像诊断中的研究进展[j]. 中国医学装备, 2020, 17(4): 183-186.
[7] de souza, l.a., palm, c., mendel, r., hook, c., ebigbo, a., probst, a., et al. (2018) a survey on barrett’s esophagus analysis using machine learning. computers in biology and medicine, 96, 203-213.
[8] horie, y., yoshio, t., aoyama, k., yoshimizu, s., horiuchi, y., ishiyama, a., et al. (2019) diagnostic outcomes of esophageal cancer by artificial intelligence using convolutional neural networks. gastrointestinal endoscopy, 89, 25-32.
[9] 鲍瀛, 李瑞瑶, 何明远, 等. 基于深度学习的图像识别技术在食管癌早期筛查中的应用研究[j]. 中国数字医学, 2021, 16(9): 90-93.
[10] li, b., cai, s., tan, w., li, j., yalikong, a., feng, x., et al. (2021) comparative study on artificial intelligence systems for detecting early esophageal squamous cell carcinoma between narrow-band and white-light imaging. world journal of gastroenterology, 27, 281-293.
[11] yang, x., li, z., shao, x., ji, r., qu, j., zheng, m., et al. (2021) real-time artificial intelligence for endoscopic diagnosis of early esophageal squamous cell cancer (with video). digestive endoscopy, 33, 1075-1084.
[12] iwagami, h., ishihara, r., aoyama, k., fukuda, h., shimamoto, y., kono, m., et al. (2020) artificial intelligence for the detection of esophageal and esophagogastric junctional adenocarcinoma. journal of gastroenterology and hepatology, 36, 131-136.
[13] hashimoto, r., requa, j., dao, t., ninh, a., tran, e., mai, d., et al. (2020) artificial intelligence using convolutional neural networks for real-time detection of early esophageal neoplasia in barrett’s esophagus (with video). gastrointestinal endoscopy, 91, 1264-1271.e1.
[14] yuan, x., guo, l., liu, w., zeng, x., mou, y., bai, s., et al. (2021) artificial intelligence for detecting superficial esophageal squamous cell carcinoma under multiple endoscopic imaging modalities: a multicenter study. journal of gastroenterology and hepatology, 37, 169-178.
[15] waki, k., ishihara, r., kato, y., shoji, a., inoue, t., matsueda, k., et al. (2021) usefulness of an artificial intelligence system for the detection of esophageal squamous cell carcinoma evaluated with videos simulating overlooking situation. digestive endoscopy, 33, 1101-1109.
[16] 中华人民共和国国家卫生健康委员会医政医管局. 食管癌诊疗指南(2022年版) [j]. 中华消化外科杂志, 2022, 21(10): 1247-1268.
[17] tokai, y., yoshio, t., aoyama, k., horie, y., yoshimizu, s., horiuchi, y., et al. (2020) application of artificial intelligence using convolutional neural networks in determining the invasion depth of esophageal squamous cell carcinoma. esophagus, 17, 250-256.
[18] nakagawa, k., ishihara, r., aoyama, k., ohmori, m., nakahira, h., matsuura, n., et al. (2019) classification for invasion depth of esophageal squamous cell carcinoma using a deep neural network compared with experienced endoscopists. gastrointestinal endoscopy, 90, 407-414.
[19] shimamoto, y., ishihara, r., kato, y., shoji, a., inoue, t., matsueda, k., et al. (2020) real-time assessment of video images for esophageal squamous cell carcinoma invasion depth using artificial intelligence. journal of gastroenterology, 55, 1037-1045.
[20] liu, w., yuan, x., guo, l., pan, f., wu, c., sun, z., et al. (2022) artificial intelligence for detecting and delineating margins of early escc under wli endoscopy. clinical and translational gastroenterology, 13, e00433.
[21] yuan, x., zeng, x., he, l., ye, l., liu, w., hu, y., et al. (2022) artificial intelligence for detecting and delineating a small flat-type early esophageal squamous cell carcinoma under multimodal imaging. endoscopy, 55, e141-e142.
[22] oyama, t., inoue, h., arima, m., momma, k., omori, t., ishihara, r., et al. (2016) prediction of the invasion depth of superficial squamous cell carcinoma based on microvessel morphology: magnifying endoscopic classification of the japan esophageal society. esophagus, 14, 105-112.
[23] zhao, y., xue, d., wang, y., zhang, r., sun, b., cai, y., et al. (2018) computer-assisted diagnosis of early esophageal squamous cell carcinoma using narrow-band imaging magnifying endoscopy. endoscopy, 51, 333-341.
[24] everson, m., herrera, l., li, w., luengo, i.m., ahmad, o., banks, m., et al. (2019) artificial intelligence for the real-time classification of intrapapillary capillary loop patterns in the endoscopic diagnosis of early oesophageal squamous cell carcinoma: a proof-of-concept study. united european gastroenterology journal, 7, 297-306.
[25] yuan, x., liu, w., liu, y., zeng, x., mou, y., wu, c., et al. (2022) artificial intelligence for diagnosing microvessels of precancerous lesions and superficial esophageal squamous cell carcinomas: a multicenter study. surgical endoscopy, 36, 8651-8662.
[26] 中国医院协会介入医学中心分会. 人工智能应用于食管癌临床诊疗的专家共识[j]. 中华介入放射学电子杂志, 2021, 9(3): 235-246.
[27] gao, y., xin, l., feng, y., yao, b., lin, h., sun, c., et al. (2021) feasibility and accuracy of artificial intelligence-assisted sponge cytology for community-based esophageal squamous cell carcinoma screening in china. american journal of gastroenterology, 116, 2207-2215.
[28] gao, y., xin, l., lin, h., yao, b., zhang, t., zhou, a., et al. (2023) machine learning-based automated sponge cytology for screening of oesophageal squamous cell carcinoma and adenocarcinoma of the oesophagogastric junction: a nationwide, multicohort, prospective study. the lancet gastroenterology & hepatology, 8, 432-445.
[29] 沈雨雯, 石逸秋, 解添淞, 等. 人工智能在胰腺癌影像诊断和评价中的研究进展[j]. 临床放射学杂志, 2023, 42(9): 1527-1530.
[30] chen, h., zhou, x., tang, x., li, s. and zhang, g. (2020) prediction of lymph node metastasis in superficial esophageal cancer using a pattern recognition neural network. cancer management and research, 12, 12249-12258.
为你推荐
凯发娱乐官网的友情链接
网站地图