电子科大自动化学院在肾脏病人工智能诊断取得新进展

　　近日，电子科技大学自动化工程学院谢永乐教授电磁近场检测与电磁环境监测技术团队，与电子科技大学医学院四川省人民医院肾内科（李贵森、邹玉蓉教授，彭雷、张萍博士等）紧密协作，共同发表了医学人工智能科研论文。论文的共同作者有电子科技大学的刘浩然、谢永乐、李西峰、毕东杰以及四川省人民医院的李贵森、邹玉蓉、彭雷、张萍、林英英。该医工结合研究的人工智能工作由李西峰副教授、谢永乐教授共同指导。
　　慢性肾病已经在全球范围内成为了危害人类健康和社会经济发展的重要因素。一旦慢性肾病由早期阶段发展至末期阶段，患者需要接受昂贵的肾脏替代治疗来维持生命。因此，早期识别和有效干预对防治慢性肾病至关重要。肾活检是慢性肾病诊断的金标准，肾小球免疫荧光图像是肾活检的主要评估手段之一。基于人工智能技术开发一种高效、客观、鲁棒性强的诊断工具，对解决肾脏病理医生短缺、肾小球免疫荧光图像评估中的观察者变异等问题具有重要意义。
　　团队成员撰写的论文《Describelikeapathologist：Glomerularimmunofluorescenceimagecaptionbasedonhierarchicalfeaturefusionattentionnetwork》发表于人工智能期刊《EXPERTSYSTEMSWITHAPPLICATIONS》。为了进一步提高计算机辅助诊断效率，实现肾小球免疫荧光描述语句的自动生成，该研究将层级特征融合注意力网络与长短期记忆网络相结合，构成了编码器解码器结构。不同于将各项描述性指标的诊断视为单独的分类任务并为它们构建独立的分类网络，该方案仅使用单一的模型即可确定多项关键的肾小球免疫荧光描述性指标的类别，并生成语法正确、流畅的人类级别的免疫荧光描述语句。在测试阶段，该方案生成的描述语句的平均BLEU1、BLEU2、BLEU3、BLEU4、ROUGEL、CIDEr分别可以达到0。704、0。563、0。444、0。387、0。760、3。594。
　　图1肾小球免疫荧光图像的采集过程
　　为支持模型的训练，研究中构建了一个涉及5528个临床病例共11506张肾小球免疫荧光图像的大型数据集，每张图像均配有高级病理医生人工撰写的描述语句。该数据集全面覆盖了不同性别、年龄、临床疾病的病例。
　　图2肾小球免疫荧光图像自动描述框架结构图
　　表1提出的框架在肾小球免疫荧光图像数据集上的文本生成效果
　　论文《HFANet：hierarchicalfeaturefusionattentionnetworkforclassificationofglomerularimmunofluorescenceimages》发表于人工智能期刊《NEURALCOMPUTINGAPPLICATIONS》。研究团队提出一种名为层级特征融合注意力网络的轻量化卷积神经网络，其使用一个可学习的特征融合注意力掩模，将浅层卷积块提取的局部、高分辨率、高通用性的特征图与深层卷积块提取的抽象、低分辨率的特征图进行加权融合，以形成最终的图像表示。论文提出的框架，在肾小球分割任务中取得的平均DICE和IOU分别为93。47和88。09；在荧光强度分类和分布形态分类任务中取得的平均分类准确率分别为90。48和90。87
　　图3不同的肾小球免疫荧光图像在荧光强度及分布形态上存在差异
　　图4层级特征融合注意力网络结构图
　　表2提出的HFANet与常用的分类网络的分类性能对比
　　图5分类依据热力图
　　电磁近场检测与电磁环境监测技术团队在谢永乐教授带领下，从事毫米波近场合成孔径成像技术、电磁环境监测（ESD、EMI等）技术、高可靠电子系统设计技术以及声波图像信息处理技术研究。2020年以来，团队遵循四个面向之面向人民生命健康，在与电子科技大学医学院四川省人民医院肾内科深入合作的基础上，成立了以李西峰副教授为组长的肾脏病理图像计算机辅助诊断课题组。
　　相关链接：
　　论文1链接：https：www。sciencedirect。comsciencearticlepiiS0957417422021868
　　论文2链接：https：link。springer。comarticle10。1007s00521022076766
　　本文转载自【电子科技大学】官方网站