第
44
卷第
8
期
2017
年
8
月
计算机科学
COMPUTER
SCIENCE
Vo
1.
44
No.8
Aug.2017
基于双模态深度自编码的孤立性肺结节诊断方法
赵鑫强彦葛磊
(太原理工大学计算机科学与技术学院
太原
030024)
摘
要
近年来,深度学习技术在肺癌诊断方面得到了广泛的应用,但现有的研究主要集中于肺部
CT
图像。为了有
效提高肺结节的诊断性能,提出一种基于双模态深度降嗓自编码的肺结节诊断方法。首先,分别从肺部
CT
和
PET
图像中得到肺结节区域的特征信息;然后,以候选结节的
PET/CT
图像作为整个深度自编码网络的输入,并对高层信
息进行学习;最后,采用融合策略对多种特征进行融合并将其作为整个框架的输出。实验结果表明,提出的方法可以
达到
92.81%
的准确率、
9
1.
75%
的敏感度和1.
58%
的特异性,且优于其他方法的诊断性能,更适用于肺结节良/恶性
的辅助诊断。
关键词
降嗓自编码,双模态,深度学习,极限学习机,肺结节辅助诊断
中图法分类号
TP391
文献标识码
A
001
10. 11896/j. issn.
1002-137
叉
2017.08.054
Pulmonary
Nodule
Di
a
伊
osis
Using
Dual-modal
Denoising
Autoencoder
ßased
on
Extreme
Le
町
ning
Machine
ZHAO
Xin
QIANG
Yan
GE
Lei
(Co
llege
of
Co
mputer
Science
and
Technology, Taiyuan University
of
Technology, Taiyuan
030024
, China)
Abstract
The
existing deep learning framework used in diagnosing lung cancer still mainly focuses
on
lung
Co
mputed
Tomography(CT)
images,
but
it cannot obtain more higher diagnostic
rate
, when using only one images in the process
of daily diagnosis. Therefore
, in this paper, a new pulmonary nodule diagnosis method using dual-modal combined
with
CT
and Positron Emission
Tomography(PET)
deep denoising autoencoder based
on
extreme learning machine (SDAE-
ELM)
was proposed to improve the diagnostic performance effectively.
First
of all , the method gets discriminative fea
tures information separate from the input data
CT
and
PET.
Secondly, it inputs
CT
and
PET
about candidate lung
re
spectively in whole networ
k.
Thirdly
, it extracts the high level discriminative features of nodules
by
alternating stack de-
noising autoencoder layers. Finally
, it makes
the
fusion
strategy
of multi-feature fusion as the
output
of the whole
framewor
k.
The
experiment results show
that
classification accuracy of the proposed method can reach 92.
81
% ,sensi
tivities up to 9
1.
75% and specificity up to
1.
58%.
Meanwhile, the method achieves
better
discriminative results and is
highly suited to be used for pulmonary nodule diagnosis.
Ke)
响。
nls
Denoising autoencoder, Dual-modal, Deep learning, Extreme learning
machi
时,
Pulmonary
nodule diagnosis
引言
孤立性肺结节(So
litary
Pulmonary Nodule,
SPN)
是肺癌早
期的重要表现。早期肺癌
5
年存活率可达
60%
,而晚期肺癌
5
年存活率仅有
4%
。因此,在早期对肺结节进行准确诊断,不
仅可及时避免患者进行不必要的有创诊断,从而减轻患者的身
心伤害,更能有效地提高患者的生存率。
PET/CT
作为一种将
功能代谢活动显像和解剖结构显像两种先进影像技术进行有
机结合的新型影像设备,在提高孤立性肺结节的诊断准确性上
获得巨大成功,已成为常规定期肺部体检项目,但由此产生的
大量医学影像也给人工阅片带来了误诊或者漏诊的情况。
深度学习网络具有分析和学习能力,能发现大量数据中
不同类型数据的分布式特征并予以表达;通过对底层结构特
征的组合与学习形成更抽象的高级特征,用更为抽象的高级
特征代替原始特征来表达事物的属性。
基于此,本文提出一种基于极限学习机的双模态深度无
监督自编码网络框架,以对
PET/CT
图像中的肺结节进行学
习。在这种双模态的深度学习框架中,
PET/CT
图像首先以
图像对的形式输入到深度自编码框架中,然后以各自不同的
深度学习结构对图像进行有监督特征学习,最后以线性组合
的方式对学习到的不同模态的特征进行融合。
2
相关工作
肺结节的检测和诊断工作在国内外已有了一定的研究成
到稿日期:
2017-02-07
返修日期:
2017-05-16
本文受国家科学自然基金项曰:基于医学影像结构和功能混合特征的周围型肺癌计算机辅助
诊断方法
(61373100)
,北京航空航天大学虚拟现实技术与系统国家重点实验室开放基金
(BUAA-
VR-17KF-14
,
BUAA-
VR-17KF-1
日,山西省回
国留学人员科研资助项目
(2016-038)
资助。
赵鑫(1
993
一)
.女,硕士生,主要研究方向为医学图像处理、深度学习.
E-mail:
1009646066@qq.com;
强
彦(1
969
一)
.男,教授,博士生导师,
主要研究方向为图像处理、云计算技术、物联网技术;葛
磊(1
990
一)
,男,硕士生,主要研究方向为医学图像处理与模式识别。