解剖标志检测是至关重要的在术前规划经导管主动脉瓣植入术(泰薇),选择合适的设备规模和评估并发症的风险。检测是目前一个非常耗时的过程影响图像质量和运营商可变性。在这项工作中,我们提出一种新颖的自动检测方法相关的主动脉地标从多层螺旋ct图像使用深度学习技术。我们训练三个卷积神经网络(cnn)与344年经由电脑断层扫描(MDCT)收购泰薇检测五个解剖标志相关的规划:主动脉瓣的三个基础附件点传单和左、右冠状动脉口。检测策略这三个CNN模型用于分析一个多层螺旋ct图像和收益三个分割量作为输出。这些细分卷被平均到最后一个分割卷,最后得到了预测地标在后处理步骤。最后,我们构建了主动脉环平面,由三个预测铰链点定义,测量了距离这个平面预测冠状动脉口(即。冠状动脉高度)。方法在100例验证。自动具有里程碑意义的检测能够检测所有的地标和显示精度高之间的平均距离地面真理和预测低于interobserver变化(1.5毫米(1.1 - -2.1),2.0毫米(1.3 - -2.8)配对差异−0.5±1.3毫米
主动脉瓣狭窄是一个进步的心脏瓣膜病,减少主动脉传单和阀门的运动区域(
经由电脑断层(MDCT)成像是主动脉瓣环的黄金标准分级和泰薇设备尺寸选择
在这项工作中,我们提出一个自动化的方法来提取地标术前泰薇计划从多层螺旋ct使用深度学习技术。该方法的准确性和效率评估的100名患者。结果而interobserver变异性研究相同的100名患者。
这项回顾性研究使用来自多个中心的444名患者的数据收集。这个队列的平均年龄是81±7.3年。病人数据包括electrocardiographic-gated多层螺旋ct图像,获得支持泰薇手术的术前阶段。因此,所有多层螺旋ct图像增强对比度,包含一定程度的主动脉瓣狭窄。收缩末期阶段是首选的阶段选择阶段
群体特征和扫描参数。
| 年龄(年) | 81±7.3(56%的女性,44%的男性) |
|---|---|
| 独特的造影剂 | 11 (90%) |
| 许多独特的扫描仪 | 8 (10%) |
| 行(像素) | 512±27.8 |
| 坳(像素) | 512±27.8 |
| 深度(片) | 492±306 |
| 像素空间 |
0.5±0.1,0.5±0.1 |
| 切片厚度(毫米) | 0.8±0.3 |
| x光管电流(mA) | 677±357 |
| 千峰电压输出的x射线(kV)。 | 107±15 |
| 曝光时间(mAs) | 589±549 |
| 重建直径(毫米) | 271±77 |
一些参数是未知的或不完整的由于使用匿名化过程。值意味着±性病中概述。
一个训练有素的操作员手动检测五地标整个队列实现模仿创新套件18(模仿,鲁汶,比利时)。NCC, LCC和碾压混凝土之后发现指南(
的示意图表示主动脉根的解剖描述(左)。前三个图像识别三个基底附件点:LCC, NCC, RCC(从左到右)。底部三个图像(从左到右)AAP(三个基底附件点),LCO,有数(AAP的虚线和注释的冠状动脉高度)。
第二个训练有素的操作员慢慢五地标盲目地随机选取的100名患者使用上述相同的方法。第一和第二操作符的数据被用于interobserver变异性研究。相同的随机选取的100名患者中使用该方法的验证。一个训练有素的操作员分析这些100个病人的图像和报道,40%的图像包含运动,40%包含噪声的文物,5%含有金属文物由于医疗设备在病人的存在,和5%的低对比度的图像显示。
3 d地标的自动检测多层螺旋ct图像可以是一个艰巨的任务由于图像质量和尺寸变化。方法检测地标从医学图像已经被提出,尽管这些方法展示出了有前景的结果,他们的粗精度或图像形式并不适用于这个问题(
本研究致力于自动化手动里程碑式的检测和推导临床患者测量在后处理步骤。地面实况图像的预处理和手动检测到的地标是必要的为了准备数据对该方法的进一步措施。
体积的多层螺旋ct图像剪和重新取样,以获得均匀的数据集。每个多层螺旋ct图像重新取样的各向同性分辨率1.0毫米。原Hounsfield单位(胡)保存在重采样过程中,进行了三次样条插值。接下来,128年³体素体积,围绕地面真理地标,从重新取样量中提取。中心是必需的,因为扫描区域不同于病人病人,从主动脉根系比整个身体扫描(图
概述的多层螺旋ct图像和创建的面具。一个立方体的提取完整的多层螺旋ct图像插值(a)。1283体素体积围绕主动脉瓣(b)面具:一个新鲜感立方体包含五个独特价值领域围绕它们相关的具有里程碑意义的(c)。
面具是为了教模型生成在哪里找到目标的地标。128年新鲜感3多维数据集包含五个球的位置集中在多层螺旋ct图像相关联的手动检测里程碑。每个球体被分配有自己的类:LCC = 1, NCC = 2, RCC = 3, LCO 4,有数只= 5(图
DenseVNet架构(
三个模型(N3,它们和N7)被训练使用训练数据集和验证使用验证数据集。一个模型被训练为每个球体半径(3、5、7毫米)。验证数据集是由相同的100名患者被用于interobserver变异性研究和训练数据集由剩下的344名患者。
培训细节:每个模型训练860.000迭代(或者2500时代)亚当优化器(
所有hyperparameters都得到执行
高容量模型和data-augmentation策略处理偏差方差权衡特定的统计和机器学习。训练DenseVNet模型取得了较低的偏移误差,因为它可以识别相关特性和目标之间的关系。data-augmentation策略降低了高造成的误差方差小的训练数据集的大小。低偏差和低方差的误差,模型能够概括远远超出了训练数据集。
随机图像转换中使用了data-augmentation策略。随机扩展的值(百分比)和旋转(度)取样的均匀分布介于−3和3。随机转换减少依赖地面真理当定心1283体素多层螺旋ct在五卷地标在预处理步骤。
检测策略被用来结合三种训练模型的输出和使用五个预测地标来获得特定的解剖信息。
五个地标的检测一个病人在两个步骤进行:深度学习步骤和后处理步骤。在深度学习步骤,体积多层螺旋ct图像进行分析的三种模式和输出相结合和正常概率输出音量(图
检测策略的概述在3 d (a)和清晰的2 d (b)。分析了多层螺旋ct容积的三个网络返回5个细分卷/网络。三个网络的输出平均概率输出音量。
在后处理步骤,所有体素值高于0.5选择与分层集群和集群。聚类过程使用欧氏距离为准绳和阈值为1.1毫米。最大的集群中,所有与值高于0.9分被用来计算重心,最后预测点。这个过程进行的(图5地标
概述后处理步骤2 d中描述的清晰。从平均体积,点值高于0.5集群。最大的集群被选中,和从点值高于0.9,质心计算。这个重心是用作预测3 d点。
检测阶段后,主动脉环平面重建LCC的NCC,碾压混凝土和左和右冠状动脉口高度测量从这架飞机LCO,有数。
具有里程碑意义的检测评估的准确性通过测量欧几里得距离地面真值的预测标志。Shapiro-Wilk测试为正态分布进行测试,和所有的预测分布是正态分布。所有的变量被报告为中位数(下四分位数(LQ)−上四分位数(UQ))。手动和自动地标位置之间的协议是评估使用Wilcoxon签署的非参数测试(意义重大
NiftyNet [
该方法验证使用的100名患者也使用interobserver变异性研究。通过使用相同的病人进行验证和观察者变异评估,可以比较两个观察者的方法。预测的地标(模型)相比,地面实况地标(观察者1)使用欧氏距离。所有地标的中位数差异结合起来是1.5毫米,这是准确的,因为多层螺旋ct图像的分辨率是1毫米。中位数为所有地标之间的欧几里得距离手动检测地标从第一和第二观察者是2.0毫米。模型和观察者之间的距离低于一个观察者1和2之间的距离,和整体搭配的不同−0.5±1.3毫米预计从观察者因为模型训练数据(表
比较预测和地面之间的欧几里得距离真理目标点(
| 具有里程碑意义的 | 模型与地面真理( |
观察者1 vs观察者2 ( |
成对比较。 |
|
|---|---|---|---|---|
| 低成本航空 | 1.6 (1.2 - -2.3) | 2.4 (1.4 - -3.4) | 0.8±1.3 | < 0.001 |
| NCC | 1.5 (0.9 - -2.1) | 2.4 (1.4 - -3.2) | −0.9±1.3 | < 0.001 |
| 碾压混凝土 | 1.6 (1.3 - -2.2) | 2.4 (1.9 - -3.6) | −0.9±1.4 | < 0.001 |
| LCO | 1.3 (0.9 - -1.9) | 1.4 (1.0 - -2.2) | −0.1±1.0 | 0.2 |
| 有数 | 1.4 (0.9 - -2.0) | 1.4 (1.0 - -1.8) | 0.1±1.0 | 0.4 |
| 所有 | 1.5 (1.1 - -2.1) | 2.0 (1.3 - -2.8) | −0.5±1.3 | < 0.001 |
配对差异(diff。)毫米。
作为最后一步,左和右冠状动脉口高度从地面真值计算和预测点。有一个左冠状动脉口高度过高的模型(模型和观察者,分别为:平均身高16.3 vs 15.8毫米)和右冠状动脉口高度较小的高估(vs观察者模式,分别为:平均身高17.3 vs 17.2毫米)(表
对比预测(模型)和地面的真相(观察者1)冠状动脉口高度。
| 相关性( |
模型(毫米) | 观察者1(毫米) | 成对diff。(模型观察者−1)(毫米) |
|
|
|---|---|---|---|---|---|
| LCO高度 | 0.8 | 16.3 (15.2 - -17.7) | 15.8 (14.7 - -17.5) | 0.5±1.5 | < 0.001 |
| 有数的高度 | 0.8 | 17.3 (15.5 - -19.3) | 17.2 (15.1 - -20.1) | −0.2±2.0 | 0.4 |
预测左和右冠状动脉口高度与地面真理(包括相关
之间的相关性预测冠状动脉口高度和地面真理从观察者1。
Bland-Altman情节对于左、右冠状动脉口高度。左冠状动脉口高度提出平均成对差异0.54毫米的观察者,而右冠状动脉口高度导致平均成对差异(图-0.16毫米
Bland-Altman分析左和右冠状动脉口高度。
验证后的预测地标和冠状动脉的高度,它仍然是报告的处理时间手动和自动的方法。两个观察者报告分析5到10分钟的时间每个病人检测五个地标(时间推导出冠状动脉高度被忽略)。从体积多层螺旋ct图像自动处理时间五个预测地标和冠状动脉高度低于1秒。预测输出的一个例子是描绘在图
的一个例子从一个看不见的病人发现地标。从左到右:LCC, NCC,碾压混凝土,LCO,有数。从上到下:一片多层螺旋ct图像预测点的位置(注释),一片平均最终输出音量的预测点的位置(注释),和一个最终的输出音量的叠加多层螺旋ct图像预测点的位置(概率0.0(蓝色)到1.0(红色))。
在这项工作中,一个自动化的方法提出了提取地标术前泰薇计划使用深度学习从多层螺旋ct技术。验证进行100例,结果表明,五个地标可以高效、准确地检测到通过三个模型的结果和一个后处理步骤。手动和自动识别地标之间的区别通常比两个运营商之间观察到的差异较小。这些差异表明,提出的方法检测这些地标在可接受的精度。此外,它也表明了方法允许确定临床相关的自动测量,如冠状动脉高度。总分析时间从多层螺旋ct图像数据预测地标小于5秒,这清楚地显示了该方法的潜在加速目前的术前计划工作流。
文献提供的(半)自动检测策略地标在泰薇字段(
我们的方法克服了几乎所有的局限性如上所述。方法是全自动的钙负载不敏感。虽然我们多中心患者群体相对较小,患者的数量用于训练和验证仍高于文献报道。我们训练模型和344例确认它们与100名患者,我们证明了该方法的鲁棒性与多中心患者队列显示良好的协议与观察者。
深入学习方法从医学图像具有里程碑意义的检测可以在文献中找到。在郑et al。
这项工作的潜在影响可能体现在不同的领域。方法比最先进的快,这可能影响减少操作员在快速增长的市场分析和错误。泰薇总成本降低的嵌入方法可以获得在软件允许手动修正(例如,纠正异常值)。这个嵌入也可以产生持续的学习平台的坐标一个新病人,由专家验证,可以添加到训练数据集,从而提高未来的检测。冠状动脉口高度来自预测的地标,这是至关重要的测量在泰薇的术前规划过程中(
虽然方法已经被证明是可靠的,有一些限制有关电流的方法。的最大例外预测LCC相比第一个观察者是4.9毫米,这是可以接受的5.8毫米的interobserver差异相比,相同的病人。两个观察者之间的区别可能表明一个错误的检测观察。的最大例外预测碾压混凝土是11.5毫米,interobserver测量9.4毫米的相同的病人。调查显示,病人的图像包含运动,从而使具有里程碑意义的检测困难的观察者和算法。预测测量位于观察者测量两个接近,这可能表明,模型具有学习能力的具有里程碑意义的一般位置,因此矛盾地面真理。预测的NCC, LCO,有数地标了最大的离群值小于5毫米。的最大异常值预测冠状动脉口高度小于5毫米。虽然预测能力已被证明,离群值表明,方法不是自动防故障装置。最后的预测结果需要由一个有经验的操作人员确认,这可能持续学习方法中受益,如前一节所述。 Another limitation of this study is that the method is not applied to patients with anomalies of the coronary arteries [
该方法从多层螺旋ct显示主动脉里程碑式的检测数据有效,准确,重现性好。interobserver变异性的比较表明策略的可靠性和嵌入这个工具基于深度学习在术前规划程序可能产生影响的泰薇环境通过减少时间和成本,提高准确性。
所使用的统计数据来支持本研究的发现可以从相应的作者。匿名的图像数据用于支持本研究的发现是由FEops喷嘴速度下许可,所以不能免费提供。
以下信息披露已报告的作者:彼得·德·Jaegere是美敦力公司的顾问。约翰离开是美敦力公司的顾问。Ole德支持者的顾问阿伯特。马修·德·Beule和彼得这部是FEops的股东。弗朗西斯科·Iannaccone FEops的员工。乔妮Dambre和会长Patricio Astudillo没有利益冲突声明。
作者要感谢这两个运营商的所有工作和乔纳斯德坟墓在他的指导下和输入深度学习的优化模型。特别感谢将蒂姆•Dezutter Nieves Gata桑切斯,Giorgia Rocatello输入在医学图像和医学图像的预处理。作者还感谢NiftyNet开发团队的工作。所有计算工作进行Nvidia GPU的Nvidia GPU补助计划。欧盟委员会支持这项工作在地平线2020框架(项目没有通过MSCA-ITN-ETN欧洲培训网络。642458)。