机器学习在放射学中的应用及其未来影响

机器学习在放射学中的应用及其未来影响Abstract：机器学习技术的最新进展和未来前景在医学成像中提供了有前途的应用。机器学习具有改善放射工作流中各个步骤效果的潜力，包括订单调度和分诊、临床决策支持系统、结果及其解释、后处理和剂量估算、检查质量控制、放射学报告。在本文中，作者回顾了机器学习和人工智能技术在诊断放射学中的应用实例。此外，针对这些技术在放射学中的未来影响和自然延伸进行了讨论。1、机器学习的最新进展为包括医学影像学在内的工业和应用提供了希望。在数据科学的创新中，机器学习是一类使计算机能够像人类一样学习和提取或分类模式的技术和研究，机器可以进一步分析更多的数据集，并从人类可能无法做到的数据中提取特征。机器学习最近的研究和发展方向是，在现在和未来将其用于诊断成像。在这篇综述中，首先介绍机器学习的“广义”和“狭义”定义，然后介绍如何将机器学习应用于成像解释并使其得到发展。第二，我们将提供机器学习在诊断放射学中的应用实例。第三，我们将讨论机器学习技术在临床应用中的主要障碍和挑战。最后，我们将讨论机器学习在放射学和除了放射学以外的其他医学领域中未来的发展方向。2、（1）机器学习的定义：机器学习是一种使电脑具备学习能力却又不依赖于直接的编码规则的数据科学方法。机器学习可以创建能够进行学习和预测的算法。与基于规则的算法相比，机器学习利用了对大数据集和新数据集的增加的曝光，并具有根据经验进行改进和学习的能力。（2）机器学习策略：根据任务的不同，机器学习通常分为三大类：监督、无监督和强化学习。3、在监督学习过程中，需要将数据标签提供给训练集（在训练过程中有监督），预期输出通常先由使用者提供数据标签，作为算法的真实答案（类似金标准）。算法的目标通常是使机器学习将输入映射到输出的一般规则（即让机器学会传递函数）。算法的目标通常是学习将输入映射到输出的一般规则。在机器学习中，地面真理指的是假定为真的数据。在无监督学习中，不给学习算法提供数据标签。机器学习任务的目标是在数据中找到隐藏的结构，并将数据分离成簇或组。在强化学习中，计算机程序在动态环境中执行特定任务，与此同时，计算机接受正和负强化（如与对手玩游戏）的反馈。强化学习是指，在没有明确的规则指导下，机器通过自身与环境的交互结果进行自我学习和提升。监督和unsupervisedexamplesof学习技术是提供在图2。机器学习范式可以使用合成的监督和unsupervised方法与增强反馈环。有监督和无监督学习技术的实例如图2所示。一种机器学习模式也可以同时使用有监督反馈和无监督方法的与增强反馈回路的组合。（/by4_Luminous/article/details/53341334）人工神经网络4、人工神经网络是机器学习中的重要应用，是一种统计和数学的方法。该网络是在生物神经系统处理大量信息的方式的基础上发展起来法倾向于过度训练数据，意味着能够找到适合训练数据集的的模型，但是通用性不好。因此，通过执行训练和验证的连续迭代来优化算法并避免过拟合。在测试集中，在最初机器学习算法建模完成之后，最终模型可以应用于独立的测试数据集，以评估算法的性能、准确性和通用性。用于深度神经网络机器学习的开放源代码工具11、在掌握了适当的基础知识后，可以采用相对简单的低成本软件来进行机器学习。现在又许多可以进行深度学习的开源工具。机器学习在独立软件开发人员、数据科学家和企业实体中变得流行，如谷歌将机器学习技术民主化。为什么是现在？计算能力和数据的收敛性12、基于大规模并行并行处理芯片架构的主要图形处理单元，与并行计算方法（历史上可用于图形渲染和游戏）相结合，使人工神经网络的性能大幅度提高，使真正的深度学习成为可能。此外，企业积累了包括医学图像在内的大量数字数据，数字化已经发展几十年。而且，还有许多可用于机器学习的开源的算法，如CAFE、TRAP和TUNSOFLUM（见表1）。而且有大量的训练数据可以使用，例如generalizedImageNet。为什么机器学习很强大13、从根本上说，机器学习是强大的，因为它不是“易碎的”。一种基于规则的方法暴露于现实世界时可能会被打破，因为真实世界经常会出现一些程序员使用的规则所定义算法中未包含的示例。利用机器学习，系统可以基于它的训练集简单地使用统计来逼近响应最多的结果，这意味着它是灵活的。此外，机器学习是一种强大的工具，因为它是通用的，用于自驾车汽车的方法和用于医学影像判读是相同的。机器学习的通用性使其能够在包括医学在内的不同领域快速扩展。机器学习与人工智能13、与机器学习相比，人工智能（或机器智能）可以通过计算机执行更广泛的人工智能，如问题解决，规划，知识表示，语言处理，或“学习”。因此，机器学习是人工智能的一种。例如，基于规则的算法，如计算机辅助诊断就是一种人工智能，它在乳腺摄影中已经使用了几年，但其并不是机器学习的一种类型。然而，计算机辅助诊断包含很广泛，可以将机器学习也纳入其中。根据定义来看，机器学习算法是通过经验而非规则来自动改善。机器学习在越来越多的例子中得到应用，事实上，目前有许多人工智能的应用都用到了机器学习。机器学习在诊断影像学中的应用14、虽然大多数文献都集中研究机器学习在检测放射学结果中的作用，但机器学习也有可能改善放射学工作流中的不同步骤（表2），如下章节所述。病人登记和筛选15、机器学习技术促进智能调度可以优化患者的排班并降低患者的由于不参加医疗和放射学预约而错过护理可能性。EfrenFlores博士在马萨诸塞州总医院（波士顿，Mulk）领导的一个项目是使用机器学习和预测分析来识别那些因为未能如约参加放射治疗的高危患者。该小组正在开发个性化的解决方案，以减少错过护理的机会。16、此外，有研究提出将机器学习应用于病人安全检查（17）或加强安全报告（18），这在放射学实践中有潜在的应用价值（例如，MRI安全检查或对比剂的管理）。图像获取17、机器学习可以使图像系统智能化。基于机器学习的数据处理方法具有可以减少成像时间的潜力。还有，智能成像系统可以减少不必须的图像、改善位置、同时帮助优化结果的特征。例如，一个智能MR成像系统可以识别病变，并建议修改检查的序列，从而优化结果中的病变特征。结果的自动检测18、机器学习可以很快地在放射医学影像领域的结果自动检测中产生反响。例如，有研究证实了可以将机器学习应用于类似肺结节和甲状腺结节等偶然的结果提取。进一步的研究证明，机器学习可被用于检测一些关键性的结果，如气胸（图6）、骨折、器官裂伤和中风。19、机器学习算法被用于计算机辅助检测和计算机辅助诊断已经有几十年。在乳腺X线摄影中，计算机辅助诊断已经显示出其有效性。但矛盾的是，计算机辅助诊断可能会被一些乳腺癌患者忽视，限制其临床应效益。20、乳腺癌筛查是最有望将机器学习纳入放射学实践的第一个领域。多项研究结果已经表明其诊断价值，机器学习技术在不同乳房成像中得到应用，包括：乳腺X线摄影、美国、MRI、断层合成。21、人们对于机器学习在肺结节的检测、分类和管理中的作用越来越感兴趣。例如，肺结节分类的深度学习系统是在经验丰富的人类观察者之间的差异中进行的。机器学习算法也有助于减少检测肺结节的假阳性结果（20）。最近的Kakle数据科学碗看到将近10000名参加者争夺100万美元的奖金；竞争者通过识别可能在1年内被诊断为肺癌的候选者来获得高水平的表现(/c/data-science-bowl-2017)。一项后续挑战已经被提出，目的是将这些模型引入经验丰富的人类观察者的临床观察差异(/totheclinic)。22、骨龄分析和基于医学成像的解剖年龄的自动确定对于儿科放射学和内分泌学具有相当大的实用价值。Synho博士和他的同事们创建了一种算法，根据输入的儿科患者的手部照片准确地描述骨龄。23、机器学习的其他潜在应用场景包括：线检测（43）、MRI中的前列腺癌检测（44～46）、冠状动脉钙化分数的测定（47）、或脑损伤的检测和分割。检查结果的自动解释24、对医学成像（正常或异常）检测结果的解释需要高水平的专家知识，经验以及基于每一种临床情况下的临床判断。一个简单的例子是腹腔内游离空气，对于术后患者这可能是一个正常的发现，但对于一个最近没有手术的病人则是关键的发现。对于机器来说，作为独立的图像解释器，需要广泛获取数据导出的知识。基于解释的系统已经得到开发，用于发现危及生命的异常的图像（如颅内出血），虽然该系统是用于优先研究一个工作清单，而不是通过最后的阅读进行研究。25、一些研究结果表明，机器学习可以改善对检查结果的解释，从而辅助放射科医生工作。基于机器学习的乳腺MR图像特征提取可以改善对检查结果的解释，进而改善对乳腺癌的诊断。基于肺结节的影像学特征（如轮廓、纹理、边缘等语义特征）的机器学习方法，可以提高肺癌结节的预测和诊断的准确性。自动临床决策支持和检查协议26、机器学习技术可以进一步增强放射学决策支持工具。研究表明，即使在复杂和不确定的环境中，人工智能仿真框架也能做出近似最优的人类决策。智能临床决策支持系统可以提高护理质量和成像效率，并减少检查草案中的不良事件或错误的可能性。后处理：图像分割、登记和量化27、随着更多的成像数据变得可用，在机器学习帮助下，医学成像已经在图像的后处理方面取得了相当大的进展，如图像配准、分割和量化。智能医学成像范式是数据驱动的，并倾向于从医学图像中学习有用的临床信息。从医学图像提取相关临床数据需要精确的图像配准和分割。一些研究已经将机器学习的方法应用于图像分割，例如在乳房X光摄影（56）、身体器官（35）、或关节和肌肉骨骼组织的MR图像中对乳房密度进行分割。28、机器学习也可以用于模态间的图像合成，例如，可以使用从相应的MR图像中生成的对抗网络来估计CT图像。对抗生成网络是使用两个相互竞争的神经网络模:产生噪声数据的噪声发生器模型和区分真实数据和噪声的鉴别器模型。在训练过程中，鉴别器模型学习更好地区分噪声数据与真实数据。与其他神经网络相比，对抗生成网络在图像生成任务中表现出优异的性能。29、图像配准通常用于多模态覆盖，如PET/CT配准和图像的比较或减影。深度学习可以在耗时的手动轮廓和图像配准中发挥相当大的作用，并且可能遭受内部或内部差异的影响。有研究无监督深度学习在脑MR图像变形配准中的应用。30、机器学习可用于横截面成像中三维结构的定量评估。Wang等人使用基于美国有线电视新闻网的算法精确地分割CT图像上的脂肪组织体积。脑MRI解剖分割也已通过使用深度学习算法来划定和定量评估脑结构和病变。图像定量分析31、受过训练的观察者（例如，有经验的放射科医师）被认为是基于任务的医学图像质量评价的参考标准。然而，评价大量的图片需要花费医生很长的一段时间。为了解决这个问题，机器学习（也被称为模型的数值观察员观察员）已发展成为一种用于图像的质量评估人类观察者的替代品。模型观测器可应用于低剂量CT迭代重建的参数优化和图像质量评价。32、研究者已经尝试使用深度学习进行自动图像质量的评价。比如，肝脏MRI图像的质量自动评估已经得到实现。33、最近的研究表明，神经网络算法可应用于从低剂量的CT图像降噪。训练对抗网络可以改善卷积神经网络的产生与常规剂量CT图像质量相似的图像的能力。自动放射剂量估计34、机器学习可用于CT数据集的器官特异性分类和器官辐射剂量估算。最近的一项研究显示，采用卷积神经网络分类器对CT数据中器官和特定器官的辐射剂量进行分类，准确率超过高于96%。利用神经网络进行自动辐射剂量估算在放射肿瘤学领域已经得到了更多的应用，它在诊断放射学中也具有类似的应用潜力。例如，一个用于MRI的前列腺癌放射治疗计划中机器学习的框架显示，风险器官受到辐射的剂量减少，同时癌变组织受到辐射剂量的增加。放射学报告与分析35、机器学习技术在自然语言处理中得到了广泛的应用。利用自然语言处理从自由文本放射学报告中提取数据有助于质量保证和性能监测，以及临床决策支持的大规模测试。自然语言处理器可以从叙述性的放射学报告中提取影像学表现和器官测量值，并对提取的测量值进行分类。这可以为处理医疗数据的其他机器学习应用程序提供放射输入数据。机器学习技术还可用于从放射学报告中提取术语，以提高质量和分析。机器学习和自然语言处理算法可以帮助跟踪放射科医师的建议，并减少后续建议通信中断的可能性。自动数据集成和分析36、在电子病历中，存在来自各种数据源的异构数据池（称为多视图数据）。不同来源的数据吞吐量很高，包括病史和进展记录，实验室结果，病理报告和图像，放射学报告和图像，基因组学以及医疗记录系统的安全报告。这些数据的可用性为数据挖掘提供了前所未有的机会，但也带来了异构数据源集成的挑战（例如，成像数据与文本数据）。可以将各种机器学习技术（例如核方法，矩阵分解模型和基于网络的融合方法）应用于数据集成和分析。主要的障碍和挑战37、收集高质量的地面实况数据、开发可推广和诊断准确的技术以及工作流的集成是在放射学实践中采用机器学习所面临的主要挑战。机器学习性能：通常但不总是需要大数据集38、Google的PeterNorvig（anAmericancomputerscientist）证明，大量数据可以克服机器学习算法的不足。窄范围机器学习算法可能不需要大量训练数据，但可能需要高质量的地面实况训练数据。在医学成像分析中，与其他类型的机器学习一样，所需的数据量在很大程度上取决于要执行的任务。例如，分段任务可能只需要一小组数据。另一方面，性能分类任务（例如，将肝脏病变分类为恶性与良性）可能需要更多标签示例，这也可能在很大程度上取决于要区分的分类器的数量。39、源数据中的混淆元素可能导致机器学习算法的失败。由于神经网络缺乏大量特定特征，因此罕见的发现或特征也可能是其弱点，因此容易出现不准确的情况。40、方差和偏差是可能导致机器学习算法性能差的问题。偏差是算法中的错误假设，这可能导致错过关联（欠拟合）。高方差可以使算法过分地学习数据并开始拟合随机噪声（过度拟合）。最优模型不仅准确地表示训练数据，而且可以推广到看不见的数据。过度拟合的算法对训练数据的微小变化反应过度。因此，该算法在训练数据上表现良好，而在新数据上表现不佳。过度拟合是机器学习中的主要挑战，特别是当模型过于复杂时。地面实况注释41、广泛的地面真理注释往往需要对机器学习算法进行适当的训练。多个技术公司和学术研究项目依靠训练有素的放射科医师在放射学报告和图像上的注释，这被认为是真理（金标准）。需要大量的劳动力成本、时间和资源来合理的实施这些项目。此外，验证过程必须是高度鲁棒性的，否则，该算法可能会被过度拟合到特定的数据子子集。定义标准42、合理地开发人工智能工具需要定义标准化用例和注释工具。这些使用案例需要与临床实践、医学成像中人工智能方面的法律、法规以及道德问题保持一致。美国放射学数据科学研究所的临床专家组与其他医学专业学会一起，正在定义这些标准化用例。(/Advocacy/Informatics/Data-Science-Institute).43、此外，标准方法可以使图像注释在不同的信息技术系统以及数据通信和交换的软件应用程序之间得到交互操作。美国国家癌症研究所的注释和图像标记模型为图像和图像特征的注释提供了一种可能的标准方法。监管和工作流程整合44、基于机器学习的算法目前尚未很好地集成到图像存档和通信系统工作站中。许多系统包含并需要单独的工作站或网络节点来发送图像以便进行分析。在放射信息学价值链的生态系统中，需要做更多的工作来更好地结合新颖的机器学习技术。可能需要为机器学习算法与现有系统的互操作性设置标准。供应商和研究人员都必须致力于创建平台，以便不断学习和升级机器学习算法。需要通过接触更多数据，根据模型中的可能变化不断更新机器学习算法。45、将机器学习整合到临床环境中的重要一步是获得美国食品和药物管理局（FDA）的批准。在临床使用机器学习应用程序之前，应向FDA提交有关算法开发和临床验证的特定信息。临床验证研究应该与人类专家达到充分的一致性。FDA在管理该软件方面面临挑战，其目前正在为机器学习应用开发适当的监管途径。例如，一种机器学习算法被设计用于找到人眼无法观察的数据中的关联，人类专家验证对于该算法具有挑战性，。另一个例子是继续在用户手中学习并且随着时间的推移表现更好的算法。这具有挑战性，因为FDA需要保证算法的性能将持续改善并且不会下降。FDA可能需要针对像“黑匣子”这样只提供临床建议或软件的应用采用不同的监管方法，这是医疗保健专业人员能够独立审查建议的基础。解读人工智能的黑匣子46、就其本质而言，机器学习开发了无法用简单的术语来解释的复杂高维功能。在识别潜在原因和逻辑很重要的领域（例如医疗保健）中被接受使得机器学习的可解释性成为主要挑战之一。目前，当学习无人监督时，解构机器决策因素的可见性有限。国防高级研究计划局正在进行诸如解释人工智能计划之类的工作，以便可以更好地理解基于人工智能和机器学习的算法是如何得出其结论。(/program/explainable-artificial-intelligence)。47、视觉显著性是一种可以感知的质量，这使一些物品能够从邻居中脱颖而出并立即引起我们的注意。视觉显著性图可以突出图像中的区域，这些区域已经吸引了人类观察者的注意力以执行分类任务。显著性图可以为机器学习模型提供“可解释性”并提高检测结果的准确性。放射科医生的工作视角和法医学问题48、需要监控用于临床诊断和决策的机器学习系统的性能。医生将获得医疗诊断和治疗的所有权交给患者。在出现医疗错误的情况下，机器学习系统的制造商和开发人员可能不负责任，因为根据定义，计算机正在以开发人员不知道的方式基于数据集学习和重新学习。机器学习软件提供的临床建议可能需要由专业的医疗保健人员进行审查，他们可能会也可能不会批准该软件提供的建议。更好的是，应该向医疗保健专业人员提供这些建议的基础，并进行审查。在可预见的未来，机器学习不会取代放射科医师。相反，这些技术有望帮助放射科医师，增强放射工作流程，并提高放射科医师的诊断准确性。机器学习系统可以帮助识别呢些通常可以躲避人眼的模式和关联。目前，许多人工智能系统正在开发相当明显的任务，这些任务对人类来说几乎没有挑战。如果集中考虑放射科医生所面临的挑战，人工智能系统可以增加更多价值。医学放射学与医学放射学的未来发展方向49、大量电子病历数据的可用性允许创建跨学科数据池。机器学习从这些大数据中提取知识，并产生可用于个体结果预测分析和临床决策的输出。这可以为个性化医学（或精准医学）开辟道路，其中基因、环境和每个人生活方式因素等个体差异都被用来考虑疾病预防，治疗和预后。跨学科合作与精准医学50、机器学习模型在过去几年中得到迅速发展。

谷歌最近展示了一种多模式机器学习的方法，该方法为未来相关系统的开发提供了一个模板，该模板能够更准确，更广泛地适用于包括医学在内的不同学科。诊断成像可能是应用机器学习算法的第一个医学学科之一，但其他领域，如