超声心动图检测射血分数的人工智能方法与系统装置与流程

1.本发明涉及人工智能、移动医疗领域，尤其涉及一种超声心动图检测射血分数的人工智能方法与系统装置。


背景技术：

2.心脏维持全身性正常的重要器官，心功能不健全表现为呼吸困难、疲乏、运动不耐受、死亡风险增加，心脏功能受损被描述为心肌病或心衰，是目前住院的主要原因以及日益严重的全球性健康问题。准确评估心脏功能对于心血管基本的诊断至关重要，特别是对于心衰患者的管理显得更为重要。
3.有各种方法用于量化心脏功能和诊断心脏功能障碍，射血分数(ejection fraction，ef)检测是最方便有效的评判心功能重要指标之一，也是判断心力衰竭类型的重要指标。
4.临床医生通常使用射血分数的值来评估心脏功能，射血分数是心脏收缩时泵出的左心腔(左室)中血液体积的百分比，正常值为50％～70％。射血分数的计算公式为：ef＝(edv-es)*100％/edv，式中ef为射血分数；edv为心室舒张末容积；es为心室收缩末容积。从式中可以看出，射血分数是一个容积比率指标，从容积的角度反映的心室的射血功能。如果射血分数小于50％，则考虑存在心肌收缩力减低，心脏收缩功能下降。
5.在所有医学影像中，超声医学影像因具有无创性、实时性、简易性、便捷性等特点，成为临床诊断心脏衰竭等疾病的重要手段。有经验的医生，可以“观察”心脏跳动的超声视频环，并精确估计射血分数。在现有技术中，评估心脏功能用有限的心脏周期采样，一种常用的射血分数检测方法是二维-辛普森双平面法：在标准四腔或二腔超声心动图的腔内边缘勾勒出左心室(lv)面积，通过数值计算方法推导出心室舒张末容积edv和心室收缩末容积es的值，再通过公式计算出射血分数ef。显然，ef的检测都要依赖于医生的经验和手法，观察者之间的变异性也会使得重复性较低，而且人工检测和计算射血分数所耗费的时间成本较高，还常常导致检测结果不准确。人工智能深度学习在花费较少的人力成本下，可以得到更加精准的结果，甚至还可以发现那些专家发现不了的特征。


技术实现要素：

6.针对现有技术中存在的问题，本发明提供一种超声心动图检测射血分数的人工智能方法与系统装置，首先通过超声设备连续采集至少包含一个完整心动周期的连续超声心动图视频数据；然后将所采集的超声心动图视频数据上载给部署在云端的计算机平台，所述计算机平台运行超声心动图射血分数人工智能检测模块完成射血分数检测。
7.根据本发明的一个方面，本发明提供的超声心动图检测射血分数的人工智能系统装置包括：便携式超声心动图检测仪、平板电脑或手机、计算机平台：所述便携式超声心动图检测仪，用于采集超声心动图；所述平板电脑或手机，用于运行应用程序，操作、控制和存储所述超声心动图检测仪采集、存储和传输所述超声心动图数据；所述计算机平台，包括一
个或多个计算机，其中每个计算机具有储存器和至少一个处理器，用于运行超声心动图射血分数人工智能检测模块，检测射血分数。
8.优选地，所述便携式超声心动图检测仪的探头在患者检测心动图的适当位置扫描，采集并在所述平板电脑或手机上存储所述超声心动图数据。
9.进一步，所述超声心动图数据通过所述平板电脑或手机的数据传输模块送给部署在云端的计算机平台，由其完成所述超声心动图射血分数人工智能检测，并将检测结果返回，显示在所述平板电脑或手机上。
10.根据本发明的另一方面，所述超声心动图射血分数人工智能检测方法，包括以下步骤：步骤s1、构建所述超声心动图射血分数人工智能检测模块，一个基于深度时空卷积模型；步骤s2、根据预先获取的超声心动图视频数据训练样本对所述超声心动图射血分数人工智能检测模块进行训练；步骤s3、将训练好的所述超声心动图射血分数人工智能检测模块，部署到所述计算机平台上；步骤s4、将待检测射血分数的超声心动图短视频送给部署好的所述超声心动图射血分数人工智能检测模块，检测射血分数；步骤s５、检测结果返回所述平板电脑或手机显示。
11.优选地，将预采集和标注的所述超声心动图视频数据按照预设的比例划分为训练数据集、验证数据集和测试数据集：所述训练数据集用于对预先建立的所述超声心动图射血分数人工智能检测模块进行训练；所述验证数据集用于对训练得到的所述超声心动图射血分数人工智能检测模块进行参数调优；所述测试数据集，用于对调优后的所述超声心动图射血分数人工智能检测模块进行测试。
12.根据本发明的再一方面，本发明提供的超声心动图射血分数人工智能检测方法，包括如下步骤：步骤s21、打开所述便携式超声心动图检测仪；步骤s22、打开所述平板电脑或手机上的所述应用程序，操作所述超声心动图检测仪在患者心动图采集位置采集并存储所述超声心动图；步骤s23、将采集和存储在所述平板电脑或手机上的所述超声心动图视频数据上载给部署在云端的所述计算机平台；步骤s24、所述计算机平台运行所述超声心动图射血分数人工智能检测模块，完成射血分数检测；步骤s25、所述超声心动图射血分数人工智能检测模块完成射血分数检测后，将检测结果返回所述平板电脑或手机显示。
13.根据本发明的再一方面，本发明所述超声心动图射血分数人工智能检测模块是一个深度时空卷积神经网络模型，包括：超声心动图视频输入、深度时空卷积网络、输出网络：所述超声心动图视频输入，用于接收和处理所述超声心动图视频数据；所述深度时空卷积网络，用于检测所述超声心动图短视频的射血分数；所述输出网络，用于以射血分数标准输出结果格式，输出射血分数检测结果。
14.进一步，所述深度时空卷积网络包括：输入层、时空卷积主网络模块、时空池化层、全连接层和softmax分类器：所述输入层，用于处理所收到的超声心动图视频数据；所述时空卷积主网络模块，用于提取所述超声心动图视频的时空特征参数；所述时空池化层，用于减少所述时空特征参数，从而减少最后连接层中的特征参数数量；所述全连接层，由多层全连接网络组成，用于将通过所述时空卷积主网络模块提取的时空特征重新通过权值构建完整的特征值矩阵；所述softmax分类器，用于按照要求分类数，计算分类射血分数的概率。
15.进一步，所述时空卷积主网络模块，由多个输出与输入连接的时空卷积模块组成，并构建成残差网络，即将输入所述时空卷积模块的输入，同时连接到下一个时空卷积模块的输入，以此类推。
16.优选地，所述时空卷积模块由多层时空卷积层构成。
17.进一步，所述时空卷积层包括一层空间卷积层紧接着一层时间卷积层，所述空间卷积层是二维卷积层，所述时间卷积层是一维卷积层，两者构成的所述时空卷积层是三维卷积层。
18.优选地，可以在所述空间卷积层后增加一个池化层，减少空间卷积输出的特征参数数量。
19.有益效果：依上述实施的一种超声心动图检测射血分数的人工智能方法与系统装置，提供了一个完整的射血分数检测系统装置包括：超声心动图检测设备、平板电脑或手机操作管理系统和人工智能射血分数检测系统，可以方便快捷地完成用户或患者的射血分数检测。通过采用时空卷积网络模型，对超声左心室边界的识别和其随时间的变化相结合来识别射血分数，在射血分数和心肌病评估的准确性超越了人类专家的表现，从而使得一般医护人员可以直接对病人的心脏功能进行判断，对于心衰筛查分类和心衰患者预后具有十分重要的临床意义。此外，快速识别射血分数的细微变化，为实时精确诊断心血管疾病提供了帮助。
附图说明
20.图1是本发明实施例提供的超声心动图检测射血分数系统装置原理图；图2是本发明实施例提供的超声心动图射血分数人工智能检测方法；图3是本发明实施例提供的超声心动图射血分数人工智能检测模块训练方法；图4是本发明实施例提供的超声心动图射血分数人工智能检测流程；图5是本发明实施例提供的所述时空卷积主网络模块结构图；图6是本发明实施例提供的所述深度时空卷积网络结构图；图7是本发明实施例提供的所述时空卷积主网络模块结构图。
具体实施方式
21.现在结合附图和优选实施例对本发明作进一步详细的说明。这些附图均为简化的示意图，仅以示意方式说明本发明的基本原理、基本结构和基本功能，因此其仅显示与本发
明有关的构成。
22.本领域的一般技术人员可能会意识到本发明的一些变体以及等同替代，但这些变体和等同替代不应理解为超出了本发明的保护范围。
23.图1是本发明实施例提供的超声心动图检测射血分数系统装置原理图。如图1所示，便携式超声心动图检测仪1、平板电脑或手机2、计算机平台３：所述1，用于采集超声心动图；所述2，用于运行应用程序，操作、控制和存储所述超声心动图检测仪采集、存储和传输所述超声心动图数据；所述3，用于运行超声心动图射血分数人工智能检测模块，完成人工智能射血分数检测。打开1和2的所述应用程序，1通过wifi自动与2连接后，用1在患者心动图采集部位扫描，采集并存储超声心动图到2；点击2上的数据上传键，2将1采集到的超声心动图视频数据上载给所述3，3在收到数据后，进行人工智能射血分数检测，并将检测结果送给2显示。
24.图2是本发明实施例提供的超声心动图射血分数人工智能检测方法。图2所示的检测方法包括如下步骤：s21、构建所述超声心动图射血分数人工智能检测模块，一个基于深度时空卷积模型；s22、根据预先获取的超声心动图视频数据训练样本对所述超声心动图射血分数人工智能检测模块进行训练；s23、在所述计算机平台３上部署训练好的所述超声心动图射血分数人工智能检测模块；s24、将待检测射血分数的超声心动图短视频上载给部署好的所述超声心动图射血分数人工智能检测模块的计算机平台，完成射血分数检测；s25、将检测结果返回所述平板电脑或手机显示。
25.图3是本发明实施例提供的超声心动图射血分数人工智能检测模块训练方法。如图3所示的训练方法包括如下步骤：s31、将预采集和标注的所述超声心动图视频数据按照预设的比例划分为训练数据集、验证数据集和测试数据集,本发明实施例，划分比例为70：20：10；s32、用所述训练数据集训练所述超声心动图射血分数人工智能检测模块；s33、用所述验证数据集对所述超声心动图射血分数人工智能检测模块进行参数调优；s34、用所述测试数据集，对调优后的所述超声心动图射血分数人工智能检测模块进行测试；s35、将调优及测试好的所述超声心动图射血分数人工智能检测模块部署到计算机平台上。
26.本发明实施例，所述超声心动图视频数据为四腔超声心动图短视频数据，因此，训练、优化好的超声心动图射血分数人工智能检测模块可用来检测基于四腔超声心动图视频数据的血分数。此外，在所述超声心动图视频数据中，如果包括更多的，包括左心室在内的其它超声心动图，其所训练的超声心动图射血分数人工智能检测模块可以用于检测任意扫描位置取到的，包括左心室图的短视频数据的射血分数检测。
27.图4是本发明实施例提供的超声心动图射血分数人工智能检测流程。如图4所示的
检测流程包括如下步骤：s41、打开所述便携式超声心动图检测仪；s42、打开所述平板电脑或手机所述应用程序；s43，操作所述超声心动图检测仪在患者适当位置扫描，采集并存储超声心动图；s44、将采集和存储在所述平板电脑或手机上的所述超声心动图视频数据上载到计算机平台，所述计算机平台部署在云端，并运行所述超声心动图射血分数人工智能检测模块，完成射血分数检测；s45、所述超声心动图射血分数人工智能检测模块完成射血分数检测后，将检测结果返回所述平板电脑或手机显示。
28.本发明实施例，所述患者适当位置取患者心尖搏动处，扫描采集四腔超声心动图，人工智能通过其短视频分析得出射血分数。
29.图5是本发明实施例提供的所述时空卷积主网络模块结构图。如图5所示，所述时空卷积主网络模块，由多个输出与输入连接的时空卷积模块组成511、512、
……
组成，将所述时空卷积模块的输入，同时连接到下一个时空卷积模块的输入，在本发明实施例，511的输入直接连接到512的输入端，以此类推，构建成残差网络。所述511、512
……
、51n采用相同结构的时空卷积模块，包括：一层空间卷积层紧接着一层时间卷积层，所述空间卷积层是二维卷积层，所述时间卷积层是一维卷积层，两者构成的所述时空卷积层是三维卷积层，本发明实施例，521、523、525是空间卷积、522、524、526是时间卷积，527是时空池化层，用于减少每个时空卷积模块的输出特征参数数量。
30.图6是本发明实施例提供的所述深度时空卷积网络结构图。如图6所示，所述深度时空卷积网络包括：输入层61、时空卷积主网络模块62、时空池化层63、全连接层64、65、66、softmax分类器67：所述61，用于处理所收到的超声心动图视频数据；所述62，用于提取所述超声心动图视频的时空特征参数；所述63，用于减少所述时空特征参数，从而减少最后连接层中的特征参数数量；所述64、65、66构成多层全连接网络，用于将通过所述时空卷积主网络模块提取的时空特征重新通过权值构建完整的特征值矩阵；所述67，用于按照要求分类数，计算分类射血分数的概率。
31.图7是本发明实施例提供的所述时空卷积主网络模块结构图。如图7所示，711，
…
，71n为时空卷积模块，每个模块按序串联，且每个时空卷积模块的输入端馈送到下一个时空卷积模块的输入端，构成残差网络；在最后一级时空卷积模块的输出端连接一个时空池化网络层，用于减少所示时空特征参数数量。所述时空卷积模块结构如721、722、723、724、725、726、727所示，层层级联：721、723、725是空间卷积层，用于提取空间特征；722、724、726是世界卷积层，用于提取时间特征；727是时空池化层，用于减少所述时空卷积模块所输出的时空特征参数。
32.以上述依据本发明的实施例为启示，通过上述的说明内容，相关工作人员完全可以在不偏离本项发明技术思想的范围内，进行多样的变更以及修改。本项发明的技术性范围并不局限于说明书上的内容，必须要根据权利要求范围来确定其技术性范围。

技术特征：
1.一种超声心动图检测射血分数的人工智能系统装置，其特征在于，所述系统装置包括：便携式超声心动图检测仪、平板电脑或手机、计算机平台：所述便携式超声心动图检测仪，用于采集超声心动图；所述平板电脑或手机，用于运行应用程序，操作、控制和存储所述超声心动图检测仪采集、存储和传输所述超声心动图数据；所述计算机平台，包括一个或多个计算机，其中每个计算机具有储存器和至少一个处理器，用于运行超声心动图射血分数人工智能检测模块，检测射血分数。2.根据权利要求1所述的超声心动图检测射血分数的人工智能系统装置，其特征在于，所述超声心动图射血分数人工智能检测模块是一个深度时空卷积神经网络模型，包括：超声心动图视频输入、深度时空卷积网络、输出网络：所述超声心动图视频输入，用于接收和处理所述超声心动图视频数据；所述深度时空卷积网络，用于检测所述超声心动图短视频的射血分数；所述输出网络，用于以射血分数标准输出结果格式，输出射血分数检测结果。3.根据权利要求2所述的超声心动图检测射血分数的人工智能系统装置，其特征在于，所述深度时空卷积网络包括：输入层、时空卷积主网络模块、时空池化层、全连接层和softmax分类器：所述输入层，用于处理所收到的超声心动图视频数据；所述时空卷积主网络模块，用于提取所述超声心动图视频的时空特征参数；所述时空池化层，用于减少所述时空特征参数，从而减少最后连接层中的特征参数数量；所述全连接层，由多层全连接网络组成，用于将通过所述时空卷积主网络模块提取的时空特征重新通过权值构建完整的特征值矩阵；所述softmax分类器，用于按照要求分类数，计算分类射血分数的概率。4.根据权利要求3所述的超声心动图检测射血分数的人工智能系统装置，其特征在于，所述时空卷积主网络模块，由多个输出与输入连接的时空卷积模块组成，并构建成残差网络，即将输入所述时空卷积模块的输入，同时连接到下一个时空卷积模块的输入，以此类推。5.根据权利要求4所述的超声心动图检测射血分数的人工智能系统装置，其特征在于，所述时空卷积模块由多层时空卷积层构成。6.根据权利要求5所述的超声心动图检测射血分数的人工智能系统装置，其特征在于，所述时空卷积层包括一层空间卷积层紧接着一层时间卷积层，所述空间卷积层是二维卷积层，所述时间卷积层是一维卷积层，两者构成的所述时空卷积层是三维卷积层。7.一种超声心动图检测射血分数的人工智能方法，其特征在于，所述方法，包括以下步骤：步骤s1、构建所述超声心动图射血分数人工智能检测模块，一个基于深度时空卷积模型；步骤s2、根据预先获取的超声心动图视频数据训练样本对所述超声心动图射血分数人工智能检测模块进行训练；步骤s3、在计算平台上部署训练好的所述超声心动图射血分数人工智能检测模块；步骤s4、将待检测射血分数的超声心动图短视频通过云上载到所述超声心动图射血分数人工智能检测模块进行人工智能检测，得到射血分数检测结果。

技术总结
本发明公开一种超声心动图检测射血分数的人工智能方法与系统装置。所述系统包括：便携式超声心动图检测仪和计算机平台：所述便携式超声心动图检测仪，用于采集心脏超声心动图；所述计算机平台，用于运行超声心动图射血分数人工智能检测模块，通过超声心动图和人工智能方法评估射血分数，从而判断患者的心脏功能，为心衰患者提供居家预后管理。为心衰患者提供居家预后管理。为心衰患者提供居家预后管理。


技术研发人员：秦绮玲 刘亚平 周琦
受保护的技术使用者：苏州米特希赛尔人工智能有限公司
技术研发日：2022.03.16
技术公布日：2022/5/25