图像检测方法、装置、设备和存储介质与流程

技术特征：
1.一种图像检测方法，其特征在于，包括：获取通过平扫电子计算机断层扫描得到的检测图像；从所述检测图像中提取出对应于目标身体部位的目标身体部位图像；通过第一图像检测模型对所述目标身体部位图像进行第一图像分类分割处理，以确定所述目标身体部位图像中存在第一目标病灶类型及对应于第一目标病灶类型的病灶区域；通过第二图像检测模型对所述目标身体部位图像进行第二图像分类分割处理，以确定所述目标身体部位图像中存在的第二目标病灶类型及病灶区域，所述第二目标病灶类型是所述第一目标病灶类型的子类别。2.根据权利要求1所述的方法，其特征在于，所述第一图像检测模型用于进行第一组病灶类型的检测，所述第一组病灶类型中包括：按所述目标身体部位对应的疾病严重程度依次划分出的第三目标病灶类型、所述第一目标病灶类型和无病灶，其中，所述第一目标病灶类型是指除所述第三目标病灶类型外的病灶类型的统称。3.根据权利要求1所述的方法，其特征在于，所述第一图像检测模型包括第一特征提取子模型和第一分类分割子模型，所述第一特征提取子模型包括第一编码模块、第一解码模块以及所述第一编码模块和所述第一解码模块之间的跳接层；所述通过第一图像检测模型对所述目标身体部位图像进行第一图像分类分割处理，包括：通过所述第一编码模块提取所述目标身体部位图像对应的第一特征图组，所述第一特征图组由多个尺度的特征图构成；通过所述跳接层将所述第一特征图组输入到所述第一解码模块；通过所述第一解码模块获取所述目标身体部位图像对应的第二特征图组，所述第二特征图组由多个尺度的特征图构成；将所述第二特征图组输入到所述第一分类分割子模型，以通过所述第一分类分割子模型对所述第二特征图组中包含的特征图进行融合，并基于融合后的特征图确定所述目标身体部位图像中是否存在第一目标病灶类型及对应于所述第一目标病灶类型的病灶区域。4.根据权利要求1所述的方法，其特征在于，所述第二图像检测模型包括第二特征提取子模型、第二分类分割子模型和池化模块，所述第二分类分割子模型中包括记忆单元和注意力模块；其中，所述记忆单元被训练为用于存储所述第一目标病灶类型下包含的不同病灶类型在所述目标身体部位中对应的位置和视觉特征，所述记忆单元被配置为以目标数量的记忆向量来存储所述位置和视觉特征；所述通过第二图像检测模型对所述目标身体部位图像进行第二图像分类分割处理，包括：通过所述第二特征提取子模型提取所述目标身体部位图像对应的第三特征图组，所述第三特征图组由多个尺度的特征图构成；依次针对所述多个尺度的特征图中的目标特征图：通过所述池化模块对所述目标特征图进行池化处理，以将所述目标特征图压缩为所述目标数量的特征向量；以及通过所述注意力模块对所述目标数量的参考向量与所述目标数量的特征向量进行交叉注意力处理，对所述目标数量的参考向量进行自注意力处理，加和交叉注意力处理结果和自注意力处理结果；其中，当所述目标特征图是所述多个尺度的特征图中的第一个时，所述参考向量为所述
记忆向量，当所述目标特征图不是所述多个尺度的特征图中的第一个时，所述参考向量为前一个目标特征图对应的交叉注意力处理结果和自注意力处理结果的加和结果；所述目标特征图是所述多个尺度的特征图中的任一个；根据最后一个目标特征图对应的交叉注意力处理结果和自注意力处理结果的加和结果，确定所述目标身体部位图像中存在的第二目标病灶类型及病灶区域。5.根据权利要求4所述的方法，其特征在于，所述第二图像检测模型中包括位置嵌入模块；所述通过所述注意力模块对所述目标数量的参考向量与所述目标数量的特征向量进行交叉注意力处理，包括：分别对所述目标数量的特征向量叠加上对应的位置嵌入向量，其中，任一特征向量上叠加的位置嵌入向量用于表征所述任一特征向量在所述目标数量的特征向量中对应的位置信息；通过所述注意力模块对所述目标数量的参考向量与所述目标数量的叠加上各自对应的位置嵌入向量的特征向量进行交叉注意力处理。6.根据权利要求4所述的方法，其特征在于，所述第二特征提取子模型包括第二编码模块、第二解码模块以及所述第二编码模块和所述第二解码模块之间的跳接层；所述通过所述第二特征提取子模型提取所述目标身体部位图像对应的第三特征图组，包括：通过所述第二编码模块提取所述目标身体部位图像对应的第四特征图组；通过所述跳接层将所述第四特征图组输入到所述第二解码模块；通过所述第二解码模块获取所述目标身体部位图像对应的第五特征图组；确定所述第四特征图组中包含的部分特征图和所述第五特征图组中包含的部分特征图构成所述第三特征图组。7.根据权利要求1所述的方法，其特征在于，分别以所述第一图像检测模型和所述第二图像检测模型作为目标图像检测模型，所述方法还包括：获取用于训练所述目标图像检测模型的训练样本集；构建与所述训练样本集对应的多个训练样本子集；分别通过所述多个训练样本子集训练多个目标图像检测模型。8.根据权利要求7所述的方法，其特征在于，所述通过第一图像检测模型对所述目标身体部位图像进行第一图像分类分割处理，以确定所述目标身体部位图像中存在对应于第一目标病灶类型的病灶区域，包括：分别通过多个第一图像检测模型对所述目标身体部位图像进行第一图像分类分割处理，以得到所述多个第一图像检测模型各自的输出结果；根据所述多个第一图像检测模型各自的输出结果，确定所述目标身体部位图像中是否存在第一目标病灶类型及对应于第一目标病灶类型的病灶区域；所述通过第二图像检测模型对所述目标身体部位图像进行第二图像分类分割处理，以确定所述目标身体部位图像中存在的第二目标病灶类型及病灶区域，包括：分别通过多个第二图像检测模型对所述目标身体部位图像进行第二图像分类分割处理，以得到所述多个第二图像检测模型各自的输出结果；根据所述多个第二图像检测模型各自的输出结果，确定所述目标身体部位图像中存在
的第二目标病灶类型及病灶区域。9.一种图像检测装置，其特征在于，包括：采集模块，用于获取通过平扫电子计算机断层扫描得到的检测图像；切割模块，用于从所述检测图像中提取出对应于目标身体部位的目标身体部位图像；第一检测模块，用于通过第一图像检测模型对所述目标身体部位图像进行第一图像分类分割处理，以确定所述目标身体部位图像中存在第一目标病灶类型及对应于第一目标病灶类型的病灶区域；第二检测模块，用于通过第二图像检测模型对所述目标身体部位图像进行第二图像分类分割处理，以确定所述目标身体部位图像中存在的第二目标病灶类型及病灶区域，所述第二目标病灶类型是所述第一目标病灶类型的子类别。10.一种电子设备，其特征在于，包括：存储器、处理器、通信接口；其中，所述存储器上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器执行如权利要求1至8中任一项所述的图像检测方法。11.一种非暂时性机器可读存储介质，其特征在于，所述非暂时性机器可读存储介质上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器执行如权利要求1至8中任一项所述的图像检测方法。12.一种图像检测方法，其特征在于，包括：接收用户设备通过调用图像检测服务触发的请求，所述请求中包括通过平扫电子计算机断层扫描得到的检测图像；利用所述图像检测服务对应的处理资源执行如下步骤：从所述检测图像中提取出对应于目标身体部位的目标身体部位图像；通过第一图像检测模型对所述目标身体部位图像进行第一图像分类分割处理，以确定所述目标身体部位图像中存在第一目标病灶类型及对应于第一目标病灶类型的病灶区域；通过第二图像检测模型对所述目标身体部位图像进行第二图像分类分割处理，以确定所述目标身体部位图像中存在的第二目标病灶类型及病灶区域，所述第二目标病灶类型是所述第一目标病灶类型的子类别；将标记有所述第二目标病灶类型及病灶区域的检测图像反馈至所述用户设备。13.一种图像检测方法，其特征在于，应用于扩展现实设备，包括：获取通过平扫电子计算机断层扫描得到的检测图像；从所述检测图像中提取出对应于目标身体部位的目标身体部位图像；通过第一图像检测模型对所述目标身体部位图像进行第一图像分类分割处理，以确定所述目标身体部位图像中存在第一目标病灶类型及对应于第一目标病灶类型的病灶区域；通过第二图像检测模型对所述目标身体部位图像进行第二图像分类分割处理，以确定所述目标身体部位图像中存在的第二目标病灶类型及病灶区域，所述第二目标病灶类型是所述第一目标病灶类型的子类别；显示标记有所述第二目标病灶类型及病灶区域的检测图像。

技术总结
本申请提供一种图像检测方法、装置、设备和存储介质，该方法包括：获取通过平扫CT得到的检测图像，从检测图像中提取出目标身体部位图像；通过第一图像检测模型对目标身体部位图像进行第一图像分类分割处理，以确定目标身体部位图像中存在第一目标病灶类型及对应于第一目标病灶类型的病灶区域；通过第二图像检测模型对目标身体部位图像进行第二图像分类分割处理，以确定目标身体部位图像中存在的第二目标病灶类型及病灶区域，第二目标病灶类型是第一目标病灶类型的子类别。通过两个图像检测模型的协同，可以实现包含病灶类型和病灶区域的图像的精细化检测。的图像的精细化检测。的图像的精细化检测。


技术研发人员：夏英达 张灵 姚佳文 吕乐 华先胜
受保护的技术使用者：阿里巴巴（中国）有限公司
技术研发日：2022.05.24
技术公布日：2022/9/6