CN112580613A - 超声视频图像处理方法、系统、设备及存储介质 - Google Patents

超声视频图像处理方法、系统、设备及存储介质 Download PDF

Info

Publication number
CN112580613A
CN112580613A CN202110205991.7A CN202110205991A CN112580613A CN 112580613 A CN112580613 A CN 112580613A CN 202110205991 A CN202110205991 A CN 202110205991A CN 112580613 A CN112580613 A CN 112580613A
Authority
CN
China
Prior art keywords
frame
video
standard
video segment
slider
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110205991.7A
Other languages
English (en)
Other versions
CN112580613B (zh
Inventor
董振鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Wisonic Medical Technology Co ltd
Original Assignee
Shenzhen Wisonic Medical Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Wisonic Medical Technology Co ltd filed Critical Shenzhen Wisonic Medical Technology Co ltd
Priority to CN202110205991.7A priority Critical patent/CN112580613B/zh
Publication of CN112580613A publication Critical patent/CN112580613A/zh
Application granted granted Critical
Publication of CN112580613B publication Critical patent/CN112580613B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73—Querying
    • G06F16/738—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/7867—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]

Abstract

本发明公开了一种超声视频图像处理方法、系统、设备及存储介质，所述超声视频图像处理方法包括：识别待处理超声视频中的标准图像帧；根据标准图像帧确定待处理超声视频中的所有标准视频段；自每一标准视频段包含的至少两个标准图像帧中标记视频段标记帧；标记单帧标记帧；根据帧序号将视频段标记帧和/或单帧标记帧与待处理超声视频的进度条关联之后，将视频段标记帧和/或单帧标记帧及其对应的超声标准面类型显示在预设显示界面上。本发明可以在预设显示界面中与进度条关联的显示内容中对视频内容给予提示，使得用户能通过极少的操作即可定位其所需的标准视频段或单帧标记帧，极大地降低了操作难度和节约了视频定位时间，提升了定位效率。

Description

超声视频图像处理方法、系统、设备及存储介质
技术领域
本发明涉及超声检测技术领域，尤其涉及一种超声视频图像处理方法、系统、设备及存储介质。
背景技术
随着超声设备的不断普及应用，越来越多用户使用超声进行生物体组织（比如人体组织）的识别和查看，且在使用过程中会录制大量超声视频（视频中可以进行适量标注）以辅助后期进行医学报告的生成或者视频回放查看。在超声检查过程中，用户往往最关心标准面、组织结构以及已标注内容，在回看超声视频过程中，如果用户需要在超声视频中寻找需要的内容（如标准面），往往需要从超声视频开头看到结尾，或者通过快进或凭借印象将播放进度条拖动到超声视频对应位置，且由于超声内容的多样性，一个超声视频中往往具有多段对应于不同标准面类型的标准面或者组织，用户在定位、查看或提取组织或者标准面的相关内容或提取与其对应的片段的过程中，往往需要通过快进方式在超声视频中寻找相关组织或者标准面，甚至需要观看完整个超声视频，且往往难以一次性定位到用户所需内容，需要反复观看，增加了用户的操作复杂度，浪费用户大量时间，操作效率低。
现有技术中，存在视频的检索定位方式，可以首先建立视频内容关键字与目标视频的视频时间轴上时间点的对应关系，使得用户通过关键字进行检索定位到视频所在位置，以达到寻找用户所需内容。但在该方案中，其视频是指带有音频字幕的视频，且其只能识别视频图像中的文字内容，因此，在超声视频中，由于无法通过音频或者字幕（超声视频中不带有音频和字幕）提取关键词，也无法识别视频中的其他图像内容，上述方案无法实施对超声视频的定位、查看或提取；此外，该方案也无法对超声视频进行剪切、跟踪识别视频内容等操作。
发明内容
基于此，有必要针对上述技术问题，提供一种超声视频图像处理方法、系统、设备及存储介质，以解决无法快速定位查看超声视频中的标准面或组织的相关内容等问题。
一种超声视频图像处理方法，包括：
通过预设标准面识别模型识别待处理超声视频中的标准图像帧，一个所述标准图像帧对应一个超声标准面类型，以及一个所述标准图像帧在所述待处理超声视频中对应的帧序号；
根据所述标准图像帧确定所述待处理超声视频中的所有标准视频段；一个所述标准视频段中包含至少两个标准图像帧；一个所述标准视频段中包含的所有标准图像帧的帧序号连续相邻且超声标准面类型均相同；
根据预设标记规则自每一所述标准视频段包含的至少两个标准图像帧中标记视频段标记帧；
将除所有所述标准视频段中包含的标准图像帧之外的其他标准图像帧均分别标记为单帧标记帧；
根据所述帧序号将所述视频段标记帧和/或所述单帧标记帧与所述待处理超声视频的进度条关联之后，将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上。
一种超声视频图像处理系统，包括：
识别模块，用于通过预设标准面识别模型识别待处理超声视频中的标准图像帧，一个所述标准图像帧对应一个超声标准面类型，以及一个所述标准图像帧在所述待处理超声视频中对应的帧序号；
视频段确定模块，用于根据所述标准图像帧确定所述待处理超声视频中的所有标准视频段；一个所述标准视频段中包含至少两个标准图像帧；一个所述标准视频段中包含的所有标准图像帧的帧序号连续相邻且超声标准面类型均相同；
第一标记模块，用于根据预设标记规则自每一所述标准视频段包含的至少两个标准图像帧中标记视频段标记帧；
第二标记模块，用于将除所有所述标准视频段中包含的标准图像帧之外的其他标准图像帧均分别标记为单帧标记帧；
显示模块，用于根据所述帧序号将所述视频段标记帧和/或所述单帧标记帧与所述待处理超声视频的进度条关联之后，将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上。
一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令，所述处理器执行所述计算机可读指令时实现上述超声视频图像处理方法。
一个或多个存储有计算机可读指令的可读存储介质，所述计算机可读指令被一个或多个处理器执行时，使得所述一个或多个处理器执行如上述超声视频图像处理方法。
上述超声视频图像处理方法、系统、设备及介质，所述超声视频图像处理方法中，首先识别出拥具有超声标准面类型的标准图像帧（筛选掉没有与超声标准面类型对应的初始图像帧），由于视频段标记帧和单帧标记帧均在标准图像帧中确定，因此，缩小了在待处理超声视频中与进度条关联显示的视频段标记帧和/或单帧标记帧的可选取范围，提升了通过与进度条关联显示的内容进行定位查找的定位查找效率和定位准确性。
其次，本发明中，对应于同一超声标准面类型的连续相邻的标准图像帧所属的标准视频段，仅使用一个视频段标记帧作为代表在进度条中予以显示，大大减少了与进度条关联显示的响应对象，进一步缩小了可定位选取范围，提升了定位查找效率。
再次，在本发明中，可以根据显示在预设显示界面上的超声标准面类型以及视频段标记帧快速定位查找与其对应的标准视频段；也可以根据显示在预设显示界面上的超声标准面类型以及单帧标记帧快速对该单帧标记帧进行定位查找；上述定位查找过程中，可以在预设显示界面中与进度条关联的显示内容中对需要查找的视频内容给予提示，使得用户能通过极少的操作即可定位其所需的标准视频段或单帧标记帧，针对性强，无需反复查看整个视频，极大地降低了操作难度和节约了视频定位时间，提升了定位效率，也便于对超声视频进行进一步视频操作处理。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明一实施例中超声视频图像处理方法的流程示意图。
图2是本发明一实施例中超声视频图像处理方法的步骤S30的流程示意图。
图3是本发明一实施例中超声视频图像处理方法中的预设显示界面的示意图。
图4是本发明另一实施例中超声视频图像处理方法中的预设显示界面的示意图。
图5是本发明一实施例中计算机设备的示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本实施例提供的超声视频图像处理方法，可应用在与超声检测设备通信连接的服务端。服务端可以用独立的服务器或者是多个服务器组成的服务器集群来实现。超声检测设备可以通过超声探头获取超声图像。
在一实施例中，如图1所示，提供一种超声视频图像处理方法，包括如下步骤：
S10，通过预设标准面识别模型识别待处理超声视频中的标准图像帧，一个所述标准图像帧对应一个超声标准面类型（比如、四腔心、五腔心、二腔心等），以及一个所述标准图像帧在所述待处理超声视频中对应的帧序号；可理解地，在步骤S10之前，还可以首先对待处理超声视频中的初始图像帧进行滤波锐化处理，去除初始图像帧中的噪声。
在该步骤S10中，预设标准面识别模型是通过深度学习算法训练完成所得到；其具体训练过程如下：将大量的（比如1万个等）超声图像帧样本（每一个超声图像帧样本关联一个样本标准面特征，样本标准面特征可以表征超声图像帧样本的超声标准面类型）输入初始神经网络模型（可以为Resnet、FasterRCNN、RCNN、YOLO、VGG16和VGG19等神经网络模型）中进行训练，从而得到与各超声图像帧样本对应的超声标准面类型的标准面识别特征（标准面识别特征可以表征初始网络模型识别得到的超声图像帧样本中的超声标准面类型），进而根据标准面识别特征与样本标准面特征之间的相似度对初始神经网络模型进行迭代，直至所述标准面识别特征与样本标准面特征之间的相似度小于预设相似度阈值之后，将迭代之后的初始神经网络模型记录为训练完成的预设标准面识别模型。通过预设标准面识别模型对所述初始图像帧进行识别，可以确定初始图像帧是否具有对应的超声标准面类型，若确定初始图像帧具有对应的超声标准面类型，则输出与其对应的超声标准面类型；否则提示所属初始图像帧并不具有对应的超声标准面类型或输出空值即可。
可理解地，在本发明中，可以将识别出的具有与其对应的超声标准面类型的标准图像帧进行统计，并将每一个标准图像帧和与其对应的标准面类型的名称以及该标准图像帧在待处理超声视频中的帧序号关联。其中，帧序号可以是指对待处理超声视频中的所有初始图像帧进行排序之后的总序列中的序号。比如，该总序列可以以帧数或者待处理超声视频中的播放时间点（也即在待处理超声视频中的进度条中的坐标位置）为序号进行排列，且每一个帧序号对应一个帧数以及待处理超声视频中的播放时间点（播放时间点和帧数关联）。
进一步地，所述步骤S10之前，也即通过预设标准面识别模型识别待处理超声视频中的标准图像帧之前，还包括：
实时获取超声探头探测生物体组织得到的超声视频；在本发明中，超声检测设备通过超声探头实时探测得到超声视频。可理解地，超声探头可以由若干大小相同的长条形压电换能器（每单个压电换能器称为阵元）等间隔排列组成，也可以由二维阵列、阵元排列成二维矩阵形状亦可。本发明中的超声探头可以为线阵探头等。在超声探头发出超声波（超声探头内的压电换能器将施加在它上面的电压脉冲激励转换成机械振动，从而对外发射出超声波）后，被探测的人体组织会把超声波散射或者反射回超声探头，超声探头上的各阵元把回波转换成电信号，经过放大再转换为数字信号进行处理与解析之后，得到每个超声图像帧对应的每条发射线的回波数据，进而根据上述回波数据生成超声视频。
对所述超声视频中的超声图像帧进行空间复合和斑点降噪处理之后，将所述超声图像帧缓存；也即，进行空间复合图像处理以提升超声图像帧的图像清晰度，对超声图像进行半点降噪处理，以减弱超声图像帧的图像斑点噪声。在对超声图像进行空间复合和斑点降噪处理之后之后，服务端将超声图像缓存在预设的数据缓存区域中，以后续方便检查或进行参数调节。
对所述超声图像帧依次进行黑洞填补处理、增益与动态范围变换处理、图像增强处理以及数字扫描变换处理之后，将各所述超声图像帧记录为初始图像帧，并将包含所述初始图像帧的超声视频记录为待处理超声视频。也即，通过黑洞填补处理填补所述超声图像中的黑洞；对填补黑洞之后的所述超声图像进行增益与动态范围变换处理，以调整图像灰度范围与对比度；之后，对超声图像进行图像增强处理，以使得图像更加清晰；最后，对图像进行数字扫描变换处理，以将超声图像的对应的极坐标数据转换为直角坐标数据。上述黑洞填补处理、增益与动态范围变换处理、图像增强处理以及数字扫描变换处理是指对超声图像帧的后处理过程，经过上述后处理，将超声视频转换为仅包含初始图像帧的待处理超声视频。
S20，根据所述标准图像帧确定所述待处理超声视频中的所有标准视频段；一个所述标准视频段中包含至少两个标准图像帧；一个所述标准视频段中包含的所有标准图像帧的帧序号连续相邻且超声标准面类型均相同；也即，在该步骤中，从已记录的所有标准图像帧中（可以将所有标准图像帧单独组成一个第一序列L，此时即可仅从该第一序列L中找寻即可）找出连续相邻且超声标准面类型均相同的标准图像帧，将该连续相邻的标准图像帧对应的视频段记录为一个标准视频段。可理解地，在本发明中，上述连续相邻可以是指其在由初始图像帧组成的总序列中的帧序号连续且相邻。
S30，根据预设标记规则自每一所述标准视频段包含的至少两个标准图像帧中标记视频段标记帧；可理解地，本发明中的所有视频段标记帧可以形成一个第二序列LA，并且第二序列LA中的每一个视频段标记帧均对应一个标准视频段。
在本发明中，每一个标准视频段均具有一个可以代表该视频段的视频段标记帧，该视频段标记帧可以根据需求设定为该标准视频段中的任意一个标准图像帧。
在一实施例中，所述步骤S30，也即根据预设标记规则自每一所述标准视频段包含的至少两个标准图像帧中标记视频段标记帧，包括：将所述标准视频段中包含的至少两个标准图像帧中的首帧标记为视频段标记帧。也即，在该实施例中，可以以标准视频段中的首帧（也即，标准视频段中的帧序号的序列在第一位的标准图像帧）作为一个标准视频段的视频段标记帧。
在另一实施例中，如图2所示，所述步骤S30，也即所述根据预设标记规则自每一所述标准视频段包含的至少两个标准图像帧中标记视频段标记帧，包括：
S301，通过预设组织区域识别模型识别所述标准视频段中包含的每一标准图像帧的组织区域；对于已经确定的标准视频段，通过预设组织区域识别模型识别该标准视频段中的组织区域（比如肌肉区域、血管区域、筋膜区域等）。预设组织区域识别模型是通过深度学习算法训练完成所得到的；具体训练过程如下：将大量的（比如2万个等）标准图像帧样本（每一个标准图像帧样本关联一个样本组织特征，样本组织特征可以表征标准图像帧样本中的组织区域）输入初始神经网络模型中进行训练，从而得到与各标准图像帧样本对应的组织区域的组织识别特征（组织识别特征可以表征初始网络模型识别得到的标准图像帧样本中的组织区域），进而根据组织识别特征与样本组织特征之间的相似度对初始神经网络模型进行迭代，直至所述组织识别特征与样本组织特征之间的相似度小于预设相似度阈值之后，将迭代之后的初始神经网络模型记录为训练完成的预设组织区域识别模型。通过预设组织区域识别模型对所述标准图像帧进行识别，可以确定标准图像帧中的组织区域，并标记该组织区域。
S302，获取与每一标准图像帧对应的所述组织区域的重心点；其中，重心点可以通过计算组织区域对应的图像的一阶矩进行计算，属于公知常识，在此不再赘述。
S303，获取位于每一标准图像帧的预选点；可理解地，预选点可以是标准图像帧上任意位置的点，预选点位于标准图像帧中人眼更容易关注的重点区域（也即，预选点是指用户期望在组织区域得到最好显示的区域的位置点）。作为优选，预选点可以为标准图像帧的预选轴上的其中一个点，所述预选轴是指用户在标准图像帧中根据自己的关注度设定的一根轴线（比如，若标准图像帧的中心位置为用户最关注区域，此时可以将标准图像帧的中心轴线作为预选轴），预选点并不一定位于预选轴的中点，预选点可以在预选轴上下滑动（也是根据用户的关注度进行设置），因此，预选点可以根据用户的关注度设置为标准图像帧中任意一个用户最关注的位置点上。
S304，确定与每一标准图像帧对应的重心点与预选点之间的距离，将所述距离的倒数记录为视觉显著度值；作为优选，所述距离可以是指重心点与预选点之间的欧式距离D，欧式距离的计算属于公知常识，在此不再赘述。其中，在所述距离为重心点与预选点之间的欧式距离D时，记录与标准视频段中的每个标准图像帧对应的欧式距离值D，再将欧式距离D的倒数1/D作为视觉显著度值。
S305，在每一所述标准视频段中，将所述视觉显著度值最大的标准图像帧标记为该标准视频段的视频段标记帧。可理解地，视觉显著度值越大，即所述距离越小，则说明重心点越接近预选点，此时，该标准图像帧中的组织区域更容易被观测到，其可观测效果最好。因此，所述视觉显著度值最大的标准图像帧即为该标准视频段中的最佳标准图像帧，可以将该最佳标准图像帧作为代表该标准视频段的视频段标记帧。在一实施例中，若已经事先设定首帧为视频段标记帧，此时，在确定视觉显著度值最大的标准图像帧不是首帧时，可以将视觉显著度值最大的标准图像帧替代首帧成为视频段标记帧。
进一步地，所述步骤S305，也即在每一所述标准视频段中，将所述视觉显著度值最大的标准图像帧标记为该标准视频段的视频段标记帧，包括：
将所述标准视频段中包含的至少两个标准图像帧对应的帧序号作为横坐标，将所述标准视频段中包含的至少两个标准图像帧对应的视觉显著度值作为纵坐标，生成视觉显著度曲线；可理解地，视觉显著度曲线通过统计曲线或者柱状曲线的方式描述一个标准视频段（或者整个待处理超声视频中的标准视频段以及单帧标记帧）中的标准图像帧的视觉显著度值，以提供用户理解各标准图像帧中的视觉显著度值，进而确定该标准图像帧的可观测性。以便于后续根据视觉显著度曲线中显示的视觉显著度值，确定每一个标准视频段的视频段标记帧，或者利用视觉显著度曲线中显示的视觉显著度值提示用户进行定位查找，以提升定位精准度和效率。
在所述视觉显著度曲线中，确定与纵坐标上最大的所述视觉显著度值对应的帧序号，将与确定的所述帧序号对应的标准图像帧标记为该标准视频段的视频段标记帧。也即，在该实施例中，根据视觉显著度曲线中显示的视觉显著度值，确定每一个标准视频段的视频段标记帧。视觉显著度曲线用于描述每一标准图像帧中的组织区域（组织区域的重心点）是否位于标准图像帧的最佳观测点（预选点），即，视觉显著度值描述标准图像帧中组织区域与预选点的吻合度，吻合度越高（视觉显著度值越大），则说明组织区域在标准图像帧的观测点更优，可以提供用户对于标准面图像帧或其组织区域的最佳视觉观感。
S40，将除所有所述标准视频段中包含的标准图像帧之外的其他标准图像帧均分别标记为单帧标记帧；也即，在该步骤中，从已记录的所有标准图像帧中（可以将所有标准图像帧单独组成一个第一序列L，此时即可仅从该第一序列L中找寻即可）找出除上述所有标准视频段中包含的所有标准图像帧之外的其他标准图像帧，将每一帧其他标准图像帧均记录为单帧标记帧。可理解地，本发明中的所有单帧标记帧可以形成一个第三序列LB，并且第二序列LB中的每一个单帧标记帧仅对应一个标准图像帧。
S50，根据所述帧序号将所述视频段标记帧和/或所述单帧标记帧与所述待处理超声视频的进度条关联之后，将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上。可理解地，在本发明中，确定视频段标记帧和单帧标记帧之后，可以设定默认在预设显示界面上仅显示视频段标记帧或所述单帧标记帧及其对应的超声标准面类型等，亦可以设定默认在预设显示界面上显示视频段标记帧和所述单帧标记帧及其对应的超声标准面类型等。可理解地，该默认设置后续可以通过进度滑块的响应模式的更换而发生改变。
上述超声视频图像处理方法中，首先识别出拥具有超声标准面类型的标准图像帧（筛选掉没有与超声标准面类型对应的初始图像帧），由于视频段标记帧和单帧标记帧均在标准图像帧中确定，因此，缩小了在待处理超声视频中与进度条关联显示的视频段标记帧和/或单帧标记帧的可选取范围，提升了通过与进度条关联显示的内容进行定位查找的定位查找效率和定位准确性。
其次，本发明中，对应于同一超声标准面类型的连续相邻的标准图像帧所属的标准视频段，仅使用一个视频段标记帧作为代表在进度条中予以显示，大大减少了与进度条关联显示的响应对象，进一步缩小了可定位选取范围，提升了定位查找效率。
再次，在本发明中，可以根据显示在预设显示界面上的超声标准面类型以及视频段标记帧快速定位查找与其对应的标准视频段；也可以根据显示在预设显示界面上的超声标准面类型以及单帧标记帧快速对该单帧标记帧进行定位查找；上述定位查找过程中，可以在预设显示界面中与进度条关联的显示内容中对需要查找的视频内容给予提示，使得用户能通过极少的操作即可定位其所需的标准视频段或单帧标记帧，针对性强，无需反复查看整个视频，极大地降低了操作难度和节约了视频定位时间，提升了定位效率，也便于对超声视频进行进一步视频操作处理。
进一步地，所述步骤S20之后，也即根据所述标准图像帧确定所述待处理超声视频中的所有标准视频段之后，还包括：
自所有所述标准视频段中确定所述待处理超声视频的主视频段，将与所述主视频段对应的超声标准面类型作为所述待处理超声视频的标准面属性。也即，在所有所述标准视频段中选取其中一个标准视频段作为主视频段，将其超声标准面类别作为整个待处理超声视频的标准面属性，该标准面属性用于识别所示待处理超声视频主要进行的超声探测类型。选取主视频段的标准可以是选取其中包含标准图像帧的帧数最多的标准视频段，亦可是其中包含的标准图像帧的帧数与所有标准图像帧的总帧数之间的比值最大的标准视频段。
在一实施例中，所述步骤S50之后，也即将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：接收包含待调节透明度的透明度调节指令，在所述预设显示界面中将所述待处理超声视频的进度条的透明度调节至所述待调节透明度。也即，在该实施例中，进度条在预设显示界面中的预设显示区域（可以为整个预设显示界面或者时预设显示界面中的某个位置）中进行显示，进度条（或者用于显示进度条的预设显示区域）可以设置透明度选项，从而实现进度条透明度的无极调节。进度条具有时间属性，即进度条为一个时间轴，其时间轴与待处理超声视频的各初始图像帧成关联映射关系，即待处理超声视频中的初始图像帧的序列对应进度条内的时间轴上显示的播放时间序列。
可选地，所述进度条在所述预设显示界面中可以移动，具体地，在接收进到包含移动后位置的进度条移动指令之后，将所述进度条移动至所述移动后位置上进行显示。作为优选，所述移动后位置位于所述预设显示区域中。预设显示界面设置有可以启动进度条的功能按钮，用户通过触发该功能按钮执行启动在预设显示区域中的默认位置显示进度条的功能，或者执行令进度条不再在预设显示区域中显示的功能。
在一实施例中，所述步骤S50，也即根据所述帧序号将所述视频段标记帧和/或所述单帧标记帧与所述待处理超声视频的进度条关联之后，将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上，包括：
获取与各所述视频段标记帧和/或各所述单帧标记帧对应的关键信息，所述关键信息包括所述视频段标记帧或所述单帧标记帧的超声标准面类型（比如超声标准面类型的名称或缩略名称）、缩略图、帧序号、上述提及的视觉显著度曲线中的视觉显著度值等其中的一种或多种。所述关键信息还可以包括但不限于上述识别得到的组织区域的相关信息（比如组织区域的名称或缩略名称等）、在超声探头探测生物体组织的过程中自动测量得到的测量信息以及用户通过交互操作进行标注的标注信息等其中的一种或者多种。
其中，所述测量信息包括：心脏的心率测量信息，头颅自动测量信息等通用的超声测量信息，只要其是在待处理超声视频中完成测量，都可以将与视频段标记帧或单帧标记帧对应的测量信息（也即具有最佳视觉观感对应的标准图像帧中的测量信息）作为代表，将该测量信息显示在进度条中与该视频段标记帧或单帧标记帧对应的播放位置，或当前并不显示，由用户选择是否观看该测量信息。所述标注信息包括但不限于：体位图信息、字段标签信息、用户交互的测量标注信息等；比如，用户在待处理超声视频中对某一帧标准图像帧进行字段标注，标注某个组织区域对应的具体区域名称，或者标注对应的体位图信息等，如此，可以解决现有技术中仅能将具有标注信息的标准图像帧另存，以避免在视频中反复查找的缺陷，本实施例中通过将标注信息与进度条的关联显示，使得用户可以直接点击进度条中对应播放位置，即可对具有标注信息的标准图像帧进行准确定位。
将各所述视频段标记帧和/或各所述单帧标记帧的帧序号，与所述待处理超声视频的进度条对应的时间轴关联之后，根据所述时间轴与各所述帧序号的对应关系，在所述预设显示界面中显示各所述视频段标记帧和/或各所述单帧标记帧及其对应的关键信息。
可理解地，上述不同类型的关键信息，可以由用户设定在预设显示界面中与进度条同时显示其中的一种或者多种，或者关键信息均不与进度条同时显示亦可。在一实施例中，对于并不与进度条同时显示在预设显示界面中的各关键信息来说，在进度滑块滑动到时间轴上的某个时间点时，不仅会显示与该时间点对应的帧，还将会将与该时间点对应的关键信息（不与进度条同时显示的所有类型的关键信息中与该时间点对应的关键数据），以预览数据（比如关键数据对应的缩小后的预览图像或者预览数据等）的形式在该进度条对应的时间点对应的位置进行提示，进而，若接收用户交互选取该预览数据（其中一个或多个关键数据）之后，对应显示与该预览数据对应的关键信息。
在一些实施例中，如图3所示，进度条9和用户选择的与其同时显示的各类型的关键信息，全部多合一重叠显示在进度条对应的预设显示区域中（各类型关键信息对应的帧序号均与进度条对应的时间轴关联），图3中所示，与进度条9的该时间点对应显示的帧包括三个标准视频段3和一个单帧标记帧5；重叠显示在进度条中的关键信息包括缩略图（包括与各标准视频段3对应的视频段标记帧的第一缩略图2、与单帧标记帧5对应的第二缩略图6）、超声标准面类型1（图3中的臀下坐骨、梨形肌坐骨、骶丛标准面、腘窝坐骨）、视觉显著度曲线7。图3中所示的视频段与帧之间的空白部分代表没有被识别出标准图像帧的初始图像帧对应的位置。
此时，进度条9与其重叠显示的各类型的关键信息可以实现联动，也即，只要进度条9的进度滑块10移动，即会随着进度滑块10对应于时间轴的时间点的变化，显示与该时间点对应的帧（包括本发明中所说的标记帧、图像帧或视频段），以及与该时间点对应的帧序号关联的关键信息（且显示的该部分关键信息的类型是用户选择与进度条同时显示在预设显示界面上的关键信息的类型）。比如，在图3中，用户可以在进度条9上进行交互选择，可以滑动进度条9的进度滑块，或者点击进度条9上的任意位置以将进度滑块移动到该位置，即可定位到与该进度滑块10对应的标准视频段3或单帧标记帧5并在该预设显示界面中对其进行播放（对于被选取的标准视频段3来说，将优选为从首帧开始播放，或者从视频段标记帧开始播放）。
在该实施例中，对应地，用户还可以对与进度条重叠显示的各关键信息进行交互选择，若某个关键信息被选中（比如，图3中视频段标记帧对应的第一缩略图2、单帧标记帧对应的第二缩略图6、标准视频段3、单帧标记帧5、进度条9与标准视频段3或单帧标记帧5被选中，或者视觉显著度曲线7中的一个重心点吻合度值被选中，或者超声标准面类型1中的任意一项被选中等），则也会获取被选取的该关键信息对应的帧序号所对应的时间轴上的时间点，进而，播放与该时间点对应的帧（本发明中所说的标记帧、图像帧或视频段均可，图3中仅为标准视频段3或单帧标记帧5），以及与该时间点对应的帧序号关联的其他类型的关键信息（用户选择与进度条同时显示在预设显示界面上的除被选取的关键信息之外的其他类型的关键信息），且进度条的进度滑块也会移动至与该时间点对应的位置。
在一些实施例中，如图4所示，进度条9和用户选择的与其同时显示的各类型的关键信息（缩略图、超声标准面类型1、视觉显著度曲线7等），各自独立显示在预设显示界面中，可选地，每一类关键信息布置在一个独立显示区域11中（图4中的缩略图、超声标准面类型1、视觉显著度曲线7分别对应三个不同的独立显示区域11）；各所述独立显示区域11显示的关键信息所对应的帧序号均与进度条的时间轴关联。此时，进度条9与各类型的关键信息并不联动，具体地，进度条9的进度滑块10移动，会随着进度滑块10对应于时间轴的时间点的变化，显示与该时间点对应的帧（包括本发明中所说的标记帧、图像帧或视频段），但独立显示区域中的关键信息，将不会随着进度滑块的移动而发生变化。
对应地，用户在独立显示区域中交互选择（本发明中的交互选择均可以为滑动、滚动、点击等任意选取方式中的一种）任意一个关键信息（比如，视觉显著度曲线7中的一个重心点吻合度值被选中，或者一个第一缩略图2被选中等）时，视为生成一个关键信息触发信号，此时，会获取被选取的该关键信息对应的帧序号所对应的时间轴上的时间点，进而，显示与该时间点对应的帧（本发明中所说的标记帧、图像帧或视频段），但是此时，其他独立显示区域中的关键信息（用户选择与进度条同时显示在预设显示界面上的除被选取的关键信息之外的其他类型的关键信息），将不会随着被选取的该关键信息对应的时间点的确定而发生变化，但进度条的进度滑块会移动至与该时间点对应的位置（因为进度滑块需要根据显示的帧的变化而变化）。
可理解地，独立显示区域亦可以根据需求设置透明度。在用户交互选择的触发点落在除关键信息之外的其他位置（该触发点没有对应的关键信息，比如图4中的缩略图之间的空白位置等），此时，该独立显示区域将会跟随与其关联的进度条时间轴变更为一个与所述待处理超声视频对应的普通进度条，此时，该触发点在待处理超声视频中对应的初始图像帧将会被播放（此时，该触发点被触发时播放的帧仅为待处理超声视频中的初始图像帧，而不会受限于本发明后续提及的响应模式所必须显示的其他类型的帧），进度条的进度滑块会移动至与该初始图像帧帧对应的位置，但是，其他独立显示区域中的关键信息依旧不会随随之发生联动变化。
进一步地，在一些实施例中，可以结合上述两种方案，根据需求设定部分类型的关键信息与进度条联动（该部分类型的关键信息可以分别设置在独立显示区域中，也可以多合一重叠显示在进度条对应的预设显示区域中），而部分类型的关键信息与进度条9并不联动（该部分类型的关键信息分别设置在独立显示区域中），在此不再赘述。
可理解地，由于在一秒的连续图像内可能有24帧，因此，若成为标记帧（包括单帧标记帧或视频段标记帧）的帧数过多，比如，24帧全部被标记成为单帧标记帧时，如此，由于24帧在进度条上对应的播放时长只有1秒，因此，很难对其中的任意一帧进行定位选取（点击24帧所在位置可能会点击到其中的任何一帧图片）。因此，在本发明中，首先设定待处理超声视频中的初始图像帧的时间间隔高于预设时间间隔（预设时间间隔根据需求设定，但必须使得连续的标记帧在以该预设时间间隔设置在进度条上时均可以被准确快速定位）；同时，进度条上与该预设时间间隔对应的显示间隔区间可以被允许显示缩略图。
在本发明中，进度条上与每一个标记帧（单帧标记帧或视频段标记帧）对应的位置均设有快捷访问按钮组，快捷访问按钮组中包含多个按钮，不同按钮可以用于在被触发时执行不同快捷切换功能以进行快速定位，比如用于将当前显示内容（显示内容是指标记帧、标准视频段或初始图像帧等）切换至下一个、上一个、第一个或最后一个显示内容的按钮。
在一实施例中，如图3和图4所示，所述进度条9包括具有响应模式的进度滑块10；所述响应模式包括标记帧响应模式；所述步骤S50之后，也即将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含标记帧响应模式的滑块响应指令，将所述进度滑块切换至标记帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为标记帧，所述标记帧包括视频段标记帧或/和单帧标记帧。也即，进度滑块10作为在进度条9的不同滑动单位中进行滑动的滑动按钮，可以实现与滑动单位对应的响应对象（帧或视频段）的同步运动，用户可以通过滑动进度滑块实现对可查看的响应对象的滑动切换（待处理超声视频中的响应对象的位置变化）。在本实施例中，与标记帧响应模式对应的响应对象可以根据需求预先设定。比如，与标记帧响应模式对应的响应对象可以设定为仅为视频段标记帧或单帧标记帧中的一种，或者为视频段标记帧和单帧标记帧的组合。
在响应对象仅为视频段标记帧时，进度滑块的每一个滑动单位均为一个视频段标记帧；在响应对象仅为单帧标记帧时，进度滑块的每一个滑动单位均为一个单帧标记帧；在响应对象为视频段标记帧和单帧标记帧的组合时，进度滑块的每一个滑动单位均为一个视频段标记帧或单帧标记帧。
进一步地，所述标记帧响应模式包括联动式标记帧响应模式。具体地，所述接收包含标记帧响应模式的滑块响应指令，将所述进度滑块切换至标记帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为标记帧，包括：
接收包含联动式标记帧响应模式的滑块响应指令，将所述进度滑块切换至联动式标记帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为联动的所述标记帧及其关键信息；
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第一时间点，在所述预设显示界面中同步关联显示与所述第一时间点对应的所述标记帧及其所述关键信息。
在本实施例中，在联动式标记帧响应模式下，如图3所示，进度条的显示方式是多合一重叠显示在进度条对应的预设显示区域中的方式。此时，进度条9、标记帧以及与进度条重叠显示的各类型的关键信息可以实现联动，也即，只要进度条9的进度滑块10被移动，可认为接收到滑块滑动信号，进而随着进度滑块10对应于时间轴的第一时间点的变化，显示与该第一时间点对应的标记帧，以及与该第一时间点对应的帧序号关联的关键信息。同理，若与进度条重叠显示的各关键信息中的某个关键信息被选中，则也会获取被选取的该关键信息对应的帧序号所对应的时间轴上的第一时间点，进而，由于进度条的进度滑块也会移动至与该第一时间点对应的位置且进度条和关键信息联动，因此此时亦可认为接收到滑块滑动信号。此时，播放与该第一时间点对应的标记帧，以及同时显示与该第一时间点对应的帧序号关联的其他类型的关键信息。
进一步地，所述标记帧响应模式包括独立式标记帧响应模式；所述接收包含标记帧响应模式的滑块响应指令，将所述进度滑块切换至标记帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为标记帧，包括：
接收包含独立式标记帧响应模式的滑块响应指令，将所述进度滑块切换至独立式标记帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为标记帧；在该实施例中，在独立式标记帧响应模式下，如图4所示，进度条9和用户选择的与其同时显示的各类型的关键信息（缩略图、超声标准面类型1、视觉显著度曲线7等），各自独立显示在不同的独立显示区域11中；各所述独立显示区域11显示的关键信息所对应的帧序号均与进度条的时间轴关联。此时，进度条的响应对象仅为标记帧，进度条9与各类型的关键信息并不联动。
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第二时间点，在所述预设显示界面中显示与所述第二时间点对应的所述标记帧，同时保持各独立显示区域中显示的关键信息不变；每一类关键信息布置在一个独立显示区域中；各所述独立显示区域显示的关键信息所对应的帧序号均与时间轴关联；具体地，进度条9的进度滑块10移动，可认为接收到滑块滑动信号，进而随着进度滑块10对应于时间轴的第二时间点的变化，显示与该第二时间点对应的标记帧，但独立显示区域中的关键信息，将不会随着进度滑块的移动而发生变化。
接收独立显示区域中的关键信息被触发之后生成的关键信息触发信号，获取与所述关键信息对应的帧序号在所述时间轴上对应的第三时间点，在所述预设显示界面中显示与所述第三时间点对应的所述标记帧，并将所述进度滑块滑动至所述进度条上与所述第三时间点对应的位置。对应地，若某个关键信息被选中（比如，视觉显著度曲线7中的一个重心点吻合度值被选中，或者一个第一缩略图2被选中等），则也会获取被选取的该关键信息对应的帧序号所对应的时间轴上的第三时间点，进而，显示与该第三时间点对应的标记帧，但是此时，其他独立显示区域中的关键信息（用户选择与进度条同时显示在预设显示界面上的除被选取的关键信息之外的其他类型的关键信息），将不会随着第三时间点的确定而发生变化，但进度条的进度滑块会移动至与该第三时间点对应的位置（因为进度滑块需要根据显示的帧的变化而变化）。
在一实施例中，如图3和图4所示，所述进度条9包括具有响应模式的进度滑块10；所述响应模式包括图像帧响应模式；所述步骤S50之后，也即将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含图像帧响应模式的滑块响应指令，将所述进度滑块切换至图像帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为图像帧，所述图像帧包括待处理超声视频中的初始图像帧或标准图像帧。也即，进度滑块10作为在进度条9的不同滑动单位中进行滑动的滑动按钮，可以实现与滑动单位对应的响应对象（帧或视频段）的同步运动，用户可以通过滑动进度滑块实现对可查看的响应对象的滑动切换（待处理超声视频中的响应对象的位置变化）。在本实施例中，与图像帧响应模式对应的响应对象可以根据需求预先设定。比如，与图像帧响应模式对应的响应对象可以仅为初始图像帧或仅为标准图像帧。在响应对象仅为初始图像帧时，进度滑块的每一个滑动单位均为一个初始图像帧；在响应对象仅为标准图像帧时，进度滑块的每一个滑动单位均为一个标准图像帧。
进一步地，所述图像帧响应模式包括联动式图像帧响应模式；具体地，所述接收包含图像帧响应模式的滑块响应指令，将所述进度滑块切换至图像帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为图像帧，包括：
接收包含联动式图像帧响应模式的滑块响应指令，将所述进度滑块切换至联动式图像帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为联动的所述图像帧及其关键信息；
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第四时间点，在所述预设显示界面中同步关联显示与所述第四时间点对应的所述图像帧及其所述关键信息。
在本实施例中，在联动式图像帧响应模式下，如图3所示，进度条的显示方式是多合一重叠显示在进度条对应的预设显示区域中的方式。此时，进度条9、图像帧以及与进度条重叠显示的各类型的关键信息可以实现联动，也即，只要进度条9的进度滑块10被移动，可认为接收到滑块滑动信号，进而随着进度滑块10对应于时间轴的第四时间点的变化，显示与该第四时间点对应的图像帧，以及与该第四时间点对应的帧序号关联的关键信息。同理，若与进度条重叠显示的各关键信息中的某个关键信息被选中，则也会获取被选取的该关键信息对应的帧序号所对应的时间轴上的第四时间点，进而，由于进度条的进度滑块也会移动至与该第四时间点对应的位置且进度条和关键信息联动，因此此时亦可认为接收到滑块滑动信号。此时，播放与该第四时间点对应的图像帧，以及同时显示与该第四时间点对应的帧序号关联的其他类型的关键信息。
进一步地，所述图像帧响应模式包括独立式图像帧响应模式；具体地，所述接收包含图像帧响应模式的滑块响应指令，将所述进度滑块切换至图像帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为图像帧，包括：
接收包含独立式图像帧响应模式的滑块响应指令，将所述进度滑块切换至独立式图像帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为图像帧；在该实施例中，在独立式图像帧响应模式下，如图4所示，进度条9和用户选择的与其同时显示的各类型的关键信息（缩略图、超声标准面类型1、视觉显著度曲线7等），各自独立显示在不同的独立显示区域11中；各所述独立显示区域11显示的关键信息所对应的帧序号均与进度条的时间轴关联。此时，进度条的响应对象仅为图像帧，进度条9与各类型的关键信息并不联动。
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第五时间点，在所述预设显示界面中显示与所述第五时间点对应的所述图像帧，同时保持各独立显示区域中显示的关键信息不变；每一类关键信息布置在一个独立显示区域中；各所述独立显示区域显示的关键信息所对应的帧序号均与时间轴关联；具体地，进度条9的进度滑块10移动，可认为接收到滑块滑动信号，进而随着进度滑块10对应于时间轴的第五时间点的变化，显示与该第五时间点对应的图像帧，但独立显示区域中的关键信息，将不会随着进度滑块的移动而发生变化。
接收独立显示区域中的关键信息被触发之后生成的关键信息触发信号，获取与所述关键信息对应的帧序号在所述时间轴上对应的第六时间点，在所述预设显示界面中显示与所述第六时间点对应的所述图像帧，并将所述进度滑块滑动至所述进度条上与所述第六时间点对应的位置。对应地，若某个关键信息被选中（比如，视觉显著度曲线7中的一个重心点吻合度值被选中，或者一个第一缩略图2被选中等），则也会获取被选取的该关键信息对应的帧序号所对应的时间轴上的第六时间点，进而，显示与该第六时间点对应的图像帧，但是此时，其他独立显示区域中的关键信息（用户选择与进度条同时显示在预设显示界面上的除被选取的关键信息之外的其他类型的关键信息），将不会随着第六时间点的确定而发生变化，但进度条的进度滑块会移动至与该第六时间点对应的位置（因为进度滑块需要根据显示的帧的变化而变化）。
在一实施例中，如图3和图4所示，所述进度条9包括具有响应模式的进度滑块10；所述响应模式包括视频段响应模式；所述步骤S50之后，也即将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含视频段响应模式的滑块响应指令，将所述进度滑块切换至视频段响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为视频段；所述视频段仅包括所述标准视频段，或所述视频段包括所述标准视频段以及所述单帧标记帧。也即，进度滑块10作为在进度条9的不同滑动单位中进行滑动的滑动按钮，可以实现与滑动单位对应的响应对象（帧或视频段）的同步运动，用户可以通过滑动进度滑块实现对可查看的响应对象的滑动切换（待处理超声视频中的响应对象的位置变化）。在本实施例中，与视频段响应模式对应的响应对象可以根据需求预先设定。比如，与视频段响应模式对应的响应对象可以仅为标准视频段，亦可以为所述标准视频段以及所述单帧标记帧之间的组合。在响应对象仅为标准视频段时，进度滑块的每一个滑动单位均为一个标准视频段；在响应对象为所述标准视频段以及所述单帧标记帧之间的组合时，进度滑块的每一个滑动单位均为一个标准视频段或一个单帧标记帧。
进一步地，所述视频段响应模式包括联动式视频段响应模式；具体地，所述接收包含视频段响应模式的滑块响应指令，将所述进度滑块切换至视频段响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为视频段，包括：
接收包含联动式视频段响应模式的滑块响应指令，将所述进度滑块切换至联动式视频段响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为联动的所述视频段及其关键信息；
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第七时间点，在所述预设显示界面中同步关联显示与所述第七时间点对应的所述视频段及其所述关键信息。
在本实施例中，在联动式视频段响应模式下，如图3所示，进度条9的显示方式是多合一重叠显示在进度条对应的预设显示区域中的方式。此时，进度条9、视频段以及与进度条重叠显示的各类型的关键信息可以实现联动，也即，只要进度条9的进度滑块10被移动，可认为接收到滑块滑动信号，进而随着进度滑块10对应于时间轴的第七时间点的变化，显示与该第七时间点对应的视频段，以及与该第七时间点对应的帧序号关联的关键信息。同理，若与进度条重叠显示的各关键信息中的某个关键信息被选中，则也会获取被选取的该关键信息对应的帧序号所对应的时间轴上的第七时间点，进而，由于进度条的进度滑块也会移动至与该第七时间点对应的位置且进度条和关键信息联动，因此此时亦可认为接收到滑块滑动信号。此时，播放与该第七时间点对应的视频段，以及同时显示与该第七时间点对应的帧序号关联的其他类型的关键信息。
进一步地，所述视频段响应模式包括独立式视频段响应模式；具体地，所述接收包含视频段响应模式的滑块响应指令，将所述进度滑块切换至视频段响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为视频段，包括：
接收包含独立式视频段响应模式的滑块响应指令，将所述进度滑块切换至独立式视频段响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为视频段；在该实施例中，在独立式视频段响应模式下，如图4所示，进度条9和用户选择的与其同时显示的各类型的关键信息（缩略图、超声标准面类型1、视觉显著度曲线7等），各自独立显示在不同的独立显示区域11中；各所述独立显示区域11显示的关键信息所对应的帧序号均与进度条的时间轴关联。此时，进度条的响应对象仅为视频段，进度条9与各类型的关键信息并不联动。
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第八时间点，在所述预设显示界面中显示与所述第八时间点对应的所述视频段，同时保持各独立显示区域中显示的关键信息不变；每一类关键信息布置在一个独立显示区域中；各所述独立显示区域显示的关键信息所对应的帧序号均与时间轴关联；具体地，进度条9的进度滑块10移动，可认为接收到滑块滑动信号，进而随着进度滑块10对应于时间轴的第八时间点的变化，显示与该第八时间点对应的视频段，但独立显示区域中的关键信息，将不会随着进度滑块的移动而发生变化。
接收独立显示区域中的关键信息被触发之后生成的关键信息触发信号，获取与所述关键信息对应的帧序号在所述时间轴上对应的第九时间点，在所述预设显示界面中显示与所述第九时间点对应的所述视频段，并将所述进度滑块滑动至所述进度条上与所述第九时间点对应的位置。对应地，若某个关键信息被选中（比如，图4中的视觉显著度曲线7中的一个重心点吻合度值被选中，或者一个第一缩略图2被选中等），则也会获取被选取的该关键信息对应的帧序号所对应的时间轴上的第九时间点，进而，显示与该第九时间点对应的视频段，但是此时，其他独立显示区域中的关键信息（用户选择与进度条同时显示在预设显示界面上的除被选取的关键信息之外的其他类型的关键信息），将不会随着第九时间点的确定而发生变化，但进度条的进度滑块会移动至与该第九时间点对应的位置（因为进度滑块需要根据显示的帧的变化而变化）。
可理解地，进度滑块可以在一个时间点被对应切换至上述任意一个响应模式（标记帧响应模式、图像帧响应模式或视频段响应模式等）；各响应模式的切换可以通过用户的单击、双击、长按等交互操作进行，可通过形式进行响应对象的切换，亦可以通过额外设定与不同响应模式对应的按钮开关等形式进行切换，在此，本发明上述进度滑块的响应模式的切换方式并不予以限定。
在一实施例中，如图3所示，所述进度条9包括用于确定播放区间的双边界滑块8；所述双边界滑块包括前滑块81和后滑块82；所述步骤S50之后，也即将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收播放区间切换指令，获取前滑块81所处位置对应的第一播放位置点以及后滑块82所处位置对应的第二播放位置点；
将所述第一播放位置点和所述第二播放位置点之间的播放区间设置为所述待处理超声视频的当前可播放区间。
可理解地，在本实施例中，当前可播放区间中，仅能播放与进度滑块的响应模式对应的响应对象，而不是播放待处理超声视频中的所有初始图像帧，因此播放内容被精简且具有针对性，大大减少了查看时间。进一步地，所述双边界滑块亦可以变更为多边界滑块，也即该多边界滑块中具有大于两个的滑块，通过大于两个的滑块来限定当前可播放区间。
在一实施例中，所述步骤S40之后，也即将除所有所述标准视频段中包含的标准图像帧之外的其他标准图像帧均分别标记为单帧标记帧之后，还包括：
根据各所述视频段标记帧和/或各所述单帧标记帧分别对应的所述帧序号，生成标记帧序列；所述标记帧序列中的每一个所述帧序号均和与其对应的所述视频段标记帧或所述单帧标记帧的关键信息关联。也即，本实施例中可以生成标记帧序列，且标记帧序列中的帧序号与关联信息关联，可以通过该标记帧序列对应的关键信息进行检索，以查找需要的标准视频段标记帧或单帧标记帧。
可理解地，上述关键信息可以包括上述识别得到的超声标准面类型（比如超声标准面类型的名称或缩略名称），还包括但不限于上述识别得到的组织区域的相关信息（比如组织区域的名称或缩略名称等）、在超声探头探测生物体组织的过程中自动测量得到的测量信息以及用户通过交互操作进行标注的标注信息等（包括上述实施例中所述的关键信息的内容，在此不再赘述）其中的一种或者多种。可理解地，上述超声标准面类型、组织区域的相关信息、测量信息以及标注信息等，均可以根据需求设定为在预设显示界面中显示或者不显示。其中，所述测量信息包括：心脏的心率测量信息，头颅自动测量信息等通用的超声测量信息，只要其是在待处理超声视频中完成测量，都可以记录与视频段标记帧或单帧标记帧对应的测量信息（也即具有最佳视觉观感对应的标准图像帧中的测量信息）。所述标注信息包括但不限于：体位图信息、字段标签信息、用户交互的测量标注信息等。
进一步地，所述步骤S50之后，也即将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含关键词的搜索指令之后，在与所述标记帧序列关联的所有关键信息中，搜索与所述关键词匹配的关键信息；具体地，预设显示界面中设有搜索显示框，用户在搜索显示框中输入关键词之后生成搜索指令，关键词可以为一个或者多个关键字、词或者字段。录入搜索指令的方式在本发明中并不作限定，比如，预设显示界面中亦可设置语音录入模块，通过语音录入关键词以生成搜索指令；亦可以通过图像识别等录入关键词以生成搜索指令。
在与搜索得到的关键信息对应的所有所述视频段标记帧和/或所述单帧标记帧中确定最优帧，并将所述最优帧及其对应的关键信息显示在预设显示界面中。在该实施例中，目的是为了根据关键词直接搜索最优帧，最优帧是指上述与进度条关联显示的标记帧（但在本发明的一些实施例中，最优帧也可以从上述提及的图像帧或者视频段中进行选取，此时匹配对象为图像帧或者视频段对应的关键信息）；可理解地，在本实施例中，在搜索到与所述关键词匹配的关键信息之后，若匹配到的关键信息对应的标记帧只有一个，则最优帧即为匹配到的该关键信息对应的唯一标记帧。
而在匹配到的关键信息对应的标记帧有多个时，此时，可以首先获取关键词与各标记帧对应的关键信息的匹配度，可选地，本发明中，将关键词与标记帧对应的关键信息一一对应输入超声视频图像处理系统中的预设匹配模块（预设匹配模块中包括通过深度学习训练完成的匹配度识别模型，匹配度识别模型可以参照上述预设标准面识别模型的训练过程进行训练，在此不再赘述）之后，预设匹配模块可以通过匹配度识别模型自动识别不同关键词与不同标记帧之间的匹配度，并将与各标记帧对应的匹配度输出。
在一实施例中，在获取关键词与各标记帧对应的关键信息的匹配度之后，若最大的匹配度对应的标记帧仅为一个，可以直接将最大的匹配度对应的唯一标记帧自动记录为最优帧并直接显示在预设显示界面中。在另一实施例中，若最大的匹配度对应的标记帧存在多个时，可以将与最大的匹配度对应的多个标记帧均作为最优帧（此时最优帧并不限定为一个）同时显示在预设显示界面中，或者从与最大的匹配度对应的多个标记帧中随机选取一个作为最优帧进行显示亦可。
在另一实施例中，可以首先将匹配到的关键信息（可以包括标记帧的帧序号和缩略图）按照预设规则排列（比如，按照关键词与各标记帧对应的关键信息的匹配度排列，或者按照帧序号排列等）并显示在预设界面中之后，将用户根据显示的关键信息选取的标记帧记录为最优帧并直接显示在预设显示界面中。在上述实施例中，可以在与标记帧序列关联的所有关键信息中匹配用户搜索的关键词，并定位到与关键词匹配的关键信息（比如显示表1中的内容）的帧序号，进而在用户选取最优帧之后，通过最优帧的帧序号在待处理超声视频中定位最优帧并实时显示给用户查看。
表1 关键词搜索显示内容
Figure 710308DEST_PATH_IMAGE001
其中，在该表1中，帧序号单位的为当前帧在待处理超声视频中对应的播放时间点（比如0.1和0.2）。“是否标准视频段”项对应的值中，1代表此帧为标准视频段，0代表此标记帧不是标准视频段。标准视频段播放区间项是指当前标准视频段在进度条上对应的播放时间区间；0代表当前帧不是标准视频段；0.2-0.5代表标准视频段的起始帧和结束帧在待处理超声视频中的播放时间区间为0.2-0.5s。表1中的臀下坐骨和骶丛神经均为关键信息中的超声标准面类型。
本实施例中，用户通过关键词能快速定位搜索到待处理超声视频中的，在此基础上能快速定位到所需的最优帧（视频段标记帧和/或所述单帧标记帧）并对其进行显示，提高了用户查找所需视频内容的效率。
在一实施例中，所述步骤S50之后，也即将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含定位点的定位指令，所述定位点为所述进度条上与用户选取一个视频段标记帧或单帧标记帧对应的播放位置点；
将所述进度滑块定位至与所述定位点对应的播放位置点，以播放与被选取的所述视频段标记帧对应的标准视频段，或播放被选取的所述单帧标记帧。
可理解地，在确定所有视频段标记帧和单帧标记帧之后，可以根据帧序号将所有视频段标记帧和单帧标记帧生成标记帧序列并存储到数据库中。由于进度条具有时间属性，故标注帧序列与进度条形成映射关系，如图3所示，用户可以通过交互操作选取图3中所示的单帧标记帧或标准视频段，进而直接定位被选取的单帧标记帧或标准视频段所在位置，之后，将待处理超声视频的进度滑块定位到与选取的单帧标记帧或标准视频段对应的位置，开始播放被选取的单帧标记帧或标准视频段，如此，减少了对进度条的反复拖动操作，并缩短了从视频开始播放到结束播放的时长，提升了用户观看视频的体验。本实施例可以在预设显示界面中与进度条关联的显示内容中对需要查找的视频内容给予提示，使得用户能通过极少的操作即可定位其所需的标准视频段或单帧标记帧，极大地降低了操作难度和节约了视频定位时间。
在一实施例中，所述步骤S50之后，也即将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收选取指令，所述选取指令在用户自所述预设显示界面中显示的待处理超声视频中选取至少一个所述视频段标记帧或/和所述单帧标记帧之后生成；用户可以通过交互操作选取视频段标记帧或/和所述单帧标记帧（分多次选取多个视频段标记帧或/和所述单帧标记帧；或者一次选取多个视频段标记帧或/和所述单帧标记帧均可）。
将被选取的所述视频段标记帧对应的标准视频段，或/和被选取的所述单帧标记帧记录为被选取区域；
接收包含视频操作方式的视频处理指令，根据所述视频操作方式对所述被选取区域执行视频处理，或根据所述视频操作方式以及所述被选取区域对所述待处理超声视频执行视频处理。
也即，可以对被选取区域中的标准视频段或/和单帧标记帧进行视频操作方式（合成操作、插入操作、顺序调整操作、删除操作等）的视频处理操作（视频操作理应理解为不限于合成和删除，可以为放大、插入等其他操作），比如，视频操作方式为合成操作时，将被选取区域中所有标准视频段或/和单帧标记帧进行拼接合成为一个新的视频并存储至数据库，如此，使得用户能在一个新的视频中将所需视频内容全部输出为一个完整的子视频，帮助用户快速获取所需视频内容，提高用户所需视频内容信息密度以及用户所需内容适配性。比如，视频操作方式为删除操作时，可以将被选取区域中部分或全部标准视频段或/和单帧标记帧删除。
在本实施例中，还可以根据所述视频操作方式以及所述被选取区域对所述待处理超声视频执行视频处理，比如，视频操作方式为删除操作时，即将被选取区域中的所有标准视频段或/和单帧标记帧从待处理超声视频中删除，则待处理超声视频中的未删除的剩余初始图像帧将会重新合成（顺序可以调整）为一个新的视频（反向合成）。
该实施例可以支持反向合成、放大、插入等视频处理操作。视频合成操作中，标准视频段、单帧标记帧等的顺序是可以调整的，可以按照待处理超声视频的帧序号顺序进行合成，亦可按照用户的选取顺序或者预先设定的顺序进行合成均可，该实施例便于用户对待处理超声视频的编辑，从而快速提取所需视频内容生成新的视频以及其中包含的组织区域信息、超声标准面类型、标注信息等；帮助用户快速保存待处理超声视频中所需的视频段内容，提升视频保存效率。
应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
在一实施例中，提供一种超声视频图像处理系统，该超声视频图像处理系统与上述实施例中超声视频图像处理方法一一对应。该超声视频图像处理系统包括：
识别模块，用于通过预设标准面识别模型识别待处理超声视频中的标准图像帧，一个所述标准图像帧对应一个超声标准面类型，以及一个所述标准图像帧在所述待处理超声视频中对应的帧序号；
视频段确定模块，用于根据所述标准图像帧确定所述待处理超声视频中的所有标准视频段；一个所述标准视频段中包含至少两个标准图像帧；一个所述标准视频段中包含的所有标准图像帧的帧序号连续相邻且超声标准面类型均相同；
第一标记模块，用于根据预设标记规则自每一所述标准视频段包含的至少两个标准图像帧中标记视频段标记帧；
第二标记模块，用于将除所有所述标准视频段中包含的标准图像帧之外的其他标准图像帧均分别标记为单帧标记帧；
显示模块，用于根据所述帧序号将所述视频段标记帧和/或所述单帧标记帧与所述待处理超声视频的进度条关联之后，将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上。
关于超声视频图像处理系统的具体限定可以参见上文中对于超声视频图像处理方法的限定，在此不再赘述。上述超声视频图像处理系统中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端，其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括可读存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机可读指令。该内存储器为可读存储介质中的操作系统和计算机可读指令的运行提供环境。该计算机设备的网络接口用于与外部服务器通过网络连接通信。该计算机可读指令被处理器执行时以实现一种超声视频图像处理方法。本实施例所提供的可读存储介质包括非易失性可读存储介质和易失性可读存储介质。
在一个实施例中，提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机可读指令，处理器执行计算机可读指令时实现上述超声视频图像处理方法中的实施例。
在一个实施例中，提供了一个或多个存储有计算机可读指令的计算机可读存储介质，本实施例所提供的可读存储介质包括非易失性可读存储介质和易失性可读存储介质。可读存储介质上存储有计算机可读指令，计算机可读指令被一个或多个处理器执行时实现上述超声视频图像处理方法中的实施例。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机可读指令来指令相关的硬件来完成，所述的计算机可读指令可存储于一非易失性可读取存储介质或易失性可读存储介质中，该计算机可读指令在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器（ROM）、可编程ROM（PROM）、电可编程ROM（EPROM）、电可擦除可编程ROM（EEPROM）或闪存。易失性存储器可包括随机存取存储器（RAM）或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM（SRAM）、动态RAM（DRAM）、同步DRAM（SDRAM）、双数据率SDRAM（DDRSDRAM）、增强型SDRAM（ESDRAM）、同步链路（Synchlink） DRAM（SLDRAM）、存储器总线（Rambus）直接RAM（RDRAM）、直接存储器总线动态RAM（DRDRAM）、以及存储器总线动态RAM（RDRAM）等。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述系统的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。
以上所述实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围，均应包含在本发明的保护范围之内。

Claims (25)

1.一种超声视频图像处理方法，其特征在于，包括：
通过预设标准面识别模型识别待处理超声视频中的标准图像帧，一个所述标准图像帧对应一个超声标准面类型，以及一个所述标准图像帧在所述待处理超声视频中对应的帧序号；
根据所述标准图像帧确定所述待处理超声视频中的所有标准视频段；一个所述标准视频段中包含至少两个标准图像帧；一个所述标准视频段中包含的所有标准图像帧的帧序号连续相邻且超声标准面类型均相同；
根据预设标记规则自每一所述标准视频段包含的至少两个标准图像帧中标记视频段标记帧；
将除所有所述标准视频段中包含的标准图像帧之外的其他标准图像帧均分别标记为单帧标记帧；
根据所述帧序号将所述视频段标记帧和/或所述单帧标记帧与所述待处理超声视频的进度条关联之后，将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上。
2.如权利要求1所述的超声视频图像处理方法，其特征在于，所述根据预设标记规则自每一所述标准视频段包含的至少两个标准图像帧中标记视频段标记帧，包括：
将所述标准视频段中包含的至少两个标准图像帧中的首帧标记为视频段标记帧。
3.如权利要求1所述的超声视频图像处理方法，其特征在于，所述根据预设标记规则自每一所述标准视频段包含的至少两个标准图像帧中标记视频段标记帧，包括：
通过预设组织区域识别模型识别所述标准视频段中包含的每一标准图像帧的组织区域；
获取与每一标准图像帧对应的所述组织区域的重心点；
获取位于每一标准图像帧的预选点；
确定与每一标准图像帧对应的重心点与预选点之间的距离，将所述距离的倒数记录为视觉显著度值；
在每一所述标准视频段中，将所述视觉显著度值最大的标准图像帧标记为该标准视频段的视频段标记帧。
4.如权利要求3所述的超声视频图像处理方法，其特征在于，所述在每一所述标准视频段中，将所述视觉显著度值最大的标准图像帧标记为该标准视频段的视频段标记帧，包括：
将所述标准视频段中包含的至少两个标准图像帧对应的帧序号作为横坐标，将所述标准视频段中包含的至少两个标准图像帧对应的视觉显著度值作为纵坐标，生成视觉显著度曲线；
在所述视觉显著度曲线中，确定与纵坐标上最大的所述视觉显著度值对应的帧序号，将与确定的所述帧序号对应的标准图像帧标记为该标准视频段的视频段标记帧。
5.如权利要求1所述的超声视频图像处理方法，其特征在于，所述将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含待调节透明度的透明度调节指令，在所述预设显示界面中将所述待处理超声视频的进度条的透明度调节至所述待调节透明度。
6.如权利要求1所述的超声视频图像处理方法，其特征在于，所述根据所述帧序号将所述视频段标记帧和/或所述单帧标记帧与所述待处理超声视频的进度条关联之后，将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上，包括：
获取与各所述视频段标记帧和/或各所述单帧标记帧对应的关键信息，所述关键信息包括所述视频段标记帧或所述单帧标记帧的超声标准面类型、缩略图、帧序号以及视觉显著度值中的一种或多种；
将各所述视频段标记帧和/或各所述单帧标记帧的帧序号，与所述待处理超声视频的进度条对应的时间轴关联之后，根据所述时间轴与各所述帧序号的对应关系，在所述预设显示界面中显示各所述视频段标记帧和/或各所述单帧标记帧及其对应的关键信息。
7.如权利要求6所述的超声视频图像处理方法，其特征在于，所述进度条包括具有响应模式的进度滑块；所述响应模式包括标记帧响应模式；
所述将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含标记帧响应模式的滑块响应指令，将所述进度滑块切换至标记帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为标记帧，所述标记帧包括视频段标记帧或/和单帧标记帧。
8.如权利要求7所述的超声视频图像处理方法，其特征在于，所述标记帧响应模式包括联动式标记帧响应模式；
所述接收包含标记帧响应模式的滑块响应指令，将所述进度滑块切换至标记帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为标记帧，包括：
接收包含联动式标记帧响应模式的滑块响应指令，将所述进度滑块切换至联动式标记帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为联动的所述标记帧及其关键信息；
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第一时间点，在所述预设显示界面中同步关联显示与所述第一时间点对应的所述标记帧及其所述关键信息。
9.如权利要求7所述的超声视频图像处理方法，其特征在于，所述标记帧响应模式包括独立式标记帧响应模式；
所述接收包含标记帧响应模式的滑块响应指令，将所述进度滑块切换至标记帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为标记帧，包括：
接收包含独立式标记帧响应模式的滑块响应指令，将所述进度滑块切换至独立式标记帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为标记帧；
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第二时间点，在所述预设显示界面中显示与所述第二时间点对应的所述标记帧，同时保持各独立显示区域中显示的关键信息不变；每一类关键信息布置在一个独立显示区域中；各所述独立显示区域显示的关键信息所对应的帧序号均与时间轴关联；
接收独立显示区域中的关键信息被触发之后生成的关键信息触发信号，获取与所述关键信息对应的帧序号在所述时间轴上对应的第三时间点，在所述预设显示界面中显示与所述第三时间点对应的所述标记帧，并将所述进度滑块滑动至所述进度条上与所述第三时间点对应的位置。
10.如权利要求6所述的超声视频图像处理方法，其特征在于，所述进度条包括具有响应模式的进度滑块；所述响应模式包括图像帧响应模式；
所述将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含图像帧响应模式的滑块响应指令，将所述进度滑块切换至图像帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为图像帧，所述图像帧包括待处理超声视频中的初始图像帧或标准图像帧。
11.如权利要求10所述的超声视频图像处理方法，其特征在于，所述图像帧响应模式包括联动式图像帧响应模式；
所述接收包含图像帧响应模式的滑块响应指令，将所述进度滑块切换至图像帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为图像帧，包括：
接收包含联动式图像帧响应模式的滑块响应指令，将所述进度滑块切换至联动式图像帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为联动的所述图像帧及其关键信息；
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第四时间点，在所述预设显示界面中同步关联显示与所述第四时间点对应的所述图像帧及其所述关键信息。
12.如权利要求10所述的超声视频图像处理方法，其特征在于，所述图像帧响应模式包括独立式图像帧响应模式；
所述接收包含图像帧响应模式的滑块响应指令，将所述进度滑块切换至图像帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为图像帧，包括：
接收包含独立式图像帧响应模式的滑块响应指令，将所述进度滑块切换至独立式图像帧响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为图像帧；
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第五时间点，在所述预设显示界面中显示与所述第五时间点对应的所述图像帧，同时保持各独立显示区域中显示的关键信息不变；每一类关键信息布置在一个独立显示区域中；各所述独立显示区域显示的关键信息所对应的帧序号均与时间轴关联；
接收独立显示区域中的关键信息被触发之后生成的关键信息触发信号，获取与所述关键信息对应的帧序号在所述时间轴上对应的第六时间点，在所述预设显示界面中显示与所述第六时间点对应的所述图像帧，并将所述进度滑块滑动至所述进度条上与所述第六时间点对应的位置。
13.如权利要求6所述的超声视频图像处理方法，其特征在于，所述进度条包括具有响应模式的进度滑块；所述响应模式包括视频段响应模式；
所述将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含视频段响应模式的滑块响应指令，将所述进度滑块切换至视频段响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为视频段；所述视频段仅包括所述标准视频段，或所述视频段包括所述标准视频段以及所述单帧标记帧。
14.如权利要求13所述的超声视频图像处理方法，其特征在于，所述视频段响应模式包括联动式视频段响应模式；
所述接收包含视频段响应模式的滑块响应指令，将所述进度滑块切换至视频段响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为视频段，包括：
接收包含联动式视频段响应模式的滑块响应指令，将所述进度滑块切换至联动式视频段响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为联动的所述视频段及其关键信息；
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第七时间点，在所述预设显示界面中同步关联显示与所述第七时间点对应的所述视频段及其所述关键信息。
15.如权利要求13所述的超声视频图像处理方法，其特征在于，所述视频段响应模式包括独立式视频段响应模式；
所述接收包含视频段响应模式的滑块响应指令，将所述进度滑块切换至视频段响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为视频段，包括：
接收包含独立式视频段响应模式的滑块响应指令，将所述进度滑块切换至独立式视频段响应模式，以令在所述进度条上与所述进度滑块同步对应显示的响应对象切换为视频段；
接收进度滑块在所述进度条上滑动之后生成的滑块滑动信号，获取所述进度滑块在所述时间轴上对应的第八时间点，在所述预设显示界面中显示与所述第八时间点对应的所述视频段，同时保持各独立显示区域中显示的关键信息不变；每一类关键信息布置在一个独立显示区域中；各所述独立显示区域显示的关键信息所对应的帧序号均与时间轴关联；
接收独立显示区域中的关键信息被触发之后生成的关键信息触发信号，获取与所述关键信息对应的帧序号在所述时间轴上对应的第九时间点，在所述预设显示界面中显示与所述第九时间点对应的所述视频段，并将所述进度滑块滑动至所述进度条上与所述第九时间点对应的位置。
16.如权利要求1所述的超声视频图像处理方法，其特征在于，所述进度条包括用于确定播放区间的双边界滑块；所述双边界滑块包括前滑块和后滑块；
所述将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收播放区间切换指令，获取前滑块所处位置对应的第一播放位置点以及后滑块所处位置对应的第二播放位置点；
将所述第一播放位置点和所述第二播放位置点之间的播放区间设置为所述待处理超声视频的当前可播放区间。
17.如权利要求1所述的超声视频图像处理方法，其特征在于，所述通过预设标准面识别模型识别待处理超声视频中的标准图像帧之前，还包括：
实时获取超声探头探测生物体组织得到的超声视频；
对所述超声视频中的超声图像帧进行空间复合和斑点降噪处理之后，将所述超声图像帧缓存；
对所述超声图像帧依次进行黑洞填补处理、增益与动态范围变换处理、图像增强处理以及数字扫描变换处理之后，将各所述超声图像帧记录为初始图像帧，并将包含所述初始图像帧的超声视频记录为待处理超声视频。
18.如权利要求1所述的超声视频图像处理方法，其特征在于，所述将除所有所述标准视频段中包含的标准图像帧之外的其他标准图像帧均分别标记为单帧标记帧之后，还包括：
根据各所述视频段标记帧和/或各所述单帧标记帧分别对应的所述帧序号，生成标记帧序列；所述标记帧序列中的每一个所述帧序号均和与其对应的所述视频段标记帧或所述单帧标记帧的关键信息关联。
19.如权利要求11所述的超声视频图像处理方法，其特征在于，所述将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含关键词的搜索指令之后，在与所述标记帧序列关联的所有关键信息中，搜索与所述关键词匹配的关键信息；
在与搜索得到的关键信息对应的所有所述视频段标记帧和/或所述单帧标记帧中确定最优帧，并将所述最优帧及其对应的关键信息显示在预设显示界面中。
20.如权利要求6所述的超声视频图像处理方法，其特征在于，所述将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收包含定位点的定位指令，所述定位点为所述进度条上与用户选取一个视频段标记帧或单帧标记帧对应的播放位置点；
将所述进度滑块定位至与所述定位点对应的播放位置点，以播放与被选取的所述视频段标记帧对应的标准视频段，或播放被选取的所述单帧标记帧。
21.如权利要求1所述的超声视频图像处理方法，其特征在于，所述将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上之后，还包括：
接收选取指令，所述选取指令在用户自所述预设显示界面中显示的待处理超声视频中选取至少一个所述视频段标记帧或/和所述单帧标记帧之后生成；
将被选取的所述视频段标记帧对应的标准视频段，或/和被选取的所述单帧标记帧记录为被选取区域；
接收包含视频操作方式的视频处理指令，根据所述视频操作方式对所述被选取区域执行视频处理，或根据所述视频操作方式以及所述被选取区域对所述待处理超声视频执行视频处理。
22.如权利要求1所述的超声视频图像处理方法，其特征在于，所述根据所述标准图像帧确定所述待处理超声视频中的所有标准视频段之后，还包括：
自所有所述标准视频段中确定所述待处理超声视频的主视频段，将与所述主视频段对应的超声标准面类型作为所述待处理超声视频的标准面属性。
23.一种超声视频图像处理系统，其特征在于，包括：
识别模块，用于通过预设标准面识别模型识别待处理超声视频中的标准图像帧，一个所述标准图像帧对应一个超声标准面类型，以及一个所述标准图像帧在所述待处理超声视频中对应的帧序号；
视频段确定模块，用于根据所述标准图像帧确定所述待处理超声视频中的所有标准视频段；一个所述标准视频段中包含至少两个标准图像帧；一个所述标准视频段中包含的所有标准图像帧的帧序号连续相邻且超声标准面类型均相同；
第一标记模块，用于根据预设标记规则自每一所述标准视频段包含的至少两个标准图像帧中标记视频段标记帧；
第二标记模块，用于将除所有所述标准视频段中包含的标准图像帧之外的其他标准图像帧均分别标记为单帧标记帧；
显示模块，用于根据所述帧序号将所述视频段标记帧和/或所述单帧标记帧与所述待处理超声视频的进度条关联之后，将所述视频段标记帧和/或所述单帧标记帧及其对应的超声标准面类型显示在预设显示界面上。
24.一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令，其特征在于，所述处理器执行所述计算机可读指令时实现如权利要求1至22中任一项所述超声视频图像处理方法。
25.一个或多个存储有计算机可读指令的可读存储介质，所述计算机可读指令被一个或多个处理器执行时，使得所述一个或多个处理器执行如权利要求1至22中任一项所述超声视频图像处理方法。
CN202110205991.7A 2021-02-24 2021-02-24 超声视频图像处理方法、系统、设备及存储介质 Active CN112580613B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110205991.7A CN112580613B (zh) 2021-02-24 2021-02-24 超声视频图像处理方法、系统、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110205991.7A CN112580613B (zh) 2021-02-24 2021-02-24 超声视频图像处理方法、系统、设备及存储介质

Publications (2)

Publication Number Publication Date
CN112580613A true CN112580613A (zh) 2021-03-30
CN112580613B CN112580613B (zh) 2021-06-04

Family

ID=75113939

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110205991.7A Active CN112580613B (zh) 2021-02-24 2021-02-24 超声视频图像处理方法、系统、设备及存储介质

Country Status (1)

Country Link
CN (1) CN112580613B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113486195A (zh) * 2021-08-17 2021-10-08 深圳华声医疗技术股份有限公司 超声图像处理方法、装置、超声设备及存储介质
CN113536964A (zh) * 2021-06-25 2021-10-22 合肥合滨智能机器人有限公司 一种超声视频的分类提取方法
CN115278307A (zh) * 2022-07-27 2022-11-01 天翼云科技有限公司 一种视频播放方法、装置、设备和介质
CN116230173A (zh) * 2023-01-10 2023-06-06 合肥泓博医学科技有限公司 影像处理方法、装置及系统
CN117558417A (zh) * 2024-01-04 2024-02-13 卡本(深圳)医疗器械有限公司 一种医学图像显示方法、装置、设备及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003102727A (ja) * 2001-10-01 2003-04-08 Toshiba Corp 超音波診断装置及び画像再生装置
CN103577063A (zh) * 2012-07-23 2014-02-12 Lg电子株式会社 移动终端及其控制方法
CN104284249A (zh) * 2013-07-11 2015-01-14 腾讯科技（深圳）有限公司 视频播放方法及装置
EP3121747A1 (en) * 2015-07-22 2017-01-25 Konica Minolta, Inc. Console and dynamic image taking/diagnostic system
CN108228776A (zh) * 2017-12-28 2018-06-29 广东欧珀移动通信有限公司 数据处理方法、装置、存储介质及电子设备
WO2018119718A1 (zh) * 2016-12-28 2018-07-05 深圳迈瑞生物医疗电子股份有限公司 在超声扫描中的图像提取方法、装置及超声成像系统
CN108965922A (zh) * 2018-08-22 2018-12-07 广州酷狗计算机科技有限公司 视频封面生成方法、装置和存储介质
CN109044398A (zh) * 2018-06-07 2018-12-21 深圳华声医疗技术股份有限公司 超声系统成像方法、装置及计算机可读存储介质
CN109089128A (zh) * 2018-07-10 2018-12-25 武汉斗鱼网络科技有限公司 一种视频处理方法、装置、设备及介质
CN111541939A (zh) * 2020-04-30 2020-08-14 北京奇艺世纪科技有限公司 一种视频拆分方法、装置、电子设备及存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003102727A (ja) * 2001-10-01 2003-04-08 Toshiba Corp 超音波診断装置及び画像再生装置
CN103577063A (zh) * 2012-07-23 2014-02-12 Lg电子株式会社 移动终端及其控制方法
CN104284249A (zh) * 2013-07-11 2015-01-14 腾讯科技（深圳）有限公司 视频播放方法及装置
EP3121747A1 (en) * 2015-07-22 2017-01-25 Konica Minolta, Inc. Console and dynamic image taking/diagnostic system
WO2018119718A1 (zh) * 2016-12-28 2018-07-05 深圳迈瑞生物医疗电子股份有限公司 在超声扫描中的图像提取方法、装置及超声成像系统
CN108228776A (zh) * 2017-12-28 2018-06-29 广东欧珀移动通信有限公司 数据处理方法、装置、存储介质及电子设备
CN109044398A (zh) * 2018-06-07 2018-12-21 深圳华声医疗技术股份有限公司 超声系统成像方法、装置及计算机可读存储介质
CN109089128A (zh) * 2018-07-10 2018-12-25 武汉斗鱼网络科技有限公司 一种视频处理方法、装置、设备及介质
CN108965922A (zh) * 2018-08-22 2018-12-07 广州酷狗计算机科技有限公司 视频封面生成方法、装置和存储介质
CN111541939A (zh) * 2020-04-30 2020-08-14 北京奇艺世纪科技有限公司 一种视频拆分方法、装置、电子设备及存储介质

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113536964A (zh) * 2021-06-25 2021-10-22 合肥合滨智能机器人有限公司 一种超声视频的分类提取方法
CN113536964B (zh) * 2021-06-25 2023-09-26 合肥合滨智能机器人有限公司 一种超声视频的分类提取方法
CN113486195A (zh) * 2021-08-17 2021-10-08 深圳华声医疗技术股份有限公司 超声图像处理方法、装置、超声设备及存储介质
CN115278307A (zh) * 2022-07-27 2022-11-01 天翼云科技有限公司 一种视频播放方法、装置、设备和介质
CN115278307B (zh) * 2022-07-27 2023-08-04 天翼云科技有限公司 一种视频播放方法、装置、设备和介质
CN116230173A (zh) * 2023-01-10 2023-06-06 合肥泓博医学科技有限公司 影像处理方法、装置及系统
CN116230173B (zh) * 2023-01-10 2023-09-22 合肥泓博医学科技有限公司 影像处理方法、装置及系统
CN117558417A (zh) * 2024-01-04 2024-02-13 卡本(深圳)医疗器械有限公司 一种医学图像显示方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN112580613B (zh) 2021-06-04

Similar Documents

Publication Publication Date Title
CN112580613B (zh) 超声视频图像处理方法、系统、设备及存储介质
EP3937183A1 (en) Image analysis method, microscope video stream processing method, and related apparatus
CN102483767B (zh) 对象关联装置、对象关联方法、程序及记录介质
US8107700B2 (en) System and method for efficient workflow in reading medical image data
KR101595718B1 (ko) 3차원 초음파 프로브의 스캔 위치 가이드 방법 및 이 방법이 포함된 초음파 진단기
US20190258889A1 (en) Mark information recording apparatus, mark information presenting apparatus, mark information recording method, and mark information presenting method
US6370413B1 (en) Ultrasound imaging system and method to archive and review 3-D ultrasound data
US20230135046A1 (en) Classification display method of ultrasound data and ultrasound imaging system
JP2019535346A (ja) Ｂラインを自動的に検出し、超音波スキャンの画像をスコア付けすることによる代表超音波画像の向上された視覚化および選択のための方法およびシステム
CN111214255A (zh) 一种医学超声图像计算机辅助诊断方法
CN103845076A (zh) 超声系统及其检测信息的关联方法和装置
CN105303550A (zh) 图像处理装置及图像处理方法
EP2075722B1 (en) Ultrasound diagnostic device and method of displaying ultrasound images
CN111091539B (zh) 网络模型训练、医学图像处理方法、装置、介质及设备
CN113505262B (zh) 超声图像搜索方法、装置、超声设备及存储介质
US20050280651A1 (en) Apparatus and method for enhanced video images
CN111374698A (zh) 超声成像系统及相关的工作流系统和方法
US20100030075A1 (en) Ultrasound system and method of offering preview pages
US20170061642A1 (en) Information processing apparatus, information processing method, and non-transitory computer readable medium
CN113693625B (zh) 超声成像方法和超声成像设备
CN115086773B (zh) 使用图像循环内关键帧的标识对超声图像循环进行的增强可视化和回放
JP2013164667A (ja) 映像検索装置、映像検索方法、および映像検索用プログラム
US7593554B2 (en) System and method for comparing ultrasound images corresponding to two user-selected data points
CN116823829B (zh) 医疗影像的分析方法、装置、计算机设备和存储介质
CN116596919B (zh) 内镜图像质控方法、装置、系统、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant