CN107295330B - 一种标记视频帧的方法及设备 - Google Patents
一种标记视频帧的方法及设备 Download PDFInfo
- Publication number
- CN107295330B CN107295330B CN201610221502.6A CN201610221502A CN107295330B CN 107295330 B CN107295330 B CN 107295330B CN 201610221502 A CN201610221502 A CN 201610221502A CN 107295330 B CN107295330 B CN 107295330B
- Authority
- CN
- China
- Prior art keywords
- marker bit
- video frame
- tag block
- marker
- bit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Analysis (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明提供了一种标记视频帧的方法及设备,在对视频帧进行标记时,通过获取视频帧上的至少一个标记位,并从中选取第一标记位,第一标记位的权重指示所述第一标记位被选取的概率,当第一标记位低于预设容忍度时,则改变第一标记位的取值,并根据改变后的取值确定位于第一标记位的第一标记块的状态信息,其中,第一标记块为图案、颜色等非数字标识,最后与位于其他标记位的标记块形成编码信息,以标记视频帧,可提高视频帧的识别准确度,有利于视频质量评估的计算。
Description
技术领域
本发明涉及视频质量分析领域,尤其涉及一种标记视频帧的方法及设备。
背景技术
视频质量评价主要包括主观质量评价以及客观质量评价,其中,主观质量评价通过测试人员对视频质量进行主动评价,由于人眼是视频业务的最终接受者,因此主观质量评价为目前较为可靠的方式。在客观质量评价中,客观质量评价主要利用数学模型,例如全参考模型、部分参考模型以及无参考模型。全参考模型通过与参考视频进行质量比较得到测试视频的质量;无参考模型在不依赖任何参考信息的情况下对测试视频进行评价;部分参考模型则介于全参考模型和无参考模型之间。其中,对于全参考模型需要对视频帧进行标记,使接收端能够根据视频帧的标记识别出视频帧,并对识别出的视频帧进行质量评价。
现有技术采用多进制的方式对视频帧进行数值标记,根据多进制的进位规则生成数值符号,该数值符号即为视频帧的标记。例如,如果采用5进制,并采取4个符号位对视频帧进行标记,以左边为最低符号位来说,帧号为4的编码为4000,如果帧号为9,则编码为4100。这样的编码结果容易加快最低位的符号位的变化速度。在拍摄或者显示的时候,多个视频帧的图像可能同时出现在同一画面上,如果部分变化位变化频率太快,甚至连续变化时,就会导致接收端对变化位识别出错的几率大大增加。
发明内容
本发明提供一种标记视频帧的方法及设备,可提高视频帧的识别准确度,有利于视频质量评估的计算。
本发明第一方面提供一种标记视频帧的方法,在对视频帧进行标记时,通过获取视频帧上的至少一个标记位,并从中选取第一标记位,第一标记位的权重指示所述第一标记位被选取的概率,当第一标记位低于预设容忍度时,则改变第一标记位的取值,并根据改变后的取值确定位于第一标记位的第一标记块的状态信息,其中,第一标记块为图案、颜色等非数字标识,最后与位于其他标记位的标记块形成编码信息,以标记视频帧。
结合第一方面,在第一方面的第一种实现方式中,确定第一标记位在被选取之前的上一次选取过程中没有被选取,以平衡各个标记位被选取的概率。若第一标记位在被选取之前的上一次选取过程中已经被选取,则重新选取标记位。
结合第一方面,在第一方面的第二种实现方式中,第一标记位的取值的变化取决于第一标记位的取值范围,因此需要在第一标记位的取值范围内改变第一标记位的取值。
结合第一方面,在第一方面的第三种实现方式中,在选取第一标记位之前,可获取视频帧上各个标记位的标记参数,其中标记参数包括所有标记位在视频帧的位置、标记位的数量、标记位的取值范围以及标记位的标记顺序,在确定所有标记位的状态信息之后,根据所有标记位的状态信息生成编码信息。
结合第一方面,在第一方面的第四种实现方式中,可生成编码信息与视频帧的帧号的对应关系,并利用编码信息对视频帧进行标记。在将视频帧发送至接收端后,接收端通过预先获取编码信息与视频帧的帧号的对应关系直接得到帧号,有利于提高视频帧的识别准确度。
结合第一方面,在第一方面的第五种实现方式中,当第一标记位的权重超过预设容忍度时,需要改变第一标记位的权重,再从第二标记位(即视频帧的标记位中除第一标记位以外的标记位)中重新选择标记位。每次权重改变的大小可根据应用场景进行选择,如以倍数的方式增减等方式。
本申请的第二方面,提供了一种设备,该设备用于对视频帧进行标记,该设备包括了用于执行第一方面提供的标记视频帧的方法的至少一个模块及单元。
本申请的第三方面,提供了另一种设备,该设备的结构中包括处理器,处理器被配置为支持该设备执行第一方面提供的标记视频帧的方法中相应的功能。处理器用于对视频帧进行标记。该设备还包括存储器,存储器用于与处理器耦合,其保存该设备必要的程序指令和数据。该设备还包括通信总线以及通信接口,通信总线用于实现存储器和处理器之间的连接通信。通信接口用于该设备与其他接收设备或者通信网络通信。
采用本发明,在对视频帧进行标记时,通过获取视频帧上的至少一个标记位,并从中选取第一标记位,第一标记位的权重指示所述第一标记位被选取的概率,当第一标记位低于预设容忍度时,则改变第一标记位的取值,并根据改变后的取值确定位于第一标记位的第一标记块的状态信息,其中,第一标记块为图案、颜色等非数字标识,最后与位于其他标记位的标记块形成编码信息,以标记视频帧。以非数字标识标记视频帧,且每次标记选取至少一个标记位变化能够提高接收端对视频帧的识别准确度,有利于视频质量评估的计算。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例的一种标记视频帧的方法的一实施例的系统结构示意图;
图2是本发明实施例的一种标记视频帧的方法的一实施例的流程示意图;
图3是本发明实施例的一种标记视频帧的方法的一实施例的标记块的状态信息示意图;
图4是本发明实施例的一种标记视频帧的方法的另一实施例的流程示意图;
图5是本发明实施例的一种设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
采用本发明实施例,可提高视频帧的识别准确度,有利于视频质量评估的计算。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
图1是本发明实施例的一种标记视频帧的方法的一实施例的系统结构示意图,应用于视频质量评价的应用场景中,其中适用于全参考模型的视频质量评价。如图1所示的系统架构包括第一设备1、通信网络2以及第二设备3。第一设备1用于对视频帧进行标记,图2-图4的方法流程基于第一设备1而实现。第一设备1包括存储器100以及处理器101,还可以包括通信总线102以及通信接口103。
其中,存储器100中存储一组程序代码,且处理器101调用存储器100中存储的程序代码,用于执行图2至图4的标记视频帧的方法。通信总线102用于实现存储器100以及处理器101之间的连接通信,第一设备1通过通信接口103与通信网络2连接。
存储器100可以包括易失性存储器(英文:volatile memory),例如随机存取存储器(英文:random-access memory,缩写:RAM);存储器也可以包括非易失性存储器(英文:non-volatile memory),例如只读存储器(英文:read-only memory,缩写:ROM),快闪存储器(英文:flash memory),硬盘(英文:hard disk drive,缩写:HDD)或固态硬盘(英文:solid state drive,缩写:SSD);存储器100还可以为上述种类的存储器的组合。在通过软件来实现本申请提供的技术方案时,用于实现本申请图2至图4提供的标记视频帧的方法的程序代码保存在存储器100中,并由处理器101来执行。
处理器101可以为中央处理器(英文:central processing unit,缩写:CPU)。
处理器101在对视频帧进行标记时,通过获取视频帧上的至少一个标记位,并从中选取第一标记位,第一标记位的权重指示所述第一标记位被选取的概率,当第一标记位低于预设容忍度时,则改变第一标记位的取值,并根据改变后的取值确定位于第一标记位的第一标记块的状态信息,其中,第一标记块为图案、颜色等非数字标识,最后与位于其他标记位的标记块形成编码信息,以标记视频帧。
通信网络2用于在第一设备1与第二设备3之间建立连接通信,负责向第二设备3发送标记后的视频帧。
第二设备3为视频帧的接收端,用于接收第一设备1发送的完成标记的视频帧,并对接收到的视频帧进行识别,具体可以解析编码信息,并根据预先获取的帧号信息以及编码信息的对应关系得到视频帧的帧号,由此对得到的视频帧进行全参考模型的质量评价。
请参阅图2,图2是本发明实施例的一种标记视频帧的方法的一实施例的流程示意图。图1所示的第一设备1运行时执行图2所示的方法。值得注意的是,第一标记位指示被选取的标记位,第一标记位的数量为至少一个。
如图2所示,本发明实施例的一种标记视频帧的方法的一实施例可以包括以下步骤。
S100,获取位于视频帧上的标记位,从所述标记位中选取第一标记位,并获取所述第一标记位的权重。
具体实现中,所述第一标记位的权重指示所述第一标记位被选取的概率。视频帧存在至少一个标记位,每个标记位位于视频帧的不同位置,每个标记位上均有标记块,通过所有标记位上的标记块的状态信息可用于标记视频帧。由于每一个视频帧的标记位必须不相同,在视频帧的所有标记位中,需要挑选至少一个标记位(例如第一标记位)的标记块进行变化,以区分每一个视频帧。为了保证每个标记位被选取的概率符合期望值,需要设定容忍度,以根据容忍度调整每个标记位被选取的概率。权重是每次被选中的可能性,标记位的权重越大,代表标记位在本次更可能被选中。为了均衡标记位被选取的概率,本实施例利用权重表示标记位被选取的概率,因此当选取第一标记位进行变化时,需要获取第一标记位的权重。
可选的,可获取所有标记位在视频帧的位置,标记位的数量、标记位的取值范围以及标记位的标记顺序。其中,标记位的数量与视频帧的总数N以及每个标记位的取值范围R(取值0~R-1)对应,也与帧的标记算法有关。标记位的数量必须要能保证容纳所有的视频帧,所以最少的数量为标记位的取值范围用于指示标记块的状态信息的变化范围,标记位的每一个取值与位于该标记位上的标记块状态信息对应,标记位的标记顺序即为高低位顺序,例如左侧为低位、右侧为高位、或者左侧为高位、右侧为低位等顺序,本实施例不作限定。
可选的,针对视频测试的目的不同,在第一设备1选择的视频素材也存在差异,视频素材可分为静态型、动态型和混合型,本实施例则对视频素材的类型不做限定。
可选的,本发明实施例中的算法并不排斥目前的各种编码校验方法,如奇偶校验,前向纠错等,配合在一起使用可以使得帧号的识别更加有效,所以标记位数量可能增加。
S101,若所述第一标记位的权重低于预设容忍度,则改变所述第一标记位的取值。
具体实现中,容忍度表示当前的各个标记位上的实际选中概率符合期望的均匀的最大误差。当第一标记位的权重低于预设容忍度时,则认为第一标记位被选中的概率符合期望的均匀的最大误差,因此可改变第一标记位的取值。
S102,根据所述第一标记位改变后的取值确定位于所述第一标记位的第一标记块的状态信息。
具体实现中,所述第一标记块为非数字标识。标记块的形状选择可以是圆形,也可以是方形,或者其他特殊形状,对形状的选择本发明实施例并无特别要求,但每个标记位所指示的取值范围内的每一个值在相应的标记块的形状上有不同的呈现。图3是标记块的状态信息示意图,图3(a)中标记块采用圆形标识,标记块的旋转角度即为标记块的状态信息,标记位的取值范围为0-7,对应标记块的旋转角度(此时以45°递增)进行区别。图3(b)中标记块采用采用方格标识,标记块的状态信息采用颜色标识,标记位的取值范围为0-4,代表标记块的状态信息包括5种颜色,因此每个方格采用5种颜色相区别。当确定改变第一标记位的取值之后,根据改变后的取值确定第一标记块的状态信息。以图3(b)为例,标记位的取值范围为0-4,可分别代表红橙黄绿青5种颜色,第一标记位在未改变之前取值为0,标记块的状态信息为红色,在确定改变第一标记位的取值之后,例如改变为4,则确定第一标记位对应的标记块的状态信息此时为青色。
S103,获取位于第二标记位的第二标记块的状态信息。
具体实现中,所述第二标记位为所述标记位中除所述第一标记位外的标记位。在确定改变第一标记块的状态信息后,获取位于视频帧的其他标记位的第二标记块的状态信息,第二标记块的状态信息保持不变。在改变第一标记块后,使该视频帧与其他视频帧进行区分。
S104,根据所述第一标记块的状态信息以及所述第二标记块的状态信息生成编码信息。
具体实现中,所述编码信息用于标记所述视频帧。在确定了视频帧上所有标记位上标记块的状态信息之后,根据所有标记位上标记块的状态信息生成编码信息,也就是视频帧的帧号的编码结果。最后通过图像处理,根据编码信息对视频帧进行标记。例如在视频帧上添加编码信息,可通过改变视频帧的指定位置上的像素点的取值来完成。
具体实现中,第一设备1完成视频帧的标记之后,对视频帧进行压缩,形成NAL(Network Abstract Layer,网络抽象层)包流,经过协议封装后通过图1所示的通信网络2向第二设备3发送包括视频帧的数据包。
采用本发明实施例,在对视频帧进行标记时,通过获取视频帧上的至少一个标记位,并从中选取第一标记位,第一标记位的权重指示所述第一标记位被选取的概率,当第一标记位低于预设容忍度时,则改变第一标记位的取值,并根据改变后的取值确定位于第一标记位的第一标记块的状态信息,其中,第一标记块为图案、颜色等非数字标识,最后与位于其他标记位的标记块形成编码信息,以标记视频帧。以非数字标识标记视频帧,且每次标记选取至少一个标记位变化能够提高接收端对视频帧的识别准确度,有利于视频质量评估的计算,有利于视频的质量评估、帧状态统计、帧率和时延统计等。
请参阅图4,图4是本发明实施例的一种标记视频帧的方法的另一实施例的流程示意图。图1所示的第一设备1运行时执行图4所示的方法。值得注意的是,第一标记位指示被选取的标记位,第一标记位的数量为至少一个。
如图4所示,本发明实施例的一种标记视频帧的方法的另一实施例可以包括以下步骤。
S200,获取位于视频帧上的标记位。
具体实现中,视频帧存在至少一个标记位,每个标记位位于视频帧的不同位置,每个标记位上均有标记块,通过所有标记位上的标记块的状态信息可用于标记视频帧。由于每一个视频帧的标记位必须不相同,在视频帧的所有标记位中,需要挑选至少一个标记位(例如第一标记位)的标记块进行变化,以区分每一个视频帧。
可选的,针对视频测试的目的不同,在第一设备1选择的视频素材也存在差异,视频素材可分为静态型、动态型和混合型,本实施例则对视频素材的类型不做限定。
可选的,本发明实施例中的算法并不排斥目前的各种编码校验方法,如奇偶校验,前向纠错等,配合在一起使用可以使得帧号的识别更加有效,所以标记位数量可能增加。
S201,确定所述标记位的标记参数。
具体实现中,标记位的标记参数可包括所有标记位在视频帧的位置、标记位的数量、标记位的取值范围以及标记位的标记顺序。其中,标记位的数量与视频帧的总数N以及每个标记位的取值范围R(取值0~R-1)对应,也与帧的标记算法有关。标记位的数量必须要能保证容纳所有的视频帧,所以最少的数量为标记位的取值范围用于指示标记块的状态信息的变化范围,标记位的每一个取值与位于该标记位上的标记块状态信息对应。不同的取值范围会使得所有标记位所能标记的帧的数量存在差异,范围越大,能表示的状态信息的类型越多,能表达的帧数越多,或者说同样的帧数可能可以采用更少的标记位。标记位的标记顺序即为高低位顺序,例如左侧为低位、右侧为高位、或者左侧为高位、右侧为低位等顺序,本实施例不作限定。
S202,从所述标记位中选取第一标记位,确定在选取所述第一标记位的上一次选取中,所述第一标记位未被选取。
具体实现中,在选取第一标记位之后,需要判断第一标记位在被选取之前是否已被选取,即判断选取的第一标记位是否与上一次选取改变取值的标记位相同,若是则从第二标记位中重新选取标记位,并改变被选取的标记位的取值。若选取的第一标记位与上一次选取改变取值的标记位不相同,则继续执行下述步骤。
S203,获取所述第一标记位的权重。
具体实现中,所述第一标记位的权重指示所述第一标记位被选取的概率。为了均衡标记位被选取的概率,本实施例利用权重表示标记位被选取的概率,因此当选取第一标记位进行变化时,需要获取第一标记位的权重。权重是每次被选中的可能性,标记位的权重越大,代表标记位在本次更可能被选中。
S204,若所述第一标记位的权重大于或等于所述预设容忍度,则改变所述第一标记位的权重。
具体实现中,容忍度表示当前的各个标记位上的实际选中概率符合期望的均匀的最大误差。当第一标记位的权重超过预设容忍度时,需要改变第一标记位的权重,再从第二标记位(即视频帧的标记位中除第一标记位以外的标记位)中重新选择标记位。每次权重改变的大小可根据应用场景进行选择,如以倍数的方式增减等方式,权重的取值方式本实施例则不作限定。
可选的,可在获取视频帧上的标记位时,首先初始化时为每一个标记位,对每一个标记位设置相同的选中概率,即对每一个标记位设置相同的权重。在对标记位的随机选择过程中,会容易导致标记位被选取的概率出现一定的偏差。如果各标记位被选取的概率存在差异,需要根据设置的预设的容忍度调整每一个标记位的被下一次选中的概率。改变方式例如可以为增加权重较小的标记位的权重,或者降低权重较大的标记位的权重,即增加选中概率较小的标记位的概率,或者降低选中概率较大的标记位的概率。
S205,从第二标记位中重新选择标记位。
具体实现中,在改变第一标记位的权重之后,从视频帧的标记位中除第一标记位以外的标记位中重新选择标记位(例如第三标记位),并获取第三标记位的权重,若第三标记位的权重低于预设容忍度,则针对第三标记位执行步骤S206至步骤S212的部分。
S206,若所述第一标记位的权重低于预设容忍度,则获取所述第一标记位的取值范围。
具体实现中,当第一标记位的权重低于预设容忍度时,则认为第一标记位被选中的概率符合期望的均匀的最大误差,因此可改变第一标记位的取值。
S207,根据所述第一标记位的取值范围改变所述第一标记位的取值。
具体实现中,在第一标记位的取值范围内选择新值以替换原先的取值时,可通过随机选择的方式,或者单调选择的方式。随机选择是在第一标记位的取值范围内随机选取一个;单调选择是在原先的取值的基础上按照单调递增或递减的方式进行选取。
可选的,具体的选择方式与标记块的状态信息、标记位的取值范围以及原先的取值与替换的取值之间的关系有关。如图3(a)所示,标记块的状态信息采用圆形标识,在第一标记位的取值范围内选择替换的取值时,需要在取值范围0-7之间随机选择。若原先的取值和替换的取值的差别导致圆形标识相差180°,标记块的状态信息根据替换的取值对应变化后,可能会与变化前的标记块产生重影,增加识别难度。这种情况可以改变选择策略,如改为单调选择的方式,或重新随机选择。
S208,根据所述第一标记位改变后的取值确定位于所述第一标记位的第一标记块的状态信息。
S209,获取位于第二标记位的第二标记块的状态信息。
具体实现中,本实施例的步骤S208至步骤S209的实施方式可详见实施例图2的步骤S102至步骤S103,本实施例则不再赘述。
S210,根据所述标记位的标记参数、所述第一标记块的状态信息以及所述第二标记块的状态信息生成编码信息。
具体实现中,所述编码信息用于标记所述视频帧。在确定了视频帧上所有标记位上标记块的状态信息之后,根据所有标记位上标记块的状态信息以及所有标记位的标记顺序生成编码信息,也就是视频帧的帧号的编码结果。最后通过图像处理,根据编码信息对视频帧进行标记。例如在视频帧上添加编码信息,可通过改变视频帧的指定位置上的像素点的取值来完成。
可选的,可根据所有标记位上标记块的状态信息、标记位的数量以及所有标记位的标记顺序生成编码信息。
S211,生成所述编码信息与所述视频帧的帧号的对应关系。
具体实现中,图1所示的第一设备1在生成编码信息之后,生成编码信息与视频帧的帧号的对应关系,并以文件或数据库的方式保存,再通过通信网络2向第二设备3发送编码信息与视频帧的帧号的对应关系。
S212,根据所述编码信息对所述视频帧进行标记。
具体实现中,第一设备1完成视频帧的标记之后,对视频帧进行压缩,形成NAL(Network Abstract Layer,网络抽象层)包流,经过协议封装后通过图1所示的通信网络2向第二设备3发送包括视频帧的数据包。
可选的,可在实时播放过程中根据编码信息对视频帧进行标记。
可选的,第二设备3接收到第一设备1通过通信网络2发送的包括视频帧的数据包后,通过解封装得到视频帧,并对视频帧进行模糊处理,边缘提取等,以识别视频帧上所有标记位的标记块,最后得到编码信息。第二设备3得到编码信息后,可通过预先获取的编码信息与视频帧的帧号的对应关系直接得到帧号,完成对视频帧的识别,利用帧号进行全参考模型的质量评价,或进行视频帧的状态统计等等。
可选的,第二设备3还可预先获取第一设备1用于生成编码信息的参数,再根据第一设备1生成编码信息的过程反向解析得到帧号。
采用本发明实施例,在对视频帧进行标记时,通过获取视频帧上的至少一个标记位,并从中选取第一标记位,第一标记位的权重指示所述第一标记位被选取的概率,当第一标记位低于预设容忍度时,则改变第一标记位的取值,并根据改变后的取值确定位于第一标记位的第一标记块的状态信息,其中,第一标记块为图案、颜色等非数字标识,最后与位于其他标记位的标记块形成编码信息,以标记视频帧。以非数字标识标记视频帧,且每次标记选取至少一个标记位变化能够提高接收端对视频帧的识别准确度,有利于视频质量评估的计算,有利于视频的质量评估、帧状态统计、帧率和时延统计等。
请参阅图5,图5是本发明实施例的一种设备的结构示意图。图5所示的设备科通过图1所示的第一设备1实现,还可以通过专用集成电路(英文:application-specificintegrated circuit,缩写:ASIC)实现,或可编程逻辑器件(英文:programmable logicdevice,缩写:PLD)实现。上述PLD可以是复杂可编程逻辑器件(英文:complexprogrammable logic device,缩写:CPLD),FPGA,通用阵列逻辑(英文:generic arraylogic,缩写:GAL)或其任意组合。第一设备1用于实现如图2至图4所示的标记视频帧的方法。通过软件实现如图2至图4所示的标记视频帧的方法时,第一设备1也可以为软件模块。
该设备包括获取模块500、改变模块501、确定模块502、生成模块503以及标记模块504。获取模块500工作时,执行图2所示的步骤S100和步骤S103、执行图4所示的步骤S200、步骤S203和步骤S209。改变模块501工作时,执行图2所示的步骤S101、执行图4所示的步骤S204、步骤S206-步骤S207。确定模块502工作时,执行图2所示的步骤S102、执行图4所示的步骤S201-步骤S202、步骤S208。生成模块503工作时,执行图2所示的步骤S104、执行图4所示的步骤S210-步骤S211。标记模块504工作时,执行图4所示的步骤S212。其中改变模块501还包括获取单元5011以及改变单元5012。获取单元5011工作时,执行图4所示的步骤S206。改变单元5012工作时,执行图4所示的步骤S207。
采用本发明实施例,在对视频帧进行标记时,通过获取视频帧上的至少一个标记位,并从中选取第一标记位,第一标记位的权重指示所述第一标记位被选取的概率,当第一标记位低于预设容忍度时,则改变第一标记位的取值,并根据改变后的取值确定位于第一标记位的第一标记块的状态信息,其中,第一标记块为图案、颜色等非数字标识,最后与位于其他标记位的标记块形成编码信息,以标记视频帧。以非数字标识标记视频帧,且每次标记选取至少一个标记位变化能够提高接收端对视频帧的识别准确度,有利于视频质量评估的计算,有利于视频的质量评估、帧状态统计、帧率和时延统计等。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。图2至图4所示的标记视频帧的方法的实现细节,可以用于设备,运用于全参考模型的视频质量评价当中。
结合本申请公开内容所描述的方法可以由处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成,软件模块可以被存放于RAM、快闪存储器、ROM、可擦除可编程只读存储器(英文:erasable programmable read only memory,缩写:EPROM)、电可擦可编程只读存储器(英文:electrically erasable programmable read only memory,缩写:EEPROM)、硬盘、光盘或者本领域熟知的任何其它形式的存储介质中。
本领域技术人员应该可以意识到,在上述一个或多个示例中,本申请所描述的功能可以用硬件或软件来实现。当使用软件实现时,可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。存储介质可以是通用或专用计算机能够存取的任何可用介质。
以上所述的具体实施方式,对本申请的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本申请的具体实施方式而已,并不用于限定本申请的保护范围,凡在本申请的技术方案的基础之上,所做的任何修改、改进等,均应包括在本申请的保护范围之内。
Claims (14)
1.一种标记视频帧的方法,其特征在于,包括:
获取位于视频帧上的标记位,从所述标记位中选取第一标记位,并获取所述第一标记位的权重,所述第一标记位的权重指示所述第一标记位被选取的概率;
若所述第一标记位的权重低于预设容忍度,则改变所述第一标记位的取值;
根据所述第一标记位改变后的取值确定位于所述第一标记位的第一标记块的状态信息,所述第一标记块为非数字标识;
获取位于第二标记位的第二标记块的状态信息,所述第二标记位为所述标记位中除所述第一标记位外的标记位;
根据所述第一标记块的状态信息以及所述第二标记块的状态信息生成编码信息,所述编码信息用于标记所述视频帧。
2.根据权利要求1所述的方法,其特征在于,所述获取所述第一标记位的权重之前,所述方法还包括:
确定在选取所述第一标记位的上一次选取中,所述第一标记位未被选取。
3.根据权利要求1所述的方法,其特征在于,所述改变所述第一标记位的取值,包括:
获取所述第一标记位的取值范围;
根据所述第一标记位的取值范围改变所述第一标记位的取值。
4.根据权利要求1所述的方法,其特征在于,所述从所述标记位中选取第一标记位之前,所述方法还包括:
确定所述标记位的标记参数;
所述根据所述第一标记块的状态信息以及所述第二标记块的状态信息生成编码信息,包括:
根据所述标记位的标记参数、所述第一标记块的状态信息以及所述第二标记块的状态信息生成编码信息。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
生成所述编码信息与所述视频帧的帧号的对应关系;
根据所述编码信息对所述视频帧进行标记。
6.根据权利要求1所述的方法,其特征在于,所述获取所述第一标记位的权重之后,所述方法还包括:
若所述第一标记位的权重大于或等于所述预设容忍度,则改变所述第一标记位的权重。
7.一种标记视频帧的设备,其特征在于,包括:
获取模块,用于获取位于视频帧上的标记位,从所述标记位中选取第一标记位,并获取所述第一标记位的权重,所述第一标记位的权重指示所述第一标记位被选取的概率;
改变模块,用于若所述获取模块获取的第一标记位的权重低于预设容忍度,则改变所述第一标记位的取值;
确定模块,用于根据所述第一标记位改变后的取值确定位于所述第一标记位的第一标记块的状态信息,所述第一标记块为非数字标识;
所述获取模块,还用于获取位于第二标记位的第二标记块的状态信息,所述第二标记位为所述标记位中除所述第一标记位外的标记位;
生成模块,用于根据所述确定模块确定的第一标记块的状态信息以及所述获取模块获取的第二标记块的状态信息生成编码信息,所述编码信息用于标记所述视频帧。
8.根据权利要求7所述的设备,其特征在于,所述确定模块,还用于:
确定在选取所述第一标记位的上一次选取中,所述第一标记位未被选取。
9.根据权利要求7所述的设备,其特征在于,所述改变模块包括:
获取单元,用于获取所述第一标记位的取值范围;
改变单元,用于根据所述第一标记位的取值范围改变所述第一标记位的取值。
10.根据权利要求7所述的设备,其特征在于,所述确定模块,还用于:
确定所述标记位的标记参数;
所述生成模块,具体用于:
根据所述标记位的标记参数、所述第一标记块的状态信息以及所述第二标记块的状态信息生成编码信息。
11.根据权利要求7所述的设备,其特征在于,所述生成模块,还用于:
生成所述编码信息与所述视频帧的帧号的对应关系;
所述设备还包括:
标记模块,用于根据所述编码信息对所述视频帧进行标记。
12.根据权利要求7所述的设备,其特征在于,所述改变模块,还用于:
若所述第一标记位的权重大于或等于所述预设容忍度,则改变所述第一标记位的权重。
13.一种标记视频帧的设备,其特征在于,包括存储器以及处理器,其中:
所述存储器中存储一组程序代码,且所述处理器调用所述存储器中存储的程序代码,用于执行权利要求1至6任一项所述的标记视频帧的方法。
14.一种计算机可读介质,其特征在于,所述计算机可读介质存储有计算机软件,所述计算机软件被相关的硬件执行,以完成权利要求1至6任一项所述的标记视频帧的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610221502.6A CN107295330B (zh) | 2016-04-11 | 2016-04-11 | 一种标记视频帧的方法及设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610221502.6A CN107295330B (zh) | 2016-04-11 | 2016-04-11 | 一种标记视频帧的方法及设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107295330A CN107295330A (zh) | 2017-10-24 |
CN107295330B true CN107295330B (zh) | 2019-02-01 |
Family
ID=60095727
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610221502.6A Active CN107295330B (zh) | 2016-04-11 | 2016-04-11 | 一种标记视频帧的方法及设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107295330B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107945197A (zh) * | 2017-12-20 | 2018-04-20 | 南通使爱智能科技有限公司 | 一种用于图像边缘提取的智能图像处理仪 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1859584A (zh) * | 2005-11-14 | 2006-11-08 | 华为技术有限公司 | 一种媒体播放终端设备的视频播放质量测试方法 |
CN102256130A (zh) * | 2011-07-27 | 2011-11-23 | 武汉大学 | 一种基于插入宏块亮度特殊值标记视频帧图像序号的方法 |
CN104661021A (zh) * | 2015-02-12 | 2015-05-27 | 国家电网公司 | 一种视频流的质量评估方法和装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015012813A1 (en) * | 2013-07-23 | 2015-01-29 | Intel Corporation | Improved techniques for streaming video quality analysis |
-
2016
- 2016-04-11 CN CN201610221502.6A patent/CN107295330B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1859584A (zh) * | 2005-11-14 | 2006-11-08 | 华为技术有限公司 | 一种媒体播放终端设备的视频播放质量测试方法 |
CN102256130A (zh) * | 2011-07-27 | 2011-11-23 | 武汉大学 | 一种基于插入宏块亮度特殊值标记视频帧图像序号的方法 |
CN104661021A (zh) * | 2015-02-12 | 2015-05-27 | 国家电网公司 | 一种视频流的质量评估方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN107295330A (zh) | 2017-10-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109902721A (zh) | 异常点检测模型验证方法、装置、计算机设备及存储介质 | |
CN105184084B (zh) | 一种电力计量自动化终端故障类型预测方法和系统 | |
ZA200405900B (en) | Performance monitoring system and method | |
CN104346640A (zh) | 二维码及生成二维码的方法 | |
CN105955890B (zh) | 一种功能测试案例的生成方法及装置 | |
CN104715127B (zh) | 一种投诉热点区域识别方法及系统 | |
CN114374626B (zh) | 一种5g网络条件下的路由器性能检测方法 | |
CN107547154A (zh) | 一种建立视频流量预测模型的方法及装置 | |
CN105516540B (zh) | 二值图像的压缩方法及装置 | |
CN109472832A (zh) | 一种配色方案生成方法、装置及智能机器人 | |
CN110493803B (zh) | 一种基于机器学习的小区场景划分方法 | |
CN107295330B (zh) | 一种标记视频帧的方法及设备 | |
CN106407768A (zh) | 一种设备指纹的确定、对目标设备进行识别的方法和设备 | |
JP2020507147A (ja) | リアルタイムデータ処理方法及び装置 | |
CN102609708B (zh) | 一种计算杠铃中心点平移矢量和旋转参数的方法 | |
CN104883705B (zh) | 一种数据业务投诉的问题定位方法及装置 | |
CN111540014A (zh) | 位置关系的确定方法及装置、存储介质、电子装置 | |
CN104899908B (zh) | 生成事件组演化图的方法和装置 | |
CN109036510A (zh) | 视力矫正训练计划生成方法、装置及系统 | |
CN110334652A (zh) | 图像处理方法、电子设备及存储介质 | |
CN109982368A (zh) | 小区方位角的核查方法、装置、设备及介质 | |
CN109948812A (zh) | 确定故障原因的方法、装置、存储介质及电子设备 | |
CN108734221A (zh) | 基于子类数目自动确定的改进密度峰值聚类方法及系统 | |
CN108320241A (zh) | 房产分户图的面积确定方法及系统 | |
CN113011220A (zh) | 穗数识别方法、装置、存储介质及处理器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |