CN104394344A - 视频帧选择方法和设备 - Google Patents
视频帧选择方法和设备 Download PDFInfo
- Publication number
- CN104394344A CN104394344A CN201410697043.XA CN201410697043A CN104394344A CN 104394344 A CN104394344 A CN 104394344A CN 201410697043 A CN201410697043 A CN 201410697043A CN 104394344 A CN104394344 A CN 104394344A
- Authority
- CN
- China
- Prior art keywords
- frame
- movable information
- video
- candidate
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
本申请提供了一种视频帧选择方法和设备,涉及多媒体领域。所述方法包括:根据一视频的播放倍率确定最小帧间隔和最大帧间隔;选择一起点帧集合,所述起点帧集合至少包括一第一目标帧;根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合;从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。所述方法和设备,根据运动信息进行视频帧选取,其选择的视频帧在快进播放时可以有效减小抖动,提高用户体验。
Description
技术领域
本申请涉及多媒体领域,尤其涉及一种视频帧选择方法和设备。
背景技术
近年来,越来越多的汽车上安装了行车记录仪,用于记录行车过程中的影像及声音。
但是,行车记录仪在拍摄过程中,会随着车辆行驶的晃动情况而跟着晃动,所拍摄的图像也可能存在抖动情况。尤其是在外出自驾游遇到颠簸路段,或是遇到井盖、减速带等情况下,图像抖动的情况尤为严重。当自驾游回来时用户可能会观看行车记录仪所拍摄的风景来回顾旅行,从中筛选用户感兴趣的片段,此时用户可能会选择快进来遍历寻找以节省时间。由于行车记录仪会随着车辆晃动拍摄到晃动的视频,采用标准的均匀采样的快进方法,用户可能会看到晃动非常剧烈甚至跳动的快进视频画面,对用户的体验非常不好。
发明内容
本申请的目的是:提供一种视频帧选择方法和设备,以便在用户通过快进观看视频时,减少视频画面的抖动。
根据本申请至少一个实施例的第一方面,提供了一种视频帧选择方法,所述方法包括:
根据一视频的播放倍率确定最小帧间隔和最大帧间隔;
选择一起点帧集合,所述起点帧集合至少包括一第一目标帧;
根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合;
从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
结合第一方面的任一种可能的实现方式,在第二种可能的实现方式中,选择所述视频的第一帧构成所述起点帧集合。
结合第一方面的任一种可能的实现方式,在第三种可能的实现方式中,所述第一候选帧集合中的帧与所述第一目标帧的帧间隔大于等于所述最小帧间隔且小于等于所述最大帧间隔。
结合第一方面的任一种可能的实现方式,在第四种可能的实现方式中,所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于第一阈值。
结合第一方面的任一种可能的实现方式,在第五种可能的实现方式中,所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于所述第一候选帧集合中其他帧的运动信息和所述第一目标帧的运动信息的差值。
结合第一方面的任一种可能的实现方式,在第六种可能的实现方式中,所述方法还包括:
根据所述播放倍率确定一标准帧间隔;并且,
所述第二目标帧和所述第一目标帧的帧间隔与所述标准帧间隔的差值小于第二阈值。
结合第一方面的任一种可能的实现方式,在第七种可能的实现方式中,所述起点帧集合还包括一第三目标帧;
所述方法还包括:
根据所述最小帧间隔、所述最大帧间隔和所述第三目标帧,沿与所述第一方向相反的第二方向确定第二候选帧集合;
从所述第二候选帧集合中选择一第四目标帧,所述第四目标帧的运动信息和所述第三目标帧的运动信息满足所述预定条件。
结合第一方面的任一种可能的实现方式,在第八种可能的实现方式中,所述方法还包括:
根据所述最小帧间隔、所述最大帧间隔确定多个候选起点帧集合,每个候选起点帧集合包括两个帧;
所述选择一起点帧集合包括:
根据每个所述候选起点帧集合中两个帧的运动信息的差值,从所述多个候选起点帧集合中选择所述起点帧集合。
结合第一方面的任一种可能的实现方式,在第九种可能的实现方式中,每个所述候选起点帧集合中的两个帧的帧间隔大于等于所述最小帧间隔且小于等于所述最大帧间隔。
结合第一方面的任一种可能的实现方式,在第十种可能的实现方式中,所述方法还包括:
对所述视频进行分块处理,对分块后的每个视频块执行所述选择一起点帧集合的操作。
结合第一方面的任一种可能的实现方式,在第十一种可能的实现方式中,所述运动信息包括:上下朝向、高度中至少一项。
根据本申请至少一个实施例的第二方面,提供了一种视频帧选择设备,所述设备包括:
一第一确定模块,用于根据一视频的播放倍率确定最小帧间隔和最大帧间隔;
一第一选择模块,用于选择一起点帧集合,所述起点帧集合至少包括一第一目标帧;
一第二确定模块,用于根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合;
一第二选择模块,用于从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
结合第二方面的任一种可能的实现方式,在第二种可能的实现方式中,所述第一选择模块,用于选择所述视频的第一帧构成所述起点帧集合。
结合第二方面的任一种可能的实现方式,在第三种可能的实现方式中,所述设备还包括:
一第三确定模块,用于根据所述播放倍率确定一标准帧间隔;并且,
所述第二目标帧和所述第一目标帧的帧间隔与所述标准帧间隔的差值小于第二阈值。
结合第二方面的任一种可能的实现方式,在第四种可能的实现方式中,所述起点帧集合还包括一第三目标帧;
所述第二确定模块,还用于根据所述最小帧间隔、所述最大帧间隔和所述第三目标帧,沿与所述第一方向相反的第二方向确定第二候选帧集合;
所述第二选择模块,还用于从所述第二候选帧集合中选择一第四目标帧,所述第四目标帧的运动信息和所述第三目标帧的运动信息满足所述预定条件。
结合第二方面的任一种可能的实现方式,在第五种可能的实现方式中,所述设备还包括:
一第四确定模块,用于根据所述最小帧间隔、所述最大帧间隔确定多个候选起点帧集合,每个候选起点帧集合包括两个帧;
所述第一选择模块,用于根据每个所述候选起点帧集合中两个帧的运动信息的差值,从所述多个候选起点帧集合中选择所述起点帧集合。
结合第二方面的任一种可能的实现方式,在第六种可能的实现方式中,所述设备还包括:
一分块模块,用于对所述视频进行分块处理;
所述第一选择模块,用于对分块后的每个视频块执行所述选择一起点帧集合的操作。
根据本申请至少一个实施例的第三方面,提供了一种视频帧选择方法,所述方法包括:
根据一视频的播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧;
根据所述第一基准帧和所述帧偏移量确定第一目标帧;
根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合;
从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
结合第三方面的任一种可能的实现方式,在第二种可能的实现方式中,所述根据所述第一基准帧和所述帧偏移量确定第一目标帧包括:
根据所述第一基准帧和所述帧偏移量确定一第一候选帧集合;
从所述第一候选帧集合中选择一帧作为所述第一目标帧。
结合第三方面的任一种可能的实现方式,在第三种可能的实现方式中,所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于第一阈值。
结合第三方面的任一种可能的实现方式,在第四种可能的实现方式中,所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于所述第二候选帧集合中其他帧的运动信息和所述第一目标帧的运动信息的差值。
结合第三方面的任一种可能的实现方式,在第五种可能的实现方式中,所述运动信息包括:上下朝向、高度中至少一项。
根据本申请至少一个实施例的第四方面,提供一种视频选择设备,所述设备包括:
一第一确定模块,用于根据一视频的播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧;
一第二确定模块,用于根据所述第一基准帧和所述帧偏移量确定第一目标帧;
一第三确定模块,用于根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合;
一选择模块,用于从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
结合第四方面的任一种可能的实现方式,在第二种可能的实现方式中,所述第二确定模块包括:
一确定单元,用于根据所述第一基准帧和所述帧偏移量确定一第一候选帧集合;
一选择单元,用于从所述第一候选帧集合中选择一帧作为所述第一目标帧。
本申请实施例所述视频帧选择方法和设备,根据运动信息进行视频帧选取,按照所述方法选择的视频帧在快进播放时可以有效减小抖动,提高用户体验。
附图说明
图1是本申请一个实施例所述视频帧选择方法的流程图;
图2是行车记录仪拍摄视频时的场景示意图;
图3是本申请一个实施方式中所述视频帧选择方法的流程图;;
图4是本申请另一个实施方式中所述视频帧选择方法的流程图;
图5是本申请另一个实施方式中所述视频帧选择方法的流程图;
图6是本申请另一个实施例所述视频帧选择方法的流程图;
图7是本申请一个实施例所述视频帧选择设备的模块结构示意图;
图8是本申请一个实施方式中所述视频帧选择设备的模块结构示意图;
图9是本申请另一个实施方式中所述视频帧选择设备的模块结构示意图;
图10是本申请一个实施方式中所述视频帧选择设备的模块结构示意图;
图11是本申请另一个实施例所述视频帧选择设备的模块结构示意图;
图12是本申请一个实施方式中所述第二确定模块的内部模块结构示意图;
图13是本申请一个实施例所述视频帧选择设备的硬件结构示意图;
图14是本申请另一个实施例所述视频帧选择设备的硬件结构示意图。
具体实施方式
下面结合附图和实施例,对本申请的具体实施方式作进一步详细说明。以下实施例用于说明本申请,但不用来限制本申请的范围。
本领域技术人员理解,在本申请的实施例中,下述各步骤的序号的大小并不意味着执行顺序的先后,各步骤的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
发明人在研究过程中发现,行车记录仪记录的视频文件在快进时之所以会出现图像抖动的情况,原因在于:现有的快进方法是按照固定间隔选择快进帧(即快进时显示的视频帧),在记录这些快进帧时,汽车的状态发生了比较大的变化,比如前一个快进帧时汽车处于平地,下一个快进帧时汽车已经位于坡顶。因此,如果更加合理的选取快进帧,则可以在视频快进时,减小图像的抖动。
图1是本申请一个实施例所述视频帧选择方法的流程图,所述方法可以在例如一视频帧选择设备上实现。如图1所示,所述方法包括:
S120:根据一视频的播放倍率确定最小帧间隔和最大帧间隔;
S140:选择一起点帧集合,所述起点帧集合至少包括一第一目标帧;
S160:根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合;
S180:从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
本申请实施例所述方法,根据播放倍率确定最小帧间隔和最大帧间隔,选择一起点帧集合,所述起点帧集合至少包括一第一目标帧,根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合,从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件,从而提供了一种视频帧选择方法,按照所述方法选择的视频帧在快进播放时可以有效减小抖动,提高用户体验。
以下将结合具体实施方式,详细说明所述步骤S120、S140、S160和S180的功能。
S120:根据一视频的播放倍率确定最小帧间隔和最大帧间隔。
其中,所述播放倍率可以是快进倍率、快退倍率,比如以4倍速快进,则快进倍率为4。
根据所述播放倍率可以确定一标准帧间隔,即按照现有的快进、快退方式以所述播放倍率播放视频时的帧间隔。比如假设播放倍率为N,则标准帧间隔为N-1。所述最小帧间隔应该小于等于所述标准帧间隔,所述最大帧间隔应该大于等于所述标准帧间隔,从而使得按照本申请所述方法选择的视频帧的平均帧间隔可以接近所述标准帧间隔。
一种实施方式中,所述最大帧间隔和所述最小帧间隔可以由所述标准帧间隔加减一常数a得到,以所述标准帧间隔为N-1为例,所述最大帧间隔可以是N-1+a,所述最小帧间隔可以是N-1-a。假设快进倍率为4,常数为2,则标准帧间隔为3,所述最大帧间隔可以为5,所述最小帧间隔可以为1。
另一种实施方式中,所述最大帧间隔和所述最小帧间隔可以由所述标准帧间隔加减所述标准帧间隔的固定比例b得到,以所述标准帧间隔为N-1为例,所述最大帧间隔可以是(N-1)×(1+b)并向上取整,所述最小帧间隔可以是(N-1)×(1-b)并向下取整。假设快进倍率为16,固定比例为20%,则标准帧间隔为15,所述最大帧间隔可以为15×1.2=18,所述最小帧间隔可以为15×0.8=12。
S140:选择一起点帧集合,所述起点帧集合至少包括一第一目标帧。
在一种实施方式中,所述起点帧集合包括一个视频帧,所述一个视频帧可以是当前待处理视频的任一帧。简单起见,所述一个视频帧可以是当前待处理视频的第一帧,相应的,所述第一目标帧即为所述第一帧。
本申请中的目标帧是按照本申请所述方法被选中的快进帧(或快退帧),所述第一目标帧即第一个被选中的目标帧。
S160:根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合。
其中,所述第一候选帧集合中的帧与所述第一目标帧的帧间隔大于等于所述最小帧间隔且小于等于所述最大帧间隔。
所述第一方向可以是所述视频快进播放时的方向,或者是所述视频快退播放时的方向。假设当前待处理视频共包括40帧,依次分别为F1,F2,F3,F4,F5,F6…F40,假设所述第一目标帧是当前待处理视频的第一帧F1,所述最小帧间隔为3,所述最大帧间隔为5,则所述第一方向即为从F1至F40的方向,所述第一候选帧集合包括F5,F6,F7。
所述第一目标帧还可以比如是当前待处理视频的最后一帧F40,则所述第一方向即为从F40至F1的方向,所述第一候选帧集合包括F34,F35,F36。
本领域技术人员理解,选取不同的视频帧作为所述第一目标帧,只是选取了不同的起点对当前待处理视频进行处理,其实现原理相同。如果选取视频中间一帧作为所述第一目标帧,则可以对该中间一帧之前或之后的视频帧进行所述方法的视频帧选择处理。
S180:从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
在一种实施方式中,所述预定条件为:所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于第一阈值。
其中,所述运动信息可以包括上下朝向和/或高度。其可以在记录视频时获取,比如在行车记录仪拍摄行车过程中的风景的同时,汽车上另一传感器系统获取汽车的上下朝向、高度等状态信息,并对应拍摄的视频帧存储,作为相应视频帧的运动信息。
当然,本领域技术人员理解,所述运动信息并不限于仅是汽车的状态信息,比如在待处理视频是一用户佩戴的智能眼镜,在用户步行、奔跑、骑车等情况下拍摄时,所述运动信息是拍摄视频时用户的状态信息。简单起见,本申请多以汽车的状态信息为例进行说明。
具体的,所述步骤S180中,可以计算所述第一候选帧集合中每一帧的运动信息和所述第一目标帧的运动信息的差值,然后选择差值小于所述第一阈值的一帧作为所述第二目标帧。
以所述运动信息为一高度信息为例,所述预定条件实质是:所述第二目标帧的高度信息和所述第一目标帧的高度信息的差值小于第一阈值。也就是说,被选择作为快进帧的第一目标帧和第二目标帧的高度信息的差值,应该足够小,从而使用户在快进播放时不会感觉到剧烈抖动。其中,所述第一阈值可以根据用户需求设置,比如设置为0.1米。假设,所述第一目标帧为F1,其高度信息为0,所述第一候选帧集合包括F5,F6,F7,其高度信息依次为0.5米、0.2米、0.08米,则可以确定F7满足所述预定条件,被选择为所述第二目标帧。
以所述运动信息为一上下朝向为例,所述预定条件实质是:所述第二目标帧的上下朝向和所述第一目标帧的上下朝向的差值小于第一阈值。也就是说,被选择作为快进帧的第一目标帧和第二目标帧的上下朝向的差值,应该足够小,从而使用户在快进播放时不会感觉到剧烈抖动。
其中,所述上下朝向可以使用拍摄方向和水平面的夹角反映,即所述上下朝向是一角度值,当汽车上坡时其角度值为正值,当汽车下坡时其角度值为负值,汽车水平行驶时其角度值为0。以行车记录仪拍摄视频为例,可以假设拍摄方向始终和汽车的底盘平行,则如图2所示,当汽车210沿着左侧斜坡上坡时,对应的视频帧的上下朝向为u,当汽车210沿右侧斜坡下坡时,对应的视频帧的上下朝向为d。其中,u为正值,d为负值,两个视频帧的上下朝向的差值即为|d-u|。所述第一阈值可以根据用户需求设置,比如设置为20度。假设,所述第一目标帧为F1,其上下朝向为0度,所述第一候选帧集合包括F5,F6,F7,其上下朝向依次为40度、-30度、-10度,则可以确定F7满足所述预定条件,被选择为所述第二目标帧。
当然本领域技术人员理解,所述运动信息还可以同时包括所述高度信息和上下朝向两类信息,在计算差值时可以先分别计算两类信息的差值,然后通过加权运算得到最终的差值。
在另一种实施方式中,所述预定条件为:所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于所述第一候选帧集合中其他帧的运动信息和所述第一目标帧的运动信息的差值。
也就是说,所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值是所述第一候选帧集合中所有帧的运动信息和所述第一帧的运动信息的差值中最小的。具体的,可以分别计算所述第一候选帧集合中每个帧的运动信息和所述第一帧的运动信息的差值,并将最小差值对应的一帧作为所述第二目标帧。
类似于上述对所述第二目标帧的选择,所述方法可以继续选择下一目标帧,直至遍历所有视频帧。在选择所述第二目标帧的下一目标帧时,可以包括:
根据所述最小帧间隔、所述最大帧间隔和所述第二目标帧,沿第一方向确定下一候选帧集合;
从所述下一候选帧集合中选择下一目标帧,所述下一目标帧的运动信息和所述第二目标帧的运动信息满足一预定条件。
换句话说,在已知当前目标帧,选择相邻下一目标帧时,可以重复执行以下步骤:
根据所述最小帧间隔、所述最大帧间隔和所述当前目标帧,沿第一方向确定下一候选帧集合;
从所述下一候选帧集合中选择下一目标帧,所述下一目标帧的运动信息和所述当前目标帧的运动信息满足一预定条件。
从而,使用本申请所述方法,可以得到所有快进帧(即目标帧),然后可以将这些快进帧显示给用户。
采用上述方法可能出现的一个问题是,最终选择的所有目标帧的数量和按照标准快进方法得到快进帧的数量不一致,并且所述最小帧间隔和所述最大帧间隔之间的差值越大,则上述不一致的情况可能越严重。因此,在一种实施方式中,所述方法还包括:
S170:根据所述播放倍率确定一标准帧间隔;并且,
所述第二目标帧和所述第一目标帧的帧间隔与所述标准帧间隔的差值小于第二阈值。
也就是说,在选择所述第二目标帧的过程中,除了所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件之外,所述第二目标帧和所述第一目标帧的帧间隔与所述标准帧间隔的差值还要小于第二阈值。假设,所述第一阈值为0.1米,所述第二阈值为4,快进倍率为4倍,所述第一目标帧为F1,其高度信息为0,所述第一候选帧集合包括F5,F6,F7,其高度信息依次为0.07、0.2、0.08,则所述标准帧间隔为3,同时可以确定F5和F7均满足所述预定条件,但是,F5与F1的帧间隔为3,F7与F1的帧间隔为5,则F5被选择为所述第二目标帧。
在一种实施方式中,所述起点帧集合还包括一第三目标帧,并且,参见图3,所述方法还包括:
S190:根据所述最小帧间隔、所述最大帧间隔和所述第三目标帧,沿与所述第一方向相反的第二方向确定第二候选帧集合;
S200:从所述第二候选帧集合中选择一第四目标帧,所述第四目标帧的运动信息和所述第三目标帧的运动信息满足所述预定条件。
也就是说,所述起点帧集合是一个帧对,其包括第一目标帧和第三目标帧。本领域技术人员理解,根据所述第三目标帧选择所述第四目标帧的原理与根据所述第一目标帧选择所述第二目标帧的原理相同,此处不再赘述。
所述起点帧集合中的第一目标帧和第三目标帧实质上是相邻的两个目标帧,因此,所述第一目标帧和所述第三目标帧的帧间隔大于等于所述最小帧间隔且小于等于所述最大帧间隔,这是所述起点帧集合中两个帧要满足的基本条件。在一种实施方式中,可以随机选择两个满足所述基本条件的帧构成所述起点帧集合。但这种方式选择的两个帧的运动信息差值可能会较大,影响用户体验。
在另一种实施方式中,参见图4,所述方法还包括:
S132:根据所述最小帧间隔、所述最大帧间隔确定多个候选起点帧集合,每个候选起点帧集合包括两个帧。
并且,所述步骤S140进一步为:
S140’:根据每个所述候选起点帧集合中两个帧的运动信息的差值,从所述多个候选起点帧集合中选择所述起点帧集合。
所述候选起点帧集合中的两个帧也要满足所述基本条件,即所述候选起点帧集合中的两个帧帧间隔大于等于所述最小帧间隔且小于等于所述最大帧间隔,根据该基本条件,可以从待处理视频中选择确定多个候选起点帧集合。
所述步骤S140’中,可以计算每个所述候选起点帧集合中两个帧的运动信息的差值,然后选择差值最小的候选起点帧作为所述起点帧集合,或者,选择差值小于一预定值的候选起点帧作为所述起点帧集合。
为了减小运算量,提高总体的处理速度,参见图5,在一种实施方式中,所述方法还可以包括:
S131:对所述视频进行分块处理,对分块后的每个视频块执行所述选择一起点帧集合的操作。
比如,可以将一段30分钟的视频划分为3块,然后对每块分别执行所述选择起点帧集合及后续的操作步骤。
为了进一步说明本申请所述方法,以下结合表1进行详细说明。表1中给出了40个视频帧F1~F40,以及该40个视频帧的高度信息,高度信息的单位为厘米。假设以4倍率快进,则标准帧间隔为3,根据快进倍率设置最小帧间隔2,最大帧间隔为4。
1)当采用现有的快进方式时,则以下视频帧被选择为快进帧:F1,F5,F9,F13,F17,F21,F25,F29,F33,F37;对应的相邻两个快进帧之间的差值之和为:
sumt=|12-10|+|14-12|+|10-14|+|11-10|+|7-11|+|10-7|+|14-10|+|10-14|+|9-10|=2+2+4+1+4+3+4+4+1=25;
平均差值为:avet=25/9=2.78
2)当起点帧集合仅包括F1时,以F1为第一目标帧,得到第一候选帧集合为{F4,F5,F6},计算可知F4与F1的高度差值最小,因此,选择F4作为第二目标帧;进而得到下一候选帧集合为{F7,F8,F9},计算可知F9与F4的高度差最小,因此下一目标帧为F9;进而得到下一候选帧集合为{F12,F13,F14},计算可知F12,F13,F14与F9的高度差相等,三者与F9的帧间隔依次为2,3,4,可见F13与F9的帧间隔更接近标准帧间隔,因此选择F13作为下一目标帧;依次类推,可以得到剩余6个目标帧依次为:F18,F23,F27,F32,F35,F39;对应的相邻两个快进帧(即目标帧)之间的差值之和为:
sumn1=|11-10|+|14-11|+|10-14|+|10-10|+|9-10|+|10-9|+|10-10|+|10-10|+|10-10|=1+3+4+0+1+1+0+0+0=10;
平均差值为:aven1=10/9=1.11
3)当设置启动帧集合包括两个帧时,首先确定多个候选起点帧集合,其候选起点帧集合包括{F1,F4},{F1,F5},{F1,F6},{F2,F5},{F3,F6}…,即所有大于等于所述最小帧间隔2,小于等于所述最大帧间隔4的针对组合,然后计算各个候选起点帧集合中两个帧的高度信息的差值,可以得到{F5,F10}中两个帧的高度信息的差值为0,最小,因此,可以选择{F5,F10}作为起点帧集合,相应的F5和F10均为目标帧;根据F5可以沿第一方向确定一候选帧集合{F1,F2},计算得到F1、F2和F5的高度差相同,按照更接近标准帧间隔的原则,选择F1作为F5的下一个目标帧;根据F10可以沿第二方向确定一候选帧集合{F13,F14,F15},计算得到F13,F14,F15分别与F10的高度差值为2,2,1,因此选择F15作为F10的下一个目标帧;依次类推,可以的F15后续的目标帧依次为F18,F23,F27,F32,F35,F39;对应的相邻两个快进帧(即目标帧)之间的差值之和为:
sumn1=|12-10|+|12-12|+|11-12|+|10-11|+|9-10|+|10-9|+|10-10|+|10-10|+|10-10|=2+0+1+1+1+1+0+0+0=6;
平均差值为:aven2=6/9=1/11=0.67
可以看到,采用本申请所述方法可以显著快进帧之间的运动信息的差值,从而有利于减小视频快进时的抖动。
另外,当采用3)所述方法时,可能存在多个候选起点帧集合中两个帧的运动信息差值相同的情况,这种情况下,可以分别确定快进帧,并计算选中的快进帧的运动信息的平均差值,进而选择最优的候选起点帧集合作为最终的起点帧集合。
表1
帧 | F1 | F2 | F3 | F4 | F5 | F6 | F7 | F8 | F9 | F10 |
高度 | 10 | 10 | 10 | 11 | 12 | 13 | 15 | 15 | 14 | 12 |
帧 | F11 | F12 | F13 | F14 | F15 | F16 | F17 | F18 | F19 | F20 |
高度 | 11 | 10 | 10 | 10 | 11 | 12 | 11 | 10 | 9 | 8 |
帧 | F21 | F22 | F23 | F24 | F25 | F26 | F27 | F28 | F29 | F30 |
高度 | 7 | 8 | 9 | 10 | 10 | 10 | 10 | 12 | 14 | 11 |
帧 | F31 | F32 | F33 | F34 | F35 | F36 | F37 | F38 | F39 | F40 |
高度 | 9 | 10 | 10 | 10 | 10 | 8 | 9 | 10 | 10 | 10 |
图6是本申请另一实施例所述视频帧选择方法的流程图,所述方法可以在比如一视频帧选择设备上实现。如图6所示,所述方法可以包括:
S620:根据一视频的播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧;
S640:根据所述第一基准帧和所述帧偏移量确定第一目标帧;
S660:根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合;
S680:从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
本申请实施例所述方法,根据播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧,根据所述第一基准帧和所述帧偏移量确定第一目标帧,根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合,从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件,从而提供了一种视频帧选择方法,按照所述方法选择的视频帧在快进播放时可以有效减小抖动,提高用户体验。
以下将结合具体实施方式,详细说明所述步骤S620、S640、S660和S680的功能。
S620:根据一视频的播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧。
仍以上一实施例所述表1为例,假设播放倍率为4,则所述多个基准帧依次为F1,F5,F9,F13…F37,也就是按照现有快进方式被选择的快进帧。所述帧偏移量表示一所述基准帧为中心,可以左右偏移的帧的数量。所述第一基准帧可以所述多个基准帧中的第一个,即F1,所述第二基准帧可以是所述多个基准帧中的第二个,即F5。
S640:根据所述第一基准帧和所述帧偏移量确定第一目标帧。
在一种实施方式中,可以直接选择所述第一基准帧作为所述第一目标帧。
在另一种实施方式中,该步骤S640可以进一步包括:
S641:根据所述第一基准帧和所述帧偏移量确定一第一候选帧集合;
S642:从所述第一候选帧集合中选择一帧作为所述第一目标帧。
假设所述帧偏移量为1,则根据步骤S641可以确定第一候选帧集合为{F1,F2},其中F1的左侧无视频帧,无法向左偏移。进而可以从所述第一候选帧集合中比如选择F2作为第一目标帧。
S660:根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合。
如前文所述,所述第二基准帧可以为F5,帧偏移量为1,则所述第二候选帧集合为{F4,F5,F6}。
S680:从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
其中,所述运动信息可以包括上下朝向和/或高度。其可以在记录视频时获取,比如在行车记录仪拍摄行车过程中的风景的同时,汽车上另一传感器系统获取汽车的上下朝向、高度等状态信息,并对应拍摄的视频帧存储,作为相应视频帧的运动信息。
当然,本领域技术人员理解,所述运动信息并不限于仅是汽车的状态信息,比如在待处理视频是一用户佩戴的智能眼镜,在用户步行、奔跑、骑车等情况下拍摄时,所述运动信息是拍摄视频时用户的状态信息。
在一种实施方式中,所述预定条件可以为:所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于第一阈值。比如,假设所述第一目标帧为F2,所述第一阈值为1.5,计算都可以得到所述第二候选帧集合中各帧的高度信息与F2的高度信息的差值依次为:1,2,3,从而可以确定F4为所述第二目标帧。
在另一种实施方式中,所述预定条件可以为:所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于所述第二候选帧集合中其他帧的运动信息和所述第一目标帧的运动信息的差值。具体的,可以计算所述第二候选帧集合中各帧的运动信息和所述第一目标帧的运动信息的差值,然后选择差值最小的帧作为所述第二目标帧。
为了进一步说明本申请所述方法,以下继续结合表1进行详细说明。
首先根据快进倍率4,设置帧偏移量为1,确定基准帧依次为:F1,F5,F9,F13,F17,F21,F25,F29,F33,F37;选择F1为第一目标帧,根据下一候选帧集合{F4,F5,F6}中各帧和F1的高度差值可以确定F4为下一目标帧;下一候选帧集合为{F8,F9,F10}中各帧和F4的高度差值,可以确定F10;依次类推,可以确定候选目标帧依次为F13,F18,F20,F25,F30,F33,F38;
对应的相邻两个快进帧(即目标帧)之间的差值之和为:
sumn3=|11-10|+|12-11|+|10-12|+|8-10|+|10-8|+|11-10|+|10-11|+|10-10|+|10-10|=1+1+2+2+2+1+1+0+0=10;
平均差值为:aven3=10/9=1.11
可以看到,采用本申请所述方法也可以显著快进帧之间的运动信息的差值,从而有利于减小视频快进时的抖动。
图7是本申请一个实施例所述视频帧选择设备的模块结构示意图,所述视频帧选择设备700可以作为一个功能模块设置于一视频播放设备内,当然也可以作为一个独立的设备供用户使用。如图7所示,所述设备700可以包括:
一第一确定模块710,用于根据一视频的播放倍率确定最小帧间隔和最大帧间隔;
一第一选择模块720,用于选择一起点帧集合,所述起点帧集合至少包括一第一目标帧;
一第二确定模块730,用于根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合;
一第二选择模块740,用于从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
本申请实施例所述设备,根据播放倍率确定最小帧间隔和最大帧间隔,选择一起点帧集合,所述起点帧集合至少包括一第一目标帧,根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合,从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件,从而提供了一种视频帧选择设备,所述设备选择的视频帧在快进播放时可以有效减小抖动,提高用户体验。
以下将结合具体实施方式,详细说明所述第一确定模块710、第一选择模块720、第二确定模块730和第二选择模块740的功能。
所述第一确定模块710,用于根据一视频的播放倍率确定最小帧间隔和最大帧间隔。
其中,所述播放倍率可以是快进倍率、快退倍率,比如以4倍速快进,则快进倍率为4。
根据所述播放倍率可以确定一标准帧间隔,即按照现有的快进、快退方式以所述播放倍率播放视频时的帧间隔。比如假设播放倍率为N,则标准帧间隔为N-1。所述最小帧间隔应该小于等于所述标准帧间隔,所述最大帧间隔应该大于等于所述标准帧间隔,从而使得本申请所述设备选择的视频帧的平均帧间隔可以接近所述标准帧间隔。
一种实施方式中,所述最大帧间隔和所述最小帧间隔可以由所述标准帧间隔加减一常数得到。
另一种实施方式中,所述最大帧间隔和所述最小帧间隔可以由所述标准帧间隔加减所述标准帧间隔的固定比例得到。
所述第一选择模块720,用于选择一起点帧集合,所述起点帧集合至少包括一第一目标帧。
在一种实施方式中,所述起点帧集合包括一个视频帧,所述一个视频帧可以是当前待处理视频的任一帧。简单起见,所述一个视频帧可以是当前待处理视频的第一帧,相应的,所述第一目标帧即为所述第一帧。也就是说,所述第一选择模块720,用于选择第一帧构成所述起点帧集合。
所述第二确定模块730,用于根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合
其中,所述第一候选帧集合中的帧与所述第一目标帧的帧间隔大于等于所述最小帧间隔且小于等于所述最大帧间隔。
所述第二选择模块740,用于从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
在一种实施方式中,所述预定条件为:所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于第一阈值。
其中,所述运动信息可以包括上下朝向和/或高度。其可以在记录视频时获取,比如在行车记录仪拍摄行车过程中的风景的同时,汽车上另一传感器系统获取汽车的上下朝向、高度等状态信息,并对应拍摄的视频帧存储,作为相应视频帧的运动信息。
当然,本领域技术人员理解,所述运动信息并不限于仅是汽车的状态信息,比如在待处理视频是一用户佩戴的智能眼镜,在用户步行、奔跑、骑车等情况下拍摄时,所述运动信息是拍摄视频时用户的状态信息。简单起见,本申请多以汽车的状态信息为例进行说明。
具体的,所述第二选择模块740,可以计算所述第一候选帧集合中每一帧的运动信息和所述第一目标帧的运动信息的差值,然后选择差值小于所述第一阈值的一帧作为所述第二目标帧。
在另一种实施方式中,所述预定条件为:所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于所述第一候选帧集合中其他帧的运动信息和所述第一目标帧的运动信息的差值。
也就是说,所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值是所述第一候选帧集合中所有帧的运动信息和所述第一帧的运动信息的差值中最小的。具体的,所述第二选择模块740,可以分别计算所述第一候选帧集合中每个帧的运动信息和所述第一帧的运动信息的差值,并将最小差值对应的一帧作为所述第二目标帧。
类似于上述对所述第二目标帧的选择,所述设备可以继续选择下一目标帧,直至遍历所有视频帧。在选择所述第二目标帧的下一目标帧时,
所述第二确定模块730,可以用于根据所述最小帧间隔、所述最大帧间隔和所述第二目标帧,沿第一方向确定下一候选帧集合;
所述第二选择模块740,可以用于从所述下一候选帧集合中选择下一目标帧,所述下一目标帧的运动信息和所述第二目标帧的运动信息满足一预定条件。
换句话说,在已知当前目标帧,选择相邻下一目标帧时,
所述第二确定模块730,可以用于根据所述最小帧间隔、所述最大帧间隔和所述当前目标帧,沿第一方向确定下一候选帧集合;
所述第二选择模块740,可以用于从所述下一候选帧集合中选择下一目标帧,所述下一目标帧的运动信息和所述当前目标帧的运动信息满足一预定条件。
从而,使用本申请所述设备,可以得到所有快进帧(即目标帧),然后可以将这些快进帧显示给用户。
采用上述设备可能出现的一个问题是,最终选择的所有目标帧的数量和按照标准快进方法得到快进帧的数量不一致,并且所述最小帧间隔和所述最大帧间隔之间的差值越大,则上述不一致的情况可能越严重。因此,在一种实施方式中,参见图8,所述设备700还包括:
一第三确定模750,用于根据所述播放倍率确定一标准帧间隔;并且,
所述第二目标帧和所述第一目标帧的帧间隔与所述标准帧间隔的差值小于第二阈值。
也就是说,在选择所述第二目标帧的过程中,除了所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件之外,所述第二目标帧和所述第一目标帧的帧间隔与所述标准帧间隔的差值还要小于第二阈值。
在一种实施方式中,所述起点帧集合还包括一第三目标帧;
所述第二确定模块,还用于根据所述最小帧间隔、所述最大帧间隔和所述第三目标帧,沿与所述第一方向相反的第二方向确定第二候选帧集合;
所述第二选择模块,还用于从所述第二候选帧集合中选择一第四目标帧,所述第四目标帧的运动信息和所述第三目标帧的运动信息满足所述预定条件。
也就是说,所述起点帧集合是一个帧对,其包括第一目标帧和第三目标帧。本领域技术人员理解,根据所述第三目标帧选择所述第四目标帧的原理与根据所述第一目标帧选择所述第二目标帧的原理相同,此处不再赘述。
所述起点帧集合中的第一目标帧和第三目标帧实质上是相邻的两个目标帧,因此,所述第一目标帧和所述第三目标帧的帧间隔大于等于所述最小帧间隔且小于等于所述最大帧间隔,这是所述起点帧集合中两个帧要满足的基本条件。在一种实施方式中,可以随机选择两个满足所述基本条件的帧构成所述起点帧集合。但这种方式选择的两个帧的运动信息差值可能会较大,影响用户体验。
在另一种实施方式中,参见图9,所述设备700还包括:
一第四确定模块760,用于根据所述最小帧间隔、所述最大帧间隔确定多个候选起点帧集合,每个候选起点帧集合包括两个帧;
所述第一选择模块720,用于根据每个所述候选起点帧集合中两个帧的运动信息的差值,从所述多个候选起点帧集合中选择所述起点帧集合。
所述候选起点帧集合中的两个帧也要满足所述基本条件,即所述候选起点帧集合中的两个帧帧间隔大于等于所述最小帧间隔且小于等于所述最大帧间隔,根据该基本条件,可以从待处理视频中选择确定多个候选起点帧集合。
所述第一选择模块720,可以计算每个所述候选起点帧集合中两个帧的运动信息的差值,然后选择差值最小的候选起点帧作为所述起点帧集合,或者,选择差值小于一预定值的候选起点帧作为所述起点帧集合。
为了减小运算量,提高总体的处理速度,参见图10,在一种实施方式中,所述设备700还包括:
一分块模块770,用于对所述视频进行分块处理;
所述第一选择模块720,用于对分块后的每个视频块执行所述选择一起点帧集合的操作。
图11是本申请另一实施例所述视频帧选择设备的模块结构示意图,所述视频帧选择设备1100可以作为一个功能模块设置于一视频播放设备内,当然也可以作为一个独立的设备供用户使用。如图11所示,所述设备1100可以包括:
一第一确定模块1110,用于根据一视频的播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧;
一第二确定模块1120,用于根据所述第一基准帧和所述帧偏移量确定第一目标帧;
一第三确定模块1130,用于根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合;
一选择模块1140,用于从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
本申请实施例所述设备,根据播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧,根据所述第一基准帧和所述帧偏移量确定第一目标帧,根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合,从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件,从而提供了一种视频帧选择设备,所述设备选择的视频帧在快进播放时可以有效减小抖动,提高用户体验。
以下将结合具体实施方式,详细说明所述第一确定模块1110、所述第二确定模块1120、所述第三确定模块1130和所述选择模块1140的功能。
所述第一确定模块1110,用于根据一视频的播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧。
仍以上一实施例所述表1为例,假设播放倍率为4,则所述多个基准帧依次为F1,F5,F9,F13…F37,也就是按照现有快进方式被选择的快进帧。所述帧偏移量表示一所述基准帧为中心,可以左右偏移的帧的数量。所述第一基准帧可以所述多个基准帧中的第一个,即F1,所述第二基准帧可以是所述多个基准帧中的第二个,即F5。
第二确定模块1120,用于根据所述第一基准帧和所述帧偏移量确定第一目标帧。
在一种实施方式中,可以直接选择所述第一基准帧作为所述第一目标帧。
在另一种实施方式中,参见图12,所述第二确定模块1120包括:
一确定单元1121,用于根据所述第一基准帧和所述帧偏移量确定一第一候选帧集合;
一选择单元1122,用于从所述第一候选帧集合中选择一帧作为所述第一目标帧。
假设所述帧偏移量为1,可以确定第一候选帧集合为{F1,F2},其中F1的左侧无视频帧,无法向左偏移。进而可以从所述第一候选帧集合中比如选择F2作为第一目标帧。
所述第三确定模块1130,用于根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合。
如前文所述,所述第二基准帧可以为F5,帧偏移量为1,则所述第二候选帧集合为{F4,F5,F6}。
所述选择模块1140,用于从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
在一种实施方式中,所述预定条件可以为:所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于第一阈值。
在另一种实施方式中,所述预定条件可以为:所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于所述第二候选帧集合中其他帧的运动信息和所述第一目标帧的运动信息的差值。具体的,可以计算所述第二候选帧集合中各帧的运动信息和所述第一目标帧的运动信息的差值,然后选择差值最小的帧作为所述第二目标帧。
本申请一个实施例所述视频帧选择设备的硬件结构如图13所示。本申请具体实施例并不对所述视频帧选择设备的具体实现做限定,参见图13,所述设备1300可以包括:
处理器(processor)1310、通信接口(Communications Interface)1320、存储器(memory)1330,以及通信总线1340。其中:
处理器1310、通信接口1320,以及存储器1330通过通信总线1340完成相互间的通信。
通信接口1320,用于与其他网元通信。
处理器1310,用于执行程序1332,具体可以执行上述图1所示的方法实施例中的相关步骤。
具体地,程序1332可以包括程序代码,所述程序代码包括计算机操作指令。
处理器1310可能是一个中央处理器CPU,或者是特定集成电路ASIC(Application Specific Integrated Circuit),或者是被配置成实施本申请实施例的一个或多个集成电路。
存储器1330,用于存放程序1332。存储器1330可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。程序1332具体可以执行以下步骤:
根据一视频的播放倍率确定最小帧间隔和最大帧间隔;
选择一起点帧集合,所述起点帧集合至少包括一第一目标帧;
根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合;
从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
程序1332中各步骤的具体实现可以参见上述实施例中的相应步骤或模块,在此不赘述。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的设备和模块的具体工作过程,可以参考前述方法实施例中的对应过程描述,在此不再赘述。
本申请一个实施例所述视频帧选择设备的硬件结构如图14所示。本申请具体实施例并不对所述视频帧选择设备的具体实现做限定,参见图14,所述设备1400可以包括:
处理器(processor)1410、通信接口(Communications Interface)1420、存储器(memory)1430,以及通信总线1440。其中:
处理器1410、通信接口1420,以及存储器1430通过通信总线1440完成相互间的通信。
通信接口1420,用于与其他网元通信。
处理器1410,用于执行程序1432,具体可以执行上述图1所示的方法实施例中的相关步骤。
具体地,程序1432可以包括程序代码,所述程序代码包括计算机操作指令。
处理器1410可能是一个中央处理器CPU,或者是特定集成电路ASIC(Application Specific Integrated Circuit),或者是被配置成实施本申请实施例的一个或多个集成电路。
存储器1430,用于存放程序1432。存储器1430可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。程序1432具体可以执行以下步骤:
根据一视频的播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧;
根据所述第一基准帧和所述帧偏移量确定第一目标帧;
根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合;
从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
程序1432中各步骤的具体实现可以参见上述实施例中的相应步骤或模块,在此不赘述。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的设备和模块的具体工作过程,可以参考前述方法实施例中的对应过程描述,在此不再赘述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及方法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,控制器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上实施方式仅用于说明本申请,而并非对本申请的限制,有关技术领域的普通技术人员,在不脱离本申请的精神和范围的情况下,还可以做出各种变化和变型,因此所有等同的技术方案也属于本申请的范畴,本申请的专利保护范围应由权利要求限定。
Claims (10)
1.一种视频帧选择方法,其特征在于,所述方法包括:
根据一视频的播放倍率确定最小帧间隔和最大帧间隔;
选择一起点帧集合,所述起点帧集合至少包括一第一目标帧;
根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合;
从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
2.如权利要求1所述的方法,其特征在于,所述第一候选帧集合中的帧与所述第一目标帧的帧间隔大于等于所述最小帧间隔且小于等于所述最大帧间隔。
3.如权利要求1至2任一项所述的方法,其特征在于,所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于第一阈值。
4.如权利要求1至3任一项所述的方法,其特征在于,所述第二目标帧的运动信息和所述第一目标帧的运动信息的差值小于所述第一候选帧集合中其他帧的运动信息和所述第一目标帧的运动信息的差值。
5.一种视频帧选择设备,其特征在于,所述设备包括:
一第一确定模块,用于根据一视频的播放倍率确定最小帧间隔和最大帧间隔;
一第一选择模块,用于选择一起点帧集合,所述起点帧集合至少包括一第一目标帧;
一第二确定模块,用于根据所述最小帧间隔、所述最大帧间隔和所述第一目标帧,沿第一方向确定第一候选帧集合;
一第二选择模块,用于从所述第一候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
6.一种视频播放设备,其特征在于,所述视频播放设备包括权利要求5所述视频帧选择设备。
7.一种视频帧选择方法,其特征在于,所述方法包括:
根据一视频的播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧;
根据所述第一基准帧和所述帧偏移量确定第一目标帧;
根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合;
从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
8.如权利要求7所述的方法,其特征在于,所述根据所述第一基准帧和所述帧偏移量确定第一目标帧包括:
根据所述第一基准帧和所述帧偏移量确定一第一候选帧集合;
从所述第一候选帧集合中选择一帧作为所述第一目标帧。
9.一种视频帧选择设备,其特征在于,所述设备包括:
一第一确定模块,用于根据一视频的播放倍率确定帧偏移量和多个基准帧,所述多个基准帧至少包括第一基准帧和第二基准帧;
一第二确定模块,用于根据所述第一基准帧和所述帧偏移量确定第一目标帧;
一第三确定模块,用于根据所述帧偏移量和所述第二基准帧,确定一第二候选帧集合;
一选择模块,用于从所述第二候选帧集合中选择一第二目标帧,所述第二目标帧的运动信息和所述第一目标帧的运动信息满足一预定条件。
10.一种视频播放设备,其特征在于,所述视频播放设备包括权利要求9所述视频帧选择设备。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410697043.XA CN104394344B (zh) | 2014-11-26 | 2014-11-26 | 视频帧选择方法和设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410697043.XA CN104394344B (zh) | 2014-11-26 | 2014-11-26 | 视频帧选择方法和设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104394344A true CN104394344A (zh) | 2015-03-04 |
CN104394344B CN104394344B (zh) | 2018-02-02 |
Family
ID=52612173
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410697043.XA Active CN104394344B (zh) | 2014-11-26 | 2014-11-26 | 视频帧选择方法和设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104394344B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106295587A (zh) * | 2016-08-16 | 2017-01-04 | 块互动(北京)科技有限公司 | 一种视频感兴趣区域快速标定方法与装置 |
CN110740266A (zh) * | 2019-11-01 | 2020-01-31 | Oppo广东移动通信有限公司 | 图像选帧方法、装置、存储介质及电子设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101025987A (zh) * | 2006-02-21 | 2007-08-29 | 广州市纽帝亚资讯科技有限公司 | 基于视频内容的视频播放的快进快退方法与设备 |
US20120141088A1 (en) * | 2010-12-07 | 2012-06-07 | Sony Corporation | Information processing apparatus, information processing method, and program |
CN102883217A (zh) * | 2012-09-26 | 2013-01-16 | 华为技术有限公司 | 控制视频播放的方法及装置 |
WO2013051628A1 (ja) * | 2011-10-04 | 2013-04-11 | シャープ株式会社 | シーンチェンジ検出装置、表示装置、シーンチェンジ検出方法およびシーンチェンジ検出プログラム |
CN103118300A (zh) * | 2013-02-06 | 2013-05-22 | 北京佳视互动科技股份有限公司 | 一种网络媒体流的播放控制方法及装置 |
CN103366783A (zh) * | 2012-03-29 | 2013-10-23 | 百度在线网络技术(北京)有限公司 | 用于调整视频信息的播放时间点的方法、装置和设备 |
-
2014
- 2014-11-26 CN CN201410697043.XA patent/CN104394344B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101025987A (zh) * | 2006-02-21 | 2007-08-29 | 广州市纽帝亚资讯科技有限公司 | 基于视频内容的视频播放的快进快退方法与设备 |
US20120141088A1 (en) * | 2010-12-07 | 2012-06-07 | Sony Corporation | Information processing apparatus, information processing method, and program |
WO2013051628A1 (ja) * | 2011-10-04 | 2013-04-11 | シャープ株式会社 | シーンチェンジ検出装置、表示装置、シーンチェンジ検出方法およびシーンチェンジ検出プログラム |
CN103366783A (zh) * | 2012-03-29 | 2013-10-23 | 百度在线网络技术(北京)有限公司 | 用于调整视频信息的播放时间点的方法、装置和设备 |
CN102883217A (zh) * | 2012-09-26 | 2013-01-16 | 华为技术有限公司 | 控制视频播放的方法及装置 |
CN103118300A (zh) * | 2013-02-06 | 2013-05-22 | 北京佳视互动科技股份有限公司 | 一种网络媒体流的播放控制方法及装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106295587A (zh) * | 2016-08-16 | 2017-01-04 | 块互动(北京)科技有限公司 | 一种视频感兴趣区域快速标定方法与装置 |
CN110740266A (zh) * | 2019-11-01 | 2020-01-31 | Oppo广东移动通信有限公司 | 图像选帧方法、装置、存储介质及电子设备 |
CN110740266B (zh) * | 2019-11-01 | 2021-01-26 | Oppo广东移动通信有限公司 | 图像选帧方法、装置、存储介质及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN104394344B (zh) | 2018-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102461150B (zh) | 用于视频图像序列中的运动估计的方法和设备 | |
EP2608148B1 (en) | Method and apparatus for generating multi-view | |
CN102037730B (zh) | 内容自适应视频编码器和编码方法 | |
CN100499778C (zh) | 用于使用迭代质心来估计摄像机模型参数的方法和装置 | |
CN101536507B (zh) | 图像显示装置及方法、图像处理装置及方法 | |
US20070109446A1 (en) | Method, medium, and system generating video abstract information | |
US20110150095A1 (en) | Image encoding/decoding apparatus and method | |
CN102187680A (zh) | 用于确定图像序列的二维或三维显示模式的方法和设备 | |
CN102256095A (zh) | 电子装置、视频处理方法和程序 | |
US20110026766A1 (en) | Moving image extracting apparatus, program and moving image extracting method | |
CN110781740B (zh) | 一种视频画质识别方法、系统及设备 | |
CN101796844A (zh) | 用于估计和补偿图像的时空运动的方法和设备 | |
EP2693753A1 (en) | Method of converting 2-dimension images into 3-dimension images and display apparatus thereof | |
US7646818B2 (en) | Method and related system for high efficiency advertising detection | |
CN104394344A (zh) | 视频帧选择方法和设备 | |
CN108989799A (zh) | 一种编码单元参考帧的选择方法、装置及电子设备 | |
CN101364305A (zh) | 电子装置、运动向量检测方法和其程序 | |
Kokaram et al. | Motion‐based frame interpolation for film and television effects | |
JP4537348B2 (ja) | Mpeg画質補正装置、及びmpeg画質補正方法 | |
JP2008171247A (ja) | 動き検出装置、方法、及びプログラム | |
CN103974142A (zh) | 一种视频播放方法及系统 | |
US20160309157A1 (en) | Method and system to detect and utilize attributes of frames in video sequences | |
US8805104B1 (en) | Selecting example-based predictors based on spatial continuity | |
CN113747166B (zh) | 一种编解码方法、装置及其设备 | |
US20100020667A1 (en) | Information processing apparatus, information processing method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |