CN108234859A - 视频防抖控制方法、装置、计算机装置及可读存储介质 - Google Patents
视频防抖控制方法、装置、计算机装置及可读存储介质 Download PDFInfo
- Publication number
- CN108234859A CN108234859A CN201710765748.4A CN201710765748A CN108234859A CN 108234859 A CN108234859 A CN 108234859A CN 201710765748 A CN201710765748 A CN 201710765748A CN 108234859 A CN108234859 A CN 108234859A
- Authority
- CN
- China
- Prior art keywords
- frame image
- reference frame
- offset
- current frame
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本发明提供一种视频防抖控制方法，应用于处于视频拍摄模式下的终端，所述方法包括：计算视频的当前帧图像相对于原基准帧图像的偏移量；判断所述偏移量是否超过预设偏移阈值；若所述偏移量超过所述预设偏移阈值，则将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。本发明还提供一种视频防抖控制装置、计算机装置及可读存储介质。本发明当帧间偏移量超过预设偏移阈值时，将当前帧图像替换原基准帧图像而作为新基准帧图像，在视频拍摄时，更有利于后续帧的偏移处理，可提高拍摄的视频质量。
Description
技术领域
本发明涉及电子技术领域，具体涉及一种视频防抖控制方法、装置、计算机装置及可读存储介质。
背景技术
本部分旨在为权利要求书中及具体实施方式中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
目前大多数的电子设备例如手机都设有摄像装置，可通过摄像装置，例如摄像头进行视频拍摄。现有的电子设备在视频拍摄过程中，常因为电子设备抖动而导致拍摄的视频出现抖动，导致所拍摄的视频质量下降。
发明内容
鉴于此，有必要提供一种视频防抖控制方法、装置、计算机装置及可读存储介质，当帧间偏移量超过预设偏移阈值时，将当前帧图像替换原基准帧图像而作为新基准帧图像，在视频拍摄时，更有利于后续帧的偏移处理，可提高拍摄的视频质量。
本发明的提供一种视频防抖控制方法，应用于处于视频拍摄模式下的终端，所述方法包括：
计算视频的当前帧图像相对于原基准帧图像的偏移量；
判断所述偏移量是否超过预设偏移阈值；
若所述偏移量超过所述预设偏移阈值，则将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。
进一步的，所述方法还包括：
当接收到缩放指令时，根据缩放倍数预估所述当前帧图像的预设区域缩放后应占的显示区域大小；所述预设区域包括感兴趣区域和/或特征区域块；
若所述预设区域缩放后应占的显示区域大小超过预设阈值，则对所述当前帧图像进行插值处理。
进一步的，所述计算视频的当前帧图像相对于原基准帧图像的偏移量，包括：
获取所述原基准帧图像的特征区域块；
根据所述原基准帧图像的特征区域块，确定所述当前帧图像的特征区域块；
计算所述原基准帧图像的特征区域块相对于所述当前帧图像的特征区域块的偏移数据；
根据各特征区域块的偏移数据，按照预设规则确定所述当前帧图像相对于所述原基准帧图像的偏移量。
进一步的，所述“根据所述原基准帧图像的特征区域块，确定所述当前帧图像的特征区域块”，包括：
根据所述原基准帧图像的特征区域块中的显著性特征，对所述当前帧图像的运动方向进行预估，并确定所述当前帧图像的特征区域块。
进一步的，所述获取所述原基准帧图像的特征区域块，包括：
将所述原基准帧图像划分成多个区域；
提取每一区域中的图像特征点；
根据所述图像特征点，确定所述原基准帧图像的特征区域块。
进一步的，所述“根据所述原基准帧图像的特征区域块，确定所述当前帧图像的特征区域块”，包括：
根据所述原基准帧图像的图像特征点的位置，对所述当前帧图像的运动方向进行预估；
确定与所述原基准帧图像的特征区域块匹配的所述当前帧图像的特征区域块。
进一步的，在所述判断所述偏移量是否超过预设偏移阈值之后，所述方法还包括：
若所述偏移量未超过所述预设偏移阈值，则根据所述偏移量将所述当前帧图像进行平滑偏移处理。
本发明还提供一种视频防抖控制装置，应用于处于视频拍摄模式下的终端，所述装置包括：
计算模块，用于计算视频的当前帧图像相对于原基准帧图像的偏移量；
判断模块，用于判断所述偏移量是否超过预设偏移阈值；
控制模块，用于在所述偏移量超过所述预设偏移阈值时，控制将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。
本发明还提供一种计算机装置，所述计算机装置包括处理器，所述处理器用于执行存储装置中存储的计算机程序时实现如上所述的视频防抖控制方法的步骤。
本发明还提供一种计算机可读存储介质，其上存储有计算机程序(指令)，其特征在于，所述计算机程序(指令)被处理器执行时实现如上所述的视频防抖控制方法的步骤。
本发明提供的视频防抖控制方法、装置、计算机装置及可读存储介质，应用于处于视频拍摄模式下的终端，计算视频的当前帧图像相对于原基准帧图像的偏移量；判断所述偏移量是否超过预设偏移阈值；若所述偏移量超过所述预设偏移阈值，则将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。本发明在偏移量超过所述预设偏移阈值时，将当前帧图像替换原基准帧图像而作为新基准帧图像，后续帧图像参考新基准帧图像来进行偏移处理，在视频拍摄时，更有利于后续帧的偏移处理，可提高拍摄的视频质量。
附图说明
为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明第一实施方式提供的视频防抖控制方法的流程图；
图2是本发明第二实施方式提供的视频防抖控制方法的流程图；
图3是本发明第三实施方式提供的视频防抖控制方法的流程图；
图4是本发明第三实施方式中步骤S301的子步骤流程图；
图5是本发明第三实施方式中步骤S302的子步骤流程图；
图6是本发明的终端的示例性的结构图；
图7是本发明的视频防抖控制装置的示例性的功能模块图；
图8是本发明的计算模块的示例性的功能单元图。
图9是本发明的获取单元的示例性的功能子单元图。
图10是本发明的第一确定单元的示例性的功能子单元图。
主要元件符号说明
如下具体实施方式将结合上述附图进一步说明本发明。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点，下面结合附图和具体实施例对本发明进行详细描述。需要说明的是，在不冲突的情况下，本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本发明。
图1为本发明第一实施方式提供的视频防抖控制方法的示意流程图，所述视频防抖控制方法可应用于具有视频拍摄功能的终端中，所述视频拍摄功能可以通过终端设置的拍摄装置来实现，所述终端在视频拍摄时，可应用所述视频防抖控制方法进行视频防抖控制。
本发明所指的终端，可以为手机、照相机、单反相机、摄像机、游戏机、导航装置、平板电脑、掌上电脑、笔记本电脑、台式电脑、车载设备等可以运行拍摄应用软件的终端，在此不作限制。
如图1所示，本实施方式提供的视频防抖控制方法可包括以下步骤：
S101：计算视频的当前帧图像相对于原基准帧图像的偏移量。
所述当前帧图像是属于待处理的帧图像，所述原基准帧可以是视频拍摄开始时获取的第一帧图像，或者也可以是视频拍摄过程中的预设的一帧图像，或者也可以是所述当前帧图像的前一帧图像，在此不作限定。
可以根据当前帧图像的水平和垂直方向分别相对于原基准帧图像的水平和垂直方向的偏移量(设水平方向的偏移量为Δx1，竖直方向的偏移量为Δy1)来确定当前帧图像相对于原基准帧图像的偏移量(Δx1，Δy1)，例如也可以将当前帧图像的特征区域块与原基准帧图像相对应的特征区域块的偏移量来确定当前帧图像相对于原基准帧图像的偏移量。
S102：判断所述偏移量是否超过预设偏移阈值，若所述偏移量超过预设偏移阈值，则执行步骤S103。
可以理解的是，本实施方式可以预先设置预设偏移阈值(Δx0，Δy0)，若所述偏移量(Δx1，Δy1)超过预设偏移阈值(Δx0，Δy0)，则执行步骤S103。
S103：将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。
在执行完所述步骤S103之后，本实施方式所述的视频防抖控制方法可以结束，在所述当前帧图像之后的后续帧图像将依据相对于新基准帧图像的偏移量来进行偏移处理，可以理解的是，若后续帧图像相对于当前帧图像的偏移量超过预设偏移阈值，则可以将所述后续帧图像替换所述新基准帧图像而作为最新基准帧图像。
可以理解的是，本实施方式的视频防抖控制方法还可以包括步骤S104：根据所述偏移量将所述当前帧图像进行平滑偏移处理。所述步骤S104是在当步骤S102中判断所述偏移量未超过预设偏移阈值时执行的，可以理解的是，若步骤S102中判断所述偏移量未超过预设偏移阈值时，可以结束流程或者继续执行步骤S101。
所述平滑偏移处理可以采用高斯平滑操作，例如可以设定特征区域块为跟随位置，根据当前帧图像的位置参数(x1，y1)以及原基准帧图像的位置参数(x2，y2)来实现平滑偏移处理。
本实施方式所提供的视频防抖控制方法应用在处于拍摄模式的终端，计算视频的当前帧图像相对于原基准帧图像的偏移量；判断所述偏移量是否超过预设偏移阈值；若所述偏移量超过所述预设偏移阈值，则将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。本实施方式在偏移量超过所述预设偏移阈值时，将当前帧图像替换原基准帧图像而作为新基准帧图像，后续帧图像参考新基准帧图像来进行偏移处理，在视频拍摄时，更有利于后续帧的偏移处理，可提高的视频质量。
图2为本发明第二实施方式提供的视频防抖控制方法的示意流程图。所述第二实施方式与第一实施方式的主要区别在于，第二实施方式中包括了对所述当前帧图像进行插值处理的步骤。需要说明的是，在本发明的精神或基本特征的范围内，适用于第一实施方式中的各具体方案也可以相应的适用于第二实施方式中，为节省篇幅及避免重复起见，在此就不再赘述。
S201：计算视频的当前帧图像相对于原基准帧图像的偏移量。
S202：判断所述偏移量是否超过预设偏移阈值，若所述偏移量超过预设偏移阈值，则执行步骤S203，若所述偏移量未超过预设偏移阈值，则结束流程。
可以理解的是，若步骤S202中判断所述偏移量未超过预设偏移阈值时，也可以根据所述偏移量将所述当前帧图像进行平滑偏移处理后再结束流程。
S203：将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。
S204：当接收到缩放指令时，根据缩放倍数预估所述当前帧图像的预设区域缩放后应占的显示区域大小。
当所述终端处于拍摄模式下时，拍摄视频时，实时跟踪所述原基准帧图像的预设区域，其中，所述预设区域可以包括但不限于感兴趣区域和/或特征区域块；当用户对视频拍摄进行缩放操作(zoom)时，所述缩放操作包括具有缩放倍数(zoom_scale)的缩放操作，终端会接收到缩放指令，则根据缩放倍数预估所述当前帧图像的预设区域缩放后应占的显示区域大小。
例如当所述预设区域为感兴趣区域时，则根据缩放倍数对所述当前帧图像的感兴趣区域缩放后占显示区域大小进行预估，可以得到感兴趣区域的缩放程度。
S205：判断所述预设区域缩放后应占的显示区域大小是否超过预设阈值，若所述预设区域缩放后应占的显示区域大小超过预设阈值，则执行步骤S206，若所述预设区域缩放后应占的显示区域大小未超过预设阈值，则结束流程。
所述超过预设阈值包括大于或者等于预设阈值，可以理解的是，若所述预设区域缩放后应占的显示区域大小未超过预设阈值也可不结束流程而重复执行步骤S204。
S206：对所述当前帧图像进行插值处理。
所述对所述当前帧图像进行插值处理可以采用的方式包括但不限于：最近邻插值法、双线性插值法和立方卷积插值法。
本实施方式中，可以根据预估得到的当前帧图像的感兴趣区域缩放后占显示区域大小的不同来选择不同的插值处理方法，例如，缩放大小越大，可采用算法越为复杂的插值处理方法，同理，缩放大小越小，可以采用算法越为简单的插值处理方法，例如，当用户对视频拍摄进行缩放操作时，如果预估得到的当前帧图像的感兴趣区域缩放后占显示区域大小大于第一预设阈值时，可以采用第一插值方法，而当大于第二预设阈值时，可以采用第二插值方法，以此类推，其中第一预设阈值小于第二预设阈值，第一插值方法比第二插值方法的算法更为简单，例如第一插值方法可以采用最近邻插值法，第二插值方法可以采用双线性插值法。
通过对所述当前帧图像进行插值处理之后，可以很好地平滑用户对视频拍摄进行的缩放操作，提高缩放时视频帧图像的质量。
可以理解的是，本实施方式的步骤S204-S206可以在步骤S201之前进行，也就是说，本实施方式可以先进行插值处理之后再进行平滑偏移处理。
本实施方式除了具有第一实施方式的有益效果之外，还包括插值处理步骤，当接收到缩放指令时，根据缩放倍数预估所述当前帧图像的预设区域缩放后应占的显示区域大小，若所述预设区域缩放后应占的显示区域大小超过预设阈值，则对所述当前帧图像进行插值处理。因此，在视频拍摄具有缩放操作时，进行插值处理可以很好地平滑缩放操作，使放大后图像质量更加完善。
图3为本发明第三实施方式提供的视频防抖控制方法的示意流程图。所述第三实施方式与第一实施方式的主要区别在于，第三实施方式中包括了如何计算视频的当前帧图像相对于原基准帧图像的偏移量的详细内容。需要说明的是，在本发明的精神或基本特征的范围内，适用于第一实施方式或者第二实施方式中的各具体方案也可以相应的适用于第三实施方式中，为节省篇幅及避免重复起见，在此就不再赘述。
本实施方式的具体方法步骤如下：
S301：获取所述原基准帧图像的特征区域块。
本实施方式步骤S301，参看图4所示，可以包括如下子步骤：
S3010：将所述基准帧划分成多个区域。例如可以将所述基准帧图像划分成M*N个区域，其中M和N为大于1的自然数，M和N可以是相等的值(例如均为10)，也可以是不相等的值(例如M为8，N为10)。
应当理解的是，在本实施方式中，可以将原基准帧图像全部划分成M*N个区域，也可以是将原基准帧图像的部分划分成M*N个区域，例如可以将原基准帧图像的左半边部分或者中间的部分区域划分为M*N个区域，在此不作限定。
S3011：据划分的多个区域，提取每个区域中的图像特征点。其中所述图像特征可以包括颜色特征、纹理特征、形状特征、空间关系，所述图像特征点例如可以包括角点(Corner point)、感兴趣点(Interest point)、边缘(Edge pixel)等图像特征点，所述图像特征点可以包括每个区域中最明显的图像特征点，可将每个区域中的图像特征点提出后标记其位置为feature_pts_locations。
S13：根据所述图像特征点确定所述原基准帧图像的特征区域块。例如可以基于所述原基准帧图像的图像特征点的feature_pts_locations，确定所述原基准帧图像的特征区域块。
可以理解的是，所述当前帧图像也可以采用原基准帧图像相同的方式划分成多个区域，
S302：根据所述原基准帧图像的特征区域块，确定所述当前帧图像的特征区域块。
本实施方式的步骤S302，可以根据所述原基准帧图像的特征区域块中的显著性特征，对所述当前帧图像的运动方向进行预估，并确定所述当前帧图像的特征区域块，可以通过评估所述原基准帧图像的显著性特征，快速确定所述当前帧图像的感兴趣区域，可以将当前帧图像的感兴趣区域标记其区域为src_roi。
本实施方式的步骤S302，可参看图5所示，还可以包括如下子步骤：
S3021：根据所述原基准帧图像的图像特征点的位置，对所述当前帧图像的运动方向进行预估。
所述原基准帧图像的图像特征点的位置feature_pts_locations可以通过本实施方式的步骤S201的方式得到，基于所述原基准帧图像的feature_pts_locations，可以对所述当前帧图像的运动方向进行预估，得到所述当前帧图像相对于所述原基准帧图像的图像特征点的大致运动方向。
S3022：确定与所述原基准帧图像的特征区域块匹配的所述当前帧图像的特征区域块。
可以通过所述基准帧图像划分的每个特征区域块与所述当前帧图像的每个特征区域块进行全局特征快速区域块匹配，可有效提高匹配效率，提高视频防抖控制速度。
S303：计算所述原基准帧图像的特征区域块相对于所述当前帧图像的特征区域块的偏移数据。
示例性的，若确定的当前帧图像的特征区域块在当前帧图像的坐标位置为(x1，y1)，确定的原基准帧图像的特征区域块在原基准帧图像的坐标位置为(x2，y2)，则得到的匹配的特征区域块的偏移数据为(x2-x1，y2-y1)。
S304：根据各特征区域块的偏移数据，按照预设规则确定所述当前帧图像相对于所述原基准帧图像的偏移量。
所述预设规则，可以采用“少数服从多数的原则”，根据大部分的特征区域块的偏移量(x2-x1，y2-y1)来裁定所述当前帧图像相对于所述原基准帧的偏移量(Δx1，Δy1)，或者可以根据各特征区域块的偏移量(x2-x1，y2-y1)中超过预设个数的特征区域块的偏移量(x2-x1，y2-y1)相同或者大致相同时，可以确定以预设个数的特征区域块的偏移量相同或者大致相同的偏移量(x2-x1，y2-y1)作为所述当前帧图像相对于所述原基准帧图像的偏移量(Δx1，Δy1)，或者也可以采用各特征区域块的偏移量的平均值作为所述当前帧图像相对于所述原基准帧图像的偏移量(Δx1，Δy1)。
S305：判断所述偏移量是否超过预设偏移阈值，若所述偏移量超过预设偏移阈值，则执行步骤S306，若所述偏移量未超过预设偏移阈值，则结束流程。
可以理解的是，若步骤S305中判断所述偏移量未超过预设偏移阈值时，也可以根据所述偏移量将所述当前帧图像进行平滑偏移处理后再结束流程。
S306：将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。
本实施方式除了具有第一实施方式的有益效果之外，包括了如何计算视频的当前帧图像相对于原基准帧图像的偏移量的详细内容，先获取所述原基准帧图像的特征区域块，根据所述原基准帧图像的特征区域块，确定所述当前帧图像的特征区域块，计算所述原基准帧图像的特征区域块相对于所述当前帧图像的特征区域块的偏移数据，根据各特征区域块的偏移数据，按照预设规则确定所述当前帧图像相对于所述原基准帧图像的偏移量，若所述偏移量超过预设偏移阈值则将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。本实施方式所提供的视频防抖控制方法，能够在确保偏移准确性的基础上，快速完成偏移量计算，进一步提高视频防抖控制的速度以及视频质量。
图6为本发明提供的终端1的一种实施例的结构图，如图6所示，所述终端1可应用上述各实施方式，下面对本发明所提供的终端1进行描述，所述终端1可以包括视频防抖控制装置100，终端1还可包括处理器10、存储装置20、拍摄装置30、显示装置40，以及存储在所述存储装置20中并可向所述处理器10上运行的计算机程序(指令)，例如视频防抖控制程序、应用程序等，所述拍摄装置30可以用于拍摄视频、摄像、拍照等，通过所述终端1启动拍摄装置30时，此时终端1可处于拍摄模式下，所述显示装置40可以用于显示通过所述拍摄装置30拍摄的视频(包括拍摄时的视频、拍摄后播放的视频等)、摄取的影像或者拍摄的照片等。
所述视频防抖控制装置100，可用于计算视频的当前帧图像相对于原基准帧图像的偏移量，判断所述偏移量是否超过预设偏移阈值，若所述偏移量超过预设偏移阈值，所述偏移量超过预设偏移阈值，则将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。在偏移量超过所述预设偏移阈值时，将当前帧图像替换原基准帧图像而作为新基准帧图像，后续帧图像参考新基准帧图像来进行偏移处理，提高视频防抖控制的速度以及视频质量。
所述视频防抖控制装置100，还可以用于计算视频的当前帧图像相对于原基准帧图像的偏移量，判断所述偏移量是否超过预设偏移阈值，若所述偏移量超过预设偏移阈值，将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像，当接收到缩放指令时，根据缩放倍数预估所述当前帧图像的预设区域缩放后应占的显示区域大小，若所述预设区域缩放后应占的显示区域大小超过预设阈值，则对所述当前帧图像进行插值处理。在视频拍摄具有缩放操作时，进行插值处理可以很好地平滑缩放操作，使放大后图像质量更加完善。
所述视频防抖控制装置100，还可以用于获取所述原基准帧图像的特征区域块，根据所述原基准帧图像的特征区域块，确定所述当前帧图像的特征区域块，计算所述原基准帧图像的特征区域块相对于所述当前帧图像的特征区域块的偏移数据，根据各特征区域块的偏移数据，按照预设规则确定所述当前帧图像相对于所述原基准帧图像的偏移量，判断所述偏移量是否超过预设偏移阈值，若所述偏移量超过预设偏移阈值，则将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。能够在确保偏移准确性的基础上，快速完成偏移量计算，进一步提高视频防抖控制的速度以及视频质量。
所述处理器10执行所述计算机程序时实现上述各个实施例中视频防抖控制方法中的步骤，例如图1所示的步骤S101-S103。或者，所述处理器10执行所述计算机程序时实现各模块/单元的功能。
示例性的，所述计算机程序可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储装置20中，并由所述处理器10执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序在所述终端1中的执行过程。例如，所述视频防抖控制装置100可以包括计算模块11、判断模块12、控制模块13，如图7所示，各模块具体功能如下：
所述计算模块11，可用于计算视频的当前帧图像相对于原基准帧图像的偏移量。
所述判断模块12，可用于判断所述偏移量是否超过预设偏移阈值。
所述控制模块13，可用于当所述偏移量超过所述预设偏移阈值时，将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。
所述控制模块13，还可用于当所述偏移量未超过所述预设偏移阈值时，根据所述偏移量将所述当前帧图像进行平滑偏移处理。
进一步的，所述视频防抖控制装置100还可以包括预估模块14、处理模块15。
所述预估模块14，可用于当接收到缩放指令时，根据缩放倍数预估所述当前帧图像的预设区域缩放后应占的显示区域大小；所述预设区域包括感兴趣区域和/或特征区域块。
所述处理模块15，可用于当所述预设区域缩放后应占的显示区域大小超过预设阈值时，对所述当前帧图像进行插值处理。
进一步的，如图8所示，所述计算模块11可以包括获取单元111、第一确定单元112、计算单元113、第二确定单元114，各单元具体功能如下：
所述获取单元111，可用于获取所述原基准帧图像的特征区域块。
所述第一确定单元112，可用于根据所述原基准帧图像的特征区域块，确定所述当前帧图像的特征区域块。所述确定单元112还可以用于根据所述原基准帧图像的特征区域块中的显著性特征，对所述当前帧图像的运动方向进行预估，并确定所述当前帧图像的特征区域块。
所述计算单元113，可用于计算所述原基准帧图像的特征区域块相对于所述当前帧图像的特征区域块的偏移数据。
所述第二确定单元114，可用于根据各特征区域块的偏移数据，按照预设规则确定所述当前帧图像相对于所述原基准帧图像的偏移量。
进一步的，如图9所示，所述获取单元111可以包括划分子单元1111、提取子单元1112、第一确定子单元1113，各子单元具体功能如下：
所述划分子单元1111，可用于将所述原基准帧图像划分成多个区域。
所述提取子单元1112，可用于提取每一区域中的图像特征点。
所述确定子单元1113，可用于根据所述图像特征点，确定所述原基准帧图像的特征区域块。
进一步的，如图10所示，所述第一确定单元112可以包括预估子单元1121，第二确定子单元1122，各子单元具体功能如下：
所述预估子单元1121，可用于根据所述原基准帧图像的图像特征点的位置，对所述当前帧图像的运动方向进行预估。
所述第二确定子单元1122，可用于确定与所述原基准帧图像的特征区域块匹配的所述当前帧图像的特征区域块。
所述终端1可以是PC服务器及云端服务器等计算设备。本领域技术人员可以理解，所述示意图仅仅是终端1的示例，并不构成对终端1的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述终端1还可以包括输入输出设备、网络接入设备、总线等。
所述处理器10可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，所述处理器是所述终端1的控制中心，利用各种接口和线路连接整个终端1的各个部分。
所述存储装置20可用于存储所述计算机程序和/或模块，也可以用于存储视频防抖控制装置100以及通过拍摄装置30拍摄的视频，所述处理器10通过运行或执行存储在所述存储装置20内的计算机程序和/或模块，以及调用存储在存储装置20内的数据，实现各种功能。所述存储装置20可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如视频防抖控制功能、视频拍摄功能等)等；存储数据区可存储根据终端的使用所创建的数据(比如视频等)等。此外，存储装置20可以包括高速随机存取存储装置，还可以包括非易失性存储装置，例如硬盘、内存、插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)、至少一个磁盘存储装置件、闪存器件、或其他易失性固态存储装置件。
所述拍摄装置30可以用于拍摄视频，也可以用于拍摄照片等，所述拍摄装置30可以包括但不限于：终端自带的摄相机、摄影头等视频捕获装置，用户自行安装的摄像装置等，通过终端启动拍摄装置后，终端可进入拍摄模式，处于拍摄模式下的终端，可应用本发明提供的视频防抖控制方法进行视频拍摄。
显示装置40可以显示用户界面、视频界面、图形用户界面，显示装置40还可以用作输入装置和输出装置，显示装置可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等中的至少一种。
所述终端1集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。
在本发明所提供的几个实施例中，应当理解的是，所述的方法和装置，也可以通过其他的方式来实现，以上所描述的装置实施例仅是示意性的，所述模块的划分，仅仅是一种逻辑功能划分，实现时可以有另外的划分方式。
对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。装置权利要求中陈述的多个装置也可以由同一个装置或系统通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。
最后应说明的是，以上实施例仅用以说明本发明的技术方案而非限制，尽管参照较佳实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或等同替换，而不脱离本发明技术方案的精神和范围。
Claims (10)
1.一种视频防抖控制方法，应用于处于视频拍摄模式下的终端，其特征在于，所述方法包括：
计算视频的当前帧图像相对于原基准帧图像的偏移量；
判断所述偏移量是否超过预设偏移阈值；
若所述偏移量超过所述预设偏移阈值，则将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。
2.根据权利要求1所述的视频防抖控制方法，其特征在于，还包括：
当接收到缩放指令时，根据缩放倍数预估所述当前帧图像的预设区域缩放后应占的显示区域大小；所述预设区域包括感兴趣区域和/或特征区域块；
若所述预设区域缩放后应占的显示区域大小超过预设阈值，则对所述当前帧图像进行插值处理。
3.根据权利要求1或2所述的视频防抖控制方法，其特征在于，所述计算视频的当前帧图像相对于原基准帧图像的偏移量，包括：
获取所述原基准帧图像的特征区域块；
根据所述原基准帧图像的特征区域块，确定所述当前帧图像的特征区域块；
计算所述原基准帧图像的特征区域块相对于所述当前帧图像的特征区域块的偏移数据；
根据各特征区域块的偏移数据，按照预设规则确定所述当前帧图像相对于所述原基准帧图像的偏移量。
4.根据权利要求3所述的视频防抖控制方法，其特征在于，所述“根据所述原基准帧图像的特征区域块，确定所述当前帧图像的特征区域块”，包括：
根据所述原基准帧图像的特征区域块中的显著性特征，对所述当前帧图像的运动方向进行预估，并确定所述当前帧图像的特征区域块。
5.根据权利要求3所述的视频防抖控制方法，其特征在于，所述获取所述原基准帧图像的特征区域块，包括：
将所述原基准帧图像划分成多个区域；
提取每一区域中的图像特征点；
根据所述图像特征点，确定所述原基准帧图像的特征区域块。
6.根据权利要求5所述的视频防抖控制方法，其特征在于，
所述“根据所述原基准帧图像的特征区域块，确定所述当前帧图像的特征区域块”，包括：
根据所述原基准帧图像的图像特征点的位置，对所述当前帧图像的运动方向进行预估；
确定与所述原基准帧图像的特征区域块匹配的所述当前帧图像的特征区域块。
7.根据权利要求3所述的视频防抖控制方法，其特征在于，在所述判断所述偏移量是否超过预设偏移阈值之后，所述方法还包括：
若所述偏移量未超过所述预设偏移阈值，则根据所述偏移量将所述当前帧图像进行平滑偏移处理。
8.一种视频防抖控制装置，应用于处于视频拍摄模式下的终端，其特征在于，所述装置包括：
计算模块，用于计算视频的当前帧图像相对于原基准帧图像的偏移量；
判断模块，用于判断所述偏移量是否超过预设偏移阈值；
控制模块，用于在所述偏移量超过所述预设偏移阈值时，控制将所述当前帧图像替换所述原基准帧图像而作为新基准帧图像。
9.一种计算机装置，其特征在于，所述计算机装置包括处理器，所述处理器用于执行存储装置中存储的计算机程序时实现如权利要求1-7中任意一项所述的视频防抖控制方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序(指令)，其特征在于，所述计算机程序(指令)被处理器执行时实现如权利要求1-7中任意一项所述的视频防抖控制方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710765748.4A CN108234859A (zh) | 2017-08-30 | 2017-08-30 | 视频防抖控制方法、装置、计算机装置及可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710765748.4A CN108234859A (zh) | 2017-08-30 | 2017-08-30 | 视频防抖控制方法、装置、计算机装置及可读存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108234859A true CN108234859A (zh) | 2018-06-29 |
Family
ID=62654382
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710765748.4A Withdrawn CN108234859A (zh) | 2017-08-30 | 2017-08-30 | 视频防抖控制方法、装置、计算机装置及可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108234859A (zh) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109194878A (zh) * | 2018-11-08 | 2019-01-11 | 深圳市闻耀电子科技有限公司 | 视频图像防抖方法、装置、设备和存储介质 |
| CN110581933A (zh) * | 2019-07-23 | 2019-12-17 | 国网山东省电力公司电力科学研究院 | 一种视频优化处理系统、处理方法、终端设备及存储介质 |
| CN111028191A (zh) * | 2019-12-10 | 2020-04-17 | 上海闻泰电子科技有限公司 | 视频图像的防抖方法、装置、电子设备和存储介质 |
| CN111432154A (zh) * | 2020-03-30 | 2020-07-17 | 维沃移动通信有限公司 | 视频播放方法、视频处理方法及电子设备 |
| CN111541943A (zh) * | 2020-06-19 | 2020-08-14 | 腾讯科技（深圳）有限公司 | 视频处理方法、视频操作方法、装置、存储介质和设备 |
| CN111741186A (zh) * | 2020-06-11 | 2020-10-02 | 浙江大华技术股份有限公司 | 一种视频抖动检测方法、装置以及系统 |
| CN112367460A (zh) * | 2020-10-23 | 2021-02-12 | 上海掌门科技有限公司 | 一种视频防抖方法与设备 |
| WO2021147384A1 (zh) * | 2020-01-21 | 2021-07-29 | 上海万物新生环保科技集团有限公司 | 相机抖动检测方法及装置 |
| CN113436113A (zh) * | 2021-07-22 | 2021-09-24 | 黑芝麻智能科技有限公司 | 防抖动的图像处理方法、装置、电子设备和存储介质 |
| CN114501061A (zh) * | 2022-01-25 | 2022-05-13 | 上海影谱科技有限公司 | 一种基于物体检测的视频帧对齐方法及系统 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103475802A (zh) * | 2013-09-26 | 2013-12-25 | 中国矿业大学 | 一种电子稳像方法 |
| US8923389B1 (en) * | 2011-01-13 | 2014-12-30 | Zenverge, Inc. | Unified scaling with differential coding for internal bit depth extension and reference frame compression |
-
2017
- 2017-08-30 CN CN201710765748.4A patent/CN108234859A/zh not_active Withdrawn
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8923389B1 (en) * | 2011-01-13 | 2014-12-30 | Zenverge, Inc. | Unified scaling with differential coding for internal bit depth extension and reference frame compression |
| CN103475802A (zh) * | 2013-09-26 | 2013-12-25 | 中国矿业大学 | 一种电子稳像方法 |
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109194878B (zh) * | 2018-11-08 | 2021-02-19 | 深圳市闻耀电子科技有限公司 | 视频图像防抖方法、装置、设备和存储介质 |
| CN109194878A (zh) * | 2018-11-08 | 2019-01-11 | 深圳市闻耀电子科技有限公司 | 视频图像防抖方法、装置、设备和存储介质 |
| CN110581933A (zh) * | 2019-07-23 | 2019-12-17 | 国网山东省电力公司电力科学研究院 | 一种视频优化处理系统、处理方法、终端设备及存储介质 |
| CN111028191A (zh) * | 2019-12-10 | 2020-04-17 | 上海闻泰电子科技有限公司 | 视频图像的防抖方法、装置、电子设备和存储介质 |
| CN111028191B (zh) * | 2019-12-10 | 2023-07-04 | 上海闻泰电子科技有限公司 | 视频图像的防抖方法、装置、电子设备和存储介质 |
| WO2021115136A1 (zh) * | 2019-12-10 | 2021-06-17 | 闻泰科技(深圳)有限公司 | 视频图像的防抖方法、装置、电子设备和存储介质 |
| WO2021147384A1 (zh) * | 2020-01-21 | 2021-07-29 | 上海万物新生环保科技集团有限公司 | 相机抖动检测方法及装置 |
| CN111432154B (zh) * | 2020-03-30 | 2022-01-25 | 维沃移动通信有限公司 | 视频播放方法、视频处理方法及电子设备 |
| CN111432154A (zh) * | 2020-03-30 | 2020-07-17 | 维沃移动通信有限公司 | 视频播放方法、视频处理方法及电子设备 |
| CN111741186A (zh) * | 2020-06-11 | 2020-10-02 | 浙江大华技术股份有限公司 | 一种视频抖动检测方法、装置以及系统 |
| CN111541943B (zh) * | 2020-06-19 | 2020-10-16 | 腾讯科技（深圳）有限公司 | 视频处理方法、视频操作方法、装置、存储介质和设备 |
| CN111541943A (zh) * | 2020-06-19 | 2020-08-14 | 腾讯科技（深圳）有限公司 | 视频处理方法、视频操作方法、装置、存储介质和设备 |
| CN112367460A (zh) * | 2020-10-23 | 2021-02-12 | 上海掌门科技有限公司 | 一种视频防抖方法与设备 |
| CN112367460B (zh) * | 2020-10-23 | 2022-10-11 | 上海掌门科技有限公司 | 一种视频防抖方法与设备 |
| CN113436113A (zh) * | 2021-07-22 | 2021-09-24 | 黑芝麻智能科技有限公司 | 防抖动的图像处理方法、装置、电子设备和存储介质 |
| US11770613B2 (en) | 2021-07-22 | 2023-09-26 | Black Sesame Technologies Inc. | Anti-shake image processing method, apparatus, electronic device and storage medium |
| CN114501061A (zh) * | 2022-01-25 | 2022-05-13 | 上海影谱科技有限公司 | 一种基于物体检测的视频帧对齐方法及系统 |
| CN114501061B (zh) * | 2022-01-25 | 2024-03-15 | 上海影谱科技有限公司 | 一种基于物体检测的视频帧对齐方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108234859A (zh) | 视频防抖控制方法、装置、计算机装置及可读存储介质 | |
| CN111815755B (zh) | 虚拟物体被遮挡的区域确定方法、装置及终端设备 | |
| CN108961303B (zh) | 一种图像处理方法、装置、电子设备和计算机可读介质 | |
| US8295683B2 (en) | Temporal occlusion costing applied to video editing | |
| US8605992B2 (en) | Image completion using scene geometry | |
| US9214137B2 (en) | Methods and systems for realistic rendering of digital objects in augmented reality | |
| WO2015027953A1 (en) | Method, apparatus and terminal device for dynamic image processing | |
| CN107944420B (zh) | 人脸图像的光照处理方法和装置 | |
| CN106997613B (zh) | 根据2d图像的3d模型生成 | |
| CN108875931B (zh) | 神经网络训练及图像处理方法、装置、系统 | |
| CN108230333A (zh) | 图像处理方法、装置、计算机程序、存储介质和电子设备 | |
| CN109325996B (zh) | 用于生成信息的方法和装置 | |
| Chen et al. | Improved seam carving combining with 3D saliency for image retargeting | |
| US9118843B2 (en) | Methods and systems for creating swivel views from a handheld device | |
| CN109754464B (zh) | 用于生成信息的方法和装置 | |
| JP2017011431A (ja) | 画像処理装置、画像処理方法及びプログラム | |
| CN114419289B (zh) | 一种基于Unity的虚拟场景货架陈列方法及系统 | |
| CN116567410B (zh) | 基于场景识别的辅助拍照方法及系统 | |
| CN108960012B (zh) | 特征点检测方法、装置及电子设备 | |
| CN105447846B (zh) | 一种图像处理方法及电子设备 | |
| CN111192312A (zh) | 基于深度学习的深度图像获取方法、装置、设备及介质 | |
| US9171357B2 (en) | Method, apparatus and computer-readable recording medium for refocusing photographed image | |
| CN113709389A (zh) | 一种视频渲染方法、装置、电子设备及存储介质 | |
| CN109685015B (zh) | 图像的处理方法、装置、电子设备和计算机存储介质 | |
| CN108432229B (zh) | 一种通过自拍实现他人拍照效果的方法及拍照设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WW01 | Invention patent application withdrawn after publication |
Application publication date: 20180629 |
|
| WW01 | Invention patent application withdrawn after publication |