CN112565625A - 视频处理方法、装置及介质 - Google Patents

视频处理方法、装置及介质 Download PDF

Info

Publication number
CN112565625A
CN112565625A CN201910918070.8A CN201910918070A CN112565625A CN 112565625 A CN112565625 A CN 112565625A CN 201910918070 A CN201910918070 A CN 201910918070A CN 112565625 A CN112565625 A CN 112565625A
Authority
CN
China
Prior art keywords
video
picture
image
frame
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910918070.8A
Other languages
English (en)
Inventor
王倩
杜俊增
贾冲
罗序满
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201910918070.8A priority Critical patent/CN112565625A/zh
Priority to US16/805,784 priority patent/US11206349B2/en
Priority to EP20161094.6A priority patent/EP3799415A3/en
Publication of CN112565625A publication Critical patent/CN112565625A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing

Abstract

本公开是关于一种视频处理方法、装置和介质。该方法包括：采集N段视频，其中N为大于等于1的正整数；选取N段视频中的至少一个图像帧，改变选取的至少一个图像帧的画面显示方式，获取画面显示数据，画面显示数据是图像帧所包括数据的一部分；利用被改变画面显示方式的图像帧的画面显示数据，生成新视频。该方法既克服了由于拍摄时移动摄像机影响拍摄效果的问题，又实现了带有动感的移动拍摄的效果。

Description

视频处理方法、装置及介质
技术领域
本公开涉及视频处理技术，尤其涉及一种视频处理方法、装置及介质。
背景技术
随着互联网技术和生活水平的提高，网络传播速度的加快，传媒媒介已经从单纯的文字转变为图像、视频等多样化的方式，随着互联网的发展，视频逐渐成为人们表达生活和心情的一种方式。随之产生了各种拍摄视频的手法，其中包括移动镜头拍摄。移动镜头拍摄是指摄像机在运动中进行拍摄。
普通的摄像机用户在拍摄视频的过程中，经常为了增强视频的动感效果，而在视频拍摄时采用移动镜头拍摄方式，例如推镜头、拉镜头、摇镜头、移动镜头等。但是，由于普通用户的非专业性，在移动镜头进行拍摄时，会因为摄像机抖动等原因影响拍摄视频的效果。
发明内容
为克服相关技术中存在的问题，本公开提供一种视频处理方法、装置及介质。
根据本公开实施例的第一方面，提供视频处理方法，所述方法包括：
采集N段视频，其中N为大于等于1的正整数；
选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式，获取画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；
利用被改变画面显示方式的图像帧的画面显示数据，生成新视频。
其中，所述画面显示方式包括下述至少一个：画面缩放倍数、画面显示范围和画面显示旋转角度。
其中，当改变选取的所述至少一个图像帧的画面显示范围时，使所述画面显示范围对应的显示框的中心位置点沿着所述图像帧对应的平面直角坐标系上的设定曲线移动；
当改变选取的所述至少一个图像帧的画面显示旋转角度时，使所述画面显示范围对应的显示框围绕所述显示框内的设定点沿设定方向旋转设定角度。
其中，所述利用所述画面显示数据生成新视频包括：
利用第i段视频中未被改变画面显示方式的图像帧中的所有图像帧或部分图像帧的画面显示数据，以及所述第i段视频中所有被改变画面显示方式的图像帧的画面显示数据，生成与所述第i段视频相应的子视频，其中，i＝1,2,…,N；
利用所述子视频生成所述新视频。
其中，所述利用所述子视频生成所述新视频包括：
当N等于1时，将所述子视频作为所述新视频；
当N大于等于2时，按照设定顺序将N段子视频合成为所述新视频。
其中，所述采集N段视频包括：
采用满足下述条件中至少一个的视频采集装置来采集所述N段视频：
条件一，具有视角范围大于设定范围的拍摄镜头；
条件二，具有分辨率大于设定阈值的拍摄镜头。
根据本公开实施例的第二方面，提供一种视频处理装置，所述装置包括：
视频采集模块，被配置为采集N段视频，其中N为大于等于1的正整数；
显示方式改变模块，被配置为选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式；
数据获取模块，被配置为获取被改变画面显示方式的图像帧的画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；
视频生成模块，被配置为利用被改变画面显示方式的所述图像帧的画面显示数据，生成新视频。
其中，所述画面显示方式包括下述至少一个：画面缩放倍数、画面显示范围和画面显示旋转角度。
其中，所述显示方式改变模块还被配置为：
当改变选取的所述至少一个图像帧的画面显示范围时，使所述画面显示范围对应的显示框的中心位置点沿着所述图像帧对应的平面直角坐标系上的设定曲线移动；
当改变选取的所述至少一个图像帧的画面显示旋转角度时，使所述画面显示范围对应的显示框围绕所述显示框内的设定点沿设定方向旋转设定角度。
其中，所述视频生成模块还被配置为：
利用第i段视频中未被改变画面显示方式的图像帧中的所有图像帧或部分图像帧的画面显示数据，以及所述第i段视频中所有被改变画面显示方式的图像帧的画面显示数据，生成与所述第i段视频相应的子视频，其中，i＝1,2,…,N；
利用所述子视频生成所述新视频。
其中，所述视频生成模块还被配置为：
当N等于1时，将所述子视频作为所述新视频；
当N大于等于2时，按照设定顺序将N段子视频合成为所述新视频。
其中，所述视频采集模块还被配置为：
采用满足下述条件中至少一个的视频采集装置来采集所述N段视频：
条件一，具有视角范围大于设定范围的拍摄镜头；
条件二，具有分辨率大于设定阈值的拍摄镜头。
根据本公开实施例的第三方面，提供一种视频处理装置，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为：
采集N段视频，其中N为大于等于1的正整数；
选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式，获取画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；
利用被改变画面显示方式的图像帧的画面显示数据，生成新视频。
根据本公开实施例的第四方面，提供一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行一种视频处理方法，所述方法包括：
采集N段视频，其中N为大于等于1的正整数；
选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式，获取画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；
利用被改变画面显示方式的图像帧的画面显示数据，生成新视频。
本公开的方法中，对视频中的全部或部分图像帧进行处理后，再利用这些被处理后的图像帧生成新视频，从而使得生成的新视频具有移动拍摄的效果。由于这里采集的原始视频可以是保持摄像机静止的状态下拍摄的，因此克服了用户边拍摄边移动摄像机造成抖动而影响拍摄效果的问题。同时由于对视频中图像帧的处理，使得在利用这些处理过的图像帧生成新视频时，使新视频具有了移动拍摄的效果。即采用本公开的方法，既克服了由于拍摄时移动摄像机影响拍摄效果的问题，又实现了带有动感的移动拍摄的效果。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种视频处理方法的流程图。
图2是根据一示例性实施例示出的画面显示范围对应的显示框的中心位置点在图像帧对应的平面直角坐标系上的位置示意图。
图3是根据一示例性实施例示出的画面显示范围对应的显示框的中心位置点在图像帧对应的平面直角坐标系上的位置示意图。
图4是根据一示例性实施例示出的画面显示范围对应的显示框的中心位置点在图像帧对应的平面直角坐标系上的位置示意图。
图5是根据一示例性实施例示出的画面显示范围对应的显示框的中心位置点在图像帧对应的平面直角坐标系上的运动曲线示意图。
图6是根据一示例性实施例示出的画面显示范围对应的显示框在图像帧对应的平面直角坐标系中旋转的示意图。
图7是根据一示例性实施例示出的一种视频处理方法的流程图。
图8是根据一示例性实施例示出的一种视频处理装置的框图。
图9是根据一示例性实施例示出的一种视频处理装置的框图。
图10是根据一示例性实施例示出的一种视频处理装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
普通的摄像机用户在拍摄视频的过程中，经常为了增强视频的动感效果，而在视频拍摄时采用移动镜头拍摄方式，例如推镜头、拉镜头、摇镜头、移动镜头等。但是，由于普通用户的非专业性，在移动镜头进行拍摄时，会因为摄像机抖动等原因影响拍摄视频的效果。
本公开提出了一种通过处理摄像机静止拍摄的视频来获得具有动态效果的视频的方法。在本方法中，用户保持摄像机静止进行视频拍摄，然后对这些视频进行动态处理，以模拟运动相机拍摄方式的拍摄效果，同时克服了由于用户边拍摄边移动摄像机造成拍摄效果较差的问题。
本公开的方法可以在摄像机、设置有摄像机的智能终端上执行，如在手机、PAD上执行。
图1是根据一示例性实施例示出的一种视频处理方法。如图1所示，该方法包括以下步骤：
步骤101，采集N段视频，其中N为大于等于1的正整数；
步骤102，选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式，获取画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；
步骤103，利用被改变画面显示方式的图像帧的画面显示数据，生成新视频。
步骤101中，可以采集一段视频，也可以采集几段视频。在采集几段视频的情况下，最后生成的新视频是这几段视频被处理后的合成的视频。
步骤102中，对采集的视频进行处理，这里，可以对采集的N段视频均进行处理，也可以从N段视频中选取几段视频进行处理。并且，可以对一段视频中的所有图像帧均进行处理，也可以仅对该段视频中的部分图像帧进行处理。这里的处理即是改变图像帧的画面显示方式。另外，该步骤中的画面显示数据是图像帧被改变画面显示方式后的画面显示数据。
在图1所示方法中，对视频中的全部或部分图像帧进行处理后，再利用这些被处理后的图像帧生成新视频，从而使得生成的新视频具有移动拍摄的效果。由于这里采集的原始视频可以是保持摄像机静止的状态下拍摄的，因此克服了用户边拍摄边移动摄像机造成抖动而影响拍摄效果的问题。同时由于对视频中图像帧的处理，使得在利用这些处理过的图像帧生成新视频时，使新视频具有了移动拍摄的效果。即采用本公开的方法，既克服了由于拍摄时移动摄像机影响拍摄效果的问题，又实现了带有动感的移动拍摄的效果。
下面描述如何通过对图像帧进行处理，来获得具有移动拍摄效果的新视频。
在可选实施方式中，所述画面显示方式包括下述至少一个：画面缩放倍数、画面显示范围和画面显示旋转角度。
需要说明的是，图像帧实际上是一幅静态的图像，因此对图像帧的处理实际上是对静态图像的处理。具体地，改变图像帧的画面显示方式包括改变图像帧的画面缩放倍数、画面显示范围和画面显示旋转角度。
改变画面缩放倍数可以起到缩小画面和放大画面的效果。缩小画面和放大画面对应拉近镜头和推远镜头的操作，从而模拟出拍摄过程中采用变焦方式进行拍摄的效果。拍摄视频时可以采用超广角的具有高分辨率的镜头进行拍摄，这样对拍摄的视频中的图像帧改变画面缩放倍数时，仍能清晰地显示完整的画面。
改变画面显示范围对应移动摄像机的操作，从而模拟出拍摄过程中移动摄像机进行拍摄的效果。拍摄视频时采用超广角镜头进行拍摄，因此图像帧是宽幅画面，而播放新视频的屏幕的视角范围小于拍摄的镜头的视角范围，从而可以在宽幅的图像帧画面上选取不同部分的图像进行显示，从而产生移动摄像机进行拍摄的效果。
改变画面显示旋转角度对应旋转摄像机镜头的操作，从而模拟出拍摄过程中旋转摄像机镜头进行拍摄的效果。例如，当拍摄人像时，摄像机镜头在没有进行旋转的情况下，图像中的人是与图像显示框的下边框垂直的，在旋转摄像机镜头进行拍摄的情况下，图像中的人则是与图像显示框的下边框成小于直角的夹角。
由上可知，通过改变图像帧的画面缩放倍数、画面显示范围和画面显示旋转角度，可以实现模拟移动摄像机进行拍摄的效果。另外，可以根据具体的处理需要，将上述三种改变画面显示方式相组合，以实现不同的模拟摄像机移动的拍摄效果。
在可选实施方式中，当改变选取的所述至少一个图像帧的画面显示范围时，使所述画面显示范围对应的显示框的中心位置点沿着所述图像帧对应的平面直角坐标系上的设定曲线移动；当改变选取的所述至少一个图像帧的画面显示旋转角度时，使所述画面显示范围对应的显示框围绕所述显示框内的设定点沿设定方向旋转设定角度。
画面显示范围对应于播放生成的新视频的显示屏，由于显示屏的视角范围小于采集视频的镜头的视角范围，因此画面显示范围小于图像帧的画幅尺寸。如上所述，改变图像帧的画面显示范围时，在图像帧画面上选取不同部分的图像进行显示，可以通过下述操作来实现：使所述画面显示范围对应的显示框的中心位置点沿着所述图像帧对应的平面直角坐标系上的设定曲线移动。
例如，当未改变图像帧的画面显示范围时，画面显示范围对应的显示框的中心位置位于图像帧对应的平面直角坐标系的原点(0,0)，如图2所示；当改变图像帧的画面显示范围时，若画面显示范围对应的显示框的中心位置位于图像帧对应的平面直角坐标系的点(-890,0)上，如图3所示，此情况相当于摄像机镜头左移，若画面显示范围对应的显示框的中心位置位于图像帧对应的平面直角坐标系的点(890,0)上，如图4所示，此情况相当于摄像机镜头右移。当画面显示范围对应的显示框的中心位置由图像帧对应的平面直角坐标系上的(-890,0)移动到(890,0)时，则模拟了摄像机镜头从左到右的移动。需要说明的是，这里的坐标为对应的像素点坐标。
当多个图像帧的画面显示范围对应的显示框的中心位置位于图像帧对应的平面直角坐标系上一条直线上均匀分布的点时，由该多个图像帧的画面显示数据生成的视频模拟了匀速移动镜头的操作；当各显示框的中心位置位于平面直角坐标系上一条直线上非均匀分布的点时，则该多个图像帧的画面显示数据生成的视频模拟了非匀速移动镜头的操作。
显示框的中心位置点沿着图像帧对应的平面直角坐标系上的设定曲线移动时，可以是沿着X轴或Y轴移动，可以是沿着与X轴或Y轴成设定夹角的直线移动，也可以是沿着平面直角坐标系中的设定曲线移动，如图5所示的曲线。采用这种沿曲线的移动方式，能够模拟出摄像机镜头朝各个方向移动且移动速度随机变化的拍摄效果。
当未改变图像帧的画面显示旋转角度时，画面显示范围对应的显示框的横边框与图像帧对应的平面直角坐标系的X轴(或Y轴)呈设定的初始角度，例如图2中，显示框的横边框与平面直角坐标系的X轴的夹角为0度。当改变图像帧的画面显示旋转角度时，画面显示范围对应的显示框的横边框与图像帧对应的平面直角坐标系的X轴(或Y轴)的夹角发生变化，如图6所示。
图6是由图2中的显示框绕其中心位置旋转设定角度得到的，可以想到的是，也可以由显示框绕其内任意一点旋转得到，例如绕其一个顶点旋转。相邻图像帧依次旋转的角度可以相同也可以不同，以模拟不同的镜头旋转效果。
同样地，若相邻几个图像帧的缩放倍数为等差数列，则模拟了匀速推拉镜头的拍摄过程。
在可选实施方式中，所述利用所述画面显示数据生成新视频包括：
利用第i段视频中未被改变画面显示方式的图像帧中的所有图像帧或部分图像帧的画面显示数据，以及所述第i段视频中所有被改变画面显示方式的图像帧的画面显示数据，生成与所述第i段视频相应的子视频，其中，i＝1,2,…,N；
利用所述子视频生成所述新视频。
如上所述，对进行视频处理时，可以选择多段视频中的全部视频进行处理，也可以选择多段视频中的部分几段视频进行处理。在对一段视频进行处理时，可以对该段视频中的所有图像帧进行处理，也可以选取该段视频中的部分图像帧进行处理。
当对一段视频处理后生成新视频时，需要利用该段视频中已被处理过的图像帧和未被处理过的图像帧生成新视频。生成新视频时，可以将所有未被改变画面显示方式的图像帧连同被改变画面显示方式的图像帧一起生成新视频，此时新视频包括的图像帧个数与原始视频相同，即新视频的播放时长也与原始视频相同。若仅选择部分未被改变画面显示方式的图像帧连同被改变画面显示方式的图像帧一起生成新视频，则新视频包括的图像帧个数小于原始视频的图像帧个数，即新视频的播放时长小于原始视频的播放时长。
在可选实施方式中，所述利用所述子视频生成所述新视频包括：
当N等于1时，将所述子视频作为所述新视频；
当N大于等于2时，按照设定顺序将N段子视频合成为所述新视频。
当仅采集了一段视频时，则对该段视频中的图像帧进行处理后生成新视频。当采集了多段视频时，在对图像帧进行处理后生成N段子视频，然后将这N段子视频合成为新视频。合成新视频时，可以根据需要将这N段子视频按照一定的顺序进行合成，以实现不同的播放效果。例如，可以按照N段视频的原有顺序进行合成，也可以按照随机的顺序进行合成。
在可选实施方式中，所述采集N段视频包括采用满足下述条件中至少一个的视频采集装置来采集所述N段视频：
条件一，具有视角范围大于设定范围的拍摄镜头；
条件二，具有分辨率大于设定阈值的拍摄镜头。
当执行前述的改变画面显示方式的操作时，若摄像机的镜头满足设定的要求，则能实现较好的处理效果。例如，改变画面缩放倍数时，需要镜头的分辨率大于设定阈值，如采用4K超高清镜头。这样当放大图像帧的画面时，依然能保证画面清晰度符合要求。再例如改变画面显示范围时，需要镜头的视角范围大于设定范围，如采用超广角镜头。这样可以实现在图像帧的画面中选择不同的显示范围。
图7示出了根据本公开的方法的一个具体实施例，该方法包括以下步骤：
步骤701，由具有4K超高清分辨率和超广角的镜头采集3段视频。
步骤702，改变第一段视频中所有图像帧的画面缩放倍数，并获取这些处理后的图像帧的画面显示数据。
步骤703，改变第二段视频中所有图像帧的画面显示范围，并获取这些处理后的图像帧的画面显示数据。
步骤704，改变第三段视频中部分图像帧的画面显示旋转角度和画面缩放倍数，并获取这些处理后的图像帧的画面显示数据。
步骤705，分别生成第一段子视频、第二段子视频、第三段子视频。
步骤706，按照第三段子视频、第一段子视频、第二段子视频的顺序将这三段子视频合成为新视频。
采用上述方法合成视频后，可以将合成的视频在社交平台上发布，发布的这一段视频可以展示在不同时间不同地点拍摄的具有动感的场景。
本公开还提出了一种视频处理装置，如果图8所示，该装置包括：
视频采集模块801，被配置为采集N段视频，其中N为大于等于1的正整数；
显示方式改变模块802，被配置为选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式；
数据获取模块803，被配置为获取被改变画面显示方式的图像帧的画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；
视频生成模块804，被配置为利用被改变画面显示方式的所述图像帧的画面显示数据，生成新视频。
在可选实施方式中，所述画面显示方式包括下述至少一个：画面缩放倍数、画面显示范围和画面显示旋转角度。
在可选实施方式中，所述显示方式改变模块802还被配置为：
当改变选取的所述至少一个图像帧的画面显示范围时，使所述画面显示范围对应的显示框的中心位置点沿着所述图像帧对应的平面直角坐标系上的设定曲线移动；
当改变选取的所述至少一个图像帧的画面显示旋转角度时，使所述画面显示范围对应的显示框围绕所述显示框内的设定点沿设定方向旋转设定角度。
在可选实施方式中，所述视频生成模块804还被配置为：
利用第i段视频中未被改变画面显示方式的图像帧中的所有图像帧或部分图像帧的画面显示数据，以及所述第i段视频中所有被改变画面显示方式的图像帧的画面显示数据，生成与所述第i段视频相应的子视频，其中，i＝1,2,…,N；
利用所述子视频生成所述新视频。
在可选实施方式中，所述视频生成模块804还被配置为：
当N等于1时，将所述子视频作为所述新视频；
当N大于等于2时，按照设定顺序将N段子视频合成为所述新视频。
在可选实施方式中，所述视频采集模块801还被配置为：
采用满足下述条件中至少一个的视频采集装置来采集所述N段视频：
条件一，具有视角范围大于设定范围的拍摄镜头；
条件二，具有分辨率大于设定阈值的拍摄镜头。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
本公开的方法中，对视频中的全部或部分图像帧进行处理后，再利用这些被处理后的图像帧生成新视频，从而使得生成的新视频具有移动拍摄的效果。由于这里采集的原始视频可以是保持摄像机静止的状态下拍摄的，因此克服了用户边拍摄边移动摄像机造成抖动而影响拍摄效果的问题。同时由于对视频中图像帧的处理，使得在利用这些处理过的图像帧生成新视频时，使新视频具有了移动拍摄的效果。即采用本公开的方法，既克服了由于拍摄时移动摄像机影响拍摄效果的问题，又实现了带有动感的移动拍摄的效果。
图9是根据一示例性实施例示出的一种用于视频处理的装置900的框图。例如，装置900可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
参照图9，装置900可以包括以下一个或多个组件：处理组件902，存储器904，电力组件906，多媒体组件908，音频组件910，输入/输出(I/O)的接口912，传感器组件914，以及通信组件916。
处理组件902通常控制装置900的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件902可以包括一个或多个处理器920来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件902可以包括一个或多个模块，便于处理组件902和其他组件之间的交互。例如，处理组件902可以包括多媒体模块，以方便多媒体组件908和处理组件902之间的交互。
存储器904被配置为存储各种类型的数据以支持在设备900的操作。这些数据的示例包括用于在装置900上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器904可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电力组件906为装置900的各种组件提供电力。电力组件906可以包括电源管理系统，一个或多个电源，及其他与为装置900生成、管理和分配电力相关联的组件。
多媒体组件908包括在所述装置900和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件908包括一个前置摄像头和/或后置摄像头。当设备900处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件910被配置为输出和/或输入音频信号。例如，音频组件910包括一个麦克风(MIC)，当装置900处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器904或经由通信组件916发送。在一些实施例中，音频组件910还包括一个扬声器，用于输出音频信号。
I/O接口912为处理组件902和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件914包括一个或多个传感器，用于为装置900提供各个方面的状态评估。例如，传感器组件914可以检测到设备900的打开/关闭状态，组件的相对定位，例如所述组件为装置900的显示器和小键盘，传感器组件914还可以检测装置900或装置900一个组件的位置改变，用户与装置900接触的存在或不存在，装置900方位或加速/减速和装置900的温度变化。传感器组件914可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件914还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件914还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件916被配置为便于装置900和其他设备之间有线或无线方式的通信。装置900可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件916经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件916还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，装置900可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器904，上述指令可由装置900的处理器920执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行一种视频处理的方法，所述方法包括：采集N段视频，其中N为大于等于1的正整数；选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式，获取画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；利用被改变画面显示方式的图像帧的画面显示数据，生成新视频。
图10是根据一示例性实施例示出的一种用于视频处理的装置1000的框图。例如，装置1000可以被提供为一服务器。参照图10，装置1000包括处理组件1022，其进一步包括一个或多个处理器，以及由存储器1032所代表的存储器资源，用于存储可由处理组件1022的执行的指令，例如应用程序。存储器1032中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外，处理组件1022被配置为执行指令，以执行上述方法：采集N段视频，其中N为大于等于1的正整数；选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式，获取画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；利用被改变画面显示方式的图像帧的画面显示数据，生成新视频。
装置1000还可以包括一个电源组件1026被配置为执行装置1000的电源管理，一个有线或无线网络接口1050被配置为将装置1000连接到网络，和一个输入输出(I/O)接口1058。装置1000可以操作基于存储在存储器1032的操作系统，例如Windows ServerTM，MacOS XTM，UnixTM,LinuxTM，FreeBSDTM或类似。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。
应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (14)

1.一种视频处理方法，其特征在于，所述方法包括：
采集N段视频，其中N为大于等于1的正整数；
选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式，获取画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；
利用被改变画面显示方式的图像帧的画面显示数据，生成新视频。
2.如权利要求1所述的方法，其特征在于，所述画面显示方式包括下述至少一个：画面缩放倍数、画面显示范围和画面显示旋转角度。
3.如权利要求2所述的方法，其特征在于，
当改变选取的所述至少一个图像帧的画面显示范围时，使所述画面显示范围对应的显示框的中心位置点沿着所述图像帧对应的平面直角坐标系上的设定曲线移动；
当改变选取的所述至少一个图像帧的画面显示旋转角度时，使所述画面显示范围对应的显示框围绕所述显示框内的设定点沿设定方向旋转设定角度。
4.如权利要求1所述的方法，其特征在于，所述利用所述画面显示数据生成新视频包括：
利用第i段视频中未被改变画面显示方式的图像帧中的所有图像帧或部分图像帧的画面显示数据，以及所述第i段视频中所有被改变画面显示方式的图像帧的画面显示数据，生成与所述第i段视频相应的子视频，其中，i＝1,2,…,N；
利用所述子视频生成所述新视频。
5.如权利要求4所述的方法，其特征在于，所述利用所述子视频生成所述新视频包括：
当N等于1时，将所述子视频作为所述新视频；
当N大于等于2时，按照设定顺序将N段子视频合成为所述新视频。
6.如权利要求1所述的方法，其特征在于，所述采集N段视频包括：
采用满足下述条件中至少一个的视频采集装置来采集所述N段视频：
条件一，具有视角范围大于设定范围的拍摄镜头；
条件二，具有分辨率大于设定阈值的拍摄镜头。
7.一种视频处理装置，其特征在于，所述装置包括：
视频采集模块，被配置为采集N段视频，其中N为大于等于1的正整数；
显示方式改变模块，被配置为选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式；
数据获取模块，被配置为获取被改变画面显示方式的图像帧的画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；
视频生成模块，被配置为利用被改变画面显示方式的所述图像帧的画面显示数据，生成新视频。
8.如权利要求7所述的装置，其特征在于，所述画面显示方式包括下述至少一个：画面缩放倍数、画面显示范围和画面显示旋转角度。
9.如权利要求8所述的装置，其特征在于，所述显示方式改变模块还被配置为：
当改变选取的所述至少一个图像帧的画面显示范围时，使所述画面显示范围对应的显示框的中心位置点沿着所述图像帧对应的平面直角坐标系上的设定曲线移动；
当改变选取的所述至少一个图像帧的画面显示旋转角度时，使所述画面显示范围对应的显示框围绕所述显示框内的设定点沿设定方向旋转设定角度。
10.如权利要求7所述的装置，其特征在于，所述视频生成模块还被配置为：
利用第i段视频中未被改变画面显示方式的图像帧中的所有图像帧或部分图像帧的画面显示数据，以及所述第i段视频中所有被改变画面显示方式的图像帧的画面显示数据，生成与所述第i段视频相应的子视频，其中，i＝1,2,…,N；
利用所述子视频生成所述新视频。
11.如权利要求10所述的装置，其特征在于，所述视频生成模块还被配置为：
当N等于1时，将所述子视频作为所述新视频；
当N大于等于2时，按照设定顺序将N段子视频合成为所述新视频。
12.如权利要求7所述的装置，其特征在于，所述视频采集模块还被配置为：
采用满足下述条件中至少一个的视频采集装置来采集所述N段视频：
条件一，具有视角范围大于设定范围的拍摄镜头；
条件二，具有分辨率大于设定阈值的拍摄镜头。
13.一种视频处理装置，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为：
采集N段视频，其中N为大于等于1的正整数；
选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式，获取画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；
利用被改变画面显示方式的图像帧的画面显示数据，生成新视频。
14.一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行一种视频处理方法，所述方法包括：
采集N段视频，其中N为大于等于1的正整数；
选取所述N段视频中的至少一个图像帧，改变选取的所述至少一个图像帧的画面显示方式，获取画面显示数据，所述画面显示数据是所述图像帧所包括数据的一部分；
利用被改变画面显示方式的图像帧的画面显示数据，生成新视频。
CN201910918070.8A 2019-09-26 2019-09-26 视频处理方法、装置及介质 Pending CN112565625A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201910918070.8A CN112565625A (zh) 2019-09-26 2019-09-26 视频处理方法、装置及介质
US16/805,784 US11206349B2 (en) 2019-09-26 2020-03-01 Video processing method, apparatus and medium
EP20161094.6A EP3799415A3 (en) 2019-09-26 2020-03-05 Method and device for processing videos, and medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910918070.8A CN112565625A (zh) 2019-09-26 2019-09-26 视频处理方法、装置及介质

Publications (1)

Publication Number Publication Date
CN112565625A true CN112565625A (zh) 2021-03-26

Family

ID=69770719

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910918070.8A Pending CN112565625A (zh) 2019-09-26 2019-09-26 视频处理方法、装置及介质

Country Status (3)

Country Link
US (1) US11206349B2 (zh)
EP (1) EP3799415A3 (zh)
CN (1) CN112565625A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112565625A (zh) * 2019-09-26 2021-03-26 北京小米移动软件有限公司 视频处理方法、装置及介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4974083A (en) * 1985-04-12 1990-11-27 Ampex Corporation Recirculating special effects video framestore
US6686970B1 (en) * 1997-10-03 2004-02-03 Canon Kabushiki Kaisha Multi-media editing method and apparatus
TW200603624A (en) * 2004-07-15 2006-01-16 Skanhex Technology Inc Display method and preview method for display apparatus
CN104967893A (zh) * 2014-07-10 2015-10-07 腾讯科技（北京）有限公司 便携电子设备的视频生成方法和装置
CN109859211A (zh) * 2018-12-28 2019-06-07 努比亚技术有限公司 一种图像处理方法、移动终端及计算机可读存储介质
CN110266970A (zh) * 2019-05-31 2019-09-20 上海萌鱼网络科技有限公司 一种短视频制作方法和系统

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7769819B2 (en) * 2005-04-20 2010-08-03 Videoegg, Inc. Video editing with timeline representations
KR100663483B1 (ko) * 2005-08-09 2007-01-02 삼성전자주식회사 전방향 카메라를 이용한 무인 감시 방법 및 장치
JP4262263B2 (ja) * 2006-06-07 2009-05-13 キヤノン株式会社 撮像装置及びその制御方法
US8749647B2 (en) * 2009-04-20 2014-06-10 Kyocera Corporation Image capturing device and image capturing method
US8958646B2 (en) 2011-04-07 2015-02-17 Panasonic Intellectual Property Corporation Of America Image processing device, image processing method, image processing program, and integrated circuit
US9933935B2 (en) * 2011-08-26 2018-04-03 Apple Inc. Device, method, and graphical user interface for editing videos
US20130089301A1 (en) * 2011-10-06 2013-04-11 Chi-cheng Ju Method and apparatus for processing video frames image with image registration information involved therein
CN103959802B (zh) * 2012-08-10 2018-01-26 松下电器（美国）知识产权公司 影像提供方法、发送装置以及接收装置
KR101978214B1 (ko) * 2012-11-19 2019-05-14 엘지전자 주식회사 동영상 디스플레이 장치 및 그 방법
US9253410B2 (en) * 2013-04-25 2016-02-02 Canon Kabushiki Kaisha Object detection apparatus, control method therefor, image capturing apparatus, and storage medium
US20160080835A1 (en) * 2014-02-24 2016-03-17 Lyve Minds, Inc. Synopsis video creation based on video metadata
US9779775B2 (en) * 2014-02-24 2017-10-03 Lyve Minds, Inc. Automatic generation of compilation videos from an original video based on metadata associated with the original video
KR101946019B1 (ko) * 2014-08-18 2019-04-22 삼성전자주식회사 파노라믹 동영상을 생성하는 동영상 처리 장치 및 그 방법
US20160093272A1 (en) * 2014-09-29 2016-03-31 Brother Kogyo Kabushiki Kaisha Information processing device and non-transitory storage medium storing instructions executable by the information processing device
US10110814B1 (en) * 2016-10-27 2018-10-23 Ambarella, Inc. Reducing bandwidth for video streaming using de-warping and video analytics
US10373362B2 (en) * 2017-07-06 2019-08-06 Humaneyes Technologies Ltd. Systems and methods for adaptive stitching of digital images
US9992449B1 (en) * 2017-08-10 2018-06-05 Everysight Ltd. System and method for sharing sensed data between remote users
US10593363B2 (en) * 2018-05-14 2020-03-17 Gopro, Inc. Systems and methods for generating time-lapse videos
US10863112B1 (en) * 2019-09-26 2020-12-08 Plantronics, Inc. Smoothing image transitions when changing views
CN112565625A (zh) * 2019-09-26 2021-03-26 北京小米移动软件有限公司 视频处理方法、装置及介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4974083A (en) * 1985-04-12 1990-11-27 Ampex Corporation Recirculating special effects video framestore
US6686970B1 (en) * 1997-10-03 2004-02-03 Canon Kabushiki Kaisha Multi-media editing method and apparatus
TW200603624A (en) * 2004-07-15 2006-01-16 Skanhex Technology Inc Display method and preview method for display apparatus
CN104967893A (zh) * 2014-07-10 2015-10-07 腾讯科技（北京）有限公司 便携电子设备的视频生成方法和装置
CN109859211A (zh) * 2018-12-28 2019-06-07 努比亚技术有限公司 一种图像处理方法、移动终端及计算机可读存储介质
CN110266970A (zh) * 2019-05-31 2019-09-20 上海萌鱼网络科技有限公司 一种短视频制作方法和系统

Also Published As

Publication number Publication date
EP3799415A3 (en) 2021-07-14
US20210099644A1 (en) 2021-04-01
EP3799415A2 (en) 2021-03-31
US11206349B2 (en) 2021-12-21

Similar Documents

Publication Publication Date Title
US9674395B2 (en) Methods and apparatuses for generating photograph
US20170304735A1 (en) Method and Apparatus for Performing Live Broadcast on Game
EP3182716A1 (en) Method and device for video display
CN106506448B (zh) 直播显示方法、装置及终端
EP3125158A2 (en) Method and device for displaying images
JP6336206B2 (ja) 動画ファイルの識別子を処理する方法、装置、プログラム及び記録媒体
CN108154465B (zh) 图像处理方法及装置
CN107888984B (zh) 短视频播放方法及装置
CN110928627B (zh) 界面展示方法及装置、电子设备和存储介质
CN107341777B (zh) 图片处理方法及装置
CN108122195B (zh) 图片处理方法及装置
CN106775235B (zh) 屏幕壁纸展示方法和装置
CN108986117B (zh) 视频图像分割方法及装置
CN111078170A (zh) 显示控制方法、显示控制装置及计算机可读存储介质
CN110807769B (zh) 图像显示控制方法及装置
US20220415236A1 (en) Display control method, display control device and storage medium
CN107105311B (zh) 直播方法及装置
EP3799415A2 (en) Method and device for processing videos, and medium
CN111340690A (zh) 图像处理方法、装置、电子设备及存储介质
CN111373730B (zh) 全景拍摄方法及终端
CN106354464B (zh) 信息显示方法及装置
CN110312117B (zh) 数据刷新方法及装置
CN109389547B (zh) 图像显示方法及装置
US9619016B2 (en) Method and device for displaying wallpaper image on screen
CN116347060A (zh) 相机性能评估方法、装置、可读存储介质及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination