CN113852757A - 视频处理方法、装置、设备和存储介质 - Google Patents

视频处理方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN113852757A
CN113852757A CN202111032060.8A CN202111032060A CN113852757A CN 113852757 A CN113852757 A CN 113852757A CN 202111032060 A CN202111032060 A CN 202111032060A CN 113852757 A CN113852757 A CN 113852757A
Authority
CN
China
Prior art keywords
video
image
target
target object
frame sequence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111032060.8A
Other languages
English (en)
Other versions
CN113852757B (zh
Inventor
李海波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Hangzhou Co Ltd
Original Assignee
Vivo Mobile Communication Hangzhou Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Hangzhou Co Ltd filed Critical Vivo Mobile Communication Hangzhou Co Ltd
Priority to CN202111032060.8A priority Critical patent/CN113852757B/zh
Publication of CN113852757A publication Critical patent/CN113852757A/zh
Application granted granted Critical
Publication of CN113852757B publication Critical patent/CN113852757B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请公开了一种视频处理方法、装置、设备和存储介质,属于图像处理技术领域。该视频处理方法包括:接收用户对第一视频的播放界面中的目标对象的第一输入;响应于所述第一输入,获取原始视频帧序列和播放视频帧序列,所述原始视频帧序列包括第一原始视频图像,所述播放视频帧序列包括第一播放视频图像,所述第一播放视频图像是根据所述第一输入确定的,所述第一原始视频图像为与所述第一播放视频图像关联的原始图像;根据所述原始视频帧序列和所述播放视频帧序列,得到目标视频;所述目标视频中第一区域的图像的分辨率大于所述第一视频中第二区域的图像的分辨率,所述第一区域和所述第二区域均包括所述目标对象。

Description

视频处理方法、装置、设备和存储介质
技术领域
本申请属于图像处理技术领域,具体涉及一种视频处理方法、装置、设备和存储介质。
背景技术
随着电子技术和信息技术的快速发展,越来越多的电子设备能够录制和播放视频。电子设备在录制视频的过程中,由于环境或人为操作等因素(例如设备抖动)会导致录制的视频画质较差,导致在视频播放过程中,不能很好地呈现视频画面。
发明内容
本申请实施例的目的是提供一种视频处理方法、装置、设备和存储介质,能够解决视频画质较差的问题。
第一方面,本申请实施例提供了一种视频处理方法,该方法包括:
接收用户对第一视频的播放界面中的目标对象的第一输入;
响应于所述第一输入,获取原始视频帧序列和播放视频帧序列,所述原始视频帧序列包括第一原始视频图像,所述播放视频帧序列包括第一播放视频图像,所述第一播放视频图像是根据所述第一输入确定的,所述第一原始视频图像为与所述第一播放视频图像关联的原始图像;
根据所述原始视频帧序列和所述播放视频帧序列,得到目标视频;所述目标视频中第一区域的图像的分辨率大于所述第一视频中第二区域的图像的分辨率,所述第一区域和所述第二区域均包括所述目标对象。
第二方面,本申请实施例提供了一种视频处理装置,包括:
接收模块,用于接收用户对第一视频的播放界面中的目标对象的第一输入;
获取模块,用于响应于所述第一输入,获取原始视频帧序列和播放视频帧序列,所述原始视频帧序列包括第一原始视频图像,所述播放视频帧序列包括第一播放视频图像,所述第一播放视频图像是根据所述第一输入确定的,所述第一原始视频图像为与所述第一播放视频图像关联的原始图像;
处理模块,用于根据所述原始视频帧序列和所述播放视频帧序列,得到目标视频;所述目标视频中第一区域的图像的分辨率大于所述第一视频中第二区域的图像的分辨率,所述第一区域和所述第二区域均包括所述目标对象。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
第六方面,本申请实施例提供了一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如第一方面所述视频处理方法的步骤。
在本申请实施例中,接收用户对第一视频的播放界面中的目标对象的第一输入;响应于该第一输入,获取包括第一原始视频图像的原始视频帧序列,以及包括第一播放视频图像的播放视频帧序列,其中,第一播放视频图像是根据用户的第一输入确定的,第一原始视频图像为与第一播放视频图像关联的原始图像;进一步地,根据原始视频帧序列和播放视频帧序列,得到目标视频;由于目标视频中目标对象所在第一区域的图像的分辨率大于第一视频中目标对象所在第二区域的图像的分辨率,因此得到的目标视频中用户感兴趣的对象所在区域的图像画质较好。
附图说明
图1是本申请实施例提供的视频处理方法的流程示意图;
图2是本申请实施例提供的视频播放界面的示意图之一;
图3是本申请实施例提供的视频播放界面的示意图之二;
图4是本申请实施例提供的第一播放视频图像的示意图;
图5是本申请实施例提供的目标视频的播放界面的示意图;
图6是图2所示的播放界面在接收到用户输入之后的界面示意图;
图7是图6所示的播放界面在接收到用户输入之后的界面示意图;
图8是本申请实施例提供的目标视频中图像的示意图之一;
图9是图3所示的播放界面在接收到用户输入之后的界面示意图;
图10是图9所示的播放界面在接收到用户输入之后的界面示意图;
图11是本申请实施例提供的目标视频中图像的示意图之二;
图12是本申请实施例提供的视频播放界面的示意图之三;
图13是本申请实施例提供的视频播放界面的示意图之四;
图14是本申请实施例提供的目标对象视频的播放界面的示意图;
图15是本申请实施例提供的显示目标对象播放窗口的界面示意图之一;
图16是本申请实施例提供的显示目标对象播放窗口的界面示意图之二;
图17是本申请实施例提供的显示目标对象播放窗口的界面示意图之三;
图18是本申请实施例提供的录像界面的示意图之一;
图19是本申请实施例提供的录像界面的示意图之二;
图20是本申请实施例提供的视频处理装置的结构示意图;
图21是本申请实施例提供的电子设备的结构示意图;
图22为实现本申请实施例的电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的视频处理方法进行详细地说明。
首先,对本申请实施例涉及的应用场景进行介绍。
本申请实施例的方法可以应用于电子设备,在一实施例中该电子设备例如包括:手机、平板电脑、智能手表、相机等设备。可选地,电子设备具有显示屏。
本申请实施例的视频处理方法中,在播放第一视频的情况下,用户对第一视频中播放图像中某些部分较为感兴趣,因此为了提升该部分图像的画质,即提升该部分图像的显示效果,获取包括第一原始视频图像的原始视频帧序列,第一原始视频图像为与第一播放视频图像关联的原始图像,第一播放视频图像是根据第一输入确定的,进一步地,根据该原始视频帧序列和包括该第一播放视频图像的播放视频帧序列,得到目标视频,其中,目标视频中用户感兴趣区域的图像的分辨率大于第一视频中用户感兴趣区域的图像的分辨率,因此,目标视频中用户感兴趣区域的图像的画质较好。
由于播放视频帧序列是基于原始视频帧序列进行处理得到的,在处理过程中可能会损失掉一些图像信息,因此,基于录制的原始视频数据中原始视频帧序列,得到目标视频,可以恢复第一视频中播放图像损失的一些图像信息,尤其是用户感兴趣区域的图像信息,得到的图像中用户感兴趣区域的图像画质较好。
图1是本申请实施例提供的视频处理方法的流程示意图。如图1所示,本实施例提供的视频处理方法,包括:
步骤101、接收用户对第一视频的播放界面中的目标对象的第一输入。
具体地,第一视频是当前正在播放的视频,第一视频可以是预先录制的视频。可选地,按照预设帧率和预设分辨率进行录像,得到原始视频帧和预览视频帧,基于原始视频帧得到原始视频数据,并基于预览视频帧得到视频播放数据,其中,原始视频数据和视频播放数据按照时间戳一一对应并进行关联存储。视频播放界面中播放的第一视频基于该视频播放数据得到。其中,得到的原始视频数据和视频播放数据的初始帧率均为该预设帧率,视频播放数据的分辨率为该预设分辨率,原始视频数据的分辨率是由录制设备的硬件决定的,原始视频数据中原始视频图像的分辨率一般大于视频播放数据中播放视频图像的分辨率。
可选地,视频播放数据是基于原始视频数据进行格式转换所获得的,原始视频数据在进行格式转换得到视频播放数据的过程中可能会损失掉一些图像信息,因此,原始视频数据中的原始视频图像具有比第一视频中播放视频图像更多的图像信息,例如,原始视频数据中原始视频图像的分辨率一般大于视频播放数据中播放视频图像的分辨率。
其中,预设帧率和预设分辨率可以是用户设置的,或设备默认的。
例如,用户对第一视频的播放界面中的目标对象感兴趣,针对该目标对象进行操作,设备接收该用户对该目标对象的第一输入。其中,目标对象可以是一个或多个。
其中,第一输入可以通过设备连接的输入装置(例如鼠标、键盘、麦克风等)实现,或用户对电子设备的显示屏的操作实现等等,本申请例实施例对此并不限定。
在一实施例中,第一输入可以为:用户对视频播放界面的点击输入,或者为用户输入的语音指令,或者为用户输入的特定手势,具体的可以根据实际使用需求确定,本申请实施例对此不作限定。
本申请实施例中的特定手势可以为单击手势、滑动手势、拖动手势、压力识别手势、长按手势、面积变化手势、双按手势、双击手势中的任意一种;本申请实施例中的点击输入可以为单击输入、双击输入或任意次数的点击输入等,还可以为长按输入或短按输入。
用户可能仅对第一视频中的某些目标对象感兴趣,例如用户双击第一视频的播放界面中的目标对象,如图2中的小孩。即通过第一输入的指示,可以确定出用户感兴趣的目标对象。可选地,第一输入用于指示用户输入的位置信息,通过该位置信息查找到对应的目标对象,即确定该位置信息所属的图像区域对应的目标对象,例如用户对目标对象所在的图像区域的某个位置进行双击,如图2中用户对人物区域(小孩)的头像进行双击,或图3中用户对蝴蝶区域进行双击。可选地,第一输入可以用于输入目标对象的标识信息,标识信息例如为名称,用户通过语音输入“目标对象的名称”,以指示对图3中的蝴蝶的图像画质进行提升。
步骤102、响应于第一输入,获取原始视频帧序列和播放视频帧序列,原始视频帧序列包括第一原始视频图像,播放视频帧序列包括第一播放视频图像,第一播放视频图像是根据第一输入确定的,第一原始视频图像为与第一播放视频图像关联的原始图像。
具体地,响应于该第一输入,可以先确定第一播放视频图像,该第一播放视频图像为接收到第一输入时第一视频正在播放的图像。如图4所示的图像,为图2中播放界面接收到用户的第一输入时正在播放的图像。
本实施例中,与第一播放视频图像关联的第一原始视频图像为原始视频数据中与第一播放视频图像的时间戳对应的原始视频图像,原始视频帧序列包括该第一原始视频图像,进一步地,原始视频帧序列还可以包括从原始视频数据中得到的包括该第一原始视频图像的一个或多个原始视频图像。例如,在原始视频数据中获取该时间戳对应的一帧原始视频图像,从该一帧原始视频图像为起始,获取至少一帧原始视频图像。例如,当前第一播放视频图像的时间戳为第6秒,则在原始视频数据中查找第6秒的原始视频图像,获取该第一原始视频图像。例如,第一原始视频图像的分辨率为4608×3456,第一播放视频图像的分辨率为1440×1080。
播放视频帧序列包括该第一播放视频图像,进一步地,还可以包括第一视频中以该第一播放视频图像为起始的一帧或多帧图像。
步骤103、根据原始视频帧序列和播放视频帧序列,得到目标视频;目标视频中第一区域的图像的分辨率大于第一视频中第二区域的图像的分辨率,第一区域和第二区域均包括目标对象。
具体地,基于原始视频帧序列和播放视频帧序列,获取目标视频,可选地,可以将原始视频帧序列和播放视频帧序列进行视频合成,得到目标视频,例如将原始视频帧序列中的原始视频图像与播放视频帧序列中的播放视频图像进行图像合成,得到中间图像帧序列,基于该中间图像帧序列得到目标视频;或,可以将播放视频帧序列中的播放视频图像,利用原始视频帧序列中的原始视频图像进行替换,得到目标视频,或者只利用原始视频帧序列中目标对象所在区域的图像进行替换;或者,原始视频帧序列中目标对象所在区域的图像逐帧叠加在播放视频帧序列中的播放视频图像上,得到目标视频等,本申请实施例对此并不限定。
处理得到的目标视频中第一区域的图像的分辨率大于第一视频中第二区域的图像的分辨率,因此获取到的该目标视频中用户感兴趣的第一区域的图像画质较好。其中,第一区域和第二区域是包括目标对象的区域。
示例性地,如图2所示,在第一视频播放的第6秒,双击第一视频中的对象A(小孩),此时电子设备获取当前时刻对应的第一播放视频图像,并从原始视频数据中获取与第一播放视频图像关联的第一原始视频图像,如第一播放视频图像的时间戳对应的第一原始视频图像,并获取包括第一原始视频图像的原始视频帧序列,从第一播放视频图像开始逐帧从第一视频中获取播放视频帧序列,基于原始视频帧序列和播放视频帧序列,得到目标视频,如图5中所示的是目标视频中第7秒的图像,该图像中小孩的轮廓明显较为清晰,该图5仅为一个示例,在其他示例中,图5中大人以及蝴蝶部分均可以为目标对象。
本实施例的方法,接收用户对第一视频的播放界面中的目标对象的第一输入;响应于该第一输入,获取包括第一原始视频图像的原始视频帧序列,以及包括第一播放视频图像的播放视频帧序列,其中,第一播放视频图像是根据用户的第一输入确定的,第一原始视频图像为与第一播放视频图像关联的原始图像;进一步地,根据原始视频帧序列和播放视频帧序列,得到目标视频;由于目标视频中目标对象所在第一区域的图像的分辨率大于第一视频中目标对象所在第二区域的图像的分辨率,因此得到的目标视频中用户感兴趣的对象所在区域的图像画质较好。
在一实施例中,基于原始视频帧序列和播放视频帧序列,得到目标视频的过程中,可以将原始视频帧序列逐帧进行格式转换处理,例如原始视频帧序列中图像为RAW格式,转换后的图像格式为YUV。可选地,转换后的图像的分辨率小于或等于转换前图像的分辨率。
在一实施例中,步骤101之后还包括:
响应于第一输入,显示至少一个目标对象显示选项,目标对象显示选项指示目标视频中目标对象的显示方式;
接收用户对至少一个目标对象显示选项中的目标显示选项的第二输入。
可选地,步骤103可以通过如下方式实现:
响应于第二输入,根据目标显示选项指示的目标对象的显示方式,将原始视频帧序列和播放视频帧序列进行视频合成,得到目标视频。
具体地,如图6所示,在接收到用户对第一视频的播放界面的第一输入后,显示至少一个目标对象显示选项,如图6中目标对象显示选项例如包括:融合选项、浮光选项,用户选择其中一个显示选项,例如选择融合选项,设备接收用户针对该融合选项的第二输入,针对该第二输入指示的目标对象的显示方式,将原始视频帧序列和播放视频帧序列进行视频合成,得到目标视频,例如将原始视频帧序列和播放视频帧序列中各个图像进行图像合成,得到图像帧序列,并根据时间戳顺序得到目标视频。其中,进行图像合成可以是将原始视频帧序列中整个图像与播放视频帧序列中图像进行合成,也可以将将原始视频帧序列中目标所在区域图像与播放视频帧序列中图像进行合成,本申请实施例对此并不限定。
其中,第二输入可以通过设备连接的输入装置(例如鼠标、键盘或麦克风等)实现,或用户对电子设备的触摸显示屏的操作实现等,本申请例实施例对此并不限定。
在一实施例中,第二输入可以为:用户对视频播放界面的点击输入,或者为用户输入的语音指令,或者为用户输入的特定手势,具体的可以根据实际使用需求确定,本申请实施例对此不作限定。
本申请实施例中的特定手势可以为单击手势、滑动手势、拖动手势、压力识别手势、长按手势、面积变化手势、双按手势、双击手势中的任意一种;本申请实施例中的点击输入可以为单击输入、双击输入或任意次数的点击输入等,还可以为长按输入或短按输入。
上述实施方式中,用户选择目标显示选项,根据目标显示选项指示的目标对象的显示方式,将原始视频帧序列和播放视频帧序列进行视频合成,得到目标视频,目标视频中目标对象所在第一区域的图像的分辨率大于第一视频中目标对象所在第二区域的图像的分辨率,因此得到的目标视频中用户感兴趣的对象的图像画质较好。
在一实施例中,步骤103之前,还包括:
显示至少一个图像参数调节控件;
接收用户对至少一个图像参数调节控件的第三输入。
可选地,步骤103具体可以通过如下方式实现:
响应于第三输入,从原始视频帧序列中获取包括目标对象原始图像的目标原始视频帧序列,目标对象原始图像为第一原始视频图像中的目标对象所在的第三区域的图像;
根据第一图像参数,对目标原始视频帧序列进行处理,得到目标视频帧序列,第一图像参数是根据第三输入确定的;
将目标视频帧序列和播放视频帧序列进行视频合成,得到目标视频。
具体地,如7所示,在接收到用户对目标对象显示选项的第二输入后,或在接收到用户的第一输入后,显示至少一个图像参数调节控件,图像参数调节控件包括:自动曝光(Automatic Exposure,AE)值、自动白平衡(Automatic White Balance,AWB)值、自动对焦(Automatic Focus,AF)值或美颜等参数的调节控件,用户对各个参数的参数值进行调整,即接收用户对至少一个图像参数调节控件的第三输入,得到第一图像参数,针对用户设置的第一图像参数,对目标原始视频帧序列中的图像进行处理,得到目标视频帧序列,目标原始视频帧序列为原始视频帧序列中包括目标对象原始图像的视频帧序列,目标对象原始图像例如为图4中小孩所在区域L的图像,得到的目标视频帧序列中的图像也是目标对象所在区域的图像。然后将目标视频帧序列和播放视频帧序列进行视频合成,得到目标视频,例如将目标视频帧序列和播放视频帧序列中时间戳对应的视频图像分别进行图像合成,得到目标视频,目标视频中第一播放视频图像对应的图像,显示效果如图8中图像所示;或,将目标视频帧序列和播放视频帧序列中时间戳对应的视频图像分别进行关联存储,得到目标视频,在视频播放时,可以将目标视频帧序列中的视频图像叠加在播放视频帧序列中的视频图像上播放。
其中,第三输入可以通过设备连接的输入装置(例如鼠标、键盘或麦克风等)实现,或用户对电子设备的触摸显示屏的操作实现等等,本申请例实施例对此并不限定。
在一实施例中,第三输入可以为:用户对视频播放界面的点击输入,或者为用户输入的语音指令,或者为用户输入的特定手势,具体的可以根据实际使用需求确定,本申请实施例对此不作限定。
本申请实施例中的特定手势可以为单击手势、滑动手势、拖动手势、压力识别手势、长按手势、面积变化手势、双按手势、双击手势中的任意一种;本申请实施例中的点击输入可以为单击输入、双击输入或任意次数的点击输入等,还可以为长按输入或短按输入。
上述实施方式中,从原始视频帧序列中获取包括目标对象原始图像的目标原始视频帧序列,目标对象原始图像为第一原始视频图像中的目标对象所在的第三区域的图像;用户可以设置图像参数值,根据用户设置的第一图像参数,对目标原始视频帧序列进行处理,得到目标视频帧序列,目标视频帧序列和播放视频帧序列进行视频合成,得到目标视频,目标视频中目标对象所在第一区域的图像的分辨率大于第一视频中目标对象所在第二区域的图像的分辨率,因此得到的目标视频中用户感兴趣的对象的图像画质较好,而且在处理过程中仅利用了目标对象所在的第三区域的图像的视频帧序列和播放视频帧序列进行视频合成,减少了计算量,提高了处理效率。
在一实施例中,在选择显示选项之后,可以根据设备默认的参数值,对目标原始视频帧序列进行处理,得到目标视频帧序列,该方法包括:
响应于第二输入,从原始视频帧序列中获取包括目标对象原始图像的目标原始视频帧序列,目标对象原始图像为第一原始视频图像中的目标对象所在的第三区域的图像;
根据预设的第二图像参数对目标原始视频帧序列进行处理,得到目标视频帧序列;
将所述目标视频帧序列和所述播放视频帧序列进行视频合成,得到所述目标视频。
可选地,可以根据目标显示选项指示的目标对象的显示方式,将目标视频帧序列和播放视频帧序列进行视频合成,得到目标视频。
在一实施例中,步骤“将目标视频帧序列和播放视频帧序列进行视频合成,得到目标视频”具体可以通过如下几种方式实现:
一种方式:
将播放视频帧序列中第二区域的图像替换为目标视频帧序列中的视频图像,得到融合视频帧序列;
将融合视频帧序列进行视频合成,得到目标视频。
具体地,可以仅对播放视频帧序列中用户感兴趣区域的图像进行处理,即将播放视频帧序列中目标对象所在第二区域的图像替换为目标视频帧序列中的视频图像,得到融合视频帧序列,其中,目标视频帧序列中的视频图像为目标对象所在区域的图像。
如图3所示,在第一视频播放第20秒,双击播放界面中的对象B(蝴蝶),显示至少一个目标对象显示选项,如图9所示,用户选择其中一个显示选项,例如选择浮光选项,进一步地,显示至少一个图像参数调节控件,如图10中所示,用户对各个参数的参数值进行调整,得到第二图像参数,针对用户设置的第二图像参数,对目标原始视频帧序列中的图像(对象B所在区域的图像)进行处理,得到目标视频帧序列,将播放视频帧序列中对象B所在第二区域的图像替换为目标视频帧序列中的视频图像,得到融合视频帧序列。将融合视频帧序列进行视频合成,得到目标视频。目标视频中的视频图像如图11所示。
上述实施方式中,将播放视频帧序列中第二区域的图像替换为目标视频帧序列中的视频图像,得到融合视频帧序列,进而基于融合视频帧序列得到目标视频,目标视频中目标对象所在第一区域的图像的分辨率大于第一视频中目标对象所在第二区域的图像的分辨率,因此得到的目标视频中用户感兴趣的对象的图像画质较好。
另一种方式:
将目标视频帧序列进行视频合成,得到目标对象视频;
将播放视频帧序列进行视频合成,得到子视频;
将目标对象视频与子视频进行视频合成,得到目标视频,目标视频的播放界面中包括目标对象播放窗口,目标对象播放窗口用于播放目标对象视频。
具体地,可以不对播放视频帧序列中的图像进行处理,在视频播放时,将目标视频帧序列中的图像叠加在播放视频帧序列的图像上显示,显示时,目标视频帧序列中的图像与播放视频帧序列的图像的时间戳一一对应,可选地,在视频播放时,目标视频的播放界面中包括目标对象播放窗口,目标视频的播放界面中播放的可以是播放视频帧序列形成的子视频,该目标对象播放窗口显示目标视频帧序列中的图像,如图12所示,目标对象播放窗口W中播放目标对象视频,即显示目标对象B所在图像。
示例性地,如图3所示,在第一视频播放的第20秒,双击第一视频中的对象B(蝴蝶),如图9所示,播放界面中显示至少一个目标对象显示选项,用户选择其中一个显示选项,例如选择浮光选项,进一步地,显示至少一个图像参数调节控件,如图10中所示,用户对各个参数的参数值进行调整,得到第一图像参数,针对用户设置的第一图像参数,对目标原始视频帧序列中的图像进行处理,得到目标视频帧序列;将目标视频帧序列进行视频合成,得到目标对象视频,如蝴蝶所在区域图像的视频,将目标对象视频与基于播放视频帧序列得到的子视频进行视频合成,得到目标视频。如图12所示,目标视频的播放界面中包括目标对象播放窗口W,目标对象播放窗口W中播放目标对象视频,即如图12中子视频的第21秒的图像上叠加该时刻对应的目标对象视频中的蝴蝶所在区域的图像,该图像中蝴蝶的轮廓明显较为清晰,增强了该区域的显示效果。
上述实施方式中,目标视频的播放界面中包括目标对象播放窗口,目标对象播放窗口用于播放目标对象视频,目标对象视频中的图像是原始视频图像经过处理得到的,目标视频的播放界面中播放的是播放视频帧序列形成的子视频,目标对象视频中图像的分辨率大于子视频中目标对象所在第二区域的图像的分辨率,因此用户感兴趣的目标对象的图像画质较好。
在一实施例中,步骤“将目标视频帧序列和播放视频帧序列进行视频合成,得到目标视频”之前还可以包括:
显示至少一个视频存储选项,视频存储选项指示目标对象视频的存储方式;
接收用户对至少一个视频存储选项的第四输入;
可选地,得到目标对象视频和子视频之后,还包括:
响应于第四输入,分别存储目标对象视频和子视频,或将目标对象视频与子视频关联存储。
具体地,如图13所示,显示至少一个视频存储选项,例如包括:融合存储和独立存储,视频存储选项指示目标对象视频的存储方式,图13中用户选择独立存储,即分别存储目标对象视频和子视频;假设用户选择融合存储,则将目标对象视频与子视频关联存储,即将目标对象视频与子视频中的视频图像基于时间戳进行关联存储,目标对象视频与子视频中各个的视频图像的时间戳一一对应。
若用户选择独立存储,如图14所示,可独立播放该目标对象视频,便于用户后续观看感兴趣的图像。
上述实施方式中,对处理得到的目标对象视频和子视频,可以分别存储目标对象视频和子视频,或将目标对象视频与子视频关联存储,便于用户后续使用,灵活性较大。
在一实施例中,该方法还包括:
接收用户对目标对象播放窗口的第五输入;
响应于第五输入,执行目标处理,目标处理包括以下至少一项:调整目标对象播放窗口的尺寸;移动目标对象播放窗口;暂停播放目标对象播放窗口中的目标对象视频;取消显示目标对象播放窗口。
其中,第五输入可以通过设备连接的输入装置(例如鼠标、键盘或麦克风等)实现,或用户对电子设备的显示屏的操作实现等等,本申请例实施例对此并不限定。
在一实施例中,第五输入可以为:用户对播放界面的点击输入,或者为用户输入的语音指令,或者为用户输入的特定手势,具体的可以根据实际使用需求确定,本申请实施例对此不作限定。
本申请实施例中的特定手势可以为单击手势、滑动手势、拖动手势、压力识别手势、长按手势、面积变化手势、双按手势、双击手势中的任意一种;本申请实施例中的点击输入可以为单击输入、双击输入或任意次数的点击输入等,还可以为长按输入或短按输入。
例如,如图15所示,在视频播放第31秒,点击目标对象播放窗口的播放控件,则暂停播放该目标对象播放窗口内的目标对象视频。
上述实施方式中,在用户不需要关注该目标对象播放窗口中播放的图像时,可以暂停目标对象播放窗口中目标对象视频的播放,减少设备的功耗。
例如,在视频播放第32秒,用户双击目标对象播放窗口的图像,则取消显示该目标对象播放窗口,即在视频播放界面不显示该目标对象播放窗口。
上述实施方式中,在用户不需要关注该目标对象播放窗口中播放的图像时,可以取消显示目标对象播放窗口,避免该目标对象播放窗口遮挡当前播放的视频。
例如,如图16所示,在视频播放第30秒,用户手指拖住目标对象播放窗口进行移动,如图16中向箭头所指的右下方移动,目标对象播放窗口调整后的位置如图17所示。
上述实施方式中,通过调整目标对象播放窗口在播放界面上的位置,可以避免该目标对象播放窗口遮挡播放图像中用户感兴趣的其他内容。
例如,用户可以用手指对目标对象播放窗口进行操作,使得目标对象播放窗口的尺寸变大,使得用户可以更清楚的观看到目标对象播放窗口中的内容;或者,还可以使得目标对象播放窗口的尺寸变小。
在一实施例中,步骤101之前还可以进行如下操作:
接收用户对视频录制界面的第六输入;
响应于第六输入,按照预设帧率和预设分辨率进行录像,并在录像过程中,同步缓存原始视频帧和预览视频帧;
根据缓存的原始视频帧和预览视频帧,得到原始视频数据和视频播放数据,原始视频数据包括原始视频帧序列,视频播放数据包括播放视频帧序列;
将原始视频数据和视频播放数据关联存储。
其中,第六输入可以通过设备连接的输入装置(例如鼠标、键盘或麦克风等)实现,或用户对电子设备的显示屏的操作实现等等,本申请例实施例对此并不限定。
在一实施例中,第六输入可以为:用户对播放界面的点击输入,或者为用户输入的语音指令,或者为用户输入的特定手势,具体的可以根据实际使用需求确定,本申请实施例对此不作限定。
本申请实施例中的特定手势可以为单击手势、滑动手势、拖动手势、压力识别手势、长按手势、面积变化手势、双按手势、双击手势中的任意一种;本申请实施例中的点击输入可以为单击输入、双击输入或任意次数的点击输入等,还可以为长按输入或短按输入。
具体地,可以按照预设帧率和预设分辨率通过图像采集组件(例如图像传感器)采集原始视频帧,对原始视频帧进行格式转换等图像处理,得到预览视频帧,在录像过程中,同步缓存原始视频帧和预览视频帧;根据缓存的原始视频帧和预览视频帧,得到原始视频数据和视频播放数据,其中,原始视频数据包括前述实施例中的原始视频帧序列,视频播放数据包括前述实施例中的播放视频帧序列;将原始视频数据和视频播放数据关联存储,原始视频数据中各原始视频图像的时间戳与视频播放数据中各视频图像的时间戳一一对应。
在一实施例中,在电子设备视频录制界面的情况下,例如通过点击相机APP的预览界面上的录像控件,进入视频录制界面,点击视频录制界面的录像控件,开始录像,可选地,如图18所示,在视频录制界面上可以显示设置控件(图18中右上角显示的图标),点击设置控件后显示录像模式选择对话框,假设用户选择高清录像模式,并选择帧率为60帧/秒,分辨率为1080P,即设定预设帧率和预设分辨率。
可选地,在采用高清录像模式录像的情况下,在显示屏上可以显示高清标记,例如图19中在显示屏的左上角显示“H”字样。
在录像的过程下,将图像传感器输出的原始视频帧,例如为RAW格式,以及YUV格式的预览视频帧分别生成原始视频数据和视频播放数据,并且原始视频数据中各个原始视频图像与视频播放数据中各个视频图像的时间戳一一对应,进而可以将原始视频数据的视频文件和视频播放数据的视频文件进行存储,例如上传至相册数据库中存储。
上述实施方式中,通过录像得到原始视频数据和视频播放数据,并将原始视频数据和视频播放数据关联存储,视频播放时,可以选择播放的视频中显示的某帧图像为基准,选取对应的原始视频图像以及包括该原始视频图像的原始视频帧序列,基于原始视频帧序列和包括该基准图像的播放视频帧序列,得到目标视频,由于视频播放数据为经过原始视频数据转换得到的,原始视频帧序列中含有较多的图像信息,可以恢复播放视频帧序列中损失的一些图像信息,得到的目标视频中目标对象所在区域的图像的分辨率,大于该播放视频帧序列中图像中目标对象所在区域图像的分辨率,因此,目标视频中目标对象所在区域的图像的显示效果较好。
在一实施例中,目标视频中图像的分辨率与第一原始视频图像的分辨率相同。
可选地,目标视频中图像的分辨率大于第一播放视频图像的分辨率。
例如,第一原始视频图像的分辨率为4608×3456,目标视频中图像的分辨率4608×3456,而第一播放视频图像的分辨率为1440×1080。
在一实施例中,上述实施例中获取目标视频可以是在第一视频的播放过程中逐帧进行获取,即在接收的用户的第一输入之后边播放边处理,即实时处理并播放目标视频中的图像,例如播放当前帧的同时进行处理,并得到目标视频中的下一帧图像,在需要显示下一帧图像时显示处理得到的该目标视频中的下一帧图像,也可以是在接收到用户的第一输入之后即一次性处理获取到目标视频并播放。
在一实施例中,在视频播放第6秒,用户点击对象A,在第7秒显示目标视频中该时刻的图像,在视频播放第16秒,再次双击对象A则停止进行处理,在第17秒播放原第一视频中该时刻的图像。
需要说明的是,本申请实施例提供的视频处理方法,执行主体可以为视频处理装置,或者,该视频处理装置中的用于执行视频处理方法的处理模块。本申请实施例中以视频处理装置执行视频处理方法为例,说明本申请实施例提供的视频处理装置。
图20是本申请提供的视频处理装置的结构示意图。如图20所示,本实施例提供的视频处理装置,包括:
接收模块210,用于接收用户对第一视频的播放界面中的目标对象的第一输入;
获取模块220,用于响应于所述第一输入,获取原始视频帧序列和播放视频帧序列,所述原始视频帧序列包括第一原始视频图像,所述播放视频帧序列包括第一播放视频图像,所述第一播放视频图像是根据所述第一输入确定的,所述第一原始视频图像为与所述第一播放视频图像关联的原始图像;
处理模块230,用于根据所述原始视频帧序列和所述播放视频帧序列,得到目标视频;所述目标视频中第一区域的图像的分辨率大于所述第一视频中第二区域的图像的分辨率,所述第一区域和所述第二区域均包括所述目标对象。
本实施例的装置,接收模块接收用户对第一视频的播放界面中的目标对象的第一输入;获取模块响应于该第一输入,获取包括第一原始视频图像的原始视频帧序列,以及包括第一播放视频图像的播放视频帧序列,其中,第一播放视频图像是根据用户的第一输入确定的,第一原始视频图像为与第一播放视频图像关联的原始图像;进一步地,处理模块根据原始视频帧序列和播放视频帧序列,得到目标视频;由于目标视频中目标对象所在第一区域的图像的分辨率大于第一视频中目标对象所在第二区域的图像的分辨率,因此得到的目标视频中用户感兴趣的对象所在区域的图像画质较好。
可选地,该装置还包括:显示模块,用于:
响应于所述第一输入,显示至少一个目标对象显示选项,所述目标对象显示选项指示所述目标视频中所述目标对象的显示方式;
接收模块210,还用于接收用户对所述至少一个目标对象显示选项中的目标显示选项的第二输入;
所述处理模块230,具体用于:
响应于所述第二输入,根据所述目标显示选项指示的所述目标对象的显示方式,将所述原始视频帧序列和所述播放视频帧序列进行视频合成,得到所述目标视频。
可选地,显示模块,还用于:显示至少一个图像参数调节控件;
接收模块210,还用于接收用户对所述至少一个图像参数调节控件的第三输入;
所述处理模块230,具体用于:
响应于所述第三输入,从所述原始视频帧序列中获取包括目标对象原始图像的目标原始视频帧序列,所述目标对象原始图像为所述第一原始视频图像中的目标对象所在的第三区域的图像;
根据第一图像参数,对所述目标原始视频帧序列进行处理,得到目标视频帧序列,所述第一图像参数是根据所述第三输入确定的;
将所述目标视频帧序列和所述播放视频帧序列进行视频合成,得到所述目标视频。
上述实施方式中,在处理过程中仅利用了目标对象所在的第三区域的图像的视频帧序列和播放视频帧序列进行视频合成,减少了计算量,提高了处理效率。
可选地,所述处理模块230,具体用于:
将所述播放视频帧序列中所述第二区域的图像替换为目标视频帧序列中的视频图像,得到融合视频帧序列;
将所述融合视频帧序列进行视频合成,得到所述目标视频。
上述实施方式中,将播放视频帧序列中第二区域的图像替换为目标视频帧序列中的视频图像,得到融合视频帧序列,进而基于融合视频帧序列得到目标视频,目标视频中目标对象所在第一区域的图像的分辨率大于第一视频中目标对象所在第二区域的图像的分辨率,因此得到的目标视频中用户感兴趣的对象的图像画质较好。
可选地,所述处理模块230,具体用于:
将所述目标视频帧序列进行视频合成,得到目标对象视频;
将所述播放视频帧序列进行视频合成,得到子视频;
将所述目标对象视频与所述子视频进行视频合成,得到所述目标视频,所述目标视频的播放界面中包括目标对象播放窗口,所述目标对象播放窗口用于播放所述目标对象视频。
上述实施方式中,目标视频的播放界面中包括目标对象播放窗口,目标对象播放窗口用于播放目标对象视频,目标对象视频中的图像是原始视频图像经过处理得到的,目标视频的播放界面中播放的是播放视频帧序列形成的子视频,目标对象视频中图像的分辨率大于子视频中目标对象所在第二区域的图像的分辨率,因此用户感兴趣的目标对象所在区域的图像画质较好。
可选地,显示模块,还用于:显示至少一个视频存储选项,所述视频存储选项指示所述目标对象视频的存储方式;
接收用户对所述至少一个视频存储选项的第四输入;
可选地,所述装置还包括:存储模块,用于:
响应于所述第四输入,分别存储所述目标对象视频和所述子视频,或将所述目标对象视频与所述子视频关联存储。
上述实施方式中,对处理得到的目标对象视频和子视频,可以分别存储目标对象视频和子视频,或将目标对象视频与子视频关联存储,便于用户后续使用,灵活性较大。
可选地,接收模块210,还用于接收用户对所述目标对象播放窗口的第五输入;
所述处理模块230,还用于响应于所述第五输入,执行目标处理,所述目标处理包括以下至少一项:调整所述目标对象播放窗口的尺寸;移动所述目标对象播放窗口;暂停播放所述目标对象播放窗口中的目标对象视频;取消显示所述目标对象播放窗口。
上述实施方式中,在用户不需要关注该目标对象播放窗口中播放的图像时,可以取消显示目标对象播放窗口,避免该目标对象播放窗口遮挡当前播放的视频;在用户不需要关注该目标对象播放窗口中播放的图像时,可以暂停目标对象播放窗口中目标对象视频的播放,减少设备的功耗;通过调整目标对象播放窗口在播放界面上的位置,可以避免该目标对象播放窗口遮挡播放图像中用户感兴趣的其他内容;还可以调整目标对象播放窗口的尺寸,灵活性较大。
可选地,接收模块210,还用于接收用户对视频录制界面的第六输入;
所述处理模块230,还用于:响应于所述第六输入,按照预设帧率和预设分辨率进行录像,并在录像过程中,同步缓存原始视频帧和预览视频帧;
根据缓存的所述原始视频帧和所述预览视频帧,得到原始视频数据和视频播放数据,所述原始视频数据包括所述原始视频帧序列,所述视频播放数据包括所述播放视频帧序列;
存储模块,还用于:将所述原始视频数据和所述视频播放数据关联存储。
上述实施方式中,通过录像得到原始视频数据和视频播放数据,并将原始视频数据和视频播放数据关联存储,视频播放时,可以选择播放的视频中显示的某帧图像为基准,选取对应的原始视频图像以及包括该原始视频图像的原始视频帧序列,基于原始视频帧序列和包括该基准图像的播放视频帧序列,得到目标视频,由于视频播放数据为经过原始视频数据转换得到的,原始视频帧序列中含有较多的图像信息,可以恢复播放视频帧序列中损失的一些图像信息,得到的目标视频中目标对象所在区域的图像的分辨率,大于该播放视频帧序列中图像中目标对象所在区域图像的分辨率,因此,目标视频中目标对象所在区域的图像的显示效果较好。
本申请实施例中的视频处理装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的视频处理装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的视频处理装置能够实现图1至图19的方法实施例中视频处理装置实现的各个过程,为避免重复,这里不再赘述。
可选地,如图21所示,本申请实施例还提供一种电子设备2100,包括处理器2101,存储器2102,存储在存储器2102上并可在所述处理器2101上运行的程序或指令,该程序或指令被处理器2101执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图22为实现本申请实施例的电子设备的硬件结构示意图。
该电子设备1000包括但不限于:射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元1007、接口单元1008、存储器1009、以及处理器1010等部件。
本领域技术人员可以理解,电子设备1000还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器1010逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图14中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,用户输入单元1007,用于接收用户对第一视频的播放界面中的目标对象的第一输入;
处理器1010,用于响应于所述第一输入,获取原始视频帧序列和播放视频帧序列,所述原始视频帧序列包括第一原始视频图像,所述播放视频帧序列包括第一播放视频图像,所述第一播放视频图像是根据所述第一输入确定的,所述第一原始视频图像为与所述第一播放视频图像关联的原始图像;
根据所述原始视频帧序列和所述播放视频帧序列,得到目标视频;所述目标视频中第一区域的图像的分辨率大于所述第一视频中第二区域的图像的分辨率,所述第一区域和所述第二区域均包括所述目标对象。
本申请实施例提供的电子设备,本实施例的装置用户输入单元接收用户对第一视频的播放界面中的目标对象的第一输入;处理器响应于该第一输入,获取包括第一原始视频图像的原始视频帧序列,以及包括第一播放视频图像的播放视频帧序列,其中,第一播放视频图像是根据用户的第一输入确定的,第一原始视频图像为与第一播放视频图像关联的原始图像;进一步地,根据原始视频帧序列和播放视频帧序列,得到目标视频;由于目标视频中目标对象所在第一区域的图像的分辨率大于第一视频中目标对象所在第二区域的图像的分辨率,因此得到的目标视频中用户感兴趣的对象的图像画质较好。
可选的,显示单元1006具体用于:
响应于所述第一输入,显示至少一个目标对象显示选项,所述目标对象显示选项指示所述目标视频中所述目标对象的显示方式;
用户输入单元1007,还用于接收用户对所述至少一个目标对象显示选项中的目标显示选项的第二输入;
所述处理器1010,具体用于:
响应于所述第二输入,根据所述目标显示选项指示的所述目标对象的显示方式,将所述原始视频帧序列和所述播放视频帧序列进行视频合成,得到所述目标视频。
可选地,显示单元1006,还用于:显示至少一个图像参数调节控件;
用户输入单元1007,还用于接收用户对所述至少一个图像参数调节控件的第三输入;
所述处理器1010,具体用于:
响应于所述第三输入,从所述原始视频帧序列中获取包括目标对象原始图像的目标原始视频帧序列,所述目标对象原始图像为所述第一原始视频图像中的目标对象所在的第三区域的图像;
根据第一图像参数,对所述目标原始视频帧序列进行处理,得到目标视频帧序列,所述第一图像参数是根据所述第三输入确定的;
将所述目标视频帧序列和所述播放视频帧序列进行视频合成,得到所述目标视频。
上述实施方式中,在处理过程中仅利用了目标对象所在的第三区域的图像的视频帧序列和播放视频帧序列进行视频合成,减少了计算量,提高了处理效率。
可选地,所述处理器1010,具体用于:
将所述播放视频帧序列中所述第二区域的图像替换为目标视频帧序列中的视频图像,得到融合视频帧序列;
将所述融合视频帧序列进行视频合成,得到所述目标视频。
上述实施方式中,将播放视频帧序列中第二区域的图像替换为目标视频帧序列中的视频图像,得到融合视频帧序列,进而基于融合视频帧序列得到目标视频,目标视频中目标对象所在第一区域的图像的分辨率大于第一视频中目标对象所在第二区域的图像的分辨率,因此得到的目标视频中用户感兴趣的对象的图像画质较好。
可选地,所述处理器1010,具体用于:
将所述目标视频帧序列进行视频合成,得到目标对象视频;
将所述播放视频帧序列进行视频合成,得到子视频;
将所述目标对象视频与所述子视频进行视频合成,得到所述目标视频,所述目标视频的播放界面中包括目标对象播放窗口,所述目标对象播放窗口用于播放所述目标对象视频。
上述实施方式中,目标视频的播放界面中包括目标对象播放窗口,目标对象播放窗口用于播放目标对象视频,目标对象视频中的图像是原始视频图像经过处理得到的,目标视频的播放界面中播放的是播放视频帧序列形成的子视频,目标对象视频中图像的分辨率大于子视频中目标对象所在第二区域的图像的分辨率,因此用户感兴趣的目标对象的图像画质较好。
可选地,显示单元1006,还用于:显示至少一个视频存储选项,所述视频存储选项指示所述目标对象视频的存储方式;
用户输入单元1007,还用于接收用户对所述至少一个视频存储选项的第四输入;
存储器1009,用于响应于所述第四输入,分别存储所述目标对象视频和所述子视频,或将所述目标对象视频与所述子视频关联存储。
上述实施方式中,对处理得到的目标对象视频和子视频,可以分别存储目标对象视频和子视频,或将目标对象视频与子视频关联存储,便于用户后续使用,灵活性较大。
可选地,用户输入单元1007,还用于接收用户对所述目标对象播放窗口的第五输入;
所述处理器1010,还用于响应于所述第五输入,执行目标处理,所述目标处理包括以下至少一项:调整所述目标对象播放窗口的尺寸;移动所述目标对象播放窗口;暂停播放所述目标对象播放窗口中的目标对象视频;取消显示所述目标对象播放窗口。
上述实施方式中,在用户不需要关注该目标对象播放窗口中播放的图像时,可以取消显示目标对象播放窗口,避免该目标对象播放窗口遮挡当前播放的视频;在用户不需要关注该目标对象播放窗口中播放的图像时,可以暂停目标对象播放窗口中目标对象视频的播放,减少设备的功耗;通过调整目标对象播放窗口在播放界面上的位置,可以避免该目标对象播放窗口遮挡播放图像中用户感兴趣的其他内容;还可以调整目标对象播放窗口的尺寸,灵活性较大。
可选地,用户输入单元1007,还用于接收用户对视频录制界面的第六输入;
所述处理器1010,还用于:响应于所述第六输入,按照预设帧率和预设分辨率进行录像,并在录像过程中,同步缓存原始视频帧和预览视频帧;
根据缓存的所述原始视频帧和所述预览视频帧,得到原始视频数据和视频播放数据,所述原始视频数据包括所述原始视频帧序列,所述视频播放数据包括所述播放视频帧序列;
存储器1009还用于:将所述原始视频数据和所述视频播放数据关联存储。
上述实施方式中,通过录像得到原始视频数据和视频播放数据,并将原始视频数据和视频播放数据关联存储,视频播放时,可以选择播放的视频中显示的某帧图像为基准,选取对应的原始视频图像以及包括该原始视频图像的原始视频帧序列,基于原始视频帧序列和包括该基准图像的播放视频帧序列,得到目标视频,由于视频播放数据为经过原始视频数据转换得到的,原始视频帧序列中含有较多的图像信息,可以恢复播放视频帧序列中损失的一些图像信息,得到的目标视频中目标对象所在区域的图像的分辨率,大于该播放视频帧序列中图像中目标对象所在区域图像的分辨率,因此,目标视频中目标对象所在区域的图像的显示效果较好。
应理解的是,本申请实施例中,输入单元1004可以包括图形处理器(GraphicsProcessing Unit,GPU)10041和麦克风10042,图形处理器10041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1006可包括显示面板10061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板10061。用户输入单元1007包括触控面板10071以及其他输入设备10072。触控面板10071,也称为触摸屏。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器1009可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器1010可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器1010中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
本申请实施例另提供了一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (11)

1.一种视频处理方法,其特征在于,包括:
接收用户对第一视频的播放界面中的目标对象的第一输入;
响应于所述第一输入,获取原始视频帧序列和播放视频帧序列,所述原始视频帧序列包括第一原始视频图像,所述播放视频帧序列包括第一播放视频图像,所述第一播放视频图像是根据所述第一输入确定的,所述第一原始视频图像为与所述第一播放视频图像关联的原始图像;
根据所述原始视频帧序列和所述播放视频帧序列,得到目标视频;所述目标视频中第一区域的图像的分辨率大于所述第一视频中第二区域的图像的分辨率,所述第一区域和所述第二区域均包括所述目标对象。
2.根据权利要求1所述的视频处理方法,其特征在于,所述接收用户对第一视频的播放界面中的目标对象的第一输入之后,还包括:
响应于所述第一输入,显示至少一个目标对象显示选项,所述目标对象显示选项指示所述目标视频中所述目标对象的显示方式;
接收用户对所述至少一个目标对象显示选项中的目标显示选项的第二输入;
所述根据所述原始视频帧序列和所述播放视频帧序列,得到目标视频,包括:
响应于所述第二输入,根据所述目标显示选项指示的所述目标对象的显示方式,将所述原始视频帧序列和所述播放视频帧序列进行视频合成,得到所述目标视频。
3.根据权利要求1所述的视频处理方法,其特征在于,所述根据所述原始视频帧序列和所述播放视频帧序列,得到目标视频之前,还包括:
显示至少一个图像参数调节控件;
接收用户对所述至少一个图像参数调节控件的第三输入;
所述根据所述原始视频帧序列和所述播放视频帧序列,得到所述目标视频,包括:
响应于所述第三输入,从所述原始视频帧序列中获取包括目标对象原始图像的目标原始视频帧序列,所述目标对象原始图像为所述第一原始视频图像中的目标对象所在的第三区域的图像;
根据第一图像参数,对所述目标原始视频帧序列进行处理,得到目标视频帧序列,所述第一图像参数是根据所述第三输入确定的;
将所述目标视频帧序列和所述播放视频帧序列进行视频合成,得到所述目标视频。
4.根据权利要求3所述的视频处理方法,其特征在于,所述将所述目标视频帧序列和所述播放视频帧序列进行视频合成,得到所述目标视频,包括:
将所述播放视频帧序列中所述第二区域的图像替换为目标视频帧序列中的视频图像,得到融合视频帧序列;
将所述融合视频帧序列进行视频合成,得到所述目标视频。
5.根据权利要求3所述的视频处理方法,其特征在于,所述将所述目标视频帧序列和所述播放视频帧序列进行视频合成,得到所述目标视频,包括:
将所述目标视频帧序列进行视频合成,得到目标对象视频;
将所述播放视频帧序列进行视频合成,得到子视频;
将所述目标对象视频与所述子视频进行视频合成,得到所述目标视频,所述目标视频的播放界面中包括目标对象播放窗口,所述目标对象播放窗口用于播放所述目标对象视频。
6.根据权利要求5所述的视频处理方法,其特征在于,所述将所述目标视频帧序列进行视频合成,得到目标对象视频之前,还包括:
显示至少一个视频存储选项,所述视频存储选项指示所述目标对象视频的存储方式;
接收用户对所述至少一个视频存储选项的第四输入;
所述将所述目标视频帧序列进行视频合成,得到目标对象视频,以及将所述播放视频帧序列进行视频合成,得到子视频之后,还包括:
响应于所述第四输入,分别存储所述目标对象视频和所述子视频,或将所述目标对象视频与所述子视频关联存储。
7.根据权利要求5所述的视频处理方法,其特征在于,还包括:
接收用户对所述目标对象播放窗口的第五输入;
响应于所述第五输入,执行目标处理,所述目标处理包括以下至少一项:调整所述目标对象播放窗口的尺寸;移动所述目标对象播放窗口;暂停播放所述目标对象播放窗口中的目标对象视频;取消显示所述目标对象播放窗口。
8.根据权利要求1所述的视频处理方法,其特征在于,所述接收用户对第一视频的播放界面中的目标对象的第一输入之前,还包括:
接收用户对视频录制界面的第六输入;
响应于所述第六输入,按照预设帧率和预设分辨率进行录像,并在录像过程中,同步缓存原始视频帧和预览视频帧;
根据缓存的所述原始视频帧和所述预览视频帧,得到原始视频数据和视频播放数据,所述原始视频数据包括所述原始视频帧序列,所述视频播放数据包括所述播放视频帧序列;
将所述原始视频数据和所述视频播放数据关联存储。
9.一种视频处理装置,其特征在于,包括:
接收模块,用于接收用户对第一视频的播放界面中的目标对象的第一输入;
获取模块,用于响应于所述第一输入,获取原始视频帧序列和播放视频帧序列,所述原始视频帧序列包括第一原始视频图像,所述播放视频帧序列包括第一播放视频图像,所述第一播放视频图像是根据所述第一输入确定的,所述第一原始视频图像为与所述第一播放视频图像关联的原始图像;
处理模块,用于根据所述原始视频帧序列和所述播放视频帧序列,得到目标视频;所述目标视频中第一区域的图像的分辨率大于所述第一视频中第二区域的图像的分辨率,所述第一区域和所述第二区域均包括所述目标对象。
10.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1-8任一项所述的视频处理方法的步骤。
11.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1-8任一项所述的视频处理方法的步骤。
CN202111032060.8A 2021-09-03 2021-09-03 视频处理方法、装置、设备和存储介质 Active CN113852757B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111032060.8A CN113852757B (zh) 2021-09-03 2021-09-03 视频处理方法、装置、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111032060.8A CN113852757B (zh) 2021-09-03 2021-09-03 视频处理方法、装置、设备和存储介质

Publications (2)

Publication Number Publication Date
CN113852757A true CN113852757A (zh) 2021-12-28
CN113852757B CN113852757B (zh) 2023-05-26

Family

ID=78973108

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111032060.8A Active CN113852757B (zh) 2021-09-03 2021-09-03 视频处理方法、装置、设备和存储介质

Country Status (1)

Country Link
CN (1) CN113852757B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115242981A (zh) * 2022-07-25 2022-10-25 维沃移动通信有限公司 视频播放方法、视频播放装置和电子设备

Citations (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070086669A1 (en) * 2005-10-13 2007-04-19 Berger Adam L Regions of interest in video frames
US20090303338A1 (en) * 2008-06-06 2009-12-10 Texas Instruments Incorporated Detailed display of portion of interest of areas represented by image frames of a video signal
CN102106145A (zh) * 2008-07-30 2011-06-22 三星电子株式会社 用于显示再现图像的放大的目标区域的装置和方法
CN103546716A (zh) * 2012-07-17 2014-01-29 三星电子株式会社 提供图像的系统及方法
CN103873741A (zh) * 2014-04-02 2014-06-18 北京奇艺世纪科技有限公司 一种用于替换视频中感兴趣区域的方法及装置
US20150269731A1 (en) * 2014-03-19 2015-09-24 Vivotek Inc. Device, method for image analysis and computer-readable medium
CN106534972A (zh) * 2016-12-12 2017-03-22 广东威创视讯科技股份有限公司 一种无损缩放显示局部视频的方法及装置
CN106792092A (zh) * 2016-12-19 2017-05-31 广州虎牙信息科技有限公司 直播视频流分镜显示控制方法及其相应的装置
US20180295400A1 (en) * 2015-10-08 2018-10-11 Koninklijke Kpn N.V. Enhancing A Region Of Interest In Video Frames Of A Video Stream
US20190098347A1 (en) * 2017-09-25 2019-03-28 General Electric Company System and method for remote radiology technician assistance
CN109963200A (zh) * 2017-12-25 2019-07-02 上海全土豆文化传播有限公司 视频播放方法及装置
CN110502954A (zh) * 2018-05-17 2019-11-26 杭州海康威视数字技术股份有限公司 视频分析的方法和装置
CN110798709A (zh) * 2019-11-01 2020-02-14 腾讯科技(深圳)有限公司 视频处理方法和装置、存储介质及电子装置
CN111432154A (zh) * 2020-03-30 2020-07-17 维沃移动通信有限公司 视频播放方法、视频处理方法及电子设备
CN111698553A (zh) * 2020-05-29 2020-09-22 维沃移动通信有限公司 视频处理方法、装置、电子设备及可读存储介质
CN113014817A (zh) * 2021-03-04 2021-06-22 维沃移动通信有限公司 高清高帧视频的获取方法、装置及电子设备
CN113099245A (zh) * 2021-03-04 2021-07-09 广州方硅信息技术有限公司 全景视频直播方法、系统和计算机可读存储介质
CN113115095A (zh) * 2021-03-18 2021-07-13 北京达佳互联信息技术有限公司 视频处理方法、装置、电子设备以及存储介质
CN113259743A (zh) * 2020-12-28 2021-08-13 维沃移动通信有限公司 视频播放方法、装置及电子设备

Patent Citations (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070086669A1 (en) * 2005-10-13 2007-04-19 Berger Adam L Regions of interest in video frames
US20090303338A1 (en) * 2008-06-06 2009-12-10 Texas Instruments Incorporated Detailed display of portion of interest of areas represented by image frames of a video signal
CN102106145A (zh) * 2008-07-30 2011-06-22 三星电子株式会社 用于显示再现图像的放大的目标区域的装置和方法
CN103546716A (zh) * 2012-07-17 2014-01-29 三星电子株式会社 提供图像的系统及方法
US20150269731A1 (en) * 2014-03-19 2015-09-24 Vivotek Inc. Device, method for image analysis and computer-readable medium
CN103873741A (zh) * 2014-04-02 2014-06-18 北京奇艺世纪科技有限公司 一种用于替换视频中感兴趣区域的方法及装置
US20180295400A1 (en) * 2015-10-08 2018-10-11 Koninklijke Kpn N.V. Enhancing A Region Of Interest In Video Frames Of A Video Stream
CN106534972A (zh) * 2016-12-12 2017-03-22 广东威创视讯科技股份有限公司 一种无损缩放显示局部视频的方法及装置
CN106792092A (zh) * 2016-12-19 2017-05-31 广州虎牙信息科技有限公司 直播视频流分镜显示控制方法及其相应的装置
US20190098347A1 (en) * 2017-09-25 2019-03-28 General Electric Company System and method for remote radiology technician assistance
CN109963200A (zh) * 2017-12-25 2019-07-02 上海全土豆文化传播有限公司 视频播放方法及装置
CN110502954A (zh) * 2018-05-17 2019-11-26 杭州海康威视数字技术股份有限公司 视频分析的方法和装置
CN110798709A (zh) * 2019-11-01 2020-02-14 腾讯科技(深圳)有限公司 视频处理方法和装置、存储介质及电子装置
CN111432154A (zh) * 2020-03-30 2020-07-17 维沃移动通信有限公司 视频播放方法、视频处理方法及电子设备
CN111698553A (zh) * 2020-05-29 2020-09-22 维沃移动通信有限公司 视频处理方法、装置、电子设备及可读存储介质
CN113259743A (zh) * 2020-12-28 2021-08-13 维沃移动通信有限公司 视频播放方法、装置及电子设备
CN113014817A (zh) * 2021-03-04 2021-06-22 维沃移动通信有限公司 高清高帧视频的获取方法、装置及电子设备
CN113099245A (zh) * 2021-03-04 2021-07-09 广州方硅信息技术有限公司 全景视频直播方法、系统和计算机可读存储介质
CN113115095A (zh) * 2021-03-18 2021-07-13 北京达佳互联信息技术有限公司 视频处理方法、装置、电子设备以及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115242981A (zh) * 2022-07-25 2022-10-25 维沃移动通信有限公司 视频播放方法、视频播放装置和电子设备

Also Published As

Publication number Publication date
CN113852757B (zh) 2023-05-26

Similar Documents

Publication Publication Date Title
CN110636353A (zh) 一种显示设备
WO2022077996A1 (zh) 一种多媒体数据处理方法、装置、电子设备和存储介质
EP4333439A1 (en) Video sharing method and apparatus, device, and medium
CN112714253B (zh) 视频录制方法、装置、电子设备和可读存储介质
CN112954199B (zh) 视频录制方法及装置
CN112073798B (zh) 一种数据传输方法及设备
CN113014801B (zh) 录像方法、装置、电子设备及介质
CN112672061B (zh) 视频拍摄方法、装置、电子设备及介质
CN111722775A (zh) 图像处理方法、装置、设备及可读存储介质
CN113259743A (zh) 视频播放方法、装置及电子设备
US20220006971A1 (en) Screen recording method and apparatus, and electronic device
CN113852757B (zh) 视频处理方法、装置、设备和存储介质
CN113852756B (zh) 图像获取方法、装置、设备和存储介质
US20230274388A1 (en) Photographing Method, and Electronic Device and Non-Transitory Readable Storage Medium
CN113794831B (zh) 视频拍摄方法、装置、电子设备及介质
CN113852774A (zh) 录屏方法及装置
CN113873168A (zh) 拍摄方法、装置、电子设备及介质
CN112202958B (zh) 截图方法、装置及电子设备
CN113923392A (zh) 视频录制方法、视频录制装置和电子设备
CN113873319A (zh) 视频处理方法、装置、电子设备及存储介质
CN113891018A (zh) 拍摄方法、装置及电子设备
CN115278047A (zh) 拍摄方法、装置、电子设备和存储介质
CN113805709A (zh) 信息输入方法、装置
CN114025100A (zh) 拍摄方法、装置、电子设备和可读存储介质
CN114245193A (zh) 显示控制方法、装置和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant