CN104796767A - 一种云视频编辑方法和系统 - Google Patents
一种云视频编辑方法和系统 Download PDFInfo
- Publication number
- CN104796767A CN104796767A CN201510149839.6A CN201510149839A CN104796767A CN 104796767 A CN104796767 A CN 104796767A CN 201510149839 A CN201510149839 A CN 201510149839A CN 104796767 A CN104796767 A CN 104796767A
- Authority
- CN
- China
- Prior art keywords
- video data
- video
- editing
- mobile client
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明提供了一种云视频编辑方法和系统,包括:移动客户端接收用户对视频数据的编辑操作;所述移动客户端根据用户的编辑操作调用着色器对图形处理器进行在线编程;所述移动客户端调用编程后的所述图形处理器对所述视频数据进行实时渲染,并将实时渲染得到的视频数据显示在移动设备的屏幕上;所述移动客户端接收到用户触发的分享操作后,将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器;所述视频编辑服务器根据所述编辑参数对预存的视频数据进行解码、特效处理及编码操作,并生成新的视频数据发布在网络上。
Description
技术领域
本发明涉及视频领域,特别是涉及一种云视频编辑方法,以及,一种云视频编辑系统。
背景技术
高分辨率、高帧率的视频摄像已成为手机、平板电脑等智能移动设备上必不可少的功能之一。越来越多的用户,在移动设备上对采集到的视频数据进行编辑并在网络上进行分享。在移动设备上对高清晰度的视频进行编辑,是一项极具挑战性的任务。视频编辑需要进行音视频数据的解码、编辑并重新编码的过程。受限于功耗及尺寸限制,移动设备上的CPU处理能力仍然有限。处理时间与原片长的比值通常在10以上,即一个时长在1分钟的视频,编辑时间需要10分钟以上。借助于云计算技术,用户可以将需要编辑的视频上传到云端,利用云端服务器性能更为强大的计算能力对音视频进行处理。
但是,视频编辑是一个反复尝试的过程,用户需要对编辑效果不断进行调整,直至满意。在此过程中,云端服务器每次需要重新进行编辑转码。移动设备端上的客户端则需要每次下载播放生成的高码率视频,对网络带宽的占用非常可观。而更为严重的是,当用户处于2G/3G等低网速环境时,用户无法实时的预览编辑效果。
发明内容
本发明提供了一种云视频编辑方法和系统,以节约带宽,解决在云端进行视频编辑时,客户端需要占用大量带宽进行效果预览之中至少一个问题。
本发明提供了一种云视频编辑方法,包括:
移动客户端接收用户对视频数据的编辑操作;
所述移动客户端根据用户的编辑操作调用着色器对图形处理器进行在线编程;
所述移动客户端调用编程后的所述图形处理器对所述视频数据进行实时渲染,并将实时渲染得到的视频数据显示在移动设备的屏幕上;
所述移动客户端接收到用户触发的分享操作后,将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器;
所述视频编辑服务器根据所述编辑参数对预存的视频数据进行解码、特效处理及编码操作,并生成新的视频数据发布在网络上。
优选地,所述编辑操作包括多个;
所述移动客户端根据用户的编辑操作调用着色器对图形处理器进行在线编程包括:
所述移动客户端调用所述移动设备上的硬件编码器对所述视频数据进行解码;
将解码后的视频数据传送到所述图形处理器;
利用三维图形API接口,根据用户的编辑操作调用相应的定点着色器和片着色器对所述图形处理器进行在线编程。
优选地,在所述调用编程后的所述图形处理器对所述视频数据进行实时渲染之后,所述方法还包括:
将渲染得到的图像数据存储在视频缓冲区中;
所述将实时渲染得到的视频数据显示在移动设备的屏幕上包括:
从所述视频缓冲区调用渲染得到的图像数据,并调用显示模块将渲染得到的视频数据显示在所述移动设备的屏幕上。
优选地,在所述移动客户端将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器的同时,所述方法还包括:
所述移动客户端将所述视频数据的属性信息传输到所述视频编辑服务器。
优选地,所述视频编辑服务器根据所述编辑参数对预存的视频数据进行解码、特效处理及编码操作包括:
所述视频编辑服务器读取备份在视频存储服务器中的所述视频数据;
根据所述编辑参数对提取的视频数据进行解码、特效处理及编码操作。
本发明还提供了一种云视频编辑系统,包括移动设备和视频编辑服务器,所述移动设备上安装有移动客户端;
所述移动客户端包括:
编辑操作接收模块,用于移动客户端接收用户对视频数据的编辑操作;
在线编程模块,用于所述移动客户端根据用户的编辑操作调用着色器对图形处理器进行在线编程;
实时渲染模块,用于所述移动客户端调用编程后的所述图形处理器对所述视频数据进行实时渲染;
显示模块,用于将实时渲染得到的视频数据显示在移动设备的屏幕上;
参数发送模块,用于所述移动客户端接收到用户触发的分享操作后,将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器;
所述视频编辑服务器包括:
编辑处理模块,用于根据所述编辑参数对预存的视频数据进行解码、特效处理及编码操作;
视频发布模块,用于生成新的视频数据发布在网络上。
优选地,所述编辑操作包括多个;
所述在线编程模块包括:
解码子模块,用于所述移动客户端调用所述移动设备上的硬件编码器对所述视频数据进行解码;
视频传送子模块,用于将解码后的视频数据传送到所述图形处理器;
接口调用子模块,用于利用三维图形API接口,根据用户的编辑操作调用相应的定点着色器和片着色器对所述图形处理器进行在线编程。
优选地,所述移动客户端还包括:
视频存储模块,用于将渲染得到的图像数据存储在视频缓冲区中;
所述显示模块,具体用于从所述视频缓冲区调用渲染得到的图像数据,并调用显示模块将渲染得到的视频数据显示在所述移动设备的屏幕上。
优选地,所述参数发送模块,还用于在所述移动客户端将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器的同时,将所述视频数据的属性信息传输到所述视频编辑服务器。
优选地,所述系统还包括视频存储服务器;
所述编辑处理模块包括:
视频读取子模块,用于所述视频编辑服务器读取备份在视频存储服务器中的所述视频数据;
视频编辑子模块,用于根据所述编辑参数对提取的视频数据进行解码、特效处理及编码操作。
与背景技术相比,本发明包括以下优点:
本发明实施例将视频处理过程中的效果预览和生成最终视频两个环节分开,分别在移动设备和视频编辑服务器上执行,效果预览步骤在移动设备上利用图形处理器GPU上完成,在此步骤上并不需要进行计算量极大的转码工作,而只是将处理效果展示给用户;而在最终的视频分享环节,只需要移动客户端将用户最终确认好的编辑参数上传到云端服务器,由云端服务器完成后续的处理及转码操作,并完成用户分享发布任务。
由于本方案不需要客户端在用户每次更改特效时,将云端生成的视频下载到本地进行预览,所以可以显著的节约网络带宽,极大降低了云视频编辑对带宽的消耗,该方案在2G/3G等网络环境下依然行之有效,可以解决用户在2G/3G网络环境下,无法实时预览效果的问题,改善了用户体验;同时,由于云端服务器不需要在反复进行视频渲染和转码等工作,极大降低了云端服务器的负载。综合这两个有点,采用本发明实施例可显著降低提供云视频编辑服务的成本。
附图说明
图1是本发明实施例的一种云视频编辑方法的流程图;
图2是本发明实施例的一种云视频编辑系统的结构框图;
图3是本发明传统方案的系统框图;
图4是本发明实施例的一个示例中云视频编辑方案的系统架构图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
参照图1,其示出了本发明实施例所述一种云视频编辑方法的流程图,所述方法具体可以包括:
步骤101、移动客户端接收用户对视频数据的编辑操作。
本发明实施例中,移动设备上安装有移动客户端,对应可以执行本发明实施例的相关功能。用户在打开移动客户端之后,可以查找需要编辑的视频数据,并进一步对视频数据进行编辑,移动客户端上可以预置有对视频数据进行编辑的各种选项,用户可以通过选择菜单、链接、或是通过各种快捷键和预设的手势操作实现对视频的编辑。
具体编辑操作包含但不仅限于图像平移、图像缩放、图像旋转、图像色彩滤波、添加视频字幕、修改视频文件的初始及结束时间、多个视频的拼接等。
步骤102、所述移动客户端根据用户的编辑操作调用着色器对图形处理器进行在线编程。
步骤103、所述移动客户端调用编程后的所述图形处理器对所述视频数据进行实时渲染,并将实时渲染得到的视频数据显示在移动设备的屏幕上。
对图形处理器进行变成后,可以进一步对视频数据进行实时渲染,并显示在移动设备的屏幕上,以供用户观看编辑操作对应的编辑效果。
步骤104、所述移动客户端接收到用户触发的分享操作后,将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器。
用户观看完视频编辑效果后,若满意,则可以进一步触发分享操作,若不满意,可以进行再次编辑,也即是说,编辑操作包括多个,相应重复执行上述101-103的操作得到新的编辑效果。触发分享操作后,移动客户端会进一步提取本次编辑对应的编辑参数,根据编辑参数可以对视频数据进行编辑进一步生成编辑后视频数据。
传统的方案中,编辑视频的操作在移动客户端调用GPU生成,而本发明实施例中,编辑视频的操作由云端的视频编辑服务器根据接收到的编辑参数执行。
编辑参数包含但不仅限于图像平移参数(水平垂直位移)、图像缩放参数(放大缩小倍数)、图像旋转参数(旋转角度)、图像色彩滤波(滤波器种类及相应滤波器系数)、添加视频字幕(字幕文件)、修改视频文件的初始及结束时间、多个视频的拼接(各视频的起始结束时间及排列顺序)等。
步骤105、所述视频编辑服务器根据所述编辑参数对预存的视频数据进行解码、特效处理及编码操作,并生成新的视频数据发布在网络上。
视频编辑服务器对视频数据的编辑操作包括:解码,特效处理和编码三个环节,在编辑完成后,进一步将编辑生成的视频数据发布在网络上。
依据本发明实施例的方案,将视频处理过程中的效果预览和生成最终视频两个环节分开,分别在移动设备和视频编辑服务器上执行,效果预览步骤在移动设备上利用图形处理器GPU上完成,在此步骤上并不需要进行计算量极大的转码工作,而只是将处理效果展示给用户;而在最终的视频分享环节,只需要移动客户端将用户最终确认好的编辑参数上传到云端服务器,由云端服务器完成后续的处理及转码操作,并完成用户分享发布任务。
由于本方案不需要客户端在用户每次更改特效时,将云端生成的视频下载到本地进行预览,所以可以显著的节约网络带宽,极大降低了云视频编辑对带宽的消耗,该方案在2G/3G等网络环境下依然行之有效,可以解决用户在2G/3G网络环境下,无法实时预览效果的问题,改善了用户体验;同时,由于云端服务器不需要在反复进行视频渲染和转码等工作,极大降低了云端服务器的负载。综合这两个有点,采用本发明实施例可显著降低提供云视频编辑服务的成本。
并且,本申请的方案可用于视频拍摄、编辑和分享应用、云盘应用等移动端APP上,有效改善用户的产品体验;可以为移动端设备提供云视频编辑服务,有利于鼓励用户将拍摄视频备份到云端,增强用户粘度。
本发明实施例中,优选地,所述步骤102可以包括:
子步骤1021,所述移动客户端调用所述移动设备上的硬件编码器对所述视频数据进行解码;
子步骤1022,将解码后的视频数据传送到所述图形处理器;
子步骤1023,利用三维图形API接口,根据用户的编辑操作调用相应的定点着色器和片着色器对所述图形处理器进行在线编程。
本发明实施例中,优选地,在所述调用编程后的所述图形处理器对所述视频数据进行实时渲染之后,所述方法还包括:
将渲染得到的图像数据存储在视频缓冲区中;
所述将实时渲染得到的视频数据显示在移动设备的屏幕上包括:
从所述视频缓冲区调用渲染得到的图像数据,并调用显示模块将渲染得到的视频数据显示在所述移动设备的屏幕上。
本发明实施例中,优选地,在所述移动客户端将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器的同时,所述方法还包括:
所述移动客户端将所述视频数据的属性信息传输到所述视频编辑服务器。
本发明实施例中,优选地,所述视频编辑服务器根据所述编辑参数对预存的视频数据进行解码、特效处理及编码操作包括:
所述视频编辑服务器读取备份在视频存储服务器中的所述视频数据;
根据所述编辑参数对提取的视频数据进行解码、特效处理及编码操作。
需要说明的是,对于前述的方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明所必需的。
基于上述方法实施例的说明,本发明还提供了相应的云视频编辑系统实施例,来实现上述方法实施例所述的内容。
参照图2,其示出了本发明实施例所述一种云视频编辑系统的结构框图,包括:移动设备20和视频编辑服务器30,所述移动设备20上安装有移动客户端201;
所述移动客户端201包括:
编辑操作接收模块2011,用于移动客户端接收用户对视频数据的编辑操作;
在线编程模块2012,用于所述移动客户端根据用户的编辑操作调用着色器对图形处理器进行在线编程;
实时渲染模块2013,用于所述移动客户端调用编程后的所述图形处理器对所述视频数据进行实时渲染;
显示模块2014,用于将实时渲染得到的视频数据显示在移动设备的屏幕上;
参数发送模块2015,用于所述移动客户端接收到用户触发的分享操作后,将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器;
所述视频编辑服务器30包括:
编辑处理模块301,用于根据所述编辑参数对预存的视频数据进行解码、特效处理及编码操作;
视频发布模块302,用于生成新的视频数据发布在网络上。
本发明实施例中,优选地,所述编辑操作包括多个;
所述在线编程模块包括:
解码子模块,用于所述移动客户端调用所述移动设备上的硬件编码器对所述视频数据进行解码;
视频传送子模块,用于将解码后的视频数据传送到所述图形处理器;
接口调用子模块,用于利用三维图形API接口,根据用户的编辑操作调用相应的定点着色器和片着色器对所述图形处理器进行在线编程。
本发明实施例中,优选地,所述移动客户端还包括:
视频存储模块,用于将渲染得到的图像数据存储在视频缓冲区中;
所述显示模块,具体用于从所述视频缓冲区调用渲染得到的图像数据,并调用显示模块将渲染得到的视频数据显示在所述移动设备的屏幕上。
本发明实施例中,优选地,所述参数发送模块,还用于在所述移动客户端将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器的同时,将所述视频数据的属性信息传输到所述视频编辑服务器。
本发明实施例中,优选地,所述系统还包括视频存储服务器;
所述编辑处理模块包括:
视频读取子模块,用于所述视频编辑服务器读取备份在视频存储服务器中的所述视频数据;
视频编辑子模块,用于根据所述编辑参数对提取的视频数据进行解码、特效处理及编码操作。
本发明实施例将视频处理过程中的效果预览和生成最终视频两个环节分开,分别在移动设备和视频编辑服务器上执行,效果预览步骤在移动设备上利用图形处理器GPU上完成,在此步骤上并不需要进行计算量极大的转码工作,而只是将处理效果展示给用户;而在最终的视频分享环节,只需要移动客户端将用户最终确认好的编辑参数上传到云端服务器,由云端服务器完成后续的处理及转码操作,并完成用户分享发布任务。
由于本方案不需要客户端在用户每次更改特效时,将云端生成的视频下载到本地进行预览,所以可以显著的节约网络带宽,极大降低了云视频编辑对带宽的消耗,该方案在2G/3G等网络环境下依然行之有效,可以解决用户在2G/3G网络环境下,无法实时预览效果的问题,改善了用户体验;同时,由于云端服务器不需要在反复进行视频渲染和转码等工作,极大降低了云端服务器的负载。综合这两个有点,采用本发明实施例可显著降低提供云视频编辑服务的成本。
为使本领域技术人员更好地理解本发明实施例,以下通过一个具体的示例对本发明实施例所述的云视频编辑方案进行说明。
参考图3,示出了传统方案的系统框图。
根据用户操作编辑视频的过程包括:用户将需要编辑的视频上传到云端的视频编辑服务器,视频编辑服务器将接收到的视频数据保存到视频存储服务器,并对视频数据依次进行视频解码、视频特效处理和视频编码的三个处理环节,进一步将处理好的视频数据下发给移动设备,移动客户端对处理过的视频数据采用硬件解码器进行解码,并发送到显示屏进行显示,或是进行进一步的分享发布。
若用户不满意编辑效果,则需要云端服务器每次需要重新进行编辑转码,移动设备端上的客户端则需要每次下载播放生成的高码率视频,对网络带宽的占用非常可观,当用户处于2G/3G等低网速环境时,则无法实时的预览编辑效果。
通过图3所示的传统方案的系统架构图可以看出,目前,云端视频编辑的瓶颈在于用户反复调整编辑参数并预览效果时,需要占用大量的带宽资源;由于为了满足用户的游戏需求,移动设备上通常具有计算能力较强的GPU,用于实时渲染。基于这两点考虑,本方案创新提出将效果预览和生成最终视频两个步骤分散在两个设备上进行,以减轻对带宽的占用和减轻云端服务器的负载。
参考图4,示出了本发明实施例的一个示例中云视频编辑方案的系统架构图,整个解决方案需要移动客户端与远端服务器的紧密配合。
移动客户端app负责接收用户的操作,然后调用移动设备上的硬件编码器对本地的视频进行解码,并将解码后的图像数据传送到GPU。利用OPENGL ES 2.0编程接口,根据用户不同的编辑操作调用相应的定点着色器(vertex shader)和片着色器(fragment shader),对GPU进行在线编程,实现对视频数据的实时渲染。GPU完成渲染后,将处理过的图像数据存储在视频缓冲区中,然后由显示模块负责显示在设备屏幕上。在此过程中,用户可以尝试不同编辑效果,直至满意为止。
由于GPU是专门处理图像的硬件设备,有相应的图像缩放、旋转等模块,能够对1080P甚至4K的视频进行实时的渲染(30-120fps)。
在用户完成编辑效果的尝试后,在“分享发布”环节,客户端将用户对本地视频的编辑参数及需要编辑视频的信息传输到云端的编辑服务器,编辑服务器会读取已备份到存储服务器中的视频,根据编辑参数,对视频进行解码、特效处理及编码操作,并最终将生成的新视频文件发布在网络上。
由于本方案不需要客户端在用户每次更改特效时,将云端生成的视频下载到本地进行预览,所以可以显著的节约网络带宽。同时,由于云端服务器不需要在反复进行视频渲染和转码等工作,极大降低了云端服务器的负载。以上两点,可显著降低提供云视频编辑服务的成本。
对于上述云视频编辑系统实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见图1所示方法实施例的部分说明即可。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域技术人员易于想到的是:上述各个实施例的任意组合应用都是可行的,故上述各个实施例之间的任意组合都是本发明的实施方案,但是由于篇幅限制,本说明书在此就不一一详述了。
本发明可用于众多通用或专用的计算系统环境或配置中。例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器系统、基于微处理器的系统、置顶盒、可编程的消费电子设备、网络PC、小型计算机、大型计算机、包括以上任何系统或设备的分布式计算环境等等。
本发明可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本发明,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
在本发明中,“组件”、“装置”、“系统”等等指应用于计算机的相关实体,如硬件、硬件和软件的组合、软件或执行中的软件等。详细地说,例如,组件可以、但不限于是运行于处理器的过程、处理器、对象、可执行组件、执行线程、程序和/或计算机。还有,运行于服务器上的应用程序或脚本程序、服务器都可以是组件。一个或多个组件可在执行的过程和/或线程中,并且组件可以在一台计算机上本地化和/或分布在两台或多台计算机之间,并可以由各种计算机可读介质运行。组件还可以根据具有一个或多个数据包的信号,例如,来自一个与本地系统、分布式系统中另一组件交互的,和/或在因特网的网络通过信号与其它系统交互的数据的信号通过本地和/或远程过程来进行通信。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”,不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括......”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
而且,上文中的“和/或”表示本文既包含了“和”的关系,也包含了“或”的关系,其中:如果方案A与方案B是“和”的关系,则表示某实施例中可以同时包括方案A和方案B;如果方案A与方案B是“或”的关系,则表示某实施例中可以单独包括方案A,或者单独包括方案B。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
以上对本发明所提供的一种云视频编辑方法和云视频编辑系统,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种云视频编辑方法,其特征在于,包括:
移动客户端接收用户对视频数据的编辑操作;
所述移动客户端根据用户的编辑操作调用着色器对图形处理器进行在线编程;
所述移动客户端调用编程后的所述图形处理器对所述视频数据进行实时渲染,并将实时渲染得到的视频数据显示在移动设备的屏幕上;
所述移动客户端接收到用户触发的分享操作后,将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器;
所述视频编辑服务器根据所述编辑参数对预存的视频数据进行解码、特效处理及编码操作,并生成新的视频数据发布在网络上。
2.根据权利要求1所述的方法,其特征在于,所述编辑操作包括多个;
所述移动客户端根据用户的编辑操作调用着色器对图形处理器进行在线编程包括:
所述移动客户端调用所述移动设备上的硬件编码器对所述视频数据进行解码;
将解码后的视频数据传送到所述图形处理器;
利用三维图形API接口,根据用户的编辑操作调用相应的定点着色器和片着色器对所述图形处理器进行在线编程。
3.根据权利要求1所述的方法,其特征在于,在所述调用编程后的所述图形处理器对所述视频数据进行实时渲染之后,所述方法还包括:
将渲染得到的图像数据存储在视频缓冲区中;
所述将实时渲染得到的视频数据显示在移动设备的屏幕上包括:
从所述视频缓冲区调用渲染得到的图像数据,并调用显示模块将渲染得到的视频数据显示在所述移动设备的屏幕上。
4.根据权利要求1所述的方法,其特征在于,在所述移动客户端将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器的同时,所述方法还包括:
所述移动客户端将所述视频数据的属性信息传输到所述视频编辑服务器。
5.根据权利要求4所述的方法,其特征在于,所述视频编辑服务器根据所述编辑参数对预存的视频数据进行解码、特效处理及编码操作包括:
所述视频编辑服务器读取备份在视频存储服务器中的所述视频数据;
根据所述编辑参数对提取的视频数据进行解码、特效处理及编码操作。
6.一种云视频编辑系统,其特征在于,包括移动设备和视频编辑服务器,所述移动设备上安装有移动客户端;
所述移动客户端包括:
编辑操作接收模块,用于移动客户端接收用户对视频数据的编辑操作;
在线编程模块,用于所述移动客户端根据用户的编辑操作调用着色器对图形处理器进行在线编程;
实时渲染模块,用于所述移动客户端调用编程后的所述图形处理器对所述视频数据进行实时渲染;
显示模块,用于将实时渲染得到的视频数据显示在移动设备的屏幕上;
参数发送模块,用于所述移动客户端接收到用户触发的分享操作后,将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器;
所述视频编辑服务器包括:
编辑处理模块,用于根据所述编辑参数对预存的视频数据进行解码、特效处理及编码操作;
视频发布模块,用于生成新的视频数据发布在网络上。
7.根据权利要求6所述的系统,其特征在于,所述编辑操作包括多个;
所述在线编程模块包括:
解码子模块,用于所述移动客户端调用所述移动设备上的硬件编码器对所述视频数据进行解码;
视频传送子模块,用于将解码后的视频数据传送到所述图形处理器;
接口调用子模块,用于利用三维图形API接口,根据用户的编辑操作调用相应的定点着色器和片着色器对所述图形处理器进行在线编程。
8.根据权利要求6所述的系统,其特征在于,所述移动客户端还包括:
视频存储模块,用于将渲染得到的图像数据存储在视频缓冲区中;
所述显示模块,具体用于从所述视频缓冲区调用渲染得到的图像数据,并调用显示模块将渲染得到的视频数据显示在所述移动设备的屏幕上。
9.根据权利要求6所述的系统,其特征在于,所述参数发送模块,还用于在所述移动客户端将用户对所述视频数据的编辑参数传输到云端的视频编辑服务器的同时,将所述视频数据的属性信息传输到所述视频编辑服务器。
10.根据权利要求9所述的系统,其特征在于,所述系统还包括视频存储服务器;
所述编辑处理模块包括:
视频读取子模块,用于所述视频编辑服务器读取备份在视频存储服务器中的所述视频数据;
视频编辑子模块,用于根据所述编辑参数对提取的视频数据进行解码、特效处理及编码操作。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510149839.6A CN104796767B (zh) | 2015-03-31 | 2015-03-31 | 一种云视频编辑方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510149839.6A CN104796767B (zh) | 2015-03-31 | 2015-03-31 | 一种云视频编辑方法和系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104796767A true CN104796767A (zh) | 2015-07-22 |
CN104796767B CN104796767B (zh) | 2019-02-12 |
Family
ID=53561220
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510149839.6A Active CN104796767B (zh) | 2015-03-31 | 2015-03-31 | 一种云视频编辑方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104796767B (zh) |
Cited By (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105812943A (zh) * | 2016-03-31 | 2016-07-27 | 北京奇艺世纪科技有限公司 | 一种视频编辑方法及系统 |
CN105872857A (zh) * | 2016-04-01 | 2016-08-17 | 北京金山安全软件有限公司 | 一种处理视频的方法、装置及电子设备 |
CN106060655A (zh) * | 2016-08-04 | 2016-10-26 | 腾讯科技(深圳)有限公司 | 一种视频处理方法、服务器及终端 |
CN106804002A (zh) * | 2017-02-14 | 2017-06-06 | 北京时间股份有限公司 | 一种视频处理系统及方法 |
CN106803991A (zh) * | 2017-02-14 | 2017-06-06 | 北京时间股份有限公司 | 视频处理方法及装置 |
CN106961628A (zh) * | 2017-03-24 | 2017-07-18 | 北京金山安全软件有限公司 | 视频播放方法、装置以及电子设备 |
CN106973304A (zh) * | 2017-02-14 | 2017-07-21 | 北京时间股份有限公司 | 基于云端的非线性剪辑方法、装置及系统 |
CN107295084A (zh) * | 2017-06-26 | 2017-10-24 | 深圳水晶石数字科技有限公司 | 一种基于云端的视频编辑系统及方法 |
CN107707930A (zh) * | 2016-08-09 | 2018-02-16 | 北京奇虎科技有限公司 | 视频处理方法、装置及系统 |
CN109327698A (zh) * | 2018-11-09 | 2019-02-12 | 杭州网易云音乐科技有限公司 | 动态预览图的生成方法、系统、介质和电子设备 |
CN109451330A (zh) * | 2018-09-19 | 2019-03-08 | 北京文香信息技术有限公司 | 一种基于网络流对在线视频文件编辑方法 |
CN109963166A (zh) * | 2017-12-22 | 2019-07-02 | 上海全土豆文化传播有限公司 | 在线视频编辑方法和装置 |
CN111355960A (zh) * | 2018-12-21 | 2020-06-30 | 北京字节跳动网络技术有限公司 | 合成视频文件的方法、装置、移动终端及存储介质 |
CN111385638A (zh) * | 2018-12-28 | 2020-07-07 | 北京字节跳动网络技术有限公司 | 视频处理方法和装置 |
CN111385599A (zh) * | 2018-12-28 | 2020-07-07 | 北京字节跳动网络技术有限公司 | 视频处理方法和装置 |
CN111770372A (zh) * | 2020-06-28 | 2020-10-13 | 西安诺瓦星云科技股份有限公司 | 节目编辑方法、装置和系统 |
CN112261416A (zh) * | 2020-10-20 | 2021-01-22 | 广州博冠信息科技有限公司 | 基于云的视频处理方法、装置、存储介质与电子设备 |
CN112291590A (zh) * | 2020-10-30 | 2021-01-29 | 北京字节跳动网络技术有限公司 | 视频处理方法及设备 |
CN112291627A (zh) * | 2020-10-12 | 2021-01-29 | 广州市百果园网络科技有限公司 | 一种视频编辑方法、装置、移动终端和存储介质 |
CN112437342A (zh) * | 2020-05-14 | 2021-03-02 | 上海哔哩哔哩科技有限公司 | 一种视频编辑的方法及设备 |
CN112565872A (zh) * | 2020-11-27 | 2021-03-26 | 南京富士通南大软件技术有限公司 | 一种云端行车录像在线隐私保护系统和方法 |
CN112997506A (zh) * | 2020-05-28 | 2021-06-18 | 深圳市大疆创新科技有限公司 | 视频文件编辑方法、设备、系统及计算机可读存储介质 |
CN113010706A (zh) * | 2021-03-16 | 2021-06-22 | 北京金山云网络技术有限公司 | 多媒体信息处理方法、装置、设备及介质 |
CN113747199A (zh) * | 2021-08-23 | 2021-12-03 | 北京达佳互联信息技术有限公司 | 视频编辑方法、装置、电子设备、存储介质及程序产品 |
CN113893524A (zh) * | 2021-08-04 | 2022-01-07 | 广州简悦信息科技有限公司 | 云应用处理系统、方法、装置及设备 |
CN114051153A (zh) * | 2021-11-09 | 2022-02-15 | 福州慧校通教育信息技术有限公司 | 一种基于移动客户端的大视频文件剪辑系统及方法 |
CN114827490A (zh) * | 2021-01-29 | 2022-07-29 | 北京字节跳动网络技术有限公司 | 视频合成方法、装置、电子设备及存储介质 |
CN115243108A (zh) * | 2022-07-25 | 2022-10-25 | 深圳市腾客科技有限公司 | 一种可编程的多媒体文件系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110296485A1 (en) * | 2009-02-12 | 2011-12-01 | Nilsson Michael E | Video streaming |
CN102685080A (zh) * | 2011-03-17 | 2012-09-19 | 腾讯科技(北京)有限公司 | 图片处理方法及系统 |
-
2015
- 2015-03-31 CN CN201510149839.6A patent/CN104796767B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110296485A1 (en) * | 2009-02-12 | 2011-12-01 | Nilsson Michael E | Video streaming |
CN102685080A (zh) * | 2011-03-17 | 2012-09-19 | 腾讯科技(北京)有限公司 | 图片处理方法及系统 |
Cited By (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105812943A (zh) * | 2016-03-31 | 2016-07-27 | 北京奇艺世纪科技有限公司 | 一种视频编辑方法及系统 |
CN105812943B (zh) * | 2016-03-31 | 2019-02-22 | 北京奇艺世纪科技有限公司 | 一种视频编辑方法及系统 |
CN105872857A (zh) * | 2016-04-01 | 2016-08-17 | 北京金山安全软件有限公司 | 一种处理视频的方法、装置及电子设备 |
CN105872857B (zh) * | 2016-04-01 | 2019-10-29 | 北京金山安全软件有限公司 | 一种处理视频的方法、装置及电子设备 |
CN106060655A (zh) * | 2016-08-04 | 2016-10-26 | 腾讯科技(深圳)有限公司 | 一种视频处理方法、服务器及终端 |
CN106060655B (zh) * | 2016-08-04 | 2021-04-06 | 腾讯科技(深圳)有限公司 | 一种视频处理方法、服务器及终端 |
CN107707930A (zh) * | 2016-08-09 | 2018-02-16 | 北京奇虎科技有限公司 | 视频处理方法、装置及系统 |
CN106973304A (zh) * | 2017-02-14 | 2017-07-21 | 北京时间股份有限公司 | 基于云端的非线性剪辑方法、装置及系统 |
CN106804002A (zh) * | 2017-02-14 | 2017-06-06 | 北京时间股份有限公司 | 一种视频处理系统及方法 |
CN106803991A (zh) * | 2017-02-14 | 2017-06-06 | 北京时间股份有限公司 | 视频处理方法及装置 |
CN106961628A (zh) * | 2017-03-24 | 2017-07-18 | 北京金山安全软件有限公司 | 视频播放方法、装置以及电子设备 |
CN106961628B (zh) * | 2017-03-24 | 2020-04-28 | 北京金山安全软件有限公司 | 视频播放方法、装置以及电子设备 |
CN107295084A (zh) * | 2017-06-26 | 2017-10-24 | 深圳水晶石数字科技有限公司 | 一种基于云端的视频编辑系统及方法 |
CN109963166A (zh) * | 2017-12-22 | 2019-07-02 | 上海全土豆文化传播有限公司 | 在线视频编辑方法和装置 |
CN109451330A (zh) * | 2018-09-19 | 2019-03-08 | 北京文香信息技术有限公司 | 一种基于网络流对在线视频文件编辑方法 |
CN109327698A (zh) * | 2018-11-09 | 2019-02-12 | 杭州网易云音乐科技有限公司 | 动态预览图的生成方法、系统、介质和电子设备 |
CN111355960A (zh) * | 2018-12-21 | 2020-06-30 | 北京字节跳动网络技术有限公司 | 合成视频文件的方法、装置、移动终端及存储介质 |
CN111355960B (zh) * | 2018-12-21 | 2021-05-04 | 北京字节跳动网络技术有限公司 | 合成视频文件的方法、装置、移动终端及存储介质 |
CN111385638A (zh) * | 2018-12-28 | 2020-07-07 | 北京字节跳动网络技术有限公司 | 视频处理方法和装置 |
CN111385599B (zh) * | 2018-12-28 | 2022-02-11 | 北京字节跳动网络技术有限公司 | 视频处理方法和装置 |
CN111385599A (zh) * | 2018-12-28 | 2020-07-07 | 北京字节跳动网络技术有限公司 | 视频处理方法和装置 |
US11600301B2 (en) | 2020-05-14 | 2023-03-07 | Shanghai Bilibili Technology Co., Ltd. | Method and device of editing a video |
CN112437342A (zh) * | 2020-05-14 | 2021-03-02 | 上海哔哩哔哩科技有限公司 | 一种视频编辑的方法及设备 |
CN112997506A (zh) * | 2020-05-28 | 2021-06-18 | 深圳市大疆创新科技有限公司 | 视频文件编辑方法、设备、系统及计算机可读存储介质 |
CN111770372A (zh) * | 2020-06-28 | 2020-10-13 | 西安诺瓦星云科技股份有限公司 | 节目编辑方法、装置和系统 |
CN112291627A (zh) * | 2020-10-12 | 2021-01-29 | 广州市百果园网络科技有限公司 | 一种视频编辑方法、装置、移动终端和存储介质 |
CN112261416A (zh) * | 2020-10-20 | 2021-01-22 | 广州博冠信息科技有限公司 | 基于云的视频处理方法、装置、存储介质与电子设备 |
CN112291590A (zh) * | 2020-10-30 | 2021-01-29 | 北京字节跳动网络技术有限公司 | 视频处理方法及设备 |
US12041294B2 (en) | 2020-10-30 | 2024-07-16 | Beijing Bytedance Network Technology Co., Ltd. | Video processing method and device |
CN112565872A (zh) * | 2020-11-27 | 2021-03-26 | 南京富士通南大软件技术有限公司 | 一种云端行车录像在线隐私保护系统和方法 |
CN114827490A (zh) * | 2021-01-29 | 2022-07-29 | 北京字节跳动网络技术有限公司 | 视频合成方法、装置、电子设备及存储介质 |
WO2022161200A1 (zh) * | 2021-01-29 | 2022-08-04 | 北京字节跳动网络技术有限公司 | 视频合成方法、装置、电子设备及存储介质 |
CN113010706A (zh) * | 2021-03-16 | 2021-06-22 | 北京金山云网络技术有限公司 | 多媒体信息处理方法、装置、设备及介质 |
CN113893524A (zh) * | 2021-08-04 | 2022-01-07 | 广州简悦信息科技有限公司 | 云应用处理系统、方法、装置及设备 |
CN113893524B (zh) * | 2021-08-04 | 2022-09-20 | 广州简悦信息科技有限公司 | 云应用处理系统、方法、装置及设备 |
CN113747199A (zh) * | 2021-08-23 | 2021-12-03 | 北京达佳互联信息技术有限公司 | 视频编辑方法、装置、电子设备、存储介质及程序产品 |
CN114051153A (zh) * | 2021-11-09 | 2022-02-15 | 福州慧校通教育信息技术有限公司 | 一种基于移动客户端的大视频文件剪辑系统及方法 |
CN115243108A (zh) * | 2022-07-25 | 2022-10-25 | 深圳市腾客科技有限公司 | 一种可编程的多媒体文件系统 |
Also Published As
Publication number | Publication date |
---|---|
CN104796767B (zh) | 2019-02-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104796767A (zh) | 一种云视频编辑方法和系统 | |
Qian et al. | Toward practical volumetric video streaming on commodity smartphones | |
CN111681167B (zh) | 画质调整方法和装置、存储介质及电子设备 | |
US9712589B2 (en) | System and method for playing a video on mobile web environments | |
US20200202608A1 (en) | Method and apparatus for receiving a volumetric video stream | |
CN101505365A (zh) | 一种基于网络电视机顶盒的实时视频监控系统的实现方法 | |
CN111629214A (zh) | 视频文件的转码方法、装置、设备和介质 | |
CN108235053B (zh) | 交互式渲染方法、设备、终端和系统 | |
CN114450966A (zh) | 用于异构沉浸式媒体的表示和流式传输的数据模型 | |
JP2023519372A (ja) | 三次元ビデオの処理方法、装置、可読記憶媒体及び電子機器 | |
KR102598603B1 (ko) | 이기종 클라이언트 종단점에 대한 스트리밍을 위한 2d 비디오의 적응 | |
CN110049347B (zh) | 在直播界面配置图像的方法、系统、终端和装置 | |
Zorrilla et al. | HTML5-based system for interoperable 3D digital home applications | |
JP7447293B2 (ja) | 異種クライアントエンドポイントへのストリーミングのための2dビデオの適応のためのニューラルネットワークモデルの参照 | |
CN115428416B (zh) | 流媒体传输的方法和相关装置 | |
CN113973224A (zh) | 媒体信息的传输方法、计算设备及存储介质 | |
CN117676241A (zh) | 基于服务器三维渲染的数字化工厂大场景显示方法及系统 | |
US10529129B2 (en) | Dynamic selection mechanism for interactive video | |
CN115314732B (zh) | 一种多用户协同审片方法及系统 | |
CN114513702B (zh) | 基于Web的分块全景视频处理方法、系统及存储介质 | |
KR102674577B1 (ko) | 이종 클라이언트 엔드 포인트들로 스트리밍하기 위한 미디어의 적응을 위한 몰입형 미디어에 의한 뉴럴 네트워크 모델의 참조 | |
Hou et al. | A cloud gaming system based on NVIDIA GRID GPU | |
CN117065357A (zh) | 媒体数据处理方法、装置、计算机设备和存储介质 | |
Kopczynski | Optimizations for fast wireless image transfer using H. 264 codec to Android mobile devices for virtual reality applications | |
CN111937043B (zh) | 将文件格式对象和基于超文本传输协议的动态自适应流媒体(dash)对象进行关联 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
EXSB | Decision made by sipo to initiate substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |