CN113038145B - 视频处理方法及其装置、系统 - Google Patents
视频处理方法及其装置、系统 Download PDFInfo
- Publication number
- CN113038145B CN113038145B CN201911350264.9A CN201911350264A CN113038145B CN 113038145 B CN113038145 B CN 113038145B CN 201911350264 A CN201911350264 A CN 201911350264A CN 113038145 B CN113038145 B CN 113038145B
- Authority
- CN
- China
- Prior art keywords
- parameter information
- shooting
- group
- shooting parameter
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 238000000034 method Methods 0.000 claims abstract description 37
- 238000012545 processing Methods 0.000 claims description 147
- 230000008859 change Effects 0.000 claims description 45
- 238000012986 modification Methods 0.000 claims description 37
- 230000004048 modification Effects 0.000 claims description 37
- 238000004891 communication Methods 0.000 claims description 25
- 238000012790 confirmation Methods 0.000 claims description 12
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 11
- 230000008569 process Effects 0.000 description 10
- 230000000694 effects Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 5
- 238000013461 design Methods 0.000 description 3
- 238000004590 computer program Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Studio Devices (AREA)
Abstract
本申请实施例提供一种视频处理方法及其装置、系统,用于实现对虚拟现实领域的视频的拼接。其中,该方法可包括:确定视频拼接所需的拍摄需求参数;获取与拍摄需求参数匹配的第一组拍摄参数信息;获取与第一组拍摄参数信息匹配的第一视频流;根据第一组拍摄参数信息和第一视频流,生成第一全景视频流。采用本申请实施例,可以减少对操作人员的依赖,进而可以提高全景视频流的生成效率。
Description
技术领域
本申请实施例涉及虚拟现实技术领域,尤其涉及一种视频处理方法及其装置、系统。
背景技术
虚拟现实(virtual reality,VR)直播,利用特定全景拍摄器或设备以及视频拼接算法或软件,可将现在常见的二维平面视频升级为三维全景视频。用户的观看视角不再拘泥于固定的屏幕方框内,随着视角的变化而变化,给用户带来一种全新的视觉体验,让视频内容有了一种全新的展现形式。VR直播可以应用于影视媒体行业、医疗行业、旅游行业、房地产行业、购物消费行业等,带来视觉体验的同时,也为工作、生活、娱乐带来便利。
目前,VR直播的内容生成过程可包括:现场布置的特定全景拍摄器将其采集的多路视频流传输至VR内容拼接生成装置;VR内容拼接生成装置生成全景视频流,将全景视频流输出至全景回看模块,由全景回看模块进行播放。其中,操作人员需要对特定全景拍摄器进行多次手动调参,以保证全景视频流的质量;VR内容拼接生成装置需要将操作人员测量得到的一些拍摄参数输入到算法中,以拼接生成流畅、连续的全景视频流。
可见,上述VR直播的内容生成过程对操作人员的依赖性较强,导致VR全景视频流的生成效率低下。
发明内容
本申请实施例提供一种视频处理方法及其装置,可以减少对操作人员的依赖,进而可以提高全景视频流的生成效率。
本申请实施例第一方面提供一种视频处理方法,包括:
确定视频拼接所需的拍摄需求参数;
获取与拍摄需求参数匹配的第一组拍摄参数信息;
获取第一组拍摄参数信息匹配的第一视频流;
根据第一组拍摄参数信息和第一视频流,生成第一全景视频流。
本申请实施例第一方面,无需操作人员手动调参,也无需操作人员手动将拍摄参数输入到算法中,从而可以减少对操作人员的依赖,进而可以提高全景视频流的生成效率。
在一种可能的实现方式中,通过算法选择指令确定视频拼接所需的拍摄需求参数。在接收到针对一个或多个视频拼接算法的算法选择指令的情况下,确定算法选择指令对应的视频拼接算法,分析视频拼接算法的算法接口,确定视频拼接算法所需的拍摄需求参数。该方式可以使拍摄需求参数更具有针对性。
在一种可能的实现方式中,将第一组拍摄参数信息和第一视频流注入视频拼接算法,调用视频拼接算法,生成第一全景视频流。所调用的视频拼接算法,即为上述算法选择指令对应的视频拼接算法。除了可以通过视频拼接算法实现全景视频流的生成外,还可以通过视频拼接软件实现全景视频流的生成。
在一种可能的实现方式中,通过指令方式确定第一组拍摄参数信息。在接收到针对一组或多组拍摄参数信息的组选择指令的情况下,将组选择指令对应的组拍摄参数信息确定为与拍摄需求参数匹配的第一组拍摄参数信息。通过指令方式,无需操作人员手动输入拍摄参数信息,可以减少对操作人员的依赖。
在一种可能的实现方式中,对于上述指令方式,根据启动指令控制拍摄设备的开启,并控制拍摄设备按照第一组拍摄参数信息进行视频采集,根据停止指令控制拍摄设备停止视频采集,从拍摄设备获取拍摄设备按照第一组拍摄参数信息采集的第一视频流。
在一种可能的实现方式中,通过自动获取方式确定第一组拍摄参数信息。从当前连接的拍摄设备中获取当前拍摄参数信息,并将当前拍摄参数信息确定为与拍摄需求参数匹配的第一组拍摄参数信息。或者,从当前连接的多个拍摄设备中获取与拍摄需求参数匹配的第一组拍摄参数信息。通过自动获取方式,无需操作人员手动输入拍摄参数信息以及组选择指令,可以减少对操作人员的依赖。
在一种可能的实现方式中,对于上述自动获取方式,根据启动指令控制拍摄设备的开启,并控制拍摄设备按照当前拍摄参数信息进行视频采集,根据停止指令控制拍摄设备停止视频采集,从拍摄设备获取拍摄设备按照当前拍摄参数信息采集的第一视频流。
在一种可能的实现方式中,在得到第一全景视频流的情况下,输出第一全景视频流以及第一组拍摄参数信息,以便操作人员观看。可同时输出多个全景视频流以及各个全景视频流对应的组拍摄参数信息,以便操作人员观看进行比对,对组拍摄参数信息进行调整,以优化全景视频流的播放效果。
在一种可能的实现方式中,在得到第一全景视频流的情况下,接收针对第一组拍摄参数信息的保存指令,并保存第一组拍摄参数信息,以便操作人员下次可以选择该组拍摄参数信息或对该组拍摄参数信息进行修改。
在一种可能的实现方式中,在得到第一全景视频流的情况下,可接收针对第一组拍摄参数信息的修改指令,并根据修改指令对第一组拍摄参数信息进行修改,得到第二组拍摄参数信息;获取与第二组拍摄参数信息匹配的第二视频流;根据第二组拍摄参数信息和第二视频流,生成第二全景视频流。操作人员可对根据输出的第一全景视频流和第一组拍摄参数信息,对第一组拍摄参数信息进行修改,以优化全景视频流的播放效果。
在一种可能的实现方式中,在得到第一全景视频流的情况下,可自动对第一组拍摄参数信息进行修改,以优化全景视频流的播放效果。
在一种可能的实现方式中,在监测到第一组拍摄参数信息发生改变的情况下,输出提示信息,该提示信息用于提示第一组拍摄参数信息发生改变;若接收到针对该提示信息的确认改变指令,则根据第一组拍摄参数信息的改变生成第二组拍摄参数信息;获取与第二组拍摄参数信息匹配的第二视频流;根据第二组拍摄参数信息和第二视频流,生成第二全景视频流。第一组拍摄参数信息发生改变可能是操作人员的修改(可以认为是合法修改)导致的,也可能是非法修改导致的,通过提示信息可以确认是否为合法修改。
在一种可能的实现方式中,若接收到针对该提示信息的拒绝改变指令,则保持第一组拍摄参数信息不变,在未接收到停止指令的情况下,控制拍摄设备继续按照第一组拍摄参数信息进行视频采集。
本申请实施例第二方面提供一种视频处理装置。一种设计中,该装置可以包括执行第一方面中所描述的方法/操作/步骤/动作所一一对应的模块,该模块可以是硬件电路,也可是软件,也可以是硬件电路结合软件实现。一种设计中,该装置可以包括处理模块和通信模块。
示例性的,
处理模块,用于确定视频拼接所需的拍摄需求参数;获取与拍摄需求参数匹配的第一组拍摄参数信息;利用通信模块,获取与第一组拍摄参数信息匹配的第一视频流;根据第一组拍摄参数信息和第一视频流,生成第一全景视频流。
本申请实施例第三方面提供一种视频处理装置,该装置包括处理器,用于实现上述第一方面描述的方法。该装置还可以包括存储器,用于存储指令和/或数据。该存储器与该处理器耦合,该处理器执行该存储器中存储的指令时,可以实现上述第一方面描述的方法。该装置还可以包括通信接口,该通信接口用于该装置与其它设备进行通信,示例性的,通信接口可以是收发器、电路、总线、模块、管脚或其它类型的通信接口,其它设备可以为拍摄设备等。在一种可能的设计中,该装置包括:
存储器,用于存储程序指令;
处理器,用于确定视频拼接所需的拍摄需求参数;获取与拍摄需求参数匹配的第一组拍摄参数信息;利用通信接口,获取与第一组拍摄参数信息匹配的第一视频流;根据第一组拍摄参数信息和第一视频流,生成第一全景视频流。
本申请实施例第四方面提供一种计算机可读存储介质,包括指令,当其在计算机上运行时,使得计算机执行第一方面提供的方法。
本申请实施例第五方面提供一种芯片系统,该芯片系统包括处理器,还可以包括存储器,用于实现上述第一方面提供的方法。该芯片系统可以由芯片构成,也可以包含芯片和其他分立器件。
本申请实施例第六方面提供一种视频处理系统,包括控制模块、采集模块和生成模块;
控制模块,用于确定视频拼接所需的拍摄需求参数;获取与拍摄需求参数匹配的第一组拍摄参数信息;将第一组拍摄参数信息传输至生成模块,并控制采集模块采集与第一组拍摄参数信息匹配的第一视频流;
采集模块,用于采集与第一组拍摄参数信息匹配的第一视频流,并将第一视频流传输至生成模块;
生成模块,用于根据第一组拍摄参数信息和第一视频流,生成第一全景视频流。
在一种可能的实现方式中,该系统还包括输出模块,输出模块用于输出第一全景视频流和第一组拍摄参数信息,以便操作人员观看。
在一种可能的实现方式中,该系统还包括输出模块和输入模块;
控制模块,还用于监测第一组拍摄参数信息是否发生改变,并在发生改变的情况下,向输出模块传输改变指示信息,该改变指示信息用于指示第一组拍摄参数信息发生改变;
输出模块,用于根据改变指示信息输出提示信息,该提示信息用于提示第一组拍摄参数信息发生改变;
控制模块,还用于若输入模块接收到针对提示信息的确认改变指令,则根据第一组拍摄参数信息的改变生成第二组拍摄参数信息;将第二组拍摄参数信息传输至生成模块,并控制采集模块采集与第二组拍摄参数信息匹配的第一视频流;
采集模块,还用于采集与所述第二组拍摄参数信息匹配的第二视频流,并将第二视频流传输至生成模块;
生成模块,还用于根据第二组拍摄参数信息和第二视频流,生成第二全景视频流。
本申请实施例第六方面提供的视频处理系统,无需操作人员手动调参,也无需操作人员手动将拍摄参数输入到算法中,从而可以减少对操作人员的依赖,进而可以提高全景视频流的生成效率。
附图说明
图1为本申请实施例提供的拍摄设备的示例图;
图2为应用本申请实施例的网络架构示意图;
图3为本申请实施例提供的一种视频处理方法的流程示意图;
图4为本申请实施例提供的用户界面的示例图;
图5为本申请实施例提供的另一种视频处理方法的流程示意图;
图6为本申请实施例提供的又一种视频处理方法的流程示意图;
图7为本申请实施例提供的一种视频处理系统的结构示意图;
图8为本申请实施例提供的一种视频处理装置的逻辑结构示意图;
图9为本申请实施例提供的一种视频处理装置的实体结构简化示意图。
具体实施方式
为了更好地理解本申请实施例提供的技术方案,首先对本申请实施例涉及的技术或名称进行介绍。
(1)全景视频流
全景(panorama),是把相机环360度拍摄的一组或多组照片拼接成一个全景图像。换言之,全景图像可以包括以相机为中心,360度范围内的图像。全景图像可通过专用的播放软件进行显示,若显示在台式计算机或笔记本电脑上,用户可以操作鼠标控制环视的方向;若显示在手机、平板等移动终端上,用户可以通过滑动操作控制环视的方向。环视的方向可左可右,可近可远观看物体或场景。
全景视频流,是通过特定全景拍摄器将其采集的多路视频流拼接成一个全景视频流。全景视频流可以包括以全景拍摄器为中心,180度或360度或其他度数范围内的视频流。换言之,全景视频流覆盖的角度可以是180度或360度或其他角度。本申请实施例以全景视频流的覆盖角度以360度为例。全景视频流可通过专用的播放软件进行显示,用户可以通过操作控制环视的方法,应用在本申请实施例中,用户还可以与全景视频流进行互动,例如用户在观看超市场景中的全景视频流时,可以在全景视频流的直播过程中选择商品,加入购物车。
在本申请实施例中,全景视频流这个名称用于举例,并不构成对本申请实施例的限定。全景视频流也可以描述为VR全景视频流、VR360度全景视频流、VR视频流或三维全景视频流等,这些名词可以互换。VR直播,指的是连续播放全景视频流的过程。
(2)拍摄设备
在本申请实施例中,拍摄设备指的是特定全景拍摄器或自定义构型的多路拍摄器,可以采集多路视频流,以拼接成全景视频流。特定全景拍摄器指的是包括多路拍摄器的一体机,例如,特定全景拍摄器用于实现360度全景视频流,那么多路摄像器排成一个圈;再例如,特定全景拍摄器用于实现180度全景视频流,那么多路摄像器排成一条直线。自定义构型的多路拍摄器不限定多路拍摄器集成在一个设备中,也不限定多路拍摄器的构型,例如多路拍摄器的构型为三角形或六边形或球型等。其中,一路摄像器负责采集其角度范围内的图像或视频流,包括多少路拍摄器,便可以采集多少路视频流。多路拍摄器的数量可以是6或8或其他数量,具体数量在本申请实施例中不作限定。拍摄器可以是摄像机或相机等。
可参见图1,为本申请实施例提供的拍摄设备的示例图。图1所示的拍摄设备包括6路拍摄器,这6拍摄器采集的视频流可以拼接成360度的全景视频流。图1中每个箭头表示一路拍摄器。
随着VR技术的发展,VR直播成为一个备受期望的领域。目前VR直播业务中,多路视频流进行拼接生成全景视频流时,需要大量的拍摄参数,而操作人员在拍摄设备上修改参数之后还需要重新输入到视频拼接算法中,并且需要不断地修改调参,耗费了大量的精力和时间。
鉴于此,本申请实施例提供一种视频处理方法及其装置、系统,可以减少对操作人员的依赖,进而可以提高全景视频流的生成效率。本申请实施例还可以实时地调整拍摄参数,适用范围广、兼容性强。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示前后关联的对象是一种“或”的关系,例如,A/B可以表示A或B。并且,在本申请的描述中,除非另有说明,“多个”是指两个或多于两个。“以下至少一项(个)”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b,或c中的至少一项(个),可以表示:a,b,c,a和b,a和c,b和c,或a和b和c,其中a,b,c可以是单个,也可以是多个。另外,为了便于清楚描述本申请实施例的技术方案,在本申请的实施例中,采用了“第一”、“第二”等字样对功能基本相同或相似的技术特征进行区分。本领域技术人员可以理解“第一”、“第二”等字样并不对数量和执行次序进行限定,并且“第一”、“第二”等字样也并不限定一定不同。
请参见图2,为应用本申请实施例的网络架构示意图,该网络架构可包括拍摄设备201、视频处理装置202和用户203。需要说明的是,图2所示的设备或装置的形态和数量用于举例,并不构成对本申请实施例的限定。例如,视频处理装置202可以与两个或两个以上的拍摄设备建立连接关系。
拍摄设备201包括多路拍摄器,每路拍摄器负责采集其角度范围内的视频流,以拍摄设备201包括6路拍摄器为例。拍摄设备201可以是特定全景拍摄器,也可以是自定义构型的多路拍摄器。拍摄设备201所包括的多路拍摄器可以同时开启,也可以开启部分拍摄器,例如拍摄设备201包括10路拍摄器,这10路拍摄器构成球型,可以同时开启这10路拍摄器,也可以开启其中的6路拍摄器(例如这6路拍摄器在某个平面上构成一个圆)。拍摄设备201可以将其采集的多路视频流传输至视频处理装置202,以便视频处理装置202根据多路视频流生成全景视频流。
视频处理装置202用于对拍摄设备201传输的多路视频流进行拼接,生成全景视频流,并输出全景视频流。视频处理装置202可以同时输出一个或多个全景视频流,以及各个全景视频流对应的拍摄参数信息,以便用户203比对各个全景视频流的效果,为下次调整参数信息总结经验。视频处理装置202还用于控制拍摄设备201的开启、调整参数以及停止视频采集等,例如向拍摄设备201发送调整指令,该调整指令用于指示一个或多个拍摄器,如何进行调整(例如将焦距从A调整为B等),拍摄设备201在接收到该调整指令时可进行相应的调整。
视频处理装置202可以是用户终端,也可以是被安装在用户终端中的装置或者与用户终端匹配使用的装置,例如芯片或芯片系统等。用户终端可以包括手机(mobilephone)、平板电脑或台式计算机等,图2以台式计算机为例。用户终端还可以包括与手机或台式计算机配合使用的VR设备,例如VR眼镜等。用户终端上可以安装并运行用于实现视频处理装置202的功能的软件或应用程序(application,APP)。
视频处理装置202还可以是服务器,也可以是被安装在服务器中的装置或者与服务器匹配使用的装置,例如芯片或芯片系统等。服务器可以是用于实现视频处理装置202的功能的软件或APP对应的服务器,可以是云服务器或集群服务器等。
用户203可以是操作视频处理装置202的操作人员或管理人员,用户203可以通过账号和密码登录用于实现视频处理装置202的功能的软件或APP,以登录该APP为例。在用户203登录该APP之后,可输入算法选择指令或组选择指令等指令,以控制视频处理装置202执行相应的操作。例如,用户203输入算法选择指令,视频处理装置202将确定该算法选择指令对应的视频拼接算法,分析该视频拼接算法的算法接口,进而确定出视频拼接所需的拍摄需求参数。
基于图2所示的网络架构,下面将结合附图3-附图6对本申请实施例提供的视频处理方法进行介绍。
请参见图3,为本申请实施例提供的一种视频处理方法的流程示意图,可以包括但不限于如下步骤:
步骤301,确定视频拼接所需的拍摄需求参数。
视频处理装置确定视频拼接所需的拍摄需求参数。视频拼接所需的拍摄需求参数,可以理解为视频拼接算法需要哪些拍摄参数,或视频拼接软件需要哪些拍摄参数,以将多路视频流拼接成全景视频流。视频拼接所需的拍摄需求参数可以包括但不限于:图像宽(像素)、图像高(像素)、视频类型、视频格式、帧率、视频尺寸等参数。
在一种可能的实现方式中,视频处理装置根据视频拼接算法确定视频拼接所需的拍摄需求参数。用户在通过账号和密码登录用于实现视频处理装置的功能的APP的情况下,视频处理装置可提供一个或多个视频拼接算法,即该APP的用户界面(user interface,UI)显示一个或多个视频拼接算法,用户针对这一个或多个视频拼接算法输入算法选择指令;视频处理装置在接收到该算法选择指令的情况下,确定该算法选择指令对应的视频拼接算法,分析该视频拼接算法的算法接口,从而确定出视频拼接所需的拍摄需求参数。
可选的,视频处理装置可通过分析该视频拼接算法的算法接口和备选拍摄设备的设备参数,确定出视频拼接所需的拍摄需求参数。分析方法可以包括但不限于:比对该视频拼接算法的变量名称与设备参数的名称,确定涉及哪些拍摄参数;根据该视频拼接算法的变量结构,确定拍摄参数组合;根据该视频拼接算法的算法单位,检查设备参数是否与算法单位匹配等。
其中,视频拼接算法用于对来自多路拍摄器的视频图像进行实时的无缝拼接融合,形成一路具有更宽视角的视频,即全景视频。视频拼接算法可以是缝合(stitch)算法或视频缝合(video stitching)尽量投影(as-projective-as-possible,APAP)算法或APAP算法等,具体包括哪些视频拼接算法以及具体采用哪种视频拼接算法在本申请实施例中不作限定。算法接口指的是对于VR360全景视频拼接/合成中所必须的所有参数,包括但不限于输出视频流的格式,数量,分辨率,帧率,镜头类型,相机参数矩阵,布设方式等。通过算法接口可以确定视频拼接所需的拍摄需求参数。
其中,备选拍摄设备指的是可以与视频处理装置建立连接的拍摄设备,备选拍摄设备可以是同一类型的拍摄设备,也可以是不同类型的拍摄设备,视具体情况而定。设备参数可以包括但不限于:构型、拍摄器的路数、分辨率、像素、焦距范围等。
在另一种可能的实现方式中,视频处理装置根据视频拼接软件确定视频拼接所需的拍摄需求参数。视频处理装置可以调用一个或多个视频拼接软件,用户可针对这一个或多个视频拼接软件输入软件选择指令;视频处理装置在接收到该软件选择指令的情况下,确定该软件选择指令对应的视频拼接软件,分析该视频拼接软件所需的拍摄需求参数,将该视频拼接软件所需的拍摄需求参数作为视频拼接所需的拍摄需求参数。
其中,视频拼接软件的作用与视频拼接算法的作用相同,可以是kolor autopanovideo pro软件等全景视频拼接软件,具体包括哪些视频拼接软件以及具体采用哪种视频拼接软件在本申请实施例中不作限定。
视频处理装置还可以通过其他方式确定视频拼接所需的拍摄需求参数,例如视频处理装置预先配置了一组或多组拍摄需求参数,若配置了一组拍摄需求参数,那么可将该组拍摄需求参数作为视频拼接所需的拍摄需求参数;若配置了多组拍摄需求参数,那么可根据用户的选择指令,将该选择指令对应的那组拍摄需求参数作为视频拼接所需的拍摄需求参数。
步骤302,获取与拍摄需求参数匹配的第一组拍摄参数信息。
视频处理装置获取与拍摄需求参数匹配的第一组拍摄参数信息,即根据拍摄需求参数获取第一组拍摄参数信息。
在一种可能的实现方式中,视频处理装置可输出一组或多组拍摄参数信息,用户可针对这一组或多组拍摄参数信息输入组选择指令,视频处理装置可将该组选择指令对应的组拍摄参数信息确定为与拍摄需求参数匹配的第一组拍摄参数信息。这一组或多组拍摄参数信息可以包括历史保存的组拍摄参数信息,视频处理装置在每次生成全景视频流之后,都会保存每次所采用的组拍摄参数信息,以便后续进行验证或调整。这一组或多组拍摄参数信息还可以包括历史保存的组拍摄参数信息的执行时间,以便用户根据执行时间输入组选择指令。可选的,这一组或多组拍摄参数信息还可以包括当前连接的拍摄设备的拍摄参数信息,视频处理装置可检测当前连接的拍摄设备的当前拍摄参数信息,例如视频处理装置向该拍摄设备发送获取指令,该拍摄设备在接收到该获取指令的情况下,通过两者之间的通信接口,将其当前拍摄参数信息传输至视频处理装置。
在另一种可能的实现方式中,视频处理装置直接将从当前连接的拍摄设备中获取的当前拍摄参数信息确定为与拍摄需求参数匹配的第一组拍摄参数信息。或者,视频处理装置可从当前连接的多个拍摄设备中获取与拍摄需求参数匹配的第一组拍摄参数信息。
在又一种可能的实现方式中,用户可针对拍摄需求参数手动输入拍摄参数信息,视频处理装置在接收到用户手动输入的拍摄参数信息的情况下,可将该拍摄参数信息作为与拍摄需求参数匹配的第一组拍摄参数信息。
其中,组拍摄参数信息可以包括一个或多个参数信息,例如拍摄需求参数包括拍摄设备的架构圈直径,那么组拍摄参数信息包括拍摄设备的架构圈直径为22.8厘米;再例如,拍摄需求参数还包括图像宽(像素)和图像高(像素),那么组拍摄参数信息还包括图像宽为5280,图像高为2972。
上述第一组拍摄参数信息可以理解为本次调整的初始化拍摄参数信息。第一组拍摄参数信息可以包括从拍摄设备获取的拍摄参数信息,例如可参见下表1,表1用于举例,并不构成对本申请实施例的限定。
表1
表1中,“/”表示或;“——”表示不存在可选项;“输入”表示输入视频处理装置;“输出”表示视频处理装置输出。例如,输入视频类型,表示输入视频处理装置的视频类型;输出视频类型,表示视频处理装置输出视频的视频类型。
第一组拍摄参数信息还可以包括用户手动输入的拍摄参数信息,或估计的拍摄参数信息或自动赋值的拍摄参数信息,例如可参见下表2,表2用于举例,并不构成对本申请实施例的限定。
表2
可以理解的是,表1所列举的拍摄参数信息是进行视频拼接所需的参数信息,可从拍摄设备获取或用户手动输入;表2所列举的拍摄参数信息可以是用户手动输入的,也可以是视频处理装置估计的或自动赋值的,可以理解为,这些拍摄参数信息在未从拍摄设备获取到,或用户未手动输入的情况下,视频处理装置可以进行估计或自动赋值,以确保视频拼接的正常进行。
步骤303,获取与第一组拍摄参数信息匹配的第一视频流。
视频处理装置获取与第一组拍摄参数信息匹配的第一视频流,即从采用第一组拍摄参数信息的拍摄设备中获取第一视频流。
若第一组拍摄参数信息是从一组或多组拍摄参数信息中选择的一组拍摄参数信息,那么视频处理装置从该组拍摄参数信息对应的拍摄设备中获取第一视频流。具体的,用户向视频处理装置输入启动指令,该启动指令针对该组拍摄参数信息对应的拍摄设备;视频处理装置根据该启动指令控制该拍摄设备的开启(即控制开启该拍摄设备),并控制该拍摄设备按照第一组拍摄参数信息进行视频采集;该拍摄设备按照第一组拍摄参数信息进行视频采集。之后,用户可向视频处理装置输入停止指令,该停止指令针对该拍摄设备;视频处理装置根据该停止指令控制该拍摄设备停止视频采集,从该拍摄设备获取其采集的第一视频流。
若第一组拍摄参数信息是从当前连接的拍摄设备获取的,那么视频处理装置从该拍摄设备获取第一视频流。具体的,用户向视频处理装置输入启动指令,该启动指令针对该拍摄设备;视频处理装置根据该启动指令控制该拍摄设备的开启,并控制该拍摄设备按照第一组拍摄参数信息进行视频采集;该拍摄设备按照第一组拍摄参数信息进行视频采集。之后,用户可向视频处理装置输入停止指令,该停止指令针对该拍摄设备;视频处理装置根据该停止指令控制该拍摄设备停止视频采集,从该拍摄设备获取其采集的第一视频流。
其中,第一视频流可以包括多个视频流,一个视频流对应一路拍摄器,即拍摄设备将其各路拍摄器所采集的视频流传输至视频处理装置。或者,第一视频流可以包括一个视频流,该视频流是拍摄设备对各路拍摄器所采集的视频流进行整合后得到的。
步骤304,根据第一组拍摄参数信息和第一视频流,生成第一全景视频流。
视频处理装置根据第一组拍摄参数信息和第一视频流,生成第一全景视频流。
在一种可能的实现方式中,视频处理装置将第一组拍摄参数信息和第一视频流注入用户所选的视频拼接算法,调用(或运行或执行)该视频拼接算法,生成第一全景视频流。第一组拍摄参数信息与第一视频流可同时注入该视频拼接算法;也可以先将第一组拍摄参数信息注入该视频拼接算法,再将第一视频流注入该视频拼接算法。
可选的,视频处理装置对第一组拍摄参数信息进行处理,将处理后的第一组拍摄参数信息注入该视频拼接算法。该处理可以包括但不限于:组合(例如向量等)、修改(例如基本运算)、单位转换等方式的处理。
在图3所示的实施例中,视频处理装置可以自主获取拍摄参数信息,无需操作人员手动输入,可减少对操作人员的依赖,进而可以提高全景视频流的生成效率。
请参见图4,为本申请实施例提供的另一种视频处理方法的流程示意图,可以包括但不限于如下步骤:
步骤401,视频处理装置输出第一全景视频流和第一组拍摄参数信息。
视频处理装置在生成第一全景视频流之后,可在用户界面中输出第一全景视频流和第一组拍摄参数信息。可以理解的是,步骤401在步骤304之后执行,图4所示的实施例在图3所示的实施例之后执行。视频处理装置可在用户界面中输出一个或多个全景视频流,以及各个全景视频流对应的组拍摄参数信息。
可参见图5,为本申请实施例提供的用户界面的示例图。图5的(a)中,在用户界面中显示一个全景视频流以及该全景视频流对应的组拍摄参数信息;图5的(b)中,在用户界面中显示两个全景视频流以及每个全景视频流对应的组拍摄参数信息。用户界面中显示两个或两个以上的全景视频流以及各个全景视频流对应的组拍摄参数信息,以便用户观看进行比对,对组拍摄参数信息进行调整,以优化全景视频流的播放效果。
步骤402,用户针对第一组拍摄参数信息输入保存指令。
若用户对于视频处理装置输出的第一全景视频流满意,则针对第一组拍摄参数信息输入保存指令。例如,用户在用户界面上点击针对第一组拍摄参数信息的确认键。
步骤403,视频处理装置保存第一组拍摄参数信息。
视频处理装置在接收到该保存指令时,保存第一组拍摄参数信息,以便下次参考第一组拍摄参数信息进行调整。可选的,将第一组拍摄参数信息添加至历史保存的拍摄参数信息中,以便用户下次可以该组拍摄参数信息生成效果较好的全景视频流。
步骤404,用户针对第一组拍摄参数信息输入修改指令。
若用户对于视频处理装置输出的第二全景视频流不满意,则针对第一组拍摄参数信息输入修改指令,例如用户直接在显示的第一组拍摄参数信息中输入修改指令。
步骤405,视频处理装置根据修改指令对第一组拍摄参数信息进行修改,得到第二组拍摄参数信息。
视频处理装置在接收到该修改指令时,根据该修改指令对第一组拍摄参数信息进行修改,得到第二组拍摄参数信息。可以理解的是,第二组拍摄参数信息即为修改之后的拍摄参数信息。
上述步骤404-步骤405是视频处理装置根据用户的修改指令得到第二组拍摄参数信息,视频处理装置还可以通过其他方式获得第二组拍摄参数信息。例如视频处理装置可以对第一组拍摄参数信息进行自动迭代,即视频处理装置对第一组拍摄参数信息进行自动修改,得到第二组拍摄参数信息。第二组拍摄参数信息或第二组拍摄参数信息之后的拍摄参数信息,可以是根据用户的修改指令得到的,也可以是视频处理装置自动修改或自动迭代得到的。
步骤406,视频处理装置获取与第二组拍摄参数信息匹配的第二视频流。
视频处理装置在得到第二组拍摄参数信息之后,可控制拍摄设备按照第二组拍摄参数信息进行视频采集。例如,视频处理装置向拍摄设备发送参数调整指令,该参数调整指令用于指示对哪些参数信息进行修改,拍摄设备在接收到该参数调整指令的情况下,根据该参数调整指令进行调整,调整之后,按照第二组拍摄参数信息进行视频采集。拍摄设备可向视频处理装置反馈调整成功,用于指示拍摄设备已调整参数信息。视频处理装置在接收到停止指令时,控制拍摄设备停止视频采集,并从拍摄设备获取第二视频流。
步骤407,视频处理装置根据第二组拍摄参数信息和第二视频流,生成第二全景视频流。
视频处理装置将第二组拍摄参数信息和第二视频流注入视频拼接算法,调用该视频拼接算法,生成第二全景视频流,可参见步骤304生成第一全景视频流的过程。
若用户满足第二全景视频流,可输入保存指令;若仍然不满意第二全景视频流,则继续输入修改指令,视频处理装置继续执行步骤405-步骤407,如此重复,直到生成用户满意的全景视频为止。
在图4所示的实施例中,若用户满意输出的全景视频流,则输入保存指令,视频处理装置对该全景视频流对应的组拍摄参数信息进行保存,以便下次可以参考这次的拍摄参数信息进行调整;若用户不满意输出的全景视频流,则输入修改指令,视频处理装置根据修改指令进行调整,并重新生成全景视频流,如此重复,直到输出用户满意的全景视频流为止,这样用户可以实时、远程调整参数,以获得较优的全景视频流。
请参见图6,为本申请实施例提供的又一种视频处理方法的流程示意图,可以包括但不限于如下步骤:
步骤601,视频处理装置监测第一组拍摄参数信息是否发生改变。
视频处理装置在执行步骤303的过程中,监测第一组拍摄参数信息是否发生改变。可以理解的是,图6所示的实施例在步骤303的执行过程中执行。
在一种可能的实现方式中,用户在手动调整拍摄设备的情况下,或其他用户手动调整拍摄设备的情况下,拍摄设备可向视频处理装置发送指示信息,该指示信息用于指示第一组拍摄参数信息正在被调整。视频处理装置在接收到该指示信息的情况下,可监测出第一组拍摄参数信息发生改变,并从拍摄设备获取哪些参数信息被改变了。
在一种可能的实现方式中,视频处理装置在执行步骤303的过程中,用户可以针对第一组拍摄参数信息输入修改指令。视频处理装置在接收到该修改指令的情况下,可监测出第一组拍摄参数信息发生改变。
若视频处理装置监测出第一组拍摄参数信息发生改变,则执行步骤602;反之继续执行步骤303。
步骤602,若发生改变,则视频处理装置输出提示信息。
视频处理装置在监测出第一组拍摄参数信息发生改变的情况下,输出提示信息,该提示信息用于提示用户,第一组拍摄参数信息发生改变。也可以理解为,该提示信息用于提示用户,当前的拍摄参数信息发生改变。视频处理装置可以直接在用户界面上输出该提示信息,也可以通过短信、邮件或其他方式输出该提示信息。
该提示信息除了用于提示用户,第一组拍摄参数信息发生改变外,还用于接收用户针对该提示信息输入的确认改变指令或拒绝改变指令。该种情况下,可以将提示信息理解为一个对话框,例如如图6所示的提示信息的对话框,该对话框用于举例,并不构成对本申请实施例的限定。若是用户手动调整拍摄设备或用户输入修改指令,那么用户可点击该对话框中的“确认”按键;若不是用户手动调整拍摄设备或不是用户输入的修改指令或用户拒绝修改,那么用户可点击该对话框中的“拒绝”按键。
步骤603,若接收到针对提示信息的确认改变指令,则根据第一组拍摄参数信息的改变生成第二组拍摄参数信息。
若视频处理装置接收到针对该提示信息的确认改变指令,例如对图6对话框中的“确认”按键的点击指令,再例如短信回复的确认消息,那么根据第一组拍摄参数信息的改变情况生成第二组拍摄参数信息。例如,在第一组拍摄参数信息改变之后的一段时间内未发生其他改变,则将改变之后的第一组拍摄参数信息作为第二组拍摄参数信息。
步骤604,视频处理装置获取与第二组拍摄参数信息匹配的第二视频流。
步骤605,视频处理装置根据第二组拍摄参数信息和第二视频流,生成第二全景视频流。
步骤604-步骤605的实现过程可参考步骤406-步骤407的具体描述。若是用户手动调整拍摄设备,那么视频处理装置无需控制拍摄设备从第一组拍摄参数信息调整至第二组拍摄参数信息。若是用户输入的修改指令,那么视频处理装置控制拍摄设备从第一组拍摄参数信息调整至第二组拍摄参数信息。
步骤606,若接收到针对提示信息的拒绝改变指令,则保持第一组拍摄参数信息不变。
若视频处理装置接收到针对该提示信息的拒绝改变指令,例如对图6对话框中的“拒绝”按键的点击指令,再例如短信回复的拒绝消息,那么保持第一组拍摄参数信息不变,可以理解的为,继续控制拍摄设备按照第一组拍摄参数信息进行视频采集,直到接收到停止指令。
在图6所示的实施例中,在拍摄设备采集视频流的过程中,用户可通过手动调整或修改指令对当前的拍摄参数信息进行调整,视频处理装置在确认为用户的行为的情况下,进行相应的调整,从而用户可以随时进行参数调整。
请参见图7,为本申请实施例提供的一种视频处理系统的结构示意图,视频处理系统70可以包括控制模块701、采集模块702和生成模块703。
控制模块701,用于确定视频拼接所需的拍摄需求参数;获取与拍摄需求参数匹配的第一组拍摄参数信息;将第一组拍摄参数信息传输至生成模块,并控制采集模块采集与第一组拍摄参数信息匹配的第一视频流;
采集模块702,用于采集与第一组拍摄参数信息匹配的第一视频流,并将第一视频流传输至生成模块;
生成模块703,用于根据第一组拍摄参数信息和第一视频流,生成第一全景视频流。
可选的,视频处理系统70还可以包括输入模块704,输入模块704用于接收用户输入的算法选择指令、组选择指令、启动指令、停止指令、确认改变指令、拒绝改变指令等中的一种或多种。其中,算法选择指令用于选择视频拼接算法;组选择指令用于选择组拍摄参数信息;启动指令用于控制拍摄设备的开启;停止指令用于控制拍摄设备停止视频采集;确定改变指令用于指示组拍摄参数信息的改变可以接受;拒绝改变指令用于指示组拍摄参数信息的改变不可以接受。其中,采集模块702可以是拍摄设备,或者可以是视频处理装置中用于从拍摄设备获取视频流的模块。
可选的,视频处理系统70还包括输出模块705,输出模块705用于输出第一全景视频流和第一组拍摄参数信息,还用于输出提示信息,该提示信息用于提示第一组拍摄参数信息发生改变。输出模块705可以输出多个全景视频流以及各个全景视频流对应的组拍摄参数信息,以便用户观看进行比对。
输入模块704和输出模块705可以是独立的,也可以是合设的,例如显示屏既可以作为输入模块704,也可以作为输出模块705。
可选的,在输入模块704接收到针对一个或多个视频拼接算法的算法选择指令的情况下,控制模块701确定算法选择指令对应的视频拼接算法,分析该视频拼接算法的算法接口,确定视频拼接算法所需的拍摄需求参数。
可选的,在输入模块704接收到针对一组或多组拍摄参数信息的组选择指令的情况下,控制模块701将组选择指令对应的组拍摄参数信息确定为与拍摄需求参数匹配的第一组拍摄参数信息。
可选的,采集模块702除了可以采集视频流之外,还可以采集拍摄设备的拍摄参数信息,控制模块701可将从当前连接的拍摄设备中获取的当前拍摄参数信息,确定为第一组拍摄参数信息;或可从当前连接的多个拍摄设备中获取与拍摄需求参数匹配的第一组拍摄参数信息。控制模块701可将第一组拍摄参数信息传输至生成模块703,并控制采集模块702采集与第一组拍摄参数信息匹配的第一视频流。
可选的,控制模块701通过启动指令和停止指令从采集模块702中获取与第一组拍摄参数信息匹配的第一视频流。控制模块701向采集模块702发送启动指令,采集模块702按照第一组拍摄参数信息进行视频采集;向采集模块702发送停止指令,采集模块702停止视频采集。采集模块702将其从接收到启动指令到接收到停止指令这段时间内所采集的第一视频流传输至生成模块703。
可选的,生成模块703将控制模块701传输的第一组拍摄参数信息和采集模块702传输的第一视频流,注入视频拼接算法,调用视频拼接算法生成第一全景视频流。
可选的,视频处理系统70还可以包括存储模块706。在输入模块704接收到针对第一组拍摄参数信息的保存指令的情况下,存储模块706可对第一组拍摄参数信息进行保存。
可选的,在输入模块704接收到针对第一组拍摄参数信息的修改指令的情况下,控制模块701根据修改指令对第一组拍摄参数信息进行修改,得到第二组拍摄参数信息;将第二组拍摄参数信息传输至生成模块703,并控制采集模块702采集与第二组拍摄参数信息匹配的第二视频流;
采集模块702采集与第二组拍摄参数信息匹配的第二视频流;
生成模块703将控制模块701传输的第二组拍摄参数信息和采集模块702传输的第二视频流,注入视频拼接算法,调用视频拼接算法生成第二全景视频流。
可选的,控制模块701监测第一组拍摄参数信息是否发生改变,并在发生改变的情况下,向输出模块705传输改变指示信息,该改变指示信息用于指示第一组拍摄参数信息发生改变;
输出模块705根据改变指示信息输出提示信息,提示信息用于提示第一组拍摄参数信息发生改变;
若输入模块704接收到针对提示信息的确认改变指令,则控制模块701根据第一组拍摄参数信息的改变生成第二组拍摄参数信息;将第二组拍摄参数信息传输至生成模块703,并控制采集模块702采集与第二组拍摄参数信息匹配的第一视频流;
采集模块702采集与第二组拍摄参数信息匹配的第二视频流,并将第二视频流传输至生成模块703;
生成模块703将控制模块701传输的第二组拍摄参数信息和采集模块702传输的第二视频流,注入视频拼接算法,调用视频拼接算法生成第二全景视频流。
可选的,控制模块701还可实现用户管理,不同用户可对应不同的权限。用户账号可关联该用户的历史保存的组拍摄参数信息,这样用户在首次手动输入初始拍摄参数信息之后,后续使用过程中用户可以通过调整指令对初始拍摄参数信息进行修改或调整,或控制模块701可在初始拍摄参数信息的基础上进行自动迭代或修改。
请参见图8,为本申请实施例提供的视频处理装置的逻辑结构示意图。图8中,视频处理装置80包括处理模块801和通信模块802。
处理模块801,用于确定视频拼接所需的拍摄需求参数;获取与拍摄需求参数匹配的第一组拍摄参数信息;利用通信模块802,获取与第一组拍摄参数信息匹配的第一视频流;根据第一组拍摄参数信息和第一视频流,生成第一全景视频流。
可选的,处理模块801,具体用于在接收到针对一个或多个视频拼接算法的算法选择指令的情况下,确定算法选择指令对应的视频拼接算法,分析视频拼接算法的算法接口,确定视频拼接所需的拍摄需求参数。
可选的,处理模块801,具体用于将第一组拍摄参数信息和第一视频流注入视频拼接算法,调用视频拼接算法,生成第一全景视频流。
可选的,处理模块801,具体用于在接收到针对一组或多组拍摄参数信息的组选择指令的情况下,将组选择指令对应的组拍摄参数信息确定为与拍摄需求参数匹配的第一组拍摄参数信息。
可选的,处理模块801根据启动指令利用通信模块802,控制拍摄设备的开启,并控制拍摄设备按照第一组拍摄参数信息进行视频采集;根据停止指令利用通信模块802,控制拍摄设备停止视频采集,从拍摄设备获取拍摄设备按照第一组拍摄参数信息采集的第一视频流。
可选的,处理模块801利用通信模块802从当前连接的拍摄设备中获取当前拍摄参数信息,并将当前拍摄参数信息确定为与拍摄需求参数匹配的第一组拍摄参数信息。
可选的,处理模块801根据启动指令利用通信模块802,控制拍摄设备的开启,并控制拍摄设备按照当前拍摄参数信息进行视频采集;根据停止指令利用通信模块802,控制拍摄设备停止视频采集,从拍摄设备获取拍摄设备按照当前拍摄参数信息采集的第一视频流。
可选的,处理模块801,还用于输出第一全景视频流和第一组拍摄参数信息。
可选的,处理模块801,还用于接收针对第一组拍摄参数信息的保存指令,并保存第一组拍摄参数信息。
可选的,处理模块801,还用于接收针对第一组拍摄参数信息的修改指令,并根据修改指令对第一组拍摄参数信息进行修改,得到第二组拍摄参数信息;利用通信模块802获取与第二组拍摄参数信息匹配的第二视频流;根据第二组拍摄参数信息和第二视频流,生成第二全景视频流。
可选的,处理模块801,还用于在监测到第一组拍摄参数信息发生改变的情况下,输出提示信息,提示信息用于提示第一组拍摄参数信息发生改变;若接收到针对提示信息的确认改变指令,则根据第一组拍摄参数信息的改变生成第二组拍摄参数信息;利用通信模块802获取与第二组拍摄参数信息匹配的第二视频流;根据第二组拍摄参数信息和第二视频流,生成第二全景视频流。
可选的,处理模块801,还用于若接收到针对提示信息的拒绝改变指令,则保持第一组拍摄参数信息不变。
本申请实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,另外,在本申请各个实施例中的各功能模块可以集成在一个处理器中,也可以是单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
请参见图9,为本申请实施例提供的视频处理装置的逻辑结构示意图。视频处理装置90可以为芯片系统。本申请实施例中,芯片系统可以由芯片构成,也可以包含芯片和其他分立器件。
视频处理装置90包括至少一个处理器920。示例性的,处理器920可以执行图3所示实施例中的步骤301、步骤302和步骤304;图4所示实施例中的步骤405和步骤407;图6所示实施例中的步骤603、步骤605和步骤606。
视频处理装置90还可以包括至少一个存储器930,用于存储程序指令和/或数据。存储器930和处理器920耦合。本申请实施例中的耦合是装置、单元或模块之间的间接耦合或通信连接,可以是电性,机械或其它的形式,用于装置、单元或模块之间的信息交互。处理器920可能和存储器930协同操作。处理器920可能执行存储器930中存储的程序指令。所述至少一个存储器中的至少一个可以包括于处理器中。示例性的,存储器930可以保存组拍摄参数信息。
视频处理装置90还可以包括通信接口910,用于通过传输介质和其它设备进行通信,从而用于视频处理装置90可以和其它设备进行通信。通信接口可以是收发器、接口、总线、电路或者能够实现收发功能的装置。示例性的,其它设备可以是拍摄设备,通信接口910可以执行图3所示实施例中的步骤303;图4所示实施例中的步骤406;图6所示实施例中的步骤604。
本申请实施例中不限定上述通信接口910、处理器920以及存储器930之间的具体连接介质。本申请实施例在图9中以存储器930、处理器920以及通信接口910之间通过总线940连接,总线在图9中以粗线表示,其它部件之间的连接方式,仅是进行示意性说明,并不引以为限。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示,图9中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
在本申请实施例中,处理器可以是通用处理器、数字信号处理器、专用集成电路、现场可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件,可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
在本申请实施例中,存储器可以是非易失性存储器,比如硬盘(hard disk drive,HDD)或固态硬盘(solid-state drive,SSD)等,还可以是易失性存储器(volatilememory),例如随机存取存储器(random-access memory,RAM)。存储器是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。本申请实施例中的存储器还可以是电路或者其它任意能够实现存储功能的装置,用于存储程序指令和/或数据。
本申请实施例提供的方法中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、网络设备、终端设备或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriber line,DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机可以存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如,软盘、硬盘、磁带)、光介质、或者半导体介质等。
在本申请实施例中,在无逻辑矛盾的前提下,各实施例之间可以相互引用,例如方法实施例之间的方法和/或术语可以相互引用,例如装置实施例之间的功能和/或术语可以相互引用,例如装置实施例和方法实施例之间的功能和/或术语可以相互引用。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
Claims (18)
1.一种视频处理方法,其特征在于,包括:
在接收到针对一个或多个视频拼接算法的算法选择指令的情况下,确定所述算法选择指令对应的视频拼接算法,分析所述视频拼接算法的算法接口,确定视频拼接所需的拍摄需求参数;
获取与所述拍摄需求参数匹配的第一组拍摄参数信息;
获取与所述第一组拍摄参数信息匹配的第一视频流;
根据所述第一组拍摄参数信息和第一视频流,生成第一全景视频流。
2.根据权利要求1所述的方法,其特征在于,所述根据第一组拍摄参数信息和所述第一视频流,生成第一全景视频流,包括:
将所述第一组拍摄参数信息和所述第一视频流注入所述视频拼接算法,调用所述视频拼接算法,生成第一全景视频流。
3.根据权利要求1所述的方法,其特征在于,所述获取与所述拍摄需求参数匹配的第一组拍摄参数信息,包括:
在接收到针对一组或多组拍摄参数信息的组选择指令的情况下,将所述组选择指令对应的组拍摄参数信息确定为与所述拍摄需求参数匹配的第一组拍摄参数信息。
4.根据权利要求3所述的方法,其特征在于,所述获取与所述第一组拍摄参数信息匹配的第一视频流,包括:
根据启动指令控制拍摄设备的开启,并控制所述拍摄设备按照所述第一组拍摄参数信息进行视频采集;
根据停止指令控制所述拍摄设备停止视频采集,从所述拍摄设备获取所述拍摄设备按照所述第一组拍摄参数信息采集的第一视频流。
5.根据权利要求1所述的方法,其特征在于,所述获取与所述拍摄需求参数匹配的第一组拍摄参数信息,包括:
从当前连接的拍摄设备中获取当前拍摄参数信息,并将所述当前拍摄参数信息确定为与所述拍摄需求参数匹配的第一组拍摄参数信息。
6.根据权利要求5所述的方法,其特征在于,所述获取与所述第一组拍摄参数信息匹配的第一视频流,包括:
根据启动指令控制所述拍摄设备的开启,并控制所述拍摄设备按照所述当前拍摄参数信息进行视频采集;
根据停止指令控制所述拍摄设备停止视频采集,从所述拍摄设备获取所述拍摄设备按照所述当前拍摄参数信息采集的第一视频流。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述方法还包括:
输出所述第一全景视频流和所述第一组拍摄参数信息。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
接收针对所述第一组拍摄参数信息的保存指令,并保存所述第一组拍摄参数信息。
9.根据权利要求7所述的方法,其特征在于,所述方法还包括:
接收针对所述第一组拍摄参数信息的修改指令,并根据所述修改指令对所述第一组拍摄参数信息进行修改,得到第二组拍摄参数信息;
获取与所述第二组拍摄参数信息匹配的第二视频流;
根据所述第二组拍摄参数信息和所述第二视频流,生成第二全景视频流。
10.根据权利要求1-6任一项所述的方法,其特征在于,所述方法还包括:
在监测到所述第一组拍摄参数信息发生改变的情况下,输出提示信息,所述提示信息用于提示所述第一组拍摄参数信息发生改变;
若接收到针对所述提示信息的确认改变指令,则根据所述第一组拍摄参数信息的改变生成第二组拍摄参数信息;
获取与所述第二组拍摄参数信息匹配的第二视频流;
根据所述第二组拍摄参数信息和所述第二视频流,生成第二全景视频流。
11.根据权利要求10所述的方法,其特征在于,所述方法还包括:
若接收到针对所述提示信息的拒绝改变指令,则保持所述第一组拍摄参数信息不变。
12.一种视频处理装置,其特征在于,包括通信模块和处理模块;
所述处理模块,用于在接收到针对一个或多个视频拼接算法的算法选择指令的情况下,确定所述算法选择指令对应的视频拼接算法,分析所述视频拼接算法的算法接口,确定视频拼接所需的拍摄需求参数;获取与所述拍摄需求参数匹配的第一组拍摄参数信息;利用所述通信模块,获取与所述第一组拍摄参数信息匹配的第一视频流;根据所述第一组拍摄参数信息和第一视频流,生成第一全景视频流。
13.一种视频处理装置,其特征在于,包括处理器和通信接口;
所述处理器,用于在接收到针对一个或多个视频拼接算法的算法选择指令的情况下,确定所述算法选择指令对应的视频拼接算法,分析所述视频拼接算法的算法接口,确定视频拼接所需的拍摄需求参数;获取与所述拍摄需求参数匹配的第一组拍摄参数信息;利用所述通信接口,获取与所述第一组拍摄参数信息匹配的第一视频流;根据所述第一组拍摄参数信息和第一视频流,生成第一全景视频流。
14.一种视频处理装置,其特征在于,包括处理器和存储器,所述存储器和所述处理器耦合,使得所述视频处理装置执行权利要求1-11任一项所述的方法。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有指令,当所述指令在计算机上运行时,使得计算机执行权利要求1-11任一项所述的方法。
16.一种视频处理系统,其特征在于,包括控制模块、采集模块和生成模块;
所述控制模块,用于在接收到针对一个或多个视频拼接算法的算法选择指令的情况下,确定所述算法选择指令对应的视频拼接算法,分析所述视频拼接算法的算法接口,确定视频拼接所需的拍摄需求参数;获取与所述拍摄需求参数匹配的第一组拍摄参数信息;将所述第一组拍摄参数信息传输至所述生成模块,并控制所述采集模块采集与所述第一组拍摄参数信息匹配的第一视频流;
所述采集模块,用于采集与所述第一组拍摄参数信息匹配的第一视频流,并将所述第一视频流传输至所述生成模块;
所述生成模块,用于根据所述第一组拍摄参数信息和所述第一视频流,生成第一全景视频流。
17.根据权利要求16所述的系统,其特征在于,所述系统还包括输出模块;
所述输出模块,用于输出所述第一全景视频流和所述第一组拍摄参数信息。
18.根据权利要求16所述的系统,其特征在于,所述系统还包括输出模块和输入模块;
所述控制模块,还用于监测所述第一组拍摄参数信息是否发生改变,并在发生改变的情况下,向所述输出模块传输改变指示信息,所述改变指示信息用于指示所述第一组拍摄参数信息发生改变;
所述输出模块,用于根据所述改变指示信息输出提示信息,所述提示信息用于提示所述第一组拍摄参数信息发生改变;
所述控制模块,还用于若所述输入模块接收到针对所述提示信息的确认改变指令,则根据所述第一组拍摄参数信息的改变生成第二组拍摄参数信息;将所述第二组拍摄参数信息传输至所述生成模块,并控制所述采集模块采集与所述第二组拍摄参数信息匹配的第一视频流;
所述采集模块,还用于采集与所述第二组拍摄参数信息匹配的第二视频流,并将所述第二视频流传输至所述生成模块;
所述生成模块,还用于根据所述第二组拍摄参数信息和所述第二视频流,生成第二全景视频流。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911350264.9A CN113038145B (zh) | 2019-12-24 | 2019-12-24 | 视频处理方法及其装置、系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911350264.9A CN113038145B (zh) | 2019-12-24 | 2019-12-24 | 视频处理方法及其装置、系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113038145A CN113038145A (zh) | 2021-06-25 |
CN113038145B true CN113038145B (zh) | 2022-08-09 |
Family
ID=76451986
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911350264.9A Active CN113038145B (zh) | 2019-12-24 | 2019-12-24 | 视频处理方法及其装置、系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113038145B (zh) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106990669B (zh) * | 2016-11-24 | 2019-07-26 | 深圳市圆周率软件科技有限责任公司 | 一种全景相机量产方法及系统 |
CN107071268A (zh) * | 2017-01-20 | 2017-08-18 | 深圳市圆周率软件科技有限责任公司 | 一种多目全景相机全景拼接方法及系统 |
CN110019886A (zh) * | 2017-08-28 | 2019-07-16 | 富泰华工业(深圳)有限公司 | 全景影像生成装置及方法 |
CN107529017A (zh) * | 2017-10-12 | 2017-12-29 | 长沙全度影像科技有限公司 | 一种全景相机的多拼接模式的系统及方法 |
-
2019
- 2019-12-24 CN CN201911350264.9A patent/CN113038145B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN113038145A (zh) | 2021-06-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2017181777A1 (zh) | 全景视频直播方法、装置和系统以及视频源控制设备 | |
US20180160042A1 (en) | Apparatus and method for controlling camera array | |
US20200351110A1 (en) | Remote automobile diagnostic method, apparatus, and system | |
EP2892205B1 (en) | Method and device for determining a sharing terminal | |
US20160088222A1 (en) | System and method for merging a plurality of source video streams | |
CN107197320B (zh) | 视频直播方法、装置和系统 | |
CN105657257A (zh) | 全景照片的拍摄方法、装置、系统、移动终端及自拍杆 | |
JP2018503148A (ja) | ビデオ再生のための方法および装置 | |
CN105320695A (zh) | 图片处理方法及装置 | |
CN105117216A (zh) | 移动终端通知栏的管理方法、装置和移动终端 | |
US20210051276A1 (en) | Method and apparatus for providing video in portable terminal | |
CN106331748A (zh) | 直播方法、装置及服务器 | |
WO2021095598A1 (ja) | 情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラム | |
CN113038145B (zh) | 视频处理方法及其装置、系统 | |
CN107872558B (zh) | 一种智能电子设备、图像处理单元、图像采集装置和图像采集方法 | |
KR20180131687A (ko) | 실시간기반 및 컨텐츠 기반 실시간 공연공유 서비스 제공시스템 | |
KR101529139B1 (ko) | 멀티앵글영상촬영을 위한 사용자인터페이스 메뉴 제공방법 및 사용자 인터페이스메뉴 제공장치 | |
CN115002358B (zh) | 数字背景拍摄中的控制方法及系统 | |
CN107333172B (zh) | 一种导播系统的导播方法及装置、电子设备 | |
EP3513546B1 (en) | Systems and methods for segmented data transmission | |
CN112887606B (zh) | 拍摄方法、装置和电子设备 | |
US20140320675A1 (en) | Camera Capable of Connecting to Mobile Devices, and Operational Methods Thereof | |
CN105052128A (zh) | 摄像设备 | |
US20120188384A1 (en) | Recording apparatus | |
CN114095660A (zh) | 图像显示方法、装置、存储介质及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |