CN113794844B - 自由视角视频采集系统、方法、装置、服务器和介质 - Google Patents
自由视角视频采集系统、方法、装置、服务器和介质 Download PDFInfo
- Publication number
- CN113794844B CN113794844B CN202111056561.XA CN202111056561A CN113794844B CN 113794844 B CN113794844 B CN 113794844B CN 202111056561 A CN202111056561 A CN 202111056561A CN 113794844 B CN113794844 B CN 113794844B
- Authority
- CN
- China
- Prior art keywords
- video
- video stream
- camera
- camera group
- mobile terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 54
- 230000000007 visual effect Effects 0.000 claims abstract description 23
- 238000004590 computer program Methods 0.000 claims description 9
- 230000000694 effects Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 8
- 230000001360 synchronised effect Effects 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Studio Devices (AREA)
Abstract
本公开实施例公开了一种自由视角视频采集系统、方法、装置、服务器和介质，该系统包括：服务器、至少一个具有移动网络的移动终端以及每个移动终端上外接的一个摄像头组，摄像头组包含至少两个摄像头，各个摄像头组对应的摄像头总数量小于自由视角视频中所支持观看的观看视角总数量；其中，每个摄像头用于采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至服务器；服务器用于基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流。通过本公开实施例的技术方案，可以提高应用场景适用的广泛性，并且降低视频采集成本。
Description
技术领域
本公开实施例涉及互联网技术，尤其涉及一种自由视角视频采集系统、方法、装置、服务器和介质。
背景技术
随着互联网技术的快速发展和用户需求的日益增多，一种自由视角视频被研发，使得用户可以从不同视角下观看视频。
目前，对自由视角视频的采集通常是在每个视角位置上放置一个摄像头，并将每个摄像头采集的相应视角下的视频流通过万兆路由器上传至服务器，从而使得服务器获得采集的自由视角视频。可见，现有采集方式需要利用万兆路由器这种专用有线网络进行上传，从而只能适用于室内的视频采集场景，大大限制了应用场景适用的广泛性，并且支持用户观看的每个观看视角位置上都需要放置一个摄像头，使得视频采集成本较高。
发明内容
本公开实施例提供了一种自由视角视频采集系统、方法、装置、服务器和介质，以提高应用场景适用的广泛性，并且降低视频采集成本。
第一方面，本公开实施例提供了一种自由视角视频采集系统，所述系统包括：服务器、至少一个具有移动网络的移动终端以及每个移动终端上外接的一个摄像头组，所述摄像头组包含至少两个摄像头，各个所述摄像头组对应的摄像头总数量小于自由视角视频中所支持观看的观看视角总数量；
其中，每个所述摄像头用于采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至所述服务器；
所述服务器用于基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流。
第二方面，本公开实施例还提供了一种自由视角视频采集方法，应用于服务器，所述方法包括：
接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流；
基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流。
第三方面，本公开实施例还提供了一种自由视角视频采集装置，集成于服务器，所述装置包括：
第一视频流接收模块，用于接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流；
第二视频流生成模块，用于基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流。
第四方面，本公开实施例还提供了一种服务器，所述服务器包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本公开任意实施例所提供的自由视角视频采集方法。
第五方面，本公开实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本公开任意实施例所提供的自由视角视频采集方法。
本公开实施例的自由视角视频采集系统，每个摄像头组内的每个摄像头采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至服务器，从而利用移动终端的移动网络这种无线方式进行上传，使得不仅可以适用于室内的视频采集场景，也可以适用于室外的视频采集场景，提高了应用场景适用的广泛性。而且，所使用的摄像头总数量小于自由视角视频中所支持观看的观看视角总数量，并利用服务器基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流，从而可以利用较少的摄像头通过虚拟视角生成的方式，获得每个观看视角下的视频流，大大降低了视频采集成本。
附图说明
结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。
图1是本公开实施例一提供的一种自由视角视频采集系统的结构示意图；
图2是本公开实施例一所涉及的一种摄像头的分布示例；
图3是本公开实施例二提供的一种自由视角视频采集方法的流程图；
图4是本公开实施例三提供的一种自由视角视频采集方法的流程图；
图5是本公开实施例四提供的一种自由视角视频采集装置的结构示意图；
图6是本公开实施例五提供的一种服务器的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
实施例一
图1为本公开实施例一提供的一种自由视角视频采集系统的结构示意图，本实施例可适用于同时采集同一对象在不同视角下的视频流的情况，尤其是可以用于在主播直播时，采集主播所直播的自由视角视频的场景中。如图1所示，该系统包括：服务器110、至少一个具有移动网络的移动终端120以及每个移动终端上外接的一个摄像头组130，每个摄像头组130包含至少两个摄像头140。
其中，各个摄像头组130对应的摄像头总数量小于自由视角视频中所支持观看的观看视角总数量。本公开实施例无需在自由视角视频的每个观看视角上放置一个摄像头，从而可以降低视频采集成本。
其中，每个摄像头140用于采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端120发送至服务器110；服务器110用于基于接收到的各个摄像头组130对应的各个第一视频流，生成各个虚拟视角下的第二视频流。
其中，具有移动网络的移动终端120可以是任意一种可移动通信的终端设备。例如，移动终端120可以是手机或者平板电脑等。每个移动终端120可以通过有线方式外接摄像头组130中的每个摄像头140，以使摄像头140与移动终端120进行有线通信，保证通信质量，降低通信时延。示例性地，每个摄像头组130内的每个摄像头140可以通过通用串行总线USB的方式与相应的移动终端120进行连接。服务器110可以是指用于存储自由视角视频的后台媒体服务器或者视频云端等。
其中，每个摄像头组130所包含的摄像头140的数量可以相同，也可以不同。通过设置每个摄像头组130所包含的摄像头数量相等，可以更加方便地构建相邻两个摄像头之间的虚拟视角。本公开实施例中的每个摄像头组130所包含的摄像头140的具体数量可以基于业务需求和实际情况进行设置。本公开实施例中的移动终端120的具体数量可以基于上传采集的第一视频流所需要的网络带宽进行设置，以保证视频流的上传速度。例如，当上传网络带宽要求高时，可以设置多个移动终端120分担上传网络带宽要求。
具体地，当用户需要采集自由视角视频时，可以将每个摄像头组130内的各个摄像头140放置到采集对象的周围处，并将每个摄像头140与相应的移动终端120进行连接，从而可以利用每个摄像头140采集所在位置对应的拍摄视角下的第一视频流，并将采集的第一视频流发送至所连接的移动终端120，移动终端120通过自身的移动网络，将接收到的第一视频流发送至服务器110。服务器110可以基于接收到的每个摄像头组对应的各个第一视频流，在相邻两个摄像头之间构建虚拟视角，并生成虚拟视角下的第二视频流，从而可以获得由各个拍摄视角下的第一视频流和各个虚拟视角下的第二视频流组成的自由视角视频。本公开实施例通过利用移动终端120的移动网络这种无线方式进行上传，从而可以不仅适用于室内的视频采集场景，也可以适用于室外的视频采集场景，提高了应用场景适用的广泛性，并且可以利用较少的摄像头通过虚拟视角生成的方式，获得每个观看视角下的视频流，大大降低了视频采集成本。
本公开实施例的自由视角视频采集系统，每个摄像头组内的每个摄像头采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至服务器，从而利用移动终端的移动网络这种无线方式进行上传，使得不仅可以适用于室内的视频采集场景，也可以适用于室外的视频采集场景，提高了应用场景适用的广泛性。而且，所使用的摄像头总数量小于自由视角视频中所支持观看的观看视角总数量，并利用服务器基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流，从而可以利用较少的摄像头通过虚拟视角生成的方式，获得每个观看视角下的视频流，大大降低了视频采集成本。
在上述技术方案的基础上，各个摄像头组均匀分布地放置在采集对象的周围处，每个摄像头组内的各个摄像头在组内均匀分布地放置。
具体地，可以在采集对象的周围均匀地放置各个摄像头组，即每相邻两个摄像头组之间的角距离相等。在每个摄像头组内，各个摄像头也可以均匀地放置，即每相邻两个摄像头之间的角距离相等，从而通过均匀放置可以获得采集效果更好的自由视角视频。例如，可以以采集对象为中心，预设距离为半径的圆形边界上均匀放置各个摄像头组，每个摄像头组内的各个摄像头在组内均匀分布在圆形边界上。图2给出了一种摄像头的分布示例。图2中包括3个摄像头组，每个摄像头组包含3个摄像头。3个摄像头组中每相邻两个摄像头组之间的角距离相等，即摄像头1和摄像头3之间的角距离等于摄像头4和摄像头6之间的角距离，摄像头4和摄像头6之间的角距离等于摄像头7和摄像头9之间的角距离。每个摄像头组内的每相邻两个摄像头之间的角距离相等，比如对于第一个摄像头组，摄像头1和摄像头2之间的角距离等于摄像头2和摄像头3之间的角距离。
在上述各技术方案的基础上，相邻两个摄像头组130内的相邻两个摄像头140之间的第一角距离等于自由视角视频中所支持观看的相邻两个观看视角之间的角距离；每个摄像头组130内的相邻两个摄像头140之间的第二角距离大于第一角距离。
具体地，在相邻两个摄像头组130之间，可以将相邻两个摄像头组130内的相邻两个摄像头140之间的第一角距离设置为自由视角视频的最小视角切换角距离，即相邻两个观看视角之间的角距离，从而无需在摄像头组130之间构建虚拟视角。在每个摄像头组130内，每相邻两个摄像头140之间的第二角距离大于第一角距离，从而只需在同步效果较好的每个摄像头组130内的相邻两个摄像头140之间构建虚拟视角，进而获得视角切换效果更好的自由视角视频。例如，如图2所示，第一个摄像头组内的摄像头3与第二个摄像头组内的摄像头4之间的第一角距离等于相邻两个观看视角之间的角距离，也就是说用户切换视角时，可以从摄像头3对应的拍摄视角切换到摄像头4对应的视角，无需在摄像头3与摄像头4之间构建虚拟视角。第一个摄像头组内，摄像头1和摄像头2之间的角距离以及摄像头2和摄像头3之间的第二角距离均大于摄像头3与摄像头4之间的第一角距离，从而可以在第二角距离之间构建虚拟视角，比如，在第二角距离的中间位置处构建一个虚拟视角。
示例性地，第二角距离是第一角距离的整数倍。通过将第二角距离设置为第一角距离的整数倍，可以在每个摄像头组内的每相邻两个摄像头之间构建与倍数相同数量的虚拟视角，使得获得的各个虚拟视角和各个拍摄视角中的每相邻两个视角所对应的角距离均相等，从而用户在切换视角时，可以均匀地改变视角，保证切换速度的一致性，提高用户观看体验。
在上述各技术方案的基础上，该系统还可以包括：第一控制端，第一控制端与每个移动终端120相连接。
其中，第一控制端用于基于用户触发操作生成拍摄控制指令，并将拍摄控制指令发送至各个移动终端120；相应地，每个移动终端120用于根据接收到的拍摄控制指令生成拍摄开始指令，并将拍摄开始指令发送至所外接的各个摄像头140；每个摄像头140具体用于：当接收到所外接的移动终端发送的拍摄开始指令时，开始采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端120发送至服务器110。
具体地，第一控制端可以是用于通过控制各个移动终端120来间接控制所连接的各个摄像头140拍摄的设备。例如，第一控制端可以是但不限于单独的一个移动终端或者简易的一个包含控制按钮的控制装置，以便可以利用该控制装置中的控制按钮对各个移动终端进行控制，从而可以降低采集成本。第一控制端可以与每个移动终端120进行有线连接或者无线连接，以便向各个移动终端120发送拍摄控制指令。例如，有线连接可以是利用移动终端的音频线进行连接。无线连接可以是蓝牙连接或者无线网络连接。通过利用第一控制端间接地控制各个摄像头，可以使得各个摄像头较为同步地开始拍摄各个拍摄视角下的视频流，提高采集效果，并且可以仅需使用普通摄像头即可，进一步降低了采集成本。
在上述各技术方案的基础上，该系统还可以包括：第二控制端，第二控制端与每个摄像头140相连接；
其中，第二控制端用于生成采集同步信号，并将采集同步信号令发送至各个摄像头140；相应地，每个摄像头140具体用于：基于接收到的采集同步信号，同步采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至服务器。
具体地，第二控制端可以是指直接控制各个摄像头140拍摄的设备。例如，第二控制端可以是但不限于信号生成器。第二控制端可以与每个摄像头140进行有线连接，以便保证通信效果。为了可以与第二控制器直接通信，所使用的摄像头需要为工业定制摄像头。通过利用第二控制端直接地控制各个摄像头140，使得每个摄像头140可以基于相同的同步信号更加同步地采集相应的拍摄视角下的第一视频流，从而可以进一步提高采集效果。
实施例二
图3为本公开实施例二提供的一种自由视角视频采集方法的流程图，本实施例可适用于同时采集同一对象在不同视角下的视频流的情况，尤其是可以用于在主播直播时，采集用于直播的自由视角视频的场景中。该方法可以由自由视角视频采集装置来执行，该装置可以由软件和/或硬件的方式来实现，集成于服务器中。如图3所示，该方法具体包括以下步骤：
S310、接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流。
其中，移动终端可以是指可移动通信的终端设备。例如，移动终端可以是手机或者平板电脑等。拍摄视角可以是指利用摄像头拍摄的真实视角。
具体地，服务器可以接收每个移动终端通过移动网络发送的每个摄像头组所采集的各个拍摄视角下的各个第一视频流。
S320、基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流。
具体地，服务器可以基于现有虚拟视角生成方式，在相邻两个摄像头对应的两个拍摄视角之间构建一定数量的虚拟视角，并根据相邻两个摄像头所采集的两个第一视频流，生成每个虚拟视角下的第二视频流，从而获得由各个拍摄视角下的第一视频流和各个虚拟视角下的第二视频流组成的自由视角视频，以便用户在观看该自由视角视频时可以对观看视角进行切换，即在各个拍摄视角和各个虚拟视角中进行视角切换。本公开实施例通过利用移动终端的移动网络这种无线方式进行上传，从而可以不仅适用于室内的视频采集场景，也可以适用于室外的视频采集场景，提高了应用场景适用的广泛性，并且利用较少的摄像头通过虚拟视角生成的方式，可以获得每个观看视角下的视频流，大大降低了视频采集成本。
本公开实施例的技术方案，服务器通过接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流，并基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流，从而可以利用较少的摄像头通过虚拟视角生成的方式，获得每个观看视角下的视频流，大大降低了视频采集成本。并且利用移动终端的移动网络这种无线方式进行上传，使得不仅可以适用于室内的视频采集场景，也可以适用于室外的视频采集场景，提高了应用场景适用的广泛性。
在上述技术方案的基础上，S320可以包括：针对每个摄像头组，基于接收到的该摄像头组对应的各个第一视频流，生成该摄像头组内的各个虚拟视角下的第二视频流。
具体地，处于同一摄像头组内的多个摄像头所采集的第一视频流的同步效果要优于处于不同摄像头组内的摄像头所采集的第一视频流的同步效果，从而可以仅在每个摄像头组内构建虚拟视角，无需在不同摄像头组之间进行虚拟视角的构建，以便获得同步效果更好的自由视角视频。例如，针对每个摄像头组而言，可以在该摄像头组内相邻两个摄像头对应的两个拍摄视角之间构建一定数量的虚拟视角，并根据该相邻两个摄像头所采集的两个第一视频流，生成每个虚拟视角下的第二视频流，从而使得该摄像头组内的各个拍摄视角下的第一视频流和各个虚拟视角下的第二视频流更加同步，进而保证更优地视角切换同步效果。
实施例三
图4为本公开实施例三提供的一种自由视角视频采集方法的流程图，本实施例在上述实施例二的基础上，对步骤“针对每个摄像头组，基于接收到的该摄像头组对应的各个第一视频流，生成该摄像头组内的各个虚拟视角下的第二视频流”进行了进一步优化。其中与上述各实施例相同或相应的术语的解释在此不再赘述。
参见图4，本实施例提供的自由视角视频采集方法具体包括以下步骤：
S410、接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流。
S420、针对每个摄像头组，获取接收到的该摄像头组对应的每个第一视频流对应的对齐信息。
具体地，每个摄像头在采集的第一视频流时，实时生成采集的每个视频帧的对齐信息，并可以将采集的第一视频流和相应的对齐信息同时通过移动终端的移动网络发生至服务器中，从而使得服务器可以获取到采集的每个第一视频流对应的对齐信息。本公开实施例可以针对每个摄像头组，通过执行步骤S420-S440的操作，获得在每个摄像头组内生成的各个虚拟视角下的第二视频流。
S430、根据各个第一视频流对应的对齐信息，对各个第一视频流进行对齐操作，确定各个对齐后的第一视频流。
具体地，通过根据该摄像头组内的每个第一视频流对应的对齐信息，可以对该摄像头组内采集的各个第一视频流进行对齐操作，确定各个对齐后的第一视频流，以便保证不同视角下的视频流同步播放。其中，对齐信息可以是但不限于第一视频帧的采集时间戳或者帧序号。
示例性地，S430可以包括：将各个第一视频流中的采集时间戳相同的视频帧作为同一观看时刻下的视频帧，获得各个对齐后的第一视频流；或者，将各个第一视频流中的帧序号相同的视频帧作为同一观看时刻下的视频帧，获得各个对齐后的第一视频流。
S440、根据各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流。
具体地，服务器可以基于现有虚拟视角生成方式，可以在该摄像头组内相邻两个摄像头对应的两个拍摄视角之间构建一定数量的虚拟视角，并根据该相邻两个摄像头所对应的对齐后的两个第一视频流，生成每个虚拟视角下的第二视频流，从而在第一视频流对齐后再进行虚拟视角的构建生成，可以进一步提高不同视角下的视频流同步播放效果。
示例性地，S440可以包括：根据相邻两个摄像头组内的相邻两个摄像头之间的第一角距离、该摄像头组内的相邻两个摄像头之间的第二角距离以及各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流。
具体地，本公开实施例可以基于第一角距离与第二角距离之间的大小关系，在该摄像头组内相邻两个摄像头对应的两个拍摄视角之间构建出与该大小关系相匹配的数量的虚拟视角，以便进一步提高视角切换效果。
示例性地，该摄像头组内的相邻两个摄像头之间的第二角距离是相邻两个摄像头组内的相邻两个摄像头之间的第一角距离的整数倍；相应地，根据相邻两个摄像头组内的相邻两个摄像头之间的第一角距离、该摄像头组内的相邻两个摄像头之间的第二角距离以及各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流，可以包括：针对该摄像头组内的每相邻两个摄像头，根据该相邻两个摄像头对应的两个对齐后的第一视频流，在该相邻两个摄像头对应的两个拍摄视角之间生成与整数倍相同个数的虚拟视角下的第二视频流。
具体地，在该摄像头组内相邻两个摄像头对应的两个拍摄视角之间构建出与倍数相同数量的虚拟视角，使得该摄像头组内获得的各个虚拟视角和各个拍摄视角中的每相邻两个视角所对应的角距离均相等，从而用户在切换视角时，可以均匀地改变视角，保证切换速度的一致性，进一步提高用户观看体验。
本实施例的技术方案，通过针对每个摄像头组，根据接收到的该摄像头组对应的每个第一视频流对应的对齐信息，对各个第一视频流进行对齐操作，确定各个对齐后的第一视频流，并根据各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流，从而在第一视频流对齐后再进行虚拟视角的构建生成，可以进一步提高不同视角下的视频流同步播放效果。
以下是本公开实施例提供的自由视角视频采集装置的实施例，该装置与上述实施例二和实施例三的自由视角视频采集方法属于同一个发明构思，在自由视角视频采集装置的实施例中未详尽描述的细节内容，可以参考上述实施例二和实施例三的自由视角视频采集方法。
实施例四
图5为本公开实施例四提供的一种自由视角视频采集装置的结构示意图，本实施例可适用于同时采集同一对象在不同视角下的视频流的情况，尤其是可以用于在主播直播时，采集用于直播的自由视角视频的场景中。如图5所示，该装置具体包括：第一视频流接收模块510和第二视频流生成模块520。
其中，第一视频流接收模块510，用于接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流；第二视频流生成模块520，用于基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流。
本公开实施例的技术方案，通过接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流，并基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流，从而可以利用较少的摄像头通过虚拟视角生成的方式，获得每个观看视角下的视频流，大大降低了视频采集成本。并且利用移动终端的移动网络这种无线方式进行上传，使得不仅可以适用于室内的视频采集场景，也可以适用于室外的视频采集场景，提高了应用场景适用的广泛性。
在上述技术方案的基础上，第二视频流生成模块520，具体用于：
针对每个摄像头组，基于接收到的该摄像头组对应的各个第一视频流，生成该摄像头组内的各个虚拟视角下的第二视频流。
在上述各技术方案的基础上，第二视频流生成模块520，具体包括：
对齐信息获取单元，用于获取接收到的该摄像头组对应的每个第一视频流对应的对齐信息；
第一视频流对齐单元，用于根据各个第一视频流对应的对齐信息，对各个第一视频流进行对齐操作，确定各个对齐后的第一视频流；
第二视频流生成单元，用于根据各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流。
在上述各技术方案的基础上，第一视频流对齐单元，具体用于：
将各个第一视频流中的采集时间戳相同的视频帧作为同一观看时刻下的视频帧，获得各个对齐后的第一视频流；或者，将各个第一视频流中的帧序号相同的视频帧作为同一观看时刻下的视频帧，获得各个对齐后的第一视频流。
在上述各技术方案的基础上，第二视频流生成单元，具体用于：
根据相邻两个摄像头组内的相邻两个摄像头之间的第一角距离、该摄像头组内的相邻两个摄像头之间的第二角距离以及各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流。
在上述各技术方案的基础上，该摄像头组内的相邻两个摄像头之间的第二角距离是相邻两个摄像头组内的相邻两个摄像头之间的第一角距离的整数倍；
第二视频流生成单元，具体用于：针对该摄像头组内的每相邻两个摄像头，根据该相邻两个摄像头对应的两个对齐后的第一视频流，在该相邻两个摄像头对应的两个拍摄视角之间生成与整数倍相同个数的虚拟视角下的第二视频流。
本公开实施例所提供的自由视角视频采集装置可执行本发明任意实施例所提供的自由视角视频采集方法，具备执行自由视角视频采集方法相应的功能模块和有益效果。
值得注意的是，上述自由视角视频采集装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
实施例五
下面参考图6，其示出了适于用来实现本公开实施例的服务器900的结构示意图。图6示出的服务器仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示，服务器900可以包括处理装置(例如中央处理器、图形处理器等)901，其可以根据存储在只读存储器(ROM)902中的程序或者从存储装置908加载到随机访问存储器(RAM)903中的程序而执行各种适当的动作和处理。在RAM 903中，还存储有服务器900操作所需的各种程序和数据。处理装置901、ROM 902以及RAM 903通过总线904彼此相连。输入/输出(I/O)接口905也连接至总线904。
通常，以下装置可以连接至I/O接口905：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置906；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置907；包括例如磁带、硬盘等的存储装置908；以及通信装置909。通信装置909可以允许服务器900与其他设备进行无线或有线通信以交换数据。虽然图6示出了具有各种装置的服务器900，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在非暂态计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置909从网络上被下载和安装，或者从存储装置908被安装，或者从ROM 902被安装。在该计算机程序被处理装置901执行时，执行本公开实施例的方法中限定的上述功能。
本公开实施例提供的服务器与上述实施例提供的自由视角视频采集方法属于同一发明构思，未在本公开实施例中详尽描述的技术细节可参见上述实施例二和实施例三，并且本公开实施例与上述实施例二和实施例三具有相同的有益效果。
实施例六
本公开实施例提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述实施例二和实施例三所提供的自由视角视频采集方法。
需要说明的是，本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。
在一些实施方式中，客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol，超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信，并且可以与任意形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(“LAN”)，广域网(“WAN”)，网际网(例如，互联网)以及端对端网络(例如，ad hoc端对端网络)，以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述服务器中所包含的；也可以是单独存在，而未装配入该服务器中。
上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该服务器执行时，使得该服务器：接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流；基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，单元的名称在某种情况下并不构成对该单元本身的限定，例如，可编辑内容显示单元还可以被描述为“编辑单元”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
根据本公开的一个或多个实施例，【示例一】提供了一种自由视角视频采集系统，所述系统包括：服务器、至少一个具有移动网络的移动终端以及每个移动终端上外接的一个摄像头组，所述摄像头组包含至少两个摄像头，各个所述摄像头组对应的摄像头总数量小于自由视角视频中所支持观看的观看视角总数量；
其中，每个所述摄像头用于采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至所述服务器；
所述服务器用于基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流。
根据本公开的一个或多个实施例，【示例二】提供了一种自由视角视频采集系统，所述系统还包括：
可选的，各个所述摄像头组均匀分布地放置在采集对象的周围处，每个所述摄像头组内的各个摄像头在组内均匀分布地放置。
根据本公开的一个或多个实施例，【示例三】提供了一种自由视角视频采集系统，所述系统还包括：
可选的，每个所述摄像头组所包含的摄像头数量相等。
根据本公开的一个或多个实施例，【示例四】提供了一种自由视角视频采集系统，所述系统还包括：
可选的，相邻两个摄像头组内的相邻两个摄像头之间的第一角距离等于自由视角视频中所支持观看的相邻两个观看视角之间的角距离；
每个所述摄像头组内的相邻两个摄像头之间的第二角距离大于所述第一角距离。
根据本公开的一个或多个实施例，【示例五】提供了一种自由视角视频采集系统，所述系统还包括：
可选的，所述第二角距离是所述第一角距离的整数倍。
根据本公开的一个或多个实施例，【示例六】提供了一种自由视角视频采集系统，所述系统还包括：
可选的，每个所述摄像头组内的每个摄像头通过通用串行总线与相应的移动终端进行连接。
根据本公开的一个或多个实施例，【示例七】提供了一种自由视角视频采集系统，所述系统还包括：
可选的，所述系统还包括：第一控制端，所述第一控制端与每个所述移动终端相连接；
其中，所述第一控制端用于基于用户触发操作生成拍摄控制指令，并将所述拍摄控制指令发送至各个所述移动终端；
相应地，每个所述移动终端用于根据接收到的拍摄控制指令生成拍摄开始指令，并将所述拍摄开始指令发送至所外接的各个摄像头；
每个所述摄像头具体用于：当接收到所外接的移动终端发送的拍摄开始指令时，开始采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至所述服务器。
根据本公开的一个或多个实施例，【示例八】提供了一种自由视角视频采集系统，所述系统还包括：
可选的，所述第一控制端为单独的一个移动终端或者包含控制按钮的控制装置。
根据本公开的一个或多个实施例，【示例九】提供了一种自由视角视频采集系统，所述系统还包括：
可选的，所述系统还包括：第二控制端，所述第二控制端与每个所述摄像头相连接；
其中，所述第二控制端用于生成采集同步信号，并将所述采集同步信号令发送至各个所述摄像头；
相应地，每个所述摄像头具体用于：基于接收到的采集同步信号，同步采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至所述服务器。
根据本公开的一个或多个实施例，【示例十】提供了一种自由视角视频采集方法，应用于服务器，所述方法包括：
接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流；
基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流。
根据本公开的一个或多个实施例，【示例十一】提供了一种自由视角视频采集方法，应用于服务器，所述方法还包括：
可选的，基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流，包括：
针对每个摄像头组，基于接收到的该摄像头组对应的各个第一视频流，生成该摄像头组内的各个虚拟视角下的第二视频流。
根据本公开的一个或多个实施例，【示例十二】提供了一种自由视角视频采集方法，应用于服务器，所述方法还包括：
可选的，基于接收到的该摄像头组对应的各个第一视频流，生成该摄像头组内的各个虚拟视角下的第二视频流，包括：
获取接收到的该摄像头组对应的每个第一视频流对应的对齐信息；
根据各个所述第一视频流对应的对齐信息，对各个所述第一视频流进行对齐操作，确定各个对齐后的第一视频流；
根据所述各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流。
根据本公开的一个或多个实施例，【示例十三】提供了一种自由视角视频采集方法，应用于服务器，所述方法还包括：
可选的，根据各个所述第一视频流对应的对齐信息，对各个所述第一视频流进行对齐操作，确定各个对齐后的第一视频流，包括：
将各个所述第一视频流中的采集时间戳相同的视频帧作为同一观看时刻下的视频帧，获得各个对齐后的第一视频流；或者，
将各个所述第一视频流中的帧序号相同的视频帧作为同一观看时刻下的视频帧，获得各个对齐后的第一视频流。
根据本公开的一个或多个实施例，【示例十四】提供了一种自由视角视频采集方法，应用于服务器，所述方法还包括：
可选的，根据所述各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流，包括：
根据相邻两个摄像头组内的相邻两个摄像头之间的第一角距离、该所述摄像头组内的相邻两个摄像头之间的第二角距离以及所述各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流。
根据本公开的一个或多个实施例，【示例十五】提供了一种自由视角视频采集方法，应用于服务器，所述方法还包括：
可选的，该所述摄像头组内的相邻两个摄像头之间的第二角距离是相邻两个摄像头组内的相邻两个摄像头之间的第一角距离的整数倍；
所述根据相邻两个摄像头组内的相邻两个摄像头之间的第一角距离、该所述摄像头组内的相邻两个摄像头之间的第二角距离以及所述各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流，包括：
针对该所述摄像头组内的每相邻两个摄像头，根据该相邻两个摄像头对应的两个对齐后的第一视频流，在该相邻两个摄像头对应的两个拍摄视角之间生成与所述整数倍相同个数的虚拟视角下的第二视频流。
根据本公开的一个或多个实施例，【示例十六】提供了一种自由视角视频采集装置，集成于服务器，所述装置包括：
第一视频流接收模块，用于接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流；
第二视频流生成模块，用于基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开中所涉及的公开范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述公开构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外，虽然采用特定次序描绘了各操作，但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下，多任务和并行处理可能是有利的。同样地，虽然在上面论述中包含了若干具体实现细节，但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地，在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题，但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反，上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。
Claims (18)
1.一种自由视角视频采集系统，其特征在于，所述系统包括：服务器、至少一个具有移动网络的移动终端以及每个移动终端上外接的一个摄像头组，所述摄像头组包含至少两个摄像头，各个所述摄像头组对应的摄像头总数量小于自由视角视频中所支持观看的观看视角总数量；
其中，每个所述摄像头用于采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至所述服务器；
所述服务器用于基于接收到的各个摄像头组对应的各个第一视频流，在该摄像头组内生成各个虚拟视角下的第二视频流。
2.根据权利要求1所述的系统，其特征在于，各个所述摄像头组均匀分布地放置在采集对象的周围处，并且每个所述摄像头组内的各个摄像头在组内均匀分布地放置。
3.根据权利要求1所述的系统，其特征在于，每个所述摄像头组所包含的摄像头数量相等。
4.根据权利要求1所述的系统，其特征在于，相邻两个摄像头组内的相邻两个摄像头之间的第一角距离等于自由视角视频中所支持观看的相邻两个观看视角之间的角距离；
每个所述摄像头组内的相邻两个摄像头之间的第二角距离大于所述第一角距离。
5.根据权利要求4所述的系统，其特征在于，所述第二角距离是所述第一角距离的整数倍。
6.根据权利要求1所述的系统，其特征在于，每个所述摄像头组内的每个摄像头通过通用串行总线与相应的移动终端进行连接。
7.根据权利要求1-6任一所述的系统，其特征在于，所述系统还包括：第一控制端，所述第一控制端与每个所述移动终端相连接；
其中，所述第一控制端用于基于用户触发操作生成拍摄控制指令，并将所述拍摄控制指令发送至各个所述移动终端；
相应地，每个所述移动终端用于根据接收到的拍摄控制指令生成拍摄开始指令，并将所述拍摄开始指令发送至所外接的各个摄像头；
每个所述摄像头具体用于：当接收到所外接的移动终端发送的拍摄开始指令时，开始采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至所述服务器。
8.根据权利要求7所述的系统，其特征在于，所述第一控制端为单独的一个移动终端或者包含控制按钮的控制装置。
9.根据权利要求1-6任一所述的系统，其特征在于，所述系统还包括：第二控制端，所述第二控制端与每个所述摄像头相连接；
其中，所述第二控制端用于生成采集同步信号，并将所述采集同步信号令发送至各个所述摄像头；
相应地，每个所述摄像头具体用于：基于接收到的采集同步信号，同步采集相应的拍摄视角下的第一视频流，并将采集的第一视频流通过所连接的移动终端发送至所述服务器。
10.一种自由视角视频采集方法，其特征在于，应用于服务器，所述方法包括：
接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流；
基于接收到的各个摄像头组对应的各个第一视频流，在该摄像头组内生成各个虚拟视角下的第二视频流；
所述摄像头组包含至少两个摄像头，各个所述摄像头组对应的摄像头总数量小于自由视角视频中所支持观看的观看视角总数量。
11.根据权利要求10所述的方法，其特征在于，基于接收到的各个摄像头组对应的各个第一视频流，生成各个虚拟视角下的第二视频流，包括：
针对每个摄像头组，基于接收到的该摄像头组对应的各个第一视频流，生成该摄像头组内的各个虚拟视角下的第二视频流。
12.根据权利要求11所述的方法，其特征在于，基于接收到的该摄像头组对应的各个第一视频流，生成该摄像头组内的各个虚拟视角下的第二视频流，包括：
获取接收到的该摄像头组对应的每个第一视频流对应的对齐信息；
根据各个所述第一视频流对应的对齐信息，对各个所述第一视频流进行对齐操作，确定各个对齐后的第一视频流；
根据所述各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流。
13.根据权利要求12所述的方法，其特征在于，根据各个所述第一视频流对应的对齐信息，对各个所述第一视频流进行对齐操作，确定各个对齐后的第一视频流，包括：
将各个所述第一视频流中的采集时间戳相同的视频帧作为同一观看时刻下的视频帧，获得各个对齐后的第一视频流；或者，
将各个所述第一视频流中的帧序号相同的视频帧作为同一观看时刻下的视频帧，获得各个对齐后的第一视频流。
14.根据权利要求12所述的方法，其特征在于，根据所述各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流，包括：
根据相邻两个摄像头组内的相邻两个摄像头之间的第一角距离、该所述摄像头组内的相邻两个摄像头之间的第二角距离以及所述各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流。
15.根据权利要求14所述的方法，其特征在于，该所述摄像头组内的相邻两个摄像头之间的第二角距离是相邻两个摄像头组内的相邻两个摄像头之间的第一角距离的整数倍；
所述根据相邻两个摄像头组内的相邻两个摄像头之间的第一角距离、该所述摄像头组内的相邻两个摄像头之间的第二角距离以及所述各个对齐后的第一视频流，生成该摄像头组对应的各个虚拟视角下的第二视频流，包括：
针对该所述摄像头组内的每相邻两个摄像头，根据该相邻两个摄像头对应的两个对齐后的第一视频流，在该相邻两个摄像头对应的两个拍摄视角之间生成与所述整数倍相同个数的虚拟视角下的第二视频流。
16.一种自由视角视频采集装置，其特征在于，集成于服务器，所述装置包括：
第一视频流接收模块，用于接收每个移动终端通过移动网络发送的所外接的摄像头组内的每个摄像头采集的相应拍摄视角下的第一视频流；
第二视频流生成模块，用于基于接收到的各个摄像头组对应的各个第一视频流，在该摄像头组内生成各个虚拟视角下的第二视频流；
所述摄像头组包含至少两个摄像头，各个所述摄像头组对应的摄像头总数量小于自由视角视频中所支持观看的观看视角总数量。
17.一种服务器，其特征在于，所述服务器包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求10-15中任一所述的自由视角视频采集方法。
18.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求10-15中任一所述的自由视角视频采集方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111056561.XA CN113794844B (zh) | 2021-09-09 | 2021-09-09 | 自由视角视频采集系统、方法、装置、服务器和介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111056561.XA CN113794844B (zh) | 2021-09-09 | 2021-09-09 | 自由视角视频采集系统、方法、装置、服务器和介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113794844A CN113794844A (zh) | 2021-12-14 |
| CN113794844B true CN113794844B (zh) | 2023-05-26 |
Family
ID=78879810
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111056561.XA Active CN113794844B (zh) | 2021-09-09 | 2021-09-09 | 自由视角视频采集系统、方法、装置、服务器和介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113794844B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114979732B (zh) * | 2022-05-12 | 2023-10-20 | 咪咕数字传媒有限公司 | 视频流的推送方法、装置、电子设备和介质 |
| CN118200751A (zh) * | 2022-12-13 | 2024-06-14 | Oppo广东移动通信有限公司 | 视频数据的处理方法、装置、存储介质及电子设备 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102833584A (zh) * | 2012-05-22 | 2012-12-19 | 中华电信股份有限公司 | 多视角互动电视的影音串流方法 |
| CN109275358A (zh) * | 2016-05-25 | 2019-01-25 | 佳能株式会社 | 根据用户所选择的视点从具有菊花链连接的照相机阵列生成虚拟图像的方法和设备 |
| CN111479036A (zh) * | 2019-01-24 | 2020-07-31 | 上海赢赞数字科技有限公司 | 基于摄像头的子弹时间特效拍摄系统及方法 |
| WO2021083176A1 (zh) * | 2019-10-28 | 2021-05-06 | 阿里巴巴集团控股有限公司 | 数据交互方法及系统、交互终端、可读存储介质 |
Family Cites Families (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9648346B2 (en) * | 2009-06-25 | 2017-05-09 | Microsoft Technology Licensing, Llc | Multi-view video compression and streaming based on viewpoints of remote viewer |
| US20130129304A1 (en) * | 2011-11-22 | 2013-05-23 | Roy Feinson | Variable 3-d surround video playback with virtual panning and smooth transition |
| US8787726B2 (en) * | 2012-02-26 | 2014-07-22 | Antonio Rossi | Streaming video navigation systems and methods |
| CN103051830B (zh) * | 2012-12-31 | 2015-12-23 | 北京中科大洋科技发展股份有限公司 | 一种对所拍目标多角度实时转播的系统和方法 |
| US9462301B2 (en) * | 2013-03-15 | 2016-10-04 | Google Inc. | Generating videos with multiple viewpoints |
| KR20150072231A (ko) * | 2013-12-19 | 2015-06-29 | 한국전자통신연구원 | 멀티 앵글 뷰 서비스 제공 장치 및 방법 |
| US9667885B2 (en) * | 2014-12-12 | 2017-05-30 | Futurewei Technologies, Inc. | Systems and methods to achieve interactive special effects |
| CN105611171B (zh) * | 2016-01-07 | 2018-12-21 | 贵州金意米科技有限公司 | 一种利用多终端联机拍摄视频文件的方法和装置 |
| WO2017205642A1 (en) * | 2016-05-25 | 2017-11-30 | Livit Media Inc. | Methods and systems for live sharing 360-degree video streams on a mobile device |
| CN108156415A (zh) * | 2016-12-05 | 2018-06-12 | 贝马体育科技有限公司 | 高速摄像方法 |
| CN108259828A (zh) * | 2018-01-19 | 2018-07-06 | 长沙全度影像科技有限公司 | 一种用于子弹时间拍摄的系统及其拍摄方法 |
| JP7132730B2 (ja) * | 2018-03-14 | 2022-09-07 | キヤノン株式会社 | 情報処理装置および情報処理方法 |
| CN108259777A (zh) * | 2018-04-13 | 2018-07-06 | 长沙全度影像科技有限公司 | 一种用于子弹时间全自动拍摄的系统及方法 |
| JP2020187706A (ja) * | 2019-05-17 | 2020-11-19 | キヤノン株式会社 | 画像処理装置、画像処理システム、画像処理方法およびプログラム |
| CN112492357A (zh) * | 2020-11-13 | 2021-03-12 | 北京安博盛赢教育科技有限责任公司 | 一种处理多视频流的方法、装置、介质和电子设备 |
| CN112423139A (zh) * | 2020-11-20 | 2021-02-26 | 千脉文化传媒(上海)有限公司 | 基于移动终端的多机位直播方法、系统、设备及存储介质 |
| CN113163222A (zh) * | 2021-03-31 | 2021-07-23 | 杭州奥点科技股份有限公司 | 一种视频帧同步方法、系统、设备及可读存储介质 |
-
2021
- 2021-09-09 CN CN202111056561.XA patent/CN113794844B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102833584A (zh) * | 2012-05-22 | 2012-12-19 | 中华电信股份有限公司 | 多视角互动电视的影音串流方法 |
| CN109275358A (zh) * | 2016-05-25 | 2019-01-25 | 佳能株式会社 | 根据用户所选择的视点从具有菊花链连接的照相机阵列生成虚拟图像的方法和设备 |
| CN111479036A (zh) * | 2019-01-24 | 2020-07-31 | 上海赢赞数字科技有限公司 | 基于摄像头的子弹时间特效拍摄系统及方法 |
| WO2021083176A1 (zh) * | 2019-10-28 | 2021-05-06 | 阿里巴巴集团控股有限公司 | 数据交互方法及系统、交互终端、可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113794844A (zh) | 2021-12-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106992959B (zh) | 一种3d全景音视频直播系统及音视频采集方法 | |
| CN104012106B (zh) | 使表示不同视点的视频对准 | |
| CN113794844B (zh) | 自由视角视频采集系统、方法、装置、服务器和介质 | |
| CN110213636B (zh) | 在线视频的视频帧生成方法、装置、存储介质及设备 | |
| WO2018094866A1 (zh) | 一种基于无人机的全景直播方法及终端 | |
| US20240291938A1 (en) | Video fusion method, apparatus, electronic device and storage medium | |
| CN107592452B (zh) | 一种全景音视频采集设备及方法 | |
| JP2023533363A (ja) | インタラクティブ型コラボライブ配信の制御方法、装置、システム、機器及び媒体 | |
| CN103200258A (zh) | 分布式图像拼接方法、拼接服务器和终端 | |
| WO2023169297A1 (zh) | 动画特效生成方法、装置、设备及介质 | |
| US11893054B2 (en) | Multimedia information processing method, apparatus, electronic device, and medium | |
| CN113315980B (zh) | 智能直播方法及直播物联网系统 | |
| US11871137B2 (en) | Method and apparatus for converting picture into video, and device and storage medium | |
| CN114095671A (zh) | 云会议直播系统、方法、装置、设备及介质 | |
| CN113225483A (zh) | 图像融合方法、装置、电子设备和存储介质 | |
| CN112165576A (zh) | 图像显示方法、装置、存储介质与电子设备 | |
| CN115002442A (zh) | 一种图像展示方法、装置、电子设备及存储介质 | |
| EP3820129A1 (en) | Method and apparatus for video recording and processing, and video recording and processing system | |
| CN112351221A (zh) | 图像特效处理方法、装置、电子设备和计算机可读存储介质 | |
| CN112788198B (zh) | 摄影装置、传送系统及方法、记录介质和计算机装置 | |
| WO2021095598A1 (ja) | 情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラム | |
| CN109391824A (zh) | 线上视频群组导播方法、装置及终端设备 | |
| CN107147946A (zh) | 一种视频处理方法及装置 | |
| CN115002345A (zh) | 一种图像校正方法、装置、电子设备及存储介质 | |
| KR101341862B1 (ko) | 플로우 모션 영상 촬영 방법 및 시스템 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |