CN110730340B - 基于镜头变换的虚拟观众席展示方法、系统及存储介质 - Google Patents

基于镜头变换的虚拟观众席展示方法、系统及存储介质 Download PDF

Info

Publication number
CN110730340B
CN110730340B CN201910887282.4A CN201910887282A CN110730340B CN 110730340 B CN110730340 B CN 110730340B CN 201910887282 A CN201910887282 A CN 201910887282A CN 110730340 B CN110730340 B CN 110730340B
Authority
CN
China
Prior art keywords
transformation
virtual
lens
instruction
audience
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910887282.4A
Other languages
English (en)
Other versions
CN110730340A (zh
Inventor
杨玉华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Lajin Zhongbo Technology Co ltd
Original Assignee
Beijing Lajin Zhongbo Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Lajin Zhongbo Technology Co ltd filed Critical Beijing Lajin Zhongbo Technology Co ltd
Priority to CN201910887282.4A priority Critical patent/CN110730340B/zh
Publication of CN110730340A publication Critical patent/CN110730340A/zh
Application granted granted Critical
Publication of CN110730340B publication Critical patent/CN110730340B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/158—Switching image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/167—Synchronising or controlling image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0096—Synchronisation or controlling aspects
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本发明公开了基于镜头变换的虚拟观众席展示方法、系统及存储介质，方法包括：获取虚拟观众席内的镜头变换指令；根据获取的镜头变换指令确定第一虚拟摄像机和第二虚拟摄像机的变换参数，第一虚拟摄像机用于拍摄背景图像，第二虚拟摄像机用于拍摄前景图像；将前景图像和背景图像合成虚拟观众席全景图像，并发送给展示装置展示；根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，并在展示装置中展示虚拟观众席内的镜头变换动画视频。本发明通过第一虚拟摄像机和第二虚拟摄像机实现了虚拟观众坐席前景对象与背景的分离与独立变换控制，增强和丰富了虚拟观众席的三维视觉效果。本发明可广泛应用于多媒体技术领域。

Description

基于镜头变换的虚拟观众席展示方法、系统及存储介质
技术领域
本发明涉及多媒体技术领域，尤其是一种基于镜头变换的虚拟观众席展示方法、系统及存储介质。
背景技术
随着通信技术、虚拟技术和多媒体技术的发展，为了活跃现场气氛、增加互动性和吸引力，像虚拟电视直播节目、虚拟演唱会或者虚拟球赛等虚拟活动引入了虚拟观众技术。虚拟观众技术是指在电视直播节目等的现场(如新闻直播节目的演播室等)，通过在现场增设的屏幕上显示由虚拟观众形象(如卡通形象、头像等)和虚拟座位结合而组成的虚拟观众席的技术。该技术使得用户可通过移动终端等客户端设备的摄像头或者其他设备(如按键、鼠标、键盘等人机交互设备)，将自己的表情、肢体动作、互动发言等内容上传到运行该虚拟观众席的服务器，并通过服务器处理后在屏幕的相应虚拟座位上展示和控制属于虚拟观众形象及相应的表情、肢体动作、互动发言等。在此过程中，为了提升互动性、趣味性和逼真度，常常需要在虚拟观众席中通过镜头的推、拉、摇、移等变换操作来生成虚拟观众席内的虚拟观众形象或虚拟座位的各种动画效果。
目前的虚拟观众席通常只通过一个虚拟摄像机来进行镜头变换，而镜头变换不仅涉及到虚拟观众席内的虚拟观众形象和虚拟座位这些前景对象的变换，还涉及到背景部分(如灯等)的变换。目前的这种方式由于采用了单一的虚拟摄像机，只能在对前景对象进行变换的同时使得背景部分随之发生改变(即前景对象和背景部分的变换是同步的，如通过推镜头来同时放大虚拟观众形象的图片和背景图片等)，难以做到分别对前景对象和背景部分进行独立的变换，无法使得背景部分的变换与前景对象的变换不同步(如在通过推镜头放大虚拟观众形象的图片的同时缩小背景图片等)，三维视觉效果不强且不够丰富。
发明内容
为解决上述技术问题，本发明实施例的目的在于：提供一种基于镜头变换的虚拟观众席展示方法、系统及存储介质，以增强和丰富三维视觉效果。
本发明实施例第一方面所采取的技术方案是：
基于镜头变换的虚拟观众席展示方法，包括以下步骤：
获取虚拟观众席内的镜头变换指令，所述镜头变换指令包括推镜头指令、拉镜头指令、摇镜头指令和移镜头指令中的至少一种；
根据获取的镜头变换指令确定第一虚拟摄像机和第二虚拟摄像机的变换参数，所述第一虚拟摄像机用于拍摄背景图像，所述第二虚拟摄像机用于拍摄前景图像，所述前景图像包括虚拟观众形象图像和虚拟座位图像；
将前景图像和背景图像合成虚拟观众席全景图像，并发送给展示装置展示；
根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，并在展示装置中展示虚拟观众席内的镜头变换动画视频。
进一步，所述获取虚拟观众席内的镜头变换指令这一步骤，具体为：
获取从移动终端上传的虚拟观众席内的镜头变换指令；
或者获取服务器输入或触发的虚拟观众席内的镜头变换指令。
进一步，所述根据获取的镜头变换指令确定第一虚拟摄像机和第二虚拟摄像机的变换参数这一步骤，具体包括：
确定第一虚拟摄像机和第二虚拟摄像机变换前的位置作为当前位置；
从获取的镜头变换指令中识别出镜头变换的类型和变换参数，所述镜头变换的类型包括推镜头、拉镜头、摇镜头和移镜头中的至少一种，所述变换参数包括变换的距离、变换的角度和变换矩阵中的至少一种；
根据镜头变换的类型、所述变换参数和当前位置得到第一虚拟摄像机和第二虚拟摄像机变换后的位置作为目标位置。
进一步，所述第二虚拟摄像机的数量为2个，所述第一虚拟摄像机和2个第二虚拟摄像机的焦点相同，所述焦点、第一虚拟摄像机以及任一所述第二虚拟摄像机分别位于等边三角形的3个顶点上。
进一步，所述将前景图像和背景图像合成虚拟观众席全景图像，并发送给展示装置展示这一步骤，具体包括：
将拍摄时间点相同的前景图像和背景图像进行拼接，得到该拍摄时间点下的虚拟观众席全景图像；
将得到的虚拟观众席全景图像发送给展示装置展示。
进一步，所述根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，并在展示装置中展示虚拟观众席内的镜头变换动画视频这一步骤，具体包括：
根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，同时获取镜头变换过程每个时间点合成的虚拟观众席全景图像发送给展示装置，使展示装置按时间节点连续播放接收的虚拟观众席全景图像，从而得到镜头变换动画视频并预存；
获取镜头变换动画视频回放指令并发送给展示装置，使展示装置根据镜头变换动画视频回放指令播放预存的镜头变换动画视频。
本发明实施例第二方面所采取的技术方案是：
基于镜头变换的虚拟观众席展示系统，包括：
指令获取模块，用于获取虚拟观众席内的镜头变换指令，所述镜头变换指令包括推镜头指令、拉镜头指令、摇镜头指令和移镜头指令中的至少一种；
变换参数确定模块，用于根据获取的镜头变换指令确定第一虚拟摄像机和第二虚拟摄像机的变换参数，所述第一虚拟摄像机用于拍摄背景图像，所述第二虚拟摄像机用于拍摄前景图像，所述前景图像包括虚拟观众形象图像和虚拟座位图像；
合成与发送模块，用于将前景图像和背景图像合成虚拟观众席全景图像，并发送给展示装置展示；
变换与展示模块，用于根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，并在展示装置中展示虚拟观众席内的镜头变换动画视频。
进一步，所述变换参数确定模块具体包括：
当前位置确定单元，用于确定第一虚拟摄像机和第二虚拟摄像机变换前的位置作为当前位置；
识别单元，用于从获取的镜头变换指令中识别出镜头变换的类型和变换参数，所述镜头变换的类型包括推镜头、拉镜头、摇镜头和移镜头中的至少一种，所述变换参数包括变换的距离、变换的角度和变换矩阵中的至少一种；
目标位置获取单元，用于根据镜头变换的类型、所述变换参数和当前位置得到第一虚拟摄像机和第二虚拟摄像机变换后的位置作为目标位置。
本发明实施例第三方面所采取的技术方案是：
基于镜头变换的虚拟观众席展示系统，包括：
至少一个处理器；
至少一个存储器，用于存储至少一个程序；
当所述至少一个程序被所述至少一个处理器执行，使得所述至少一个处理器实现所述的基于镜头变换的虚拟观众席展示方法。
本发明实施例第四方面所采取的技术方案是：
存储介质，其中存储有处理器可执行的指令，所述处理器可执行的指令在由处理器执行时用于实现所述的基于镜头变换的虚拟观众席展示方法。
上述本发明实施例中的一个或多个技术方案具有如下优点：本发明实施例将第一虚拟摄像机拍摄的背景图像和第二虚拟摄像机拍摄的前景图像合成虚拟观众席全景图像，并根据镜头变换指令确定变换参数后分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换以及展示对应的镜头变换动画视频，通过第一虚拟摄像机和第二虚拟摄像机来取代传统的单个虚拟摄像机，实现了虚拟观众坐席前景对象与背景的分离与独立变换控制，不仅能使前景对象的变换与背景的变换同步，也能使前景对象的变换与背景的变换不同步，增强和丰富了虚拟观众席的三维视觉效果。
附图说明
图1为本发明实施例提供的基于镜头变换的虚拟观众席展示方法流程图；
图2为本发明第一虚拟摄像机和第二虚拟摄像机的一种位置关系示意图；
图3为本发明实施例提供的基于镜头变换的虚拟观众席展示系统的一种结构框图；
图4为本发明实施例提供的基于镜头变换的虚拟观众席展示系统的另一种结构框图。
具体实施方式
下面结合说明书附图和具体实施例对本发明做进一步解释和说明。对于以下实施例中的步骤编号，其仅为了便于阐述说明而设置，对步骤之间的顺序不做任何限定，实施例中的各步骤的执行顺序均可根据本领域技术人员的理解来进行适应性调整。
参照图1，本发明实施例提供了一种基于镜头变换的虚拟观众席展示方法，应用于服务器，包括以下步骤：
S101、获取虚拟观众席内的镜头变换指令，所述镜头变换指令包括推镜头指令、拉镜头指令、摇镜头指令和移镜头指令中的至少一种；
具体地，虚拟观众席内的镜头变换指令可以是移动终端(如智能手机、平板电脑、车载电脑等)上传的，也可以是服务器的输入模块(如键盘、鼠标、触控板等常见的输入设备，或者软件输入框、软件按钮等)输入或触发的。推镜头指令用于通过将摄像机(包括第一虚拟摄像机和第二虚拟摄像机)的镜头向前推动至与虚拟观众席内对象(如虚拟观众形象、背景部分)更接近的位置(相对于推动前的初始位置来说)。拉镜头指令与推镜头指令相反，用于通过将摄像机(包括第一虚拟摄像机和第二虚拟摄像机)的镜头向后拉至与虚拟观众席内对象(如虚拟观众形象、背景部分)更远离的位置(相对于拉镜头前的初始位置来说)。摇镜头指令用于控制摄像机(包括第一虚拟摄像机和第二虚拟摄像机)的镜头绕某一固定轴(如Z坐标轴)旋转。移镜头指令，用于通过移动摄像机(包括第一虚拟摄像机和第二虚拟摄像机)以使得虚拟观众画面平行移动或前景对象相对于背景部分移动。
S102、根据获取的镜头变换指令确定第一虚拟摄像机和第二虚拟摄像机的变换参数，所述第一虚拟摄像机用于拍摄背景图像，所述第二虚拟摄像机用于拍摄前景图像，所述前景图像包括虚拟观众形象图像和虚拟座位图像；
具体地，第一虚拟摄像机和第二虚拟摄像机可以通过采用现有3D渲染软件生成3D虚拟摄像机的方式来得到。第一虚拟摄像机和第二虚拟摄像机用于分别观察和拍摄虚拟观众席这一虚拟场景的背景图像和前景图像。第一虚拟摄像机和第二虚拟摄像机的变换参数可以是变换矩阵、变换的距离、变换的角度等。
S103、将前景图像和背景图像合成虚拟观众席全景图像，并发送给展示装置展示；
具体地，为了将镜头变换后的整体效果展示出来，本实施例需要先将前景图像和背景图像通过图像叠加等方式合成全景图像。例如，第一虚拟摄像机和第二虚拟摄像机在拍摄图像的同时还会记录相应的拍摄时间，这样就可以将相同时间点的前景图像和背景图像进行合成即可得到该拍摄时间点下的虚拟观众席全景图像，避免合成之后的图像出现错位、漂移、与实际的差异过大等异常现象。展示装置可以是屏幕(如裸眼屏幕等)等常见的展示设备。
S104、根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，并在展示装置中展示虚拟观众席内的镜头变换动画视频。
具体地，通过步骤S102获取到变换参数后，本实施例可以在在虚拟观众席场景内按照对应的参数进行镜头变换，镜头变换前后每个时间点对应的虚拟观众席全景图像帧可以实时合成出来并上传给展示装置播放，这样就可以在镜头变换的同时通过连续播放虚拟观众席全景图像帧的方式形成镜头变换动画视频(即镜头变换动画视频由多帧连续播放的虚拟观众席全景图像帧组成)，以动态和直观地展示镜头变换的过程。
由上述内容可见，本实施例通过第一虚拟摄像机和第二虚拟摄像机来取代传统的单个虚拟摄像机，实现了虚拟观众坐席前景对象与背景的分离与独立变换控制，不仅能使前景对象的变换与背景的变换同步，也能使前景对象的变换与背景的变换不同步，有利于通过前景对象的变换与背景的变换不同步来突出和增强前景对象与背景部分进行对比时的三维视觉效果，同时也为三维视觉效果提供更多的虚拟观众席合成与展示方式，增强和丰富了虚拟观众席的三维视觉效果。
进一步作为优选的实施方式，所述获取虚拟观众席内的镜头变换指令这一步骤S101，具体为：
获取从移动终端上传的虚拟观众席内的镜头变换指令；
或者获取服务器输入或触发的虚拟观众席内的镜头变换指令。
具体地，本实施例的镜头变换指令既可以由移动终端上传，也可以由服务器的输入模块通过人机交互等方式主动输入或触发，更加灵活和全面。
进一步作为优选的实施方式，所述根据获取的镜头变换指令确定第一虚拟摄像机和第二虚拟摄像机的变换参数这一步骤S102，具体包括：
S1021、确定第一虚拟摄像机和第二虚拟摄像机变换前的位置作为当前位置；
具体地，可先建立虚拟观众席内的空间直角坐标系(如笛卡尔直角坐标系)，这样虚拟摄像机(包括第一虚拟摄像机和第二虚拟摄像机)的镜头、虚拟观众形象、虚拟观众座位、背景部分等在虚拟观众席的位置都可以通过空间坐标表示出来，后续通过对位置坐标的变换来实现镜头变换。
而第一虚拟摄像机和第二虚拟摄像机变换前的位置为初始的位置坐标，该初始的位置坐标可以为虚拟观众席内的某个位置坐标(可预设或初始化时自动生成，如默认的原点坐标等)。
S1022、从获取的镜头变换指令中识别出镜头变换的类型和变换参数，所述镜头变换的类型包括推镜头、拉镜头、摇镜头和移镜头中的至少一种，所述变换参数包括变换的距离、变换的角度和变换矩阵中的至少一种；
具体地，镜头变换指令含有的镜头变换的类型代表了需要执行何种变换操作，变换参数中变换的距离用于推镜头、拉镜头和移镜头，而变换的角度则用于摇镜头；另外可以采用变换矩阵的方式来表征变换前后的映射关系。
S1023、根据镜头变换的类型、所述变换参数和当前位置得到第一虚拟摄像机和第二虚拟摄像机变换后的位置作为目标位置。
具体地，在建立虚拟观众席内的空间直角坐标系后，本实施例可先得到第一虚拟摄像机和第二虚拟摄像机的初始位置坐标，然后根据变换参数计算出变换后的位置坐标，以便于后续根据计算的结果进行变换操作。
参照图2，进一步作为优选的实施方式，所述第二虚拟摄像机的数量为2个，所述第一虚拟摄像机和2个第二虚拟摄像机的焦点相同，所述焦点、第一虚拟摄像机以及任一所述第二虚拟摄像机分别位于等边三角形的3个顶点上。
具体地，展示装置可以选取裸眼屏幕，如光栅屏障式、柱状透镜式裸眼屏幕。为了模拟真实环境人眼观看外界画面的情况，本实施例可以采用2个第二虚拟摄像机来获取两个不同角度的前景对象图像，然后将这两个前景对象图像与背景图像进行合成后发送至具有裸眼屏幕的展示装置进行展示，这样裸眼屏幕上的图像像素被屏幕前方光栅、透镜等以不同方向投影出去，从而在空间不同位置可看到前景对象被还原的不同视点画面，当人的左右眼分别看到了相邻视点的图像就可以感受到裸眼3D效果。
在镜头变换过程中，可能会因变换过大而导致人眼接受的前景对象画面视差过大，从而造成剧烈眩晕感。为了避免该问题，本实施例可按照图2所示的结构来设置2个第二虚拟摄像机与第一虚拟摄像机。图2中，第一虚拟摄像机和2个第二虚拟摄像机的焦点均为O，B和C两个顶点分别为2个第二虚拟摄像机，A顶点为第一虚拟摄像机。而三角形OBA和三角形OAC均为等边三角形，并可以将第一虚拟摄像机和2个第二虚拟摄像机放置在同一水平高度，这样各摄像机之间有水平视差但没有高度差，进一步提升裸眼3D效果。
进一步作为优选的实施方式，所述将前景图像和背景图像合成虚拟观众席全景图像，并发送给展示装置展示这一步骤S103，具体包括：
S1031、将拍摄时间点相同的前景图像和背景图像进行拼接，得到该拍摄时间点下的虚拟观众席全景图像；
S1032、将得到的虚拟观众席全景图像发送给展示装置展示。
具体地，为了对景图像和背景图像进行有效的合成，避免合成之后的图像出现错位、漂移、与实际的差异过大等异常现象，本实施例根据第一虚拟摄像机和第二虚拟摄像机拍摄时所记录的拍摄时间来进行拼接，从而将拍摄时间点相同的前景图像和背景图像拼接为该拍摄时间点下的虚拟观众席全景图像。
进一步作为优选的实施方式，所述根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，并在展示装置中展示虚拟观众席内的镜头变换动画视频这一步骤S104，具体包括：
S1041、根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，同时获取镜头变换过程每个时间点合成的虚拟观众席全景图像发送给展示装置，使展示装置按时间节点连续播放接收的虚拟观众席全景图像，从而得到镜头变换动画视频并预存；
具体地，获取到变换参数后，本实施例可以在虚拟观众席场景内按照对应的参数进行镜头变换，镜头变换前后每个时间点对应的虚拟观众席全景图像帧可以实时合成出来并上传给展示装置播放，这样就可以在镜头变换的同时通过连续播放虚拟观众席全景图像帧的方式形成镜头变换动画视频(即镜头变换动画视频是多帧连续播放的虚拟观众席全景图像帧)，从而能动态和直观地展示镜头变换的过程。另外，本实施例还将镜头变换动画视频预存到展示装置中，以便于用户随时进行查看和回览。
S1042、获取镜头变换动画视频回放指令并发送给展示装置，使展示装置根据镜头变换动画视频回放指令播放预存的镜头变换动画视频。
具体地，镜头变换动画视频回放指令与镜头变换指令的获取方式类似，可以是移动终端(如智能手机、平板电脑、车载电脑等)上传的，也可以是服务器的输入模块(如键盘、鼠标、触控板等常见的输入设备，或者软件输入框、软件按钮等)输入或触发的。
由上述内容可见，本实施例可以通过镜头变换动画视频回放指令随时随地进行镜头变换动画视频回放，十分便捷。
参照图3，本发明实施例提供了一种基于镜头变换的虚拟观众席展示系统，包括：
指令获取模块201，用于获取虚拟观众席内的镜头变换指令，所述镜头变换指令包括推镜头指令、拉镜头指令、摇镜头指令和移镜头指令中的至少一种；
变换参数确定模块202，用于根据获取的镜头变换指令确定第一虚拟摄像机和第二虚拟摄像机的变换参数，所述第一虚拟摄像机用于拍摄背景图像，所述第二虚拟摄像机用于拍摄前景图像，所述前景图像包括虚拟观众形象图像和虚拟座位图像；
合成与发送模块203，用于将前景图像和背景图像合成虚拟观众席全景图像，并发送给展示装置展示；
变换与展示模块204，用于根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，并在展示装置中展示虚拟观众席内的镜头变换动画视频。
参照图3，进一步作为优选的实施方式，所述变换参数确定模块202具体包括：
当前位置确定单元2021，用于确定第一虚拟摄像机和第二虚拟摄像机变换前的位置作为当前位置；
识别单元2022，用于从获取的镜头变换指令中识别出镜头变换的类型和变换参数，所述镜头变换的类型包括推镜头、拉镜头、摇镜头和移镜头中的至少一种，所述变换参数包括变换的距离、变换的角度和变换矩阵中的至少一种；
目标位置获取单元2023，用于根据镜头变换的类型、所述变换参数和当前位置得到第一虚拟摄像机和第二虚拟摄像机变换后的位置作为目标位置。
上述方法实施例中的内容均适用于本系统以及存储介质实施例中，本系统以及存储介质实施例所具体实现的功能与上述方法实施例相同，并且达到的有益效果与上述方法实施例所达到的有益效果也相同。
参照图4，本发明实施例提供了一种基于镜头变换的虚拟观众席展示系统，包括：
至少一个处理器301；
至少一个存储器302，用于存储至少一个程序；
当所述至少一个程序被所述至少一个处理器301执行，使得所述至少一个处理器301实现所述的基于镜头变换的虚拟观众席展示方法。
上述方法实施例中的内容均适用于本系统以及存储介质实施例中，本系统以及存储介质实施例所具体实现的功能与上述方法实施例相同，并且达到的有益效果与上述方法实施例所达到的有益效果也相同。
本发明实施例还提供了一种存储介质，其中存储有处理器可执行的指令，所述处理器可执行的指令在由处理器执行时用于实现所述的基于镜头变换的虚拟观众席展示方法。其中，所述存储介质可为软盘、光盘、DVD、硬盘、闪存、U盘、CF卡、SD卡、MMC卡、SM卡、记忆棒(Memory Stick)、XD卡等。
上述方法实施例中的内容均适用于本系统以及存储介质实施例中，本系统以及存储介质实施例所具体实现的功能与上述方法实施例相同，并且达到的有益效果与上述方法实施例所达到的有益效果也相同。
以上是对本发明的较佳实施进行了具体说明，但本发明并不限于所述实施例，熟悉本领域的技术人员在不违背本发明精神的前提下还可做作出种种的等同变形或替换，这些等同的变形或替换均包含在本申请权利要求所限定的范围内。

Claims (10)

1.基于镜头变换的虚拟观众席展示方法，其特征在于：包括以下步骤：
获取虚拟观众席内的镜头变换指令，所述镜头变换指令包括推镜头指令、拉镜头指令、摇镜头指令和移镜头指令中的至少一种；
根据获取的镜头变换指令确定第一虚拟摄像机和第二虚拟摄像机的变换参数，所述第一虚拟摄像机用于拍摄背景图像，所述第二虚拟摄像机用于拍摄前景图像，所述前景图像包括虚拟观众形象图像和虚拟座位图像；
将前景图像和背景图像合成虚拟观众席全景图像，并发送给展示装置展示；
根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，并在展示装置中展示虚拟观众席内的镜头变换动画视频。
2.根据权利要求1所述的基于镜头变换的虚拟观众席展示方法，其特征在于：所述获取虚拟观众席内的镜头变换指令这一步骤，具体为：
获取从移动终端上传的虚拟观众席内的镜头变换指令；
或者获取服务器输入或触发的虚拟观众席内的镜头变换指令。
3.根据权利要求1所述的基于镜头变换的虚拟观众席展示方法，其特征在于：所述根据获取的镜头变换指令确定第一虚拟摄像机和第二虚拟摄像机的变换参数这一步骤，具体包括：
确定第一虚拟摄像机和第二虚拟摄像机变换前的位置作为当前位置；
从获取的镜头变换指令中识别出镜头变换的类型和变换参数，所述镜头变换的类型包括推镜头、拉镜头、摇镜头和移镜头中的至少一种，所述变换参数包括变换的距离、变换的角度和变换矩阵中的至少一种；
根据镜头变换的类型、所述变换参数和当前位置得到第一虚拟摄像机和第二虚拟摄像机变换后的位置作为目标位置。
4.根据权利要求1所述的基于镜头变换的虚拟观众席展示方法，其特征在于：所述第二虚拟摄像机的数量为2个，所述第一虚拟摄像机和2个第二虚拟摄像机的焦点相同，所述焦点、第一虚拟摄像机以及任一所述第二虚拟摄像机分别位于等边三角形的3个顶点上。
5.根据权利要求1所述的基于镜头变换的虚拟观众席展示方法，其特征在于：所述将前景图像和背景图像合成虚拟观众席全景图像，并发送给展示装置展示这一步骤，具体包括：
将拍摄时间点相同的前景图像和背景图像进行拼接，得到该拍摄时间点下的虚拟观众席全景图像；
将得到的虚拟观众席全景图像发送给展示装置展示。
6.根据权利要求1所述的基于镜头变换的虚拟观众席展示方法，其特征在于：所述根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，并在展示装置中展示虚拟观众席内的镜头变换动画视频这一步骤，具体包括：
根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，同时获取镜头变换过程每个时间点合成的虚拟观众席全景图像发送给展示装置，使展示装置按时间节点连续播放接收的虚拟观众席全景图像，从而得到镜头变换动画视频并预存；
获取镜头变换动画视频回放指令并发送给展示装置，使展示装置根据镜头变换动画视频回放指令播放预存的镜头变换动画视频。
7.基于镜头变换的虚拟观众席展示系统，其特征在于：包括：
指令获取模块，用于获取虚拟观众席内的镜头变换指令，所述镜头变换指令包括推镜头指令、拉镜头指令、摇镜头指令和移镜头指令中的至少一种；
变换参数确定模块，用于根据获取的镜头变换指令确定第一虚拟摄像机和第二虚拟摄像机的变换参数，所述第一虚拟摄像机用于拍摄背景图像，所述第二虚拟摄像机用于拍摄前景图像，所述前景图像包括虚拟观众形象图像和虚拟座位图像；
合成与发送模块，用于将前景图像和背景图像合成虚拟观众席全景图像，并发送给展示装置展示；
变换与展示模块，用于根据所述变换参数分别控制第一虚拟摄像机和第二虚拟摄像机在虚拟观众席内进行镜头变换，并在展示装置中展示虚拟观众席内的镜头变换动画视频。
8.根据权利要求7所述的基于镜头变换的虚拟观众席展示系统，其特征在于：所述变换参数确定模块具体包括：
当前位置确定单元，用于确定第一虚拟摄像机和第二虚拟摄像机变换前的位置作为当前位置；
识别单元，用于从获取的镜头变换指令中识别出镜头变换的类型和变换参数，所述镜头变换的类型包括推镜头、拉镜头、摇镜头和移镜头中的至少一种，所述变换参数包括变换的距离、变换的角度和变换矩阵中的至少一种；
目标位置获取单元，用于根据镜头变换的类型、所述变换参数和当前位置得到第一虚拟摄像机和第二虚拟摄像机变换后的位置作为目标位置。
9.基于镜头变换的虚拟观众席展示系统，其特征在于：包括：
至少一个处理器；
至少一个存储器，用于存储至少一个程序；
当所述至少一个程序被所述至少一个处理器执行，使得所述至少一个处理器实现如权利要求1-6任一项所述的基于镜头变换的虚拟观众席展示方法。
10.存储介质，其中存储有处理器可执行的指令，其特征在于：所述处理器可执行的指令在由处理器执行时用于实现如权利要求1-6任一项所述的基于镜头变换的虚拟观众席展示方法。
CN201910887282.4A 2019-09-19 2019-09-19 基于镜头变换的虚拟观众席展示方法、系统及存储介质 Active CN110730340B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910887282.4A CN110730340B (zh) 2019-09-19 2019-09-19 基于镜头变换的虚拟观众席展示方法、系统及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910887282.4A CN110730340B (zh) 2019-09-19 2019-09-19 基于镜头变换的虚拟观众席展示方法、系统及存储介质

Publications (2)

Publication Number Publication Date
CN110730340A CN110730340A (zh) 2020-01-24
CN110730340B true CN110730340B (zh) 2023-06-20

Family

ID=69219167

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910887282.4A Active CN110730340B (zh) 2019-09-19 2019-09-19 基于镜头变换的虚拟观众席展示方法、系统及存储介质

Country Status (1)

Country Link
CN (1) CN110730340B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114820291A (zh) * 2022-05-19 2022-07-29 深圳看到科技有限公司 全景画面的优化方法、装置、存储介质及电子设备
CN115665461B (zh) * 2022-10-13 2024-03-22 聚好看科技股份有限公司 一种视频录制方法及虚拟现实设备
CN115941920B (zh) * 2022-11-23 2023-11-10 马凯翔 裸眼3d视频生成方法、装置、设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102118573A (zh) * 2009-12-30 2011-07-06 新奥特（北京）视频技术有限公司 一种增加虚实结合度的虚拟体育系统
CN104349020A (zh) * 2014-12-02 2015-02-11 北京中科大洋科技发展股份有限公司 一种虚拟摄像机与真实摄像机切换的系统和方法
JP2016082328A (ja) * 2014-10-14 2016-05-16 日本放送協会 画像合成装置及びそのプログラム
CN105915766A (zh) * 2016-06-07 2016-08-31 腾讯科技（深圳）有限公司 基于虚拟现实的控制方法和装置
CN107396084A (zh) * 2017-07-20 2017-11-24 广州励丰文化科技股份有限公司 一种基于双摄像头的mr实现方法及设备
WO2018110978A1 (ko) * 2016-12-15 2018-06-21 (주)잼투고 영상합성 시스템 및 영상합성방법

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11165972B2 (en) * 2017-10-09 2021-11-02 Tim Pipher Multi-camera virtual studio production process

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102118573A (zh) * 2009-12-30 2011-07-06 新奥特（北京）视频技术有限公司 一种增加虚实结合度的虚拟体育系统
JP2016082328A (ja) * 2014-10-14 2016-05-16 日本放送協会 画像合成装置及びそのプログラム
CN104349020A (zh) * 2014-12-02 2015-02-11 北京中科大洋科技发展股份有限公司 一种虚拟摄像机与真实摄像机切换的系统和方法
CN105915766A (zh) * 2016-06-07 2016-08-31 腾讯科技（深圳）有限公司 基于虚拟现实的控制方法和装置
WO2018110978A1 (ko) * 2016-12-15 2018-06-21 (주)잼투고 영상합성 시스템 및 영상합성방법
CN107396084A (zh) * 2017-07-20 2017-11-24 广州励丰文化科技股份有限公司 一种基于双摄像头的mr实现方法及设备

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
虚拟演播室的应用与开发;潘岚等;电视字幕.特技与动画(07);全文 *
试析无轨虚拟演播室的实现原理及适用环境;苗琨;;影视制作(12);全文 *

Also Published As

Publication number Publication date
CN110730340A (zh) 2020-01-24

Similar Documents

Publication Publication Date Title
CN109416931B (zh) 用于视线跟踪的装置和方法
JP6410918B2 (ja) パノラマ映像コンテンツの再生に使用するシステム及び方法
US9774896B2 (en) Network synchronized camera settings
JP7135141B2 (ja) 情報処理システム、情報処理方法、および情報処理プログラム
CN110730340B (zh) 基于镜头变换的虚拟观众席展示方法、系统及存储介质
CN111742353A (zh) 信息处理装置、信息处理方法和程序
CN113064684B (zh) 一种虚拟现实设备及vr场景截屏方法
CN113115110B (zh) 视频合成方法、装置、存储介质与电子设备
US10289193B2 (en) Use of virtual-reality systems to provide an immersive on-demand content experience
CN111970532A (zh) 视频播放方法、装置及设备
JP7378243B2 (ja) 画像生成装置、画像表示装置および画像処理方法
US20170225077A1 (en) Special video generation system for game play situation
JP6628343B2 (ja) 装置および関連する方法
TW202133118A (zh) 實境模擬全景系統及其方法
EP3616402A1 (en) Methods, systems, and media for generating and rendering immersive video content
WO2020206647A1 (zh) 跟随用户运动控制播放视频内容的方法和装置
US20090153550A1 (en) Virtual object rendering system and method
KR20190031220A (ko) Vr 콘텐츠 제공 시스템 및 방법
US20230353717A1 (en) Image processing system, image processing method, and storage medium
WO2018234622A1 (en) METHOD OF DETECTING EVENTS OF INTEREST
KR101752691B1 (ko) 시점 선택이 가능한 3차원 가상 콘텐츠 동영상을 제공하는 장치 및 그 방법
US20210065659A1 (en) Image processing apparatus, image processing method, program, and projection system
WO2019004073A1 (ja) 画像配置決定装置、表示制御装置、画像配置決定方法、表示制御方法及びプログラム
KR102261242B1 (ko) 360도 3차원 영상 재생시스템
JP2021015417A (ja) 画像処理装置、画像配信システム、および画像処理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20221104

Address after: Room 1602, 16th Floor, Building 18, Yard 6, Wenhuayuan West Road, Beijing Economic and Technological Development Zone, Daxing District, Beijing 100176

Applicant after: Beijing Lajin Zhongbo Technology Co.,Ltd.

Address before: 310000 room 650, building 3, No. 16, Zhuantang science and technology economic block, Xihu District, Hangzhou City, Zhejiang Province

Applicant before: Tianmai Juyuan (Hangzhou) Media Technology Co.,Ltd.

GR01 Patent grant
GR01 Patent grant