CN102118576B - 一种虚拟体育系统中的色键合成方法及装置 - Google Patents
一种虚拟体育系统中的色键合成方法及装置 Download PDFInfo
- Publication number
- CN102118576B CN102118576B CN200910244279.7A CN200910244279A CN102118576B CN 102118576 B CN102118576 B CN 102118576B CN 200910244279 A CN200910244279 A CN 200910244279A CN 102118576 B CN102118576 B CN 102118576B
- Authority
- CN
- China
- Prior art keywords
- virtual
- camera
- foreground
- dimensional
- graphic data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000015572 biosynthetic process Effects 0.000 title claims abstract description 22
- 238000003786 synthesis reaction Methods 0.000 title claims abstract description 22
- 238000000034 method Methods 0.000 title claims abstract description 13
- 230000001960 triggered effect Effects 0.000 claims description 7
- 238000005516 engineering process Methods 0.000 description 13
- 238000001308 synthesis method Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 244000025254 Cannabis sativa Species 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Landscapes
- Processing Or Creating Images (AREA)
- Processing Of Color Television Signals (AREA)
- Studio Circuits (AREA)
Abstract
本发明公开了一种虚拟体育系统中的色键合成方法，包括：接收摄像机采集的前景信号；接收生成的虚拟三维图形数据；将相应的虚拟三维图形数据及前景信号进行混合输出；将所述混合输出信号作为色键背景，将相应的前景信号作为色键前景进行合成输出。本发明可以满足当前体育赛事直播的需求，获得更好的虚实结合度。
Description
技术领域
本发明涉及电视节目制作的技术领域，特别是涉及一种虚拟体育系统中的色键合成方法及一种虚拟体育系统中的色键合成装置。
背景技术
虚拟体育系统是从由虚拟演播室技术发展而来，它属于虚拟演播室技术的很重要的一个分支。虚拟演播室是近年发展起来的一种独特的电视节目制作技术。它的实质是将计算机制作的虚拟三维模型与摄像机现场拍摄的物体活动图像进行数字化的实时合成，使物体图像与虚拟背景能够同步变化，从而实现两者的融合，以获得完美的合成画面。虚拟演播室技术是在传统色键抠像技术的基础上，充分利用了计算机三维图形技术和视频合成技术，根据摄像机的位置与参数，使三维虚拟场景的透视关系与前景保持一致，经过色键合成后，使得前景中的图像看起来完全处于计算机所产生的三维虚拟场景中，而且能在其中运动，从而创造出逼真的、立体感很强的电视演播室效果。相应地，虚拟体育技术就是将静态或动画3D图像(三维模型)迭加到体育竞赛直播节目的画面上。不管摄像机是否移动，都能让图形固定在某个位置不动，让视觉上觉得这些3D图形是直播画面的一部份。
现有技术中，色键合成通常是将摄像机采集的前景图像与计算机产生的三维虚拟场景简单叠加，即其合成画面的显示仅仅有前景图像和三维场景两层，然而，在虚拟体育系统的直播画面中，往往需要将虚拟三维场景置于两层前景图像之间，例如，需要显示为，运动员以及裁判等人员在虚拟物体上面，同时这些虚拟物体又是在草地或者水面等场地上面，而采用现有技术则很难达到这种虚实结合的效果。
发明内容
本发明所要解决的技术问题是提供一种虚拟体育系统中的色键合成方法及装置，以满足当前体育赛事直播的需求，获得更好的虚实结合度。
为了解决上述技术问题，本发明实施例公开了一种虚拟体育系统中的色键合成方法，包括：
接收摄像机采集的前景信号；
接收生成的虚拟三维图形数据；
将相应的虚拟三维图形数据及前景信号进行混合输出；
将所述混合输出信号作为色键背景，将相应的前景信号作为色键前景进行合成输出。
优选的，所述合成输出的显示形式为三层叠加的画面，其中，最上层和最底层为摄像机采集的实时图像，中间层为虚拟三维图形数据。
优选的，所述虚拟三维图形数据具有固定的显示位置。
优选的，所述三维图形数据为已配置好播出属性并在预置三维场景中显示的赛事直播数据。
优选的，所述混合输出的步骤依据用户发起的播出操作触发。
本发明实施例还公开了一种虚拟体育系统中的色键合成装置，包括：
摄像机信号接收模块，用于接收摄像机采集的前景信号；
三维图形获取模块，用于接收生成的虚拟三维图形数据；
混合输出模块，用于将相应的虚拟三维图形数据及前景信号进行混合输出；
合成输出模块，用于将所述混合输出信号作为色键背景，将相应的前景信号作为色键前景进行合成输出。
优选的，所述合成输出的显示形式为三层叠加的画面，其中，最上层和最底层为摄像机采集的实时图像，中间层为虚拟三维图形数据。
优选的，所述虚拟三维图形数据具有固定的显示位置。
优选的，所述三维图形数据为已配置好播出属性在预置三维场景中显示的赛事直播数据。
优选的，所述混合输出模块依据用户发起的播出操作触发。
与现有技术相比，本发明具有以下优点：
本发明采用将渲染的虚拟三维图形和摄像机信号混合输出的模式，将混合输出的信号作为色键的背景，同时将当前摄像机采集的前景信号作为色键的前景信号，针对虚拟三维图形的体育场地进行抠像，这样摄像机采集的运动员以及裁判等人员可以在虚拟三维图形的上面，同时虚拟三维图形又可以在场地的上面，即虚拟三维图形位于两层摄像机前景信号的中间，从而达到了“以假乱真”的虚实结合效果。
附图说明
图1是本发明的一种虚拟体育系统中的色键合成方法实施例的步骤流程图；
图2是本发明的一种虚拟体育系统中的色键合成装置实施例的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。
本发明实施例主要应用在基于虚拟演播室技术进一步发展起来的虚拟体育技术中。虚拟体育技术就是将静态或动画3D图像迭加到体育竞赛直播节目的画面上。不管摄影机是否移动，都能让图形固定在某个位置不动，让视觉上觉得这些3D图形是直播画面的一部份。虚拟体育系统具有实况赛事跟踪功能，可以展示草地、田径场、足球场、雪地、水域或者3D空间内的实际距离、高度和速度，同时可以在广告牌上、运动场内和(或)运动场周边展示广告，并且可以将新的电视广告或动画电视广告覆盖在现场实际广告上。虚拟体育系统也可以用于赛事分析，在回放过程增加分析信息，让观众更直观的看到比赛情况。
参考图1，示出了本发明的一种虚拟体育系统中的色键合成方法实施例的步骤流程图，具体可以包括以下步骤：
步骤101、接收摄像机采集的前景信号；
步骤102、接收生成的虚拟三维图形数据；
步骤103、将相应的虚拟三维图形数据及前景信号进行混合输出；
步骤104、将所述混合输出信号作为色键背景，将相应的前景信号作为色键前景进行合成输出。
在虚拟体育节目制作过程中，确定摄像机的状态信息非常关键。虚拟体育系统中设置的摄像机配有运动检测和识别系统，即摄像机跟踪器。其跟踪方式有光学识别系统和机械传感式系统两种。其原理是将检测到的摄像机的推、拉、摇、移、聚焦、变焦乃至升降等传感部位的运动数据，通过一个“传感器”装置传输到“校准器”，这样，理想情况下，现场摄像机与虚拟演播室中“虚拟”的摄像机被相对地锁定在一个位置上。当现场演播室摄像机运动时，虚拟摄像机受跟踪器的控制可以实时地与现场摄像机保持同步。
在具体实现中，所述摄像机采集的前景信号可以通过视频分配器传输给各个图形工作站以及色键作为前景，同时摄像机的传感器参数信息则通过串口的方式送给两个图形工作站。由图形工作站实时计算传感器返回的数据，获得当前的摄像机信息。所述摄像机定位信息就是指摄像机成像的几何模型参数，具体可以包括摄像机内参数和摄像机外参数。外参数包括摄像机的位置、姿态等几何信息，内参数包括摄像机的焦距，主点、以及镜头变形参数等光学参数。
根据当前摄像机的姿态信息，图形工作站即可以根据这些参数渲染当前节目所需的三维场景，并计算相应的赛事直播显示数据，然后将相应的三维场景与直播显示数据进行关联，获得已配置好播出属性并在预置三维场景中显示的赛事直播数据。如在体育赛事直播中的比分数据、出场阵容数据、发球距离示意等，然后将相应的赛事直播显示数据和当前摄像机采集的前景图像混合输出。
色键技术是虚拟体育系统中的关键技术。用摄像机的位置和镜头等变化来控制计算机中的“虚拟摄像机”，使它的位置和镜头变化与“实际”同步，这样它所拍摄的“虚拟场景”的镜头变化和实际摄像机拍摄的物体镜头变化一致，通过对它们进行色键效果处理之后，得到的画面才真实自然。
色键制作的质量对虚拟体育节目质量影响相当大，通过把前景键在背景上，即将生成的背景图像与前景图像混合后，才最终完成了虚拟体育的节目制作。在本发明实施例中，色键的背景是虚拟三维图形数据及前景信号的混合输出信号，色键的前景是摄像机采集的前景图像。前景与背景的混合是通过色键合成器来完成的。
通常在虚拟体育节目中，色键合成器可以针对虚拟三维图形的体育场地进行抠像，这样摄像机采集的运动员以及裁判等人员可以在虚拟三维图形的上面，同时虚拟三维图形又可以在场地的上面，即虚拟三维图形位于两层摄像机前景信号的中间，即所述合成输出的显示形式为：三层叠加的画面，其中，最上层和最底层为摄像机采集的实时图像，中间层为虚拟三维图形数据，从而达到了“以假乱真”的虚实结合效果。
由于虚拟体育系统是将虚拟的物体叠加在当前直播的赛事画面上，不管摄像机是否移动，虚拟物体都固定不动，视觉上让观众认为这是赛事的一部分，因而在本发明的一种优选实施例中，所述虚拟三维图形数据具有固定的显示位置。
在具体实现中，所述混合输出的步骤依据用户发起的播出操作而触发。即需要依据用户针对某个赛况数据发出的播出指令，才会触发图形工作站混合信号并输出至色键合成器，由色键合成器进一步合成输出。
需要说明的是，对于前述的方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。
参考图2，示出了本发明的一种虚拟体育系统中的色键合成装置实施例的结构框图，具体可以包括以下单元：
摄像机信号接收模块201，用于接收摄像机采集的前景信号；
三维图形获取模块202，用于接收生成的虚拟三维图形数据；
混合输出模块203，用于将相应的虚拟三维图形数据及前景信号进行混合输出；
合成输出模块204，用于将所述混合输出信号作为色键背景，将相应的前景信号作为色键前景进行合成输出。
在具体实现中，所述合成输出的显示形式为三层叠加的画面，其中，最上层和最底层为摄像机采集的实时图像，中间层为虚拟三维图形数据。
由于色键是在二维平面空间运作，当拍摄的色键前景画面的摄像机移动，不论是变焦、上下摆动或左右摇动，色键的背景画面都不会随前景画面而相应变化，因而在本发明实施例中，所述虚拟三维图形数据具有固定的显示位置。
在虚拟体育系统的具体应用中，所述三维图形数据为已配置好播出属性并在预置三维场景中显示的赛事直播数据，如出场阵容、比赛比分、发球距离等数据。
在实际中，所述摄像机信号接收模块201、三维图形获取模块202以及混合输出模块203可以设置在图形工作站中，所述混合输出模块可以依据用户发起的播出操作而触发；所述合成输出模块204可以为任一种色键合成器。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上对本发明所提供的一种虚拟体育系统中的色键合成方法及一种虚拟体育系统中的色键合成装置进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (2)
1.一种虚拟体育系统中的色键合成方法，其特征在于，包括：
接收摄像机采集的前景信号；
接收生成的虚拟三维图形数据；
将相应的虚拟三维图形数据及前景信号进行混合输出；
将所述混合输出的信号作为色键背景，将相应的前景信号作为色键前景进行合成输出；
其中，
所述合成输出的显示形式为三层叠加的画面，其中，最上层和最底层为摄像机采集的实时图像，中间层为虚拟三维图形数据；
所述虚拟三维图形数据具有固定的显示位置；
所述三维图形数据为已配置好播出属性并在预置三维场景中显示的赛事直播数据；
所述混合输出的步骤依据用户发起的播出操作触发。
2.一种虚拟体育系统中的色键合成装置，其特征在于，包括：
摄像机信号接收模块，用于接收摄像机采集的前景信号；
三维图形获取模块，用于接收生成的虚拟三维图形数据；
混合输出模块，用于将相应的虚拟三维图形数据及前景信号进行混合输出；
合成输出模块，用于将所述混合输出的信号作为色键背景，将相应的前景信号作为色键前景进行合成输出；
其中，
所述合成输出的显示形式为三层叠加的画面，其中，最上层和最底层为摄像机采集的实时图像，中间层为虚拟三维图形数据；
所述虚拟三维图形数据具有固定的显示位置；
所述三维图形数据为已配置好播出属性在预置三维场景中显示的赛事直播数据；
所述混合输出模块依据用户发起的播出操作触发。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN200910244279.7A CN102118576B (zh) | 2009-12-30 | 2009-12-30 | 一种虚拟体育系统中的色键合成方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN200910244279.7A CN102118576B (zh) | 2009-12-30 | 2009-12-30 | 一种虚拟体育系统中的色键合成方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102118576A CN102118576A (zh) | 2011-07-06 |
| CN102118576B true CN102118576B (zh) | 2015-02-18 |
Family
ID=44217152
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN200910244279.7A Expired - Fee Related CN102118576B (zh) | 2009-12-30 | 2009-12-30 | 一种虚拟体育系统中的色键合成方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102118576B (zh) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102710898B (zh) * | 2011-08-26 | 2015-02-18 | 新奥特（北京）视频技术有限公司 | 一种色键器前景背景同步切换的方法及系统 |
| CN103096101B (zh) * | 2011-11-07 | 2016-03-30 | 联想(北京)有限公司 | 视频合成方法、装置及电子设备 |
| CN106254849B (zh) * | 2016-08-08 | 2018-11-13 | 深圳迪乐普数码科技有限公司 | 一种前景物体局部置换的方法与终端 |
| CN106600638B (zh) * | 2016-11-09 | 2020-04-17 | 深圳奥比中光科技有限公司 | 一种增强现实的实现方法 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1223058A (zh) * | 1997-02-20 | 1999-07-14 | 索尼公司 | 图像信号处理装置和方法、画面合成装置、以及编辑装置 |
| CN1477856A (zh) * | 2002-08-21 | 2004-02-25 | 北京新奥特集团 | 真三维虚拟演播室系统及其实现方法 |
| CN101472079A (zh) * | 2007-12-26 | 2009-07-01 | 北京同步科技有限公司 | 动态背景发生器 |
| CN101489150A (zh) * | 2009-01-20 | 2009-07-22 | 北京航空航天大学 | 一种虚实混合的远程协同工作方法 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4729812B2 (ja) * | 2001-06-27 | 2011-07-20 | ソニー株式会社 | 画像処理装置および方法、記録媒体、並びにプログラム |
| CA2613998C (en) * | 2005-06-08 | 2016-01-05 | Thomson Licensing | Method, apparatus and system for alternate image/video insertion |
| US7712047B2 (en) * | 2007-01-03 | 2010-05-04 | Microsoft Corporation | Motion desktop |
-
2009
- 2009-12-30 CN CN200910244279.7A patent/CN102118576B/zh not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1223058A (zh) * | 1997-02-20 | 1999-07-14 | 索尼公司 | 图像信号处理装置和方法、画面合成装置、以及编辑装置 |
| CN1477856A (zh) * | 2002-08-21 | 2004-02-25 | 北京新奥特集团 | 真三维虚拟演播室系统及其实现方法 |
| CN101472079A (zh) * | 2007-12-26 | 2009-07-01 | 北京同步科技有限公司 | 动态背景发生器 |
| CN101489150A (zh) * | 2009-01-20 | 2009-07-22 | 北京航空航天大学 | 一种虚实混合的远程协同工作方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102118576A (zh) | 2011-07-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3592444B1 (en) | Mixed reality viewer system and method | |
| US10789764B2 (en) | Systems and associated methods for creating a viewing experience | |
| US20130278727A1 (en) | Method and system for creating three-dimensional viewable video from a single video stream | |
| US10652519B2 (en) | Virtual insertions in 3D video | |
| US10650590B1 (en) | Method and system for fully immersive virtual reality | |
| US20120013711A1 (en) | Method and system for creating three-dimensional viewable video from a single video stream | |
| US20130215229A1 (en) | Real-time compositing of live recording-based and computer graphics-based media streams | |
| Inamoto et al. | Virtual viewpoint replay for a soccer match by view interpolation from multiple cameras | |
| CN114401414B (zh) | 沉浸式直播的信息显示方法及系统、信息推送方法 | |
| JP2020086983A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
| WO1995007590A1 (fr) | Processeur d'images variant dans le temps et dispositif d'affichage | |
| CN113891060B (zh) | 自由视点视频重建方法及播放处理方法、设备及存储介质 | |
| KR101198557B1 (ko) | 시청자세를 반영하는 3차원 입체영상 생성 시스템 및 방법 | |
| CN107862718A (zh) | 4d全息视频捕捉方法 | |
| CN102118576B (zh) | 一种虚拟体育系统中的色键合成方法及装置 | |
| Inamoto et al. | Free viewpoint video synthesis and presentation from multiple sporting videos | |
| CN102118574B (zh) | 一种体育赛事直播的方法 | |
| CN102118573B (zh) | 一种增加虚实结合度的虚拟体育系统 | |
| CN102118568A (zh) | 一种用于体育比赛的图形生成系统 | |
| Inamoto et al. | Free viewpoint video synthesis and presentation of sporting events for mixed reality entertainment | |
| Mori et al. | An overview of augmented visualization: observing the real world as desired | |
| CN105204284A (zh) | 基于全景环拍技术的3维立体回放系统 | |
| KR102652371B1 (ko) | 동작 배우기 동영상 제작 시스템 | |
| KR102145017B1 (ko) | 3d 가상스튜디오시스템 및 3d 가상스튜디오 영상합성방법 | |
| CN102118567A (zh) | 一种分离模式的虚拟体育系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20150218 Termination date: 20161230 |