CN104836938A - 一种基于ar技术的虚拟演播室系统 - Google Patents
一种基于ar技术的虚拟演播室系统 Download PDFInfo
- Publication number
- CN104836938A CN104836938A CN201510213138.4A CN201510213138A CN104836938A CN 104836938 A CN104836938 A CN 104836938A CN 201510213138 A CN201510213138 A CN 201510213138A CN 104836938 A CN104836938 A CN 104836938A
- Authority
- CN
- China
- Prior art keywords
- module
- virtual
- video
- camera
- studio system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Studio Circuits (AREA)
Abstract
本发明公开了一种基于AR技术的虚拟演播室系统，其特征在于，包括视频采集与摄像机跟踪模块、虚拟场景生成模块、视频抠像模块、UI模块，所述视频抠像模块的一端分别与所述视频采集与摄像机跟踪模块、所述虚拟场景生成模块相连接，所述视频抠像模块的另一端与所述UI模块相连接。本发明所达到的有益效果：（1）现场视频可以与计算机产生的三维图形完美的集成在一起，构成一个现实不存在，但是在电视画面上又起到演播室作用的环境和氛围；（2）可以使电视导演摆脱时间、空间以及道具制作等方面的限制，在广泛的想象空间中进行自由的创作；（3）可以极大的提高电视台对节目的创作与制作能力，开拓了电视节目空间，降低了节目制作的成本。
Description
技术领域
本发明涉及一种基于AR技术的虚拟演播室系统，属于技术领域。
背景技术
增强现实（Augmented Reality，简称AR）是近年来发展起来的新兴技术，它借助于光电技术、交互技术、多传感器技术和计算机图像与多媒体技术，将计算机生成的虚拟环境与用户周围的真实场景相融合，使用户从感官效果上确信虚拟环境是其周围真实场景的组成部分，从而增强和扩展用户对周围环境的感知能力。
虚拟演播室系统作为当前影视节目制作领域的一个热门话题，极大的推动着影视节目制作的发展，制约于高昂的成本，因此十分有必要提供一种低成本的基于AR技术的虚拟演播室系统。
发明内容
为克服现有技术存在的缺陷，解决上述技术问题，本发明提出一种基于AR技术的虚拟演播室系统。
本发明采用如下技术方案：一种基于AR技术的虚拟演播室系统，其特征在于，包括视频采集与摄像机跟踪模块、虚拟场景生成模块、视频抠像模块、UI模块，所述视频抠像模块的一端分别与所述视频采集与摄像机跟踪模块、所述虚拟场景生成模块相连接，所述视频抠像模块的另一端与所述UI模块相连接；所述视频采集与摄像机跟踪模块通过采集的二维场景图片信息，采用传感器技术来获取摄像机在虚拟演播室系统的内外参数，并控制虚拟摄像机的定位和运动；所述虚拟场景生成模块用来将设计好三维虚拟场景空间中的图片、视频及三维模型信息读取后，设置好虚拟灯光、材质、纹理、场景模型的位置属性后，根据视频采集与摄像机跟踪模块得到的虚拟摄像机参数生成合适的三维虚拟场景，并将生成的虚拟背景图像传递给所述视频抠像模块；所述视频抠像模块将采集到的现场视频作为前景，将生成的三维虚拟场景图像作为背景进行合成在一起，使演员与三维虚拟场景相融合。
优选地，视频采集与摄像机跟踪模块包括现场视频采集模块、同步跟踪模块，现场视频采集模块包括真实摄像机、图像采集卡，用来进行现场视频和图像采集。
优选地，同步跟踪模块包括虚拟摄像机、位置传感器，位置传感器用来采集摄像机内外参数在演播室系统的内外参数，并控制虚拟摄像机的定位和移动，虚拟摄像机是用来确定真实摄像机相对于现实场景坐标系在虚拟场景中的位置。
优选地，视频抠像模块包括三基色柔光灯，用来为视频抠像提供稳定的现场环境。
优选地，真实摄像机采用CCD摄像机。
优选地，图像采集卡采用MV-600高精度工业图像采集卡。
本发明所达到的有益效果：（1）现场视频可以与计算机产生的三维图形完美的集成在一起，构成一个现实不存在，但是在电视画面上又起到演播室作用的环境和氛围；（2）可以使电视导演摆脱时间、空间以及道具制作等方面的限制，在广泛的想象空间中进行自由的创作；（3）可以极大的提高电视台对节目的创作与制作能力，开拓了电视节目空间，降低了节目制作的成本。
附图说明
图1是本发明的结构框图。
具体实施方式
下面结合附图对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案，而不能以此来限制本发明的保护范围。
图1是本发明的结构框图，本发明提出一种基于AR技术的虚拟演播室系统，包括视频采集与摄像机跟踪模块、虚拟场景生成模块、视频抠像模块、UI模块，视频抠像模块的一端分别与视频采集与摄像机跟踪模块、虚拟场景生成模块相连接，视频抠像模块的另一端与UI模块相连接；视频采集与摄像机跟踪模块通过采集的二维场景图片信息，采用传感器技术来获取摄像机在虚拟演播室系统的内外参数，并控制虚拟摄像机的定位和运动；虚拟场景生成模块用来将设计好三维虚拟场景空间中的图片、视频及三维模型信息读取后，设置好虚拟灯光、材质、纹理、场景模型的位置属性后，根据视频采集与摄像机跟踪模块得到的虚拟摄像机参数生成合适的三维虚拟场景，并将生成的虚拟背景图像传递给视频抠像模块；视频抠像模块将采集到的现场视频作为前景，将生成的三维虚拟场景图像作为背景进行合成在一起，使演员与三维虚拟场景相融合。
视频采集与摄像机跟踪模块包括现场视频采集模块、同步跟踪模块，现场视频采集模块包括真实摄像机、图像采集卡，用来进行现场视频和图像采集；同步跟踪模块包括虚拟摄像机、位置传感器，位置传感器用来采集摄像机内外参数在演播室系统的内外参数，并控制虚拟摄像机的定位和移动，虚拟摄像机是用来确定真实摄像机相对于现实场景坐标系在虚拟场景中的位置。视频抠像模块包括三基色柔光灯，用来为视频抠像提供稳定的现场环境。
优选地，真实摄像机采用CCD摄像机；图像采集卡采用MV-600高精度工业图像采集卡。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明技术原理的前提下，还可以做出若干改进和变形，这些改进和变形也应视为本发明的保护范围。
Claims (6)
1.一种基于AR技术的虚拟演播室系统，其特征在于，包括视频采集与摄像机跟踪模块、虚拟场景生成模块、视频抠像模块、UI模块，所述视频抠像模块的一端分别与所述视频采集与摄像机跟踪模块、所述虚拟场景生成模块相连接，所述视频抠像模块的另一端与所述UI模块相连接；所述视频采集与摄像机跟踪模块通过采集的二维场景图片信息，采用传感器技术来获取摄像机在虚拟演播室系统的内外参数，并控制虚拟摄像机的定位和运动；所述虚拟场景生成模块用来将设计好三维虚拟场景空间中的图片、视频及三维模型信息读取后，设置好虚拟灯光、材质、纹理、场景模型的位置属性后，根据视频采集与摄像机跟踪模块得到的虚拟摄像机参数生成合适的三维虚拟场景，并将生成的虚拟背景图像传递给所述视频抠像模块；所述视频抠像模块将采集到的现场视频作为前景，将生成的三维虚拟场景图像作为背景进行合成在一起，使演员与三维虚拟场景相融合。
2.根据权利要求1所述的一种基于AR技术的虚拟演播室系统，其特征在于，所述视频采集与摄像机跟踪模块包括现场视频采集模块、同步跟踪模块，所述现场视频采集模块包括真实摄像机、图像采集卡，用来进行现场视频和图像采集。
3.根据权利要求2所述的一种基于AR技术的虚拟演播室系统，其特征在于，所述同步跟踪模块包括虚拟摄像机、位置传感器，所述位置传感器用来采集摄像机内外参数在演播室系统的内外参数，并控制虚拟摄像机的定位和移动，虚拟摄像机是用来确定真实摄像机相对于现实场景坐标系在虚拟场景中的位置。
4.根据权利要求3所述的一种基于AR技术的虚拟演播室系统，其特征在于，所述视频抠像模块包括三基色柔光灯，用来为视频抠像提供稳定的现场环境。
5.根据权利要求1所述的一种基于AR技术的虚拟演播室系统，其特征在于，所述真实摄像机采用CCD摄像机。
6.根据权利要求1所述的一种基于AR技术的虚拟演播室系统，其特征在于，所述图像采集卡采用MV-600高精度工业图像采集卡。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510213138.4A CN104836938A (zh) | 2015-04-30 | 2015-04-30 | 一种基于ar技术的虚拟演播室系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510213138.4A CN104836938A (zh) | 2015-04-30 | 2015-04-30 | 一种基于ar技术的虚拟演播室系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104836938A true CN104836938A (zh) | 2015-08-12 |
Family
ID=53814555
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510213138.4A Pending CN104836938A (zh) | 2015-04-30 | 2015-04-30 | 一种基于ar技术的虚拟演播室系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104836938A (zh) |
Cited By (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105872367A (zh) * | 2016-03-30 | 2016-08-17 | 东斓视觉科技发展（北京）有限公司 | 视频生成方法及视频拍摄装置 |
| CN105959513A (zh) * | 2016-06-06 | 2016-09-21 | 杭州同步科技有限公司 | 真三维虚拟演播室系统及其实现方法 |
| CN106210453A (zh) * | 2016-08-09 | 2016-12-07 | 安徽喜悦信息科技有限公司 | 一种智能虚拟演播室系统 |
| CN106303163A (zh) * | 2016-08-26 | 2017-01-04 | 南京纳加软件股份有限公司 | 一种虚拟场景绕前绕后功能的高清采编录播系统 |
| CN106657719A (zh) * | 2017-01-04 | 2017-05-10 | 海南大学 | 一种智能虚拟演播室系统 |
| WO2017076237A1 (zh) * | 2015-11-05 | 2017-05-11 | 丰唐物联技术（深圳）有限公司 | 在虚拟场景中播放真实场景的方法及装置 |
| CN106792246A (zh) * | 2016-12-09 | 2017-05-31 | 福建星网视易信息系统有限公司 | 一种融合式虚拟场景互动的方法及系统 |
| CN106814851A (zh) * | 2016-12-09 | 2017-06-09 | 武汉秀宝软件有限公司 | 一种增强现实交互方法及系统 |
| CN107341832A (zh) * | 2017-04-27 | 2017-11-10 | 北京德火新媒体技术有限公司 | 一种基于红外定位系统的多视角切换拍摄系统和方法 |
| CN107888890A (zh) * | 2017-12-25 | 2018-04-06 | 河南新汉普影视技术有限公司 | 一种基于在线合成的场景包装装置及方法 |
| CN108108023A (zh) * | 2018-01-02 | 2018-06-01 | 联想(北京)有限公司 | 一种显示方法和显示系统 |
| CN109345635A (zh) * | 2018-11-21 | 2019-02-15 | 北京迪生数字娱乐科技股份有限公司 | 无标记点虚拟现实混合表演系统 |
| WO2019041351A1 (zh) * | 2017-09-04 | 2019-03-07 | 艾迪普（北京）文化科技股份有限公司 | 一种3d vr视频与虚拟三维场景实时混叠渲染的方法 |
| CN110866978A (zh) * | 2019-11-07 | 2020-03-06 | 辽宁东智威视科技有限公司 | 一种实时混合现实视频拍摄中的相机同步方法 |
| CN112562056A (zh) * | 2020-12-03 | 2021-03-26 | 广州博冠信息科技有限公司 | 虚拟演播室中虚拟灯光的控制方法、装置、介质与设备 |
| CN113160338A (zh) * | 2021-05-18 | 2021-07-23 | 视境技术(深圳)有限公司 | 一种ar/vr虚拟现实融合演播室人物空间定位 |
| CN113271482A (zh) * | 2021-05-17 | 2021-08-17 | 广东彼雍德云教育科技有限公司 | 一种便捷式全幅抠像黑板 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101110908A (zh) * | 2007-07-20 | 2008-01-23 | 西安宏源视讯设备有限责任公司 | 虚拟演播室系统中前景景深位置识别装置及方法 |
| CN101370088A (zh) * | 2008-10-14 | 2009-02-18 | 西安宏源视讯设备有限责任公司 | 用于虚拟演播室的景置匹配装置及其匹配方法 |
| CN101686406A (zh) * | 2008-09-28 | 2010-03-31 | 新奥特（北京）视频技术有限公司 | 一种标定参数的获取方法和装置 |
| CN102111565A (zh) * | 2009-12-25 | 2011-06-29 | 新奥特（北京）视频技术有限公司 | 虚拟演播室系统中的摄像机初始定位方法及装置 |
| US20120075424A1 (en) * | 2010-09-24 | 2012-03-29 | Hal Laboratory Inc. | Computer-readable storage medium having image processing program stored therein, image processing apparatus, image processing system, and image processing method |
| CN204836315U (zh) * | 2015-04-30 | 2015-12-02 | 江苏卡罗卡国际动漫城有限公司 | 一种基于ar技术的虚拟演播室系统 |
-
2015
- 2015-04-30 CN CN201510213138.4A patent/CN104836938A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101110908A (zh) * | 2007-07-20 | 2008-01-23 | 西安宏源视讯设备有限责任公司 | 虚拟演播室系统中前景景深位置识别装置及方法 |
| CN101686406A (zh) * | 2008-09-28 | 2010-03-31 | 新奥特（北京）视频技术有限公司 | 一种标定参数的获取方法和装置 |
| CN101370088A (zh) * | 2008-10-14 | 2009-02-18 | 西安宏源视讯设备有限责任公司 | 用于虚拟演播室的景置匹配装置及其匹配方法 |
| CN102111565A (zh) * | 2009-12-25 | 2011-06-29 | 新奥特（北京）视频技术有限公司 | 虚拟演播室系统中的摄像机初始定位方法及装置 |
| US20120075424A1 (en) * | 2010-09-24 | 2012-03-29 | Hal Laboratory Inc. | Computer-readable storage medium having image processing program stored therein, image processing apparatus, image processing system, and image processing method |
| CN204836315U (zh) * | 2015-04-30 | 2015-12-02 | 江苏卡罗卡国际动漫城有限公司 | 一种基于ar技术的虚拟演播室系统 |
Non-Patent Citations (1)
| Title |
|---|
| 黄增荣: "关于增强现实的一些关键问题的研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017076237A1 (zh) * | 2015-11-05 | 2017-05-11 | 丰唐物联技术（深圳）有限公司 | 在虚拟场景中播放真实场景的方法及装置 |
| CN105872367B (zh) * | 2016-03-30 | 2019-01-04 | 东斓视觉科技发展（北京）有限公司 | 视频生成方法及视频拍摄装置 |
| CN105872367A (zh) * | 2016-03-30 | 2016-08-17 | 东斓视觉科技发展（北京）有限公司 | 视频生成方法及视频拍摄装置 |
| CN105959513A (zh) * | 2016-06-06 | 2016-09-21 | 杭州同步科技有限公司 | 真三维虚拟演播室系统及其实现方法 |
| CN106210453A (zh) * | 2016-08-09 | 2016-12-07 | 安徽喜悦信息科技有限公司 | 一种智能虚拟演播室系统 |
| CN106303163A (zh) * | 2016-08-26 | 2017-01-04 | 南京纳加软件股份有限公司 | 一种虚拟场景绕前绕后功能的高清采编录播系统 |
| CN106814851B (zh) * | 2016-12-09 | 2020-06-23 | 武汉秀宝软件有限公司 | 一种增强现实交互方法及系统 |
| CN106792246A (zh) * | 2016-12-09 | 2017-05-31 | 福建星网视易信息系统有限公司 | 一种融合式虚拟场景互动的方法及系统 |
| CN106814851A (zh) * | 2016-12-09 | 2017-06-09 | 武汉秀宝软件有限公司 | 一种增强现实交互方法及系统 |
| CN106657719A (zh) * | 2017-01-04 | 2017-05-10 | 海南大学 | 一种智能虚拟演播室系统 |
| CN107341832A (zh) * | 2017-04-27 | 2017-11-10 | 北京德火新媒体技术有限公司 | 一种基于红外定位系统的多视角切换拍摄系统和方法 |
| CN107341832B (zh) * | 2017-04-27 | 2020-09-01 | 北京德火新媒体技术有限公司 | 一种基于红外定位系统的多视角切换拍摄系统和方法 |
| WO2019041351A1 (zh) * | 2017-09-04 | 2019-03-07 | 艾迪普（北京）文化科技股份有限公司 | 一种3d vr视频与虚拟三维场景实时混叠渲染的方法 |
| US11076142B2 (en) | 2017-09-04 | 2021-07-27 | Ideapool Culture & Technology Co., Ltd. | Real-time aliasing rendering method for 3D VR video and virtual three-dimensional scene |
| CN107888890A (zh) * | 2017-12-25 | 2018-04-06 | 河南新汉普影视技术有限公司 | 一种基于在线合成的场景包装装置及方法 |
| CN108108023A (zh) * | 2018-01-02 | 2018-06-01 | 联想(北京)有限公司 | 一种显示方法和显示系统 |
| US10809532B2 (en) | 2018-01-02 | 2020-10-20 | Lenovo (Beijing) Co., Ltd. | Display method and display system |
| CN109345635A (zh) * | 2018-11-21 | 2019-02-15 | 北京迪生数字娱乐科技股份有限公司 | 无标记点虚拟现实混合表演系统 |
| CN109345635B (zh) * | 2018-11-21 | 2023-08-18 | 北京迪生数字娱乐科技股份有限公司 | 无标记点虚拟现实混合表演系统 |
| CN110866978A (zh) * | 2019-11-07 | 2020-03-06 | 辽宁东智威视科技有限公司 | 一种实时混合现实视频拍摄中的相机同步方法 |
| CN112562056A (zh) * | 2020-12-03 | 2021-03-26 | 广州博冠信息科技有限公司 | 虚拟演播室中虚拟灯光的控制方法、装置、介质与设备 |
| CN113271482A (zh) * | 2021-05-17 | 2021-08-17 | 广东彼雍德云教育科技有限公司 | 一种便捷式全幅抠像黑板 |
| CN113160338A (zh) * | 2021-05-18 | 2021-07-23 | 视境技术(深圳)有限公司 | 一种ar/vr虚拟现实融合演播室人物空间定位 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104836938A (zh) | 一种基于ar技术的虚拟演播室系统 | |
| US11076142B2 (en) | Real-time aliasing rendering method for 3D VR video and virtual three-dimensional scene | |
| WO2018121333A1 (zh) | 一种360度vr全景图形图像及视频实时生成方法 | |
| CN105809701B (zh) | 全景视频姿态标定方法 | |
| CN107341832B (zh) | 一种基于红外定位系统的多视角切换拍摄系统和方法 | |
| CN109284264B (zh) | 一种图像文件格式及生成方法及装置及应用 | |
| KR101538947B1 (ko) | 실감형 자유시점 영상 제공 장치 및 방법 | |
| US20080246759A1 (en) | Automatic Scene Modeling for the 3D Camera and 3D Video | |
| US11488348B1 (en) | Computing virtual screen imagery based on a stage environment, camera position, and/or camera settings | |
| CN106780629A (zh) | 一种三维全景数据采集、建模方法 | |
| JP2015521419A (ja) | コンピュータ生成された３次元オブジェクトとフィルムカメラからの映像フィードとをリアルタイムに混合または合成するシステム | |
| US10484599B2 (en) | Simulating depth of field | |
| CN105791881A (zh) | 一种基于光场摄像机的三维场景录播的实现方法 | |
| CN204836315U (zh) | 一种基于ar技术的虚拟演播室系统 | |
| CN107862718B (zh) | 4d全息视频捕捉方法 | |
| Lee et al. | Free viewpoint video (FVV) survey and future research direction | |
| WO2023207452A1 (zh) | 基于虚拟现实的视频生成方法、装置、设备及介质 | |
| CN213461894U (zh) | 一种xr-扩展现实系统 | |
| KR101725024B1 (ko) | 룩업테이블 기반의 실시간 360도 vr 동영상 제작 시스템 및 이를 이용한 360도 vr 동영상 제작 방법 | |
| KR101704362B1 (ko) | 룩업테이블 기반의 실시간 파노라마 영상 제작 시스템 및 이를 이용한 실시간 파노라마 영상 제작 방법 | |
| CN108564654B (zh) | 三维大场景的画面进入方式 | |
| Palasek et al. | A flexible calibration method of multiple Kinects for 3D human reconstruction | |
| CN111179341B (zh) | 一种增强现实设备与移动机器人的配准方法 | |
| KR101348929B1 (ko) | 깊이 조절을 이용한 레이어 합성 기반 다시점 영상 생성 방법 | |
| CN105812764A (zh) | 即时贴图的三维影像产生方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| EXSB | Decision made by sipo to initiate substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150812 |