CN106980366A - 地形精准捕捉系统和精细高清投影成像系统 - Google Patents

地形精准捕捉系统和精细高清投影成像系统 Download PDF

Info

Publication number
CN106980366A
CN106980366A CN201710106364.1A CN201710106364A CN106980366A CN 106980366 A CN106980366 A CN 106980366A CN 201710106364 A CN201710106364 A CN 201710106364A CN 106980366 A CN106980366 A CN 106980366A
Authority
CN
China
Prior art keywords
sand table
generation
landform
image
depth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710106364.1A
Other languages
English (en)
Inventor
王正前
徐高龙
王文亮
梅震坤
李少华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Anda Chuangzhan Technology Co Ltd
Original Assignee
Hefei Anda Chuangzhan Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Anda Chuangzhan Technology Co Ltd filed Critical Hefei Anda Chuangzhan Technology Co Ltd
Priority to CN201710106364.1A priority Critical patent/CN106980366A/zh
Publication of CN106980366A publication Critical patent/CN106980366A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00—Advertising or display means not otherwise provided for
    • G09F19/12—Advertising or display means not otherwise provided for using special optical effects
    • G09F19/18—Advertising or display means not otherwise provided for using special optical effects involving the use of optical projection means, e.g. projection of images on clouds

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Marketing (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

地形精准捕捉系统和精细高清投影成像系统，整个系统由深度图像捕捉处理系统和互动图像生成系统两部分组成，深度图像采集和处理系统主要包括kinect深度图获取和opencv图像处理，图像处理包括沙面地形获取和参与人员的部分的分割和定位；成像系统包括地形生成、植被生成、水体生成和销毁和动物生成系统。展项通过投影机的投影，交互沙盘系统综合各种技术进行了集中设计和呈现，形成一曲恢宏大气的沙盘交互曲。观众通过挖沙，堆积等方式操控沙盘中沙地的高低起伏，创造出不同的地形效果，当观众利用手到沙盘上方进行遮挡时，会出现水流效果，这些水流会汇聚形成河流，湖泊，而沙盘自身也会根据不同地形效果，标注出不同地形的高线。

Description

地形精准捕捉系统和精细高清投影成像系统
技术领域
本发明涉及地形精准捕捉系统和精细高清投影成像系统。
背景技术
Kinect2.0是微软3D体感摄影机的第二代产品，它导入了即时动态捕捉、影像辨识、关节识别、面部识别、麦克风输入、语音辨识、深度和红外图像获取等功能。本发明使用Kinect深度识别技术。Opencv图像处理技术。Physx物理模拟系统。Direct11图像实时显示系统。
发明内容
本发明的目的在于提供一种深度图像的精准捕捉和互动影像的实时生成系统，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：
地形精准捕捉系统和精细高清投影成像系统，其特征在于：整个系统由深度图像捕捉处理系统和互动图像生成系统两部分组成，深度图像采集和处理系统主要包括kinect深度图获取和opencv图像处理，图像处理包括沙面地形获取和参与人员的部分的分割和定位；成像系统包括地形生成、植被生成、水体生成和销毁和动物生成系统；
电脑连接Kinect2体感与投影机，投影机在实体沙盘表面投影出虚拟的图像；Kinect2体感吊挂在实体沙盘上方利用深度检测的方式获得实体沙盘的真实物理数据；
Kinect采集到的深度使用特定的阈值分割参与部分和沙盘部分，两部分内容分别传递给opencv模块并行处理，沙盘图像信号经过去噪、平滑等处理后传递给Direct11图像生成模块生成地形，植被生成模块根据地形起伏变化生成不同地貌，游客参与部分信号经过处理后定位，经过坐标系统映射后在对应的沙盘位置上生成水体，水体根据地形的变化发生流动和消失，动物生成系统丰富场景画面；
以机器视觉为基础，利用图像算法平滑优化深度图，最后分析出波峰波谷以及其它相关物理数据，由电脑实时建模产生虚拟的场景结合物理模拟，再经过GPU运算的矫正，通过投影与实体沙盘完美重合，最终呈现出实现虚实结合的效果。
展项通过投影机的投影，交互沙盘系统综合各种技术进行了集中设计和呈现，形成一曲恢宏大气的沙盘交互曲。观众通过挖沙，堆积等方式自由操控沙盘中沙地的高低起伏，创造出不同的地形效果，当观众利用手或者其他物体到沙盘上方进行遮挡时，会出现水流效果，这些水流会汇聚形成河流，湖泊，而沙盘自身也会根据不同地形效果，标注出不同地形的等高线。
与传统沙盘的单一、刻板不同，本发明能根据用户的参与实时展现不同的场景，并根据用户的参与结果、实时对沙盘上对象进行标定，利用增强现实的手段丰富了实体沙盘展示的信息。
附图说明
图1为本发明生成系统模块构成图。
具体实施方式
下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
结合图1，本发明提供的一种实施例：地形精准捕捉系统和精细高清投影成像系统，其特征在于：整个系统由深度图像捕捉处理系统和互动图像生成系统两部分组成，深度图像采集和处理系统主要包括kinect深度图获取和opencv图像处理，图像处理包括沙面地形获取和参与人员的部分的分割和定位；成像系统包括地形生成、植被生成、水体生成和销毁和动物生成系统；
电脑连接Kinect2体感与投影机，投影机在实体沙盘表面投影出虚拟的图像；Kinect2体感吊挂在实体沙盘上方利用深度检测的方式获得实体沙盘的真实物理数据；
Kinect采集到的深度使用特定的阈值分割参与部分和沙盘部分，两部分内容分别传递给opencv模块并行处理，沙盘图像信号经过去噪、平滑等处理后传递给Direct11图像生成模块生成地形，植被生成模块根据地形起伏变化生成不同地貌，游客参与部分信号经过处理后定位，经过坐标系统映射后在对应的沙盘位置上生成水体，水体根据地形的变化发生流动和消失，动物生成系统丰富场景画面；
以机器视觉为基础，利用图像算法平滑优化深度图，最后分析出波峰波谷以及其它相关物理数据，由电脑实时建模产生虚拟的场景结合物理模拟，再经过GPU运算的矫正，通过投影与实体沙盘完美重合，最终呈现出实现虚实结合的效果。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。

Claims (1)

1.地形精准捕捉系统和精细高清投影成像系统，其特征在于：整个系统由深度图像捕捉处理系统和互动图像生成系统两部分组成，深度图像采集和处理系统主要包括kinect深度图获取和opencv图像处理，图像处理包括沙面地形获取和参与人员的部分的分割和定位；成像系统包括地形生成、植被生成、水体生成和销毁和动物生成系统；
电脑连接Kinect2体感与投影机，投影机在实体沙盘表面投影出虚拟的图像；Kinect2体感吊挂在实体沙盘上方利用深度检测的方式获得实体沙盘的真实物理数据；
Kinect采集到的深度使用特定的阈值分割参与部分和沙盘部分，两部分内容分别传递给opencv模块并行处理，沙盘图像信号经过去噪、平滑等处理后传递给Direct11图像生成模块生成地形，植被生成模块根据地形起伏变化生成不同地貌，游客参与部分信号经过处理后定位，经过坐标系统映射后在对应的沙盘位置上生成水体，水体根据地形的变化发生流动和消失，动物生成系统丰富场景画面；
以机器视觉为基础，利用图像算法平滑优化深度图，最后分析出波峰波谷以及其它相关物理数据，由电脑实时建模产生虚拟的场景结合物理模拟，再经过GPU运算的矫正，通过投影与实体沙盘完美重合，最终呈现出实现虚实结合的效果。
CN201710106364.1A 2017-02-27 2017-02-27 地形精准捕捉系统和精细高清投影成像系统 Pending CN106980366A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710106364.1A CN106980366A (zh) 2017-02-27 2017-02-27 地形精准捕捉系统和精细高清投影成像系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710106364.1A CN106980366A (zh) 2017-02-27 2017-02-27 地形精准捕捉系统和精细高清投影成像系统

Publications (1)

Publication Number Publication Date
CN106980366A true CN106980366A (zh) 2017-07-25

Family

ID=59338150

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710106364.1A Pending CN106980366A (zh) 2017-02-27 2017-02-27 地形精准捕捉系统和精细高清投影成像系统

Country Status (1)

Country Link
CN (1) CN106980366A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107545788A (zh) * 2017-10-17 2018-01-05 北京华如科技股份有限公司 基于增强现实显示的作战推演电子沙盘系统
CN108111834A (zh) * 2017-12-26 2018-06-01 云南视广科技有限公司 一种沙地的构建方法
CN108682257A (zh) * 2018-04-08 2018-10-19 郑州大学 一种流域水生态环境治理效果展示系统
CN108737811A (zh) * 2018-05-25 2018-11-02 卓谨信息科技（常州）有限公司 基于Kinect的沙盒场景互动系统及沙盒场景创建方法
CN109856945A (zh) * 2019-03-27 2019-06-07 深圳市问库信息技术有限公司 一种激光全息投影沙盘制作装置
CN109856946A (zh) * 2019-03-27 2019-06-07 深圳市问库信息技术有限公司 一种激光全息投影沙盘制作方法
CN109994036A (zh) * 2019-03-27 2019-07-09 深圳市问库信息技术有限公司 一种基于机器学习的沙盘制作方法
CN110009985A (zh) * 2019-03-27 2019-07-12 深圳市问库信息技术有限公司 一种基于机器学习的沙盘制作装置
CN113436559A (zh) * 2021-05-19 2021-09-24 吉林大学 一种沙盘动态景观实时显示系统及显示方法
CN113808262A (zh) * 2021-10-08 2021-12-17 合肥安达创展科技股份有限公司 一种基于深度图分析的建筑模型生成系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130278727A1 (en) * 2010-11-24 2013-10-24 Stergen High-Tech Ltd. Method and system for creating three-dimensional viewable video from a single video stream
CN104050859A (zh) * 2014-05-08 2014-09-17 南京大学 可交互数字化立体沙盘系统
CN104134389A (zh) * 2014-08-19 2014-11-05 福建四创软件有限公司 互动式沙盘演示系统及方法
CN105045389A (zh) * 2015-07-07 2015-11-11 深圳水晶石数字科技有限公司 一种互动式沙盘系统的演示方法
CN205121943U (zh) * 2015-09-16 2016-03-30 长春大学 一种基于kinect深度摄影机的交互式模拟仿真沙盘
CN106340064A (zh) * 2016-08-25 2017-01-18 北京大视景科技有限公司 一种混合现实沙盘装置和方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130278727A1 (en) * 2010-11-24 2013-10-24 Stergen High-Tech Ltd. Method and system for creating three-dimensional viewable video from a single video stream
CN104050859A (zh) * 2014-05-08 2014-09-17 南京大学 可交互数字化立体沙盘系统
CN104134389A (zh) * 2014-08-19 2014-11-05 福建四创软件有限公司 互动式沙盘演示系统及方法
CN105045389A (zh) * 2015-07-07 2015-11-11 深圳水晶石数字科技有限公司 一种互动式沙盘系统的演示方法
CN205121943U (zh) * 2015-09-16 2016-03-30 长春大学 一种基于kinect深度摄影机的交互式模拟仿真沙盘
CN106340064A (zh) * 2016-08-25 2017-01-18 北京大视景科技有限公司 一种混合现实沙盘装置和方法

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107545788A (zh) * 2017-10-17 2018-01-05 北京华如科技股份有限公司 基于增强现实显示的作战推演电子沙盘系统
CN107545788B (zh) * 2017-10-17 2019-07-30 北京华如科技股份有限公司 基于增强现实显示的作战推演电子沙盘系统
CN108111834A (zh) * 2017-12-26 2018-06-01 云南视广科技有限公司 一种沙地的构建方法
CN108682257A (zh) * 2018-04-08 2018-10-19 郑州大学 一种流域水生态环境治理效果展示系统
CN108737811A (zh) * 2018-05-25 2018-11-02 卓谨信息科技（常州）有限公司 基于Kinect的沙盒场景互动系统及沙盒场景创建方法
CN109994036A (zh) * 2019-03-27 2019-07-09 深圳市问库信息技术有限公司 一种基于机器学习的沙盘制作方法
CN109856946A (zh) * 2019-03-27 2019-06-07 深圳市问库信息技术有限公司 一种激光全息投影沙盘制作方法
CN110009985A (zh) * 2019-03-27 2019-07-12 深圳市问库信息技术有限公司 一种基于机器学习的沙盘制作装置
CN109856945A (zh) * 2019-03-27 2019-06-07 深圳市问库信息技术有限公司 一种激光全息投影沙盘制作装置
CN110009985B (zh) * 2019-03-27 2020-12-25 深圳市问库信息技术有限公司 一种基于机器学习的沙盘制作装置
CN113436559A (zh) * 2021-05-19 2021-09-24 吉林大学 一种沙盘动态景观实时显示系统及显示方法
CN113436559B (zh) * 2021-05-19 2023-04-14 吉林大学 一种沙盘动态景观实时显示系统及显示方法
CN113808262A (zh) * 2021-10-08 2021-12-17 合肥安达创展科技股份有限公司 一种基于深度图分析的建筑模型生成系统
CN113808262B (zh) * 2021-10-08 2024-05-24 合肥安达创展科技股份有限公司 一种基于深度图分析的建筑模型生成系统

Similar Documents

Publication Publication Date Title
CN106980366A (zh) 地形精准捕捉系统和精细高清投影成像系统
Rematas et al. Soccer on your tabletop
US9117310B2 (en) Virtual camera system
Agarwala et al. Photographing long scenes with multi-viewpoint panoramas
Barnum et al. Dynamic seethroughs: Synthesizing hidden views of moving objects
US9324184B2 (en) Image three-dimensional (3D) modeling
FI2847991T3 (fi) Järjestelmä reaaliaikaisten, tietokoneella luotujen 3d-kohteiden ja elokuvakameran videosyötteen sekoittamiseksi tai yhdistämiseksi
CN106097435A (zh) 一种增强现实拍摄系统及方法
KR20070119018A (ko) 3ｄ 카메라 및 3ｄ비디오를 위한 자동 씬 모델링
Sanches et al. Mutual occlusion between real and virtual elements in augmented reality based on fiducial markers
Cremers Direct methods for 3d reconstruction and visual slam
CN109712247A (zh) 基于混合现实技术的实景训练系统
Böhm Multi-image fusion for occlusion-free façade texturing
CN104217461B (zh) 一种基于深度图模拟实时凹凸效果的视差映射方法
CN110197529A (zh) 室内空间三维重建方法
KR102521221B1 (ko) 단말의 싱글 카메라를 이용한 혼합 현실 제작 방법, 장치 및 컴퓨터 프로그램
Cooke et al. Image-based rendering for teleconference systems
Goorts et al. Free viewpoint video for soccer using histogram-based validity maps in plane sweeping
Kim et al. 3-d virtual studio for natural inter-“acting”
Inamoto et al. Free viewpoint video synthesis and presentation of sporting events for mixed reality entertainment
Vandame et al. Pipeline for real-time video view synthesis
Chen et al. Accurate human body reconstruction for volumetric video
Saito Computer vision for 3DTV and augmented reality
Kang et al. Creating walk-through images from a video sequence of a dynamic scene
Zhuang et al. Perspective‐aware cartoon clips synthesis

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170725