CN104851134A - 虚拟触发与真实物体触发相结合的扩增实境系统及其方法 - Google Patents
虚拟触发与真实物体触发相结合的扩增实境系统及其方法 Download PDFInfo
- Publication number
- CN104851134A CN104851134A CN201510252930.0A CN201510252930A CN104851134A CN 104851134 A CN104851134 A CN 104851134A CN 201510252930 A CN201510252930 A CN 201510252930A CN 104851134 A CN104851134 A CN 104851134A
- Authority
- CN
- China
- Prior art keywords
- augmented reality
- controller
- trigger
- storer
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种虚拟触发与真实物体触发相结合的扩增实境系统及其方法,包括控制器、触发设备、显示设备、摄像头装置、存储器、影像处理模块和影像生成模块,另外还包括有增强现实标记检测和识别模块;其中,所述控制器和存储器双向连接,所述摄像头装置、影像处理模块、存储器依次连接,所述触发设备、影像生成模块、增强现实标记检测和识别模块、显示设备均连接于所述控制器;所述存储器中预置有三维模型库。通过本发明的扩增实境系统,在进行扩增实境时,使用者可以选择直接作用于真实物体上,也可以作用于虚拟界面,操作方式灵活,还能增加触感,使得应用效果更佳,迎合用户多元化的需求。
Description
技术领域
本发明涉及图像处理技术领域,具体涉及一种虚拟触发和真实物体触发相结合的扩增实境系统及其方法。
背景技术
扩增实境(AR,Augmented Reality)是利用虚拟物体对真实场景进行现实增强的技术。扩增实境基于摄像头等采集到的真实物理环境,通过将文本、二维图像、三维模型等虚拟生成的信息标注在显示屏所显示的真实物理环境中的物体上,从而实现对用户身处的现实物理环境的注释、说明,或者增强、强调现实环境的某些效果。在扩增实境应用里,将文本、二维图像、三维模型等虚拟生成的信息输出到显示设备上,点击反应区输出文本、网站、二维图像、三维动画等已经司空见惯,但还无法与真实物理环境结合起来,无法通过触摸及点击真实物理环境或物体触发一系列动作。
发明内容
针对现有技术的不足,本发明旨在提供一种虚拟触发与真实物体触发相结合的扩增实境系统及其方法,使得作用于虚拟界面或真实物理环境均能触发扩增实境的动作,改变用户行为的同时,增加触感,使操作更加便捷,准确,也可更加灵活的控制应用,使应用效果更佳,迎合用户多元化的需求。
为了实现上述目的,本发明采用如下技术方案:
虚拟触发与真实物体触发相结合的扩增实境系统,包括控制器、触发设备、显示设备、摄像头装置、存储器、影像处理模块和影像生成模块,另外还包括有增强现实标记检测和识别模块;其中,所述控制器和存储器双向连接,所述摄像头装置、影像处理模块、存储器依次连接,所述触发设备、影像生成模块、增强现实标记检测和识别模块、显示设备均连接于所述控制器;所述存储器中预置有三维模型库。
需要说明的是,所述控制器、触发设备、显示设备、摄像头装置、存储器、影像处理模块、影像生成模块以及增强现实标记检测和识别模块结合为一体式移动终端。
需要说明的是,所述触发设备和显示设备结合为触控显示屏,分别与控制器和存储器连接。
利用上述扩增实境系统进行扩增实境的方法包括如下步骤:
S1摄像头装置摄取真实物体的图像后,经过影像处理模块的处理后存储于存储器,并显示于触控显示屏上;
S2控制器驱动增强现实标记检测与识别模块对摄取的图像进行增强现实标记的检测与识别,确定触控显示屏上的反应区位置;
S3得到触控显示屏上的反应区位置后,通过以下两种方法中的任意一种触发扩增实境操作:
1)在真实物体上与反应区位置相对应的地方施加遮挡,所述增强现实标记检测与识别模块检测和识别到反应区的改变后,发送信号至控制器,所述控制器从存储器中预置的三维模型库调出相对应的三维模型,通过影像生成模块生成扩增实境后的图像,并输出至所述触控显示屏上;
2)在触控显示屏上,对反应区进行点击,触控显示屏向控制器发送信号,控制器接收信号后从存储器中预置的三维模块库调出相对应的三维模型,通过影像生成模块生成扩增实境后的图像,并输出值所述触控显示屏上。
本发明的有益效果在于:通过本发明的扩增实境系统,在进行扩增实境时,使用者可以选择直接作用于真实物体上,也可以作用于虚拟界面,操作方式灵活,还能增加触感,使得应用效果更佳,迎合用户多元化的需求。
附图说明
图1为本发明的扩增实境系统功能模块连接示意图;
图2为实施例中步骤S1的操作示意图;
图3为实施例中步骤S2操作所得的marker信息展示图;
图4为实施例中步骤S2操作所得的marker信息的另一种展示图;
图5为实施例中步骤S3的方法1)操作及效果示意图。
具体实施方式
以下将结合附图对本发明作进一步的描述,需要说明的是,本实施例以本技术方案为前提,给出了详细的实施方式和具体的操作过程,但本发明的保护范围并不限于本实施例。
如图1所示,虚拟触发与真实物体触发相结合的扩增实境系统,包括控制器、触发设备、显示设备、摄像头装置、存储器、影像处理模块和影像生成模块,另外还包括有增强现实标记(marker)检测和识别模块;其中,所述控制器和存储器双向连接,所述摄像头装置、影像处理模块、存储器依次连接,所述触发设备、影像生成模块、增强现实标记(marker)检测和识别模块、显示设备均连接于所述控制器;所述存储器中预置有三维模型库。
需要说明的是,所述控制器、触发设备、显示设备、摄像头装置、存储器、影像处理模块、影像生成模块以及增强现实标记(marker)检测和识别模块结合为一体式移动终端,如智能手机、平板电脑,在本实施例中,采用智能手机。
需要说明的是,所述触发设备和显示设备结合为触控显示屏,分别与控制器和存储器连接。
利用上述扩增实境系统进行扩增实境的方法包括如下步骤:
S1摄像头装置摄取真实物体的图像后,经过影像处理模块的处理后存储于存储器,并显示于触控显示屏上。如图2所示,本实施例中,真实物体为显示于台式电脑显示器1上的图像2,其中包括一个二维码21和四个不同颜色的按钮22、23、24、25。通过智能手机3上的摄像头装置,对准台式电脑显示器1,摄取得到图像4摄取并显示于智能手机3的触控显示屏5上。
S2控制器驱动增强现实标记检测(marker)与识别模块对摄取的图像进行增强现实标记(marker)的检测与识别,确定触控显示屏上的反应区位置。图3、图4中所显示的带加号的区域即为反应区所在位置。
S3得到触控显示屏上的反应区位置后,通过以下两种方法中的任意一种触发扩增实境操作:
1)在真实物体上,与反应区位置相对应的地方施加遮挡,所述增强现实标记检测与识别模块检测和识别到反应区的改变后,发送信号至控制器,所述控制器从存储器中预置的三维模型库调出相对应的三维模型,通过影像生成模块生成扩增实境后的图像,并输出至所述触控显示屏上。如图4所示,用纸张6遮挡在图像2的按钮22的位置上,原来显示在触控显示屏5的图像4上的二维码改变为三维的二维码图形7,并带有与按钮22相同的颜色,最终实现扩增实境的目的。
2)在触控显示屏上,对反应区进行点击,触控显示屏向控制器发送信号,控制器接收信号后从存储器中预置的三维模块库调出相对应的三维模型,通过影像生成模块生成扩增实境后的图像,并输出值所述触控显示屏上。
对于本领域的技术人员来说,可以根据以上的技术方案和构思,作出各种相应的改变和变形,而所有的这些改变和变形都应该包括在本发明权利要求的保护范围之内。
Claims (4)
1.虚拟触发与真实物体触发相结合的扩增实境系统,包括控制器、触发设备、显示设备、摄像头装置、存储器、影像处理模块和影像生成模块,其特征在于,还包括有增强现实标记检测和识别模块;其中,所述控制器和存储器双向连接,所述摄像头装置、影像处理模块、存储器依次连接,所述触发设备、影像生成模块、增强现实标记检测和识别模块、显示设备均连接于所述控制器;所述存储器中预置有三维模型库。
2.根据权利要求1所述的虚拟触发与真实物体触发相结合的扩增实境系统,其特征在于,所述控制器、触发设备、显示设备、摄像头装置、存储器、影像处理模块、影像生成模块以及增强现实标记检测和识别模块结合为一体式移动终端。
3.根据权利要求1所述的虚拟触发与真实物体触发相结合的扩增实境系统,其特征在于,所述触发设备和显示设备结合为触控显示屏,分别与控制器和存储器连接。
4.一种利用权利要求1-3任一所述的扩增实境系统的扩增实境方法,其特征在于,包括如下步骤:
S1摄像头装置摄取真实物体的图像后,经过影像处理模块的处理后存储于存储器,并显示于触控显示屏上;
S2控制器驱动增强现实标记检测与识别模块对摄取的图像进行增强现实标记的检测与识别,确定触控显示屏上的反应区位置;
S3得到触控显示屏上的反应区位置后,通过以下两种方法中的任意一种触发扩增实境操作:
1)在真实物体上与反应区位置相对应的地方施加遮挡,所述增强现实标记检测与识别模块检测和识别到反应区的改变后,发送信号至控制器,所述控制器从存储器中预置的三维模型库调出相对应的三维模型,通过影像生成模块生成扩增实境后的图像,并输出至所述触控显示屏上;
2)在触控显示屏上,对反应区进行点击,触控显示屏向控制器发送信号,控制器接收信号后从存储器中预置的三维模块库调出相对应的三维模型,通过影像生成模块生成扩增实境后的图像,并输出值所述触控显示屏上。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510252930.0A CN104851134A (zh) | 2015-05-18 | 2015-05-18 | 虚拟触发与真实物体触发相结合的扩增实境系统及其方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510252930.0A CN104851134A (zh) | 2015-05-18 | 2015-05-18 | 虚拟触发与真实物体触发相结合的扩增实境系统及其方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104851134A true CN104851134A (zh) | 2015-08-19 |
Family
ID=53850761
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510252930.0A Pending CN104851134A (zh) | 2015-05-18 | 2015-05-18 | 虚拟触发与真实物体触发相结合的扩增实境系统及其方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104851134A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105760106A (zh) * | 2016-03-08 | 2016-07-13 | 网易(杭州)网络有限公司 | 一种智能家居设备交互方法和装置 |
CN109102312A (zh) * | 2017-06-21 | 2018-12-28 | 华硕电脑股份有限公司 | 广告推播系统及其服务器与电子装置 |
CN109425855A (zh) * | 2017-08-31 | 2019-03-05 | 福特全球技术公司 | 使用模拟传感器数据扩增现实传感器记录 |
US10325406B2 (en) | 2016-11-11 | 2019-06-18 | Industrial Technology Research Institute | Image synthesis method and image synthesis device for virtual object |
CN110226185A (zh) * | 2017-01-30 | 2019-09-10 | 边缘有限责任公司 | 借助电子装置识别物体以用于增强现实引擎的方法 |
CN110675310A (zh) * | 2019-07-02 | 2020-01-10 | 北京达佳互联信息技术有限公司 | 视频处理方法、装置、电子设备及存储介质 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103544724A (zh) * | 2013-05-27 | 2014-01-29 | 华夏动漫集团有限公司 | 一种利用增强现实与卡片识别技术在移动智能终端实现虚拟动漫角色的系统及方法 |
-
2015
- 2015-05-18 CN CN201510252930.0A patent/CN104851134A/zh active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103544724A (zh) * | 2013-05-27 | 2014-01-29 | 华夏动漫集团有限公司 | 一种利用增强现实与卡片识别技术在移动智能终端实现虚拟动漫角色的系统及方法 |
Non-Patent Citations (4)
Title |
---|
宋春雨: "基于移动终端的增强现实装配技术", 《中国优秀硕士学位论文全文数据库工程科技I辑》 * |
张国亮等: "简单视觉标记增强现实系统建模方法研究", 《小型微型计算机系统》 * |
陈靖等: "增强现实技术在PDA上的应用", 《光学技术》 * |
顾鸿: "基于移动终端的增强现实在楼盘展示中的应用研究", 《计算机工程应用技术》 * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105760106A (zh) * | 2016-03-08 | 2016-07-13 | 网易(杭州)网络有限公司 | 一种智能家居设备交互方法和装置 |
CN105760106B (zh) * | 2016-03-08 | 2019-01-15 | 网易(杭州)网络有限公司 | 一种智能家居设备交互方法和装置 |
US10325406B2 (en) | 2016-11-11 | 2019-06-18 | Industrial Technology Research Institute | Image synthesis method and image synthesis device for virtual object |
CN110226185A (zh) * | 2017-01-30 | 2019-09-10 | 边缘有限责任公司 | 借助电子装置识别物体以用于增强现实引擎的方法 |
CN109102312A (zh) * | 2017-06-21 | 2018-12-28 | 华硕电脑股份有限公司 | 广告推播系统及其服务器与电子装置 |
CN109425855A (zh) * | 2017-08-31 | 2019-03-05 | 福特全球技术公司 | 使用模拟传感器数据扩增现实传感器记录 |
CN110675310A (zh) * | 2019-07-02 | 2020-01-10 | 北京达佳互联信息技术有限公司 | 视频处理方法、装置、电子设备及存储介质 |
US11114130B2 (en) | 2019-07-02 | 2021-09-07 | Beijing Dajia Internet Information Technology Co., Ltd. | Method and device for processing video |
US11705160B2 (en) | 2019-07-02 | 2023-07-18 | Beijing Dajia Internet Information Technology Co., Ltd. | Method and device for processing video |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104851134A (zh) | 虚拟触发与真实物体触发相结合的扩增实境系统及其方法 | |
CN102184014B (zh) | 基于移动设备指向的智能家电交互控制方法及装置 | |
CN104199550B (zh) | 一种虚拟键盘操作装置、系统及方法 | |
US20130222427A1 (en) | System and method for implementing interactive augmented reality | |
CN102662559B (zh) | 基于场景识别的虚拟触摸屏技术的设计方法 | |
CN104134229A (zh) | 实时交互的增强现实系统以及方法 | |
CN105491365A (zh) | 基于移动终端的图像处理方法、装置及系统 | |
CN106371585B (zh) | 扩增实境系统及其方法 | |
CN104077094A (zh) | 用于显示动作视频的显示设备和方法 | |
CN108460329A (zh) | 一种基于深度学习检测的人脸手势配合验证方法 | |
CN202159302U (zh) | 具有用户交互和输入功能的增强现实系统 | |
CN106293099A (zh) | 手势识别方法及系统 | |
CN105528081B (zh) | 一种混合现实显示方法、装置及系统 | |
CN204695223U (zh) | 一种基于增强现实的模型展示系统 | |
CN103157282B (zh) | 进行触控游戏的方法及相关娱乐系统 | |
CN204440491U (zh) | 一种具有一键截屏分享功能的扩增实境系统 | |
CN112882576A (zh) | Ar交互方法、装置、电子设备及存储介质 | |
CN115061577A (zh) | 手部投影交互方法、系统及存储介质 | |
CN104656878A (zh) | 手势识别方法、装置及系统 | |
CN102522007B (zh) | 具有暗纹码图的印刷物的识别方法及系统 | |
CN104134070B (zh) | 交互式对象追踪系统及其交互式对象与追踪方法 | |
CN103927093B (zh) | 一种信息处理方法及电子设备 | |
CN105468249A (zh) | 智能互动系统及其控制方法 | |
CN109979014A (zh) | 扩增实境应用产生系统及方法 | |
CN104914985A (zh) | 手势控制方法及系统与视频流处理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
EXSB | Decision made by sipo to initiate substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20150819 |
|
WD01 | Invention patent application deemed withdrawn after publication |