CN106484118B - 一种基于固定触发源的增强现实交互方法及系统 - Google Patents

一种基于固定触发源的增强现实交互方法及系统 Download PDF

Info

Publication number
CN106484118B
CN106484118B CN201610931178.7A CN201610931178A CN106484118B CN 106484118 B CN106484118 B CN 106484118B CN 201610931178 A CN201610931178 A CN 201610931178A CN 106484118 B CN106484118 B CN 106484118B
Authority
CN
China
Prior art keywords
information
image
interaction
augmented reality
orientation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610931178.7A
Other languages
English (en)
Other versions
CN106484118A (zh
Inventor
李雄杰
陈木华
欧阳巨星
朱昌灿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Arctic Light Technology Co ltd
Original Assignee
Fujian Beijiguang Virtual Visual Display Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujian Beijiguang Virtual Visual Display Technology Ltd filed Critical Fujian Beijiguang Virtual Visual Display Technology Ltd
Priority to CN201610931178.7A priority Critical patent/CN106484118B/zh
Publication of CN106484118A publication Critical patent/CN106484118A/zh
Application granted granted Critical
Publication of CN106484118B publication Critical patent/CN106484118B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Abstract

本发明涉及信息技术领域,尤其涉及一种基于固定触发源的增强现实交互方法及系统。所述方法包括:预设映射表存储有第一图像的第一图像信息和与所述第一图像信息对应的多个的互动信息组;所述第一互动信息组包括第一方位信息和与所述第一方位信息对应的第一互动信息;获取第二图像,若识别到所述第二图像的特征点与第一图像的特征点相匹配,获取与第一图像信息对应的互动信息组中的第二互动信息组;从第二互动信息组中提取方位相同的第二互动信息;通过增强现实将第二互动信息与所述第二图像叠加以得到增强现实信息。结合方位信息,使得增强现实后互动信息在展示时的方位也是不同的,提高用户体验以及应用在教学领域时起到促进教学互动的作用。

Description

一种基于固定触发源的增强现实交互方法及系统
技术领域
本发明涉及信息技术领域,尤其涉及一种基于固定触发源的增强现实交互方法及系统。
背景技术
增强现实(Augmented Reality,简称AR)是国外众多知名大学和研究机构的研究热点之一。AR技术不仅在与VR技术(虚拟现实)相类似的应用领域,诸如尖端武器、飞行器的研制与开发、数据模型的可视化、虚拟训练、娱乐与艺术等领域具有广泛的应用,而且由于其具有能够对真实环境进行增强显示输出的特性,在医疗研究与解剖训练、精密仪器制造和维修、军用飞机导航、工程设计和远程机器人控制等领域,具有比VR技术更加明显的优势。
申请号为201510785428.6的中国专利文件公开了一种基于增强现实技术实现互动的方法、系统和终端,其中所述方法为:服务器接收第一终端上传的第一图像和互动信息,保存第一图像中的第一图像信息和互动信息;第二终端获取第二图像,并实时提取第二图像信息,将第二图像信息发送至服务器;服务器查找与第二图像信息相匹配的第一图像信息和互动信息,以及将互动信息返回至第二终端;第二终端接通过增强现实将互动信息与第二图像叠加以获得增强现实信息;以及,第二终端显示增强现实信息。然而上述的方法在更换不同互动信息时需要更换对应的图像,操作较为复杂,并且互动内容单一,用户体验不足。
发明内容
本发明所要解决的技术问题是:提供一种操作简单的基于固定触发源的增强现实交互方法及系统。
为了解决上述技术问题,本发明采用的技术方案为:
一种基于固定触发源的增强现实交互方法,包括:
预设映射表,所述映射表存储有第一图像的第一图像信息和与所述第一图像信息对应的多个的互动信息组;所述第一图像信息包括第一图像的特征点和方位信息;所述互动信息组包括第一互动信息组,所述第一互动信息组包括第一方位信息和与所述第一方位信息对应的第一互动信息;所述第一互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;
获取第二图像,所述第二图像具有第二图像信息,所述第二图像信息包括第二图像的特征点和第二方位信息;
若识别到所述第二图像的特征点与第一图像的特征点相匹配,获取与第一图像信息对应的互动信息组;
获取互动信息组中的第二互动信息组;所述第二互动信息组包括第三方位信息和与所述第三方位信息对应的第二互动信息;
从第二互动信息组中提取与第二图像信息中的第二方位信息的方位相同的第三方位信息对应的第二互动信息;
通过增强现实将与第二方位信息的方位相同的第三方位信息对应的第二互动信息与所述第二图像叠加以得到增强现实信息。
本发明采用的另一技术方案为:
一种基于固定触发源的增强现实交互系统,包括:预设模块、第一获取模块、第二获取模块、第三获取模块、提取模块和增强现实模块;
所述预设模块,用于预设映射表,所述映射表存储有第一图像的第一图像信息和与所述第一图像信息对应的多个的互动信息组;所述第一图像信息包括第一图像的特征点和方位信息;所述互动信息组包括第一互动信息组,所述第一互动信息组包括第一方位信息和与所述第一方位信息对应的第一互动信息;所述第一互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;
所述第一获取模块,用于获取第二图像,所述第二图像具有第二图像信息,所述第二图像信息包括第二图像的特征点和第二方位信息;
所述第二获取模块,用于若识别到所述第二图像的特征点与第一图像的特征点相匹配,获取与第一图像信息对应的互动信息组;
所述第三获取模块,用于获取互动信息组中的第二互动信息组;所述第二互动信息组包括第三方位信息和与所述第三方位信息对应的第二互动信息;
所述提取模块,用于从第二互动信息组中提取与第二图像信息中的第二方位信息的方位相同的第三方位信息对应的第二互动信息;
所述增强现实模块,用于通过增强现实将与第二方位信息的方位相同的第三方位信息对应的第二互动信息与所述第二图像叠加以得到增强现实信息。
本发明的有益效果在于:本发明提供的基于固定触发源的增强现实交互方法及系统,采用第一图像作为固定触发源,并且该固定触发源与多个互动信息组相关联,通过一个触发源即可触发多个互动信息组,在多个互动信息组之间切换时无需变更触发源即可实现快速变更,操作简单。结合方位信息,根据接收到的图像信息中的方位信息获取方位相同的互动信息,使得增强现实后可根据方位展现,不同方位获取到的图像信息,互动信息在展示时的方位也是不同的,提高用户体验以及应用在教学领域时起到促进教学互动的作用。
附图说明
图1为本发明的一种基于固定触发源的增强现实交互方法的步骤流程图;
图2为本发明的一种基于固定触发源的增强现实交互系统的结构示意图;
图3为本发明的一种基于固定触发源的增强现实交互系统的实施示意图;
图4为本发明的一种基于固定触发源的增强现实交互系统的示意图;
标号说明:
1、预设模块;2、第一获取模块;3、第二获取模块;4、第三获取模块;5、提取模块;6、增强现实模块;7、触发区域;8、第一移动终端;9、第二移动终端。
具体实施方式
为详细说明本发明的技术内容、所实现目的及效果,以下结合实施方式并配合附图予以说明。
本发明最关键的构思在于:采用一对多的触发方式,使操作更为简单,并且结合方位信息,提高用户体验以及促进教学互动。
请参照图1,本发明提供的一种基于固定触发源的增强现实交互方法,包括:
预设映射表,所述映射表存储有第一图像的第一图像信息和与所述第一图像信息对应的多个的互动信息组;所述第一图像信息包括第一图像的特征点和方位信息;所述互动信息组包括第一互动信息组,所述第一互动信息组包括第一方位信息和与所述第一方位信息对应的第一互动信息;所述第一互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;
获取第二图像,所述第二图像具有第二图像信息,所述第二图像信息包括第二图像的特征点和第二方位信息;
若识别到所述第二图像的特征点与第一图像的特征点相匹配,获取与第一图像信息对应的互动信息组;
获取互动信息组中的第二互动信息组;所述第二互动信息组包括第三方位信息和与所述第三方位信息对应的第二互动信息;
从第二互动信息组中提取与第二图像信息中的第二方位信息的方位相同的第三方位信息对应的第二互动信息;
通过增强现实将与第二方位信息的方位相同的第三方位信息对应的第二互动信息与所述第二图像叠加以得到增强现实信息。
从上述描述可知,本发明的有益效果在于:本发明提供的基于固定触发源的增强现实交互方法,采用第一图像作为固定触发源,并且该固定触发源与多个互动信息组相关联,通过一个触发源即可触发多个互动信息组,在多个互动信息组之间切换时无需变更触发源即可实现快速变更,操作简单。结合方位信息,根据接收到的图像信息中的方位信息获取方位相同的互动信息,使得增强现实后可根据方位展现,不同方位获取到的图像信息,互动信息在展示时的方位也是不同的,提高用户体验以及应用在教学领域时起到促进教学互动的作用。
进一步的,还包括显示步骤:显示所述增强现实信息。
由上述描述可知,将增强现实后得到的增强现实信息进行显示,可直观地观察到获取到的互动信息,并且更具有画面感。
进一步的,还包括操作步骤:对所述增强现实信息进行操作;所述操作包括查看、评论、回复、收藏中的一种或几种。
由上述描述可知,对所述增强现实信息可进行查看、评论、回复、收藏中的一种或几种,例如进行评论后,所述增强现实信息会更新为评论与原增强显示信息叠加生成新的增强现实信息并显示,促进互动交流。
进一步的,所述第二图像的特征点与所述第一图像的特征点相匹配的判断方法为:
获取预设数量的第二图像特征点的灰度值;
判断第一图像的特征点中是否存在与所述第二图像特征点的灰度值相同的图像特征点,若存在,则记录相同图像特征点的数量;
根据记录的相同图像特征点的数量除以第二图像特征点的预设数量,计算得到所述第二图像的特征点与所述第一图像的特征点的相似度;
若所述相似度大于预设的相似度阈值,则判定所述第二图像的特征点与所述第一图像的特征点相匹配。
由上述描述可知,本发明采用上述方法来判断两个图像是否匹配,具体为根据计算得到的两个图像的相似度,以及两个图像的相似度是否大于预设的相似度阈值的判断,当相似度大于预设的相似度阈值(通常预设的相似度阈值为99%),则可以认定所述第二图像的特征点与所述第一图像的特征点是相匹配,还可以使用其他的计算方法来计算两个图像的相似度。
参阅图2,本发明还提供的一种基于固定触发源的增强现实交互系统,包括:预设模块1、第一获取模块2、第二获取模块3、第三获取模块4、提取模块5和增强现实模块6;
所述预设模块1,用于预设映射表,所述映射表存储有第一图像的第一图像信息和与所述第一图像信息对应的多个的互动信息组;所述第一图像信息包括第一图像的特征点和方位信息;所述互动信息组包括第一互动信息组,所述第一互动信息组包括第一方位信息和与所述第一方位信息对应的第一互动信息;所述第一互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;
所述第一获取模块2,用于获取第二图像,所述第二图像具有第二图像信息,所述第二图像信息包括第二图像的特征点和第二方位信息;
所述第二获取模块3,用于若识别到所述第二图像的特征点与第一图像的特征点相匹配,获取与第一图像信息对应的互动信息组;
所述第三获取模块4,用于获取互动信息组中的第二互动信息组;所述第二互动信息组包括第三方位信息和与所述第三方位信息对应的第二互动信息;
所述提取模块5,用于从第二互动信息组中提取与第二图像信息中的第二方位信息的方位相同的第三方位信息对应的第二互动信息;
所述增强现实模块6,用于通过增强现实将与第二方位信息的方位相同的第三方位信息对应的第二互动信息与所述第二图像叠加以得到增强现实信息。
从上述描述可知,本发明的有益效果在于:本发明提供的基于固定触发源的增强现实交互系统,采用第一图像作为固定触发源,并且该固定触发源与多个互动信息组相关联,通过一个触发源即可触发多个互动信息组,在多个互动信息组之间切换时无需变更触发源即可实现快速变更,操作简单。结合方位信息,根据接收到的图像信息中的方位信息获取方位相同的互动信息,使得增强现实后可根据方位展现,不同方位获取到的图像信息,互动信息在展示时的方位也是不同的,提高用户体验以及应用在教学领域时起到促进教学互动的作用。
进一步的,还包括显示模块,用于显示所述增强现实信息。
由上述描述可知,将增强现实后得到的增强现实信息进行显示,可直观地观察到获取到的互动信息,并且更具有画面感。
进一步的,还包括操作模块,用于对所述增强现实信息进行操作;所述操作包括查看、评论、回复、收藏中的一种或几种。
由上述描述可知,对所述增强现实信息可进行查看、评论、回复、收藏中的一种或几种,例如进行评论后,所述增强现实信息会更新为评论与原增强显示信息叠加生成新的增强现实信息并显示,促进互动交流。
进一步的,所述获取模块包括获取单元、判断单元、计算单元和判定单元;
所述获取单元,用于获取预设数量的第二图像特征点的灰度值;
所述判断单元,用于判断第一图像的特征点中是否存在与所述第二图像特征点的灰度值相同的图像特征点,若存在,则记录相同图像特征点的数量;
所述计算单元,用于根据记录的相同图像特征点的数量除以第二图像特征点的预设数量,计算得到所述第二图像的特征点与所述第一图像的特征点的相似度;
所述判定单元,用于若所述相似度大于预设的相似度阈值,则判定所述第二图像的特征点与所述第一图像的特征点相匹配。
由上述描述可知,本发明采用上述方法来判断两个图像是否匹配,具体为根据计算得到的两个图像的相似度,以及两个图像的相似度是否大于预设的相似度阈值的判断,当相似度大于预设的相似度阈值(通常预设的相似度阈值为99%),则可以认定所述第二图像的特征点与所述第一图像的特征点是相匹配,还可以使用其他的计算方法来计算两个图像的相似度。
请参照图1-4,本发明的实施例一为:
本发明提供的基于固定触发源的增强现实交互方法主要应用在教学领域,关于实施例的场景说明如下:
1、在教室里,老师的讲台与学生的课桌一起沿圆周呈环形排布,在环形的中央位置的地面上设有触发区域7,在触发区域7上设有触发图像;触发图像特征程度建议达到5颗星(即通过高通Vuforia来判定),触发图像的制作方式不限,触发图像固定方式不限(甚至可设计为可灵活拆装方式),触发图像尺寸根据教室实际空间确定,一般在直径2m-10m之间,触发图像以圆形为最佳,但采用其它形式也可以。该触发图像是固定的,即为固定触发源。采用任意一图像作为固定触发源,并且该固定触发源与多个互动信息组相关联,通过一个触发源即可触发多个互动信息组,在多个互动信息组之间切换时无需变更触发源即可实现快速变更,操作简单。
2、老师的讲台上和学生的课桌上均摆放有移动终端,如ipad,老师的移动终端为第一移动终端8,学生的移动终端为第二移动终端9,第一移动终端8和第二移动终端9的摄像头朝向触发区域7,老师的讲台高度与学生的课桌的高度可能都不相同,桌面放置平板电脑或显示器(显示器+摄像头+主机),也可以是AR眼镜,需确保触发图像全部在摄像头的捕捉范围内、需确保触发图像显像清晰,且触发图像的远端至摄像头连线与地面夹角建议不小于10°。
本发明提供的基于固定触发源的增强现实交互方法可独立在一个设备端上实施,如下以学生的移动终端的操作为例,具体步骤如下:
步骤1、预设映射表,所述映射表存储有第一图像的第一图像信息和与所述第一图像信息对应的多个的互动信息组;所述第一图像信息包括第一图像的特征点和方位信息;所述互动信息组包括第一互动信息组,所述第一互动信息组包括第一方位信息和与所述第一方位信息对应的第一互动信息;所述第一互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;
在本实施方式中,事先开启学生的移动终端的摄像头,将学生的移动终端的摄像头面对的事物拍摄下来,拍摄的照片作为第一图像,将多角度拍摄的每一个角度的第一图像作为包含方位信息的第一图像信息,其中拍摄的照片中的物体、轮廓、亮度等作为第一图像的特征点,也可以是灰度。所述第一互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;将文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种不同的组合方式作为互动信息组,例如动画特效作为第一互动信息组。将上述的第一图像的第一图像信息和与所述第一图像信息对应的多个的互动信息组存储在预设的映射表中,该映射表存储在学生的移动终端的存储器中。
步骤2、获取第二图像,所述第二图像具有第二图像信息,所述第二图像信息包括第二图像的特征点和第二方位信息;
在本实施方式中,再次通过学生的移动终端的摄像头面对的事物拍摄下来,获取到第二图像,并且该移动终端能够获取到该第二图像的第二图像信息。
步骤3、若识别到所述第二图像的特征点与第一图像的特征点相匹配,获取与第一图像信息对应的互动信息组;
在本实施方式中,所述第二图像的特征点与所述第一图像的特征点相匹配的判断方法为:
(1)获取预设数量的第二图像特征点的灰度值;
(2)判断第一图像的特征点中是否存在与所述第二图像特征点的灰度值相同的图像特征点,若存在,则记录相同图像特征点的数量;
(3)根据记录的相同图像特征点的数量除以第二图像特征点的预设数量,计算得到所述第二图像的特征点与所述第一图像的特征点的相似度;
(4)若所述相似度大于预设的相似度阈值,则判定所述第二图像的特征点与所述第一图像的特征点相匹配。
本发明采用上述方法来判断两个图像是否匹配,具体为根据计算得到的两个图像的相似度,以及两个图像的相似度是否大于预设的相似度阈值的判断,当相似度大于预设的相似度阈值(通常预设的相似度阈值为99%),则可以认定所述第二图像的特征点与所述第一图像的特征点是相匹配,还可以使用其他的计算方法来计算两个图像的相似度。
步骤4、获取互动信息组中的第二互动信息组;所述第二互动信息组包括第三方位信息和与所述第三方位信息对应的第二互动信息;
在本实施方式中,第二互动信息组为文字信息;由多角度来展示的每一个角度的文字信息作为包含第三方位信息的第二互动信息。
步骤5、从第二互动信息组中提取与第二图像信息中的第二方位信息的方位相同的第三方位信息对应的第二互动信息;
在本实施方式中,若获取第二图像时是从第二图像的正北方向获取的,那么上述的第二方位信息即为正北方向,此时从第二互动信息组中获取正北方向(即为第三方位信息)的文字信息。
步骤6、通过增强现实将与第二方位信息的方位相同的第三方位信息对应的第二互动信息与所述第二图像叠加以得到增强现实信息。
在本实施方式中,通过增强现实将获取正北方向(即为第三方位信息)的文字信息与所述第二图像叠加以得到增强现实信息。再通过移动终端显示该增强现实信息。例如在该同学的移动终端上可以看到动物长颈鹿的正面,而从正南方向获取的触发图像的同学则在其移动终端上看到的是动物长颈鹿的背面,在教学过程中,老师可以直接提问坐在长劲鹿背面位置上的同学,增加老师与学生之间的交互。
在上述实施例的基础上进一步提升移动终端之间的交互,具体如下:
老师的移动终端优先获取触发源,经过触发源匹配后,进入教学程序,老师在其移动终端选择一种类型的课程,即为选择一种互动信息组,选择完毕后,老师的移动终端会发送一同步控制信号给多个学生的移动终端,此时多个学生的移动终端同步开启,并驱动获取触发源进入教学程序,系统会直接进入老师选择的那一种互动信息组,如动物。老师的移动终端可对每一个学生的移动终端实现独立控制,每一个学生的移动终端上显示的内容会根据其获取不同方位的触发源来显示不同方位的增强现实,例如在正北方向获取的触发图像的同学的移动终端上看到的是动物长颈鹿的正面,那么从正南方向获取的触发图像的同学则在其移动终端上看到的是动物长颈鹿的背面,在教学过程中,老师可以直接提问坐在长劲鹿背面位置上的同学,增加老师与学生之间的交互。结合方位信息,根据接收到的图像信息中的方位信息获取方位相同的互动信息,使得增强现实后可根据方位展现,不同方位获取到的图像信息,互动信息在展示时的方位也是不同的,提高用户体验以及应用在教学领域时起到促进教学互动的作用。
上述方法还包括操作步骤:对所述增强现实信息进行操作;所述操作包括查看、评论、回复、收藏中的一种或几种。对所述增强现实信息可进行查看、评论、回复、收藏中的一种或几种,例如学生的移动终端可进行评论后,所述增强现实信息会更新为评论与原增强显示信息叠加生成新的增强现实信息并显示,以及发送反馈至老师的移动终端,从而促进互动交流。
综上所述,本发明提供的一种基于固定触发源的增强现实交互方法及系统,采用第一图像作为固定触发源,并且该固定触发源与多个互动信息组相关联,通过一个触发源即可触发多个互动信息组,在多个互动信息组之间切换时无需变更触发源即可实现快速变更,操作简单。结合方位信息,根据接收到的图像信息中的方位信息获取方位相同的互动信息,使得增强现实后可根据方位展现,不同方位获取到的图像信息,互动信息在展示时的方位也是不同的,提高用户体验以及应用在教学领域时起到促进教学互动的作用。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等同变换,或直接或间接运用在相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (8)

1.一种基于固定触发源的增强现实交互方法,应用于教学系统,所述教学系统包括第一移动终端、第二移动终端和触发区域,其特征在于,所述第一移动终端和两个以上的第二移动终端呈环形排布,所述触发区域设置在环形中央位置的地面上,在触发区域上设有触发图像,第一移动终端和第二移动终端的摄像头朝向触发区域且触发区域上的触发图像在摄像头的捕捉范围内,触发图像的远端至摄像头连线与地面夹角不小于10°;
所述基于固定触发源的增强现实交互方法包括:
第一移动终端和第二移动终端均预设映射表,所述映射表存储有第一图像的第一图像信息和与所述第一图像信息对应的多个的互动信息组;所述第一图像信息包括第一图像的特征点和方位信息;所述互动信息组包括第一互动信息组,所述第一互动信息组包括第一方位信息和与所述第一方位信息对应的第一互动信息;所述第一互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;
第一移动终端和第二移动终端分别获取第二图像,所述第二图像具有第二图像信息,所述第二图像信息包括第二图像的特征点和第二方位信息;
若识别到所述第二图像的特征点与第一图像的特征点相匹配,获取与第一图像信息对应的互动信息组;
获取互动信息组中的第二互动信息组;所述第二互动信息组包括第三方位信息和与所述第三方位信息对应的第二互动信息;
从第二互动信息组中提取与第二图像信息中的第二方位信息的方位相同的第三方位信息对应的第二互动信息;
通过增强现实将与第二方位信息的方位相同的第三方位信息对应的第二互动信息与所述第二图像叠加以得到增强现实信息;
所述基于固定触发源的增强现实交互方法还包括:
第一移动终端获取触发源,经过触发源匹配后,进入教学程序,选择一种类型的课程,即为选择一种互动信息组,选择完毕后,会发送一同步控制信号给两个以上的第二移动终端,两个以上的第二移动终端接收到同步控制信号后同步开启,并驱动获取触发源进入教学程序,两个以上的第二移动终端会直接进入第一移动终端选择的那一种互动信息组。
2.根据权利要求1所述的基于固定触发源的增强现实交互方法,其特征在于,还包括显示步骤:显示所述增强现实信息。
3.根据权利要求1所述的基于固定触发源的增强现实交互方法,其特征在于,还包括操作步骤:对所述增强现实信息进行操作。
4.根据权利要求1所述的基于固定触发源的增强现实交互方法,其特征在于,所述第二图像的特征点与所述第一图像的特征点相匹配的判断方法为:
获取预设数量的第二图像特征点的灰度值;
判断第一图像的特征点中是否存在与所述第二图像特征点的灰度值相同的图像特征点,若存在,则记录相同图像特征点的数量;
根据记录的相同图像特征点的数量除以第二图像特征点的预设数量,计算得到所述第二图像的特征点与所述第一图像的特征点的相似度;
若所述相似度大于预设的相似度阈值,则判定所述第二图像的特征点与所述第一图像的特征点相匹配。
5.一种基于固定触发源的增强现实交互系统,其特征在于,包括:预设模块、第一获取模块、第二获取模块、第三获取模块、提取模块和增强现实模块;
所述预设模块,用于预设映射表,所述映射表存储有第一图像的第一图像信息和与所述第一图像信息对应的多个的互动信息组;所述第一图像信息包括第一图像的特征点和方位信息;所述互动信息组包括第一互动信息组,所述第一互动信息组包括第一方位信息和与所述第一方位信息对应的第一互动信息;所述第一互动信息包括文字信息、视频信息、图片信息、音频信息、动画特效中的一种或几种;
所述第一获取模块,用于获取第二图像,所述第二图像具有第二图像信息,所述第二图像信息包括第二图像的特征点和第二方位信息;
所述第二获取模块,用于若识别到所述第二图像的特征点与第一图像的特征点相匹配,获取与第一图像信息对应的互动信息组;
所述第三获取模块,用于获取互动信息组中的第二互动信息组;所述第二互动信息组包括第三方位信息和与所述第三方位信息对应的第二互动信息;
所述提取模块,用于从第二互动信息组中提取与第二图像信息中的第二方位信息的方位相同的第三方位信息对应的第二互动信息;
所述增强现实模块,用于通过增强现实将与第二方位信息的方位相同的第三方位信息对应的第二互动信息与所述第二图像叠加以得到增强现实信息。
6.根据权利要求5所述的基于固定触发源的增强现实交互系统,其特征在于,还包括显示模块,用于显示所述增强现实信息。
7.根据权利要求5所述的基于固定触发源的增强现实交互系统,其特征在于,还包括操作模块,用于对所述增强现实信息进行操作。
8.根据权利要求5所述的基于固定触发源的增强现实交互系统,其特征在于,所述第二获取模块包括获取单元、判断单元、计算单元和判定单元;
所述获取单元,用于获取预设数量的第二图像特征点的灰度值;
所述判断单元,用于判断第一图像的特征点中是否存在与所述第二图像特征点的灰度值相同的图像特征点,若存在,则记录相同图像特征点的数量;
所述计算单元,用于根据记录的相同图像特征点的数量除以第二图像特征点的预设数量,计算得到所述第二图像的特征点与所述第一图像的特征点的相似度;
所述判定单元,用于若所述相似度大于预设的相似度阈值,则判定所述第二图像的特征点与所述第一图像的特征点相匹配。
CN201610931178.7A 2016-10-24 2016-10-24 一种基于固定触发源的增强现实交互方法及系统 Active CN106484118B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610931178.7A CN106484118B (zh) 2016-10-24 2016-10-24 一种基于固定触发源的增强现实交互方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610931178.7A CN106484118B (zh) 2016-10-24 2016-10-24 一种基于固定触发源的增强现实交互方法及系统

Publications (2)

Publication Number Publication Date
CN106484118A CN106484118A (zh) 2017-03-08
CN106484118B true CN106484118B (zh) 2020-01-14

Family

ID=58272844

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610931178.7A Active CN106484118B (zh) 2016-10-24 2016-10-24 一种基于固定触发源的增强现实交互方法及系统

Country Status (1)

Country Link
CN (1) CN106484118B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107015642A (zh) * 2017-03-13 2017-08-04 武汉秀宝软件有限公司 一种基于增强现实的数据同步方法和系统
CN107395671A (zh) * 2017-06-12 2017-11-24 深圳增强现实技术有限公司 远程协助方法、系统及增强现实终端
CN109902193B (zh) * 2019-01-17 2024-03-19 平安科技(深圳)有限公司 小区搜索方法、装置、设备及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101197045A (zh) * 2007-12-17 2008-06-11 电子科技大学 一种图像立体匹配方法及其装置
CN102142005A (zh) * 2010-01-29 2011-08-03 株式会社泛泰 提供增强现实的系统、终端、服务器及方法
CN103903249A (zh) * 2012-12-27 2014-07-02 纽海信息技术(上海)有限公司 图像匹配系统及方法
CN105005798A (zh) * 2014-04-24 2015-10-28 南京理工大学 一种基于局部相似结构统计匹配的目标识别方法
CN105323252A (zh) * 2015-11-16 2016-02-10 上海璟世数字科技有限公司 基于增强现实技术实现互动的方法、系统和终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101197045A (zh) * 2007-12-17 2008-06-11 电子科技大学 一种图像立体匹配方法及其装置
CN102142005A (zh) * 2010-01-29 2011-08-03 株式会社泛泰 提供增强现实的系统、终端、服务器及方法
CN103903249A (zh) * 2012-12-27 2014-07-02 纽海信息技术(上海)有限公司 图像匹配系统及方法
CN105005798A (zh) * 2014-04-24 2015-10-28 南京理工大学 一种基于局部相似结构统计匹配的目标识别方法
CN105323252A (zh) * 2015-11-16 2016-02-10 上海璟世数字科技有限公司 基于增强现实技术实现互动的方法、系统和终端

Also Published As

Publication number Publication date
CN106484118A (zh) 2017-03-08

Similar Documents

Publication Publication Date Title
CN106873768B (zh) 一种增强现实方法、装置及系统
US8432414B2 (en) Automated annotation of a view
EP2496196B1 (en) Representing visual images by alternative senses
CN106683195B (zh) 一种基于室内定位的ar场景渲染方法
CN109865289B (zh) 一种基于增强现实技术的实景环境娱乐系统及其方法
US20220245859A1 (en) Data processing method and electronic device
CN108389249B (zh) 一种多兼容性的vr/ar空间教室及其构建方法
CN106484118B (zh) 一种基于固定触发源的增强现实交互方法及系统
CN106652590A (zh) 教学方法、教学识别体及教学系统
JP6822410B2 (ja) 情報処理システム及び情報処理方法
US20220375358A1 (en) Class system, viewing terminal, information processing method, and program
CN111242704A (zh) 用于在现实场景中叠加直播人物影像的方法和电子设备
CN105894571B (zh) 一种处理多媒体信息的方法及装置
CN113470190A (zh) 场景显示方法及装置、设备、车辆、计算机可读存储介质
CN106445169A (zh) 一种基于动态触发源的增强现实交互系统
KR20140126529A (ko) 현실 객체의 물리적 동작-증강 현실 상호작용형 전자책 시스템 및 구현 방법
CN112288876A (zh) 远距离ar识别服务器及系统
CN111918114A (zh) 图像显示方法、装置、显示设备及计算机可读存储介质
CN106341621A (zh) 一种增强现实交互方法、系统及装置
CN111602391A (zh) 用于根据物理环境定制合成现实体验的方法和设备
CN210804322U (zh) 基于5g及mr技术的虚实场景操作平台
JP6680886B2 (ja) マルチメディア情報を表示する方法及び装置
KR20190066660A (ko) 행사 실시간 스트리밍 방송 시스템
JP7417827B2 (ja) 画像編集方法、画像表示方法、画像編集システム、及び画像編集プログラム
TW201413575A (zh) 互動式模擬球體顯示系統

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address

Address after: Room 601-5, 6th Floor, Building B8, Northwest Building 5, at the intersection of Century Avenue and Baocai Road, Yandu District, Yancheng City, Jiangsu Province, 224000

Patentee after: Jiangsu Arctic Light Technology Co.,Ltd.

Address before: Room 127, Building 3, Area C, Fuzhou Software Park, No. 89, Software Avenue, Gulou District, Fuzhou City, Fujian Province, 350000

Patentee before: FUJIAN NORTHERN LIGHT VIRTUAL VISUAL EXHIBITION TECHNOLOGY CO.,LTD.

CP03 Change of name, title or address