CN111897419A - 一种基于ar技术的智慧展馆导览信息的方法及系统 - Google Patents

一种基于ar技术的智慧展馆导览信息的方法及系统 Download PDF

Info

Publication number
CN111897419A
CN111897419A CN202010647296.1A CN202010647296A CN111897419A CN 111897419 A CN111897419 A CN 111897419A CN 202010647296 A CN202010647296 A CN 202010647296A CN 111897419 A CN111897419 A CN 111897419A
Authority
CN
China
Prior art keywords
exhibition hall
picture
visitors
module
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202010647296.1A
Other languages
English (en)
Inventor
尹利
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Boluo Culture Communication Co ltd
Original Assignee
Hefei Boluo Culture Communication Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Boluo Culture Communication Co ltd filed Critical Hefei Boluo Culture Communication Co ltd
Priority to CN202010647296.1A priority Critical patent/CN111897419A/zh
Publication of CN111897419A publication Critical patent/CN111897419A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及智慧展馆领域，具体为一种基于AR技术的智慧展馆导览信息的方法，包括以下步骤：通过360°全景摄像机获取展厅内的背景画面和展馆内展览物的图像信息，通过热敏摄像机获取展馆内人员活动画面信息；将展馆内的背景画面以及展览物的图像信息，经过模型虚拟生成模拟情景画面，将展馆内人员活动画面通过动态模型生成动态轨迹画面，与模拟情景画面相结合，形成整体的虚拟现场景观；参观者佩戴上智慧展馆所提供的AR眼镜以及耳麦等设备，接收虚拟现场景观，并在参观者眼前进行展示；参观者可根据虚拟现场景观进行模拟化动作演示，结合其他参观者的动态轨迹画面提醒参观者及时避让。

Description

一种基于AR技术的智慧展馆导览信息的方法及系统
技术领域
本发明涉及智慧展馆领域，具体为一种基于AR技术的智慧展馆导览信息的方法及系统。
背景技术
随着社会的发展及国民素质的整体提升，人们对文化体验的追求日益强烈，越来越多的人走进展馆参观学习。云技术、多媒体、大数据等技术逐渐服务于展馆，出现在展馆中。日常的展馆参观观众可以划分为团体和普通散客两类，团体和散客观众的参观时间、参观路线、导览方式和自由度等方面有所不同，展馆的导游模式主要以人工导游为主，导游给参观观众指引并对展馆的展示内容进行解说，降低游客的体验兴趣。
而AR技术即增强现实，是利用计算机生成一种逼真的视、听、力、触和动等感觉的虚拟环境,通过各种传感设备使用户"沉浸"到该环境中,实现用户和环境直接进行自然交互。本发明提供一种方法，可结合此技术对现有的智慧展馆游览参观方式进行改进。
发明内容
本发明的目的在于提供一种基于AR技术的智慧展馆导览信息的方法及系统，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：一种基于AR技术的智慧展馆导览信息的方法，包括以下步骤：
S1：通过360°全景摄像机获取展厅内的背景画面和展馆内展览物的图像信息，通过热敏摄像机获取展馆内人员活动画面信息；
S2：将展馆内的背景画面以及展览物的图像信息，经过模型虚拟生成模拟情景画面，将展馆内人员活动画面通过动态模型生成动态轨迹画面，与模拟情景画面相结合，形成整体的虚拟现场景观；
S3：参观者佩戴上智慧展馆所提供的AR眼镜以及耳麦等设备，接收虚拟现场景观，并在参观者眼前进行展示；
S4：参观者可根据虚拟现场景观进行模拟化动作演示，结合其他参观者的动态轨迹画面提醒参观者及时避让。
优选的，所述AR眼镜包括全息头盔和挂耳式耳麦等配套电子设备。
优选的，所述AR眼镜设备存储在智慧展馆内的存储架上，存储架一侧设置有对应的消毒柜。
优选的，热敏摄像机所捕捉到的展馆内人员活动画面信息既用于生成动态轨迹画面，也可用于提醒参观者相互避让。
本发明还提供一种基于AR技术的智慧展馆导览信息系统，包括图像采集单元、活动对象采集单元、画面构建单元、AR展示单元和语音导览单元；其中：
图像采集单元，包括背景图像采集模块和展览物图像采集模块，通过360°全景摄像机获取展厅内的背景画面和展馆内展览物的图像信息；
活动对象采集单元，通过热敏摄像机获取展馆内人员活动画面信息，包括展馆内的参观人员和工作人员；
画面构建单元，将展馆内的背景画面以及展览物的图像信息，经过模型虚拟生成模拟情景画面，将展馆内人员活动画面通过动态模型生成动态轨迹画面，与模拟情景画面相结合，形成整体的虚拟现场景观；
AR展示单元，接收虚拟现场景观，并在参观者眼前进行展示；
语音导览单元，结合虚拟现场景观，向参观者发出指引性语音解说，并配合对应的背景音乐；发现异常情况时发出提示性语音播报。
优选的，所述图像采集单元和活动对象采集单元连接至画面构建单元，画面构建单元连接至AR展示单元，语音导览单元连接至AR展示单元。
优选的，所述活动对象采集单元包括活动对象图像采集模块、动作捕捉模块和运动预测模块；其中：
活动对象图像采集模块，对展馆内的每一参观人员或者工作人员的整体图像进行获取，包括体型信息和热源移动画面；
动作捕捉模块，对展馆内的参观人员和工作人员的动作进行动态捕捉；
运动预测模块，根据捕捉到的动态画面，预测活动对象的运动轨迹，与使用者自身运动轨迹进行对比，判断是否存在避让必要性。
优选的，所述语音导览单元包括导览指引模块、语音解说模块和避让提示模块；其中：
导览指引模块，结合展馆内展览分布情况，指引参观者移动；
语音解说模块，结合展馆内展览物的信息，向参观者进行解说；
避让提示模块，当存在避让需要时，向参观者发出语音提示。
优选的，当展馆内发生其他紧急状况，如火灾或者人员意外等情况，通过避让提示模块及时进行消息通知。
与现有技术相比，本发明的有益效果是：本发明能够更加真实形象的向参观者展示展览内容，提高了感官视觉体验和趣味性；通过360°全景摄像机获取展厅内的背景画面和展馆内展览物的图像信息，通过热敏摄像机获取展馆内人员活动画面信息；将展馆内的背景画面以及展览物的图像信息，经过模型虚拟生成模拟情景画面，将展馆内人员活动画面通过动态模型生成动态轨迹画面，与模拟情景画面相结合，形成整体的虚拟现场景观；参观者佩戴上智慧展馆所提供的AR眼镜以及耳麦等设备，接收虚拟现场景观，并在参观者眼前进行展示；参观者可根据虚拟现场景观进行模拟化动作演示，结合其他参观者的动态轨迹画面提醒参观者及时避让。
附图说明
图1为本发明的方法流程示意图；
图2为本发明的系统结构示意图。
图中：1、图像采集单元；11、背景图像采集模块；12、展览物图像采集模块；2、活动对象采集单元；21、活动对象图像采集模块；22、动作捕捉模块；23、运动预测模块；3、画面构建单元；31、静态图像构件模块；32、动态图像构件模块；4、AR展示单元；5、语音导览单元；51、导览指引模块；52、语音解说模块；53、避让提示模块。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本发明的描述中，需要说明的是，术语“竖直”、“上”、“下”、“水平”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
在本发明的描述中，还需要说明的是，除非另有明确的规定和限定，术语“设置”、“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。
请参阅图1-2，本发明提供一种技术方案：一种基于AR技术的智慧展馆导览信息的方法，包括以下步骤：
S1：通过360°全景摄像机获取展厅内的背景画面和展馆内展览物的图像信息，通过热敏摄像机获取展馆内人员活动画面信息；
S2：将展馆内的背景画面以及展览物的图像信息，经过模型虚拟生成模拟情景画面，将展馆内人员活动画面通过动态模型生成动态轨迹画面，与模拟情景画面相结合，形成整体的虚拟现场景观；
S3：参观者佩戴上智慧展馆所提供的AR眼镜以及耳麦等设备，接收虚拟现场景观，并在参观者眼前进行展示；
S4：参观者可根据虚拟现场景观进行模拟化动作演示，结合其他参观者的动态轨迹画面提醒参观者及时避让。
进一步的，所述AR眼镜包括全息头盔和挂耳式耳麦等配套电子设备。
进一步的，所述AR眼镜设备存储在智慧展馆内的存储架上，存储架一侧设置有对应的消毒柜。
进一步的，热敏摄像机所捕捉到的展馆内人员活动画面信息既用于生成动态轨迹画面，也可用于提醒参观者相互避让。
本发明还提供一种基于AR技术的智慧展馆导览信息系统，包括图像采集单元1、活动对象采集单元2、画面构建单元3、AR展示单元4和语音导览单元5；其中：
图像采集单元1，包括背景图像采集模块11和展览物图像采集模块12，通过360°全景摄像机获取展厅内的背景画面和展馆内展览物的图像信息；
活动对象采集单元2，通过热敏摄像机获取展馆内人员活动画面信息，包括展馆内的参观人员和工作人员；
画面构建单元3，将展馆内的背景画面以及展览物的图像信息，经过模型虚拟生成模拟情景画面，将展馆内人员活动画面通过动态模型生成动态轨迹画面，与模拟情景画面相结合，形成整体的虚拟现场景观；
AR展示单元4，接收虚拟现场景观，并在参观者眼前进行展示；
语音导览单元5，结合虚拟现场景观，向参观者发出指引性语音解说，并配合对应的背景音乐；发现异常情况时发出提示性语音播报。
进一步的，所述图像采集单元1和活动对象采集单元2连接至画面构建单元3，画面构建单元3连接至AR展示单元4，语音导览单元5连接至AR展示单元4。
进一步的，所述活动对象采集单元2包括活动对象图像采集模块21、动作捕捉模块22和运动预测模块23；其中：
活动对象图像采集模块21，对展馆内的每一参观人员或者工作人员的整体图像进行获取，包括体型信息和热源移动画面；
动作捕捉模块22，对展馆内的参观人员和工作人员的动作进行动态捕捉；
运动预测模块23，根据捕捉到的动态画面，预测活动对象的运动轨迹，与使用者自身运动轨迹进行对比，判断是否存在避让必要性。
进一步的，所述语音导览单元5包括导览指引模块51、语音解说模块52和避让提示模块53；其中：
导览指引模块51，结合展馆内展览分布情况，指引参观者移动；
语音解说模块52，结合展馆内展览物的信息，向参观者进行解说；
避让提示模块53，当存在避让需要时，向参观者发出语音提示。
进一步的，当展馆内发生其他紧急状况，如火灾或者人员意外等情况，通过避让提示模块53及时进行消息通知。
工作原理：S1：通过360°全景摄像机获取展厅内的背景画面和展馆内展览物的图像信息，通过热敏摄像机获取展馆内人员活动画面信息；
S2：将展馆内的背景画面以及展览物的图像信息，经过模型虚拟生成模拟情景画面，将展馆内人员活动画面通过动态模型生成动态轨迹画面，与模拟情景画面相结合，形成整体的虚拟现场景观；
S3：参观者佩戴上智慧展馆所提供的AR眼镜以及耳麦等设备，接收虚拟现场景观，并在参观者眼前进行展示；
S4：参观者可根据虚拟现场景观进行模拟化动作演示，结合其他参观者的动态轨迹画面提醒参观者及时避让。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。

Claims (9)

1.一种基于AR技术的智慧展馆导览信息的方法，其特征在于：包括以下步骤：
S1：通过360°全景摄像机获取展厅内的背景画面和展馆内展览物的图像信息，通过热敏摄像机获取展馆内人员活动画面信息；
S2：将展馆内的背景画面以及展览物的图像信息，经过模型虚拟生成模拟情景画面，将展馆内人员活动画面通过动态模型生成动态轨迹画面，与模拟情景画面相结合，形成整体的虚拟现场景观；
S3：参观者佩戴上智慧展馆所提供的AR眼镜以及耳麦等设备，接收虚拟现场景观，并在参观者眼前进行展示；
S4：参观者可根据虚拟现场景观进行模拟化动作演示，结合其他参观者的动态轨迹画面提醒参观者及时避让。
2.根据权利要求1所述的一种基于AR技术的智慧展馆导览信息的方法，其特征在于：所述AR眼镜包括全息头盔和挂耳式耳麦等配套电子设备。
3.根据权利要求1所述的一种基于AR技术的智慧展馆导览信息的方法，其特征在于：所述AR眼镜设备存储在智慧展馆内的存储架上，存储架一侧设置有对应的消毒柜。
4.根据权利要求1所述的一种基于AR技术的智慧展馆导览信息的方法，其特征在于：热敏摄像机所捕捉到的展馆内人员活动画面信息既用于生成动态轨迹画面，也可用于提醒参观者相互避让。
5.一种基于AR技术的智慧展馆导览信息系统，其特征在于：包括图像采集单元(1)、活动对象采集单元(2)、画面构建单元(3)、AR展示单元(4)和语音导览单元(5)；其中：
图像采集单元(1)，包括背景图像采集模块(11)和展览物图像采集模块(12)，通过360°全景摄像机获取展厅内的背景画面和展馆内展览物的图像信息；
活动对象采集单元(2)，通过热敏摄像机获取展馆内人员活动画面信息，包括展馆内的参观人员和工作人员；
画面构建单元(3)，将展馆内的背景画面以及展览物的图像信息，经过模型虚拟生成模拟情景画面，将展馆内人员活动画面通过动态模型生成动态轨迹画面，与模拟情景画面相结合，形成整体的虚拟现场景观；
AR展示单元(4)，接收虚拟现场景观，并在参观者眼前进行展示；
语音导览单元(5)，结合虚拟现场景观，向参观者发出指引性语音解说，并配合对应的背景音乐；发现异常情况时发出提示性语音播报。
6.根据权利要求5所述的一种基于AR技术的智慧展馆导览信息系统，其特征在于：所述图像采集单元(1)和活动对象采集单元(2)连接至画面构建单元(3)，画面构建单元(3)连接至AR展示单元(4)，语音导览单元(5)连接至AR展示单元(4)。
7.根据权利要求5所述的一种基于AR技术的智慧展馆导览信息系统，其特征在于：所述活动对象采集单元(2)包括活动对象图像采集模块(21)、动作捕捉模块(22)和运动预测模块(23)；其中：
活动对象图像采集模块(21)，对展馆内的每一参观人员或者工作人员的整体图像进行获取，包括体型信息和热源移动画面；
动作捕捉模块(22)，对展馆内的参观人员和工作人员的动作进行动态捕捉；
运动预测模块(23)，根据捕捉到的动态画面，预测活动对象的运动轨迹，与使用者自身运动轨迹进行对比，判断是否存在避让必要性。
8.根据权利要求5所述的一种基于AR技术的智慧展馆导览信息系统，其特征在于：所述语音导览单元(5)包括导览指引模块(51)、语音解说模块(52)和避让提示模块(53)；其中：
导览指引模块(51)，结合展馆内展览分布情况，指引参观者移动；
语音解说模块(52)，结合展馆内展览物的信息，向参观者进行解说；
避让提示模块(53)，当存在避让需要时，向参观者发出语音提示。
9.根据权利要求5所述的一种基于AR技术的智慧展馆导览信息系统，其特征在于：当展馆内发生其他紧急状况，如火灾或者人员意外等情况，通过避让提示模块(53)及时进行消息通知。
CN202010647296.1A 2020-07-07 2020-07-07 一种基于ar技术的智慧展馆导览信息的方法及系统 Withdrawn CN111897419A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010647296.1A CN111897419A (zh) 2020-07-07 2020-07-07 一种基于ar技术的智慧展馆导览信息的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010647296.1A CN111897419A (zh) 2020-07-07 2020-07-07 一种基于ar技术的智慧展馆导览信息的方法及系统

Publications (1)

Publication Number Publication Date
CN111897419A true CN111897419A (zh) 2020-11-06

Family

ID=73191679

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010647296.1A Withdrawn CN111897419A (zh) 2020-07-07 2020-07-07 一种基于ar技术的智慧展馆导览信息的方法及系统

Country Status (1)

Country Link
CN (1) CN111897419A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114792364A (zh) * 2022-04-01 2022-07-26 广亚铝业有限公司 一种基于vr技术的铝型材门窗投影系统及方法
CN116155864A (zh) * 2023-04-23 2023-05-23 南京思德展示科技股份有限公司 智慧展厅的账号调配方法、装置、存储介质及电子设备

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114792364A (zh) * 2022-04-01 2022-07-26 广亚铝业有限公司 一种基于vr技术的铝型材门窗投影系统及方法
CN116155864A (zh) * 2023-04-23 2023-05-23 南京思德展示科技股份有限公司 智慧展厅的账号调配方法、装置、存储介质及电子设备
CN116155864B (zh) * 2023-04-23 2023-07-07 南京思德展示科技股份有限公司 智慧展厅的账号调配方法、装置、存储介质及电子设备

Similar Documents

Publication Publication Date Title
Feldstein et al. A pedestrian simulator for urban crossing scenarios
Schrom-Feiertag et al. Evaluation of indoor guidance systems using eye tracking in an immersive virtual environment
Fisher Virtual environments, personal simulation and telepresence
CN111897419A (zh) 一种基于ar技术的智慧展馆导览信息的方法及系统
CN103531051A (zh) 一种起重机操作的虚拟现实训练方法及模拟器
US20120283997A1 (en) Device for simulating an environment of an infrastructure supervision system
CN109358754B (zh) 一种混合现实头戴显示系统
CN105765971A (zh) 物理位置之间的视频交互
CN111240490A (zh) 基于vr虚拟沉浸及环幕互动的设备绝缘试验培训系统
Nakanishi et al. Transcendent communication: location-based guidance for large-scale public spaces
CN211827862U (zh) 一种多媒体互动电子沙盘
CN103745627A (zh) 一种用于模拟驾驶的三维视景仿真方法及系统
CN114612640A (zh) 一种基于混合现实技术的天基态势仿真系统
CN209183033U (zh) 一种电力安规学习安全仿真培训系统
CN106293087A (zh) 一种信息交互方法及电子设备
CN106791629A (zh) 一种基于ar虚拟现实技术的楼房建造设计系统
CN112102667A (zh) 一种基于vr交互的视频教学系统及方法
CN210609485U (zh) 一种实时互动虚拟现实视景分享系统
KR20210097268A (ko) 가상현실을 이용한 원격 교육 시스템
CN105160970A (zh) 一种远程控制虚实实验系统
CN112037090B (zh) 基于vr技术和6dof姿态跟踪的知识教育系统
CN110806844A (zh) 一种基于多媒体展馆的多主体、多主题展示方法
CN205158748U (zh) 一种远程控制虚实实验装置
Chebbi et al. A collaborative virtual haptic environment for surgical training and tele-mentoring
CN112634695A (zh) 基于mr混合现实技术的物流实训系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20201106

WW01 Invention patent application withdrawn after publication