CN112967641B - 一种基于ar技术的景区的自动识别讲解及增强展示方法 - Google Patents
一种基于ar技术的景区的自动识别讲解及增强展示方法 Download PDFInfo
- Publication number
- CN112967641B CN112967641B CN202011136856.3A CN202011136856A CN112967641B CN 112967641 B CN112967641 B CN 112967641B CN 202011136856 A CN202011136856 A CN 202011136856A CN 112967641 B CN112967641 B CN 112967641B
- Authority
- CN
- China
- Prior art keywords
- scenic spot
- spot
- scenic
- information
- spots
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/35—Categorising the entire scene, e.g. birthday party or wedding scene
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于AR技术的景区的自动识别讲解及增强展示方法，景区负责人负责维护景区用于识别的景点信息，通过互联网数据采集技术实时抓取景点基本信息；技术人员通过AI机器学习的方式训练景点分类的深度模型；在管理平台干预景点的信息，包含景点的位置，播报的音频，简介等；手机端通过热更新的方式保持识别的框架识别的准确性；手机端获取当前相机显示的一张图片同过模型特征点进行匹配；匹配成功后获取景点的id，并与景区需识别的景点匹配，获取景点信息后，如果包含音频文件则播放音频，如果没有采用智能语音播报景点简介。本发明通过AR技术实现对景区中景观的识别，实现对识别物的资料及影像增强展示，大大的提升了游客的观赏体验以及历史人文信息的传播效果。
Description
技术领域
本发明属于AR景区识别处理技术领域，尤其涉及一种基于AR技术的景区自动识别讲解及增强显示方法。
背景技术
近年来，随着人们的旅游需求从观光游向文化体验深度游转变，文化体验深度游的一个重要表现即游客对旅游目的地文化底蕴了解的需求更为迫切。这些改变使得旅游企业对于当地文化的传播更为重视。现有的传播多以Ibs+语音讲解的方式、设备租赁的方式或者手机扫描二维码的方式来进行，对于人的的感官感受和体验性都不是很高，由此借助AR技术提升感官和体验性也成为了目前的一个重要需求。
另外，智慧景区建设是旅游景区目前的发展趋势，是景区未来的发展之路，是提升景区综合素质、核心竞争力的重大举措，同时也是新形势下旅游景区发展的重大战略选择。通过借助AR等技术来展示和宣传景区的历史人文信息也成为了目前的一个亟待解决的问题。
发明内容
本发明的目的在于提供一种基于AR技术的景区的自动识别讲解及增强展示方法，以解决上述背景技术中提出的问题。
为实现上述目的本发明采用以下技术方案：一种基于AR技术的景区的自动识别讲解及增强展示方法，包括如下步骤：
S1、景区负责人负责维护景区用于识别的景点信息，包含景点的图片，播放的音频文件，景点简介，地理位置；
S2、通过互联网数据采集技术实时抓取景点基本信息以及所有名称、简介和相关图片；
S3、技术人员通过AI机器学习的方式训练景点分类的深度模型；
S4、在管理平台干预景点的信息，包含景点的位置，播报的音频，简介等；
S5、手机端通过热更新的方式保持识别的框架识别的准确性；
S6、手机端通过位置和方向角放置标注图，显示景点的方向、距离以及名称等信息，摄像头旋转，街景信息也会跟随着旋转；
S7、手机端获取当前相机显示的一张图片同过模型特征点进行匹配；
S8、如果匹配到对应景点则进行语音播放，如果匹配失败则重新采用相机当前图片进行匹配；
S9、匹配成功后获取景点的id，并与景区需识别的景点匹配，获取景点信息后，如果包含音频文件则播放音频，如果没有采用智能语音播报景点简介。
作为本发明进一步的方案，步骤S1具体包括如下内容：
S11、景点信息的配置，维护景点的信息，包括景点的名称、景点的标题图，景点的简介，景点的经纬度以及景点的相关图片等；
S12、构建识别的景点，需展开包含在识别框架的景点展示。
作为本发明进一步的方案，步骤S3具体包括如下内容：
S31通过图片相关图片筛选出符合景点各类特征信息的样本；
S32完成对图片特征码的计算后，通过概率统计到的方式进行判别。其中的表达式为P(A|B)＝P(A)P(B|A)/P(B)，通过特征的联合概率分布P(w1，w2，w3，…wn|C)进行建模，进而得到P(C|w1，w2，w3，…wn).进而转换成一种监督分类，目标是根据特征得到属于某一类的概率，哪一类的概率最大则是哪一类；
S32将建好的模型进行云托管提供移动端使用。
作为本发明进一步的方案，步骤S4中包含内容如下：
S41确认景区经纬度，地图是否和移动端保持一致并显示正常，如果显示有误进行修正
S42确认景区是否缺少必要的标题、简介、音频等进行维护补全。
作为本发明进一步的方案，步骤S7中包含内容如下：
S71移动端判断是否包含识别模版，不包含进行更新；
S72移动端识别图片是否在模版中，并取出相似得景点id。
6、如权利要求1所述的一种基于AR技术的景区的自动识别讲解及增强展示方法，其特征在于，步骤S9中包含内容如下：
S91获取识别成功景点id，并通过后台接口获取景点详情；
S92判断语音播放开关，如果开启进行语音播放，如果关闭只展示景点内容；
S93判识别成功景点是否包含音频文件，如果包含播放音频文件，如果不包含音频文件使用系统语音播放简介。
与现有技术相比，本发明的有益效果是：本发明通过AR技术实现对景区中景观的识别，实现对识别物的资料及影像增强展示，大大的提升了游客的观赏体验以及历史人文信息的传播效果。
附图说明
图1为本发明一种基于AR技术的景区的自动识别讲解及增强显示方法的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的阐述。
如图1所示，一种基于AR技术的景区的自动识别讲解及增强展示方法，包含如下步骤：S1、景区负责人负责维护景区用于识别的景点信息，包含景点的图片，播放的音频文件，景点简介，地理位置。
S2、通过互联网数据采集技术实时抓取景点名称、简介和相关图片。
S3、技术人员通过AI机器学习的方式训练景点分类的深度模型。
S4、可以在管理平台干预景点的信息，包含景点的位置，播报的音频，简介等。
S5、手机端通过热更新的方式保持识别的框架识别的准确性。
S6、手机端通过位置和方向角放置标注图，显示景点的方向，距离，以及名称等信息，摄像头旋转，街景信息也会跟随着旋转。
S7、手机端获取当前相机显示的一张图片同过模型特征点进行匹配。
S8、如果匹配到对应景点则进行语音播放，如果匹配失败则重新采用相机当前图片进行匹配。
S9、匹配成功后获取景点的id，并与景区需识别的景点匹配，获取景点信息后，如果包含音频文件则播放音频，如果没有则采用智能语音播报景点简介。
本实施例中步骤S1需要维护景区景点的信息和显示情况步骤包含如下内容。
S11、景点信息的配置，维护景点的信息，包括景点的名称、景点的标题图，景点的简介，景点的经纬度以及景点的相关图片等。
S12、构建识别的景点，需展开包含在识别框架的景点展示。
本实例中维护了景区的基本信息，景点信息，包含景点的图片，播放的音频文件，景点简介，地理位置等，按照景区的基本信息及主要景点图片来识别当前景点。
本实施例中步骤S2，通过互联网公开数据维护了用于识别的景点信息，包含景点用于识别图片的样本的获取，维护了景点的标题图、景点简介、来源、位置、音视频资源等
本实施例中S3需要操作的步骤如下。
S31通过图片相关图片筛选出符合景点各类特征信息的样本。
S32完成对图片特征码的计算后，通过概率统计到的方式进行判别。其中的表达式为P(A|B)＝P(A)P(B|A)/P(B)，通过特征的联合概率分布P(w1，w2，w3，…wn|C)进行建模，进而得到P(C|w1，w2，w3，…wn).进而转换成一种监督分类。目标是根据特征得到属于某一类的概率，哪一类的概率最大则是哪一类。
S32将建好的模型进行云托管提供移动端使用。
本实施例中步骤S4中包含内容如下
S41确认景区经纬度地图是否和移动端保持一致并显示正常，如果显示有误进行修正。
S42确认景区是否缺少必要的标题、简介、音频等进行维护补全。
本实施例中步骤S5中，通过热更新服务可以保证图片识别的准确性，以及部分新增的识别景点。
本实施例中步骤S6中，通过AR标注图可以保证游客更快到达位置，以及想要识别景点的方位，增强趣味性。
本实施例中步骤S7中，包含内容如下
S71移动端判断是否包含识别模版，不包含进行更新。
S72移动端识别图片是否在模版中，并取出相似得景点id。
本实施例中步骤S8中，用于判断识别成功的景点是否在当前景区。
本实施例中步骤S9中，包含内容如下
S91获取识别成功景点id，并通过后台接口获取景点详情。
S92根据获取的景区内容通过AR增强进项显示。
S93判断语音播放开关，如果开启进行语音播放，如果关闭只展示景点内容。
S94判识别成功景点是否包含音频文件，如果包含播放音频文件，如果不包含音频文件使用系统语音播放简介。
以上所述为本发明较佳实施例，对于本领域的普通技术人员而言，根据本发明的教导，在不脱离本发明的原理与精神的情况下，对实施方式所进行的改变、修改、替换和变型仍落入本发明的保护范围之内。
Claims (5)
1.一种基于AR技术的景区的自动识别讲解及增强展示方法，其特征在于，包括如下步骤：
S1、景区负责人负责维护景区用于识别的景点信息，包含景点的图片，播放的音频文件，景点简介，地理位置；
S2、通过互联网数据采集技术实时抓取景点基本信息以及所有名称、简介和相关图片；
S3、技术人员通过AI机器学习的方式训练景点分类的深度模型；
步骤S3具体包括如下内容：
S31通过图片相关图片筛选出符合景点各类特征信息的样本；
S32完成对图片特征码的计算后，通过概率统计到的方式进行判别，其中的表达式为P(A|B)＝P(A)P(B|A)/P(B)，通过特征的联合概率分布P(w1，w2，w3，…wn|C)进行建模，进而得到P(C|w1，w2，w3，…wn)，进而转换成一种监督分类，目标是根据特征得到属于某一类的概率，哪一类的概率最大则是哪一类；
S33将建好的模型进行云托管提供移动端使用；
S4、在管理平台干预景点的信息，包含景点的位置，播报的音频，简介；
S5、手机端通过热更新的方式保持识别的框架识别的准确性；
S6、手机端通过位置和方向角放置AR标注图，显示景点的方向、距离以及名称信息，摄像头旋转，街景信息也会跟随着旋转；
S7、手机端获取当前相机显示的一张图片同过模型特征点进行匹配；
S8、如果匹配到对应景点则进行语音播放，如果匹配失败则重新采用相机当前图片进行匹配；
S9、匹配成功后获取景点的id和景点详情，对景区内容通过AR增强进项显示，并与景区需识别的景点匹配，获取景点信息后，如果包含音频文件则播放音频，如果没有采用智能语音播报景点简介。
2.如权利要求1所述的一种基于AR技术的景区的自动识别讲解及增强展示方法，其特征在于，步骤S1具体包括如下内容：
S11、景点信息的配置，维护景点的信息，包括景点的名称、景点的标题图，景点的简介，景点的经纬度以及景点的相关图片；
S12、构建识别的景点，需展开包含在识别框架的景点展示。
3.如权利要求1所述的一种基于AR技术的景区的自动识别讲解及增强展示方法，其特征在于，步骤S4中包含内容如下：S41确认景区经纬度，地图是否和移动端保持一致并显示正常，如果显示有误，则 进行修正； S42确认景区是否缺少必要的标题、简介、音频进行维护补全。
4.如权利要求1所述的一种基于AR技术的景区的自动识别讲解及增强展示方法，其特征在于，步骤S7中包含内容如下：
S71移动端判断是否包含识别模版，不包含进行更新；
S72移动端识别图片是否在模版中，并取出相似的 景点id。
5.如权利要求1所述的一种基于AR技术的景区的自动识别讲解及增强展示方法，其特征在于，步骤S9中包含内容如下：
S91获取识别成功景点id，并通过后台接口获取景点详情；
S92判断语音播放开关，如果开启， 进行语音播放，如果关闭， 只展示景点内容；
S93判识别成功景点是否包含音频文件，如果包含， 播放音频文件，如果不包含音频文件， 使用系统语音播放简介。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011136856.3A CN112967641B (zh) | 2020-10-22 | 2020-10-22 | 一种基于ar技术的景区的自动识别讲解及增强展示方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011136856.3A CN112967641B (zh) | 2020-10-22 | 2020-10-22 | 一种基于ar技术的景区的自动识别讲解及增强展示方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112967641A CN112967641A (zh) | 2021-06-15 |
| CN112967641B true CN112967641B (zh) | 2023-02-17 |
Family
ID=76271037
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011136856.3A Active CN112967641B (zh) | 2020-10-22 | 2020-10-22 | 一种基于ar技术的景区的自动识别讲解及增强展示方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112967641B (zh) |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102915326A (zh) * | 2012-08-30 | 2013-02-06 | 杭州藕根科技有限公司 | 一种基于gps和图像搜索技术的移动终端景物辨识系统 |
| CN103632626A (zh) * | 2013-12-03 | 2014-03-12 | 四川省计算机研究院 | 一种基于移动互联网的智能导游实现方法、装置及移动客户端 |
| CN104298965A (zh) * | 2014-09-12 | 2015-01-21 | 东北大学 | 一种面向移动终端的旅游景点及景物智能识别系统及方法 |
| CN104680440A (zh) * | 2013-11-27 | 2015-06-03 | 成都国恒信息安全技术有限责任公司 | 基于移动互联网的景区自助旅游系统及方法 |
| CN106649747A (zh) * | 2016-12-26 | 2017-05-10 | 曲东阳 | 一种景点识别方法及其系统 |
| CN106657027A (zh) * | 2016-11-30 | 2017-05-10 | 江苏速度信息科技股份有限公司 | 一种基于移动网络的旅游景点自助导游系统及方法 |
| CN106778649A (zh) * | 2016-12-26 | 2017-05-31 | 曲东阳 | 一种判断景点标识物的图像识别算法 |
| CN107358639A (zh) * | 2017-07-25 | 2017-11-17 | 上海传英信息技术有限公司 | 一种基于智能终端的照片展示方法及照片展示系统 |
| CN108882145A (zh) * | 2018-06-05 | 2018-11-23 | 杭州创匠信息科技有限公司 | 景点识别方法和装置 |
-
2020
- 2020-10-22 CN CN202011136856.3A patent/CN112967641B/zh active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102915326A (zh) * | 2012-08-30 | 2013-02-06 | 杭州藕根科技有限公司 | 一种基于gps和图像搜索技术的移动终端景物辨识系统 |
| CN104680440A (zh) * | 2013-11-27 | 2015-06-03 | 成都国恒信息安全技术有限责任公司 | 基于移动互联网的景区自助旅游系统及方法 |
| CN103632626A (zh) * | 2013-12-03 | 2014-03-12 | 四川省计算机研究院 | 一种基于移动互联网的智能导游实现方法、装置及移动客户端 |
| CN104298965A (zh) * | 2014-09-12 | 2015-01-21 | 东北大学 | 一种面向移动终端的旅游景点及景物智能识别系统及方法 |
| CN106657027A (zh) * | 2016-11-30 | 2017-05-10 | 江苏速度信息科技股份有限公司 | 一种基于移动网络的旅游景点自助导游系统及方法 |
| CN106649747A (zh) * | 2016-12-26 | 2017-05-10 | 曲东阳 | 一种景点识别方法及其系统 |
| CN106778649A (zh) * | 2016-12-26 | 2017-05-31 | 曲东阳 | 一种判断景点标识物的图像识别算法 |
| CN107358639A (zh) * | 2017-07-25 | 2017-11-17 | 上海传英信息技术有限公司 | 一种基于智能终端的照片展示方法及照片展示系统 |
| CN108882145A (zh) * | 2018-06-05 | 2018-11-23 | 杭州创匠信息科技有限公司 | 景点识别方法和装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112967641A (zh) | 2021-06-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109495686B (zh) | 拍摄方法及设备 | |
| KR101617111B1 (ko) | 무선 통신 디바이스들에 대한 핸즈-프리 증강 현실 | |
| CN108563702B (zh) | 基于展品图像识别的语音讲解数据处理方法及装置 | |
| CN106683195B (zh) | 一种基于室内定位的ar场景渲染方法 | |
| US20150103097A1 (en) | Method and Device for Implementing Augmented Reality Application | |
| CN112001817B (zh) | 一种基于人工智能的旅游景点实时导游讲解管理系统 | |
| CN1926559A (zh) | 移动通信系统、移动终端和固定站设备，字符识别设备、方法和程序 | |
| CN103826201A (zh) | 一种基于地理位置的虚拟交互方法及其系统 | |
| KR20140143777A (ko) | 증강 현실 통신 및 정보의 방법 | |
| CN107870962B (zh) | 适地性空间物件远距管理方法与系统 | |
| CN110930517A (zh) | 一种全景视频交互系统及方法 | |
| CN111242704A (zh) | 用于在现实场景中叠加直播人物影像的方法和电子设备 | |
| CN111583343A (zh) | 视觉定位方法及相关装置、设备、存储介质 | |
| CN110084235B (zh) | 基于兴趣点的信息采集方法、装置和采集设备 | |
| CN110175863B (zh) | 一种基于大数据的个性化多用景区广告平台 | |
| CN112967641B (zh) | 一种基于ar技术的景区的自动识别讲解及增强展示方法 | |
| CN111724437B (zh) | 视觉定位方法及相关装置、设备、存储介质 | |
| CN105845020A (zh) | 一种实景地图制作方法及装置 | |
| CN112734937A (zh) | 一种基于全景技术的旅游系统 | |
| CN109672932B (zh) | 辅助视力障碍者观看视频的方法、系统、设备及存储介质 | |
| CN110853487A (zh) | 一种用于城市设计的数字化沙盘系统 | |
| CN115330221A (zh) | 一种乡村旅游信息数据化分析反馈系统和方法 | |
| CN109523941B (zh) | 基于云识别技术的室内伴随导游方法及装置 | |
| KR20060067033A (ko) | 영상인식을 이용한 항법정보 갱신 장치 및 그 방법 | |
| CN113242324B (zh) | 基于电子地图的视频数据处理方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |