CN112001817A - 一种基于人工智能的旅游景点实时导游讲解管理系统 - Google Patents

一种基于人工智能的旅游景点实时导游讲解管理系统 Download PDF

Info

Publication number
CN112001817A
CN112001817A CN202010859231.3A CN202010859231A CN112001817A CN 112001817 A CN112001817 A CN 112001817A CN 202010859231 A CN202010859231 A CN 202010859231A CN 112001817 A CN112001817 A CN 112001817A
Authority
CN
China
Prior art keywords
explanation
tourist
unmanned aerial
voice
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010859231.3A
Other languages
English (en)
Other versions
CN112001817B (zh
Inventor
郭含新
杨小毛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanxi Chenhan Digital Technology Co.,Ltd.
Original Assignee
Hangzhou Xuanxun Electronic Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Xuanxun Electronic Technology Co ltd filed Critical Hangzhou Xuanxun Electronic Technology Co ltd
Priority to CN202010859231.3A priority Critical patent/CN112001817B/zh
Publication of CN112001817A publication Critical patent/CN112001817A/zh
Application granted granted Critical
Publication of CN112001817B publication Critical patent/CN112001817B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/14—Travel agencies
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29—Geographical information databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/435—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/487—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10—Complex mathematical operations
    • G06F17/18—Complex mathematical operations for evaluating statistical data, e.g. average values, frequency distributions, probability functions, regression analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Analysis (AREA)
  • Computational Mathematics (AREA)
  • Marketing (AREA)
  • Evolutionary Biology (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Operations Research (AREA)
  • Probability & Statistics with Applications (AREA)
  • Remote Sensing (AREA)
  • Algebra (AREA)
  • Library & Information Science (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开一种基于人工智能的旅游景点实时导游讲解管理系统，包括景点扫码模块、区域景点语音讲解录入系统、游客人群分布统计模块、GPS定位模块、距离对比导航模块、无人机语音讲解调取模块和分析云平台，本发明通过对景点进行子区域划分，对各子区域景点进行图像采集，并预先对各子区域景点录入相应的语音讲解内容，通过无人机提取各子区域景点讲解音频信息，同时将该子区域景点图像发送至游客手机终端，供游客边查看景点图像边听讲解内容，满足了看不到景点实际景象的游客旅游需求，避免了人工导游单一语音讲解的解说枯燥问题以及人工导游讲解服务受外界环境影响带来的服务质量差异性问题，增强了游客的旅游体验感。

Description

一种基于人工智能的旅游景点实时导游讲解管理系统
技术领域
本发明涉及导游讲解管理技术领域，涉及到一种基于人工智能的旅游景点实时导游讲解管理系统。
背景技术
随着社会的发展和我国改革开放的不断深入，旅游业已成为全球经济中发展势头最强劲的产业之一，旅游业对城市经济的拉动性、社会就业的劳动力以及对文化与环境的促进作用日益显现，随着旅游业的迅速发展，与此同时，也带动了导游业的发展，游客在旅游景点旅游一般都是有导游带领进行景点解说。
然而随着中国旅游市场一些恶性竞争不良的加剧，导游员整体素质也开始下降，导游人员的服务态度也越来越差，而且在一些大型的佛塔、寺庙、山岭景点，有些景点不允许游客进入里面，只能由导游员进行单一的语言解说，在讲解到某一处景点时，导游员通过用手指向的方式向游客指示，这种指示方式存在指示不明确的问题，游客无法看到此处景点的实际景象，只能凭借导游的解说进行想象，而且导游员在解说过程中受游客数量、天气等原因影响，其解说服务质量具有差异性，这些都导致游客的旅游体验感差，鉴于此，本发明设计一种基于人工智能的旅游景点实时导游讲解管理系统。
发明内容
本发明的目的在于提供的一种基于人工智能的旅游景点实时导游讲解管理系统，通过对景点进行区域划分，对划分的各子区域景点进行图像采集，并预先对各子区域景点录入对应的语音讲解内容，通过无人机提取各子区域景点讲解音频信息，同时将该子区域景点图像发送至游客手机终端，供游客边查看景点图像边听讲解内容，增强了游客的旅游体验感，解决了背景技术提到的问题。
本发明的目的可以通过以下技术方案实现：
一种基于人工智能的旅游景点实时导游讲解管理系统，包括景点扫码模块、区域景点语音讲解录入系统、游客人群分布统计模块、GPS定位模块、距离对比导航模块、无人机语音讲解调取模块和分析云平台；所述区域景点语音讲解录入系统将旅游景点划分为若干子区域景点，并获取各子区域景点的实际图像，针对各子区域景点的实际图像进行语音讲解录入，同时将录入的讲解内容进行存储；
所述景点扫码模块，通过在旅游景点入口处设置群组二维码，游客通过收集终端机扫描景点入口处的二维码，扫描后的手机界面会自动进入预先组建好的景点讲解群组，景点扫码模块统计进入景点讲解群组的手机终端个数，并发送至分析云平台；
所述区域景点语音讲解录入系统，包括区域景点划分模块、区域景点图像采集模块和区域景点语音讲解录入模块；
所述区域景点划分模块，将整个旅游景点按照预设的划分方式划分为若干互不重叠的子区域景点，各子区域景点依次标记为1,2,...i,...,n；
所述区域景点图像采集模块，采用无人机拍摄的方式，通过调整无人机的航行高度，使无人机航行到划分的各子区域景点，调节无人机摄像头的焦距，使之摄像头聚焦在各子区域景点的正中央，进行子区域景点图像采集，并对采集的区域景点图像进行提高清晰度和分辨率，同时进行放大，高清滤波处理，获得高清景点区域图像集合，并发送至区域景点语音讲解录入模块；
所述区域景点语音讲解录入模块，接收区域景点图像采集模块发送的高清区域景点图像集合，对高清区域景点图像集合中的每个高清景点区域图像进行景点人工语音讲解，讲解的内容包括各子区域景点的自然环境、社会环境和文化环境，并对讲解的语音内容进行录音，形成讲解音频信息，对录音后的语音讲解音频与对应的该高清景点区域图像统一存储，构成景点区域图像和音频讲解集合PV[(p1,v1),(p2,v2),...,(pi,vi),...,(pn,vn)]，pi表示为第i个子区域景点的图像，vi表示为第i个子区域景点的语音讲解音频，区域景点语音讲解录入模块将景点区域图像和音频讲解集合存储到景点信息资源库；
所述游客人群分布统计模块，通过无人机对进入景点的游客人群进行图像采集，并将采集到的游客人群图像进行游客人群分布情况进行分析，获取游客人群的间隔距离，若游客人群的间隔距离小于或等于预设的群体人与人间隔距离，其游客人群分布方式为整体集中的方式，若游客人群的间隔距离大于预设的群体人与人间隔距离，其游客人群分布方式为小群体分散的方式，提取数据库中存储的各游客人群分布方式对应的无人机进行语音讲解的目标停留位置，筛选该游客人群分布方式对应的无人机进行语音讲解的目标停留位置，游客人群分布统计模块将无人机进行语音讲解的目标停留位置发送至距离对比导航模块和无人机；
所述GPS定位模块，用于获取无人机的原始位置坐标信息，并将无人机的原始位置坐标信息发送至距离对比导航模块；
所述距离对比导航模块分别与游客人群分布统计模块和GPS定位模块连接，接收游客人群分布统计模块发送的无人机进行语音讲解的目标停留位置，并接收GPS定位模块发送的无人机的原始位置坐标信息，将接收的无人机的原始位置坐标信息与无人机进行语音讲解的目标停留位置进行对比，提供最佳的导航路线，并将最佳的导航路线发送至无人机；
所述分析云平台与景点扫码模块连接，接收景点扫码模块发送的进入景点讲解群组的手机终端个数即游客人群数量，与预设的各游客人群量等级对应的游客人群数量阈值进行对比，筛选该游客人群数量对应的游客人群量等级，同时提取数据库中各游客人群量等级对应的无人机语音讲解的目标停留高度，筛选该游客人群量等级对应的无人机语音讲解的目标停留高度，并发送至无人机；
所述无人机语音讲解调取模块，按照预设的子区域景点标记顺序进行子区域景点讲解，对讲解的每个子区域景点，从景点信息资源库中景点区域图像和音频讲解集合内调取对应子区域景点图像，发送至景点讲解群组，并调取对应该子区域景点图像的子区域景点讲解音频，同时提取景点信息资源库中预设的各游客人群量等级对应的播放音量，筛选该游客人群量等级对应的播放音量使用无人机上的音频播放器进行播放讲解。
优选地，还包括无人机，分别与距离对比导航模块、分析云平台和游客人群分布统计模块连接，接收游客人群分布统计模块发送的无人机进行语音讲解的目标停留位置，接收距离对比导航模块发送的最佳导航路线，同时接收分析云平台发送的无人机进行语音讲解的目标停留高度，无人机执行该导航路线飞行到目标停留位置，并调整停留高度，直至与目标停留高度相同。
进一步地，所述无人机上安装有高清摄像头和音频播放器，所述高清摄像头对子区域景点图像的采集和进入景点的游客人群图像采集，所述音频播放器用于播放区域景点讲解音频。
进一步地，还包括景点信息资源库，存储景点区域图像和音频讲解集合，存储预设的群体人与人间隔距离，存储各游客人群分布方式对应的无人机进行语音讲解的目标停留位置，存储各游客人群量等级对应的游客人群数量，存储各游客人群量等级对应的无人机语音讲解的目标停留高度，存储各游客人群量等级对应的播放音量，并存储区域景点讲解关键词集合，其中各游客人群分布方式对应的无人机进行语音讲解的目标停留位置设定方式为，若游客人群分布方式为整体集中的方式，其无人机进行语音讲解的目标停留位置设定在游客人群的正前方位置，若游客人群分布情况为小群体分散的方式，其无人机进行语音讲解的停留位置设定在游客人群中央上方位置。
进一步地，还包括讲解关键词收集归类模块，将各子区域景点讲解的内容归类为各类讲解关键词，包括地质地貌、气候、水文、生物、文物、民俗风情和土特产，对各类讲解关键词收集各种辅助讲解展示形式，辅助讲解展示形式包括图片、动画和小视频，讲解关键词收集归类模块将收集的各子区域景点的各类讲解关键词对应的各种辅助讲解展示形式构成区域景点讲解关键词集合，存储在景点信息资源库。
进一步地，还包括讲解语音识别提取模块与无人机语音讲解调取模块连接，用于无人机进行播放讲解过程中，接收无人机语音讲解内容，并进行语音识别提取讲解关键词，同时提取讲解关键词对应的辅助讲解展示形式，并发送至景点讲解群组，供游客查看了解，其具体实现方法包括以下几个步骤：
S1：接收无人机讲解的初始语音信息，并进行语音增强处理得到处理后的语音；
S2：对处理后的语音进行特征向量抓取，将抓取的语音特征矢量依次与预设的语音模板库中的各个语音模板进行匹配，并统计抓取的语音特征向量与语音模板库中每个模板的匹配相似度，筛选相似度最大的语音模板，当筛选的最大相似度大于设定的相似度阈值，则输出相似度最大的语音模板，然后根据输出语音模板的定义，通过查表得出讲解的初始语音对应的文本识别结果；
S3：对得出的文本识别结果提取讲解关键词，并将提取的讲解关键词发送至分析云平台。
进一步地，所述分析云平台与讲解语音识别提取模块连接，接收讲解语音识别提取模块发送的讲解关键词，与景点信息资源库中区域景点讲解关键词集合内各讲解关键词进行匹配，若匹配成功，则将匹配成功的该讲解关键词对应辅助讲解展示形式推送至景点讲解群组。
有益效果：
(1)本发明通过对景点进行区域划分，对划分的各子区域景点进行图像采集，并预先对各子区域景点录入对应的语音讲解内容，通过无人机提取各子区域景点讲解音频信息，同时将该子区域景点图像发送至游客手机终端，供游客边查看景点图像边听讲解内容，满足了看不到景点实际景象的游客旅游需求，增强了游客观看景点的画面感，避免了人工导游单一语音讲解的解说枯燥问题同时本发明通过无人机代替人工导游解说，无人机解说不受外界环境影响，避免了人工导游讲解服务受游客数量、天气等外界因素影响带来的服务质量差异性问题，增强了游客的旅游体验感，进而促进旅游业的蓬勃发展。
(2)本发明通过景点扫码模块和游客人群分布统计模块分析旅游人群的数量和分布方式，进而获取无人机进行语音讲解的目标停留位置和目标停留高度，使游客得到较好的听觉感受，以实现最佳讲解效果。
(3)本发明通过设置讲解关键词收集归类模块对无人机语音讲解内容进行讲解关键词归类，并收集各种辅助讲解展示形式，并通过讲解语音识别提取模块在无人机播放讲解过程中，对无人机讲解的语音信息进行识别提取讲解关键词，同时提取讲解关键词对应的辅助讲解展示形式，并推送至景点讲解群组，便于游客更加直观地了解讲解的语音内容，加深游客对该景点的旅游印象。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明的模块示意图；
图2为本发明的区域景点语音讲解录入系统示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
请参阅图1-2所示，一种基于人工智能的旅游景点实时导游讲解管理系统，包括景点扫码模块、区域景点语音讲解录入系统、游客人群分布统计模块、GPS定位模块、距离对比导航模块、无人机语音讲解调取模块、分析云平台、景点信息资源库、讲解关键词归类收集模块、讲解语音识别提取模块和无人机；所述区域景点语音讲解录入系统将旅游景点划分为若干子区域景点，并获取各子区域景点的实际图像，针对各子区域景点的实际图像进行语音讲解录入，同时将录入的讲解内容进行存储。
景点扫码模块，通过在旅游景点入口处设置群组二维码，游客通过收集终端机扫描景点入口处的二维码，扫描后的手机界面会自动进入预先组建好的景点讲解群组，景点扫码模块统计进入景点讲解群组的手机终端个数，并发送至分析云平台，通过景点扫码将进入景点的所有游客的手机终端聚集到景点讲解群组，为后续进行无人机语音讲解提供景点图像显示终端。
区域景点语音讲解录入系统，包括区域景点划分模块、区域景点图像采集模块和区域景点语音讲解录入模块；
区域景点划分模块，将整个旅游景点按照预设的划分方式划分为若干互不重叠的子区域景点，各子区域景点依次标记为1,2,...i,...,n，其标记顺序可以为从上到下的顺序，也可以为从下到上的顺序，也可以为从四周到中间的顺序，也可以为从中间到四周的顺序。
区域景点图像采集模块，采用无人机拍摄的方式，通过调整无人机的航行高度，使无人机航行到划分的各子区域景点，调节无人机摄像头的焦距，使之摄像头聚焦在各子区域景点的正中央，进行子区域景点图像采集，并对采集的区域景点图像进行提高清晰度和分辨率，同时进行放大，高清滤波处理，获得高清景点区域图像集合，并发送至区域景点语音讲解录入模块；
区域景点语音讲解录入模块，接收区域景点图像采集模块发送的高清区域景点图像集合，对高清区域景点图像集合中的每个高清景点区域图像进行景点人工语音讲解，讲解的内容包括各子区域景点的自然环境、社会环境和文化环境，并对讲解的语音内容进行录音，形成讲解音频信息，对录音后的语音讲解音频与对应的该高清景点区域图像统一存储，构成景点区域图像和音频讲解集合PV[(p1,v1),(p2,v2),...,(pi,vi),...,(pn,vn)]，pi表示为第i个子区域景点的图像，vi表示为第i个子区域景点的语音讲解音频，区域景点语音讲解录入模块将景点区域图像和音频讲解集合存储到景点信息资源库。
讲解关键词收集归类模块，将各子区域景点讲解的内容归类为各类讲解关键词，包括地质地貌、气候、水文、生物、文物、民俗风情和土特产，对各类讲解关键词收集各种辅助讲解展示形式，辅助讲解展示形式包括图片、动画和小视频，讲解关键词收集归类模块将收集的各子区域景点的各类讲解关键词对应的各种辅助讲解展示形式构成区域景点讲解关键词集合，存储在景点信息资源库。
游客人群分布统计模块，通过无人机对进入景点的游客人群进行图像采集，并将采集到的游客人群图像进行游客人群分布情况进行分析，获取游客人群的间隔距离，若游客人群的间隔距离小于或等于预设的群体人与人间隔距离，其游客人群分布方式为整体集中的方式，若游客人群的间隔距离大于预设的群体人与人间隔距离，其游客人群分布方式为小群体分散的方式，提取数据库中存储的各游客人群分布方式对应的无人机进行语音讲解的目标停留位置，筛选该游客人群分布方式对应的无人机进行语音讲解的目标停留位置，游客人群分布统计模块将无人机进行语音讲解的目标停留位置发送至距离对比导航模块和无人机。
GPS定位模块，用于获取无人机的原始位置坐标信息，并将无人机的原始位置坐标信息发送至距离对比导航模块。
距离对比导航模块分别与游客人群分布统计模块和GPS定位模块连接，接收游客人群分布统计模块发送的无人机进行语音讲解的目标停留位置，并接收GPS定位模块发送的无人机的原始位置坐标信息，将接收的无人机的原始位置坐标信息与无人机进行语音讲解的目标停留位置进行对比，提供最佳的导航路线，并将最佳的导航路线发送至无人机。
分析云平台与景点扫码模块连接，接收景点扫码模块发送的进入景点讲解群组的手机终端个数即游客人群数量，与预设的各游客人群量等级对应的游客人群数量阈值进行对比，筛选该游客人群数量对应的游客人群量等级，同时提取数据库中各游客人群量等级对应的无人机语音讲解的目标停留高度，筛选该游客人群量等级对应的无人机语音讲解的目标停留高度，并发送至无人机。
本优选实施例中无人机语音讲解的目标停留高度和目前停留位置的设定，使游客得到较好的听觉感受，以实现最佳讲解效果。
无人机，分别与距离对比导航模块、分析云平台和游客人群分布统计模块连接，接收游客人群分布统计模块发送的无人机进行语音讲解的目标停留位置，接收距离对比导航模块发送的最佳导航路线，同时接收分析云平台发送的无人机进行语音讲解的目标停留高度，无人机执行该导航路线飞行到目标停留位置，并调整停留高度，直至与目标停留高度相同，且无人机上安装有高清摄像头和音频播放器，所述高清摄像头对子区域景点图像的采集和进入景点的游客人群图像采集，所述音频播放器用于播放区域景点讲解音频。
本优选实施例通过无人机代替人工导游解说，无人机解说不受外界环境影响，避免了人工导游讲解服务受游客数量、天气等外界因素影响带来的服务质量差异性问题，增强了游客的旅游体验感。
景点信息资源库，存储景点区域图像和音频讲解集合，存储预设的群体人与人间隔距离，存储各游客人群分布方式对应的无人机进行语音讲解的目标停留位置，存储各游客人群量等级对应的游客人群数量，存储各游客人群量等级对应的无人机语音讲解的目标停留高度，存储各游客人群量等级对应的播放音量，并存储区域景点讲解关键词集合，其中各游客人群分布方式对应的无人机进行语音讲解的目标停留位置设定方式为，若游客人群分布方式为整体集中分布的方式，其无人机进行语音讲解的目标停留位置设定在游客人群的正前方位置，若游客人群分布情况为小群体分散的分布方式，其无人机进行语音讲解的停留位置设定在游客人群中央上方位置。
无人机语音讲解调取模块，按照预设的子区域景点标记顺序进行子区域景点讲解，对讲解的每个子区域景点，从景点信息资源库中景点区域图像和音频讲解集合内调取对应子区域景点图像，发送至景点讲解群组，并调取对应该子区域景点图像的子区域景点讲解音频，同时提取景点信息资源库中预设的各游客人群量等级对应的播放音量，筛选该游客人群量等级对应的播放音量使用无人机上的音频播放器进行播放讲解，供游客边查看景点图像边听讲解内容，满足了看不到景点实际景象的游客旅游需求，增强了游客观看景点的画面感。
讲解语音识别提取模块与无人机语音讲解调取模块连接，用于无人机进行播放讲解过程中，接收无人机语音讲解内容，并进行语音识别提取讲解关键词，同时提取讲解关键词对应的辅助讲解展示形式，并发送至景点讲解群组，供游客查看了解，其具体实现方法包括以下几个步骤：
S1：接收无人机讲解的初始语音信息，并进行语音增强处理得到处理后的语音；
S2：对处理后的语音进行特征向量抓取，将抓取的语音特征矢量依次与预设的语音模板库中的各个语音模板进行匹配，并统计抓取的语音特征向量与语音模板库中每个模板的匹配相似度，筛选相似度最大的语音模板，当筛选的最大相似度大于设定的相似度阈值，则输出相似度最大的语音模板，然后根据输出语音模板的定义，通过查表得出讲解的初始语音对应的文本识别结果；
S3：对得出的文本识别结果提取讲解关键词，并将提取的讲解关键词发送至分析云平台。
分析云平台与讲解语音识别提取模块连接，接收讲解语音识别提取模块发送的讲解关键词，与景点信息资源库中区域景点讲解关键词集合内各讲解关键词进行匹配，若匹配成功，则将匹配成功的该讲解关键词对应辅助讲解展示形式推送至景点讲解群组，便于游客更加直观地了解讲解的语音内容，加深游客对该景点的旅游印象。
以上内容仅仅是对本发明的构思所作的举例和说明，所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代，只要不偏离发明的构思或者超越本权利要求书所定义的范围，均应属于本发明的保护范围。

Claims (7)

1.一种基于人工智能的旅游景点实时导游讲解管理系统，其特征在于：包括景点扫码模块、区域景点语音讲解录入系统、游客人群分布统计模块、GPS定位模块、距离对比导航模块、无人机语音讲解调取模块和分析云平台；所述区域景点语音讲解录入系统将旅游景点划分为若干子区域景点，并获取各子区域景点的实际图像，针对各子区域景点的实际图像进行语音讲解录入，同时将录入的讲解内容进行存储；
所述景点扫码模块，通过在旅游景点入口处设置群组二维码，游客通过收集终端机扫描景点入口处的二维码，扫描后的手机界面会自动进入预先组建好的景点讲解群组，景点扫码模块统计进入景点讲解群组的手机终端个数，并发送至分析云平台；
所述区域景点语音讲解录入系统，包括区域景点划分模块、区域景点图像采集模块和区域景点语音讲解录入模块；
所述区域景点划分模块，将整个旅游景点按照预设的划分方式划分为若干互不重叠的子区域景点，各子区域景点依次标记为1,2,...i,...,n；
所述区域景点图像采集模块，采用无人机拍摄的方式，通过调整无人机的航行高度，使无人机航行到划分的各子区域景点，调节无人机摄像头的焦距，使之摄像头聚焦在各子区域景点的正中央，进行子区域景点图像采集，并对采集的区域景点图像进行提高清晰度和分辨率，同时进行放大，高清滤波处理，获得高清景点区域图像集合，并发送至区域景点语音讲解录入模块；
所述区域景点语音讲解录入模块，接收区域景点图像采集模块发送的高清区域景点图像集合，对高清区域景点图像集合中的每个高清景点区域图像进行景点人工语音讲解，讲解的内容包括各子区域景点的自然环境、社会环境和文化环境，并对讲解的语音内容进行录音，形成讲解音频信息，对录音后的语音讲解音频与对应的该高清景点区域图像统一存储，构成景点区域图像和音频讲解集合PV[(p1,v1),(p2,v2),...,(pi,vi),...,(pn,vn)]，pi表示为第i个子区域景点的图像，vi表示为第i个子区域景点的语音讲解音频，区域景点语音讲解录入模块将景点区域图像和音频讲解集合存储到景点信息资源库；
所述游客人群分布统计模块，通过无人机对进入景点的游客人群进行图像采集，并将采集到的游客人群图像进行游客人群分布情况进行分析，获取游客人群的间隔距离，若游客人群的间隔距离小于或等于预设的群体人与人间隔距离，其游客人群分布方式为整体集中的方式，若游客人群的间隔距离大于预设的群体人与人间隔距离，其游客人群分布方式为小群体分散的方式，提取数据库中存储的各游客人群分布方式对应的无人机进行语音讲解的目标停留位置，筛选该游客人群分布方式对应的无人机进行语音讲解的目标停留位置，游客人群分布统计模块将无人机进行语音讲解的目标停留位置发送至距离对比导航模块和无人机；
所述GPS定位模块，用于获取无人机的原始位置坐标信息，并将无人机的原始位置坐标信息发送至距离对比导航模块；
所述距离对比导航模块分别与游客人群分布统计模块和GPS定位模块连接，接收游客人群分布统计模块发送的无人机进行语音讲解的目标停留位置，并接收GPS定位模块发送的无人机的原始位置坐标信息，将接收的无人机的原始位置坐标信息与无人机进行语音讲解的目标停留位置进行对比，提供最佳的导航路线，并将最佳的导航路线发送至无人机；
所述分析云平台与景点扫码模块连接，接收景点扫码模块发送的进入景点讲解群组的手机终端个数即游客人群数量，与预设的各游客人群量等级对应的游客人群数量阈值进行对比，筛选该游客人群数量对应的游客人群量等级，同时提取数据库中各游客人群量等级对应的无人机语音讲解的目标停留高度，筛选该游客人群量等级对应的无人机语音讲解的目标停留高度，并发送至无人机；
所述无人机语音讲解调取模块，按照预设的子区域景点标记顺序进行子区域景点讲解，对讲解的每个子区域景点，从景点信息资源库中景点区域图像和音频讲解集合内调取对应子区域景点图像，发送至景点讲解群组，并调取对应该子区域景点图像的子区域景点讲解音频，同时提取景点信息资源库中预设的各游客人群量等级对应的播放音量，筛选该游客人群量等级对应的播放音量使用无人机上的音频播放器进行播放讲解。
2.根据权利要求1所述的一种基于人工智能的旅游景点实时导游讲解管理系统，其特征在于：还包括无人机，分别与距离对比导航模块、分析云平台和游客人群分布统计模块连接，接收游客人群分布统计模块发送的无人机进行语音讲解的目标停留位置，接收距离对比导航模块发送的最佳导航路线，同时接收分析云平台发送的无人机进行语音讲解的目标停留高度，无人机执行该导航路线飞行到目标停留位置，并调整停留高度，直至与目标停留高度相同。
3.根据权利要求2所述的一种基于人工智能的旅游景点实时导游讲解管理系统，其特征在于：所述无人机上安装有高清摄像头和音频播放器，所述高清摄像头对子区域景点图像的采集和进入景点的游客人群图像采集，所述音频播放器用于播放区域景点讲解音频。
4.根据权利要求1所述的一种基于人工智能的旅游景点实时导游讲解管理系统，其特征在于：还包括景点信息资源库，存储景点区域图像和音频讲解集合，存储预设的群体人与人间隔距离，存储各游客人群分布方式对应的无人机进行语音讲解的目标停留位置，存储各游客人群量等级对应的游客人群数量，存储各游客人群量等级对应的无人机语音讲解的目标停留高度，存储各游客人群量等级对应的播放音量，并存储区域景点讲解关键词集合，其中各游客人群分布方式对应的无人机进行语音讲解的目标停留位置设定方式为，若游客人群分布方式为整体集中的方式，其无人机进行语音讲解的目标停留位置设定在游客人群的正前方位置，若游客人群分布情况为小群体分散的方式，其无人机进行语音讲解的停留位置设定在游客人群中央上方位置。
5.根据权利要求1所述的一种基于人工智能的旅游景点实时导游讲解管理系统，其特征在于：还包括讲解关键词收集归类模块，将各子区域景点讲解的内容归类为各类讲解关键词，包括地质地貌、气候、水文、生物、文物、民俗风情和土特产，对各类讲解关键词收集各种辅助讲解展示形式，辅助讲解展示形式包括图片、动画和小视频，讲解关键词收集归类模块将收集的各子区域景点的各类讲解关键词对应的各种辅助讲解展示形式构成区域景点讲解关键词集合，存储在景点信息资源库。
6.根据权利要求1所述的一种基于人工智能的旅游景点实时导游讲解管理系统，其特征在于：还包括讲解语音识别提取模块与无人机语音讲解调取模块连接，用于无人机进行播放讲解过程中，接收无人机语音讲解内容，并进行语音识别提取讲解关键词，同时提取讲解关键词对应的辅助讲解展示形式，并发送至景点讲解群组，供游客查看了解，其具体实现方法包括以下几个步骤：
S1：接收无人机讲解的初始语音信息，并进行语音增强处理得到处理后的语音；
S2：对处理后的语音进行特征向量抓取，将抓取的语音特征矢量依次与预设的语音模板库中的各个语音模板进行匹配，并统计抓取的语音特征向量与语音模板库中每个模板的匹配相似度，筛选相似度最大的语音模板，当筛选的最大相似度大于设定的相似度阈值，则输出相似度最大的语音模板，然后根据输出语音模板的定义，通过查表得出讲解的初始语音对应的文本识别结果；
S3：对得出的文本识别结果提取讲解关键词，并将提取的讲解关键词发送至分析云平台。
7.根据权利要求6所述的一种基于人工智能的旅游景点实时导游讲解管理系统，其特征在于：所述分析云平台与讲解语音识别提取模块连接，接收讲解语音识别提取模块发送的讲解关键词，与景点信息资源库中区域景点讲解关键词集合内各讲解关键词进行匹配，若匹配成功，则将匹配成功的该讲解关键词对应辅助讲解展示形式推送至景点讲解群组。
CN202010859231.3A 2020-08-24 2020-08-24 一种基于人工智能的旅游景点实时导游讲解管理系统 Active CN112001817B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010859231.3A CN112001817B (zh) 2020-08-24 2020-08-24 一种基于人工智能的旅游景点实时导游讲解管理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010859231.3A CN112001817B (zh) 2020-08-24 2020-08-24 一种基于人工智能的旅游景点实时导游讲解管理系统

Publications (2)

Publication Number Publication Date
CN112001817A true CN112001817A (zh) 2020-11-27
CN112001817B CN112001817B (zh) 2021-04-16

Family

ID=73470660

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010859231.3A Active CN112001817B (zh) 2020-08-24 2020-08-24 一种基于人工智能的旅游景点实时导游讲解管理系统

Country Status (1)

Country Link
CN (1) CN112001817B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112418145A (zh) * 2020-12-04 2021-02-26 南京岁卞智能设备有限公司 基于机器视觉和大数据分析的大型展厅展馆智能引导系统
CN113012001A (zh) * 2021-03-13 2021-06-22 杭州翔毅科技有限公司 一种基于人工智能的旅游管理方法
CN113810625A (zh) * 2021-10-15 2021-12-17 江苏泰扬金属制品有限公司 用于资源分配的云服务系统
CN113837051A (zh) * 2021-09-17 2021-12-24 泰州蝶金软件有限公司 基于大数据管理的智能播控平台
CN113837581A (zh) * 2021-09-16 2021-12-24 江苏泰扬金属制品有限公司 大数据应用派遣系统及方法
CN113935625A (zh) * 2021-10-16 2022-01-14 泰州市华达机电设备有限公司 云计算式数值分析平台及方法
WO2022134890A1 (zh) * 2020-12-25 2022-06-30 深圳市微网力合信息技术有限公司 基于wifi6的通信方法及系统
CN117765839A (zh) * 2023-12-25 2024-03-26 广东保伦电子股份有限公司 一种室内智慧导览方法、装置及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102314824A (zh) * 2010-06-30 2012-01-11 上海市静安区青少年活动中心 导游机器人
CN103760866A (zh) * 2014-01-24 2014-04-30 成都万先自动化科技有限责任公司 导游服务机器人
CN105096043A (zh) * 2015-07-27 2015-11-25 华中科技大学 一种深基坑施工现场自动巡视与应急指挥装置及其工作方法
CN105278532A (zh) * 2015-11-04 2016-01-27 中国科学技术大学 个性化机器人导游导览自主解说方法
CN106327738A (zh) * 2016-08-26 2017-01-11 特斯联（北京）科技有限公司 一种智能分级监控系统
CN107436608A (zh) * 2016-05-26 2017-12-05 富士通株式会社 用于无人机的控制装置及用于导游的系统
CN108528720A (zh) * 2018-05-03 2018-09-14 徐振钢 适用于景区的共享无人机垃圾分类回收系统及其工作方法
CN109061707A (zh) * 2018-07-23 2018-12-21 河南省核工业放射性核素检测中心 基于无人机的核污染区域核辐射监测系统及方法
CN109213191A (zh) * 2018-08-02 2019-01-15 平安科技（深圳）有限公司 一种无人机控制方法、计算机可读存储介质及终端设备
KR20190010274A (ko) * 2017-07-21 2019-01-30 이화여자대학교 산학협력단 무인 비행체의 비행 경로를 결정하는 방법

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102314824A (zh) * 2010-06-30 2012-01-11 上海市静安区青少年活动中心 导游机器人
CN103760866A (zh) * 2014-01-24 2014-04-30 成都万先自动化科技有限责任公司 导游服务机器人
CN105096043A (zh) * 2015-07-27 2015-11-25 华中科技大学 一种深基坑施工现场自动巡视与应急指挥装置及其工作方法
CN105278532A (zh) * 2015-11-04 2016-01-27 中国科学技术大学 个性化机器人导游导览自主解说方法
CN107436608A (zh) * 2016-05-26 2017-12-05 富士通株式会社 用于无人机的控制装置及用于导游的系统
CN106327738A (zh) * 2016-08-26 2017-01-11 特斯联（北京）科技有限公司 一种智能分级监控系统
KR20190010274A (ko) * 2017-07-21 2019-01-30 이화여자대학교 산학협력단 무인 비행체의 비행 경로를 결정하는 방법
CN108528720A (zh) * 2018-05-03 2018-09-14 徐振钢 适用于景区的共享无人机垃圾分类回收系统及其工作方法
CN109061707A (zh) * 2018-07-23 2018-12-21 河南省核工业放射性核素检测中心 基于无人机的核污染区域核辐射监测系统及方法
CN109213191A (zh) * 2018-08-02 2019-01-15 平安科技（深圳）有限公司 一种无人机控制方法、计算机可读存储介质及终端设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
崔莉: "无人机遥感技术在"旅游规划"课程实践教学中的应用", 《中国林业教育》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112418145A (zh) * 2020-12-04 2021-02-26 南京岁卞智能设备有限公司 基于机器视觉和大数据分析的大型展厅展馆智能引导系统
CN112418145B (zh) * 2020-12-04 2021-07-16 北京矩阵志诚科技有限公司 基于机器视觉和大数据分析的大型展厅展馆智能引导系统
WO2022134890A1 (zh) * 2020-12-25 2022-06-30 深圳市微网力合信息技术有限公司 基于wifi6的通信方法及系统
CN113012001A (zh) * 2021-03-13 2021-06-22 杭州翔毅科技有限公司 一种基于人工智能的旅游管理方法
CN113837581A (zh) * 2021-09-16 2021-12-24 江苏泰扬金属制品有限公司 大数据应用派遣系统及方法
CN113837051A (zh) * 2021-09-17 2021-12-24 泰州蝶金软件有限公司 基于大数据管理的智能播控平台
CN113837051B (zh) * 2021-09-17 2022-04-15 广州市沃云电子产品有限公司 基于大数据管理的智能播控平台
CN113810625A (zh) * 2021-10-15 2021-12-17 江苏泰扬金属制品有限公司 用于资源分配的云服务系统
CN113935625A (zh) * 2021-10-16 2022-01-14 泰州市华达机电设备有限公司 云计算式数值分析平台及方法
CN117765839A (zh) * 2023-12-25 2024-03-26 广东保伦电子股份有限公司 一种室内智慧导览方法、装置及存储介质

Also Published As

Publication number Publication date
CN112001817B (zh) 2021-04-16

Similar Documents

Publication Publication Date Title
CN112001817B (zh) 一种基于人工智能的旅游景点实时导游讲解管理系统
CN110660222B (zh) 一种智能环保道路黑烟车辆电子抓拍系统
CN105518704A (zh) 检测和分类使用移动设备采集的视频中对象的系统和方法
CN110825765A (zh) 一种人脸识别的方法和装置
CN108563702B (zh) 基于展品图像识别的语音讲解数据处理方法及装置
CN102542268A (zh) 用于视频中文本区域检测与定位的方法
CN108509912A (zh) 多路网络视频流车牌识别方法及系统
CN115994230A (zh) 一种融合人工智能和知识图谱技术的智慧档案构建方法
CN104506946B (zh) 一种基于图像识别的电视节目识别方法和系统
CN113095434A (zh) 目标检测方法及装置、电子设备、存储介质
CN102098449B (zh) 一种利用标志检测进行电视节目内部自动分割的方法
CN112487848A (zh) 文字识别方法和终端设备
CN104217718A (zh) 依据环境参数及群体趋向数据的语音识别方法和系统
CN105760844A (zh) 一种视频流数据的处理方法、设备和系统
CN107027062B (zh) 一种利用台标识别自动匹配机顶盒红外码和频道表的方法
CN113065568A (zh) 目标检测、属性识别与跟踪方法及系统
CN111615008B (zh) 基于多设备体验的智能摘要生成和字幕阅读系统
CN114565952A (zh) 行人轨迹生成方法、装置、设备和存储介质
Zhang et al. Video text extraction using the fusion of color gradient and Log-Gabor filter
CN116095363B (zh) 基于关键行为识别的移动端短视频高光时刻剪辑方法
CN115937591A (zh) 一种提升交通场景目标检测分类精度的方法和系统
CN115359505A (zh) 一种电力图纸检测提取方法及系统
CN114584839A (zh) 拍摄车载视频的剪辑方法、装置、电子设备及存储介质
CN110781797B (zh) 一种标注方法、装置及电子设备
CN114627420A (zh) 一种城市管理违规事件信息采集方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB03 Change of inventor or designer information
CB03 Change of inventor or designer information

Inventor after: Sun Qing

Inventor after: Li Jing

Inventor after: Guo Hanxin

Inventor after: Yang Xiaomao

Inventor before: Guo Hanxin

Inventor before: Yang Xiaomao

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20210331

Address after: 030000 No.3, dianzi Road, Taiyuan Xuefu Park, Shanxi comprehensive reform demonstration zone, Taiyuan City, Shanxi Province (block n, block m, block f)

Applicant after: Shanxi Chenhan Digital Technology Co.,Ltd.

Address before: 311100 room 809, building 6, yintianjincheng, Cangqian street, Yuhang District, Hangzhou City, Zhejiang Province

Applicant before: Hangzhou xuanxun Electronic Technology Co.,Ltd.

GR01 Patent grant
GR01 Patent grant