CN115146964B - 一种可实现智能分析的旅游管理系统及方法 - Google Patents
一种可实现智能分析的旅游管理系统及方法 Download PDFInfo
- Publication number
- CN115146964B CN115146964B CN202210777119.4A CN202210777119A CN115146964B CN 115146964 B CN115146964 B CN 115146964B CN 202210777119 A CN202210777119 A CN 202210777119A CN 115146964 B CN115146964 B CN 115146964B
- Authority
- CN
- China
- Prior art keywords
- module
- data
- tourist
- client
- customer service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 53
- 238000000034 method Methods 0.000 title claims description 30
- 238000007726 management method Methods 0.000 claims abstract description 67
- 238000012545 processing Methods 0.000 claims abstract description 24
- 230000002452 interceptive effect Effects 0.000 claims abstract description 23
- 238000007405 data analysis Methods 0.000 claims abstract description 6
- 230000003993 interaction Effects 0.000 claims description 60
- 230000008451 emotion Effects 0.000 claims description 31
- 230000011218 segmentation Effects 0.000 claims description 27
- 230000001815 facial effect Effects 0.000 claims description 21
- 230000006870 function Effects 0.000 claims description 18
- 238000004080 punching Methods 0.000 claims description 16
- 238000012549 training Methods 0.000 claims description 15
- 238000010586 diagram Methods 0.000 claims description 14
- 230000004927 fusion Effects 0.000 claims description 14
- 230000008569 process Effects 0.000 claims description 8
- 230000005540 biological transmission Effects 0.000 claims description 7
- 238000000605 extraction Methods 0.000 claims description 4
- 238000002372 labelling Methods 0.000 claims description 4
- 238000007781 pre-processing Methods 0.000 claims description 4
- 239000013598 vector Substances 0.000 claims description 4
- 238000009826 distribution Methods 0.000 claims description 3
- 238000011156 evaluation Methods 0.000 claims description 3
- 210000004709 eyebrow Anatomy 0.000 claims description 2
- 239000012634 fragment Substances 0.000 claims description 2
- 210000004209 hair Anatomy 0.000 claims description 2
- 238000010606 normalization Methods 0.000 claims description 2
- 238000011176 pooling Methods 0.000 claims description 2
- 238000005070 sampling Methods 0.000 claims description 2
- 238000000926 separation method Methods 0.000 claims description 2
- 238000004590 computer program Methods 0.000 description 7
- 239000000523 sample Substances 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 230000004913 activation Effects 0.000 description 3
- 230000008909 emotion recognition Effects 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000003672 processing method Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- 230000001629 suppression Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003032 molecular docking Methods 0.000 description 2
- 230000009897 systematic effect Effects 0.000 description 2
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 208000013875 Heart injury Diseases 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 230000036760 body temperature Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002045 lasting effect Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000003340 mental effect Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
- G06Q10/06398—Performance of employee with respect to a job function
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0281—Customer communication at a business location, e.g. providing product or service information, consulting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/14—Travel agencies
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Development Economics (AREA)
- Theoretical Computer Science (AREA)
- Economics (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- Game Theory and Decision Science (AREA)
- Educational Administration (AREA)
- General Health & Medical Sciences (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Primary Health Care (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供了一种可实现智能分析的旅游管理系统及方法，用于智能化旅游平台的数据分析和互动管理，为智能化旅游管理的实现提供了强有力的数据处理和分析工具。本发明基于文字、语音、图像数据的采集、分析、处理，逐步形成旅游行业的智能数据，支持分析模型的加载，将数据图形化、可视化，在此基础上提供综合服务管理平台，分别给个人游客及旅游客服部门提供服务。
Description
技术领域
本发明涉及旅游管理领域，特别涉及一种可实现智能分析的旅游管理系统及方法。
背景技术
随着人们生活水平的提高，人们对于精神生活的要求飞速发展，旅游业在现代生活中也得到了飞速发展，假节日旅游人数逐年突破，每年的旅游人数都十分巨大。
传统的旅游方式，人们通过熟知或相知的朋友圈或旅行社获取旅游信息，鉴于朋友圈或旅行社的信息局限性，这样获取的旅游信息也相当有限。甚至游客翻阅信息依靠传统纸质材料，游客互动内容和解答没有标准化，现有互动解答有时效性无法及时反馈给互动者。而且在全程的旅游过程中，游客、旅游代理机构、旅游监管机构以及景区之间也无法及时共享相关信息，导致游客在旅游过程中发生的互动问题无法得到及时的解决。面对如此良好的前期及巨大的旅客数量，如何实现规范化的管理，提供更专业更系统的旅游服务，把旅游业发展成为高信息含量、知识密集的现代服务业，已经成为政管理部门的一件大事。
对于上述需求，现有的技术对本领域已经进行了一些改进，如CN200810058660一种旅游领域FAQ中文问答系统实现方法，CN201810691510.6一种旅游咨询管理平台及管理方法。但是，现有技术仍然存在以下缺陷，比如：旅行社提供的信息只能让游客被动地接受，有时候缺少客观性；旅游网站所推出的业务又大同小异，很大程度上游客在整个旅游过程当中需要反复的登录各大网站，整理自己需要的资料，用户体验度较差；所提供的功能比较单一，如订房业务管理软件、机票业务管理软件、旅游业务订单管理软件、租车管理软件、签证管理软件等，只能提供单方面的服务，而且只限于数据的搜索、查找、预定和支付；目前市场上的旅游系统数据库规模较小，有的甚至没有专业的服务器系统，故不能支持大数据量访问，也不具备向市场大规模推广的条件；旅游相关产品服务较少，不能满足游客的使用需求；可以使用的终端较少；行业内缺少系统的、完善的、综合的、全面的且与旅游相关部门结合的系统平台；尚不存在将旅游者、政府监管部门、景区、旅游服务提供者进行资源整合的管理系统。
发明内容
鉴于上述问题，本发明在上述现有技术的基础上进行改进，提出了一种克服上述问题或者至少部分地解决上述问题的一种可实现智能分析的旅游管理系统及方法，实现快速、准确地为游客提供互动服务。
第一方面，本发明提供一种可实现智能分析的旅游管理系统，所述旅游管理系统用于智能化旅游平台的数据分析和互动管理；
所述旅游管理系统包括：至少两个客户端、平台服务器；
所述两个客户端，为游客客户端和客服客户端，分别为游客和客服提供旅游服务；所述平台服务器，为所述游客客户端和客服客户端提供支持服务；游客客户端、客服客户端、平台服务器之间通过互联网相连。
其中，所述游客客户端为游客提供的旅游服务至少包括：登录平台服务器发布信息、获取反馈信息、紧急求助；
所述客服客户端为客服提供的旅游服务至少包括：登录平台服务器进行打卡、接收并回复游客的信息、获取考培信息并记录工作绩效；
所述平台服务器为所述游客客户端和客服客户端提供的支持服务至少包括：发布互动信息、打卡管理、绩效管理和智能分析服务以及数据支持服务。
其中，所述游客客户端，具体包括：
文字采集模块，用于采集所述游客客户端输入的用户文字数据；
语音采集模块，用于采集所述游客客户端输入的用户语音数据；
图像采集模块，用于采集所述游客客户端的用户实时面部图像数据；
互动模块，用于根据所述用户文字数据和用户语音数据形成互动数据；
信息传输模块，用于在游客客户端和客服客户端以及平台服务器之间传输数据；
GPS定位终端，用于接收GPS信号，获取游客客户端的实时定位数据；所述实时定位数据通过所述信息传输模块传输给所述平台服务器；
求助模块，用于紧急呼救，通过无线网络与平台服务器相连。
其中，所述平台服务器，包括：
接收模块，用于接收所述游客客户端的所述互动数据；
处理模块，用于处理所述用户文字数据和用户语音数据；
分析模块，用于根据所述用户实时面部图像数据，进行游客的情绪分析；
分配模块，用于根据所述互动数据中的文字输入和语音输入、以及游客的情绪分析结果，将游客需求进行匹配或推送给相应的客服客户端；
发送模块，用于将游客的互动结果，发送给对应的所述游客客户端。
知识库模块，用于根据获取的互动数据，建立知识库；所述知识库包括：风险识别，互动方案，互动问题和语言知识库信息；
绩效管理模块，用于获取客服客户端的打卡数据，并根据所述打卡数据以及客服客户端回复互动问题的次数和评价，进行绩效管理；
统计模块，用于对游客互动数据进行采集管理，并形成图表数据；
展示模块，用于展示统计模块的图表数据，所述图表数据包括分析报告和互动报告。
第二方面，本发明提供一种可实现智能分析的旅游管理方法，应用在旅游管理系统中，方法至少包括：
游客通过所述游客客户端：登录平台服务器发布信息、获取反馈信息、进行紧急求助；
客服通过所述客服客户端：登录平台服务器进行打卡、接收并回复游客的信息、获取考培信息并记录工作绩效；
所述平台服务器为两个客户端提供：发布互动信息、打卡管理、绩效管理和智能分析服务以及数据支持服务。
本发明提供的上述技术方案的有益效果至少包括：
首先，本发明为智能化旅游管理的实现提供了强有力的数据处理和分析工具。本发明基于文字、语音、图像数据的采集、分析、处理，逐步形成旅游行业的智能数据，支持分析模型的加载，将数据图形化、可视化，在此基础上提供综合服务管理平台，分别给个人游客及旅游客服部门提供服务。
其次，本发明以智能终端为载体，以互联网络、移动无线互联网络为传输工具，整合各项技术，实现主动位置感知、旅游信息主动引导、互动信息、打卡管理、绩效管理和智能分析服务以及数据支持服务。让每一个个体的旅游者能够体验到贴身的旅游服务，为游客自身及时安排和调整工作与旅游计划提供数据支持；此外，本发明将为旅游客服部门提供旅游管理的工具，建立应急处理平台，也可与内部信息化信息实现对接，为实现各景区景点及旅游服务监管、决策制定提供工具及数据支持。
最后，本发明特别设计的游客情绪分析功能，更是快速、精准地实现了情绪识别功能，进而高效准确地匹配客服，极大地提高了顾客对旅游服务的满意度。这是由于本发明的所构建的人脸分割模型，其噪声抑制能力强。传统分割得到的二值图，右下角会出现严重噪声，而相比之下，本发明方法对噪声更鲁棒。同时，随着图像数据规模的增大，精度也会显著提高，而同样的数据量，采用本发明的人脸处理方法的速率明显加快。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。
图1为本发明旅游管理系统的概念图；
图2为本发明游客客户端的架构示意图；
图3为本发明平台服务器的架构示意图；
图4为本发明平台服务器中分析模块的架构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
参照图1所示，本发明实施例提供一种可实现智能分析的旅游管理系统，所述旅游管理系统用于智能化旅游平台的数据分析和互动管理；
所述旅游管理系统包括：至少两个客户端、平台服务器；所述两个客户端，为游客客户端和客服客户端，分别为游客和客服提供旅游服务；所述平台服务器，为所述游客客户端和客服客户端提供支持服务；游客客户端、客服客户端、平台服务器之间通过互联网相连。
其中：至少两个客户端游客客户端12和客服客户端10，可根据各自的权限登录平台服务器。
以客服客户端为例，登录后，可进行打卡操作(比如点击签到、面部签到)处于上班模式并记录工作绩效、及时回复游客的互动信息，获取平台服务器发送的考培信息和管理信息等。
游客客户端可以发送互动信息并获取反馈信息，还可以发布与旅游有关的资讯，如旅游攻略、旅游照片，注意事项等等；在一个实施例中，参照图2所示，具体地，游客客户端包括：文字采集模块，用于采集所述游客客户端输入的用户文字数据；语音采集模块，用于采集所述游客客户端输入的用户语音数据；图像采集模块，用于采集所述游客客户端的用户实时面部图像数据；互动模块，用于根据所述用户文字数据和用户语音数据形成互动数据；信息传输模块，用于在游客客户端和客服客户端以及平台服务器之间传输数据；GPS定位终端，用于接收GPS信号，获取游客客户端的实时定位数据；可以获取游客客户端的定位数据或获取游客客户端在地图上指定的地位数据。可根据游客的定位数据结合游客的互动信息，推送给对该定位数据所对应景区熟悉的客服，做到精准互动，快速解决问题。进一步地，可以通过GPS定位方式(主动获取游客客户端的GPS定位数据，或由游客客户端指定的GPS定位数据)，定位互动地点的周边环境及设施信息，与地图信息结合，反馈给游客所需的互动信息。所述实时定位数据通过所述信息传输模块传输给所述平台服务器；求助模块，用于紧急呼救，通过无线网络与平台服务器相连。所述用户语音数据为多声源下的混合音频流数据。
系统可以获取客户端的定位数据或获取客户端在地图上指定的地位数据。可根据游客的定位数据结合游客的互动信息，推送给对该定位数据所对应景区熟悉的客服，做到精准互动，快速解决问题。进一步地，可以通过GPS定位方式(主动获取客户端的GPS定位数据，或由客户端指定的GPS定位数据)，定位互动地点的周边环境及设施信息，与地图信息结合，反馈给游客所需的信息。
进一步地，所述GPS定位终端包括：接收模块，用于从GPS卫星接收GPS信号，所述接收模块包括天线元件。天线元件可以被电激活并用于接收GPS信号。电激活可以默认设置，也可以根据用户指令或触摸来选择和设置。天线元件的数量可以是三个或更多个。当天线元件从三个GPS卫星接收信号时，可以测量客户端的二维位置(经纬度)；当接收来自四个GPS卫星的信号时，可以测量客户端的三维位置(纬度，经度和高度)。检测模块，用于检测所述定位模块的倾斜角度；第一确定模块，用于判断所述接收模块是否接收到足够的GPS信号以测量所述定位终端的位置；第一调整模块，用于当所述接收模块没有接收到足够的GPS信号时，根据由所述检测模块检测到的倾斜角度来调整所述定位模块的倾斜角度。
在一个实施例中，CPU基于来自GPS定位终端的位置测量数据检查天线元件的GPS信号接收状态。具体地，检查例如接收数据中误差的发生率以及接收信号的信号强度是否足以用于GPS信号检测。
在一个实施例中，CPU确定是否可以获取四个或更多个GPS卫星的信号，并计算客户端的纬度，经度和高度三维数据。当天线元件仅获取三颗或更少的GPS卫星而不能获得三维位置测量数据时，显示提示框，以提示游客调整客户端的倾斜角度使得天线元件可以指向天项。提示框向游客显示客户端的当前倾斜角度和客户端的最佳倾斜角度。参照提示框的显示，用户纠正客户端的握持角度，使得客户端的倾斜角度可以改善接收状态。
优选地，所述检测模块为加速度传感器。加速度传感器用于检测客户端主体的倾斜度(倾斜角)，来确保GPS信号的最佳接收状态。
客户端于由游客随身携带，因此，客户端容易在倾斜状态下使用。如果客户端由于天线元件倾斜且偏离天项，就不容易获得足够的信号强度。而且，来自低空GPS卫星的信号容易受到多径误差的影响。多径误差是由GPS卫星接收的无线电波经地面附近的建筑物和树木或地面反射后引起的。因此，特别是当客户端在高层建筑多的城市中，GPS信号的接收状态由于多径等而恶化。
为了解决该问题，进一步地，所述GPS定位终端还包括：计算模块，用于计算所述天线元件的方向范围内的角度范围；第二确定模块，用于判断所述角度范围中是否存在导致GPS信号接收产生误差的角度；第二调整模块，用于当所述角度范围中存在导致GPS信号接收误差的角度时，调整天线元件的方向范围，在方向范围中剔除导致误差的角度。
如此，根据方向范围调整处理，即使在客户端由于倾斜，可以设置调整天线的方向范围，从而可以仅接收来自有效GPS卫星的信号，而不接收来自可能引起误差的GPS卫星的信号。由加速度传感器检测到客户端的倾斜角度来可能引起误差的GPS卫星的角度范围。因此，可以根据客户端的倾斜角度设置天线元件的最佳有效方向范围，稳定地提供高精度的测量。
进一步地，所述GPS定位终端包还包括：感知模块，用于感知所述定位终端上的触摸；激活模块，用于感知到所述定位终端上的触摸后，激活天线元件；所述激活是基于由所述检测模块检测到的倾斜角度来选择待激活的天线元件。
感知模块包括触摸传感器，也可使用光学传感器代替触摸传感器，实现类似的功能。光学传感器可以检测人手或手臂接触的设备上的位置的亮度(照度)和设备周围的亮度。另外，还可以使用能够检测人体温度的体温传感器，或者可以使用能够检测由抓握或按压该装置引起的压力的压力传感器。
平台服务器11，可以是服务器集群，比如可以包括：前端网关服务器集群、连接服务器集群、核心业务服务器集群、数据库服务集群和文件服务器；其中：前端网关服务器集群，分别与至少两个客户端，比如游客客户端和客服客户端以及核心业务服务器集群连接；用于转发客户端的请求以及将服务器的响应返回给对应的客户端；连接服务器集群，用于处理客户端的服务请求的接受、连接会话的建立、维持和中断服务；核心业务服务器集群，用于对用户登录进行认证、对用户权限进行验证、执行互动信息、旅游相关资讯的发布、推送、回应以及实施的逻辑，并在必要时对数据库进行读写操作；数据库集群，用于持久化存储旅游管理系统的所有数据；文件服务器，用于存储旅游管理系统的所有文件。上述连接服务器集群还可以包括：PC连接服务器集群和移动终端连接服务器集群；上述PC连接服务器集群用于为运行于PC上的客户端提供服务；上述移动终端连接服务器集群用于为运行于移动终端上的客户端提供服务。
另外，参照图1所示，上述旅游管理系统还可以包括数据采集终端，比如景区内的监控探头，用于实时获取景区内的人流、密集情况；比如门票闸机，用于统计每天或者间隔时间段内通过的客流量；还可以获取web端采集的与旅游相关的互动数据。
本发明实施例提供的旅游管理系统，通过物联网及云计算等技术，结合平台服务器软件，可将游客的互动问题及时解答反馈给游客，实现了电子交互化，同时也对景区的客服进行管理和监督；也提升了游客的使用体验。其中平台服务器软件，可采用多种语言开发，比如采用JAVA语言进行开发，结合H5对应用进行前端展现，在不同设备上将采取多种开发语言，C#，java，IOS的object c，支持各种移动端和平板电脑包括触摸屏设备的操作。比如客户端为智能手机或ipad时，也可支持移动端的IOS系统和Android系统。
数据库以主流数据库为主，mysql，oracle，informix，db2等，所有数据源都以统一的数据库为主。
在一个实施例中，参照图3所示，平台服务器11包括：接收模块，用于接收所述游客客户端的所述互动数据；处理模块，用于处理所述用户文字数据和用户语音数据；分析模块，用于根据所述用户实时面部图像数据，进行游客的情绪分析；分配模块，用于根据所述互动数据中的文字输入和语音输入、以及游客的情绪分析结果，将游客需求进行匹配或推送给相应的客服客户端；发送模块，用于将游客的互动结果，发送给对应的所述游客客户端。
进一步地，所述处理模块，用于处理所述用户文字数据和用户语音数据，至少包括：语音分离模块，用于将所述混合音频流数据分离为各声源对应的单独音频流数据；语音提取模块，用于提取单独音频流数据中的语音片段的音频特征向量；语音识别模块，用于识别所述音频特征向量中的语音需求。
本实施例中，识别游客的情绪目的，可以让客服了解客户的状态，实现人文关怀，对游客进行有针对性的安抚情绪和解决问题。
在一个实施例中，参照图3所示，所述平台服务器还包括：
知识库模块，用于根据获取的互动数据，建立知识库；所述知识库包括：风险识别，互动方案，互动问题和语言知识库信息；绩效管理模块115，用于获取客服客户端的打卡数据，比如当在登录状态下通过客服客户端的摄像头进行面部打卡，也可以在登录状态进行点击签到打卡；并根据上述打卡数据以及客服客户端回复游客互动问题的次数和评价，进行绩效管理；比如次数较多的，可根据次数进行绩效考核；也可以根据游客对客服的好评，进行绩效考核；也可根据次数和好评，综合进行绩效考核。从而实现采用信息化手段对互动人员进行管理，比如进行考培管理，绩效管理等。统计模块，用于对游客互动数据进行采集管理，并形成图表数据；展示模块，用于展示统计模块的图表数据，所述图表数据包括分析报告和互动报告。
具体地，比如当获取的是游客的文字互动信息，可根据文字所述的语种类别，比如汉语、英语、法语等，在互动数据库中匹配相应的关键字进行查找，根据该关键词显示多个问题列表，供游客进一步选择；或者是一开始就选择在线互动，根据语种匹配相应的客服。可形成智能化的旅游互动解答，且可适应于多语言，做到支持关键字响应。
比如当获取的是游客的语音文字输入信息，可根据现有技术中的语音识别模式，识别其所属语种匹配相应语种的客服；或者根据语音识别将其转换为文字，再根据文字依据上述文字互动信息进行处理，此处不再赘述。进一步，在语音识别的同时，还可以通过识别其音色、语速和语调来识别游客的情绪状态，比如当语速大于12分钟，语调高于7，则认为游客情绪较激动，处于愤怒的状态。
再比如通过获取游客的实时面部图像数据，根据人脸识别技术，可以识别人脸表情是否为焦虑、愤怒、高兴、伤心等。
本实施例中，还可以通过利用摄像头的图像捕捉，采集动态实时人流数据以及对人脸进行情绪分析采集，对完整互动过程进行数据解析。进一步地，通过摄像头可进行远程监督互动站台，并可通过远程摄像头进行实时对话进行管理。
在一个实施例中，参照图4所示，分析模块包括：
预处理模块，用于对采集的面部图像数据进行预处理，去除头发、背景区域，对面部图像进行尺度归一化处理，获得人脸轮廓图像；特征提取模块，用于从获得的人脸轮廓图像中提取与情绪相关的特征点，生成人脸特征图像；词汇模块，用于获取情绪词汇，形成情绪词汇集；标注模块，用于对人脸特征图像进行情绪词汇标注，将标注后的人脸特征图像作为训练集；构建模块，用于构建人脸分割模型；训练模块，用于将所述人脸特征图像输入构建的人脸分割模型中进行训练处理，获得情绪分析模型；模型分析模块，用于将所述用户实时面部图像输入训练得到的所述情绪分析模型进行情绪分析。
其中，所述特征点包括眉毛、眼睛、鼻子、嘴唇、下巴。
进一步地，所述构建模块，用于构建人脸分割模型，具体包括：
融合模块，用于基于所述人脸特征图像训练集，进行不同尺度的特征融合，形成特征图Cf；获取模块，用于根据所述特征图Cf，得到人脸情绪的概率图Pf和阈值图Tf；分割模型模块，用于结合所述概率图Pf和阈值图Tf，构建人脸分割模型：第一定义模块，用于定义正样本损失和负样本损失；第二定义模块，用于定义所述人脸分割模型总的损失函数。
进一步地，所述融合模块，用于基于所述人脸特征图像训练集，进行不同尺度的特征融合，形成特征图Cf，具体包括：
缩放模块，用于进行多层卷积、填充、池化操作，将所述训练集中人脸特征图像分别放大比例至2、4、8、16倍；层次模块，用于提取训练集中人脸特征图像的不同层次特征；采样模块，用于进行图像下采样，将各层次特征调整至对应尺寸规模；多层次融合模块，用于进行各层次特征的特征融合；拼接模块，用于将各层次融合特征统一缩放比例至4倍，拼接形成特征图。
其中，分割模型模块，用于结合所述概率图Pf和阈值图Tf，构建人脸分割模型，具体包括：
结合概率图Pf和阈值图Tf，构建人脸分割模型，得到人脸图像的二值分割图：
Bi，j表示二值图里第i行、第j列的像素取值；Pi，j代表概率图里第i行、第j列的像素值；Ti，j代表阈值图里第i行、第j列的像素值，k是调节系数。
其中，第一定义模块，用于定义正样本损失和负样本损失，具体包括：
其中，l+为正样本损失，l-为负样本损失，k为调节系数，x＝Pi，j-Ti，j。
其中，第二定义模块，用于定义所述人脸分割模型总的损失函数，具体包括：
L＝Lp+α*Lb+β*Lt
其中，L是总损失函数，它是由概率图损失Lp、二值图损失Lb及阈值图损失Lt加权求和得出，α和β为缩放系数。
上述本发明特别设计的游客情绪分析功能，更是快速、精准地实现了情绪识别功能，进而高效准确地匹配客服，极大地提高了顾客对旅游服务的满意度。发明所构建的人脸分割模型，其噪声抑制能力强。传统分割得到的二值图，右下角会出现严重噪声，而相比之下，本发明方法对噪声更鲁棒。发明利用深度卷积层监督学习不同层次的特征，将二值化的阈值可以随网络一起得到训练，增加预测的精度，贴合实际应用场景，提高了算法的鲁棒性。同时，随着图像数据规模的增大，精度也会显著提高，而同样的数据量，采用本发明的处理方法的速率明显加快。
进一步的，为了更优的整理旅游攻略、注意事项，本平台服务器的数据来源可以从各个互动站点获取，也可以通过各种设备采集互动数据，比如网络爬虫采集网上论坛中关于旅游话题的互动问题和答案、或通过其他方式获取社交网站、圈子社区等旅游相关的互动问题、答案，梳理后存储到互动数据库，再由后台进行逻辑处理，对信息进行分析，行成分析报告或各种对外互动数据。通过对游客相关的互动信息进行采集管理，并形成图表，图形的数据分析，包括互动量排名互动相关的各种统计。
另外，采用语音识别技术，可以支持各国语言的识别及交互，通过语言识别，在互动数据库中检索答案进行反馈，反馈方式语音提示反馈和文字反馈。反馈的方式，甚至可以以机器人的交互方式或其他电子设备的方式实现。
进一步地，如图1所示，可将上述客服终端集成到AI智能设备的机器人12上，并将该Al智能设备机器人投放到景区内，接受游客一对一、点对点的互动，实现人机交互互动。
本发明实施例还提供了一种可实现智能分析的旅游管理方法，该方法使用本发明实施例提供的上述旅游管理系统，实现发布互动信息、打卡管理、绩效管理和数据分析服务以及数据支持服务。
由于该方法所解决问题的原理与旅游管理系统相似，因此该方法的实施可以参见前述旅游管理系统的实施，重复之处不再赘述。
综上，本发明提供的上述技术方案的有益效果至少包括：
首先，本发明为智能化旅游管理的实现提供了强有力的数据处理和分析工具。本发明基于文字、语音、图像数据的采集、分析、处理，逐步形成旅游行业的智能数据，支持分析模型的加载，将数据图形化、可视化，在此基础上提供综合服务管理平台，分别给个人游客及旅游客服部门提供服务。
其次，本发明以智能终端为载体，以互联网络、移动无线互联网络为传输工具，整合各项技术，实现主动位置感知、旅游信息主动引导、互动信息、打卡管理、绩效管理和智能分析服务以及数据支持服务。让每一个个体的旅游者能够体验到贴身的旅游服务，为游客自身及时安排和调整工作与旅游计划提供数据支持；此外，本发明将为旅游客服部门提供旅游管理的工具，建立应急处理平台，也可与内部信息化信息实现对接，为实现各景区景点及旅游服务监管、决策制定提供工具及数据支持。
最后，本发明特别设计的游客情绪分析功能，更是快速、精准地实现了情绪识别功能，进而高效准确地匹配客服，极大地提高了顾客对旅游服务的满意度。这是由于本发明的所构建的人脸分割模型，其噪声抑制能力强。传统分割得到的二值图，右下角会出现严重噪声，而相比之下，本发明方法对噪声更鲁棒。同时，随着图像数据规模的增大，精度也会显著提高，而同样的数据量，采用本发明的人脸处理方法的速率明显加快。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (8)
1.一种可实现智能分析的旅游管理系统，其特征在于，所述旅游管理系统用于智能化旅游平台进行数据分析和互动管理；
所述旅游管理系统包括：至少两个客户端、平台服务器；
所述两个客户端，为游客客户端和客服客户端，分别为游客和客服提供旅游服务；所述平台服务器，为所述游客客户端和客服客户端提供支持服务；游客客户端、客服客户端、平台服务器之间通过互联网相连；
其中，所述平台服务器，包括：
接收模块，用于接收所述游客客户端的互动数据；
处理模块，用于处理用户文字数据和用户语音数据；
分析模块，用于根据所述用户实时面部图像数据，进行游客的情绪分析；
分配模块，用于根据所述互动数据中的文字输入和语音输入、以及游客的情绪分析结果，将游客需求进行匹配或推送给相应的客服客户端；
发送模块，用于将游客的互动结果，发送给对应的所述游客客户端；
其中，所述分析模块，用于根据所述用户实时面部图像数据，进行游客的情绪分析，具体包括：
预处理模块，用于对采集的面部图像数据进行预处理，去除头发、背景区域，对面部图像进行尺度归一化处理，获得人脸轮廓图像；
特征提取模块，用于从获得的人脸轮廓图像中提取与情绪相关的特征点，生成人脸特征图像；
词汇模块，用于获取情绪词汇，形成情绪词汇集；
标注模块，用于对人脸特征图像进行情绪词汇标注，将标注后的人脸特征图像作为训练集；
构建模块，用于构建人脸分割模型；
训练模块，用于将所述人脸特征图像输入构建的人脸分割模型中进行训练处理，获得情绪分析模型；
模型分析模块，用于将所述用户实时面部图像输入训练得到的所述情绪分析模型进行情绪分析；
其中，所述构建模块，用于构建人脸分割模型，具体包括：
融合模块，用于基于所述人脸特征图像训练集，进行不同尺度的特征融合，形成特征图Cf；
获取模块，用于根据所述特征图Cf，得到人脸情绪的概率图Pf和阈值图Tf；
分割模型模块，用于结合所述概率图Pf和阈值图Tf，构建人脸分割模型：
第一定义模块，用于定义正样本损失和负样本损失；
第二定义模块，用于定义所述人脸分割模型总的损失函数；
其中，所述融合模块，用于基于所述人脸特征图像训练集，进行不同尺度的特征融合，形成特征图Cf，具体包括：
缩放模块，用于进行多层卷积、填充、池化操作，将所述训练集中人脸特征图像分别放大比例至2、4、8、16倍；
层次模块，用于提取训练集中人脸特征图像的不同层次特征；
采样模块，用于进行图像下采样，将各层次特征调整至对应尺寸规模；
多层次融合模块，用于进行各层次特征的特征融合；
拼接模块，用于将各层次融合特征统一缩放比例至4倍，拼接形成特征图；
其中，所述分割模型模块，用于结合所述概率图Pf和阈值图Tf，构建人脸分割模型，具体包括：
结合概率图Pf和阈值图Tf，构建人脸分割模型，得到人脸图像的二值分割图：
Bi,j表示二值图里第i行、第j列的像素取值；Pi,j代表概率图里第i行、第j列的像素值；Ti,j代表阈值图里第i行、第j列的像素值，k是调节系数；
其中，第一定义模块，用于定义正样本损失和负样本损失，具体包括：
其中，l+为正样本损失，l-为负样本损失，k为调节系数，x＝Pi,j-Ti,j；
其中，第二定义模块，用于定义所述人脸分割模型总的损失函数，具体包括：
L＝Lp+α*Lb+β*Lt
其中，L是总损失函数，它是由概率图损失Lp、二值图损失Lb及阈值图损失Lt加权求和得出，α和β为缩放系数。
2.如权利要求1所述的系统，其中，
所述游客客户端为游客提供的旅游服务至少包括：登录平台服务器发布信息、获取反馈信息、紧急求助；
所述客服客户端为客服提供的旅游服务至少包括：登录平台服务器进行打卡、接收并回复游客的信息、获取考培信息并记录工作绩效；
所述平台服务器为所述游客客户端和客服客户端提供的支持服务至少包括：发布互动信息、打卡管理、绩效管理和智能分析服务以及数据支持服务。
3.如权利要求1或2所述的系统，其中，所述游客客户端，具体包括：
文字采集模块，用于采集所述游客客户端输入的用户文字数据；
语音采集模块，用于采集所述游客客户端输入的用户语音数据；
图像采集模块，用于采集所述游客客户端的用户实时面部图像数据；
互动模块，用于根据所述用户文字数据和用户语音数据形成互动数据；
信息传输模块，用于在游客客户端和客服客户端以及平台服务器之间传输数据；
GPS定位终端，用于接收GPS信号，获取游客客户端的实时定位数据；
求助模块，用于紧急呼救，通过无线网络与平台服务器相连。
4.如权利要求3所述的系统，其中，所述用户语音数据为多声源下的混合音频流数据。
5.如权利要求1所述的系统，其中，所述处理模块，用于处理所述用户文字数据和用户语音数据，至少包括：
语音分离模块，用于将混合音频流数据分离为各声源对应的单独音频流数据；
语音提取模块，用于提取单独音频流数据中的语音片段的音频特征向量；
语音识别模块，用于识别所述音频特征向量中的语音需求。
6.如权利要求5所述的系统，其中，所述平台服务器，还包括：
知识库模块，用于根据获取的互动数据，建立知识库；所述知识库包括：风险识别，互动方案，互动问题和语言知识库信息；
绩效管理模块，用于获取客服客户端的打卡数据，并根据所述打卡数据以及客服客户端回复互动问题的次数和评价，进行绩效管理；
统计模块，用于对游客互动数据进行采集管理，并形成图表数据；
展示模块，用于展示统计模块的图表数据。
7.如权利要求1所述的系统，其中，所述特征点包括眉毛、眼睛、鼻子、嘴唇、下巴。
8.一种可实现智能分析的旅游管理方法，应用在如权利要求1-7之一的系统中，其特征在于，方法至少包括：
游客通过所述游客客户端：登录平台服务器发布信息、获取反馈信息、进行紧急求助；
客服通过所述客服客户端：登录平台服务器进行打卡、接收并回复游客的信息、获取考培信息并记录工作绩效；
所述平台服务器为两个客户端提供：发布互动信息、打卡管理、绩效管理和智能分析服务以及数据支持服务。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210777119.4A CN115146964B (zh) | 2022-07-01 | 2022-07-01 | 一种可实现智能分析的旅游管理系统及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210777119.4A CN115146964B (zh) | 2022-07-01 | 2022-07-01 | 一种可实现智能分析的旅游管理系统及方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN115146964A CN115146964A (zh) | 2022-10-04 |
| CN115146964B true CN115146964B (zh) | 2023-11-07 |
Family
ID=83410283
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210777119.4A Active CN115146964B (zh) | 2022-07-01 | 2022-07-01 | 一种可实现智能分析的旅游管理系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115146964B (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108876177A (zh) * | 2018-06-28 | 2018-11-23 | 北京博数嘉科技有限公司 | 一种旅游咨询管理平台及管理方法 |
| CN109961776A (zh) * | 2017-12-18 | 2019-07-02 | 上海智臻智能网络科技股份有限公司 | 语音信息处理装置 |
| WO2020222929A1 (en) * | 2019-04-30 | 2020-11-05 | Microsoft Technology Licensing, Llc | Processing overlapping speech from distributed devices |
| CN114202791A (zh) * | 2021-11-30 | 2022-03-18 | 网易（杭州）网络有限公司 | 面部情绪识别模型的训练方法、情绪识别方法及相关设备 |
-
2022
- 2022-07-01 CN CN202210777119.4A patent/CN115146964B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109961776A (zh) * | 2017-12-18 | 2019-07-02 | 上海智臻智能网络科技股份有限公司 | 语音信息处理装置 |
| CN108876177A (zh) * | 2018-06-28 | 2018-11-23 | 北京博数嘉科技有限公司 | 一种旅游咨询管理平台及管理方法 |
| WO2020222929A1 (en) * | 2019-04-30 | 2020-11-05 | Microsoft Technology Licensing, Llc | Processing overlapping speech from distributed devices |
| CN114202791A (zh) * | 2021-11-30 | 2022-03-18 | 网易（杭州）网络有限公司 | 面部情绪识别模型的训练方法、情绪识别方法及相关设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN115146964A (zh) | 2022-10-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109614934B (zh) | 在线教学质量评估参数生成方法及装置 | |
| CN108776808A (zh) | 一种用于检测钢包溶蚀缺陷的方法和装置 | |
| CN111652087B (zh) | 验车方法、装置、电子设备和存储介质 | |
| CN116932919B (zh) | 信息推送方法、装置、电子设备和计算机可读介质 | |
| CN111738199B (zh) | 图像信息验证方法、装置、计算装置和介质 | |
| CN113762454A (zh) | 轨迹异常检测方法及装置 | |
| CN112149699A (zh) | 用于生成模型的方法、装置和用于识别图像的方法、装置 | |
| CN115376559A (zh) | 基于音视频的情绪识别方法、装置及设备 | |
| CN115147248B (zh) | 一种基于大数据的旅游信息咨询系统和方法 | |
| CN108268602A (zh) | 分析文本话题点的方法、装置、设备和计算机存储介质 | |
| CN111125550B (zh) | 兴趣点分类方法、装置、设备及存储介质 | |
| CN117290561B (zh) | 业务状态信息反馈方法、装置、设备和计算机可读介质 | |
| US20210241770A1 (en) | Voice-Based Time-Sensitive Task Processing Over a High Generation Cellular Network | |
| CN115146964B (zh) | 一种可实现智能分析的旅游管理系统及方法 | |
| CN116976321A (zh) | 文本处理方法、装置、计算机设备、存储介质和程序产品 | |
| CN115174620B (zh) | 一种智能化旅游综合服务系统和方法 | |
| CN114240250A (zh) | 一种职业评测的智能管理方法及系统 | |
| CN110378378B (zh) | 事件检索方法、装置、计算机设备及存储介质 | |
| CN112381989A (zh) | 排序方法、装置、系统和电子设备 | |
| CN115708085A (zh) | 业务处理、神经网络模型的训练方法、装置、设备及介质 | |
| CN111310858A (zh) | 用于生成信息的方法和装置 | |
| CN112560700A (zh) | 一种基于动作分析的信息关联方法、装置及电子设备 | |
| CN112308745A (zh) | 用于生成信息的方法和装置 | |
| CN107168988A (zh) | 查询彩票信息的方法、装置、设备和计算机存储介质 | |
| CN113014591B (zh) | 假冒公众号的检测方法和装置、电子设备、及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |