CN112331110A - 一种可互动的智能讲解器及其使用方法 - Google Patents

一种可互动的智能讲解器及其使用方法 Download PDF

Info

Publication number
CN112331110A
CN112331110A CN202011222689.4A CN202011222689A CN112331110A CN 112331110 A CN112331110 A CN 112331110A CN 202011222689 A CN202011222689 A CN 202011222689A CN 112331110 A CN112331110 A CN 112331110A
Authority
CN
China
Prior art keywords
key
module
questionnaire
user
main control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011222689.4A
Other languages
English (en)
Inventor
班璐
于意
于跃
闫亚雯
王子睿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dalian Minzu University
Original Assignee
Dalian Minzu University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dalian Minzu University filed Critical Dalian Minzu University
Priority to CN202011222689.4A priority Critical patent/CN112331110A/zh
Publication of CN112331110A publication Critical patent/CN112331110A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Finance (AREA)
  • Theoretical Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种可互动的智能讲解器及其使用方法，所述智能讲解器所述壳体正面嵌入有显示屏和按键模块，所述显示屏和按键模块与位于壳体内的主控板相连，所述主控板上设有调查问卷模块、情绪识别分析模块和数据统计模块，所述调查问卷模块采用七分量表模式；所述情绪识别分析模块，将摄像头采集的人脸表情分为生气、厌恶、恐惧、快乐、悲伤、惊讶、中性基本情绪；所述数据统计模块，对问卷中每道题各个选项的选择数量进行统计、及将用户答题时的表情与题号进行一一对应。本申请让用户在参观的同时增强互动感，加深记忆，同时针对用户统计出的数据也能给博物馆有效反馈,有利于其进行更新和改进。

Description

一种可互动的智能讲解器及其使用方法
技术领域
本发明涉及一种智能讲解器，具体涉及一种结合情绪识别技术和用户调查功能的展览馆讲解器。
背景技术
当前市场中存在的一些讲解器多为单向讲解，仅通过语音的方式传播内容，基本没有参观者调研反馈的功能，其与参观者互动性较低，产品体验仍有很大的可提升空间。
发明内容
本发明提供一台应用于博物馆等场所的讲解设备，该讲解设备除了可以给用户进行展品讲解之外，还内置了调查问卷模块、情绪识别分析模块和数据统计模块，让用户在参观的同时增强互动感，加深记忆，同时针对用户统计出的数据也能给博物馆有效反馈,有利于其进行更新和改进。
为实现上述目的，本申请的技术方案为：一种可互动的智能讲解器，包括壳体，所述壳体正面嵌入有显示屏和按键模块，所述显示屏和按键模块与位于壳体内的主控板相连，所述主控板还与闪存储存器、播放控件相连，所述播放控件与音频端口相连；在所述主控板上集成有NFC感应模块，所述NFC感应模块与展品上的NFC标签进行交互，在壳体顶部设有与主控板相连的摄像头；
所述主控板上设有调查问卷模块、情绪识别分析模块和数据统计模块，所述调查问卷模块采用七分量表模式，通过按键模块的完全反对按键、反对按键、较反对按键、中立按键、较赞成按键、赞成按键、完全赞成按键对问卷问题进行回答；所述情绪识别分析模块，将摄像头采集的人脸表情分为生气、厌恶、恐惧、快乐、悲伤、惊讶、中性(平静)基本情绪；所述数据统计模块，对问卷中每道题各个选项的选择数量进行统计、及将用户答题时的表情与题号进行一一对应。
进一步的，所述按键模块内置LED光源，用于提示用户进行选择操作。
进一步的，所述壳体一侧设有与主控板相连的开关键/播放键，壳体底部设有与主控板相连的USB端口。
进一步的，所述壳体内设有与主控板相连的锂电池。
本实施例还提供一种可互动的智能讲解器使用方法，具体包括：展品讲解步骤和用户调查反馈步骤；
所述展品讲解步骤,包括：
将智能讲解器靠近展品，按下开关键/播放键；
显示屏展现介绍内容画面，音频端口播放该展品的讲解语音；
所述用户调查反馈步骤，包括：
根据展品选择对应的调查问卷；
显示屏展示调查问卷上的具体内容，按键模块的LED光源亮起，提示用户进行选择；
针对调查问卷上的每个题目，用户按下完全反对按键、反对按键、较反对按键、中立按键、较赞成按键、赞成按键、完全赞成按键中的一个，此时摄像头采集用户表情；
对问卷中每道题各个选项的选择数量进行统计、及将用户答题时的表情与题号进行一一对应。
进一步的，每个题目的按键选择情况、摄像头采集的用户表情均存储在闪存储存器中。
进一步的，还包括：工作人员定期通过USB端口将存储的调查数据导出，对调查结果进行因素分析和可靠性分析。
本发明由于采用以上技术方案，能够取得如下的技术效果：
1.互动与讲解相互配合：将互动性内容融入本来单向性的博物馆参观中,让人们在参观博物馆时不仅可以获得知识信息,更可以通过互动加深记忆；
2.问卷调查反馈：该设备可以将用户问卷统计数据导出,作为博物馆内部的重要收集数据，为场馆的经营内容提供第一手的参考依据，调查反馈有利于场馆相关工作的更新和改进；
3.情绪识别增强调查可靠度：通过采集用户表情，进行情绪识别分析，可使调查数据更加具有可靠性。
附图说明
图1为一种可互动的智能讲解器结构示意图；
图2为一种可互动的智能讲解器使用方法流程图；
图中序号说明：1为摄像头；2为开关键/播放键；3为闪存存储器；4为显示屏；5为按键模块；6为主控板；7为锂电池；8为USB端口。
具体实施方式
下面结合附图和具体实施例对本发明作进一步详细的描述：以此为例对本申请做进一步的描述说明。
实施例1
本申请提供的一种可互动的智能讲解器，包括壳体，所述壳体正面嵌入有显示屏和按键模块，该按键模块内置LED光源，用于提示用户进行选择操作；所述显示屏和按键模块与位于壳体内的主控板相连，所述主控板还与闪存储存器、播放控件相连，所述播放控件与音频端口相连；在所述主控板上集成有NFC感应模块，当设备靠近展品时，NFC感应模块会检测到展品上的NFC标签并读取信息发送给主控板处理，主控板会根据读取到的NFC标签信息，从内置存储的讲解数据中选取对应的内容，从而播放讲解内容；在壳体顶部设有与主控板相连的摄像头；
所述主控板上设有调查问卷模块、情绪识别分析模块和数据统计模块，所述调查问卷模块采用七分量表模式，通过按键模块的完全反对按键、反对按键、较反对按键、中立按键、较赞成按键、赞成按键、完全赞成按键对问卷问题进行回答；主控板内置可以在嵌入式系统端运行的OpenCV跨平台机器视觉和机器学习软件库，并安装了本地端可运行的基本表情识别软件，所述情绪识别分析模块将摄像头采集的人脸表情分为生气、厌恶、恐惧、快乐、悲伤、惊讶、中性(平静)基本情绪；所述数据统计模块，对问卷中每道题各个选项的选择数量进行统计、及将用户答题时的表情与题号进行一一对应。
所述壳体一侧设有与主控板相连的开关键/播放键，壳体底部设有与主控板相连的USB端口，该端口同时可作为数据导出以及系统维护使用。所述壳体内设有与主控板相连的锂电池。
本实施例还提供一种可互动的智能讲解器使用方法，具体包括：展品讲解步骤和用户调查反馈步骤；
所述展品讲解步骤,包括：
将智能讲解器靠近展品，到达指定位置之后，按下开关键/播放键；
显示屏展现介绍内容画面，音频端口播放该展品的讲解语音；
所述用户调查反馈步骤，包括：
根据展品选择对应的调查问卷；
显示屏展示调查问卷上的具体内容，按键模块的LED光源亮起，提示用户进行选择；
针对调查问卷上的每个题目，用户按下完全反对按键、反对按键、较反对按键、中立按键、较赞成按键、赞成按键、完全赞成按键中的一个，此时摄像头采集用户表情；每个题目的按键选择情况、摄像头采集的用户表情均存储在闪存储存器中；
对问卷中每道题各个选项的选择数量进行统计、及将用户答题时的表情与题号进行一一对应；
工作人员定期通过USB端口将存储的调查数据导出，再进行因子分析、旋转因子、相关性分析，对调查结果进行因素分析和可靠性分析。
所述调查问卷中的题目可以包括与展品讲解内容相关的、还可以场馆设施、工作人员相关的。
以上所述，仅为本发明创造较佳的具体实施方式，但本发明创造的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明创造披露的技术范围内，根据本发明创造的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明创造的保护范围之内。

Claims (7)

1.一种可互动的智能讲解器，其特征在于，包括壳体，所述壳体正面嵌入有显示屏和按键模块，所述显示屏和按键模块与位于壳体内的主控板相连，所述主控板还与闪存储存器、播放控件相连，所述播放控件与音频端口相连；在所述主控板上集成有NFC感应模块，所述NFC感应模块与展品上的NFC标签进行交互，在壳体顶部设有与主控板相连的摄像头；
所述主控板上设有调查问卷模块、情绪识别分析模块和数据统计模块，所述调查问卷模块采用七分量表模式，通过按键模块的完全反对按键、反对按键、较反对按键、中立按键、较赞成按键、赞成按键、完全赞成按键对问卷问题进行回答；所述情绪识别分析模块，将摄像头采集的人脸表情分为生气、厌恶、恐惧、快乐、悲伤、惊讶、中性基本情绪；所述数据统计模块，对问卷中每道题各个选项的选择数量进行统计、及将用户答题时的表情与题号进行一一对应。
2.根据权利要求1所述一种可互动的智能讲解器，其特征在于，所述按键模块内置LED光源，用于提示用户进行选择操作。
3.根据权利要求1所述一种可互动的智能讲解器，其特征在于，所述壳体一侧设有与主控板相连的开关键/播放键，壳体底部设有与主控板相连的USB端口。
4.根据权利要求1所述一种可互动的智能讲解器，其特征在于，所述壳体内设有与主控板相连的锂电池。
5.一种可互动的智能讲解器使用方法，其特征在于，具体包括：展品讲解步骤和用户调查反馈步骤；
所述展品讲解步骤,包括：
将智能讲解器靠近展品，按下开关键/播放键；
显示屏展现介绍内容画面，音频端口播放该展品的讲解语音；
所述用户调查反馈步骤，包括：
根据展品选择对应的调查问卷；
显示屏展示调查问卷上的具体内容，按键模块的LED光源亮起，提示用户进行选择；
针对调查问卷上的每个题目，用户按下完全反对按键、反对按键、较反对按键、中立按键、较赞成按键、赞成按键、完全赞成按键中的一个，此时摄像头采集用户表情；
对问卷中每道题各个选项的选择数量进行统计、及将用户答题时的表情与题号进行一一对应。
6.根据权利要求5所述一种可互动的智能讲解器使用方法，其特征在于，每个题目的按键选择情况、摄像头采集的用户表情均存储在闪存储存器中。
7.根据权利要求5所述一种可互动的智能讲解器使用方法，其特征在于，还包括：工作人员定期通过USB端口将存储的调查数据导出，对调查结果进行因素分析和可靠性分析。
CN202011222689.4A 2020-11-05 2020-11-05 一种可互动的智能讲解器及其使用方法 Pending CN112331110A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011222689.4A CN112331110A (zh) 2020-11-05 2020-11-05 一种可互动的智能讲解器及其使用方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011222689.4A CN112331110A (zh) 2020-11-05 2020-11-05 一种可互动的智能讲解器及其使用方法

Publications (1)

Publication Number Publication Date
CN112331110A true CN112331110A (zh) 2021-02-05

Family

ID=74315330

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011222689.4A Pending CN112331110A (zh) 2020-11-05 2020-11-05 一种可互动的智能讲解器及其使用方法

Country Status (1)

Country Link
CN (1) CN112331110A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1940827A (zh) * 2005-09-30 2007-04-04 英业达股份有限公司 提示系统及方法
CN101174181A (zh) * 2006-10-31 2008-05-07 佛山市顺德区顺达电脑厂有限公司 按键功能提示方法
CN202142274U (zh) * 2011-07-20 2012-02-08 天津恒达文博科技有限公司 Pda多媒体互动导讲机
CN102999769A (zh) * 2012-11-21 2013-03-27 北京时代凌宇科技有限公司 展品导览方法
CN106531037A (zh) * 2016-12-28 2017-03-22 天津恒达文博科技有限公司 一种多模式混合定位导览方法及导览笔
CN108052889A (zh) * 2017-12-08 2018-05-18 上海壹账通金融科技有限公司 情绪识别方法、装置及存储介质
CN109584114A (zh) * 2018-12-03 2019-04-05 西安美上美旅游文化开发有限公司 一种智慧导游信息处理系统
CN111325895A (zh) * 2019-09-17 2020-06-23 西安美上美旅游文化开发有限公司 一种智慧导游信息处理方法及系统、信息数据处理终端

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1940827A (zh) * 2005-09-30 2007-04-04 英业达股份有限公司 提示系统及方法
CN101174181A (zh) * 2006-10-31 2008-05-07 佛山市顺德区顺达电脑厂有限公司 按键功能提示方法
CN202142274U (zh) * 2011-07-20 2012-02-08 天津恒达文博科技有限公司 Pda多媒体互动导讲机
CN102999769A (zh) * 2012-11-21 2013-03-27 北京时代凌宇科技有限公司 展品导览方法
CN106531037A (zh) * 2016-12-28 2017-03-22 天津恒达文博科技有限公司 一种多模式混合定位导览方法及导览笔
CN108052889A (zh) * 2017-12-08 2018-05-18 上海壹账通金融科技有限公司 情绪识别方法、装置及存储介质
CN109584114A (zh) * 2018-12-03 2019-04-05 西安美上美旅游文化开发有限公司 一种智慧导游信息处理系统
CN111325895A (zh) * 2019-09-17 2020-06-23 西安美上美旅游文化开发有限公司 一种智慧导游信息处理方法及系统、信息数据处理终端

Similar Documents

Publication Publication Date Title
CN108000526B (zh) 用于智能机器人的对话交互方法及系统
CN110971964B (zh) 智能解说生成、播放方法、装置、设备及存储介质
CN111339246B (zh) 查询语句模板的生成方法、装置、设备及介质
CN107300970A (zh) 虚拟现实交互方法和装置
CN101105895A (zh) 音视频多流合并教学训练系统及实现方法
CN110598576B (zh) 一种手语交互方法、装置及计算机介质
CN106648082A (zh) 一种模拟真人互动的智能服务设备及方法
CN107992195A (zh) 一种教学内容的处理方法、装置、服务器及存储介质
CN109871450A (zh) 基于绘本阅读的多模态交互方法及系统
CN108573403A (zh) 一种多维视觉导购系统和方法
CN103703465A (zh) 与媒体内的对象相关联的情感信息
CN206946267U (zh) 基于人工智能的智能镜子人机交互系统
US20240070397A1 (en) Human-computer interaction method, apparatus and system, electronic device and computer medium
CN112399258A (zh) 直播回放视频生成播放方法、装置、存储介质及电子设备
CN102820027B (zh) 伴唱字幕显示系统及方法
CN108115695A (zh) 一种情感色彩表达系统及机器人
CN111103982A (zh) 基于体感交互的数据处理方法以及装置、系统
CN108416420A (zh) 基于虚拟人的肢体交互方法及系统
CN108595012A (zh) 基于虚拟人的视觉交互方法及系统
CN111046148A (zh) 智能交互系统及智能客服机器人
CN111507741A (zh) 商品信息展示方法、系统、电子设备和计算机可读介质
CN110310528A (zh) 一种纸云互动语言教学系统和方法
CN209895305U (zh) 手势交互系统
CN108415561A (zh) 基于虚拟人的手势交互方法及系统
US11580868B2 (en) AR-based supplementary teaching system for guzheng and method thereof

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210205

RJ01 Rejection of invention patent application after publication