CN104503581A - 一种基于视频交互系统的科普方法 - Google Patents

一种基于视频交互系统的科普方法 Download PDF

Info

Publication number
CN104503581A
CN104503581A CN201410829143.3A CN201410829143A CN104503581A CN 104503581 A CN104503581 A CN 104503581A CN 201410829143 A CN201410829143 A CN 201410829143A CN 104503581 A CN104503581 A CN 104503581A
Authority
CN
China
Prior art keywords
information
video
popular science
science popularization
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410829143.3A
Other languages
English (en)
Inventor
陈拥权
李建中
郑荣稳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ANHUI COSWIT INFORMATION TECHNOLOGY Co Ltd
Original Assignee
ANHUI COSWIT INFORMATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ANHUI COSWIT INFORMATION TECHNOLOGY Co Ltd filed Critical ANHUI COSWIT INFORMATION TECHNOLOGY Co Ltd
Priority to CN201410829143.3A priority Critical patent/CN104503581A/zh
Publication of CN104503581A publication Critical patent/CN104503581A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明公开了一种基于视频交互系统的科普方法。该技术方案通过摄像头与麦克风获取目标人员的语音及视频信息，并由计算机利用语音识别与视频分析技术进行分析、转化为文本信息，再由计算机将文本信息与科普知识数据库进行匹配、向目标人员输出相应的科普信息。该方法能够显著提升目标人员获取科普信息的兴趣，提高科普工作的推进效率。

Description

一种基于视频交互系统的科普方法
技术领域
本发明涉及科普技术领域，具体涉及一种基于视频交互系统的科普方法。
背景技术
现有科普知识宣传过程中，往往借助纸质材料进行，或者由目标人员在电脑上进行学习，其形式往往比较枯燥，难以激发目标人员的浓厚兴趣，因此，科普效果不尽人意。
为更好提升科普工作的开展效率，本发明提供一种基于视频交互系统的科普方法，该技术方案能够以良好的互动体验提升目标人员的学习兴趣，从而更好提高科普工作的开展效率。
发明内容
针对上述问题，本发明提供的技术方案通过采取目标人员的语音及视频信息，并利用语音识别与视频分析技术进行分析、转化为文本信息，再将文本信息与科普知识数据库进行匹配、向目标人员输出相应的科普信息的方式，为科普工作的开展提供一种高效的技术手段。
本发明提供的具体技术方案是：
一种基于视频交互系统的科普方法，该方法在由包括摄像头、麦克风、电脑主机和显示器组成的系统中运行，其特征在于，该方法包括以下步骤：
有声视频图像采集，通过摄像头与麦克风采集目标人员的语音与视频信息；
语音与视频分析，利用语音分析与视频分析技术对所述语音及视频信息进行分析，转化为文本描述信息；
科普知识数据库匹配，由计算机将所述文本信息与科普知识数据库进行匹配，得到相应的科普知识信息；
信息输出，至少通过声音、图像、文字中的至少一种形式进行所述科普知识信息的输出。
所述摄像头为景深摄像头。
所述科普知识数据库中，每一个科普知识信息点分别设置有与之相对应的文本描述信息。
有益效果：本发明提供的一种基于视频交互系统的科普方法，通过采取目标人员的语音及视频信息，并利用语音识别与视频分析技术进行分析、转化为文本信息，再将文本信息与科普知识数据库进行匹配、向目标人员输出相应的科普信息的方式，为科普工作的开展提供一种高效的技术手段。
附图说明
图1所示是本发明工作流程图。
具体实施方式
为了更为具体地描述本发明，下面结合附图及具体实施方式对本发明的技术方案进行详细说明。
如图1所示，首先采集科普知识受教育人员的有声视频图像。具体方法为：受教育人员站在显示屏前，由安装在显示屏上方、目标人员正对面地摄像头与麦克风采集目标人员的语音与视频信息。视频信息包括目标人员的头部、胳膊、手等肢体动作。第二步为语音与视频分析过程。利用语音分析与视频分析技术对所述语音及视频信息进行分析，转化为文本描述信息。例如将目标人员的手指点击动作转化为开发屏幕上的链接、将语音“银河系”转化为“收索银河系”等。由计算机根据转化获得的文本信息，进行科普知识数据库匹配，得到相应的科普知识信息。之后，系统通过声音、图像、文字等形式进行所述科普知识信息的输出。
为更好的获得目标人员的肢体动作，本实施例中所用的摄像头为景深摄像头。为更好的激发目标人员的学习兴趣，系统可通过积分升级形式鼓励目标人员进行学习。
所述科普知识数据库中，每一个科普知识信息点分别设置有与之相对应的文本描述信息。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (3)

1.一种基于视频交互系统的科普方法，该方法在由包括摄像头、麦克风、电脑主机和显示器组成的系统中运行，其特征在于，该方法包括以下步骤：
有声视频图像采集，通过摄像头与麦克风采集目标人员的语音与视频信息；
语音与视频分析，利用语音分析与视频分析技术对所述语音及视频信息进行分析，转化为文本描述信息；
科普知识数据库匹配，由计算机将所述文本信息与科普知识数据库进行匹配，得到相应的科普知识信息；
信息输出，至少通过声音、图像、文字中的至少一种形式进行所述科普知识信息的输出。
2.如权利要求1所述的方法，其特征在于，所述摄像头为景深摄像头。
3.如权利要求1、2中任一项所述的方法，其特征在于，所述科普知识数据库中，每一个科普知识信息点分别设置有与之相对应的文本描述信息。
CN201410829143.3A 2014-12-26 2014-12-26 一种基于视频交互系统的科普方法 Pending CN104503581A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410829143.3A CN104503581A (zh) 2014-12-26 2014-12-26 一种基于视频交互系统的科普方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410829143.3A CN104503581A (zh) 2014-12-26 2014-12-26 一种基于视频交互系统的科普方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201510019621.9A Division CN104503590A (zh) 2014-12-26 2014-12-26 一种基于视频交互系统的科普方法

Publications (1)

Publication Number Publication Date
CN104503581A true CN104503581A (zh) 2015-04-08

Family

ID=52944983

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410829143.3A Pending CN104503581A (zh) 2014-12-26 2014-12-26 一种基于视频交互系统的科普方法

Country Status (1)

Country Link
CN (1) CN104503581A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111724640A (zh) * 2020-06-23 2020-09-29 核工业西南物理研究院 一种进化型人机交互式核聚变知识科普学习平台及方法
CN112633110A (zh) * 2020-12-16 2021-04-09 中国联合网络通信集团有限公司 数据处理方法和装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101098484A (zh) * 2006-06-30 2008-01-02 三星电子株式会社 使用VoIP的视频通信设备及其操作方法
CN101292282A (zh) * 2005-08-29 2008-10-22 沃伊斯博克斯科技公司 支持自然语言人机交互的移动系统和方法
CN102663143A (zh) * 2012-05-18 2012-09-12 徐信 一种音视频语音处理与检索的系统和方法
CN103428355A (zh) * 2012-05-24 2013-12-04 上海博泰悦臻电子设备制造有限公司 基于移动终端的语音控制装置及其语音控制方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101292282A (zh) * 2005-08-29 2008-10-22 沃伊斯博克斯科技公司 支持自然语言人机交互的移动系统和方法
CN101098484A (zh) * 2006-06-30 2008-01-02 三星电子株式会社 使用VoIP的视频通信设备及其操作方法
CN102663143A (zh) * 2012-05-18 2012-09-12 徐信 一种音视频语音处理与检索的系统和方法
CN103428355A (zh) * 2012-05-24 2013-12-04 上海博泰悦臻电子设备制造有限公司 基于移动终端的语音控制装置及其语音控制方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111724640A (zh) * 2020-06-23 2020-09-29 核工业西南物理研究院 一种进化型人机交互式核聚变知识科普学习平台及方法
CN112633110A (zh) * 2020-12-16 2021-04-09 中国联合网络通信集团有限公司 数据处理方法和装置
CN112633110B (zh) * 2020-12-16 2024-02-13 中国联合网络通信集团有限公司 数据处理方法和装置

Similar Documents

Publication Publication Date Title
KR102063037B1 (ko) 신원 인증 방법, 단말기 장치 및 컴퓨터 판독 가능한 저장 매체
JP6831682B2 (ja) 畳み込みニューラルネットワークによるナンバープレート認識のための粗から細へのカスケードによる適応
CN110446066B (zh) 用于生成视频的方法和装置
CN111651497B (zh) 用户标签挖掘方法、装置、存储介质及电子设备
CN104484656A (zh) 基于深度学习的唇语识别唇形模型库构建方法
EP4075430A2 (en) Method and apparatus for speech generation
WO2024036847A1 (zh) 图像处理方法和装置、电子设备和存储介质
CN109005451B (zh) 基于深度学习的视频拆条方法
EP2746989A3 (en) Document processing device, image processing apparatus, document processing method and computer program product
CN112507090B (zh) 用于输出信息的方法、装置、设备和存储介质
CN104537358A (zh) 基于深度学习的唇语识别唇形训练数据库的生成方法
CN106600213B (zh) 一种个人简历智能管理系统及方法
CN110516749A (zh) 模型训练方法、视频处理方法、装置、介质和计算设备
CN111144102A (zh) 用于识别语句中实体的方法、装置和电子设备
CA3152899A1 (en) METHOD AND SYSTEM FOR RECOGNIZING USER INTENTION AND UPDATING A GRAPHIC USER INTERFACE
CN110867187B (zh) 语音数据的处理方法、装置、存储介质及电子设备
CN115954001A (zh) 语音识别方法和模型训练方法
Vaezi Joze et al. Ms-asl: A large-scale data set and benchmark for understanding american sign language
Bandara et al. Forest sound classification dataset: Fsc22
CN104503581A (zh) 一种基于视频交互系统的科普方法
CN113053361B (zh) 语音识别方法、模型训练方法、装置、设备及介质
CN111883101B (zh) 一种模型训练及语音合成方法、装置、设备和介质
CN110852376B (zh) 用于识别生物种类的方法及系统
CN104881647A (zh) 信息处理方法、信息处理系统和信息处理装置
CN116629236A (zh) 一种待办事项提取方法、装置、设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150408

WD01 Invention patent application deemed withdrawn after publication