CN104821109A - 一种基于图像和语音信息的在线答疑系统 - Google Patents

一种基于图像和语音信息的在线答疑系统 Download PDF

Info

Publication number
CN104821109A
CN104821109A CN201510276396.7A CN201510276396A CN104821109A CN 104821109 A CN104821109 A CN 104821109A CN 201510276396 A CN201510276396 A CN 201510276396A CN 104821109 A CN104821109 A CN 104821109A
Authority
CN
China
Prior art keywords
client
answering
information
picture file
question
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510276396.7A
Other languages
English (en)
Inventor
陈李江
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Yun Jiang Science And Technology Ltd
Original Assignee
Beijing Yun Jiang Science And Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Yun Jiang Science And Technology Ltd filed Critical Beijing Yun Jiang Science And Technology Ltd
Priority to CN201510276396.7A priority Critical patent/CN104821109A/zh
Publication of CN104821109A publication Critical patent/CN104821109A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers
    • G09B7/02—Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提出的一种基于图像和语音信息的在线答疑系统，包括提问客户端、服务器系统、答疑客户端；提问客户端用于采集包含试题信息的图片文件并传送至服务器系统，服务器系统用于识别图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端；所述服务器系统具有辨别发送模块，用于筛选无法识别或无法答复的图片文件，并将无法识别或无法答复的图片文件即时发送至答疑客户端；答疑客户端用于接收服务器系统发送来的图片文件，并进行答疑信息的录入，经由服务器系统将答疑方的答疑信息发送至提问客户端。本发明提高了在线答疑系统中无法识别或无法答复的图片文件的回复准确率。

Description

一种基于图像和语音信息的在线答疑系统
技术领域
本发明涉及在线答疑软件中的信息交互方面，特别是涉及语音和图像多媒体信息交互方式。
背景技术
在线答疑软件中，一般包括提问客户端、服务器系统，提问客户端用于采集包含试题信息的图片文件并传送至服务器系统，服务器系统用于识别由提问客户端传送来的图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端。这种方式大大节省了人力，但是在问题识别、数据库完善度、匹配算法存在一些不足，较低了回复的正确率，而且数据库的完善也加大了软件公司的人力投入。
发明内容
为了解决上述技术问题，本发明提出了一种基于图像和语音信息的在线答疑系统，提高了无法识别或无法答复的图片文件的回复准确率。
本发明提出的一种基于图像和语音信息的在线答疑系统，包括提问客户端、服务器系统、答疑客户端；提问客户端用于采集包含试题信息的图片文件并传送至服务器系统，服务器系统用于识别由提问客户端传送来的图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端；所述服务器系统具有无法识别或无法答复的问题的辨别发送模块；所述的辨别发送模块用于筛选无法识别或无法答复的图片文件，并将无法识别或无法答复的图片文件即时发送至答疑客户端；答疑客户端用于接收服务器系统发送来的图片文件，并进行答疑信息的录入，将录入的答疑信息发送至服务器系统，并经由服务器系统将答疑方的答疑信息发送至提问客户端。
优选的，所述服务器系统包含试题答案及解析数据库以及数据库信息增录模块；所述的数据库增录模块用于将无法识别或无法答复图片文件与答疑客户端返回的答疑信息进行关联，并增录入试题答案及解析数据库。
优选的，所述数据库信息增录模块包括核检模块；所述核检模块用于显示、修改、确认新增录的图片文件及答疑信息。
优选的，所述的答疑信息为文本文件。
优选的，所述的答疑信息为增录有文本信息的图片文件。
优选的，所述的答疑信息为音频文件。
优选的，所述的答疑信息为将语音文件作为图片文件的扩展数据编码到图片文件中生成语音图片文件。
本发明通过增加答疑客户端，通过将服务器系统无法识别或无法答复的图片文件即时发送至答疑客户端，经答疑人录入答疑信息后通过服务器系统反馈至提问客户端，大大提高了提问客户端发出的服务器系统无法识别或无法答复的图片文件的回复准确率；数据库增录模块的引入，实现了服务器系统中答案及解析数据库信息增录的众包模式，大大加快了服务器系统中答案及解析数据库完善的效率。
附图说明
图1示出本发明实施例的流程框图。
具体实施方式
下面结合附图详细说明本发明技术方案中所涉及的各个细节问题。应指出的是，所描述的实施例仅旨在便于对本发明的理解，而对其不起任何限定作用。
本发明实施例的一种基于图像和语音信息的在线答疑系统，包括提问客户端、服务器系统、答疑客户端；提问客户端用于采集包含试题信息的图片文件并传送至服务器系统；服务器系统用于识别由提问客户端传送来的图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端；所述服务器系统还具有无法识别或无法答复的问题的辨别发送模块；所述的辨别发送模块用于筛选无法识别或无法答复的图片文件，并将无法识别或无法答复的图片文件即时发送至答疑客户端；答疑客户端用于接收服务器系统发送来的图片文件，并进行答疑信息的录入，将录入的答疑信息发送至服务器系统，并经由服务器系统将答疑方的答疑信息发送至提问客户端。
所述服务器系统包含试题答案及解析数据库以及数据库信息增录模块；所述的数据库增录模块用于将无法识别或无法答复图片文件与答疑客户端返回的答疑信息进行关联，并增录入试题答案及解析数据库。
所述数据库信息增录模块包括核检模块；所述核检模块用于显示、修改、确认新增录的图片文件及答疑信息。
提问客户端和答疑客户端可以为电脑或手机，本实施例优选采用手机。
常用的交互方式有文字答疑，图片答疑，也有少部分软件应用到了语音答疑。无论哪种答疑方式，都有其自身的局限性，文字答疑方式需要输入很多文字，比较繁琐，使用图片答疑方式，优点是比较简单，但缺点是不能很好的体现出答疑的思路，而单纯的语音答疑也不能完全解决问题，比如几何题等。为此，本实施例的答疑客户端具有文本文件录入功能、图片文件的文字增录功能、音频录入功能、将语音文件作为图片文件的扩展数据编码到图片文件的功能，因此，对应的答疑信息可以为文本文件、增录有文本信息的图片文件、音频文件、将语音文件作为图片文件的扩展数据编码到图片文件中生成语音图片文件任一种。
本实施例的流程如图1所示，具体包括以下步骤：
步骤1，提问人员通过提问客户端录入需要解答的试题图片文件，该图片文件可以为手机内存储的，也可以即时拍照获得；
步骤2，提问人员利用提问客户端对需要解答的试题图片文件进行编辑和裁剪，实现一张图片只显示一道试题，然后将处理后的图片文件发送至服务器系统；
步骤3，服务器系统接收提问客户端发送来的图片文件，并进行图片处理和信息提取；其中信息提取包括文字信息和图像元素；
步骤4，判断图片处理和信息提取是否成功，若成功执行步骤5，否则执行步骤6；
步骤5，判断依据提取信息进行试题答案和解析的信息匹配是否成功，若成功执行步骤8；否则执行步骤6；
步骤6，服务器系统将无法识别或无法答复的图片文件即时发送至答疑客户端；
步骤7，答疑人员通过答疑客户端查看服务器系统发送来的试题图片，通过答疑客户端录入答疑信息；答疑信息录入完毕后，答疑客户将录入的答疑信息发送至服务器系统；
步骤8，服务器系统将答案和解析发送至提问客户端。
以上所述，仅为本发明中的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉该技术的人在本发明所揭露的技术范围内，可理解想到的变换或替换，都应涵盖在本发明的包含范围之内，因此，本发明的保护范围应该以权利要求书的保护范围为准。

Claims (7)

1.一种基于图像和语音信息的在线答疑系统，包括提问客户端、服务器系统，提问客户端用于采集包含试题信息的图片文件并传送至服务器系统，服务器系统用于识别由提问客户端传送来的图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端，其特征在于，所述的在线答疑系统还包括答疑客户端，所述服务器系统具有无法识别或无法答复的问题的辨别发送模块；所述的辨别发送模块用于筛选无法识别或无法答复的图片文件，并将无法识别或无法答复的图片文件即时发送至答疑客户端；答疑客户端用于接收服务器系统发送来的图片文件，并进行答疑信息的录入，将录入的答疑信息发送至服务器系统，并经由服务器系统将答疑方的答疑信息发送至提问客户端。
2.如权利要求1所述的一种基于图像和语音信息的在线答疑系统，其特征在于，所述服务器系统包含试题答案及解析数据库以及数据库信息增录模块；所述的数据库增录模块用于将无法识别或无法答复图片文件与答疑客户端返回的答疑信息进行关联，并增录入试题答案及解析数据库。
3.如权利要求2所述的一种基于图像和语音信息的在线答疑系统，其特征在于，所述数据库信息增录模块包括核检模块；所述核检模块用于显示、修改、确认新增录的图片文件及答疑信息。
4.如权利要求3所述的一种基于图像和语音信息的在线答疑系统，其特征在于，所述的答疑信息为文本文件。
5.如权利要求3所述的一种基于图像和语音信息的在线答疑系统，其特征在于，所述的答疑信息为增录有文本信息的图片文件。
6.如权利要求3所述的一种基于图像和语音信息的在线答疑系统，其特征在于，所述的答疑信息为音频文件。
7.如权利要求3所述的一种基于图像和语音信息的在线答疑系统，其特征在于，所述的答疑信息为将语音文件作为图片文件的扩展数据编码到图片文件中生成语音图片文件。
CN201510276396.7A 2015-05-26 2015-05-26 一种基于图像和语音信息的在线答疑系统 Pending CN104821109A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510276396.7A CN104821109A (zh) 2015-05-26 2015-05-26 一种基于图像和语音信息的在线答疑系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510276396.7A CN104821109A (zh) 2015-05-26 2015-05-26 一种基于图像和语音信息的在线答疑系统

Publications (1)

Publication Number Publication Date
CN104821109A true CN104821109A (zh) 2015-08-05

Family

ID=53731387

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510276396.7A Pending CN104821109A (zh) 2015-05-26 2015-05-26 一种基于图像和语音信息的在线答疑系统

Country Status (1)

Country Link
CN (1) CN104821109A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105118339A (zh) * 2015-09-30 2015-12-02 广东小天才科技有限公司 一种基于情境学习的教学方法及装置
CN107219789A (zh) * 2017-04-13 2017-09-29 上海市金山区青少年活动中心 基于app与单片机的师生答疑及浴室信息实时共享系统
CN107688883A (zh) * 2016-08-04 2018-02-13 作业帮教育科技（北京）有限公司 在线答疑时的调度方法和装置
CN109582763A (zh) * 2017-09-27 2019-04-05 韩国电子通信研究院 运动图像专家组媒体物联网环境中的答疑系统及方法
WO2019214613A1 (zh) * 2018-05-11 2019-11-14 鸿合科技股份有限公司 拍照出题的方法、装置、系统和计算机可读存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007322748A (ja) * 2006-05-31 2007-12-13 Mikio Takagi 高速採点集計システム、高速採点集計プログラムならびにその採点端末
CN101587656A (zh) * 2008-05-23 2009-11-25 北京智慧东方信息技术有限公司 一种网络教学答疑的方法
CN101971262A (zh) * 2007-12-21 2011-02-09 皇家飞利浦电子股份有限公司 用于播放图片的方法和设备
CN103177108A (zh) * 2013-03-26 2013-06-26 中山大学 一种基于internet的医疗自动答疑方法及其系统
CN103595925A (zh) * 2013-11-15 2014-02-19 深圳市中兴移动通信有限公司 照片合成视频的方法和装置
CN103778816A (zh) * 2014-01-27 2014-05-07 上海五和文化传播有限公司 纸质试卷的答案提取系统
CN103955525A (zh) * 2014-05-09 2014-07-30 北京奇虎科技有限公司 一种搜索试题答案的方法及客户端
CN104021509A (zh) * 2014-06-16 2014-09-03 兴天通讯技术（天津）有限公司 学习档案的生成方法及生成系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007322748A (ja) * 2006-05-31 2007-12-13 Mikio Takagi 高速採点集計システム、高速採点集計プログラムならびにその採点端末
CN101971262A (zh) * 2007-12-21 2011-02-09 皇家飞利浦电子股份有限公司 用于播放图片的方法和设备
CN101587656A (zh) * 2008-05-23 2009-11-25 北京智慧东方信息技术有限公司 一种网络教学答疑的方法
CN103177108A (zh) * 2013-03-26 2013-06-26 中山大学 一种基于internet的医疗自动答疑方法及其系统
CN103595925A (zh) * 2013-11-15 2014-02-19 深圳市中兴移动通信有限公司 照片合成视频的方法和装置
CN103778816A (zh) * 2014-01-27 2014-05-07 上海五和文化传播有限公司 纸质试卷的答案提取系统
CN103955525A (zh) * 2014-05-09 2014-07-30 北京奇虎科技有限公司 一种搜索试题答案的方法及客户端
CN104021509A (zh) * 2014-06-16 2014-09-03 兴天通讯技术（天津）有限公司 学习档案的生成方法及生成系统

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105118339A (zh) * 2015-09-30 2015-12-02 广东小天才科技有限公司 一种基于情境学习的教学方法及装置
CN107688883A (zh) * 2016-08-04 2018-02-13 作业帮教育科技（北京）有限公司 在线答疑时的调度方法和装置
CN107688883B (zh) * 2016-08-04 2023-06-27 作业帮教育科技（北京）有限公司 在线答疑时的调度方法和装置
CN107219789A (zh) * 2017-04-13 2017-09-29 上海市金山区青少年活动中心 基于app与单片机的师生答疑及浴室信息实时共享系统
CN109582763A (zh) * 2017-09-27 2019-04-05 韩国电子通信研究院 运动图像专家组媒体物联网环境中的答疑系统及方法
CN109582763B (zh) * 2017-09-27 2023-08-22 韩国电子通信研究院 运动图像专家组媒体物联网环境中的答疑系统及方法
WO2019214613A1 (zh) * 2018-05-11 2019-11-14 鸿合科技股份有限公司 拍照出题的方法、装置、系统和计算机可读存储介质
CN110473437A (zh) * 2018-05-11 2019-11-19 鸿合科技股份有限公司 一种拍照出题的方法和装置

Similar Documents

Publication Publication Date Title
CN104821109A (zh) 一种基于图像和语音信息的在线答疑系统
US11769498B2 (en) Method, apparatus, and computer program product for searchable real-time transcribed audio and visual content within a group-based communication system
US11676576B2 (en) Organizational-based language model generation
EP3402136B1 (en) Information interaction method, client and device
WO2018222228A1 (en) Automated population of electronic records
US10468051B2 (en) Meeting assistant
US11146509B2 (en) Systems and methods of instant-messaging bot supporting human-machine symbiosis
CN110060663A (zh) 一种应答服务的方法、装置及系统
US20180046707A1 (en) Providing searching strategy in connection with answering question in message
CN110620934A (zh) 用于直播教学的互动方法和装置
US9906485B1 (en) Apparatus and method for coordinating live computer network events
CN114244793A (zh) 信息处理方法、装置、设备及存储介质
CN104506898A (zh) 图像信息处理方法及系统
CN105376143B (zh) 一种识别发送者身份的方法及装置
CN111583932A (zh) 一种基于人声模型的声音分离方法和装置以及设备
CN104104580A (zh) 一种群组信息的处理方法、群组信息系统及相关装置
CN114390452A (zh) 消息发送方法及相关设备
CN115277613A (zh) 一种基于业务的机器人聊天系统
CN105306337A (zh) 基于即时通讯的多人会话文件共享方法、装置和系统
US20200322293A1 (en) Information processing system and method
CN113947166A (zh) 问卷统计实时处理方法、系统、电子设备及存储介质
CN109299240B (zh) 聊天机器人知识展示方法及装置
CN111583953A (zh) 一种基于声纹特征的人声分离方法和装置以及设备
CN111312260A (zh) 一种人声分离方法和装置以及设备
CN104123391A (zh) 一种通过识别手机文件内容中的联系人信息实现快捷通讯的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20150805