CN205177193U - 一种聋哑患者交流装置 - Google Patents

一种聋哑患者交流装置 Download PDF

Info

Publication number
CN205177193U
CN205177193U CN201520838810.4U CN201520838810U CN205177193U CN 205177193 U CN205177193 U CN 205177193U CN 201520838810 U CN201520838810 U CN 201520838810U CN 205177193 U CN205177193 U CN 205177193U
Authority
CN
China
Prior art keywords
deaf
sign language
display screen
button
touch display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201520838810.4U
Other languages
English (en)
Inventor
张宝峰
孔芳
熊焰
王平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou University
Original Assignee
Suzhou University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou University filed Critical Suzhou University
Priority to CN201520838810.4U priority Critical patent/CN205177193U/zh
Application granted granted Critical
Publication of CN205177193U publication Critical patent/CN205177193U/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本实用新型提供一种聋哑患者交流装置,包括主控单元、触摸显示屏、存储卡、麦克风、扬声器,所述主控单元连接触摸显示屏、存储卡、麦克风及扬声器,所述主控单元将从麦克风获取的音频转换为动画手语及文字输出在触摸显示屏上,或者从触摸显示屏获取文字信息或手语动画转换为语音从扬声器输出,可以使聋哑人与普通人方便地进行交流。同时,本装置还设有语音手语交流按钮、语音播放按钮、书写训练按钮及手语库按钮,扩展了装置不同方面的使用功能,使用时更加便捷。

Description

一种聋哑患者交流装置
技术领域
本实用新型属于聋哑患者辅助工具领域,具体涉及一种基于语音识别和语义理解的聋哑患者交流装置。
背景技术
随着全社会对聋哑患者的关心与帮助以及聋哑学校多年来的努力,近年来手语的普及有很大的提高。从聋哑学校毕业的聋哑患者都学会了手语,在街头也经常能够看见聋哑患者们通过手语聊天,他们用手语表达出丰富的思想,或高兴或兴奋或忧愁甚至用手语吵架,但是对于不会手语的其他人就无法和他们进行交流,无法了解他们的喜怒哀愁。
同时,由于文字阅读上的通用性有限,许多聋哑人并不识字,而手语交流是世界通用的聋哑人语言,如果人们在与聋哑人进行交流时,可以将所表达的信息转换为手语信息,就可以方便的与聋哑人进行交流沟通。
如上所述,当聋哑患者需要办理公共事务,例如去银行或医院,因为无法发声,一般都需要有人陪同,非常不方便。如果聋哑患者能够随身携带一个装置,这个装置能够进行语音识别和手语动画翻译,将帮助聋哑患者能够和非聋哑患者进行交流,提高聋哑患者的生活质量。
本实用新型提供一种基于语音识别和语义理解的聋哑患者交流装置,以解决上述问题。
实用新型内容
本实用新型提供一种聋哑患者交流装置,包括主控单元、触摸显示屏、存储卡、麦克风、扬声器,所述主控单元连接触摸显示屏、存储卡、麦克风及扬声器,所述主控单元将从麦克风获取的音频转换为动画手语及文字输出在触摸显示屏上,或者从触摸显示屏获取文字信息或手语动画转换为语音从扬声器输出。
优选的,所述聋哑患者交流装置还包括语音手语交流按钮,按下所述语音手语交流按钮后,麦克风开始采集语音音频数据。
优选的,所述聋哑患者交流装置还包括语音播放按钮,按下所述语音播放按钮后,触摸显示屏显示日常用语列表,点击后播放相应语音信息及手语动画。
优选的,所述聋哑患者交流装置还包括书写训练按钮,按下所述书写训练按钮,并开始在触摸显示屏上书写汉字,所述聋哑患者交流装置进行识别处理,播放语音信息和手语动画。
优选的,所述聋哑患者交流装置还包括手语库按钮,按下所述手语库按钮后,触摸显示屏显示手语库动画,用户对手语动画进行操作。
优选的,所述聋哑患者交流装置还包括电池设备。
通过本实用新型提供的聋哑患者交流装置,设置了主控单元、触摸显示屏、存储卡、麦克风、扬声器,所述主控单元连接触摸显示屏、存储卡、麦克风及扬声器,所述主控单元将从麦克风获取的音频转换为动画手语及文字输出在触摸显示屏上,或者从触摸显示屏获取文字信息或手语动画转换为语音从扬声器输出,可以使聋哑人与普通人方便地进行交流。同时,本装置还设有语音手语交流按钮、语音播放按钮、书写训练按钮及手语库按钮,扩展了装置不同方面的使用功能,使用时更加便捷。
附图说明
为了更清楚地说明本实用新型实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本实用新型的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本实用新型较佳实施例提供的聋哑患者交流装置内部结构示意图;
图2是本实用新型较佳实施例提供的聋哑患者交流装置外部结构示意图;
图3是本实用新型较佳实施例提供的聋哑患者交流系统内部功能分配示意图;
图4a是本实用新型较佳实施例提供的外部语音向触摸显示屏转换流程图;
图4b是本实用新型较佳实施例提供的从触摸显示屏向扬声器转换流程图;
图5是本实用新型较佳实施例提供的聋哑患者交流装置汉字书写训练流程图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本实用新型。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
图1是本实用新型较佳实施例提供的聋哑患者交流装置内部结构示意图。如图1所示,本实用新型较佳实施例提供的聋哑患者交流装置包括触摸显示屏1、存储卡2、主控单元3、麦克风4及扬声器5,所述主控单元3连接触摸显示屏1、存储卡2、麦克风4及扬声器5,所述主控单元3将从麦克风4获取的音频转换为动画手语及文字输出在触摸显示屏1上,或者从触摸显示屏1获取文字信息或手语动画转换为语音从扬声器5输出。
于此,所述主控单元由嵌入式芯片制作,所述触摸显示屏为触摸液晶显示屏,所述存储卡为SD存储卡。麦克风4可以固定在装置上,也可以取下,取下后对准麦克风说话,采集的语音信息质量更好,准确性更高。所述聋哑患者交流装置还包括电池设备6,所述电池设备为触摸液晶显示屏、扬声器、麦克风及SD存储卡提供电力。
图2是本实用新型较佳实施例提供的聋哑患者交流装置外部结构示意图。如图2所示,本实用新型较佳实施例提供的聋哑患者交流装置还包括支架7、语音手语交流按钮8、语音播放按钮9、书写训练按钮10及手语库按钮11。
本实施例中,所述支架用于支撑本装置,使其置于桌面上,方便采音和交流。此外,聋哑患者交流装置设置的多个外部按钮,用于实现语音与文本或手语动画间的转换,并提供日常手语动画的练习等。所述各按钮如下。
语音手语交流按钮,按下所述语音手语交流按钮后,麦克风开始采集语音音频数据。同时,所述语音音频数据传送到主控单元,由所述主控单元进行语音识别、句法分析、语义理解及手语动画匹配后,显示手语动画,并显示匹配的中文文本。
语音播放按钮,按下所述语音播放按钮后,触摸显示屏显示日常用语列表,点击后播放相应语音信息及手语动画。具体地,按下所述语音播放按钮按钮,显示屏列出日常生活用语的列表,列表显示语音项编号和中文文本,聋哑患者点击某条信息后会播放相应语音信息,同时会播放手语动画,帮助不识中文的患者记住语音信息的条目。
书写训练按钮,按下所述书写训练按钮,并开始在触摸显示屏上书写汉字,所述聋哑患者交流装置进行识别处理,播放语音信息和手语动画。具体地,由主控单元对输入的汉字进行文本和手语动画匹配,匹配成功后,播放语音信息和手语动画。
手语库按钮,按下所述手语库按钮后,触摸显示屏显示手语库动画,用户对手语动画进行操作。具体地,所述手语库保存于SD存储卡中,其中包括日常手语动画,用户可以对常用手语动画项进行排序,也可以画一串简单图形符号对手语动画项进行标注,以帮助记忆。
图3是本实用新型较佳实施例提供的聋哑患者交流系统内部功能分配示意图。如图3所示,程序写入主控单元后,手语动画、语音音频以及汉字特征模型信息存放在SD存储卡中,内置程序包含手语动画库,存储所有手语动画信息,用户可以进行手语动画的浏览和标注;包含语音库,存储所有语音音频信息和中文的对应关系数据,可以进行日常语音信息播放,选择语音项后可以进行手语动画浏览;包含汉字特征模型库,存储汉字特征模型数据共手写识别功能使用。
图4a是本实用新型较佳实施例提供的外部语音向触摸显示屏转换流程图;图4b是本实用新型较佳实施例提供的从触摸显示屏向扬声器转换流程图。如图4a及图4b所示,当非聋哑患者和聋哑患者交流时,首先由麦克风采集语音音频信息,由程序进行语音识别,进行句法分析和语义理解,然后确定相对应的中文文本,进行显示,根据匹配的中文文本匹配手语动画进行播放;当聋哑患者需要进行表达时,可以选择日常生活用语直接播放其语音音频,也可以手写中文文本后播放语音音频,也可以在手语库中选择手语动画后,由本装置匹配中文文本然后匹配语音音频进行播放。
图5是本实用新型较佳实施例提供的聋哑患者交流装置汉字书写训练流程图。参照图5,用户在触摸显示屏手写汉字,由系统根据汉字特征模型进行汉字识别,词语识别和手语动画匹配,最后再播放手语动画。
综上所述,通过本实用新型较佳实施例提供的聋哑患者交流装置,设置了主控单元、触摸显示屏、存储卡、麦克风、扬声器,所述主控单元连接触摸显示屏、存储卡、麦克风及扬声器,所述主控单元将从麦克风获取的音频转换为动画手语及文字输出在触摸显示屏上,或者从触摸显示屏获取文字信息或手语动画转换为语音从扬声器输出,可以使聋哑人与普通人方便地进行交流。同时,本装置还设有语音手语交流按钮、语音播放按钮、书写训练按钮及手语库按钮,扩展了装置不同方面的使用功能,使用时更加便捷。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本实用新型。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本实用新型的精神或范围的情况下,在其它实施例中实现。因此,本实用新型将不会被限制于本文所示的实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (6)

1.一种聋哑患者交流装置,其特征在于,包括主控单元、触摸显示屏、存储卡、麦克风、扬声器,所述主控单元连接触摸显示屏、存储卡、麦克风及扬声器,
所述主控单元将从麦克风获取的音频转换为动画手语及文字输出在触摸显示屏上,或者从触摸显示屏获取文字信息或手语动画转换为语音从扬声器输出。
2.根据权利要求1所述的聋哑患者交流装置,其特征在于,所述聋哑患者交流装置还包括语音手语交流按钮,按下所述语音手语交流按钮后,麦克风开始采集语音音频数据。
3.根据权利要求1所述的聋哑患者交流装置,其特征在于,所述聋哑患者交流装置还包括语音播放按钮,按下所述语音播放按钮后,触摸显示屏显示日常用语列表,点击后播放相应语音信息及手语动画。
4.根据权利要求1所述的聋哑患者交流装置,其特征在于,所述聋哑患者交流装置还包括书写训练按钮,按下所述书写训练按钮,并开始在触摸显示屏上书写汉字,所述聋哑患者交流装置进行识别处理,播放语音信息和手语动画。
5.根据权利要求1所述的聋哑患者交流装置,其特征在于,所述聋哑患者交流装置还包括手语库按钮,按下所述手语库按钮后,触摸显示屏显示手语库动画,用户对手语动画进行操作。
6.根据权利要求1所述的聋哑患者交流装置,其特征在于,所述聋哑患者交流装置还包括电池设备。
CN201520838810.4U 2015-10-27 2015-10-27 一种聋哑患者交流装置 Expired - Fee Related CN205177193U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201520838810.4U CN205177193U (zh) 2015-10-27 2015-10-27 一种聋哑患者交流装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201520838810.4U CN205177193U (zh) 2015-10-27 2015-10-27 一种聋哑患者交流装置

Publications (1)

Publication Number Publication Date
CN205177193U true CN205177193U (zh) 2016-04-20

Family

ID=55741153

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201520838810.4U Expired - Fee Related CN205177193U (zh) 2015-10-27 2015-10-27 一种聋哑患者交流装置

Country Status (1)

Country Link
CN (1) CN205177193U (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105206123A (zh) * 2015-10-27 2015-12-30 苏州大学 一种聋哑患者交流装置
CN105976675A (zh) * 2016-05-17 2016-09-28 福建万亿店中店电子商务有限责任公司 聋哑人与人的智能信息交流装置及其交流方法
CN110491250A (zh) * 2019-08-02 2019-11-22 安徽易百互联科技有限公司 一种聋哑人教学系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105206123A (zh) * 2015-10-27 2015-12-30 苏州大学 一种聋哑患者交流装置
CN105206123B (zh) * 2015-10-27 2018-06-29 苏州大学 一种聋哑患者交流装置
CN105976675A (zh) * 2016-05-17 2016-09-28 福建万亿店中店电子商务有限责任公司 聋哑人与人的智能信息交流装置及其交流方法
CN110491250A (zh) * 2019-08-02 2019-11-22 安徽易百互联科技有限公司 一种聋哑人教学系统

Similar Documents

Publication Publication Date Title
CN105206123A (zh) 一种聋哑患者交流装置
CN103077625A (zh) 一种盲用电子阅读器和助盲阅读方法
CN101115088A (zh) 聋哑人专用手机
CN205177193U (zh) 一种聋哑患者交流装置
CN101645190A (zh) 一种单词查询系统及其查询方法
CN203164971U (zh) 便携式中英交流装置
CN103631506A (zh) 基于终端的阅读方法及相应的终端
CN105551327A (zh) 一种基于柔性电子皮肤的互动式发音矫正系统及方法
CN201986001U (zh) 口型识别输入移动终端
CN201035501Y (zh) 智能同步手语翻译系统
CN113901186A (zh) 电话录音标注方法、装置、设备及存储介质
CN105807924A (zh) 一种基于柔性电子皮肤的互动式智能翻译系统及方法
CN202071566U (zh) 会读英语单词的笔
CN205211232U (zh) 一种多功能平板语言学习机
CN205281851U (zh) 一种电子阅读设备
CN201780773U (zh) Led歌词显示智能点歌系统
CN206259052U (zh) 一种多功能英语学习装置
CN105632514A (zh) 一种语义分析将语音转化为文字的方法及装置
CN203217570U (zh) 一种翻译机
CN207925131U (zh) 朗读设备
CN203801995U (zh) 一种具备翻译显示功能的英语教学专用课桌
CN201773400U (zh) 嵌入式体育词汇翻译系统
CN207587377U (zh) 一种使用蓝牙音箱的智能语音听说平板
CN205540722U (zh) 一种便携式商务英语翻译设备
CN206470650U (zh) 一种手持式中文应用智能查询装置

Legal Events

Date Code Title Description
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160420

Termination date: 20181027