CN108538152A - 一种用于聋哑人正常语音交流的便携式设备 - Google Patents

一种用于聋哑人正常语音交流的便携式设备 Download PDF

Info

Publication number
CN108538152A
CN108538152A CN201810327846.4A CN201810327846A CN108538152A CN 108538152 A CN108538152 A CN 108538152A CN 201810327846 A CN201810327846 A CN 201810327846A CN 108538152 A CN108538152 A CN 108538152A
Authority
CN
China
Prior art keywords
finger
phalanx
toe
module
portable device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810327846.4A
Other languages
English (en)
Inventor
张健
张长胜
高炎杉
柴雪倩
陈基康
叶淑祯
李�远
景雅倩
凌妙恩
倪阳阳
刘欢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Laser and Optoelectronics Intelligent Manufacturing of Wenzhou University
Original Assignee
Institute of Laser and Optoelectronics Intelligent Manufacturing of Wenzhou University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Laser and Optoelectronics Intelligent Manufacturing of Wenzhou University filed Critical Institute of Laser and Optoelectronics Intelligent Manufacturing of Wenzhou University
Priority to CN201810327846.4A priority Critical patent/CN108538152A/zh
Publication of CN108538152A publication Critical patent/CN108538152A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00Teaching, or communicating with, the blind, deaf or mute

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种用于聋哑人正常语音交流的便携式设备,包括设备本体、上位机和控制单元,其中,所述设备本体为手套状,包括大拇指、食指、中指、无名指和小指,将26个英文字母分配在所述食指、所述中指和所述无名指上,将音调分配在所述小指上;所述上位机是一种能够运行软件的硬件设备;所述控制单元包括微控制器、传感器、语音模块和无线通讯模块;所述上位机与所述控制单元通过无线数据连接。本发明将26个英文字母进行分配在所述食指、所述中指和所述无名指,并将音调分配在所述小指,并用所述大拇指在其他几个手指上进行敲打,形成文字并转换成语音,极大方便聋哑人的正常交流。

Description

一种用于聋哑人正常语音交流的便携式设备
技术领域
本发明涉及聋哑人辅助交流技术领域,具体涉及一种聋哑人语音辅助设备。
背景技术
语音是心灵的窗户,它直接反映出人们的想法、意愿和心声。同样对于聋哑者们来说,手语则是他们心灵的窗户,是他们进行社会活动、学习知识、交流情感的主要方式,是他们与外界进行交流沟通的桥梁。由此可见,手语在他们的生活中显得尤为重要,但是显示生活中不是每个健全人事都能看懂手语,因此,手语翻译对于交流在现实生活中变得越来越重要。
现实生活中,常遇到一些场合,由于交流者本身的限制或环境的限制,交流并不是通过语音来实现,而是通过手势来实现,聋哑人在交流,表达方不具备语音交流的能力,但却会手语,而倾听对象只能通过语音或者文学的方式才能清楚的表达该表达者能够表达的正确意思,且聋哑人语音辅助设备基本都是单向性,如需要很好的解决如上场景需要一种针对聋哑人与正常人之间的双向交流且智能、便捷和灵活的方便使用者携带的设备。
发明内容
有鉴于此,本发明提供一种可以进行手指敲击进行交流并可将语音转化为手语手势、且携带方便的聋哑人语音辅助设备。
为实现上述目的,本发明提供如下技术方案:
一种用于聋哑人正常语音交流的便携式设备,包括设备本体、上位机和控制单元,其中,所述设备本体为手套状,包括大拇指、食指、中指、无名指和小指,将26个英文字母分配在所述食指、所述中指和所述无名指上,将音调分配在所述小指上;所述上位机是一种能够运行软件的硬件设备;所述控制单元包括微控制器、传感器、语音模块和无线通讯模块,所述微控制器控制所述传感器、所述语音模块和所述无线通讯模块,所述传感器、所述语音模块和所述无线通讯模块均与所述微控制器电连接;所述上位机与所述控制单元通过无线数据连接。
更进一步地,所述食指包括食指远节指骨、食指中节指骨和食指近节指骨,其中,所述食指远节指骨可敲击出英文字母的ABC三个字母,所述食指中节指骨可敲击出英文字母的DEFG四个字母,所述食指近节指骨可敲击出英文字母的H I J三个字母。
更进一步地,所述中指包括中指远节指骨、中指中节指骨和中指近节指骨,其中,所述中指远节指骨可敲击出英文字母的KLM三个字母,所述中指中节指骨可敲击出英文字母的NOP三个字母,所述中指近节指骨可敲击出英文字母的QRS三个字母。
更进一步地,所述无名指包括无名指远节指骨、无名指中节指骨和无名指近节指骨,其中,所述无名指远节指骨可敲击出英文字母的UVW三个字母,所述无名指中节指骨可敲击出英文字母的XYZ三个字母,所述无名指近节指骨为确认键和删除键。
更进一步地,所述小指包括小指远节指骨、小指中节指骨和小指近节指骨,其中,所述小指远节指骨控制音调的二声,所述小指中节指骨控制音调的三声,所述小指近节指骨控制音调的四声。
更进一步地,所述上位机包括语音识别模块,所述语音识别模块包含TTS语音芯片,所述语音识别模块上设有音频接口和蓝牙无线模块,用于将语音信号通过蓝牙无线方式发送至蓝牙耳机。
进一步地,所述无线通讯模块优选无线射频模块、W I F I模块、蓝牙模块等。
进一步地,语音模块包含储存器。
更进一步地,所述上位机可以包含PC机、手机和PAD中任一个或者多个。
从上述的技术方案可以看出,本发明的优点是:
1、与现有技术相比,本发明将26个英文字母进行分配在所述食指、所述中指、所述无名指和所述小指上,并用所述大拇指在其他几个手指上进行敲打,形成文字并转换成语音,极大方便聋哑人的正常交流。
2、本发明可将正常人的语音内容在所述上位机上转换成手语图片,方便了正常人与聋哑人之间的交流。
除了上面所描述的目的、特征和优点之外,本发明还有其它的目的、特征和优点。下面将参照图,对本发明作进一步详细的说明。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1是本发明的系统框架图。
图2是正常人使用本发明的流程与方法示意图。
图中标记为:设备本体10、微控制器1、大拇指2、食指3、食指远节指骨31、食指中节指骨32、食指近节指骨33、中指4、中指远节指骨41、中指中节指骨42、中指近节指骨43、无名指5、无名指远节指骨51、无名指中节指骨52、无名指近节指骨53、小指6、小指远节指骨61、小指中节指骨62、小指近节指骨63、传感器7、语音模块8、无线通讯模块9、上位机20、语音识别模块201、TTS语音芯片2011。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参考图1至图2,如图1所示的一种用于聋哑人正常语音交流的便携式设备,包括设备本体10、上位机20和控制单元30,其中,所述设备本体10为手套状,包括大拇指2、食指3、中指4、无名指5和小指6,将26个英文字母分配在所述食指3、所述中指4和所述无名指5上,将音调分配在所述小指6上;所述上位机20是一种能够运行软件的硬件设备;所述控制单元(30)包括微控制器1、传感器7、语音模块8和无线通讯模块9,所述微控制器1控制所述传感器7、所述语音模块8和所述无线通讯模块9,所述传感器7、所述语音模块8和所述无线通讯模块9均与所述微控制器1电连接;所述上位机20与所述控制单元30通过无线数据连接。
如图1所示,所述食指3包括食指远节指骨31、食指中节指骨32和食指近节指骨33,其中,所述食指远节指骨31可敲击出英文字母的ABC三个字母,所述食指中节指骨32可敲击出英文字母的DEFG四个字母,所述食指近节指骨33可敲击出英文字母的H I J三个字母,所述中指4包括中指远节指骨41、中指中节指骨42和中指近节指骨43,其中,所述中指远节指骨41可敲击出英文字母的KLM三个字母,所述中指中节指骨42可敲击出英文字母的NOP三个字母,所述中指近节指骨43可敲击出英文字母的QRS三个字母,所述无名指5包括无名指远节指骨51、无名指中节指骨52和无名指近节指骨53,其中,所述无名指远节指骨51可敲击出英文字母的UVW三个字母,所述无名指中节指骨52可敲击出英文字母的XYZ三个字母,所述无名指近节指骨53为确认键和删除键,所述小指6包括小指远节指骨61、小指中节指骨62和小指近节指骨63,其中,所述小指远节指骨61控制音调的二声,所述小指中节指骨62控制音调的三声,所述小指近节指骨63控制音调的四声。
如图1所示,所述上位机20包括语音识别模块201,所述语音识别模块201包含TTS语音芯片2011,所述语音识别模块201上设有音频接口和蓝牙无线模块,用于将语音信号通过蓝牙无线方式发送至蓝牙耳机,所述无线通讯模块9优选无线射频模块、W I F I模块、蓝牙模块等,所示语音模块8包含储存器,所示语音模块8为I DS1820模块。
如图1所示,所述上位机20是一种能够运行软件的硬件设备,包含PC机、手机和PAD。
如图2所示,正常人的使用流程与方法如下:
正常人通过语音表达后,所示上位机20内的应用程序将语音识别为相应的文字信息,然后通过中文分词算法进行句子的分割,将其分割成适用于手语表达的基本词汇,然后根据不同的基本词汇读取相应的手语图片,并以动态或者静态的形式播放于所述上位机20的应用程序界面。
本发明将26个英文字母进行分配在所述食指3、所述中指4和所述无名指5,并将音调分配在所述小指6,并用所述大拇指2在其他几个手指上进行敲打,形成文字并转换成语音,极大方便聋哑人的正常交流,可将正常人的语音内容在所述上位机20上转换成手语图片,方便了正常人与聋哑人之间的交流。
以上仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种用于聋哑人正常语音交流的便携式设备,其特征在于,包括设备本体(10)、上位机(20)和控制单元(30),其中,所述设备本体(10)为手套状,包括大拇指(2)、食指(3)、中指(4)、无名指(5)和小指(6),将26个英文字母分配在所述食指(3)、所述中指(4)和所述无名指(5)上,将音调分配在所述小指(6)上;所述上位机(20)是一种能够运行软件的硬件设备;所述控制单元(30)包括微控制器(1)、传感器(7)、语音模块(8)和无线通讯模块(9),所述微控制器(1)控制所述传感器(7)、所述语音模块(8)和所述无线通讯模块(9),所述传感器(7)、所述语音模块(8)和所述无线通讯模块(9)均与所述微控制器(1)电连接;所述上位机(20)与所述控制单元(30)通过无线数据连接。
2.根据权利要求1所述的便携式设备,其特征在于,所述食指(3)包括食指远节指骨(31)、食指中节指骨(32)和食指近节指骨(33),其中,所述食指远节指骨(31)可敲击出英文字母的ABC三个字母,所述食指中节指骨(32)可敲击出英文字母的DEFG四个字母,所述食指近节指骨(33)可敲击出英文字母的H I J三个字母。
3.根据权利要求2所述的便携式设备,其特征在于,所述中指(4)包括中指远节指骨(41)、中指中节指骨(42)和中指近节指骨(43),其中,所述中指远节指骨(41)可敲击出英文字母的KLM三个字母,所述中指中节指骨(42)可敲击出英文字母的NOP三个字母,所述中指近节指骨(43)可敲击出英文字母的QRS三个字母。
4.根据权利要求3所述的便携式设备,其特征在于,所述无名指(5)包括无名指远节指骨(51)、无名指中节指骨(52)和无名指近节指骨(53),其中,所述无名指远节指骨(51)可敲击出英文字母的UVW三个字母,所述无名指中节指骨(52)可敲击出英文字母的XYZ三个字母,所述无名指近节指骨(53)为确认键和删除键。
5.根据权利要求4所述的便携式设备,其特征在于,所述小指(6)包括小指远节指骨(61)、小指中节指骨(62)和小指近节指骨(63),其中,所述小指远节指骨(61)控制音调的二声,所述小指中节指骨(62)控制音调的三声,所述小指近节指骨(63)控制音调的四声。
6.根据权利要求5所述的便携式设备,其特征在于,所述上位机(20)包括语音识别模块(201),所述语音识别模块(201)包含TTS语音芯片(2011),所述语音识别模块(201)上设有音频接口和蓝牙无线模块,用于将语音信号通过蓝牙无线方式发送至蓝牙耳机。
7.根据权利要求1所述的便携式设备,其特征在于,所述无线通讯模块(9)优选无线射频模块、W I F I模块、蓝牙模块等。
8.根据权利要求1所述的便携式设备,其特征在于,语音模块(8)包含储存器。
9.根据权利要求6所述的便携式设备,其特征在于,所述上位机(20)包含PC机或/和手机或PAD。
CN201810327846.4A 2018-04-12 2018-04-12 一种用于聋哑人正常语音交流的便携式设备 Pending CN108538152A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810327846.4A CN108538152A (zh) 2018-04-12 2018-04-12 一种用于聋哑人正常语音交流的便携式设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810327846.4A CN108538152A (zh) 2018-04-12 2018-04-12 一种用于聋哑人正常语音交流的便携式设备

Publications (1)

Publication Number Publication Date
CN108538152A true CN108538152A (zh) 2018-09-14

Family

ID=63479934

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810327846.4A Pending CN108538152A (zh) 2018-04-12 2018-04-12 一种用于聋哑人正常语音交流的便携式设备

Country Status (1)

Country Link
CN (1) CN108538152A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109448696A (zh) * 2018-12-27 2019-03-08 韩思清 一种与聋哑人双向交流的发声手套装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060022984A (ko) * 2004-09-08 2006-03-13 홍광석 키패드 글러브 장치
WO2007076592A1 (en) * 2006-01-04 2007-07-12 Iron Will Creations Inc. Inputting information with finger-mounted sensors
DE202012010610U1 (de) * 2012-10-30 2013-01-30 Abulfezl Chorabchie Gerät zur Sprach- und Fernkommunikationsmöglichkeit für Gehörlose durch Impulssprache
CN103295570A (zh) * 2013-06-05 2013-09-11 华东师范大学 一种手套式发声系统
CN106898197A (zh) * 2017-03-28 2017-06-27 西安电子科技大学 一种聋哑人与正常人双向交流的设备
CN206711025U (zh) * 2017-05-22 2017-12-05 朱轶尧 一种单手手套键盘
CN207074521U (zh) * 2017-04-14 2018-03-06 齐爱民 一种适用于聋哑人的电子手套

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060022984A (ko) * 2004-09-08 2006-03-13 홍광석 키패드 글러브 장치
WO2007076592A1 (en) * 2006-01-04 2007-07-12 Iron Will Creations Inc. Inputting information with finger-mounted sensors
DE202012010610U1 (de) * 2012-10-30 2013-01-30 Abulfezl Chorabchie Gerät zur Sprach- und Fernkommunikationsmöglichkeit für Gehörlose durch Impulssprache
CN103295570A (zh) * 2013-06-05 2013-09-11 华东师范大学 一种手套式发声系统
CN106898197A (zh) * 2017-03-28 2017-06-27 西安电子科技大学 一种聋哑人与正常人双向交流的设备
CN207074521U (zh) * 2017-04-14 2018-03-06 齐爱民 一种适用于聋哑人的电子手套
CN206711025U (zh) * 2017-05-22 2017-12-05 朱轶尧 一种单手手套键盘

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
ALTERA公司组编: "《NiosII嵌入式处理器设计大赛2006年优秀作品精选集》", 30 April 2007, 西安电子科技大学出版社 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109448696A (zh) * 2018-12-27 2019-03-08 韩思清 一种与聋哑人双向交流的发声手套装置

Similar Documents

Publication Publication Date Title
US5867817A (en) Speech recognition manager
US8204737B2 (en) Message recognition using shared language model
CN101605399A (zh) 一种实现手语识别的移动终端及方法
US11482134B2 (en) Method, apparatus, and terminal for providing sign language video reflecting appearance of conversation partner
CN105118356B (zh) 一种手语语音转换方法及装置
CN104361787A (zh) 信号转换系统和信号转换方法
CN103426342B (zh) 一种语音沟通方法和语音沟通装置
US20170024380A1 (en) System and method for the translation of sign languages into synthetic voices
Loeding et al. Progress in automated computer recognition of sign language
CN104679733B (zh) 一种语音对话翻译方法、装置及系统
Amin et al. Alphabetical gesture recognition of American sign language using e-voice smart glove
CN102063282A (zh) 汉语语音输入系统及方法
Kimura et al. SilentSpeller: Towards mobile, hands-free, silent speech text entry using electropalatography
Bhat et al. Advanced glove for deaf and dumb with speech and text message on android cell phone
CN108538152A (zh) 一种用于聋哑人正常语音交流的便携式设备
CN207718803U (zh) 多信源语音区分识别系统
CN110347215A (zh) 一种穿戴式翻译和信息检索装置及其使用方法
CN110349565A (zh) 一种面向听障人士的辅助发音学习方法及其系统
CN106897275A (zh) 一种方言实时翻译系统
JP2002244842A (ja) 音声通訳システム及び音声通訳プログラム
Riad et al. Signsworld; deeping into the silence world and hearing its signs (state of the art)
KR102009150B1 (ko) 수화 또는 지화 인식 장치 및 방법
Gul et al. Two-way smart communication system for deaf & dumb and normal people
CN108877406A (zh) 一种手指动作编码及其与汉语拼音的映射方法
Ghosh et al. Sign Language Hand Glove

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180914

RJ01 Rejection of invention patent application after publication