CN207216921U - 一种聋哑人与正常人双向交流的穿戴式设备 - Google Patents
一种聋哑人与正常人双向交流的穿戴式设备 Download PDFInfo
- Publication number
- CN207216921U CN207216921U CN201720311729.XU CN201720311729U CN207216921U CN 207216921 U CN207216921 U CN 207216921U CN 201720311729 U CN201720311729 U CN 201720311729U CN 207216921 U CN207216921 U CN 207216921U
- Authority
- CN
- China
- Prior art keywords
- gloves
- deaf
- mute
- signal
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Circuit For Audible Band Transducer (AREA)
Abstract
一种聋哑人与正常人双向交流的穿戴式设备，属于语言识别设备技术领域。由聋哑人手套、VR眼镜模块和控制模块组成；每只手套至少包含一个安装在手套腕部的拉压力传感器、一个安装在手套背部的三轴陀螺仪和一个手背拉力传感器、安装在手套每个手指外侧的手指拉力传感器；控制模块由微控制器、手势信号调理电路、手势信号A/D转换电路、语音输出模块、喇叭、语音传感器、语音信号调理电路、语音信号A/D转换电路和电源Ⅰ组成；VR眼镜模块由VR眼镜和电源Ⅱ组成。聋哑人可将手势信息以语音形式传给对方的正常人，不需要借助任何设备就可将语音传给对方的聋哑人，实现聋哑人与正常人的无障碍双向交流；聋哑人也可以“听到”电子产品的语音。
Description
技术领域
本实用新型涉及语音识别设备领域，特别涉及一种聋哑人与正常人双向交流的穿戴式设备。
背景技术
中国听力语言残疾人数居视力残疾、肢残、智残等五大残疾之首。中国现有聋哑人2700多万，占中国总人口的1.67%，每年仍有2~3万新增听障儿童。这些聋哑人是社会的弱势群体，他们听不到美丽的声音，说不出动听的话语，只能活在无声的世界里，缺乏对外界的感知。他们无法像正常人一样交流沟通，给他们的生活、学习、工作带来了很大的障碍。研发一种能使他们和正常人进行双向交流的设备对于提高他们的生活质量无疑是很重要的。
现有的聋哑设备比较笨重，不便于携带，而且多数只能实现单方面的翻译，不能实现双方的交流。鉴于此，本实用新型设计一种方便携带、能使聋哑人与正常人进行双向交流的穿戴式设备，解决聋哑人与正常人双向交流的障碍。
实用新型内容
为了解决上述问题，本实用新型给出了以下技术方案：
一种聋哑人与正常人双向交流的穿戴式设备，所述穿戴式设备包含聋哑人手套1、VR眼镜模块2和控制模块3；聋哑人手套1与控制模块3之间通过电缆连接，VR眼镜模块2与控制模块3之间通过无线信号连接。
所述的聋哑人手套1由左、右两只手套1-5构成，每只手套1-5至少包含一个安装在手套1-5腕部外侧的拉压力传感器1-1、一个安装在手套1-5背部的三轴陀螺仪1-2、一个安装在手套1-5背部的手背拉力传感器1-3、和安装在手套1-5每个手指关节外侧的手指拉力传感器1-4；拉压力传感器1-1采集手腕动作信号，三轴陀螺仪1-2采集手的位置信息、轨迹信息和加速度信号，手背拉力传感器1-3采集手掌弯曲动作信号，手指拉力传感器1-4采集每根手指的弯曲动作信号。
所述的控制模块包含微控制器3-1、手势信号调理电路3-2、手势信号A/D转换电路3-3、语音输出模块3-4、喇叭3-5、语音传感器3-6、语音信号调理电路3-7、语音信号A/D转换电路3-8和电源Ⅰ3-9。
所述的VR眼镜模块2包含VR眼镜2-1和电源Ⅱ2-2。
所述的手套1-5为分指手套，主材料为织物或皮质材料，安装传感器的部位作局部浸胶处理，以封装所述的拉压力传感器1-1、三轴陀螺仪1-2、手背拉力传感器1-3、手指拉力传感器1-4。
所述的手势信号调理电路3-2对所述的拉压力传感器1-1、三轴陀螺仪1-2、手背拉力传感器1-3、手指拉力传感器1-4输出的电信号进行信号的放大和滤波处理；
所述的手势信号A/D转换电路3-3将手势信号调理电路3-2输出的模拟电信号转换成数字量送给微控制器3-1处理。
所述的语音输出模块3-4输入量为数字量，输出结果至少包含汉语和英语，两种语言可选择。
所述的喇叭3-5播出的语言至少包含汉语和英语，两种语言可选择。
所述的语音传感器3-6可识别的语音至少包含汉语和英语，语音包括真人语音和电子产品语音。
所述的语音信号调理电路3-7对语音传感器3-6输出的模拟电信号进行放大和滤波处理。
所述的语音信号A/D转换电路3-8将语音信号调理电路3-7输出的模拟电信号转换成数字量，并送给微控制器3-1。
所述的电源Ⅰ3-9为控制模块3以及聋哑人手套1中的拉压力传感器1-1、三轴陀螺仪1-2、手背拉力传感器1-3、手指拉力传感器1-4供电。
所述的电源Ⅱ2-2为VR眼镜2-1供电。
所述的聋哑人手套1的尺寸和型号规格参照国标GB/T 12624-2006《劳动防护手套通用技术条件》确定。
所述的拉压力传感器1-1、三轴陀螺仪1-2分别为微型拉压力传感器、微型三轴陀螺仪；所述的手背拉力传感器1-3和手指拉力传感器1-4为微型拉力传感器。
所述的微控制器3-1将语音信号A/D转换电路3-8送来的语音信号处理为语言文字和国标GB/T 24435-2009《中国手语基本手势》规定的标准手语图。
所述的VR眼镜2-1显示微控制器3-1传来的文字信息和标准手语图。
所述的喇叭3-5播出的语言为电子合成语音。
所述的一种聋哑人与正常人双向交流的穿戴式设备的工作过程是：在聋哑人佩戴聋哑人手套1的情况下，由聋哑人手套1上的拉压力传感器1-1采集手腕弯曲动作信号，三轴陀螺仪1-2采集手的位置信息、轨迹信息和加速度信号，手背拉力传感器1-3采集手掌弯曲动作信号，手指拉力传感器1-4采集每根手指的弯曲动作信号；将上述采集的信息送给手势信号调理电路3-2对信号进行放大和滤波，将放大和滤波后的信号送给手势信号A/D转换电路3-3将模拟电信号转换成数字量，送给微控制器3-1，微控制器3-1根据聋哑人手套1中的拉压力传感器1-1、三轴陀螺仪1-2、手背拉力传感器1-3、手指拉力传感器1-4信号数据及其响应顺序判定左右手各自的空间位置、运动轨迹、运动速度和加速度，判定手掌的弯曲程度和手指的弯曲程度和顺序，进而识别手部运动及其形状代表的语义，即手势所表达的信息。经分析后的结果送给语音输出模块3-4以设定的语言输出，经喇叭3-5播出，此时对方的正常人即可听到聋哑人所表达的信息；正常人所说的话语由控制模块3上的语音传感器3-6采集，将采集的信息送给语音信号调理电路3-7，对信号进行放大和滤波，后送给语音信息A/D转换电路3-8将模拟信号转换成数字量送给微控制器3-1；微控制器3-1对其进行识别，将该语音转换为语言文字或标准手语图，并将转换结果通过蓝牙、WIFI等无线通信方式发送给VR眼镜2-1，在VR眼镜2-1上显示出来；浏览显示屏2-1上的语言文字或标准手语图，聋哑人即可“听到”正常人的语义。同理，所述的一种聋哑人与正常人双向交流的穿戴式设备能够处理电子产品发出的语音，即聋哑人也可“听到”电子产品发出的语音，实现与正常人的双向语言交互及理解电子语音的语义。
采用以上技术方案的有益效果是：只要在聋哑人佩戴该穿戴式设备的情况下，就可以将自己表达的手势信息以语音的形式传送给对方的正常人，正常人不需要借助任何设备就可将自己表达的语音信息传送给对方的聋哑人，实现了聋哑人与正常人的无障碍双向交流；聋哑人也可以“听到”电子产品的语音，如电视、广播、手机等电子产品中发出的真人语音或电子合成语音，方便了聋哑人的生活，提高了聋哑人的幸福感。
附图标记
1.聋哑人手套 1-1.拉压力传感器 1-2. 三轴陀螺仪 1-3. 手背拉力传感器 1-4. 手指拉力传感器 1-5.手套
2.VR眼镜模块 2-1.VR眼镜 2-2. 电源Ⅱ
3.控制模块 3-1.微控制器 3-2.手势信号调理电路 3-3. 手势信号A/D转换电路3-4. 语音输出模块 3-5. 喇叭 3-6. 语音传感器 3-7. 语音信号调理电路 3-8. 语音信号A/D转换电路 3-9. 电源Ⅰ。
附图说明
下面结合附图对本实用新型的实施方式作进一步详细的描述。
图1是本实用新型一种聋哑人与正常人双向交流的穿戴式设备结构框图。
图2是本实用新型手套的外观图。
具体实施方式
下面结合附图详细说明本实用新型一种聋哑人与正常人双向交流的穿戴式设备的优选实施方式。
如图1和图2所示，本实用新型一种聋哑人与正常人双向交流的穿戴式设备的具体实施方式：
一种聋哑人与正常人双向交流的穿戴式设备，由聋哑人手套1、VR眼镜模块2和控制模块3组成；聋哑人手套1与控制模块3之间通过电缆连接，VR眼镜模块2与控制模块3之间通过无线信号连接；
如图2所示，所述的聋哑人手套由左、右两只手套1-5构成，每只手套包含一个安装在手套腕部外侧的拉压力传感器1-1、一个安装在手套背部的三轴陀螺仪1-2和一个手背拉力传感器1-3、和安装在手套每个手指关节外侧的手指拉力传感器1-4；拉压力传感器1-1采集手腕动作信号，三轴陀螺仪1-2采集手的位置信息、轨迹信息和加速度信号，手背拉力传感器1-3采集手掌弯曲动作信号，手指拉力传感器1-4采集每根手指的弯曲动作信号；
所述的控制模块由微控制器3-1、手势信号调理电路3-2、手势信号A/D转换电路3-3、语音输出模块3-4、喇叭3-5、语音传感器3-6、语音信号调理电路3-7、语音信号A/D转换电路3-8和电源Ⅰ3-9组成；
所述的VR眼镜模块2由VR眼镜2-1和电源Ⅱ2-2组成；
所述的手套1-5为分指手套，主材料优选柔韧的皮质材料，安装传感器的部位作局部浸胶处理，以封装所述的拉压力传感器1-1、三轴陀螺仪1-2、手背拉力传感器1-3、手指拉力传感器1-4；
所述的手势信号调理电路3-2对所述的拉压力传感器1-1、三轴陀螺仪1-2、手背拉力传感器1-3、手指拉力传感器1-4输出的电信号进行信号的放大和滤波处理；
所述的手势信号A/D转换电路3-3将手势信号调理电路3-2输出的模拟电信号转换成数字量送给微控制器3-1处理；
所述的语音输出模块3-4输入量为数字量，输出结果至少包含汉语和英语，两种语言可选择；
所述的喇叭3-5播出的语言至少包含汉语和英语，两种语言可选择；
所述的语音传感器3-6可识别的语音至少包含汉语和英语，语音包括真人语音和电子产品语音；
所述的语音信号调理电路3-7对语音传感器3-6输出的模拟电信号进行放大和滤波处理；
所述的语音信号A/D转换电路3-8将语音信号调理电路3-7输出的模拟电信号转换成数字量，并送给微控制器3-1；
所述的电源Ⅰ3-9为控制模块3以及聋哑人手套1中的拉压力传感器1-1、三轴陀螺仪1-2、手背拉力传感器1-3、手指拉力传感器1-4供电；
所述的电源Ⅱ2-2为VR眼镜2-1供电；
所述的控制模块3与VR眼镜模块2之间的通讯采用WIFI或蓝牙通讯方式。
所述的微控制器优选STM32F103V3T6。该处理器为ARM32的Cortex-M3核，最高工作频率可达72MHz。
所述的电源1和电源2优选锂电池供电。
所述的控制模块3与VR眼镜模块2之间优选WIFI通讯方式，WIFI通讯采用的频率为2.4GHz；
所述的聋哑人手套1的尺寸和型号规格参照国标GB/T 12624-2006《劳动防护手套通用技术条件》确定。
所述的拉压力传感器1-1、三轴陀螺仪1-2分别为微型拉压力传感器、微型三轴陀螺仪；所述的手背拉力传感器1-3和手指拉力传感器1-4为微型拉力传感器。
所述的微控制器3-1将语音信号A/D转换电路3-8送来的语音信号处理为语言文字和国标GB/T 24435-2009《中国手语基本手势》规定的标准手语图。
所述的VR眼镜2-1同屏显示微控制器3-1传来的文字信息和标准手语图。
所述的喇叭3-5播出的语言为电子合成语音
所述的一种聋哑人与正常人双向交流的穿戴式设备的工作过程是：在聋哑人佩戴聋哑人手套1的情况下，由聋哑人手套1上的拉压力传感器1-1采集手腕弯曲动作信号，三轴陀螺仪1-2采集手的位置信息、轨迹信息和加速度信号，手背拉力传感器1-3采集手掌弯曲动作信号，手指拉力传感器1-4采集每根手指的弯曲动作信号；将上述采集的信息送给手势信号调理电路3-2对信号进行放大和滤波，将放大和滤波后的信号送给手势信号A/D转换电路3-3将模拟电信号转换成数字量，送给微控制器3-1，微控制器3-1根据聋哑人手套1中的拉压力传感器1-1、三轴陀螺仪1-2、手背拉力传感器1-3、手指拉力传感器1-4信号数据及其响应顺序判定左右手各自的空间位置、运动轨迹、运动速度和加速度，判定手掌的弯曲程度和手指的弯曲程度和顺序，进而识别手部运动及其形状代表的语义，即手势所表达的信息。经分析后的结果送给语音输出模块3-4以设定的语言输出，经喇叭3-5播出，此时对方的正常人即可听到聋哑人所表达的信息；正常人所说的话语由控制模块3上的语音传感器3-6采集，将采集的信息送给语音信号调理电路3-7，对信号进行放大和滤波，后送给语音信息A/D转换电路3-8将模拟信号转换成数字量送给微控制器3-1；微控制器3-1对其进行识别，将该语音转换为语言文字或标准手语图，并将转换结果通过蓝牙、WIFI等无线通信方式发送给VR眼镜2-1，在VR眼镜2-1上显示出来；浏览显示屏2-1上的语言文字或标准手语图，聋哑人即可“听到”正常人的语义。同理，聋哑人也可“听到”电子产品发出的语音，实现与正常人的双向语言交互及理解电子语音的语义。
采用以上技术方案的有益效果是：只要在聋哑人佩戴该穿戴式设备的情况下，就可以将自己表达的手势信息以语音的形式传送给对方的正常人，正常人不需要借助任何设备就可将自己表达的语音信息传送给对方的聋哑人，实现了聋哑人与正常人的无障碍双向交流；聋哑人也可以“听到”电子产品的语音，如电视、广播、手机等电子产品中发出的真人语音或电子合成语音，方便了聋哑人的生活，提高了聋哑人的幸福感。
以上仅是本实用新型的优选实施方式，应当指出，对于本领域的普通技术人员来说，在不脱离本实用新型创造构思的前提下，还可以做出若干变形和改进，这些都属于本实用新型的保护范围。
Claims (2)
1.一种聋哑人与正常人双向交流的穿戴式设备，其特征在于：所述穿戴式设备包含聋哑人手套（1）、VR眼镜模块（2）和控制模块（3）；聋哑人手套（1）与控制模块（3）之间通过电缆连接，VR眼镜模块（2）与控制模块（3）之间通过无线信号连接；
所述的聋哑人手套1由左、右两只手套（1-5）构成，每只手套（1-5）至少包含一个安装在手套（1-5）腕部外侧的拉压力传感器（1-1）、一个安装在手套（1-5）背部的三轴陀螺仪（1-2）、一个安装在手套（1-5）背部的手背拉力传感器（1-3）、和安装在手套（1-5）每个手指关节外侧的手指拉力传感器（1-4）；拉压力传感器（1-1）采集手腕动作信号，三轴陀螺仪（1-2）采集手的位置信息、轨迹信息和加速度信号，手背拉力传感器（1-3）采集手掌弯曲动作信号，手指拉力传感器（1-4）采集每根手指的弯曲动作信号；
所述的控制模块包含微控制器（3-1）、手势信号调理电路（3-2）、手势信号A/D转换电路（3-3）、语音输出模块（3-4）、喇叭（3-5）、语音传感器（3-6）、语音信号调理电路（3-7）、语音信号A/D转换电路（3-8）和电源Ⅰ（3-9）；
所述的VR眼镜模块（2）包含VR眼镜（2-1）和电源Ⅱ（2-2）。
2.根据权利要求1所述的一种聋哑人与正常人双向交流的穿戴式设备，其特征在于：所述的手套（1-5）为分指手套，主材料为织物或皮质材料，安装传感器的部位作局部浸胶处理，以封装所述的拉压力传感器（1-1）、三轴陀螺仪（1-2）、手背拉力传感器（1-3）、手指拉力传感器（1-4）；
所述的手势信号调理电路（3-2）对所述的拉压力传感器（1-1）、三轴陀螺仪（1-2）、手背拉力传感器（1-3）、手指拉力传感器（1-4）输出的电信号进行信号的放大和滤波处理；
所述的手势信号A/D转换电路（3-3）将手势信号调理电路（3-2）输出的模拟电信号转换成数字量送给微控制器（3-1）处理；
所述的语音输出模块（3-4）输入量为数字量，输出结果至少包含汉语和英语，两种语言可选择；
所述的喇叭（3-5）播出的语言至少包含汉语和英语，两种语言可选择；
所述的语音传感器（3-6）可识别的语音至少包含汉语和英语，语音包括真人语音和电子产品语音；
所述的语音信号调理电路（3-7）对语音传感器（3-6）输出的模拟电信号进行放大和滤波处理；
所述的语音信号A/D转换电路（3-8）将语音信号调理电路（3-7）输出的模拟电信号转换成数字量，并送给微控制器（3-1）；
所述的电源Ⅰ（3-9）为控制模块（3）以及聋哑人手套（1）中的拉压力传感器（1-1）、三轴陀螺仪（1-2）、手背拉力传感器（1-3）、手指拉力传感器（1-4）供电；
所述的电源Ⅱ（2-2）为VR眼镜（2-1）供电。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201720311729.XU CN207216921U (zh) | 2017-03-28 | 2017-03-28 | 一种聋哑人与正常人双向交流的穿戴式设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201720311729.XU CN207216921U (zh) | 2017-03-28 | 2017-03-28 | 一种聋哑人与正常人双向交流的穿戴式设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN207216921U true CN207216921U (zh) | 2018-04-10 |
Family
ID=61810481
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201720311729.XU Active CN207216921U (zh) | 2017-03-28 | 2017-03-28 | 一种聋哑人与正常人双向交流的穿戴式设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN207216921U (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108874155A (zh) * | 2018-08-29 | 2018-11-23 | 韩思清 | 一种感知手动作发声的手套装置 |
| CN109473016A (zh) * | 2019-01-15 | 2019-03-15 | 刘净植 | 一种新型的听障、聋哑人群辅助安全与信息交流装置及方法 |
| CN109859452A (zh) * | 2019-03-11 | 2019-06-07 | 汕头大学 | 一种穿戴式控制器及使用该控制器的方法 |
| CN110009973A (zh) * | 2019-04-15 | 2019-07-12 | 武汉灏存科技有限公司 | 基于手语的实时互译方法、装置、设备及存储介质 |
| CN112686132A (zh) * | 2020-12-28 | 2021-04-20 | 南京工程学院 | 一种手势识别方法及装置 |
-
2017
- 2017-03-28 CN CN201720311729.XU patent/CN207216921U/zh active Active
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108874155A (zh) * | 2018-08-29 | 2018-11-23 | 韩思清 | 一种感知手动作发声的手套装置 |
| CN109473016A (zh) * | 2019-01-15 | 2019-03-15 | 刘净植 | 一种新型的听障、聋哑人群辅助安全与信息交流装置及方法 |
| CN109859452A (zh) * | 2019-03-11 | 2019-06-07 | 汕头大学 | 一种穿戴式控制器及使用该控制器的方法 |
| CN110009973A (zh) * | 2019-04-15 | 2019-07-12 | 武汉灏存科技有限公司 | 基于手语的实时互译方法、装置、设备及存储介质 |
| CN112686132A (zh) * | 2020-12-28 | 2021-04-20 | 南京工程学院 | 一种手势识别方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN207216921U (zh) | 一种聋哑人与正常人双向交流的穿戴式设备 | |
| CN106898197A (zh) | 一种聋哑人与正常人双向交流的设备 | |
| CN104134060A (zh) | 基于肌电信号和运动传感器的手语翻译和显示发声系统 | |
| CN107340858B (zh) | 一种基于变电站设计scd自动化设备虚拟现实装置 | |
| WO2014183456A1 (zh) | 牙齿控制的字符或命令输入的装置及方法 | |
| CN206003392U (zh) | 一种聋哑人社交手套 | |
| CN108052682A (zh) | 一种智能查询机系统 | |
| CN203149569U (zh) | 一种语音手势交互翻译装置 | |
| CN205900093U (zh) | 降噪装置及虚拟现实设备 | |
| CN102004843A (zh) | 一种具有模式识别功能的手持控制漫游系统 | |
| CN206210144U (zh) | 手语语音转化帽 | |
| CN107422662A (zh) | 一种基于嵌入式的智能无线机器人控制系统 | |
| CN110403269A (zh) | 交互口罩 | |
| CN101494816A (zh) | 一种适用于全聋患者的助听装置与方法 | |
| CN105118356A (zh) | 一种手语语音转换方法及装置 | |
| CN110413106B (zh) | 一种基于语音和手势的增强现实输入方法及系统 | |
| CN204649769U (zh) | 一种运动状态多媒体监测系统 | |
| CN210109744U (zh) | 一种头戴交流装置及头戴交流系统 | |
| CN205177193U (zh) | 一种聋哑患者交流装置 | |
| CN207074521U (zh) | 一种适用于聋哑人的电子手套 | |
| CN206907294U (zh) | 一种聋哑人专用交流眼镜 | |
| CN114979887A (zh) | 一种智慧教育耳机 | |
| CN212750152U (zh) | 一种基于数据手套连接的聋哑有声手语智能识别手环 | |
| CN115019820A (zh) | 一种触感感应和手指组合发声的聋哑人沟通方法及系统 | |
| CN106952538A (zh) | 一种适用于聋哑人的电子手套 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| GR01 | Patent grant | ||
| GR01 | Patent grant |