CN104882090A - 一种盲人触觉图像实现的装置及方法 - Google Patents

一种盲人触觉图像实现的装置及方法 Download PDF

Info

Publication number
CN104882090A
CN104882090A CN201510274145.5A CN201510274145A CN104882090A CN 104882090 A CN104882090 A CN 104882090A CN 201510274145 A CN201510274145 A CN 201510274145A CN 104882090 A CN104882090 A CN 104882090A
Authority
CN
China
Prior art keywords
micromachine
motor
image
array
lifting column
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510274145.5A
Other languages
English (en)
Other versions
CN104882090B (zh
Inventor
汪凯巍
赵向东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Original Assignee
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU filed Critical Zhejiang University ZJU
Priority to CN201510274145.5A priority Critical patent/CN104882090B/zh
Publication of CN104882090A publication Critical patent/CN104882090A/zh
Application granted granted Critical
Publication of CN104882090B publication Critical patent/CN104882090B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Toys (AREA)

Abstract

本发明公开了一种盲人触觉图像实现的装置及方法,利用微型步进电机和升降柱构成图像的单个触点,在电机固定板和触摸板的配合下,触点被控制可实现上下运动,N个微型步进电机组成矩阵排列的阵列。微控制器把包含N个像素的二值图像转换成控制信号,通过电机驱动电路控制N个微型步进电机和升降柱所构成触点组成的阵列,使其呈现与二值图像相对应的状态:像素为1的点凸起,像素为0的点凹陷。盲人使用者可利用本装置,通过阵列的起伏直观地感受周围环境;阵列随使用者的移动可进行刷新,具有实时性;触点间距较小,阵列可在紧凑的小区域内实现。

Description

一种盲人触觉图像实现的装置及方法
技术领域
本发明涉及盲人导航、辅助技术、人机交互技术,尤其涉及一种盲人触觉图像实现的装置及方法。
背景技术
盲人由于视觉缺陷,不得不利用其他感觉通道来感知外部世界,在盲人的味觉,触觉,嗅觉,听觉等感觉器官中,最能有效利用的是听觉和触觉。对于盲人视觉辅助来说,触觉相对于听觉来说又有着不可比拟的优势,它相对于听觉有直观、实时性好、信息量大等优点。
触觉替代视觉,是一种将视觉图像转换成触觉图像的过程。触觉图像以触觉阵列的形式让盲人感知。从实现途径上可分为直接重构和感官替代两大类,直接重构是指直接刺激人类的皮肤而产生触觉感,感官替代是指用其它感觉器官替代皮肤接受触觉信号间接地判断触觉感。当今触觉刺激多采用直接重构方式,研究的焦点主要集中在刺激方式实现技术方面,分为电磁式、压电振动式、记忆合金式、气动式、电刺激式、电致伸缩式等方式。
发明内容
本发明的目的是为实现触觉代替视觉,提供一套新的实现触觉阵列的装置。本发明通过把三维地形探测器得到的地形和场景进行压缩、提取有用信息,得到较小像素数的二值图像,把二值像素转换成凹凸的触觉像素,最终实现凹凸的阵列,将明眼人可以看到的景象转换成一帧“触觉图像”提供给盲人,来为盲人提供视觉辅助。
本发明的目的是通过以下技术方案来实现的:一种盲人触觉图像实现的装置,包括三维地形探测器、单片机、N个微型电机、N个升降柱、电机固定板、触摸板、N/2个电机驱动电路;其中,N=2n2,n为大于1的偶数;所述微型电机为步进电机,转轴带有螺纹;升降柱为棱柱体,顶部具有凸起,作为盲人触摸的触点,底部具有螺纹孔,所述螺纹孔与微型电机的螺纹相匹配;电机固定板上开有N个矩阵排列的圆槽,微型电机的底部嵌套在圆槽内;电机固定板还开有N个通孔,为微型电机的控制线提供通道;触摸板上开有N个方形孔,升降柱穿过方形孔,底部与微型电机螺纹连接,触摸板的方形孔卡住升降柱从而使其只能做垂直的上下运动。
所述电机驱动电路包括四个依次串联的串行转并行信号移位寄存器U1-U4,每个串行转并行信号移位寄存器的八个并行输出脚依次接两个微型电机的信号线;U2、U3、U4的移位信号端相连后接入U1的移位信号端;U2、U3、U4的刷新输出端相连后接入U1的刷新输出端;U1的移位信号端、U1的刷新输出端、U1的串行输入端分别连接单片机的I/O口。
一种利用上述装置的盲人触觉图像实现方法,包括以下步骤:
(1)三维地形探测器拍摄图像,获取图像中每一像素点水平方向和竖直方向的深度信息;
(2)根据步骤1得到的图像深度信息,将采集的图像转化为需要触觉显示的像素数为N的二值图像;
(3)将二值图像发送到单片机,单片机生成控制微型电机阵列的信号给电机驱动电路,具体为:定义微型电机的四个引脚A1、B1、A2、B2循环接收16进制C、6、3、9为正转,循环接收16进制9、3、6、C为反转;二值图像中像素为1的点对应微型电机正转,即升降柱升起;像素为0的点对应微型电机反转,即升降柱保持与触摸板齐平;
用一个数组来保存8个微型电机的控制时序,所述数组包括4个长整型,每个长整型用8位16进制数来表示;长整型的某一位控制启动这一位对应的微型电机,一个长整型的8个16进制位可控制8个步进电机;当需要控制某一个微型电机转动时,将此电机在四个长整型上对应的四个16进制位分别写为C、6、3、9或9、3、6、C,循环发送这四个长整型数据到电机驱动电路,电机驱动电路的32个并行输出脚被写入8个微型电机的控制电平,这样每个需要被控制转动的微型电机都得到了时序电平,8个电机得到了控制;
(4)电机驱动电路驱动微型电机转动,从而带动升降柱以精确的位移做垂直运动,最终提供盲人一幅直观的触觉图像
本发明的有益效果如下:
1、盲人使用者可利用本装置,通过阵列的起伏直观地感受周围环境;
2、阵列随使用者的移动可进行刷新,具有实时性;
3、触点间距较小,阵列可在紧凑的小区域内实现。
附图说明
图1是系统零部件示意图;
图2是整体硬件结构的侧视图;
图3是电机驱动电路之单元电路的图示;
图4是人机交互系统整体示意图;
图中,微型电机1、升降柱2、电机固定板3、触摸板4。
具体实施方式
下面结合附图和具体实施例对本发明作进一步详细说明。
如图1、2所示,本发明涉及一种盲人触觉图像实现的装置,包括三维地形探测器、单片机、N个微型电机1、N个升降柱2、电机固定板3、触摸板4、N/2个电机驱动电路;其中,N=2n2,n为大于1的偶数;所述微型电机1为步进电机,转轴带有螺纹;升降柱2为棱柱体,顶部具有凸起,作为盲人触摸的触点,底部具有螺纹孔,所述螺纹孔与微型电机1的螺纹相匹配;电机固定板3上开有N个矩阵排列的圆槽,微型电机1的底部嵌套在圆槽内;电机固定板3还开有N个通孔,为微型电机1的控制线提供通道;触摸板4上开有N个方形孔,升降柱2穿过方形孔,底部与微型电机1螺纹连接,触摸板4的方形孔卡住升降柱2从而使其只能做垂直的上下运动。
如图3所示,所述电机驱动电路包括四个依次串联的串行转并行信号移位寄存器U1-U4,每个串行转并行信号移位寄存器的八个并行输出脚依次接两个微型电机1的信号线;U2、U3、U4的移位信号端(端口11)相连后接入U1的移位信号端;U2、U3、U4的刷新输出端(端口12)相连后接入U1的刷新输出端;U1的移位信号端(端口11)、U1的刷新输出端(端口12)、U1的串行输入端(端口14)分别连接单片机的I/O口;所述串行转并行信号移位寄存器可采用74HC595芯片,使用74HC595芯片是出于如下考虑:每个微型电机1需要四条信号线,故电机阵列所要求的信号口线非常多,通过使用74HC595芯片可以将单片机的1位IO口扩展到8位,而将多片74HC595串接可实现更多位数的扩展,如图2所示,电机M1的四条信号线接在74HC595芯片7的四个输出引脚(15、1、2、3)上,实现了1位扩展到32位,可控制8个电机M1-M8。
一种盲人触觉图像实现方法,包括以下步骤:
(1)三维地形探测器拍摄图像,获取图像中每一像素点水平方向和竖直方向的深度信息;
(2)根据步骤1得到的图像深度信息,将采集的图像转化为需要触觉显示的像素数为N的二值图像;
(3)将二值图像发送到单片机,单片机生成控制微型电机阵列的信号给电机驱动电路,具体为:
定义微型电机1的四个引脚A1、B1、A2、B2循环接收16进制C、6、3、9为正转,循环接收16进制9、3、6、C为反转,如下表所示:
A1 B1 A2 B2
1 1 0 0
0 1 1 0
0 0 1 1
1 0 0 1
二值图像中像素为1的点对应微型电机1正转,即升降柱2升起;像素为0的点对应微型电机1反转,即升降柱2保持与触摸板4齐平;
用一个数组来保存8个微型电机1的控制时序,所述数组包括4个长整型,每个长整型用8位16进制数来表示;长整型的某一位控制启动这一位对应的微型电机1,一个长整型的8个16进制位可控制8个步进电机;当需要控制某一个微型电机1转动时,将此电机在四个长整型上对应的四个16进制位分别写为C、6、3、9或9、3、6、C,循环发送这四个长整型数据到电机驱动电路,电机驱动电路的32个并行输出脚被写入8个微型电机1的控制电平,这样每个需要被控制转动的微型电机1都得到了时序电平,8个电机得到了控制;
如下是代码示例,table数组包括4个长整型,每个长整型的第一位控制1*8阵列的第一个像素,如为1,则4个长整型的第一位分别被置为C、6、3、9:
(4)电机驱动电路驱动微型电机1转动,从而带动升降柱2以精确的位移做垂直运动,最终提供盲人一幅直观的触觉图像;
例如微型电机1的螺距为1mm且为单螺纹,则微型电机1转动一圈,升降柱2直线运动1mm。电机固定板3和触摸板4的大小接近于人手掌的大小。对于盲人来说,呈现给他们的是一块触摸板4,触摸板4上的触点经过凹凸的组合可以呈现以下信息:道路的走向、障碍物相对于盲人自身的位置、障碍物的距离、障碍物的大致形状、基本的场景信息等。

Claims (2)

1.一种盲人触觉图像实现的装置,其特征在于,包括三维地形探测器、单片机、N个微型电机(1)、N个升降柱(2)、电机固定板(3)、触摸板(4)、N/2个电机驱动电路;其中,N=2n2,n为大于1的偶数;所述微型电机(1)为步进电机,转轴带有螺纹;升降柱(2)为棱柱体,顶部具有凸起,底部具有螺纹孔,所述螺纹孔与微型电机(1)的螺纹相匹配;电机固定板(3)上开有N个矩阵排列的圆槽,微型电机(1)的底部嵌套在圆槽内;电机固定板(3)还开有N个通孔,为微型电机(1)的控制线提供通道;触摸板(4)上开有N个方形孔,升降柱(2)穿过方形孔,底部与微型电机(1)螺纹连接,触摸板(4)的方形孔卡住升降柱(2)从而使其只能做垂直的上下运动;
所述电机驱动电路包括四个依次串联的串行信号转并行信号移位寄存器U1-U4,每个串行转并行信号移位寄存器的八个并行输出脚依次接两个微型电机(1)的信号线;U2、U3、U4的串行输入时钟信号端相连后接入U1的串行输入时钟信号端;U2、U3、U4的输出时钟信号端相连后接入U1的输出时钟信号端;U1的串行输入端、U1的串行输入时钟信号端、U1的输出时钟信号端分别连接单片机的I/O口。
2.一种利用权利要求1所述装置的盲人触觉图像实现方法,其特征在于,包括以下步骤:
(1)三维地形探测器拍摄图像,获取图像中每一像素点水平方向和竖直方向的深度信息;
(2)根据步骤(1)得到的图像深度信息,将采集的图像转化为需要触觉显示的像素数为N的二值图像;
(3)将二值图像发送到单片机,单片机生成控制微型电机阵列的信号给电机驱动电路,具体为:定义微型电机(1)的四个引脚A1、B1、A2、B2循环接收16进制C、6、3、9为正转,循环接收16进制9、3、6、C为反转;二值图像中像素为1的点对应微型电机(1)正转,即升降柱(2)升起;像素为0的点对应微型电机(1)反转,即升降柱(2)保持与触摸板(4)齐平;
用一个数组来保存8个微型电机(1)的控制时序,所述数组包括4个长整型,每个长整型用8位16进制数来表示;长整型的某一位控制启动这一位对应的微型电机(1),一个长整型的8个16进制位可控制8个步进电机;当需要控制某一个微型电机(1)转动时,将此电机在四个长整型上对应的四个16进制位分别写为C、6、3、9或9、3、6、C,循环发送这四个长整型数据到电机驱动电路,电机驱动电路的32个并行输出脚被写入8个微型电机(1)的控制电平,这样每个需要被控制转动的微型电机(1)都得到了时序电平,8个电机得到了控制;
(4)电机驱动电路驱动微型电机(1)转动,从而带动升降柱(2)以精确的位移做垂直运动,最终提供盲人一幅直观的触觉图像。
CN201510274145.5A 2015-05-26 2015-05-26 一种盲人触觉图像实现的装置及方法 Active CN104882090B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510274145.5A CN104882090B (zh) 2015-05-26 2015-05-26 一种盲人触觉图像实现的装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510274145.5A CN104882090B (zh) 2015-05-26 2015-05-26 一种盲人触觉图像实现的装置及方法

Publications (2)

Publication Number Publication Date
CN104882090A true CN104882090A (zh) 2015-09-02
CN104882090B CN104882090B (zh) 2017-07-07

Family

ID=53949563

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510274145.5A Active CN104882090B (zh) 2015-05-26 2015-05-26 一种盲人触觉图像实现的装置及方法

Country Status (1)

Country Link
CN (1) CN104882090B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105099895A (zh) * 2015-09-07 2015-11-25 上海创功通讯技术有限公司 聊天设备及其信息输出方法、聊天系统及其信息交互方法
CN105654714A (zh) * 2016-01-06 2016-06-08 上海斐讯数据通信技术有限公司 一种导盲面板及导盲设备
WO2018028296A1 (zh) * 2016-08-12 2018-02-15 苏州大学 一种新型导盲系统
CN108956113A (zh) * 2018-07-05 2018-12-07 浙江理工大学 指尖触觉性能测试实验装置
CN109002819A (zh) * 2018-07-18 2018-12-14 盛波 盲人震动及触点矩阵感知照片设备
CN110910794A (zh) * 2019-11-28 2020-03-24 中国科学院苏州生物医学工程技术研究所 一种基于级联拓扑的多电机立体展示装置
CN111067708A (zh) * 2019-12-27 2020-04-28 长江师范学院 一种用于触觉感知图像的显示方法及显示系统
CN111361298A (zh) * 2020-03-10 2020-07-03 西安交通大学 一种大型盲文刻印系统及其方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040810A (zh) * 2007-04-19 2007-09-26 上海交通大学 基于物体辨识的盲人生活辅助装置
US20130162564A1 (en) * 2011-12-27 2013-06-27 Kazuhide Adachi Operation input system
CN103889522A (zh) * 2012-01-24 2014-06-25 松下电器产业株式会社 电子设备
CN104933950A (zh) * 2015-05-30 2015-09-23 中国人民解放军68029部队 动态沙盘

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040810A (zh) * 2007-04-19 2007-09-26 上海交通大学 基于物体辨识的盲人生活辅助装置
US20130162564A1 (en) * 2011-12-27 2013-06-27 Kazuhide Adachi Operation input system
CN103889522A (zh) * 2012-01-24 2014-06-25 松下电器产业株式会社 电子设备
CN104933950A (zh) * 2015-05-30 2015-09-23 中国人民解放军68029部队 动态沙盘

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105099895A (zh) * 2015-09-07 2015-11-25 上海创功通讯技术有限公司 聊天设备及其信息输出方法、聊天系统及其信息交互方法
CN105099895B (zh) * 2015-09-07 2018-11-02 上海创功通讯技术有限公司 聊天设备及其信息输出方法、聊天系统及其信息交互方法
CN105654714A (zh) * 2016-01-06 2016-06-08 上海斐讯数据通信技术有限公司 一种导盲面板及导盲设备
WO2018028296A1 (zh) * 2016-08-12 2018-02-15 苏州大学 一种新型导盲系统
CN108956113A (zh) * 2018-07-05 2018-12-07 浙江理工大学 指尖触觉性能测试实验装置
CN108956113B (zh) * 2018-07-05 2023-08-29 浙江理工大学 指尖触觉性能测试实验装置
CN109002819A (zh) * 2018-07-18 2018-12-14 盛波 盲人震动及触点矩阵感知照片设备
CN110910794A (zh) * 2019-11-28 2020-03-24 中国科学院苏州生物医学工程技术研究所 一种基于级联拓扑的多电机立体展示装置
CN110910794B (zh) * 2019-11-28 2024-05-17 中国科学院苏州生物医学工程技术研究所 一种基于级联拓扑的多电机立体展示装置
CN111067708A (zh) * 2019-12-27 2020-04-28 长江师范学院 一种用于触觉感知图像的显示方法及显示系统
CN111361298A (zh) * 2020-03-10 2020-07-03 西安交通大学 一种大型盲文刻印系统及其方法
CN111361298B (zh) * 2020-03-10 2021-03-02 西安交通大学 一种大型盲文刻印系统及其方法

Also Published As

Publication number Publication date
CN104882090B (zh) 2017-07-07

Similar Documents

Publication Publication Date Title
CN104882090A (zh) 一种盲人触觉图像实现的装置及方法
ES2863425T3 (es) Sistema y procedimiento para la interacción háptica con objetos virtuales
Jäkel et al. An overview of quantitative approaches in Gestalt perception
Cutting Perception and information
US11227510B2 (en) Optimal tactile display
CN105575224B (zh) 无序排列的英语单词辅助记忆装置
CN103393403B (zh) 数字人体结构剖析方法和数字人体剖析及病理分析方法与系统
CN104008710A (zh) 一种阵列式伸缩杆动态显示图片的方法
CN204791898U (zh) 一种盲人触觉图像实现的装置
CN102129804A (zh) 脉象模拟手及其实现脉象模拟方法
CN105615444B (zh) 一种枕头模拟设备及精准定制枕头的方法
Wang et al. A haptic memory game using the STReSS2 tactile display
CN102018594A (zh) 基于振动电机阵列的嵌入式图像感知装置
Minton Using movement to teach academics: An outline for success
CN108922429A (zh) 矩阵墙数据交互方法、装置及系统
Arasan et al. HaptiStylus: A novel stylus for conveying movement and rotational torque effects
JP2005252914A (ja) 双方向コミュニケーションシステム
CN209237296U (zh) 双屏交互的增强现实康复训练装置
Wu et al. Vibrotactile representation of three-dimensional shape and implementation on a vibrotactile pad
Ray et al. An overview on tactile display, haptic investigation towards beneficial for blind person
CN106548706A (zh) 智能移动显示器
CN108785035A (zh) 能够针对人体身上多个部位同时进行按摩调理的康复器械
CN208521561U (zh) 感应式矩阵墙
CN207676288U (zh) 遥测眼动追踪系统
CN104915985A (zh) 一种旋转式3d走马灯的制作方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant