CN109256123A - 一种辅助老年人阅读文字以及防走失实时交互阅读系统 - Google Patents

一种辅助老年人阅读文字以及防走失实时交互阅读系统 Download PDF

Info

Publication number
CN109256123A
CN109256123A CN201811039095.2A CN201811039095A CN109256123A CN 109256123 A CN109256123 A CN 109256123A CN 201811039095 A CN201811039095 A CN 201811039095A CN 109256123 A CN109256123 A CN 109256123A
Authority
CN
China
Prior art keywords
text
elderly
auxiliary
real
reading system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811039095.2A
Other languages
English (en)
Inventor
徐喜成
包军林
张辉
麻超方
陈凤冰
赵亮
徐影
麻超阳
陈玉
王春容
杨腾
从丹
刘建景
麻为民
张学文
窦俊伟
金桠冉
张硕
陈建
陈帆
陈一帆
高源�
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201811039095.2A priority Critical patent/CN109256123A/zh
Publication of CN109256123A publication Critical patent/CN109256123A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
    • G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/42—Determining position
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G10L13/08—Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Telephonic Communication Services (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephone Function (AREA)

Abstract

一种辅助老年人阅读文字以及防走失实时交互阅读系统，本发明提供的辅助老年人阅读文字以及防走失实时交互阅读系统通过摄像头获取照片，然后通过OCR算法文字提取装置将照片内的文字提取出来再通过TTS语音合成装置将文字转换成语音播报出去，ASR语音识别装置将输入的语音转换成文字，再通过GSM信息发送单元将文字发送到设定的接收端，实现老年人的阅读和联系功能，为老年人提供生活便利；同时通过GPS定位装置对老年人进行定位，定位信息通过GSM信息发送单元发送给接收端，保证老年人的安全。

Description

一种辅助老年人阅读文字以及防走失实时交互阅读系统
技术领域
本发明涉及一种辅助老年人阅读文字以及防走失实时交互阅读系统。
背景技术
随着老年人年龄增长，不可避免的产生视力下降、眼部疾病等问题，影响了老人的正常阅读。与此同时，受教育程度较低的人群因为不认识文字而导致无法理解一些书面等媒介的文字信息。老年人随着年龄增长，有相当的几率患上阿尔兹海默症等疾病，影响了老人的思维，从而造成老人独自外出“走丢”的问题。相当一部分的老年人不会使用手机，但是他们同样也需要类似手机功能的替代品与家人进行远程的交流与联系。任何人都需要与他人交流，老年人也不例外，但是当老年人与他人交流时，由于视力障碍，很难看清他人指示的信息的位置(假如两个人在探讨一本书的内容，有人用手指了某一部分的内容给老年人看，可是老年人根本看不清特定区域的文字)。现有的一些系统无法判断使用者是否有阅读的意图，本系统可以实现使用者阅读意图的判断。
发明内容
为克服现有技术问题，本发明提供一种辅助老年人阅读文字以及防走失实时交互阅读系统。
一种辅助老年人阅读文字以及防走失实时交互阅读系统，包括红外线探测装置，所述红外线探测装置用于检测环境的红外线强度，当环境的红外线强度达到设定的阈值时启动整个阅读系统工作；
摄像头装置，所述摄像头装置用于对观看区域进行拍照；
OCR算法文字提取装置，所述OCR算法文字提取装置用于提取所述摄像头装置拍摄的照片中的文字；
TTS语音合成装置，所述TTS语音合成装置用于将OCR算法文字提取装置提取出的文字转换为语音并将语音发送到骨传导耳机上；
ASR语音识别装置，所述ASR语音识别装置用于接收麦克风的语音并将语音转换为文字；
GSM信息发送单元，所述GSM信息发送单元用于将所述ASR语音识别装置的文字发送到设定的接收端。
优选的是，还包括OpenCV识别装置，所述OpenCV识别装置用于识别所述摄像头装置拍摄的照片中的设定物体。
优选的是，所述设定物体为手指或棒状物体。
优选的是，当照片中包括手指或棒状物体时，所述OpenCV识别装置将照片裁剪为仅包括手指或棒状物体处的文字部分，然后将图片输入到所述OCR算法文字提取装置中。
优选的是，还包括GPS定位装置。
优选的是，还包括蓝牙模块。
优选的是，所述红外线探测装置、摄像头装置、OCR算法文字提取装置、TTS语音合成装置、ASR语音识别装置和GSM信息发送单元配置于眼镜内。
本发明的有益效果：
本发明提供的辅助老年人阅读文字以及防走失实时交互阅读系统通过摄像头获取照片，然后通过OCR算法文字提取装置将照片内的文字提取出来再通过TTS语音合成装置将文字转换成语音播报出去，ASR语音识别装置将输入的语音转换成文字，再通过GSM信息发送单元将文字发送到设定的接收端，实现老年人的阅读和联系功能，为老年人提供生活便利；同时通过GPS定位装置对老年人进行定位，定位信息通过GSM信息发送单元发送给接收端，保证老年人的安全。
附图说明
图1为本发明的第一实施例的结构示意图。
具体实施方式：
下面结合附图对本发明做进一步说明：如图1所示，摄像头装置1，所述摄像头装置1用于对观看区域进行拍照；
OCR算法文字提取装置2，所述OCR算法文字提取装置2用于提取所述摄像头装置1拍摄的照片中的文字；
TTS语音合成装置3，所述TTS语音合成装置3用于将OCR算法文字提取装置2提取出的文字转换为语音并将语音发送到骨传导耳机上；通过骨传导耳机传送语音信息给使用者。骨传导耳机优势体现在不会对使用者听取正常信息产生影响。
ASR语音识别装置4，所述ASR语音识别装置4用于接收麦克风的语音并将语音转换为文字；
GSM信息发送单元5，所述GSM信息发送单元5用于将所述ASR语音识别装置4的文字发送到设定的接收端。由于社会上还存在相当一部分人不会使用手机，但是他们也需要和某些人进行沟通。该部分可以将使用者想表达的信息通过麦克风以音频形式记录，通过文字识别算法将语音转化为文字，并以短信形式发送给绑定者手机，从而实现交流的目的。
OpenCV识别装置6，所述OpenCV识别装置6用于识别所述摄像头装置1拍摄的照片中的设定物体。其中，所述设定物体为手指或棒状物体。
当照片中包括手指或棒状物体时，所述OpenCV识别装置6将照片裁剪为仅包括手指或棒状物体处的文字部分，然后再通过OCR算法文字提取装置2进行文字提取，如果没有设定物体，则提取整张图片的文字。假如两个人正在读同一本书，一个人对另一个有视力障碍的人指示某一地方示意其了解，但视力缺陷者无法看清指示位置。此时应用普通阅读则会造成识别区域过大而导致识别多余的文字，所以为解决该问题，本系统OpenCV识别装置6可以识别出手指的贴纸图样，通过识别出贴纸位置即可以划定文字提取的范围，从而达到交互阅读的效果，或者在手指上配置标签，OpenCV识别装置6识别标签的位置从而提取相应部分的图片。
还包括GPS定位装置7，GPS定位装置7将定位信息定时地通过GSM信息发送单元5发送给设定的接收端。为了预防一些患有智力疾病(如阿尔兹海默症等)的人出现走失，走丢的现象，可以通过定位模块定时为绑定者手机发送定位短信，以便家人可以及时获得使用本系统用户的位置。
还包括蓝牙模块8，所述蓝牙模块8用于对系统内的参数进行修改，例如修改接收端的手机号。
还包括红外线探测装置9，所述红外线探测装置9用于检测环境的红外线强度，当环境的红外线强度达到设定的阈值时启动整个阅读系统工作。
本发明的辅助老年人阅读文字以及防走失实时交互阅读系统的各个装置和单元均配置在眼镜内，例如所述红外线探测装置、摄像头装置、OCR算法文字提取装置、TTS语音合成装置、ASR语音识别装置和GSM信息发送单元配置于眼镜内。
在使用时，红外线探测装置9检测环境达到设定的阈值时，启动辅助老年人阅读文字以及防走失实时交互阅读系统，摄像头装置1开启工作进行拍照，拍摄的照片经过OpenCV识别装置6检测是否有设定的手指或棒状物体，如果有则对照片进行裁剪，仅保留手指或棒状物体位置处的部分，然后通过OCR算法文字提取装置2进行文字提取，如果没有设定的手指或棒状物体，则直接通过OCR算法文字提取装置2进行文字提取，之后提取出的文字通过TTS语音合成装置3将文字识别并转换成语音进行输出，达到阅读的目的；再进行通话时，通过ASR语音识别装置4识别输入的语音，然后将语音转换成文字并通过GSM信息发送单元5将文字发送到设定的手机上；GPS定位装置7用于定时地将定位信息通过GSM信息发送单元5将文字发送到设定的手机上，蓝牙模块8可以用于与本系统进行通信修改参数。本发明的信息传输部分均是通过文字短信的形式，这样的形式不需要有数据流量，仅需要有电话通信信号即可，同时采用这样的方式减少了系统整体的硬件和软件数量，使整体系统更简单，同时不易因系统功能过多造成运行缓慢或者由于老年人不善使用而损坏。
以上所述的实施例仅仅是对本发明的优选实施方式进行描述，并非对本发明的范围进行限定，在不脱离本发明设计精神的前提下，本领域普通技术人员对本发明的技术方案作出的各种变形和改进，均应落入本发明权利要求书确定的保护范围内。

Claims (7)

1.一种辅助老年人阅读文字以及防走失实时交互阅读系统，其特征在于：
包括红外线探测装置，所述红外线探测装置用于检测环境的红外线强度，当环境的红外线强度达到设定的阈值时启动整个阅读系统工作；
摄像头装置，所述摄像头装置用于对观看区域进行拍照；
OCR算法文字提取装置，所述OCR算法文字提取装置用于提取所述摄像头装置拍摄的照片中的文字；
TTS语音合成装置，所述TTS语音合成装置用于将OCR算法文字提取装置提取出的文字转换为语音并将语音发送到骨传导耳机上；
ASR语音识别装置，所述ASR语音识别装置用于接收麦克风的语音并将语音转换为文字；
GSM信息发送单元，所述GSM信息发送单元用于将所述ASR语音识别装置的文字发送到设定的接收端。
2.根据权利要求1所述的辅助老年人阅读文字以及防走失实时交互阅读系统，其特征在于：还包括OpenCV识别装置，所述OpenCV识别装置用于识别所述摄像头装置拍摄的照片中的设定物体。
3.根据权利要求2所述的辅助老年人阅读文字以及防走失实时交互阅读系统，其特征在于：所述设定物体为手指或棒状物体。
4.根据权利要求3所述的辅助老年人阅读文字以及防走失实时交互阅读系统，其特征在于：当照片中包括手指或棒状物体时，所述OpenCV识别装置将照片裁剪为仅包括手指或棒状物体处的文字部分，然后将图片输入到所述OCR算法文字提取装置中。
5.根据权利要求1所述的辅助老年人阅读文字以及防走失实时交互阅读系统，其特征在于：还包括GPS定位装置。
6.根据权利要求1所述的辅助老年人阅读文字以及防走失实时交互阅读系统，其特征在于：还包括蓝牙模块。
7.根据权利要求1所述的辅助老年人阅读文字以及防走失实时交互阅读系统，其特征在于：所述红外线探测装置、摄像头装置、OCR算法文字提取装置、TTS语音合成装置、ASR语音识别装置和GSM信息发送单元配置于眼镜内。
CN201811039095.2A 2018-09-06 2018-09-06 一种辅助老年人阅读文字以及防走失实时交互阅读系统 Pending CN109256123A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811039095.2A CN109256123A (zh) 2018-09-06 2018-09-06 一种辅助老年人阅读文字以及防走失实时交互阅读系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811039095.2A CN109256123A (zh) 2018-09-06 2018-09-06 一种辅助老年人阅读文字以及防走失实时交互阅读系统

Publications (1)

Publication Number Publication Date
CN109256123A true CN109256123A (zh) 2019-01-22

Family

ID=65047001

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811039095.2A Pending CN109256123A (zh) 2018-09-06 2018-09-06 一种辅助老年人阅读文字以及防走失实时交互阅读系统

Country Status (1)

Country Link
CN (1) CN109256123A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110059678A (zh) * 2019-04-17 2019-07-26 上海肇观电子科技有限公司 一种检测方法、装置及计算机可读存储介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070230749A1 (en) * 2006-03-30 2007-10-04 Benjamin Perkins Foss Method for capturing and presenting text while maintaining material context during optical character recognition
US20070280534A1 (en) * 2006-06-05 2007-12-06 Benjamin Perkins Foss Method for capturing and presenting test using video image capture for optical character recognition
KR20090111202A (ko) * 2008-04-21 2009-10-26 슬림디스크 주식회사 한글의 기본 구성요소인 수평선, 수직선, 사선, 원의개수와 특성치를 이용한 한글인식 방법 및 장치
CN201393250Y (zh) * 2009-04-24 2010-01-27 王建宁 快捷键式语信发送和接收的移动电话
EP2227775A2 (en) * 2007-12-20 2010-09-15 Intel Corporation Automatic dominant orientation estimation in text images based on steerable filters
CN102509479A (zh) * 2011-10-08 2012-06-20 沈沾俊 便携式文字识别发声阅读器及读取文字的方法
WO2014140816A2 (en) * 2013-03-15 2014-09-18 Orcam Technologies Ltd. Apparatus and method for performing actions based on captured image data
CN104143084A (zh) * 2014-07-17 2014-11-12 武汉理工大学 一种针对视力障碍人群的辅助阅读眼镜
CN106341549A (zh) * 2016-10-14 2017-01-18 努比亚技术有限公司 一种移动终端有声阅读装置及方法
CN107742446A (zh) * 2013-01-25 2018-02-27 陈旭 图书阅读器
CN207799708U (zh) * 2018-01-26 2018-08-31 李晨宇 一种可穿戴式视障者阅读辅助装置

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070230749A1 (en) * 2006-03-30 2007-10-04 Benjamin Perkins Foss Method for capturing and presenting text while maintaining material context during optical character recognition
US20070280534A1 (en) * 2006-06-05 2007-12-06 Benjamin Perkins Foss Method for capturing and presenting test using video image capture for optical character recognition
EP2227775A2 (en) * 2007-12-20 2010-09-15 Intel Corporation Automatic dominant orientation estimation in text images based on steerable filters
KR20090111202A (ko) * 2008-04-21 2009-10-26 슬림디스크 주식회사 한글의 기본 구성요소인 수평선, 수직선, 사선, 원의개수와 특성치를 이용한 한글인식 방법 및 장치
CN201393250Y (zh) * 2009-04-24 2010-01-27 王建宁 快捷键式语信发送和接收的移动电话
CN102509479A (zh) * 2011-10-08 2012-06-20 沈沾俊 便携式文字识别发声阅读器及读取文字的方法
CN107742446A (zh) * 2013-01-25 2018-02-27 陈旭 图书阅读器
WO2014140816A2 (en) * 2013-03-15 2014-09-18 Orcam Technologies Ltd. Apparatus and method for performing actions based on captured image data
CN104143084A (zh) * 2014-07-17 2014-11-12 武汉理工大学 一种针对视力障碍人群的辅助阅读眼镜
CN106341549A (zh) * 2016-10-14 2017-01-18 努比亚技术有限公司 一种移动终端有声阅读装置及方法
CN207799708U (zh) * 2018-01-26 2018-08-31 李晨宇 一种可穿戴式视障者阅读辅助装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110059678A (zh) * 2019-04-17 2019-07-26 上海肇观电子科技有限公司 一种检测方法、装置及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN105957514B (zh) 一种便携式聋哑人交流设备
CN103888581B (zh) 一种通信终端及其记录通话信息的方法
CN106104569A (zh) 用于在电子装置之间建立连接的方法及设备
CN101605399A (zh) 一种实现手语识别的移动终端及方法
CN103530912A (zh) 一种具有情绪识别功能的考勤系统及方法
CN109271533A (zh) 一种多媒体文件检索方法
CN105007557A (zh) 一种具有语音识别和字幕显示功能的智能助听器
CN113297843B (zh) 指代消解的方法、装置及电子设备
CN106791034A (zh) 一种消息显示方法及装置
EP3890342A1 (en) Method and apparatus for awakening wearable device
US20160277707A1 (en) Message transmission system, message transmission method, and program for wearable terminal
CN104883503A (zh) 基于语音的个性化拍照技术
CN105842879A (zh) 多功能盲人眼镜
CN104754112A (zh) 用户信息获取方法及移动终端
KR102263154B1 (ko) 스마트 미러 기반 얼굴 감성 표현 시스템 및 그 운용방법
CN110910876A (zh) 物品声寻装置及控制方法、语音控制设置方法和系统
CN109754817A (zh) 信号处理方法及终端设备
CN110188364B (zh) 基于智能眼镜的翻译方法、设备及计算机可读存储介质
CN209297059U (zh) 一种辅助老年人阅读以及防走失助读眼镜
CN109256123A (zh) 一种辅助老年人阅读文字以及防走失实时交互阅读系统
CN207718803U (zh) 多信源语音区分识别系统
CN103680223A (zh) 辅助阅读设备及辅助阅读系统和辅助阅读方法
CN109300478A (zh) 一种听力障碍者的辅助对话装置
CN107274886B (zh) 一种语音识别方法和装置
CN111966321A (zh) 音量调节方法、ar设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190122