CN103646587A - 一种智能眼镜及其控制方法 - Google Patents
一种智能眼镜及其控制方法 Download PDFInfo
- Publication number
- CN103646587A CN103646587A CN201310652206.8A CN201310652206A CN103646587A CN 103646587 A CN103646587 A CN 103646587A CN 201310652206 A CN201310652206 A CN 201310652206A CN 103646587 A CN103646587 A CN 103646587A
- Authority
- CN
- China
- Prior art keywords
- processor
- intelligent glasses
- display
- signal
- text information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 206010011878 Deafness Diseases 0.000 title abstract description 11
- 239000011521 glass Substances 0.000 claims abstract description 68
- 210000004556 brain Anatomy 0.000 claims abstract description 35
- 238000000034 method Methods 0.000 claims abstract description 30
- 238000006243 chemical reaction Methods 0.000 claims abstract description 5
- 230000008569 process Effects 0.000 claims description 17
- 230000005540 biological transmission Effects 0.000 claims description 13
- 230000005236 sound signal Effects 0.000 claims description 12
- 238000012790 confirmation Methods 0.000 claims description 6
- 230000007613 environmental effect Effects 0.000 claims description 6
- 238000005259 measurement Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 abstract description 6
- 238000005516 engineering process Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 230000014509 gene expression Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000009452 underexpressoin Effects 0.000 description 3
- 230000007547 defect Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 206010048865 Hypoacusis Diseases 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 208000011977 language disease Diseases 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
- G09B21/04—Devices for conversing with the deaf-blind
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
- G09B21/009—Teaching or communicating with deaf persons
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/369—Electroencephalography [EEG]
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
- G10L2021/065—Aids for the handicapped in understanding
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Educational Technology (AREA)
- Educational Administration (AREA)
- Business, Economics & Management (AREA)
- Neurology (AREA)
- Neurosurgery (AREA)
- Dermatology (AREA)
- Biomedical Technology (AREA)
- Optics & Photonics (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种智能眼镜及其控制方法,其中智能眼镜包括:镜片、镜框和镜腿;镜片为透明显示器,进行双面显示;镜框上设置有摄像头和拾音器,分别获取手势指令和语音信号;镜腿上设置有脑电波识别器和处理器,脑电波识别器获取脑电波信号,处理器接收手势指令、语音信号以及脑电波信号并进行处理。该智能眼镜通过获取手势指令和语音信号,并交给处理器进行处理,将对应的图文信息通过背面镜片进行显示,实现外界信息转化为眼镜佩戴者可以看到的图文信息,同时还可以将眼镜佩戴者的脑电波信号发送给处理器,并将其对应的图文信息通过正面镜片进行显示,实现佩戴者将无法表达的语音通过图文方式展现给别人,达到聋哑人与普通人之间无障碍的交流。
Description
技术领域
本发明涉及智能控制技术领域,特别涉及一种智能眼镜及其控制方法。
背景技术
聋哑人由于其自身固有的生理缺陷,由于不具备听力和说话的能力,无法获知他人的想法,也无法通过语言与人沟通和交流,在日常生活中带来很大不便。即便大部分聋哑人自身能够通过手语表达自己想要说的话,但是如果遇到不懂手语的人也无法实现有效的交流和沟通。为解决听力上的缺陷,可以通过佩戴助听器来缓解听力,虽然有助于听力障碍者改善听觉障碍,但是还具有一定的局限性,不能保证所有人佩戴后都具有和普通人相同的听力,对于获知别人说的话仍然存在困难。
综上,现有技术中的技术和设备不能有效地解决聋哑人与普通人之间交流存在障碍的问题,语言障碍者在平时或者是处于危急状况下无法准确表达自己的思想和想要交流的内容。
发明内容
(一)要解决的技术问题
本发明要解决的技术问题是如何实现聋哑人与普通人之间准确、无障碍的交流。
(二)技术方案
为解决上述技术问题,本发明提供了一种智能眼镜,包括:镜片、镜框和镜腿;
镜片为透明显示器,进行双面显示;
镜框上设置有摄像头和拾音器,分别获取手势指令和语音信号;
镜腿上设置有脑电波识别器和处理器,脑电波识别器获取脑电波信号,处理器接收手势指令、语音信号以及脑电波信号并进行处理。
进一步地,所述透明显示器用于对处理器处理得到的图文信息进行双面显示,其中透明显示器包括一个显示器以及设置在该显示器上的两个显示面,分别用于正面显示和背面显示。
进一步地,所述透明显示器用于对处理器处理得到的图文信息进行双面显示,其中透明显示器包括两个显示器,每个显示器上的镜片作为显示面,分别用于正面显示和背面显示。
进一步地,所述摄像头设置在镜框上,用于获取手势指令,产生手势信号,并将手势信号发送给处理器。
进一步地,还包括定位器和存储器,通过所述摄像头对智能眼镜周围环境进行监视,获取环境信息,并将其发送给处理器,与存储器数据库中预存的环境信息进行比较和计算,对当前位置进行定位。
进一步地,所述拾音器设置在镜框中鼻托位置,所述脑电波识别器设置在镜腿的中部,所述处理器设置在镜腿的尾部。
进一步地,所述镜腿上还设置有测距器件、数据传输器件和充电器件,分别于所述处理器连接,通过测距器件对当前位置与目标位置之间的距离进行感测,数据传输器件用于与外接设备之间进行数据传输,充电器件对透明显示器、摄像头、拾音器、脑电波识别器和处理器进行充电。
进一步地,所述充电器件为太阳能充电,集成所述透明显示器的镜面上。
进一步地,所述测距器件以下测距仪中的一种:超声波测距仪、红外测距仪和激光测距仪。
为解决上述技术问题,本发明还提供了一种对上述智能眼镜的控制方法,包括:
S1、获取手势信号和音频信号,并发送给处理器;
S2、处理器对音频信号进行语音识别、转换成图文信息,将手势信号转换成图文信息,通过智能眼镜进行背面显示;
S3、获取脑电波信号,进行编码和解码后得到第一信息,将其发送给处理器;
S4、处理器将第一信息转换成图文信息,通过智能眼镜进行正面显示。
进一步地,如果步骤S3中获取脑电波信号失败之后还包括:
通过智能眼镜的背面显示,提示发生错误。
进一步地,步骤S4中进行正面显示之前还包括:
对图文信息进行背面显示,接收到确认的脑电波信号后再进行正面显示。
进一步地,所述音频信号是经过拾音器对获取的语音信号进行模数转换得到的。
进一步地,获取手势信号和音频信号的同时还获取周围环境信息,并结合定位系统获取的位置信息对当前位置进行定位。
(三)有益效果
本发明实施例提供的一种智能眼镜及其控制方法,其中智能眼镜包括:镜片、镜框和镜腿;镜片为透明显示器,进行双面显示;镜框上设置有摄像头和拾音器,分别获取手势指令和语音信号;镜腿上设置有脑电波识别器和处理器,脑电波识别器获取脑电波信号,处理器接收手势指令、语音信号以及脑电波信号并进行处理。该智能眼镜通过获取手势指令和语音信号,并交给处理器进行处理,将对应的图文信息通过背面镜片进行显示,实现外界信息转化为眼镜佩戴者可以看到的图文信息,同时还可以将眼镜佩戴者的脑电波信号发送给处理器,并将其对应的图文信息通过正面镜片进行显示,实现佩戴者将无法表达的语音通过图文方式展现给别人,达到聋哑人与普通人之间无障碍的交流。
附图说明
图1是本发明实施例一中提供的一种智能眼镜的结构示意图;
图2是本发明实施例一中提供的智能眼镜在表达模式下识别判断过程的原理示意图;
图3是本发明实施例一中提供的智能眼镜在表达模式下匹配判断过程的原理示意图;
图4是本发明实施例一中提供的智能眼镜在接收模式下的原理示意图;
图5是本发明实施例二中提供的一种智能眼镜的控制方法的步骤流程图。
具体实施方式
下面结合附图和实施例,对本发明的具体实施方式作进一步详细描述。以下实施例用于说明本发明,但不用来限制本发明的范围。
实施例一
本发明实施例一提供了一种智能眼镜,组成结构示意图如图1所示,具体包括:镜片、镜框和镜腿;
镜片为透明显示器10,进行双面显示;
镜框上设置有摄像头11和拾音器12,分别获取手势指令和语音信号;
镜腿上设置有脑电波识别器13和处理器14,脑电波识别器13获取脑电波信号,处理器14接收手势指令、语音信号以及脑电波信号并进行处理。
需要说明的是,本实施例中将处理器内置于一侧的镜腿尾部,两一侧的镜腿尾部还可以内置具有其它功能的模块,例如内置的通信模块WIFI,蓝牙或者是定位模块GPS等。
上述智能眼镜能够有利于佩戴该智能眼镜的聋哑人与普通人之间的交流,通过摄像头和拾音器获取普通人表达给佩戴者的手势指令或者是语音信号,经过处理器的识别和处理将其通过图文信息的形式在眼睛的背面镜片展示给佩戴者,使得佩戴者获知普通人的想法和意图,同样脑电波识别器获取佩戴者的脑电波信号,处理器接收到脑电波信号之后进行解析和处理得到相应的图文信息,并将其通过正面镜片进行显示,将佩戴者想要表达的相反通过镜片上的显示器展示给普通人,突破聋哑人与普通人之间无法有效沟通和交流的障碍。
优选地,本实施例中的透明显示器10用于对处理器处理得到的图文信息进行双面显示,其中实现双面显示的一种实施方案为:透明显示器10包括一个显示器以及设置在该显示器上的两个显示面,分别用于正面显示和背面显示。
除了上述实施方案之外,本实施例中还提供了第二种实施方案,即透明显示器10用于对处理器处理得到的图文信息进行双面显示,其中透明显示器10包括两个显示器,每个显示器上的镜片作为显示面,也是两个显示面,分别于正面显示和背面显示。需要说明的是,本实施例中的正面显示和背面显示指两种显示模式,由于显示器是用透明的,在显示的过程中,无论处于哪一种显示模式,在另一面头可以同时观测到与之相反的显示内容。该实施例方案与第一种实施方案的区别在于使用的显示器个数不同,具体为:第一种实施方案中采用一个显示器,一个镜片就是一个显示器,显示器本身是透明的,透明显示器的两个面分别是镜片的A面和B面,用于背面显示和正面显示两种模式;而第二种实施方案中采用两个背对设置的显示器,每个镜片是由两个显示器组成、并且两个显示器分别是一个镜片的A面和B面,同样用于背面显示和正面显示两种模式。需要说明的是,上述对透明显示器的描述均是对其中镜片结构的描述,两个镜片是完全一样的,本实施例中采用的优选方案是上述第一种实施方案。
需要说明的是,本实施例中的双面显示的含义是指该智能眼镜在使用过程中包括两个模式,即表达模式和接收模式,表达模式就是将佩戴者的想法或意识通过眼镜的镜片展示给面前的普通人,接收模式就是获取普通人的语音、手势等信息,最终通过镜片展示给佩戴者。一般在表达模式利用智能眼镜的正面显示,所谓正面就是顺着佩戴者视线方向,即展示给普通人的一面,假设是A面,而在接收模式利用智能眼镜的背面显示,所谓背面就是佩戴者视线相反的方向,即展示给眼镜佩戴者的一面,假设是B面。
还需要说明的是,当眼镜的镜片如果采用柔性显示器件,则可以实现将镜片进行弯曲的结构设计,可以只是将镜框所在的显示区域进行弯曲,其功能是在眼镜的镜片呈现显示图案时,不只是用户的前方会出现提示画面,左右两侧的显示区域也可以同时呈现显示图案。
优选地,本实施例中的摄像头11设置在镜框上,用于获取手势指令,产生手势信号,并将手势信号发送给处理器14。摄像头11位于该智能眼镜的正前方、左右眼镜的两侧,对佩戴者周围进行全方位的检测。
对于摄像头11的功能除了用于获取佩戴者面前其他人的手势指令以获知其想法和目的,同时还用于通过摄像头11实时采集和检测自身周围的环境和情况,将相应的信息发送处理器14进行处理,并根据内部数据库进行推理和计算,根据结果再结合GPS定位器进行佩戴者所处位置的精确定位,因此,本实施例中的智能眼镜进一步地还包括定位器和存储器,通过所述摄像头11对智能眼镜周围环境进行监视,获取环境信息,并将其发送给处理器14,与存储器数据库中预存的环境信息进行比较和计算,对当前位置进行定位,得到定位信息。以此方式获得的定位信息有利于其他智能终端根据该位置信息进行其它发明技术的改进,可以为佩戴者提供附近场所的最佳路线,例如能够为佩戴者提供最近的地铁站以及从当前位置到该地铁站的最近路线等等,当然还可以根据该位置信息其它方面的帮助信息,原理同上,此处不再赘述。
优选地,本实施例中拾音器12设置在镜框中鼻托位置,所述脑电波识别器13设置在镜腿的中部,所述处理器14设置在镜腿的尾部。
其中拾音器12可以拾取特定范围内的语言信号,模拟信号转换为数字信号传输到处理器14,处理器14经过语音识别,转换成图文信息(可能是文字信息,也可能是图片信息,还可能是文字信息和图片信息的组合),将其传输到给透明显示器10,通过眼镜的背面镜片进行显示。其中脑电波识别器13设置在镜腿的中部,佩戴时非常接近佩戴者的大脑,由于人的大脑在差生意识或想法的时候会产生一种脑电波信号,脑电波识别器13用于识别出该脑电波信号,读取佩戴者大脑思考时的脑电波信息,也就是操作指令,通过解码和编码处理,将得到的第一信息发送给处理器14,之后由处理器14对第一信息进行解析和处理,一般是与以存储器的数据库中以存储的脑电波信号与意识或想法的对应关系确定此时获取的脑电波信号对应的想法,并将其通过图文信息的形式显示出来。
优选地,本实施例中镜腿上还设置有测距器件、数据传输器件和充电器件,分别于所述处理器14连接,通过测距器件对当前位置与目标位置之间的距离进行感测,数据传输器件用于与外接设备之间进行数据传输,充电器件对透明显示器10、摄像头11、拾音器12、脑电波识别器13和处理器14进行充电,提高该智能眼镜的续航能力。
其中的测距器件可以内置于镜框上,其功能就是实时测量佩戴者与其所在位置路标的距离,能够实现准确定位,还可以测量佩戴者与佩戴者正在交流的人的距离,并因此设定拾音器12指向及拾音的距离。进一步地,本实施例中的测距器件以下测距仪中的一种:超声波测距仪、红外测距仪和激光测距仪。
另外,本实施例中的数据传输器件可以内置于另一侧镜腿的尾部,而充电器件为太阳能充电,可以集成在正面镜片和背面镜片的表面上。通过数据传输期间能够实现上述智能眼镜的通信功能,即通过RF(Radio Frequency,即射频)系统与本实施例中提供的智能眼镜佩戴者进行联络,来自其他智能终端用户的语音信息通过处理单元、人工智能系统的相应信息处理,然后将处理过的信息通过显示屏以B面显示模式传达给用户;用户的回应通过脑电波读取,B面显示模式显示在镜片上,经用户确认同意,处理器14接收到佩戴者的确认后将其转换成图文信息经过A面显示,或者是将其转换成语音信号发送出去。
需要说明的是,本实施例中的通信功能还可以是通过WIFI或Bluetooth等实现,因此更进一步的,该智能眼镜还可以同时具有娱乐功能的设计,佩戴者可以利用脑电波配合显示镜片玩游戏,利用WIFI上网,还可以与其他设备之间进行数据传输。
对于本实施例中的智能眼镜处于表达模式下的工作原理如下:
佩戴者大脑发出意念指令,产生脑电波信号,脑电波识别器13对该脑电波信号进行识别,如果识别脑电波信号失败则在透明显示器10的B面显示识别失败,佩戴者通过B面显示获知识别失败的反馈,之后将再次产生电脑波信号,该过程为识别判断过程,只是对脑电波识别器读取信息的错误进行反馈,原理示意图如图2所示。
进一步地,本实施例中对脑电波信号识别成功之后,识别出该脑电波信号并与存储器中的数据库进行信号比对,如果比对通过则表明脑电波读取成功,并发送给处理器14,再继续对该信息进行解析,与存储器中预先设定的脑电波信号与图文信息的对应关系,并将匹配出来的图文信息进行输出,即通过透明显示器10的A面进行显示。但是对脑电波信号与数据库对比匹配得到的图文信息在A面显示之前,还可以将其先在B面显示,佩戴者在B面看到匹配的图文信息之后进行判断,如果显示的内图文信息符合佩戴者的意念,就会产生一个确认的脑电波信号,处理器14收到该确认信息后再控制透明显示器切换到A面显示模式,将匹配的图文信息显示给佩戴者之外的人;如果B面显示的图文信息不符合佩戴者的意念,则脑电波识别器重新接收佩戴者大脑发出脑电波信号,直到符合佩戴者的意念为止,该过程为匹配判断过程,即脑电波识别器的信号经过处理后处理后,对输出的信息是否与佩戴者想要表达的意念一致,原理示意图如图3所示。通过这个判断过程,如果处理器处理后的图文信息完全符合佩戴者的意见,则在眼镜的A面进行图文信息显示;但是如果处理器处理后的信息与佩戴者想表达的意念有差异,则反馈到佩戴者,佩戴者重新发送意念指令,能够更加准确地表达佩戴者的想法,实现有效、准确的交流。
当智能眼镜处于接收模式情况的工作原理示意图如图4所示,摄像头11和拾音器12分别获取手势指令和语音信号,分别进行转换得到手势信号和音频信号交给处理器14进行处理,将其与存储器中数据库与图文信息的对应关系确定普通人想要对该智能眼镜佩戴者表达的想法或意图,并将其通过透明显示器10的B面显示,实现佩戴者接受外界信息的过程。
综上所述,本实施例提供的智能眼镜通过获取手势指令和语音信号,并交给处理器14进行处理,将对应的图文信息通过背面镜片进行显示,实现外界信息转化为眼镜佩戴者可以看到的图文信息,同时还可以将眼镜佩戴者的脑电波信号发送给处理器14,并将其对应的图文信息通过正面镜片进行显示,实现佩戴者将无法表达的语音通过图文方式展现给别人,达到聋哑人与普通人之间无障碍的交流。
实施例二
本发明实施例二中还提供了一种基于上述实施例一中智能眼镜的控制方法,步骤流程如图5所示,具体包括以下步骤:
S1、获取手势信号和音频信号,并发送给处理器;
S2、处理器对音频信号进行语音识别、转换成图文信息,将手势信号转换成图文信息,通过智能眼镜的背面镜片进行显示;
S3、获取脑电波信号,进行编码和解码后得到第一信息,将其发送给处理器;
S4、处理器将第一信息转换成图文信息,通过智能眼镜的正面镜片进行显示。
优选地,本实施例中步骤S4中智能眼镜的正面镜片显示之前还包括:
将图文信息在背面镜片进行显示,接收到确认的脑电波信号后再通过正面镜片进行显示。
优选地,本实施例中音频信号是经过拾音器对获取的语音信号进行模数转换得到的。
优选地,本实施例中获取手势信号和音频信号的同时还获取周围环境信息,并结合定位系统获取的位置信息对当前位置进行定位。
综上所述,本实施例提供的控制方法,通过佩戴上述智能眼镜,能够和周围的普通人进行交流和沟通,主要是通过摄像头以及具有语音识别和脑电波识别的器件或模块实现对手势指令、语音信号以及脑电波信号的采集和转换,将得到的信号经过处理器处理后一图文信息的形式进行展示,由于智能眼睛是可以双面显示的透明显示器,能够实现聋哑人和身边普通人之间的有效沟通和交流,而且提高手语表达等现有方式的精确度。
以上实施方式仅用于说明本发明,而并非对本发明的限制,有关技术领域的普通技术人员,在不脱离本发明的精神和范围的情况下,还可以做出各种变化和变型,因此所有等同的技术方案也属于本发明的范畴,本发明的专利保护范围应由权利要求限定。
Claims (14)
1.一种智能眼镜,其特征在于,包括:镜片、镜框和镜腿;
镜片为透明显示器,进行双面显示;
镜框上设置有摄像头和拾音器,分别获取手势指令和语音信号;
镜腿上设置有脑电波识别器和处理器,脑电波识别器获取脑电波信号,处理器接收手势指令、语音信号以及脑电波信号并进行处理。
2.根据权利要求1所述的智能眼镜,其特征在于,所述透明显示器用于对处理器处理得到的图文信息进行双面显示,其中透明显示器包括一个显示器以及设置在该显示器上的两个显示面,分别用于正面显示和背面显示。
3.根据权利要求1所述的智能眼镜,其特征在于,所述透明显示器用于对处理器处理得到的图文信息进行双面显示,其中透明显示器包括两个显示器,每个显示器上的镜片作为显示面,分别用于正面显示和背面显示。
4.根据权利要求1所述的智能眼镜,其特征在于,所述摄像头设置在镜框上,用于获取手势指令,产生手势信号,并将手势信号发送给处理器。
5.根据权利要求4所述的智能眼镜,其特征在于,还包括定位器和存储器,通过所述摄像头对智能眼镜周围环境进行监视,获取环境信息,并将其发送给处理器,与存储器数据库中预存的环境信息进行比较和计算,对当前位置进行定位。
6.根据权利要求1所述的智能眼镜,其特征在于,所述拾音器设置在镜框中鼻托位置,所述脑电波识别器设置在镜腿的中部,所述处理器设置在镜腿的尾部。
7.根据权利要求1所述的智能眼镜,其特征在于,所述镜腿上还设置有测距器件、数据传输器件和充电器件,分别于所述处理器连接,通过测距器件对当前位置与目标位置之间的距离进行感测,数据传输器件用于与外接设备之间进行数据传输,充电器件对透明显示器、摄像头、拾音器、脑电波识别器和处理器进行充电。
8.根据权利要求7所述的智能眼镜,其特征在于,所述充电器件为太阳能充电,集成在所述透明显示器的镜面上。
9.根据权利要求7所述的智能眼镜,其特征在于,所述测距器件以下测距仪中的一种:超声波测距仪、红外测距仪和激光测距仪。
10.一种对权利要求1-9中任一项所述的智能眼镜的控制方法,其特征在于,包括:
S1、获取手势信号和音频信号,并发送给处理器;
S2、处理器对音频信号进行语音识别、转换成图文信息,将手势信号转换成图文信息,通过智能眼镜进行背面显示;
S3、获取脑电波信号,进行编码和解码后得到第一信息,将其发送给处理器;
S4、处理器将第一信息转换成图文信息,通过智能眼镜进行正面显示。
11.根据权利要求10所述的控制方法,其特征在于,如果步骤S3中获取脑电波信号失败之后还包括:
通过智能眼镜的背面显示,提示发生错误。
12.根据权利要求10所述的控制方法,其特征在于,步骤S4中进行正面显示之前还包括:
对图文信息进行背面显示,接收到确认的脑电波信号后再进行正面显示。
13.根据权利要求10所述的控制方法,其特征在于,所述音频信号是经过拾音器对获取的语音信号进行模数转换得到的。
14.根据权利要求10所述的控制方法,其特征在于,获取手势信号和音频信号的同时还获取周围环境信息,并结合定位系统获取的位置信息对当前位置进行定位。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310652206.8A CN103646587B (zh) | 2013-12-05 | 2013-12-05 | 一种智能眼镜及其控制方法 |
PCT/CN2014/081282 WO2015081694A1 (zh) | 2013-12-05 | 2014-06-30 | 智能眼镜及其控制方法 |
US14/417,440 US20150379896A1 (en) | 2013-12-05 | 2014-06-30 | Intelligent eyewear and control method thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310652206.8A CN103646587B (zh) | 2013-12-05 | 2013-12-05 | 一种智能眼镜及其控制方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103646587A true CN103646587A (zh) | 2014-03-19 |
CN103646587B CN103646587B (zh) | 2017-02-22 |
Family
ID=50251793
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310652206.8A Active CN103646587B (zh) | 2013-12-05 | 2013-12-05 | 一种智能眼镜及其控制方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20150379896A1 (zh) |
CN (1) | CN103646587B (zh) |
WO (1) | WO2015081694A1 (zh) |
Cited By (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104065388A (zh) * | 2014-07-09 | 2014-09-24 | 李永飞 | 人脑电台 |
CN104375641A (zh) * | 2014-10-27 | 2015-02-25 | 联想(北京)有限公司 | 一种控制方法及电子设备 |
WO2015081694A1 (zh) * | 2013-12-05 | 2015-06-11 | 京东方科技集团股份有限公司 | 智能眼镜及其控制方法 |
CN104951259A (zh) * | 2014-03-28 | 2015-09-30 | 索尼公司 | 显示设备及其显示控制方法 |
CN104966433A (zh) * | 2015-07-17 | 2015-10-07 | 江西洪都航空工业集团有限责任公司 | 一种辅助聋哑人对话的智能眼镜 |
CN105137601A (zh) * | 2015-10-16 | 2015-12-09 | 上海斐讯数据通信技术有限公司 | 一种智能眼镜 |
CN105468140A (zh) * | 2015-11-05 | 2016-04-06 | 京东方科技集团股份有限公司 | 佩戴设备、应用设备系统 |
CN106157750A (zh) * | 2016-08-24 | 2016-11-23 | 深圳市铁格龙科技有限公司 | 一种智能聋哑人发音及交流学习眼镜 |
CN106205293A (zh) * | 2016-09-30 | 2016-12-07 | 广州音书科技有限公司 | 用于语音识别和手语识别的智能眼镜 |
TWI563500B (zh) * | 2014-12-26 | 2016-12-21 | ||
CN106302974A (zh) * | 2015-06-12 | 2017-01-04 | 联想(北京)有限公司 | 一种信息处理的方法及电子设备 |
CN106407641A (zh) * | 2015-07-29 | 2017-02-15 | 西门子保健有限责任公司 | 在医学网络与使用者之间通信的方法和移动式数据眼镜 |
CN106601075A (zh) * | 2017-02-05 | 2017-04-26 | 苏州路之遥科技股份有限公司 | 脑电波输入训练器 |
CN108106665A (zh) * | 2017-12-12 | 2018-06-01 | 深圳分云智能科技有限公司 | 一种具有玻璃监测功能的智能穿戴设备 |
CN108509034A (zh) * | 2018-03-16 | 2018-09-07 | 广东欧珀移动通信有限公司 | 电子装置、信息处理方法及相关产品 |
CN108711425A (zh) * | 2018-05-03 | 2018-10-26 | 华南理工大学 | 一种基于语音控制的视频输入听觉显示导盲装置及方法 |
CN108803871A (zh) * | 2018-05-07 | 2018-11-13 | 歌尔科技有限公司 | 头戴显示设备中数据内容的输出方法、装置及头戴显示设备 |
CN109255314A (zh) * | 2018-08-30 | 2019-01-22 | Oppo广东移动通信有限公司 | 信息提示方法、装置、智能眼镜及存储介质 |
CN109425983A (zh) * | 2017-08-27 | 2019-03-05 | 南京乐朋电子科技有限公司 | 一种脑电波成像投影眼镜 |
CN110058413A (zh) * | 2018-05-23 | 2019-07-26 | 王小峰 | 一种智能穿戴系统 |
CN110111651A (zh) * | 2018-02-01 | 2019-08-09 | 周玮 | 基于体态感知的智能语言交互系统 |
CN110351631A (zh) * | 2019-07-11 | 2019-10-18 | 京东方科技集团股份有限公司 | 聋哑人交流设备及其使用方法 |
CN111046854A (zh) * | 2020-01-10 | 2020-04-21 | 北京服装学院 | 一种脑电波外部识别方法、装置及系统 |
CN111258088A (zh) * | 2020-02-25 | 2020-06-09 | 厦门明睐科技有限公司 | 一种脑电波控制的智能眼镜设备及使用方法 |
CN111751995A (zh) * | 2020-06-11 | 2020-10-09 | 重庆工业职业技术学院 | 一种声音视觉化的单目头戴式ar眼镜装置及其实现方法 |
CN111787264A (zh) * | 2020-07-21 | 2020-10-16 | 北京字节跳动网络技术有限公司 | 一种远程教学的提问方法、装置、提问终端和可读介质 |
CN111954290A (zh) * | 2018-03-30 | 2020-11-17 | Oppo广东移动通信有限公司 | 电子装置、功率调整方法及相关产品 |
US10854110B2 (en) | 2017-03-03 | 2020-12-01 | Microsoft Technology Licensing, Llc | Automated real time interpreter service |
CN112506335A (zh) * | 2019-09-16 | 2021-03-16 | Oppo广东移动通信有限公司 | 头戴式设备及其控制方法、装置、系统和存储介质 |
CN113170266A (zh) * | 2018-10-04 | 2021-07-23 | 希雅株式会社 | 听觉辅助器件 |
CN113194552A (zh) * | 2020-01-10 | 2021-07-30 | 株式会社村田制作所 | 通信终端装置和通信系统 |
CN115363601A (zh) * | 2021-08-28 | 2022-11-22 | 淮阴工学院 | 一种辅助听说的智能眉勒及其使用方法 |
WO2023001195A1 (zh) * | 2021-07-22 | 2023-01-26 | 所乐思(深圳)科技有限公司 | 智能眼镜及其控制方法和系统 |
Families Citing this family (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2521831A (en) * | 2014-01-02 | 2015-07-08 | Nokia Technologies Oy | An apparatus or method for projecting light internally towards and away from an eye of a user |
KR102311741B1 (ko) * | 2015-01-14 | 2021-10-12 | 삼성디스플레이 주식회사 | 머리 장착형 디스플레이 장치 |
CN105472256B (zh) * | 2016-01-05 | 2018-09-28 | 上海斐讯数据通信技术有限公司 | 拍摄和传输图像的方法、智能眼镜及系统 |
CN106994689B (zh) * | 2016-01-23 | 2020-07-28 | 鸿富锦精密工业(武汉)有限公司 | 基于脑电信号控制的智能机器人系统和方法 |
KR102450803B1 (ko) * | 2016-02-11 | 2022-10-05 | 한국전자통신연구원 | 양방향 수화 번역 장치 및 장치가 수행하는 양방향 수화 번역 방법 |
CN106656352B (zh) * | 2016-12-27 | 2020-04-07 | 广东小天才科技有限公司 | 一种信息传递方法及装置、可穿戴设备 |
US11861255B1 (en) | 2017-06-16 | 2024-01-02 | Apple Inc. | Wearable device for facilitating enhanced interaction |
US11435583B1 (en) * | 2018-01-17 | 2022-09-06 | Apple Inc. | Electronic device with back-to-back displays |
CN108198552B (zh) * | 2018-01-18 | 2021-02-02 | 深圳市大疆创新科技有限公司 | 一种语音控制方法及视频眼镜 |
US10908419B2 (en) | 2018-06-28 | 2021-02-02 | Lucyd Ltd. | Smartglasses and methods and systems for using artificial intelligence to control mobile devices used for displaying and presenting tasks and applications and enhancing presentation and display of augmented reality information |
US11982809B2 (en) | 2018-09-17 | 2024-05-14 | Apple Inc. | Electronic device with inner display and externally accessible input-output device |
IT201800009607A1 (it) * | 2018-10-19 | 2020-04-19 | Andrea Previato | Sistema e metodo di ausilio ad utenti con disabilità comunicativa |
USD900920S1 (en) | 2019-03-22 | 2020-11-03 | Lucyd Ltd. | Smart glasses |
USD899493S1 (en) | 2019-03-22 | 2020-10-20 | Lucyd Ltd. | Smart glasses |
USD899500S1 (en) | 2019-03-22 | 2020-10-20 | Lucyd Ltd. | Smart glasses |
USD899496S1 (en) | 2019-03-22 | 2020-10-20 | Lucyd Ltd. | Smart glasses |
USD899495S1 (en) | 2019-03-22 | 2020-10-20 | Lucyd Ltd. | Smart glasses |
USD899499S1 (en) | 2019-03-22 | 2020-10-20 | Lucyd Ltd. | Smart glasses |
USD899494S1 (en) | 2019-03-22 | 2020-10-20 | Lucyd Ltd. | Smart glasses |
USD900206S1 (en) | 2019-03-22 | 2020-10-27 | Lucyd Ltd. | Smart glasses |
USD900203S1 (en) | 2019-03-22 | 2020-10-27 | Lucyd Ltd. | Smart glasses |
USD899498S1 (en) | 2019-03-22 | 2020-10-20 | Lucyd Ltd. | Smart glasses |
USD899497S1 (en) | 2019-03-22 | 2020-10-20 | Lucyd Ltd. | Smart glasses |
USD900204S1 (en) | 2019-03-22 | 2020-10-27 | Lucyd Ltd. | Smart glasses |
USD900205S1 (en) | 2019-03-22 | 2020-10-27 | Lucyd Ltd. | Smart glasses |
USD954136S1 (en) | 2019-12-12 | 2022-06-07 | Lucyd Ltd. | Smartglasses having pivot connector hinges |
USD955467S1 (en) | 2019-12-12 | 2022-06-21 | Lucyd Ltd. | Sport smartglasses having flat connector hinges |
USD958234S1 (en) | 2019-12-12 | 2022-07-19 | Lucyd Ltd. | Round smartglasses having pivot connector hinges |
USD954135S1 (en) | 2019-12-12 | 2022-06-07 | Lucyd Ltd. | Round smartglasses having flat connector hinges |
USD974456S1 (en) | 2019-12-19 | 2023-01-03 | Lucyd Ltd. | Pivot hinges and smartglasses temples |
USD954137S1 (en) | 2019-12-19 | 2022-06-07 | Lucyd Ltd. | Flat connector hinges for smartglasses temples |
US11282523B2 (en) * | 2020-03-25 | 2022-03-22 | Lucyd Ltd | Voice assistant management |
CN114267323A (zh) * | 2021-12-27 | 2022-04-01 | 深圳市研强物联技术有限公司 | 一种用于聋哑人的语音助听ar眼镜及其通信交流方法 |
CN114822172A (zh) * | 2022-06-23 | 2022-07-29 | 北京亮亮视野科技有限公司 | 基于ar眼镜的文字显示方法及装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5473705A (en) * | 1992-03-10 | 1995-12-05 | Hitachi, Ltd. | Sign language translation system and method that includes analysis of dependence relationships between successive words |
US7023498B2 (en) * | 2001-11-19 | 2006-04-04 | Matsushita Electric Industrial Co. Ltd. | Remote-controlled apparatus, a remote control system, and a remote-controlled image-processing apparatus |
CN101498845A (zh) * | 2009-01-14 | 2009-08-05 | 长春大学 | 智能盲人导航眼镜 |
CN102236986A (zh) * | 2010-05-06 | 2011-11-09 | 鸿富锦精密工业(深圳)有限公司 | 手语翻译系统、手语翻译装置及手语翻译方法 |
CN102872589A (zh) * | 2012-07-20 | 2013-01-16 | 友达光电股份有限公司 | 影像显示的控制方法以及显示系统 |
US20130110508A1 (en) * | 2011-10-26 | 2013-05-02 | Samsung Electronics Co., Ltd. | Electronic device and control method thereof |
JP5193412B2 (ja) * | 2000-03-21 | 2013-05-08 | クアック.コム | インターネットに基づく情報への音声アクセスのためのシステム及び方法 |
CN103310683A (zh) * | 2013-05-06 | 2013-09-18 | 深圳先进技术研究院 | 智能眼镜及基于智能眼镜的语音交流系统及方法 |
Family Cites Families (45)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4902120A (en) * | 1988-11-22 | 1990-02-20 | Weyer Frank M | Eyeglass headphones |
US5610678A (en) * | 1993-12-30 | 1997-03-11 | Canon Kabushiki Kaisha | Camera including camera body and independent optical viewfinder |
US6433913B1 (en) * | 1996-03-15 | 2002-08-13 | Gentex Corporation | Electro-optic device incorporating a discrete photovoltaic device and method and apparatus for making same |
US6240392B1 (en) * | 1996-08-29 | 2001-05-29 | Hanan Butnaru | Communication device and method for deaf and mute persons |
EP1027627B1 (en) * | 1997-10-30 | 2009-02-11 | MYVU Corporation | Eyeglass interface system |
US6491394B1 (en) * | 1999-07-02 | 2002-12-10 | E-Vision, Llc | Method for refracting and dispensing electro-active spectacles |
US20020158816A1 (en) * | 2001-04-30 | 2002-10-31 | Snider Gregory S. | Translating eyeglasses |
JP2004144990A (ja) * | 2002-10-24 | 2004-05-20 | Alps Electric Co Ltd | 両面発光型液晶表示モジュール |
JP2004199027A (ja) * | 2002-10-24 | 2004-07-15 | Seiko Epson Corp | 表示装置、及び電子機器 |
US7546158B2 (en) * | 2003-06-05 | 2009-06-09 | The Regents Of The University Of California | Communication methods based on brain computer interfaces |
US7120486B2 (en) * | 2003-12-12 | 2006-10-10 | Washington University | Brain computer interface |
US8965460B1 (en) * | 2004-01-30 | 2015-02-24 | Ip Holdings, Inc. | Image and augmented reality based networks using mobile devices and intelligent electronic glasses |
KR100594117B1 (ko) * | 2004-09-20 | 2006-06-28 | 삼성전자주식회사 | Hmd 정보 단말기에서 생체 신호를 이용하여 키를입력하는 장치 및 방법 |
US20060094974A1 (en) * | 2004-11-02 | 2006-05-04 | Cain Robert C | Systems and methods for detecting brain waves |
US11428937B2 (en) * | 2005-10-07 | 2022-08-30 | Percept Technologies | Enhanced optical and perceptual digital eyewear |
US8696113B2 (en) * | 2005-10-07 | 2014-04-15 | Percept Technologies Inc. | Enhanced optical and perceptual digital eyewear |
US20080144854A1 (en) * | 2006-12-13 | 2008-06-19 | Marcio Marc Abreu | Biologically fit wearable electronics apparatus and methods |
KR100866215B1 (ko) * | 2006-12-20 | 2008-10-30 | 삼성전자주식회사 | 뇌파를 이용한 단말의 구동 방법 및 장치 |
US8102334B2 (en) * | 2007-11-15 | 2012-01-24 | International Businesss Machines Corporation | Augmenting reality for a user |
JP4465414B2 (ja) * | 2008-07-11 | 2010-05-19 | パナソニック株式会社 | 脳波を用いた機器の制御方法および脳波インタフェースシステム |
US8964298B2 (en) * | 2010-02-28 | 2015-02-24 | Microsoft Corporation | Video display modification based on sensor input for a see-through near-to-eye display |
CN101819334B (zh) * | 2010-04-01 | 2013-04-17 | 夏翔 | 多功能电子眼镜 |
US9994228B2 (en) * | 2010-05-14 | 2018-06-12 | Iarmourholdings, Inc. | Systems and methods for controlling a vehicle or device in response to a measured human response to a provocative environment |
US20110291918A1 (en) * | 2010-06-01 | 2011-12-01 | Raytheon Company | Enhancing Vision Using An Array Of Sensor Modules |
US8442626B2 (en) * | 2010-06-21 | 2013-05-14 | Aleksandrs Zavoronkovs | Systems and methods for communicating with a computer using brain activity patterns |
US20120078628A1 (en) * | 2010-09-28 | 2012-03-29 | Ghulman Mahmoud M | Head-mounted text display system and method for the hearing impaired |
GB201103200D0 (en) * | 2011-02-24 | 2011-04-13 | Isis Innovation | An optical device for the visually impaired |
US8749573B2 (en) * | 2011-05-26 | 2014-06-10 | Nokia Corporation | Method and apparatus for providing input through an apparatus configured to provide for display of an image |
US8593795B1 (en) * | 2011-08-09 | 2013-11-26 | Google Inc. | Weight distribution for wearable computing device |
CN202533867U (zh) * | 2012-04-17 | 2012-11-14 | 北京七鑫易维信息技术有限公司 | 一种头戴式眼控显示终端 |
US20170164878A1 (en) * | 2012-06-14 | 2017-06-15 | Medibotics Llc | Wearable Technology for Non-Invasive Glucose Monitoring |
CN103279232B (zh) * | 2012-06-29 | 2016-12-21 | 上海天马微电子有限公司 | 一种橱窗互动装置及其互动实施方法 |
WO2014041871A1 (ja) * | 2012-09-12 | 2014-03-20 | ソニー株式会社 | 画像表示装置及び画像表示方法、並びに記録媒体 |
US9966075B2 (en) * | 2012-09-18 | 2018-05-08 | Qualcomm Incorporated | Leveraging head mounted displays to enable person-to-person interactions |
US10073201B2 (en) * | 2012-10-26 | 2018-09-11 | Qualcomm Incorporated | See through near-eye display |
JP6094190B2 (ja) * | 2012-12-10 | 2017-03-15 | ソニー株式会社 | 情報処理装置および記録媒体 |
US9240162B2 (en) * | 2012-12-31 | 2016-01-19 | Lg Display Co., Ltd. | Transparent display apparatus and method for controlling the same |
CA3187490A1 (en) * | 2013-03-15 | 2014-09-18 | Interaxon Inc. | Wearable computing apparatus and method |
CN103211655B (zh) * | 2013-04-11 | 2016-03-09 | 深圳先进技术研究院 | 一种骨科手术导航系统及导航方法 |
US9280972B2 (en) * | 2013-05-10 | 2016-03-08 | Microsoft Technology Licensing, Llc | Speech to text conversion |
CN103336579A (zh) * | 2013-07-05 | 2013-10-02 | 百度在线网络技术(北京)有限公司 | 穿戴式设备的输入方法和穿戴式设备 |
CN103646587B (zh) * | 2013-12-05 | 2017-02-22 | 北京京东方光电科技有限公司 | 一种智能眼镜及其控制方法 |
CN106537233A (zh) * | 2014-04-22 | 2017-03-22 | 伊瓦·阿尔布佐夫 | 用于头戴式智能设备的热成像配件 |
CN105607253B (zh) * | 2014-11-17 | 2020-05-12 | 精工爱普生株式会社 | 头部佩戴型显示装置以及控制方法、显示系统 |
US9672760B1 (en) * | 2016-01-06 | 2017-06-06 | International Business Machines Corporation | Personalized EEG-based encryptor |
-
2013
- 2013-12-05 CN CN201310652206.8A patent/CN103646587B/zh active Active
-
2014
- 2014-06-30 WO PCT/CN2014/081282 patent/WO2015081694A1/zh active Application Filing
- 2014-06-30 US US14/417,440 patent/US20150379896A1/en not_active Abandoned
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5473705A (en) * | 1992-03-10 | 1995-12-05 | Hitachi, Ltd. | Sign language translation system and method that includes analysis of dependence relationships between successive words |
JP5193412B2 (ja) * | 2000-03-21 | 2013-05-08 | クアック.コム | インターネットに基づく情報への音声アクセスのためのシステム及び方法 |
US7023498B2 (en) * | 2001-11-19 | 2006-04-04 | Matsushita Electric Industrial Co. Ltd. | Remote-controlled apparatus, a remote control system, and a remote-controlled image-processing apparatus |
CN101498845A (zh) * | 2009-01-14 | 2009-08-05 | 长春大学 | 智能盲人导航眼镜 |
CN102236986A (zh) * | 2010-05-06 | 2011-11-09 | 鸿富锦精密工业(深圳)有限公司 | 手语翻译系统、手语翻译装置及手语翻译方法 |
US20130110508A1 (en) * | 2011-10-26 | 2013-05-02 | Samsung Electronics Co., Ltd. | Electronic device and control method thereof |
CN102872589A (zh) * | 2012-07-20 | 2013-01-16 | 友达光电股份有限公司 | 影像显示的控制方法以及显示系统 |
CN103310683A (zh) * | 2013-05-06 | 2013-09-18 | 深圳先进技术研究院 | 智能眼镜及基于智能眼镜的语音交流系统及方法 |
Cited By (43)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015081694A1 (zh) * | 2013-12-05 | 2015-06-11 | 京东方科技集团股份有限公司 | 智能眼镜及其控制方法 |
CN104951259A (zh) * | 2014-03-28 | 2015-09-30 | 索尼公司 | 显示设备及其显示控制方法 |
CN104951259B (zh) * | 2014-03-28 | 2019-10-18 | 索尼公司 | 显示设备及其显示控制方法 |
CN104065388A (zh) * | 2014-07-09 | 2014-09-24 | 李永飞 | 人脑电台 |
CN104375641A (zh) * | 2014-10-27 | 2015-02-25 | 联想(北京)有限公司 | 一种控制方法及电子设备 |
CN104375641B (zh) * | 2014-10-27 | 2017-12-26 | 联想(北京)有限公司 | 一种控制方法及电子设备 |
TWI563500B (zh) * | 2014-12-26 | 2016-12-21 | ||
CN106302974A (zh) * | 2015-06-12 | 2017-01-04 | 联想(北京)有限公司 | 一种信息处理的方法及电子设备 |
CN106302974B (zh) * | 2015-06-12 | 2020-01-31 | 联想(北京)有限公司 | 一种信息处理的方法及电子设备 |
CN104966433A (zh) * | 2015-07-17 | 2015-10-07 | 江西洪都航空工业集团有限责任公司 | 一种辅助聋哑人对话的智能眼镜 |
CN106407641A (zh) * | 2015-07-29 | 2017-02-15 | 西门子保健有限责任公司 | 在医学网络与使用者之间通信的方法和移动式数据眼镜 |
CN105137601B (zh) * | 2015-10-16 | 2017-11-14 | 上海斐讯数据通信技术有限公司 | 一种智能眼镜 |
CN105137601A (zh) * | 2015-10-16 | 2015-12-09 | 上海斐讯数据通信技术有限公司 | 一种智能眼镜 |
CN105468140A (zh) * | 2015-11-05 | 2016-04-06 | 京东方科技集团股份有限公司 | 佩戴设备、应用设备系统 |
US10317987B2 (en) | 2015-11-05 | 2019-06-11 | Boe Technology Group Co., Ltd. | Wearable device and application system |
WO2017076076A1 (zh) * | 2015-11-05 | 2017-05-11 | 京东方科技集团股份有限公司 | 佩戴设备、应用设备系统 |
CN106157750A (zh) * | 2016-08-24 | 2016-11-23 | 深圳市铁格龙科技有限公司 | 一种智能聋哑人发音及交流学习眼镜 |
CN106205293A (zh) * | 2016-09-30 | 2016-12-07 | 广州音书科技有限公司 | 用于语音识别和手语识别的智能眼镜 |
CN106601075A (zh) * | 2017-02-05 | 2017-04-26 | 苏州路之遥科技股份有限公司 | 脑电波输入训练器 |
US10854110B2 (en) | 2017-03-03 | 2020-12-01 | Microsoft Technology Licensing, Llc | Automated real time interpreter service |
CN109425983A (zh) * | 2017-08-27 | 2019-03-05 | 南京乐朋电子科技有限公司 | 一种脑电波成像投影眼镜 |
CN108106665A (zh) * | 2017-12-12 | 2018-06-01 | 深圳分云智能科技有限公司 | 一种具有玻璃监测功能的智能穿戴设备 |
CN110111651A (zh) * | 2018-02-01 | 2019-08-09 | 周玮 | 基于体态感知的智能语言交互系统 |
CN108509034A (zh) * | 2018-03-16 | 2018-09-07 | 广东欧珀移动通信有限公司 | 电子装置、信息处理方法及相关产品 |
CN108509034B (zh) * | 2018-03-16 | 2021-05-11 | Oppo广东移动通信有限公司 | 电子装置、信息处理方法及相关产品 |
CN111954290A (zh) * | 2018-03-30 | 2020-11-17 | Oppo广东移动通信有限公司 | 电子装置、功率调整方法及相关产品 |
CN108711425A (zh) * | 2018-05-03 | 2018-10-26 | 华南理工大学 | 一种基于语音控制的视频输入听觉显示导盲装置及方法 |
CN108803871A (zh) * | 2018-05-07 | 2018-11-13 | 歌尔科技有限公司 | 头戴显示设备中数据内容的输出方法、装置及头戴显示设备 |
CN110058413A (zh) * | 2018-05-23 | 2019-07-26 | 王小峰 | 一种智能穿戴系统 |
CN109255314A (zh) * | 2018-08-30 | 2019-01-22 | Oppo广东移动通信有限公司 | 信息提示方法、装置、智能眼镜及存储介质 |
CN113170266B (zh) * | 2018-10-04 | 2022-12-09 | 希雅株式会社 | 听觉辅助器件 |
US11405732B2 (en) | 2018-10-04 | 2022-08-02 | Cear, Inc. | Hearing assistance device |
CN113170266A (zh) * | 2018-10-04 | 2021-07-23 | 希雅株式会社 | 听觉辅助器件 |
CN110351631A (zh) * | 2019-07-11 | 2019-10-18 | 京东方科技集团股份有限公司 | 聋哑人交流设备及其使用方法 |
CN112506335A (zh) * | 2019-09-16 | 2021-03-16 | Oppo广东移动通信有限公司 | 头戴式设备及其控制方法、装置、系统和存储介质 |
CN111046854A (zh) * | 2020-01-10 | 2020-04-21 | 北京服装学院 | 一种脑电波外部识别方法、装置及系统 |
CN113194552A (zh) * | 2020-01-10 | 2021-07-30 | 株式会社村田制作所 | 通信终端装置和通信系统 |
CN111046854B (zh) * | 2020-01-10 | 2024-01-26 | 北京服装学院 | 一种脑电波外部识别方法、装置及系统 |
CN111258088A (zh) * | 2020-02-25 | 2020-06-09 | 厦门明睐科技有限公司 | 一种脑电波控制的智能眼镜设备及使用方法 |
CN111751995A (zh) * | 2020-06-11 | 2020-10-09 | 重庆工业职业技术学院 | 一种声音视觉化的单目头戴式ar眼镜装置及其实现方法 |
CN111787264A (zh) * | 2020-07-21 | 2020-10-16 | 北京字节跳动网络技术有限公司 | 一种远程教学的提问方法、装置、提问终端和可读介质 |
WO2023001195A1 (zh) * | 2021-07-22 | 2023-01-26 | 所乐思(深圳)科技有限公司 | 智能眼镜及其控制方法和系统 |
CN115363601A (zh) * | 2021-08-28 | 2022-11-22 | 淮阴工学院 | 一种辅助听说的智能眉勒及其使用方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2015081694A1 (zh) | 2015-06-11 |
US20150379896A1 (en) | 2015-12-31 |
CN103646587B (zh) | 2017-02-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103646587A (zh) | 一种智能眼镜及其控制方法 | |
Hu et al. | An overview of assistive devices for blind and visually impaired people | |
Zafar et al. | Assistive devices analysis for visually impaired persons: A review on taxonomy | |
US9101459B2 (en) | Apparatus and method for hierarchical object identification using a camera on glasses | |
CN106471435B (zh) | 检测可穿戴装置的状态 | |
CN104983511A (zh) | 针对全盲视觉障碍者的语音帮助智能眼镜系统 | |
CN104473717A (zh) | 针对全盲人群的可穿戴式引导设备 | |
EP3286619B1 (en) | A scene image analysis module | |
US10062302B2 (en) | Vision-assist systems for orientation and mobility training | |
Sharma et al. | International journal of engineering sciences & research technology a review on obstacle detection and vision | |
Rao et al. | A Google glass based real-time scene analysis for the visually impaired | |
CN113835519A (zh) | 增强现实系统 | |
Sedighi et al. | An RFID-based assistive glove to help the visually impaired | |
CN113516143A (zh) | 文本图像匹配方法、装置、计算机设备及存储介质 | |
CN109558895A (zh) | 一种基于智能感知的校园管理方法、系统及介质 | |
Bala et al. | Design, development and performance analysis of cognitive assisting aid with multi sensor fused navigation for visually impaired people | |
Chen et al. | Lisee: A headphone that provides all-day assistance for blind and low-vision users to reach surrounding objects | |
Niveditha et al. | Virtual eye for blind using IoT | |
Scalvini et al. | Visual-auditory substitution device for indoor navigation based on fast visual marker detection | |
CN111611812A (zh) | 翻译成盲文 | |
Souza et al. | Intelligent environments and assistive technologies for assisting visually impaired people: a systematic literature review | |
CN114281937A (zh) | 嵌套实体识别模型的训练方法、嵌套实体识别方法及装置 | |
Saha et al. | Vision maker: An audio visual and navigation aid for visually impaired person | |
KR20150140049A (ko) | 웨어러블 디바이스 | |
TWI842504B (zh) | 混合實境深度感知系統、混合實境環境感知方法及混合實境虛擬繪圖方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |