CN112472538A - 人工智能导盲行走机器人 - Google Patents
人工智能导盲行走机器人 Download PDFInfo
- Publication number
- CN112472538A CN112472538A CN202011390543.0A CN202011390543A CN112472538A CN 112472538 A CN112472538 A CN 112472538A CN 202011390543 A CN202011390543 A CN 202011390543A CN 112472538 A CN112472538 A CN 112472538A
- Authority
- CN
- China
- Prior art keywords
- module
- information
- walking robot
- feedback
- artificial intelligence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013473 artificial intelligence Methods 0.000 title claims description 33
- 238000001514 detection method Methods 0.000 claims abstract description 59
- 230000003993 interaction Effects 0.000 claims abstract description 52
- 230000008713 feedback mechanism Effects 0.000 claims abstract description 28
- 238000000605 extraction Methods 0.000 claims abstract description 12
- 230000007246 mechanism Effects 0.000 claims abstract description 12
- 230000002452 interceptive effect Effects 0.000 claims description 21
- 230000036760 body temperature Effects 0.000 claims description 11
- 230000001133 acceleration Effects 0.000 claims description 8
- 238000013459 approach Methods 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 3
- 230000004044 response Effects 0.000 claims description 2
- 241000282414 Homo sapiens Species 0.000 description 10
- 238000013461 design Methods 0.000 description 9
- 238000009434 installation Methods 0.000 description 4
- 210000000056 organ Anatomy 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 206010047571 Visual impairment Diseases 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000000034 method Methods 0.000 description 2
- 208000029257 vision disease Diseases 0.000 description 2
- 230000004393 visual impairment Effects 0.000 description 2
- 230000002618 waking effect Effects 0.000 description 2
- 241001166076 Diapheromera femorata Species 0.000 description 1
- 241000282412 Homo Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000011426 transformation method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H3/00—Appliances for aiding patients or disabled persons to walk about
- A61H3/06—Walking aids for blind persons
- A61H3/061—Walking aids for blind persons with electronic detecting or guiding means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H3/00—Appliances for aiding patients or disabled persons to walk about
- A61H3/06—Walking aids for blind persons
- A61H3/068—Sticks for blind persons
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
- G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/42—Determining position
- G01S19/48—Determining position by combining or switching between position solutions derived from the satellite radio beacon positioning system and position solutions derived from a further system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
- A61H2201/50—Control means thereof
- A61H2201/5007—Control means thereof computer controlled
- A61H2201/501—Control means thereof computer controlled connected to external computer devices or networks
- A61H2201/5012—Control means thereof computer controlled connected to external computer devices or networks using the internet
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
- A61H2201/50—Control means thereof
- A61H2201/5023—Interfaces to the user
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
- A61H2201/50—Control means thereof
- A61H2201/5023—Interfaces to the user
- A61H2201/5048—Audio interfaces, e.g. voice or music controlled
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/225—Feedback of the input speech
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Life Sciences & Earth Sciences (AREA)
- Veterinary Medicine (AREA)
- Computer Security & Cryptography (AREA)
- Public Health (AREA)
- Animal Behavior & Ethology (AREA)
- Rehabilitation Therapy (AREA)
- Epidemiology (AREA)
- Pain & Pain Management (AREA)
- Physical Education & Sports Medicine (AREA)
- Acoustics & Sound (AREA)
- Computer Hardware Design (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Networks & Wireless Communication (AREA)
- Manipulator (AREA)
Abstract
本发明涉及机器人技术领域，公开了人工智能导盲行走机器人，包括升降支撑杆以及设置在升降支撑杆上的驱动装置、跟踪装置、探测装置、互动装置和控制器；驱动装置包括电动万向轮和电动升缩杆；跟踪装置包括摄像模块、温度检测模块、人脸检测模块、特征提取模块、身份信息库和识别模块；探测装置包括避障模块、震动模块、导航模块和语音提醒模块；互动装置包括获取机构和反馈机构，获取机构包括获取模块、比较模块和唤醒模块，反馈机构包括括分析模块、查询模块、存储模块、反馈模块和求助模块。采用本发明具有能够实现实时跟踪和探测及导航路径，还能实现互动，功能多样化，趣味性强，安全系数高。
Description
技术领域
本发明涉及机器人技术领域，特别是涉及人工智能导盲行走机器人。
背景技术
拐杖指一种辅助行走的简单器械，通常是一根木制或金属棍子，但是，简单的拐杖远远不能够满足一些特殊人群的使用，例如对于有视力障碍的人群。
视力障碍是一种对人类生活质量影响很严重的疾病。视障的朋友长期处于黑暗的世界中，缺乏视觉影像的帮助，使他们的出行安全及日常生活，危险性比一般人高出数百倍。在日常的生活中，盲人出行一般通过随身携带的导盲杖来获得帮助，导盲杖作为拐杖的一种类型，功能单一，智能性差，对盲人的帮助有限，且不能满足盲人的需求。
随着科学技术的不断进步和机器人技术的不断发展，智能机器人已逐渐走入千家万户，市场上也出现了不少智能机器人给人们的生活带来便利和乐趣。因此，有必要研究一款功能多样且智能的人工智能导盲行走机器人。
发明内容
本发明所要解决的问题在于，提供人工智能导盲行走机器人，能够实现实时跟踪和探测及导航路径，还能实现互动，功能多样化，趣味性强，安全系数高。
为了解决上述技术问题，本发明提供了人工智能导盲行走机器人，包括升降支撑杆以及设置在所述升降支撑杆上的驱动装置、跟踪装置、探测装置、互动装置和控制器，所述控制器分别与所述驱动装置、所述跟踪装置、所述探测装置和所述互动装置电连接，所述控制器与外部设备无线连接；
所述驱动装置设置在所述升降支撑杆的底端并驱动所述升降支撑杆移动，所述驱动装置包括多个电动万向轮；
所述跟踪装置包括摄像模块、温度检测模块、人脸检测模块、特征提取模块、身份信息库和识别模块，所述摄像模块设有多个并能摄影360°范围的影像，所述摄像模块采集目标的脸部图像信息、目标的位置信息，所述温度检测模块采集目标的体温信息，所述摄像模块和所述温度检测模块分别将所述脸部图像信息、位置信息、体温信息传送至所述人脸检测模块，所述人脸检测模块判断被测目标是否为活的人脸，当检测结果非活的人脸时，将该结果信息传送至控制器，控制所述驱动装置移动机器人避开当前目标，当检测结果为活的人脸时，将该结果信息传送至所述特征提取模块，所述特征提取模块提取目标的特征信息并将所述特征信息传送至所述识别模块，所述识别模块将目标的特征信息与所述身份信息库中的特征信息进行对比识别，当识别结果为身份信息库中预定的目标人脸时，机器人进行人机交互，当识别结果非份信息库中预定的目标人脸时，将该结果信息传送至控制器，控制所述驱动装置移动机器人避开当前目标；具体的，所述温度检测模块为红外温度传感器，所述摄像模块为深度摄像头。
所述探测装置包括避障模块、震动模块、导航模块和语音提醒模块；
所述避障模块用于识别使用者的前进路线上的障碍物，当使用者靠近障碍物时，避障模块传输数据至控制器，控制器控制震动模块启动以提醒使用者前方存在障碍物；所述导航模块用于根据所述人工智能导盲行走机器人当前位置以及所述目的地的位置，结合电子地图，生成所述人工智能导盲行走机器人移动到目的地的最佳行进路径；所述语音提醒模块用于根据摄像模块所摄影得的图像和避障模块的信息，通过播放语音来告知使用者周围环境的路况，以及，根据导航模块的路线信息，通过播放语音来告知使用者到达目的地途中的行走方向及距离；
所述互动装置包括获取机构和反馈机构，所述获取机构用于响应语音互动请求，获取被使用者输入的互动请求信息，所述反馈机构用于根据所述互动请求信息，生成及播放反馈信息；
所述获取机构包括获取模块、比较模块和唤醒模块，所述获取模块用于响应语音互动请求，获取被使用者输入的唤醒指令信息，以及当唤醒语音互动功能后，获取被使用者输入的互动请求信息；所述比较模块用于比较所述获取的唤醒指令信息和存储的唤醒指令信息是否匹配；所述唤醒模块用于当获取与存储的唤醒指令信息匹配时，播放存储的唤醒反馈信息，及唤醒语音互动功能；
所述反馈机构包括括分析模块、查询模块、存储模块、反馈模块和求助模块；所述分析模块用于转换所述互动请求信息为文字信息，及从所述文字信息中获取所述互动请求信息的关键词；所述查询模块用于查询所述存储模块是否存储有所述关键词匹配的答复信息；所述反馈模块用于当存储有与所述互动请求信息匹配的答复信息时，生成及播放所述反馈信息；所述求助模块用于当没有与所述互动请求信息匹配的答复信息时，发送所述互动请求信息至监护人端，及接收来自监护人端的反馈信息，播放所述反馈信息。
作为本发明优选的方案，调整摄像模块拍照角度，使得目标人脸显示在摄像模块所获取的摄影图像的中心位置；在所述摄像模块拍照的同时，利用温度检测模块获取目标的温度。
作为本发明优选的方案，所述摄像模块通过控制器与外部设备连接，并能将录像影响储存在外部设备上。
作为本发明优选的方案，所述跟踪装置还包括GPS定位模块，所述GPS定位模块用于检测人工智能导盲行走机器人的位置，便于监护人得知所述人工智能导盲行走机器人的位置。
作为本发明优选的方案，所述反馈机构还包括检索模块，所述检索模块用于当没有与所述互动请求信息匹配的答复信息时，通过网络检索服务器端是否存在与所述关键词匹配的答复信息。
作为本发明优选的方案，所述反馈机构还包括点播模块，用于响应资源点播指令，播放存储的与所述互动请求信息相关的视听资源。
作为本发明优选的方案，所述反馈机构还包括判断模块和询问模块，所述判断模块用于根据摄像模块所摄影的图像信息，判断可以向哪一监护人求助，获取可以求助的监护人信息；所述询问模块用于呼叫所述可以求助的监护人，接收及播放来自该监护人端的互动信息。
作为本发明优选的方案，所述反馈机构还包括加速度检测模块和报警模块；所述加速度检测模块用于检测人工智能导盲行走机器人是否突然倒下，判断使用者是否摔倒，若判断出使用者摔倒，则传输数据至报警模块并报警；所述报警模块用于根据所述摔倒检测模块的信息以及报警按钮的开启，结合GPS定位模块的定位信息，发送报警信息报警中心。
作为本发明优选的方案，所述反馈机构连接有天气预报系统、家电控制系统和外卖系统。
作为本发明优选的方案，所述升降支撑杆的底端设有防滑底座。
实施本发明的人工智能导盲行走机器人，与现有技术相比较，具有如下有益效果：
本发明通过驱动装置的设计，当人工智能导盲行走机器人作为拐杖支撑时，电动升缩杆驱动电动万向轮收纳，当人工智能导盲行走机器人需跟随使用者时，电动升缩杆驱动电动万向轮伸出，电动万向轮驱动升降支撑杆移动及360°转动；通过跟踪装置的设计，利用摄像模块和温度检测模块的结合，采用人脸图像信息和体温信息共同作为检测判断人脸的信息，对目标人物进行识别，并通过控制驱动装置来实现实时跟踪；通过探测装置的设计，使用者能够根据震动和语音轻松得知周边环境的路况以及导航路线，即使是盲人也能全面得知周边路况和可能存在的危险，安全性高；通过互动装置的设计，使用者能够与人工智能导盲行走机器人进行语音互动，互动装置能解答或完成使用者的简单指令，实用性强，提高趣味性。可见，本发明能够实现实时跟踪和探测及导航路径，还能实现互动，功能多样化，趣味性强，安全系数高。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例的附图作简单地介绍。
图1是本发明提供的人工智能导盲行走机器人的结构框图。
图中：1、驱动装置，2、跟踪装置，3、探测装置，4、互动装置，41、获取机构，42、反馈机构，5、控制器，6、外部设备，7、天气预报系统，8、家电控制系统，9、外卖系统。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本发明的描述中，应当理解的是，本发明中采用术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。
参见图1所示，本发明的优选实施例，人工智能导盲行走机器人，包括升降支撑杆以及设置在所述升降支撑杆上的驱动装置1、跟踪装置2、探测装置3、互动装置4和控制器5，所述控制器5分别与所述驱动装置1、所述跟踪装置2、所述探测装置3和所述互动装置4电连接，所述控制器5与外部设备6无线连接。
所述驱动装置1设置在所述升降支撑杆的底端并驱动所述升降支撑杆移动，所述驱动装置1包括多个电动万向轮。
所述跟踪装置2包括摄像模块、温度检测模块、人脸检测模块、特征提取模块、身份信息库和识别模块，所述摄像模块设有多个并能摄影360°范围的影像，所述摄像模块采集目标的脸部图像信息、目标的位置信息，所述温度检测模块采集目标的体温信息，所述摄像模块和所述温度检测模块分别将所述脸部图像信息、位置信息、体温信息传送至所述人脸检测模块，所述人脸检测模块判断被测目标是否为活的人脸，当检测结果非活的人脸时，将该结果信息传送至控制器5，控制所述驱动装置1移动机器人避开当前目标，当检测结果为活的人脸时，将该结果信息传送至所述特征提取模块，所述特征提取模块提取目标的特征信息并将所述特征信息传送至所述识别模块，所述识别模块将目标的特征信息与所述身份信息库中的特征信息进行对比识别，当识别结果为身份信息库中预定的目标人脸时，机器人进行人机交互，当识别结果非份信息库中预定的目标人脸时，将该结果信息传送至控制器5，控制所述驱动装置1移动机器人避开当前目标。
其中，跟踪装置2使用时，包括以下步骤：使用者向机器人发出跟踪指令，要求机器人与身份信息库中一预定人脸进行交互；跟踪装置2寻找目标，利用摄像模块拍照采集目标的脸部图像信息、距离信息；同时利用温度检测模块采集目标的体温信息；将脸部图像信息、距离信息以及体温信息传送至人脸检测模块，判断被检测目标是否为人脸以及是否为活动生命体，当被检测目标为非人脸或非活的生命体时，启动驱动驱动装置1进行移动人工智能导盲行走机器人，以避开被测目标；当被检测目标为活的人脸时，继续执行后续动作；经过人脸检测模块检测后，将活的人脸信息传送到特征提取模块，提取特征信息；将所提取的特征信息传送到识别模块，使其与身份信息库中的信息进行对比，从而识别目标是否为所述身份信息库中的预定人脸，当确认不是预定人脸时，启动驱动驱动装置1进行移动人工智能导盲行走机器人，以避开被测目标；当确认是预定人脸时，进行交互活动；将目标被确认是预定人脸后，将目标的距离信息传送至驱动驱动装置1，利用驱动驱动装置1调整机器人的移动，使得摄像模块和温度检测模块和目标的距离保持在合适的距离范围，确保机器人与目标的交互过程正常进行。
所述探测装置3包括避障模块、震动模块、导航模块和语音提醒模块；所述避障模块用于识别使用者的前进路线上的障碍物，当使用者靠近障碍物时，避障模块传输数据至控制器5，控制器5控制震动模块启动以提醒使用者前方存在障碍物；所述导航模块用于根据所述人工智能导盲行走机器人当前位置以及所述目的地的位置，结合电子地图，生成所述人工智能导盲行走机器人移动到目的地的最佳行进路径；所述语音提醒模块用于根据摄像模块所摄影得的图像和避障模块的信息，通过播放语音来告知使用者周围环境的路况，以及，根据导航模块的路线信息，通过播放语音来告知使用者到达目的地途中的行走方向及距离；具体的，所述避障模块为避障传感器，所述震动模块为震动器。
所述互动装置4包括获取机构41和反馈机构42，所述获取机构41用于响应语音互动请求，获取被使用者输入的互动请求信息，所述反馈机构42用于根据所述互动请求信息，生成及播放反馈信息；所述获取机构41包括获取模块、比较模块和唤醒模块，所述获取模块用于响应语音互动请求，获取被使用者输入的唤醒指令信息，以及当唤醒语音互动功能后，获取被使用者输入的互动请求信息；所述比较模块用于比较所述获取的唤醒指令信息和存储的唤醒指令信息是否匹配；所述唤醒模块用于当获取与存储的唤醒指令信息匹配时，播放存储的唤醒反馈信息，及唤醒语音互动功能；所述反馈机构42包括括分析模块、查询模块、存储模块、反馈模块和求助模块；所述分析模块用于转换所述互动请求信息为文字信息，及从所述文字信息中获取所述互动请求信息的关键词；所述查询模块用于查询所述存储模块是否存储有所述关键词匹配的答复信息；所述反馈模块用于当存储有与所述互动请求信息匹配的答复信息时，生成及播放所述反馈信息；所述求助模块用于当没有与所述互动请求信息匹配的答复信息时，发送所述互动请求信息至监护人端，及接收来自监护人端的反馈信息，播放所述反馈信息。
本发明通过驱动装置1驱动升降支撑杆移动及360°转动；通过跟踪装置2的设计，利用摄像模块和温度检测模块的结合，采用人脸图像信息和体温信息共同作为检测判断人脸的信息，对目标人物进行识别，并通过控制驱动装置1来实现实时跟踪；通过探测装置3的设计，使用者能够根据震动和语音轻松得知周边环境的路况以及导航路线，即使是盲人也能全面得知周边路况和可能存在的危险，安全性高；通过互动装置4的设计，使用者能够与人工智能导盲行走机器人进行语音互动，互动装置4能解答或完成使用者的简单指令，实用性强，提高趣味性。可见，本发明能够实现实时跟踪和探测及导航路径，还能实现互动，功能多样化，趣味性强，安全系数高。
示例性的，为了更准确地跟踪并识别目标人物以及探测路况，调整摄像模块拍照角度，使得目标人脸显示在摄像模块所获取的摄影图像的中心位置；在所述摄像模块拍照的同时，利用温度检测模块获取目标的温度。
其中，D代表摄像模块获取的处于图像中心的目标的距离，T＿d代表经距离修正的人脸表面温度，当T＿d，T以及D满足表达式T＿d＝f(T，D)，Tmin为最小温度值，Tmax为最大温度值，当Tmin＜T＿d＜Tmax时，检测目标为活的人脸。
所述特征提取模块提取的特征包括人脸图像特征和人体温度特征。人脸图像特征通常分为几何特征、代数特征等。几何特征是以人脸器官的形状和几何关系为基础的特征，包括几何特征曲率和面部几何特征点。几何特征曲率是指人脸的轮廓线曲率。面部几何特征点包括眼睛、鼻子、嘴、下巴等各个器官，以及它们之间的相对位置和距离。这些特征具有位置、视点、大小等不变性。要求选取几何特征具有一定的独特性，能够反映不同人脸之间的差别，同时又具有一定的弹性以消除时间跨度、光照等因素的影响。代数特征是将人脸图像用特定的变换方法投影在降维子空间，形成人脸的代数特征。如经过奇异值变换得到奇异值特征、经过K－L变换得到特征脸特征、小波变换得到的小波特征等。
示例性的，所述摄像模块通过控制器5与外部设备6连接，并能将录像影响储存在外部设备6上，由此，能够从外部设备6翻看使用者的行走路况，若发生意外也能有踪迹可寻。
示例性的，所述跟踪装置2还包括GPS定位模块，所述GPS定位模块用于检测人工智能导盲行走机器人的位置，便于监护人得知所述人工智能导盲行走机器人的位置。由此，若找不到人工智能导盲行走机器人时，也能通过GPS定位模块来找回人工智能导盲行走机器人，还有，若监护人找不到使用者时，监护人能够根据人工智能导盲行走机器人的位置来得知使用者的位置，提高安全系数。
示例性的，所述反馈机构42还包括检索模块，所述检索模块用于当没有与所述互动请求信息匹配的答复信息时，通过网络检索服务器端是否存在与所述关键词匹配的答复信息；所述反馈机构42还包括点播模块，用于响应资源点播指令，播放存储的与所述互动请求信息相关的视听资源。由此，提高了反馈机构42的功能多样性，使人工智能导盲行走机器人更加智能，实用性和趣味性高。
示例性的，所述反馈机构42还包括判断模块和询问模块，所述判断模块用于根据摄像模块所摄影的图像信息，判断可以向哪一监护人求助，获取可以求助的监护人信息；所述询问模块用于呼叫所述可以求助的监护人，接收及播放来自该监护人端的互动信息。这样的设计，当使用者需要求助时，人工智能导盲行走机器人能够帮助使用者互换可以求助的监护人，特别针对盲人，盲人看不到身边的监护人是谁时，人工智能导盲行走机器人能够帮助盲人求助。
示例性的，所述反馈机构42还包括加速度检测模块和报警模块；所述加速度检测模块用于检测人工智能导盲行走机器人是否突然倒下，判断使用者是否摔倒，若判断出使用者摔倒，则传输数据至报警模块并报警；所述报警模块用于根据所述摔倒检测模块的信息以及报警按钮的开启，结合GPS定位模块的定位信息，发送报警信息报警中心。具体的，所述加速度检测模块为加速度传感器。这样的设计，人工智能导盲行走机器人能够在使用者摔倒时及时报警救助，当使用者自主觉得主要救助时也能通过报警模块进行报警，适合独居老人或行动不便者，安全系数高。
示例性的，所述反馈机构42连接有天气预报系统7、家电控制系统8和外卖系统9，由此，使用者能够通过人工智能导盲行走机器人得知天气情况、控制家电和使用外卖系统9，实用性强。
示例性的，为了使用者能更稳定地使用人工智能导盲行走机器人支撑，防止人工智能导盲行走机器人发生打滑，所述升降支撑杆的底端设有防滑底座。
在本发明的描述中，应当理解的是，除非另有明确的规定和限定，本发明中采用术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。
以上所揭露的仅为本发明的较佳实施例而已，当然不能以此来限定本发明之权利范围，因此依本发明申请专利范围所作的等同变化，仍属本发明所涵盖的范围。
Claims (10)
1.人工智能导盲行走机器人，其特征在于，包括升降支撑杆以及设置在所述升降支撑杆上的驱动装置、跟踪装置、探测装置、互动装置和控制器，所述控制器分别与所述驱动装置、所述跟踪装置、所述探测装置和所述互动装置电连接，所述控制器与外部设备无线连接；
所述驱动装置设置在所述升降支撑杆的底端并驱动所述升降支撑杆移动，所述驱动装置包括多个电动万向轮；
所述跟踪装置包括摄像模块、温度检测模块、人脸检测模块、特征提取模块、身份信息库和识别模块，所述摄像模块设有多个并能摄影360°范围的影像，所述摄像模块采集目标的脸部图像信息、目标的位置信息，所述温度检测模块采集目标的体温信息，所述摄像模块和所述温度检测模块分别将所述脸部图像信息、位置信息、体温信息传送至所述人脸检测模块，所述人脸检测模块判断被测目标是否为活的人脸，当检测结果非活的人脸时，将该结果信息传送至控制器，控制所述驱动装置移动机器人避开当前目标，当检测结果为活的人脸时，将该结果信息传送至所述特征提取模块，所述特征提取模块提取目标的特征信息并将所述特征信息传送至所述识别模块，所述识别模块将目标的特征信息与所述身份信息库中的特征信息进行对比识别，当识别结果为身份信息库中预定的目标人脸时，机器人进行人机交互，当识别结果非份信息库中预定的目标人脸时，将该结果信息传送至控制器，控制所述驱动装置移动机器人避开当前目标；
所述探测装置包括避障模块、震动模块、导航模块和语音提醒模块；
所述避障模块用于识别使用者的前进路线上的障碍物，当使用者靠近障碍物时，避障模块传输数据至控制器，控制器控制震动模块启动以提醒使用者前方存在障碍物；所述导航模块用于根据所述人工智能导盲行走机器人当前位置以及所述目的地的位置，结合电子地图，生成所述人工智能导盲行走机器人移动到目的地的最佳行进路径；所述语音提醒模块用于根据摄像模块所摄影得的图像和避障模块的信息，通过播放语音来告知使用者周围环境的路况，以及，根据导航模块的路线信息，通过播放语音来告知使用者到达目的地途中的行走方向及距离；
所述互动装置包括获取机构和反馈机构，所述获取机构用于响应语音互动请求，获取被使用者输入的互动请求信息，所述反馈机构用于根据所述互动请求信息，生成及播放反馈信息；
所述获取机构包括获取模块、比较模块和唤醒模块，所述获取模块用于响应语音互动请求，获取被使用者输入的唤醒指令信息，以及当唤醒语音互动功能后，获取被使用者输入的互动请求信息；所述比较模块用于比较所述获取的唤醒指令信息和存储的唤醒指令信息是否匹配；所述唤醒模块用于当获取与存储的唤醒指令信息匹配时，播放存储的唤醒反馈信息，及唤醒语音互动功能；
所述反馈机构包括括分析模块、查询模块、存储模块、反馈模块和求助模块；所述分析模块用于转换所述互动请求信息为文字信息，及从所述文字信息中获取所述互动请求信息的关键词；所述查询模块用于查询所述存储模块是否存储有所述关键词匹配的答复信息；所述反馈模块用于当存储有与所述互动请求信息匹配的答复信息时，生成及播放所述反馈信息；所述求助模块用于当没有与所述互动请求信息匹配的答复信息时，发送所述互动请求信息至监护人端，及接收来自监护人端的反馈信息，播放所述反馈信息。
2.根据权利要求1所述的人工智能导盲行走机器人，其特征在于，调整摄像模块拍照角度，使得目标人脸显示在摄像模块所获取的摄影图像的中心位置；在所述摄像模块拍照的同时，利用温度检测模块获取目标的温度。
3.根据权利要求1所述的人工智能导盲行走机器人，其特征在于，所述摄像模块通过控制器与外部设备连接，并能将录像影响储存在外部设备上。
4.根据权利要求1所述的人工智能导盲行走机器人，其特征在于，所述跟踪装置还包括GPS定位模块，所述GPS定位模块用于检测人工智能导盲行走机器人的位置，便于监护人得知所述人工智能导盲行走机器人的位置。
5.根据权利要求1所述的人工智能导盲行走机器人，其特征在于，所述反馈机构还包括检索模块，所述检索模块用于当没有与所述互动请求信息匹配的答复信息时，通过网络检索服务器端是否存在与所述关键词匹配的答复信息。
6.根据权利要求1所述的人工智能导盲行走机器人，其特征在于，所述反馈机构还包括点播模块，用于响应资源点播指令，播放存储的与所述互动请求信息相关的视听资源。
7.根据权利要求1所述的人工智能导盲行走机器人，其特征在于，所述反馈机构还包括判断模块和询问模块，所述判断模块用于根据摄像模块所摄影的图像信息，判断可以向哪一监护人求助，获取可以求助的监护人信息；所述询问模块用于呼叫所述可以求助的监护人，接收及播放来自该监护人端的互动信息。
8.根据权利要求4所述的人工智能导盲行走机器人，其特征在于，所述反馈机构还包括加速度检测模块和报警模块；所述加速度检测模块用于检测人工智能导盲行走机器人是否突然倒下，判断使用者是否摔倒，若判断出使用者摔倒，则传输数据至报警模块并报警；所述报警模块用于根据所述摔倒检测模块的信息以及报警按钮的开启，结合GPS定位模块的定位信息，发送报警信息报警中心。
9.根据权利要求1所述的人工智能导盲行走机器人，其特征在于，所述反馈机构连接有天气预报系统、家电控制系统和外卖系统。
10.根据权利要求1所述的人工智能导盲行走机器人，其特征在于，所述升降支撑杆的底端设有防滑底座。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011390543.0A CN112472538A (zh) | 2020-12-02 | 2020-12-02 | 人工智能导盲行走机器人 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011390543.0A CN112472538A (zh) | 2020-12-02 | 2020-12-02 | 人工智能导盲行走机器人 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112472538A true CN112472538A (zh) | 2021-03-12 |
Family
ID=74937998
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011390543.0A Pending CN112472538A (zh) | 2020-12-02 | 2020-12-02 | 人工智能导盲行走机器人 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112472538A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113021354A (zh) * | 2021-03-30 | 2021-06-25 | 宁波弘讯软件开发有限公司 | 一种机器人 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105182983A (zh) * | 2015-10-22 | 2015-12-23 | 深圳创想未来机器人有限公司 | 基于移动机器人的人脸实时跟踪方法和跟踪系统 |
| CN106313082A (zh) * | 2016-11-21 | 2017-01-11 | 深圳哈乐派科技有限公司 | 陪护机器人 |
| CN108578184A (zh) * | 2018-03-13 | 2018-09-28 | 许敖 | 一种多功能拐杖 |
| CN109646258A (zh) * | 2019-02-26 | 2019-04-19 | 西南科技大学 | 一种导盲杖、导盲系统及导盲方法 |
-
2020
- 2020-12-02 CN CN202011390543.0A patent/CN112472538A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105182983A (zh) * | 2015-10-22 | 2015-12-23 | 深圳创想未来机器人有限公司 | 基于移动机器人的人脸实时跟踪方法和跟踪系统 |
| CN106313082A (zh) * | 2016-11-21 | 2017-01-11 | 深圳哈乐派科技有限公司 | 陪护机器人 |
| CN108578184A (zh) * | 2018-03-13 | 2018-09-28 | 许敖 | 一种多功能拐杖 |
| CN109646258A (zh) * | 2019-02-26 | 2019-04-19 | 西南科技大学 | 一种导盲杖、导盲系统及导盲方法 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113021354A (zh) * | 2021-03-30 | 2021-06-25 | 宁波弘讯软件开发有限公司 | 一种机器人 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111035542A (zh) | 一种基于图像识别的智能导盲系统 | |
| US10024678B2 (en) | Wearable clip for providing social and environmental awareness | |
| US10024667B2 (en) | Wearable earpiece for providing social and environmental awareness | |
| US10024679B2 (en) | Smart necklace with stereo vision and onboard processing | |
| US20160078278A1 (en) | Wearable eyeglasses for providing social and environmental awareness | |
| EP3217370A1 (en) | Method and apparatus for early warning of danger | |
| WO2018121283A1 (zh) | 服务提供方法及装置、移动服务设备及存储介质 | |
| JP6844135B2 (ja) | 移動ロボットおよび移動制御システム | |
| WO2017154595A1 (ja) | 生体探索システム | |
| US10062302B2 (en) | Vision-assist systems for orientation and mobility training | |
| CN110522617A (zh) | 盲人智慧眼镜 | |
| JP6339445B2 (ja) | 人物識別装置 | |
| KR20150097043A (ko) | 스마트 안경 및 지팡이를 이용한 시각 장애인 보조 시스템 및 방법 | |
| JP2019215840A (ja) | 案内システム | |
| CN110803170B (zh) | 智能用户接口的驾驶辅助系统 | |
| US20240118709A1 (en) | Mobile robots and systems with mobile robots | |
| CN112472538A (zh) | 人工智能导盲行走机器人 | |
| CN112472533A (zh) | 一种人工智能拐杖行走机器人 | |
| CN109808711B (zh) | 自动驾驶车辆控制方法及系统、自动驾驶车辆及视觉假体 | |
| JP6500139B1 (ja) | 視覚支援装置 | |
| WO2019214165A1 (zh) | 一种用于盲人导航的智能飞行跟随器 | |
| CN107544535B (zh) | 一种飞行伞和控制方法 | |
| CN112163455B (zh) | 一种用于搜寻目标对象的方法及车云平台 | |
| CN113080550A (zh) | 用于识别障碍物的头巾及其识别障碍物的方法 | |
| CN112569092A (zh) | 一种5g盲人户外导盲设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210312 |