CN110236812A - 一种具有体征监测功能的多模态人机交互智能轮椅系统 - Google Patents
一种具有体征监测功能的多模态人机交互智能轮椅系统 Download PDFInfo
- Publication number
- CN110236812A CN110236812A CN201910641086.9A CN201910641086A CN110236812A CN 110236812 A CN110236812 A CN 110236812A CN 201910641086 A CN201910641086 A CN 201910641086A CN 110236812 A CN110236812 A CN 110236812A
- Authority
- CN
- China
- Prior art keywords
- module
- unit
- control
- wheelchair
- control module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 20
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 15
- 238000001514 detection method Methods 0.000 claims abstract description 80
- 238000004891 communication Methods 0.000 claims abstract description 59
- 230000003993 interaction Effects 0.000 claims abstract description 18
- 230000001133 acceleration Effects 0.000 claims abstract description 6
- 210000000707 wrist Anatomy 0.000 claims description 19
- 230000004888 barrier function Effects 0.000 claims description 7
- 238000012905 input function Methods 0.000 claims description 4
- 238000007689 inspection Methods 0.000 claims description 4
- 238000000926 separation method Methods 0.000 claims description 4
- 230000005540 biological transmission Effects 0.000 claims description 3
- 238000000465 moulding Methods 0.000 claims description 3
- 238000003756 stirring Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 abstract description 28
- 238000000034 method Methods 0.000 abstract description 3
- 238000005516 engineering process Methods 0.000 abstract description 2
- 230000004217 heart function Effects 0.000 abstract 1
- 230000033764 rhythmic process Effects 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 7
- 206010037714 Quadriplegia Diseases 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 208000017667 Chronic Disease Diseases 0.000 description 1
- 206010011878 Deafness Diseases 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 230000032683 aging Effects 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
- A61B5/02416—Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
- A61B5/6894—Wheel chairs
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G5/00—Chairs or personal conveyances specially adapted for patients or disabled persons, e.g. wheelchairs
- A61G5/04—Chairs or personal conveyances specially adapted for patients or disabled persons, e.g. wheelchairs motor-driven
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G5/00—Chairs or personal conveyances specially adapted for patients or disabled persons, e.g. wheelchairs
- A61G5/10—Parts, details or accessories
- A61G5/1051—Arrangements for steering
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01D—MEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
- G01D21/00—Measuring or testing not otherwise provided for
- G01D21/02—Measuring two or more variables by means not covered by a single other subclass
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G2203/00—General characteristics of devices
- A61G2203/10—General characteristics of devices characterised by specific control means, e.g. for adjustment or steering
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G2203/00—General characteristics of devices
- A61G2203/10—General characteristics of devices characterised by specific control means, e.g. for adjustment or steering
- A61G2203/12—Remote controls
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G2203/00—General characteristics of devices
- A61G2203/10—General characteristics of devices characterised by specific control means, e.g. for adjustment or steering
- A61G2203/18—General characteristics of devices characterised by specific control means, e.g. for adjustment or steering by patient's head, eyes, facial muscles or voice
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G2203/00—General characteristics of devices
- A61G2203/10—General characteristics of devices characterised by specific control means, e.g. for adjustment or steering
- A61G2203/20—Displays or monitors
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G2203/00—General characteristics of devices
- A61G2203/30—General characteristics of devices characterised by sensor means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G2203/00—General characteristics of devices
- A61G2203/30—General characteristics of devices characterised by sensor means
- A61G2203/40—General characteristics of devices characterised by sensor means for distance
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G2203/00—General characteristics of devices
- A61G2203/70—General characteristics of devices with special adaptations, e.g. for safety or comfort
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Animal Behavior & Ethology (AREA)
- General Physics & Mathematics (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Surgery (AREA)
- Molecular Biology (AREA)
- Medical Informatics (AREA)
- Heart & Thoracic Surgery (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Cardiology (AREA)
- Physiology (AREA)
- Rehabilitation Tools (AREA)
Abstract
本发明公开了一种具有体征监测功能的多模态人机交互智能轮椅系统,尤其是涉及人机交互技术和体征监测领域,多种交互方式供有不同需求的用户选用,同时具备心率监测功能。该智能轮椅主要包括机械结构部分、人机交互部分、核心控制部分、辅助功能部分和电机驱动部分。人机交互部分包含头动控制模块、手势控制模块、红外遥控模块、语音控制模块、摇杆控制模块和按键模块。辅助功能部分包括OLED显示模块、心率检测模块、翻倒检测模块、距离检测模块、蜂鸣器报警模块、无线通信模块和红外接收模块。本发明可通过多种人机交互方式实现控制轮椅的进退、左右转、加减速和停止等运动。配合辅助功能实现智能化控制,提升安全性。
Description
技术领域
本发明涉及一种具有体征监测功能的多模态人机交互智能轮椅系统,尤其是涉及基于多种人机交互方式和体征监测的一种多模态人机交互智能轮椅。
背景技术
随着人口老龄化、慢性疾病和意外伤害等因素的增长,越来越多的人陷入步行能力减弱甚至丧失的困境。我国还面临着较大的残疾人规模,且残疾人口数量逐年增加,致残原因呈现多样化和复杂化。
目前,国内智能轮椅研究大多停留在实验室研究阶段,市场上寥寥无几,也尚未形成产业化,而电动轮椅的人机交互功能单一,无法满足特殊人群的个性化需求,如四肢瘫痪等特殊人群需要头动控制或者语音控制等。且现有智能轮椅不具备体征监测功能,由于老年人和残疾人身体状况较弱,因此智能轮椅具有体征监测功能也至关重要,用户可以随时了解自己的身体状况,避免不能及时救治,造成严重后果。因此,开发出具有多种人机交互方式和体征监测功能的智能轮椅,惠及老年人和残疾人,将对提高他们的生活质量,增强其自理能力具有重要意义。
发明内容
本发明意在提供一种具有体征监测功能的多模态人机交互智能轮椅系统,以解决目前电动轮椅交互方式单一不能满足如四肢瘫痪等特殊人群需求和现有智能轮椅不具备体征监测功能的问题。
采用的技术方案为:该系统包括机械结构部分、人机交互部分、核心控制部分、辅助功能部分和电机驱动部分;所述人机交互部分包括:头动控制模块、手势控制模块、红外遥控模块、语音控制模块、摇杆控制模块和按键模块;所述辅助功能部分包括:OLED显示模块、心率检测模块、翻倒检测模块、距离检测模块、蜂鸣器报警模块、无线通信模块和红外接收模块;所述语音控制模块、摇杆控制模块、按键模块、OLED显示模块、心率检测模块、翻倒检测模块、距离检测模块、蜂鸣器报警模块、无线通信模块、红外接收模块和电机驱动部分分别与所述核心控制部分连接;
所述的头动控制模块固定在可松紧调节的发带上,可将发带佩戴于头部,此时头动控制模块固定在头部右耳侧上方;所述的头动控制模块包括:控制单元1、无线通信单元1、头动检测单元、LED指示单元1和电源单元1;头动控制模块中电源单元1分别连接LED指示单元1、头动检测单元、无线通信单元1和控制单元1,并给各单元供电;控制单元1分别连接LED指示单元1、头动检测单元和无线通信单元1;所述头动检测单元为由陀螺仪与加速计组合的六轴传感器,控制单元1从头动检测单元读取头部姿态数据来分析头动指令;LED指示单元1为RGB指示灯,可发出红、绿和蓝三种颜色光,每种颜色分别用来指示系统的不同状态,控制单元1控制LED的亮灭状态;无线通信单元1的核心为低功耗蓝牙芯片,可以与辅助功能部分的无线通信模块进行连接;
所述的手势控制模块固定在可松紧调节的护腕上,可将护腕佩戴于手腕处,手势控制模块放置在手腕上方;所述的手势控制模块包括:控制单元2、无线通信单元2、手势检测单元、LED指示单元2和电源单元2;手势控制模块中电源单元2分别连接LED指示单元2、手势检测单元、无线通信单元2和控制单元2,并给各单元供电;控制单元2分别连接LED指示单元2、手势检测单元和无线通信单元2;所述手势检测单元为由陀螺仪与加速计组合的六轴传感器,控制单元2从手势检测单元读取手势姿态数据来分析手势指令;LED指示单元2为RGB指示灯,可发出红、绿和蓝三种颜色光,每种颜色分别用来指示系统的不同状态,控制单元2控制LED的亮灭状态;无线通信单元2的核心为低功耗蓝牙芯片,可以与辅助功能部分的无线通信模块进行连接;
所述的红外遥控模块使用的是红外通信控制轮椅移动,在核心控制部分配置有红外接收模块,核心控制部分通过红外接收模块接收红外遥控模块的数据,通过红外遥控模块上的上下左右和停止按键来分别控制轮椅的进退、左右转和停止等动作;
所述的语音控制模块安装在轮椅右扶手表面处,用于对采集的语音进行语音指令识别并为核心控制部分提供控制信号;
所述的摇杆控制模块安装在轮椅右扶手表面处,摇杆控制模块可向前后左右拨动来控制轮椅的移动;
所述的按键模块安装在轮椅的左扶手表面处,作为人机交互的输入功能;
所述的OLED显示模块安装在轮椅的左扶手表面处,OLED显示模块用于显示轮椅的速度等级和心率检测模块检测到的用户心率等信息;
所述的心率检测模块为光学心率传感器,可通过手腕测量出人体心率特征参数,心率检测模块安装在轮椅的左扶手表面处,用户可通过按键模块来启动心率检测模块检测用户心率,将用户右手腕内侧放在心率检测模块表面,检测完成后OLED显示模块会显示心率信息;
所述的翻倒检测模块采用的是加速度传感器,安装在轮椅机械结构的支架上,可以检测轮椅是否发生翻倒;
所述的距离检测模块为超声波传感器,在轮椅前侧和后侧分别安装一个超声波传感器,用来检测轮椅前后距离障碍物的距离,为所述核心控制部分提供减速或停止信号;
所述的蜂鸣器报警模块安装在轮椅的右扶手底侧,用于提示用户轮椅翻倒、障碍物距离较近及用户检测心率时心率异常等警告信息;
所述的无线通信模块的核心为低功耗蓝牙芯片,无线通信模块可与头动控制模块的无线通信单元1和手势控制模块的无线通信单元2连接,进行数据的无线传输;
所述的红外接收模块安装在轮椅的右扶手表面处,核心控制部分通过红外接收模块接收红外遥控模块的数据。
本发明的有益效果为:
本发明提出一种具有体征监测功能的多模态人机交互智能轮椅系统,可以通过多种人机交互方式控制轮椅的进退、左右转、加减速和停止等运动,且多种人机交互方式可供有不同需求的用户选用,使用方便,如具备头动控制方式,给四肢瘫痪和聋哑人提供了使用轮椅的可能;本智能轮椅还加入体征监测、翻倒监测和距离监测等辅助功能,使用体征监测功能,用户可以随时检测自己的心率,了解自己的身体状况,避免不能及时救治,造成严重后果;通过翻倒监测和距离监测功能,可以检测到轮椅发生翻倒情况和轮椅前后障碍物的距离并通过蜂鸣器发出警报信息;且各部分采用模块化设计,用户可以根据需求定制选择,配合辅助功能实现智能化控制,提升安全性。
附图说明
图1为本发明的整体组成框图;
图2为本发明的详细组成框图;
图3为本发明的头动控制模块组成框图;
图4为本发明的手势控制模块组成框图;
图5为本发明的侧视图;
图6为本发明的俯视图。
具体实施方式
在下文中将结合附图对本发明的示范性实施例进行描述。为了清楚和简明起见,在说明书中并未描述实际实施方式的所有特征。然而,应该了解,在开发任何这种实际实施例的过程中必须做出很多特定于实施方式的决定,以便实现开发人员的具体目标,例如,符合与系统及业务相关的那些限制条件,并且这些限制条件可能会随着实施方式的不同而有所改变。
在此,还需要说明的一点是,为了避免因不必要的细节而模糊了本发明,在附图中仅仅示出了与根据本发明的方案密切相关的部分,而省略了与本发明关系不大的其他细节。
具体实施方式一
一种具有体征监测功能的多模态人机交互智能轮椅系统的组成框图如图1和如图2所示,该系统包括机械结构部分(1)、人机交互部分(2)、核心控制部分(3)、辅助功能部分(4)电机驱动部分(5);所述人机交互部分包括:头动控制模块(2-1)、手势控制模块(2-2)、红外遥控模块(2-3)、语音控制模块(2-4)、摇杆控制模块(2-5)和按键模块(2-6);所述辅助功能部分包括:OLED显示模块(4-1)、心率检测模块(4-2)、翻倒检测模块(4-3)、距离检测模块(4-4)、蜂鸣器报警模块(4-5)、无线通信模块(4-6)和红外接收模块(4-7);所述语音控制模块(2-4)、摇杆控制模块(2-5)、按键模块(2-6)、OLED显示模块(4-1)、心率检测模块(4-2)、翻倒检测模块(4-3)、距离检测模块(4-4)、蜂鸣器报警模块(4-5)、无线通信模块(4-6)、红外接收模块(4-7)和电机驱动部分(5)分别与所述核心控制部分(3)连接。
所述的红外遥控模块(2-3)使用的是红外通信控制轮椅移动,在核心控制部分(3)配置有红外接收模块(4-7),核心控制部分(3)通过红外接收模块(4-7)接收红外遥控模块(2-3)的数据,通过红外遥控模块(2-3)上的上下左右和停止按键来分别控制轮椅的进退、左右转和停止等动作。
所述的语音控制模块(2-4)用于对采集的语音进行语音指令识别并为核心控制部分(3)提供控制信号。
所述的摇杆控制模块(2-5)可向前后左右拨动来控制轮椅的移动。
所述的按键模块(2-6)作为人机交互的输入功能。
所述的OLED显示模块(4-1)用于显示轮椅的速度等级和心率检测模块检测到的用户心率等信息。
所述的心率检测模块(4-2)为光学心率传感器,可通过手腕测量出人体心率特征参数,用户可通过按键模块(2-6)来启动心率检测模块(4-2)检测用户心率,将用户右手腕内侧放在心率检测模块(4-2)表面,检测完成后OLED显示模块(4-1)会显示心率信息。
所述的翻倒检测模块(4-3)采用的是加速度传感器,可以检测轮椅是否发生翻倒。
所述的距离检测模块(4-4)为超声波传感器,用来检测轮椅前后距离障碍物的距离,为所述核心控制部分(3)提供减速或停止信号。
所述的蜂鸣器报警模块(4-5)用于提示用户轮椅翻倒、障碍物距离较近及用户检测心率时心率异常等警告信息。
所述的无线通信模块(4-6)的核心为低功耗蓝牙芯片,无线通信模块(4-6)可与头动控制模块(2-1)的无线通信单元1和手势控制模块(2-2)的无线通信单元2连接,进行数据的无线传输。
所述的红外接收模块(4-7)连接核心控制部分(3),核心控制部分(3)通过红外接收模块(4-7)接收红外遥控模块(2-3)的数据。
具体实施方式二
一种具有体征监测功能的多模态人机交互智能轮椅系统的头动控制模块(2-1)组成框图如图3所示,所述的头动控制模块(2-1)包括:控制单元1、无线通信单元1、头动检测单元、LED指示单元1和电源单元1;头动控制模块(2-1)中电源单元1分别连接LED指示单元1、头动检测单元、无线通信单元1和控制单元1,并给各单元供电;控制单元1分别连接LED指示单元1、头动检测单元和无线通信单元1;所述头动检测单元为由陀螺仪与加速计组合的六轴传感器,控制单元1从头动检测单元读取头部姿态数据来分析头动指令;LED指示单元1为RGB指示灯,可发出红、绿和蓝三种颜色光,每种颜色分别用来指示系统的不同状态,控制单元1控制LED的亮灭状态;无线通信单元1的核心为低功耗蓝牙芯片,可以与辅助功能部分(4)的无线通信模块(4-6)进行连接。
所述的头动控制模块(2-1)固定在可松紧调节的发带上,可将发带佩戴于头部,此时头动控制模块(2-1)固定在头部右耳侧上方,头动控制模块(2-1)根据头部运动的角速度变化量及头部姿态角为核心控制部分(3)提供控制信号,包括头部快速向下点头时对应输出的前进控制信号和快速向后仰头时对应输出的后退控制信号,头部快速向左侧点头时输出的左转控制信号和向右侧点头时输出的右转控制信号,头部快速向左或向右甩头时提供制动控制信号。
一种具有体征监测功能的多模态人机交互智能轮椅系统的手势控制模块(2-2)组成框图如图4所示,所述的手势控制模块(2-2)包括:控制单元2、无线通信单元2、手势检测单元、LED指示单元2和电源单元2;手势控制模块(2-2)中电源单元2分别连接LED指示单元2、手势检测单元、无线通信单元2和控制单元2,并给各单元供电;控制单元2分别连接LED指示单元2、手势检测单元和无线通信单元2;所述手势检测单元为由陀螺仪与加速计组合的六轴传感器,控制单元2从手势检测单元读取手势姿态数据来分析手势指令;LED指示单元2为RGB指示灯,可发出红、绿和蓝三种颜色光,每种颜色分别用来指示系统的不同状态,控制单元2控制LED的亮灭状态;无线通信单元2的核心为低功耗蓝牙芯片,可以与辅助功能部分(4)的无线通信模块(4-6)进行连接。
所述的手势控制模块(2-2)固定在可松紧调节的护腕上,可将护腕佩戴于手腕处,手势控制模块(2-2)放置在手腕上方,手势控制模块(2-2)根据手腕处运动的角速度变化量及手势姿态角为核心控制部分(3)提供控制信号,包括手腕快速向下侧挥手时对应输出前进控制信号和快速向后侧挥手时对应输出后退控制信号,手腕快速向左侧挥手输出左转控制信号和快速右侧挥手输出的右转控制信号,手腕快速由下向上翻转时提供制动控制信号。
具体实施方式三
一种具有体征监测功能的多模态人机交互智能轮椅系统的结构示意图如图5和如图6所示,所述的语音控制模块(2-4)安装在轮椅右扶手表面处,用于对采集的语音进行语音指令识别并为核心控制部分(3)提供控制信号;用户朝向语音控制模块说出“前进”、“后退”、“左转”、“右转”和“停止”等指令时,语音控制模块(2-4)对其进行语音指令识别后将发出前进、后退、左转、右转和停止信号给核心控制部分(3)。
所述的摇杆控制模块(2-5)安装在轮椅右扶手表面处,摇杆控制模块(2-5)可向前后左右拨动来控制轮椅的移动。
所述的按键模块(2-6)安装在轮椅的左扶手表面处,作为人机交互的输入功能。
所述的OLED显示模块(4-1)、心率检测模块(4-2)安装在轮椅的左扶手表面处,OLED显示模块(4-1)用于显示轮椅的速度等级和心率检测模块(4-2)检测到的用户心率等信息;用户可通过按键模块(2-6)来启动心率检测模块(4-2)检测用户心率,将用户右手腕内侧放在心率检测模块(4-2)表面,检测完成后OLED显示模块(4-1)会显示心率信息。
所述的翻倒检测模块(4-3)采用的是加速度传感器,安装在轮椅机械结构的支架上,可以检测轮椅是否发生翻倒,若发生翻倒则立即启动蜂鸣器报警模块(4-5)报警。
所述的距离检测模块(4-4)为超声波传感器,在轮椅前侧和后侧分别安装一个超声波传感器;所述超声波传感器用于检测轮椅前后距离障碍物的距离,为所述核心控制部分(3)提供减速或停止信号。
所述的蜂鸣器报警模块(4-5)安装在轮椅的右扶手底侧,用于提示用户轮椅翻倒、障碍物距离较近及用户检测心率时心率异常等警告信息。
所述的无线通信模块(4-6)可与头动控制模块(2-1)的无线通信单元1和手势控制模块(2-2)的无线通信单元2连接,无线通信模块(4-6)与头动控制模块(2-1)的无线通信单元1和手势控制模块(2-2)的无线通信单元2采用低功耗蓝牙通信方式,提升系统的头动控制模块(2-1)和手势控制模块(2-2)的续航时间。
所述的红外接收模块(4-7)安装在轮椅的右扶手表面处,核心控制部分(3)通过红外接收模块(4-7)接收红外遥控模块(2-3)的数据。
尽管根据上述实施例描述了本发明,但是受益于上面的描述,本技术领域内的技术人员明白,在由此描述的本发明的范围内,可以设想其它实施例。此外,应当注意,本说明书中使用的语言主要是为了可读性和教导的目的而选择的,而不是为了解释或者限定本发明的主题而选择的。因此,在不偏离所附权利要求书的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围,对本发明所做的公开是说明性的,而非限制性的,本发明的范围由所附权利要求书限定。
Claims (1)
1.一种具有体征监测功能的多模态人机交互智能轮椅系统,其特征在于:该系统包括机械结构部分、人机交互部分、核心控制部分、辅助功能部分和电机驱动部分;
所述人机交互部分包括:头动控制模块、手势控制模块、红外遥控模块、语音控制模块、摇杆控制模块和按键模块;所述辅助功能部分包括:OLED显示模块、心率检测模块、翻倒检测模块、距离检测模块、蜂鸣器报警模块、无线通信模块和红外接收模块;所述语音控制模块、摇杆控制模块、按键模块、OLED显示模块、心率检测模块、翻倒检测模块、距离检测模块、蜂鸣器报警模块、无线通信模块、红外接收模块和电机驱动部分分别与所述核心控制部分连接;
所述的头动控制模块固定在可松紧调节的发带上,可将发带佩戴于头部,此时头动控制模块固定在头部右耳侧上方;头动控制模块包括:控制单元1、无线通信单元1、头动检测单元、LED指示单元1和电源单元1;头动控制模块中电源单元1分别连接LED指示单元1、头动检测单元、无线通信单元1和控制单元1,并给各单元供电;控制单元1分别连接LED指示单元1、头动检测单元和无线通信单元1;所述头动检测单元为由陀螺仪与加速计组合的六轴传感器,控制单元1从头动检测单元读取头部姿态数据来分析头动指令;LED指示单元1为RGB指示灯,可发出红、绿和蓝三种颜色光,每种颜色分别用来指示系统的不同状态,控制单元1控制LED的亮灭状态;无线通信单元1的核心为低功耗蓝牙芯片,可以与辅助功能部分的无线通信模块进行连接;
所述的手势控制模块固定在可松紧调节的护腕上,可将护腕佩戴于手腕处,手势控制模块放置在手腕上方;所述的手势控制模块包括:控制单元2、无线通信单元2、手势检测单元、LED指示单元2和电源单元2;手势控制模块中电源单元2分别连接LED指示单元2、手势检测单元、无线通信单元2和控制单元2,并给各单元供电;控制单元2分别连接LED指示单元2、手势检测单元和无线通信单元2;所述手势检测单元为由陀螺仪与加速计组合的六轴传感器,控制单元2从手势检测单元读取手势姿态数据来分析手势指令;LED指示单元2为RGB指示灯,可发出红、绿和蓝三种颜色光,每种颜色分别用来指示系统的不同状态,控制单元2控制LED的亮灭状态;无线通信单元2的核心为低功耗蓝牙芯片,可以与辅助功能部分的无线通信模块进行连接;
所述的红外遥控模块使用的是红外通信控制轮椅移动,在核心控制部分配置有红外接收模块,核心控制部分通过红外接收模块接收红外遥控模块的数据,通过红外遥控模块上的上下左右和停止按键来分别控制轮椅的进退、左右转和停止等动作;
所述的语音控制模块安装在轮椅右扶手表面处,用于对采集的语音进行语音指令识别并为核心控制部分提供控制信号;
所述的摇杆控制模块安装在轮椅右扶手表面处,摇杆控制模块可向前后左右拨动来控制轮椅的移动;
所述的按键模块安装在轮椅的左扶手表面处,作为人机交互的输入功能;
所述的OLED显示模块安装在轮椅的左扶手表面处,OLED显示模块用于显示轮椅的速度等级和心率检测模块检测到的用户心率等信息;
所述的心率检测模块为光学心率传感器,可通过手腕测量出人体心率特征参数,心率检测模块安装在轮椅的左扶手表面处,用户可通过按键模块来启动心率检测模块检测用户心率,将用户右手腕内侧放在心率检测模块表面,检测完成后OLED显示模块会显示心率信息;
所述的翻倒检测模块采用的是加速度传感器,安装在轮椅机械结构的支架上,可以检测轮椅是否发生翻倒;
所述的距离检测模块为超声波传感器,在轮椅前侧和后侧分别安装一个超声波传感器,用来检测轮椅前后距离障碍物的距离,为所述核心控制部分提供减速或停止信号;
所述的蜂鸣器报警模块安装在轮椅的右扶手底侧,用于提示用户轮椅翻倒、障碍物距离较近及用户检测心率时心率异常等警告信息;
所述的无线通信模块的核心为低功耗蓝牙芯片,无线通信模块可与头动控制模块的无线通信单元1和手势控制模块的无线通信单元2连接,进行数据的无线传输;
所述的红外接收模块安装在轮椅的右扶手表面处,核心控制部分通过红外接收模块接收红外遥控模块的数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910641086.9A CN110236812A (zh) | 2019-07-16 | 2019-07-16 | 一种具有体征监测功能的多模态人机交互智能轮椅系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910641086.9A CN110236812A (zh) | 2019-07-16 | 2019-07-16 | 一种具有体征监测功能的多模态人机交互智能轮椅系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110236812A true CN110236812A (zh) | 2019-09-17 |
Family
ID=67892434
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910641086.9A Pending CN110236812A (zh) | 2019-07-16 | 2019-07-16 | 一种具有体征监测功能的多模态人机交互智能轮椅系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110236812A (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110812019A (zh) * | 2019-11-06 | 2020-02-21 | 四川省康复辅具技术服务中心 | 一种基于多模态控制的智能轮椅 |
CN110850898A (zh) * | 2019-11-28 | 2020-02-28 | 曾阔 | 一种智能医用护理跟随小车及跟随方法 |
CN111280803A (zh) * | 2020-03-26 | 2020-06-16 | 榆逗(上海)智能科技有限公司 | 一种智能升降桌 |
CN112656599A (zh) * | 2020-12-23 | 2021-04-16 | 中科芯未来微电子科技成都有限公司 | 一种基于雷达检测的手势转动轮椅 |
CN113456363A (zh) * | 2021-06-30 | 2021-10-01 | 吉林大学 | 一种心内科患者用护理急救装置 |
CN113940831A (zh) * | 2021-10-27 | 2022-01-18 | 青岛豪江智能科技股份有限公司 | 带语音控制及生命体征监测的智能护理床电控系统 |
CN114327046A (zh) * | 2021-11-30 | 2022-04-12 | 北京津发科技股份有限公司 | 一种多模态人机交互与状态智能预警的方法、装置及系统 |
CN114732610A (zh) * | 2022-04-24 | 2022-07-12 | 江苏理工学院 | 一种采用多模态人机交互控制系统的智能轮椅 |
CN115501050A (zh) * | 2022-10-31 | 2022-12-23 | 江苏理工学院 | 一种基于计算机视觉的轮椅用户健康监测系统及其检测网络的训练方法 |
CN116880703A (zh) * | 2023-09-07 | 2023-10-13 | 中国科学院苏州生物医学工程技术研究所 | 多模态人机交互操控方法、手柄、设备、介质及助行器 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN202665826U (zh) * | 2012-04-25 | 2013-01-16 | 杨杰 | 一种多功能电动轮椅 |
CN203408184U (zh) * | 2013-07-09 | 2014-01-29 | 邝嘉豪 | 一种红外遥控轮椅 |
CN205054633U (zh) * | 2015-08-28 | 2016-03-02 | 深圳市尚荣医用工程有限公司 | 一种模块化多人机交互方式智能轮椅 |
CN105404397A (zh) * | 2015-12-21 | 2016-03-16 | 广东工业大学 | 一种手套控制器及其实现控制的方法 |
CN105787471A (zh) * | 2016-03-25 | 2016-07-20 | 南京邮电大学 | 一种应用于助老助残移动服务机器人控制的手势识别方法 |
CN107390573A (zh) * | 2017-06-28 | 2017-11-24 | 长安大学 | 基于手势控制的智能轮椅系统及控制方法 |
CN109009718A (zh) * | 2018-08-10 | 2018-12-18 | 中国科学院合肥物质科学研究院 | 一种基于电阻抗技术结合手势控制轮椅的方法 |
CN210612378U (zh) * | 2019-07-16 | 2020-05-26 | 哈尔滨理工大学 | 一种具有体征监测功能的多模态人机交互智能轮椅系统 |
-
2019
- 2019-07-16 CN CN201910641086.9A patent/CN110236812A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN202665826U (zh) * | 2012-04-25 | 2013-01-16 | 杨杰 | 一种多功能电动轮椅 |
CN203408184U (zh) * | 2013-07-09 | 2014-01-29 | 邝嘉豪 | 一种红外遥控轮椅 |
CN205054633U (zh) * | 2015-08-28 | 2016-03-02 | 深圳市尚荣医用工程有限公司 | 一种模块化多人机交互方式智能轮椅 |
CN105404397A (zh) * | 2015-12-21 | 2016-03-16 | 广东工业大学 | 一种手套控制器及其实现控制的方法 |
CN105787471A (zh) * | 2016-03-25 | 2016-07-20 | 南京邮电大学 | 一种应用于助老助残移动服务机器人控制的手势识别方法 |
CN107390573A (zh) * | 2017-06-28 | 2017-11-24 | 长安大学 | 基于手势控制的智能轮椅系统及控制方法 |
CN109009718A (zh) * | 2018-08-10 | 2018-12-18 | 中国科学院合肥物质科学研究院 | 一种基于电阻抗技术结合手势控制轮椅的方法 |
CN210612378U (zh) * | 2019-07-16 | 2020-05-26 | 哈尔滨理工大学 | 一种具有体征监测功能的多模态人机交互智能轮椅系统 |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110812019A (zh) * | 2019-11-06 | 2020-02-21 | 四川省康复辅具技术服务中心 | 一种基于多模态控制的智能轮椅 |
CN110812019B (zh) * | 2019-11-06 | 2021-06-04 | 四川省康复辅具技术服务中心 | 一种基于多模态控制的智能轮椅 |
CN110850898A (zh) * | 2019-11-28 | 2020-02-28 | 曾阔 | 一种智能医用护理跟随小车及跟随方法 |
CN111280803A (zh) * | 2020-03-26 | 2020-06-16 | 榆逗(上海)智能科技有限公司 | 一种智能升降桌 |
CN112656599A (zh) * | 2020-12-23 | 2021-04-16 | 中科芯未来微电子科技成都有限公司 | 一种基于雷达检测的手势转动轮椅 |
CN113456363A (zh) * | 2021-06-30 | 2021-10-01 | 吉林大学 | 一种心内科患者用护理急救装置 |
CN113940831A (zh) * | 2021-10-27 | 2022-01-18 | 青岛豪江智能科技股份有限公司 | 带语音控制及生命体征监测的智能护理床电控系统 |
CN114327046A (zh) * | 2021-11-30 | 2022-04-12 | 北京津发科技股份有限公司 | 一种多模态人机交互与状态智能预警的方法、装置及系统 |
CN114732610A (zh) * | 2022-04-24 | 2022-07-12 | 江苏理工学院 | 一种采用多模态人机交互控制系统的智能轮椅 |
CN115501050A (zh) * | 2022-10-31 | 2022-12-23 | 江苏理工学院 | 一种基于计算机视觉的轮椅用户健康监测系统及其检测网络的训练方法 |
CN116880703A (zh) * | 2023-09-07 | 2023-10-13 | 中国科学院苏州生物医学工程技术研究所 | 多模态人机交互操控方法、手柄、设备、介质及助行器 |
CN116880703B (zh) * | 2023-09-07 | 2023-12-15 | 中国科学院苏州生物医学工程技术研究所 | 多模态人机交互操控方法、手柄、设备、介质及助行器 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110236812A (zh) | 一种具有体征监测功能的多模态人机交互智能轮椅系统 | |
CN102488593B (zh) | 一种可根据人的身体、心理状态和环境状态调整运动模式的语音控制轮椅 | |
US10529217B2 (en) | Electric bed | |
CN107234968A (zh) | 一种基于多模式生物感应的汽车控制系统 | |
CN209063895U (zh) | 多传感器信息融合的司机疲劳驾驶预警与主动干预系统 | |
CN106923979B (zh) | 一种结构可调轮椅的智能调控装置及方法 | |
CN110103819A (zh) | 疲劳驾驶唤醒方法及系统 | |
CN202494882U (zh) | 一种具有训练计划和提醒的无线心跳计步运动手表 | |
CN106274679B (zh) | 一种智能汽车方向盘 | |
CN210612378U (zh) | 一种具有体征监测功能的多模态人机交互智能轮椅系统 | |
WO2021178425A1 (en) | Hybrid wheelchair | |
CN205405809U (zh) | 一种基于智能手表的疲劳驾驶检测报警系统 | |
CN205197980U (zh) | 一种水上智能自救手环 | |
CN109733430A (zh) | 一种新型高铁座椅 | |
CN202321835U (zh) | 一种智能感应停靠电梯 | |
CN210428777U (zh) | 一种防疲劳驾驶检测系统 | |
CN205140152U (zh) | 一种用于安全防护的多功能报警装置 | |
CN204296935U (zh) | 一种具有报警提示功能的自行车 | |
CN205862535U (zh) | 一种疲劳驾驶预警系统 | |
CN203255126U (zh) | 具有报警功能的汽车遮物帘 | |
CN201588486U (zh) | 有防撞提醒功能的玻璃门 | |
CN205652940U (zh) | 一种智能化电梯 | |
CN111439266A (zh) | 基于AIoT的驾驶员状态实时监测系统 | |
CN206975806U (zh) | 一种自动提醒装置及显示装置 | |
CN213373119U (zh) | 一种多功能的智能轮椅 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20221205 Address after: 213031 NO.666, Liaohe Road, Xinbei District, Changzhou City, Jiangsu Province Applicant after: CHANGZHOU INSTITUTE OF TECHNOLOGY Address before: 150080 No. 52, Xuefu Road, Nangang District, Heilongjiang, Harbin Applicant before: HARBIN University OF SCIENCE AND TECHNOLOGY |