CN105204643A - 用于车辆维保过程中的智能眼镜的手势识别方法 - Google Patents

用于车辆维保过程中的智能眼镜的手势识别方法 Download PDF

Info

Publication number
CN105204643A
CN105204643A CN201510627633.XA CN201510627633A CN105204643A CN 105204643 A CN105204643 A CN 105204643A CN 201510627633 A CN201510627633 A CN 201510627633A CN 105204643 A CN105204643 A CN 105204643A
Authority
CN
China
Prior art keywords
vehicle
gesture
repair
maintenance
intelligent glasses
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510627633.XA
Other languages
English (en)
Inventor
田雨农
杨佳
苍柏
丁飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dalian Roiland Technology Co Ltd
Original Assignee
Dalian Roiland Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dalian Roiland Technology Co Ltd filed Critical Dalian Roiland Technology Co Ltd
Priority to CN201510627633.XA priority Critical patent/CN105204643A/zh
Publication of CN105204643A publication Critical patent/CN105204643A/zh
Pending legal-status Critical Current

Links

Abstract

用于车辆维保过程中的智能眼镜的手势识别方法,本发明属于汽车维保领域,用以解决技术车辆维保过程中的智能眼镜的手势识别的问题,技术要点是:手势识别操作板检测手势特征,当检测到使用者在手势识别操作板上的手势特征为预设的滑动手势时,向主控芯片发送中断信号,主控芯片判断该手势的逻辑表示。效果是:极大方便了使用智能眼镜进行修车,用户体验进一步加强。

Description

用于车辆维保过程中的智能眼镜的手势识别方法
技术领域
本发明属于汽车维保领域,尤其涉及一种用于车辆维保过程中的智能眼镜的手势识别方法。
背景技术
国内车主在汽车出现问题或者需要保养的时候,大多还是依赖于4s店。但是4S店有两个显而易见的弊端,昂贵和费时。
当人们退而求其次,选择多如牛毛的非正规修理店的时候,虽然方便又便宜,但是想到要把自己的爱车交托给那些没有正式资格的修理工,无异于把把身体交托给没有行医资格的医生,把孩子送到没有教师资格的老师那里的时候,又有点望而却步。
还有一些动手能力,有意愿自己动手的车主,由于没有经过专业的学习,下手总会有些不自信,进而失去兴趣。当然也有另外一些车主,对汽车维修不在行,也没有兴趣。但是天有不测风云,行车出门在外,难免会遇上一些突发状况,比如爆胎,漏水,漏油等等。自己修,又无从下手;等救援,又远水解不了近渴。
基于以上种种尴尬的处境,应用于汽车维保领域的智能眼镜应运而生。
发明内容
为了解决现有技术中,由于车主维修能力不同,对于维修所需要的辅助手段需求存在差异,而现有技术中,缺失该种智能化辅助车辆维保的辅助工具,致使现有的车辆维保难以由车主自己进行的问题,本发明提出了一种用于车辆维保过程中的智能眼镜的手势识别方法。
为了实现上述目的,本发明采用的技术方案是:一种用于车辆维保过程中的智能眼镜的手势识别方法,手势识别操作板检测手势特征,当检测到使用者在手势识别操作板上的手势特征为预设的滑动手势时,向主控芯片发送中断信号,主控芯片判断该手势的逻辑表示,手势识别操作板接收的手势为一次沿着镜腿向镜框的方向滑动,即启动摄像头进行拍照;手势识别操作板接收的手势为连续两次沿着镜腿向镜框的方向滑动,即启动摄像头进行录像;手势识别操作板接收的手势为沿着镜框向镜腿的方向滑动,则关闭拍照或录像动作;
遮挡手势识别操作板固定区域1秒时,光源被接通,光源发光以照射汽车检修时的区域;遮挡手势识别操作板固定区域2秒时关闭该光源;
手势识别操作板被划分出两个检测区域,为第一检测区域与第二检测区域,手势识别操作板接收的手势为间隔的两次沿着镜腿向镜框的方向滑动,间隔时间为1S以上,则启动分区检测模式:
第一区域在先检测到手势遮挡时,若第二区域在后也检测到手势遮挡,则启动麦克风,若第一区域再次检测到遮挡手势,则关闭麦克风;
第二区域在先检测到手势遮挡时,若第一区域在后也检测到手势遮挡,则启动喇叭,若第一区域再次检测到遮挡手势,则关闭喇叭;
所述智能眼镜,包括眼镜框和镜腿,其中一个镜腿具有一个回旋弯折,回旋弯折的一侧连接第一直板,该第一直板设置有朝向镜腿外侧的触控板,该回旋弯折的另一侧连接第二直板,该第二直板的上、下两侧具有伸出的底板,与第二直板形成摄像头的容置部,第二直板设有摄像头安装孔,所述两个底板与光机连接,且该光机位于与其更为相近的镜片框的前方,镜片框连接于第一直板且设置于回旋弯折较近处,第一直板与第二直板基本垂直。
本发明所述的回旋弯折主要用于连接触控板与摄像头,并使得该两种元部件可以呈基本垂直位置,而图像采集与触控操作的该种位置关系,使得用户使用时,具有一种更为舒适的交互位置,且该种位置结构,也使得光机可以处于镜框正前方,该种画面显示位置与触控操作位置,是维保过程中的较佳位置,方便维保时的操作与观看画面,而镜片框连接于第一直板且设置于回旋弯折较近处,使得实现智能化的元部件直接由镜腿承担,没有对眼镜框造成不必要的改进而影响到视线观察范围。而摄像功能是用于车辆维保过程中的智能眼镜的手势识别方法的一个主要功能,因而摄像头置于容置部中,也是对摄像头的一种保护,该种结构也较为节省空间。
手势识别操作板是一种智能手势输入装置,比如目前常用的加速度传感器或者红外传感器,对使用者的手部动作数据进行采集和初步识别,结合无线通信和USB接口技术,将得到的手部动作信息通过USB接口传输给PC或接收机手势识别操作板的手势识别操作,使用手势识别技术,可以进一步解放了智能眼镜修车过程中的双手的使用,该种单手触控,极大方便了使用智能眼镜进行修车,用户体验进一步加强。
而对于一些使用频率非常高的的手势识别动作,即时进行检测,而对于一些使用频率低的手势识别动作,设定分区检测,即对手势识别操作板被划分出两个检测区域,为第一检测区域与第二检测区域,手势识别操作板接收的手势为间隔的两次沿着镜腿向镜框的方向滑动,间隔时间为1S以上,则启动分区检测模式;该种方法,不仅在有限的可使用逻辑的基础上,进一步扩展了可识别的手势动作,丰富了产品的功能,更进一步分出主次,节省了检测的识别时间,使得检测动作所使用的时间减小。
进一步的,摄像头容置部中安装光源且对应于第二直板上的光源孔,麦克风安装在第一直板内侧,眼镜框和回旋弯折连接处附近;;喇叭安装于在佩戴智能眼镜时镜腿上靠近耳朵的部位;摄像头由摄像头支架支撑安装在摄像头容置部中,陀螺仪,用以识别振动信号,设定不同的振动信号以对使汽车维保的智能眼镜执行对应动作。
光源、麦克风喇叭是实现使用智能眼镜进行维保的多方位交互手段,实现了一种全方位的智能交互,以提高智能眼镜的智能化。
进一步的,所述摄像头、光源、麦克风和喇叭连接于控制板,该控制板具有无线通讯模块,用于接收摄像头、光源、麦克风发出的信号,并可对该接收信号进行数据处理,且该控制板安装有无线信号收发模块,且使用该信号收发模块向远程服务器发送和接收信号。
由于智能眼镜是直接与控制板连接,控制板再与远程服务器进行信号交互,而控制板还可对该接收信号进行数据处理,即一些简单的识别操作或者其它的操作,可以完全又控制板进行识别或其它处理,或者由控制板在先预处理,可以缓解远程服务器的处理压力,并且进一步提高了处理速度,特别是预处理过的信号再交于远程服务器完成后续处理,可以极大缩减远程服务器的处理时间,使得用户较快速地得到处理结果。
进一步的,控制板包括有图像识别匹配模块,用于图像的预处理,特征提取,分类识别;控制模块,用于输入信息识别后,执行相应操作以及反馈;图像输出模块,用于给操作者进行图像反馈;音频输出模块,用以给操作者进行声音反馈;震动反馈模块,用以进行震动反馈;服务器数据库模块,用于服务端数据的检索;
控制板的上述各模块是下载在控制板中的程序运行得以实现的,设定上述模块,目的在于对采集的图像、声音等信号进行处理,以期得到相应的输出结果。
进一步的,控制板还连接存储器,该控制板通过信号线与摄像头、光源、麦克风和喇叭连接,且集成于一主机箱内,该控制板同步进行数据处理和信号收发。
该处控制器连接存储器的目的在于,由于智能眼镜维保的时候,有可能出现网络故障等无法与远程服务器交互数据的情形,但是,智能眼镜仍然需要采集数据,那么采集的数据就可以暂时不停下来,先进行数据存储,在网络恢复时,继续就数据的传输。
进一步的,摄像头采集的车牌图像,仅由控制板执行图形识别处理,得到该车牌信息,直接将车牌信息发送于远程服务器。
摄像头采集车牌信息,该车牌信息直接由智能眼镜的控制板进行识别,将识别之后的信息再发与远程服务器,该种方式的优点在于:直接发送车牌的图像至远程服务器进行识别再匹配,不仅传输的信号比较多,耗费时间,服务器接收该信号进行识别处理的时间很长,而在现场对该图片信息处理,得到识别的数据进行传输,信号传输时间短,速度快,可以尽快是的用户得到该车牌下的车辆信息或者其它信息。
进一步的,远程服务器具有车辆信息数据库、行车数据数据库、车辆结构模型数据库、维保流程数据库、工具模型数据库、汽车故障智能分析系统,所述车辆信息数据库存储车牌号,及该车牌号对应的车辆的车架号、车主信息、车辆保养记录和车辆维修记录,且还存储该车牌号下的车型、年款和车辆配置信息;所述的行车数据数据库存储由车牌号或者该车牌号下的车架号对应的车辆的OBD数据和故障码;所述车辆结构模型数据库存储由车型、年款和车辆配置信息对应的车辆组成及组成部分的说明和3D建模图形;所述维保流程数据库存储该车牌号或车架号对应的车辆行驶里程和故障信息,及维保流程说明;所述工具模型数据库存储针对不同车辆故障维修需要使用的工具的说明和3D建模图形,所述汽车故障智能分析系统,整合远程服务器具有车辆信息数据库、行车数据数据库、车辆结构模型数据库、维保流程数据库,分析车辆故障和确定保养流程。
在远程服务器设置上述数据库,对于智能眼镜采集的关于车辆维保的信息,都可以调取相关数据库中的数据,并反馈用户结果,于光机、喇叭等进行显示和提示,是实现智能眼镜用于车辆维保智能化的一个保障,且建立、健全该数据库的内容,会涉及智能眼镜的各个采集数据的处理,丰富智能眼镜用于车辆维保的功能。
进一步的,本发明还涉及一种使用智能眼镜进行车辆维保的方法,使用上述技术方案中的任一个所述的用于车辆维保过程中的智能眼镜的手势识别方法,包括如下步骤:
S1.启动智能眼镜,首先进入识别模式:
通过摄像头采集来的视频数据,自动扫描画面中是否出现车牌号,如果出现车牌号,识别出车牌号;通过识别出的车牌号,从车辆信息数据库中取得车架号或者直接识别出车架号;根据车架号,在车辆信息数据库中取得该车架号对应的车型、年款,在行车数据数据库中取得行驶里程、OBD数据和故障码;通过汽车故障智能分析系统,由行驶里程确定车辆需要做的保养项目;通过汽车故障智能分析系统,由OBD数据和故障码确定车辆需要做的维修项目;
S2.进入操作模式:用户通过语音输入和手势,选择系统提示的维保项目;
S3.进入教学模式:如果用户选择的维保项目是视频教学,则通过维保流程数据库取得维保流程视频,并开始播放;
S4.播放维保视频过程中进入操作模式:用户通过语音输入和手势,控制维保流程视频的播放;
S5.进入教学模式:如果用户选择的维保项目是文字动画教学,则通过维保流程数据库取得维保流程,如果维保流程中需要提示用户操作某汽车零件的时候,进入识别模式;
S6.进入识别模式:识别出画面中出现的特定汽车零件,并提示用户该零件的安装位置,再返回教学模式;
S7.进入教学模式:从车辆结构模型数据库中取得该零件的3D模型,并显示在视频输出系统,并且在3D模型上以动画的形式提示用户应该进行操作的位置以及操作方法;
S8.播放教学动画过程中进入操作模式:用户通过语音输入和手势,操作眼前的3D模型,包括转动,放大,缩小,拆分,合并的动作,使用户更加详细的了解教学过程;
S9退出教学和操作模式:完成操作和教学,退出。
将智能眼镜应用于车辆维保时,分出3个模式(识别,操作,教学),3个模式互相依托,互相支持,互相转换,以实现车辆维保的信息采集、辅助与自实现的目的,而3个模式又都依托于车辆信息数据库,行车数据数据库,车辆结构模型数据库,维保流程数据库,汽车故障智能分析系统(RDM)等一系列信息系统。并展现了一个完整地使用智能眼镜进行辅助车辆维保的过程。
进一步的,所述手势识别操作板具有方向选择触控按键区域,遮挡不同按键区域,即表示选择该方向的动作,以此操作智能眼镜所具有的软件。
进一步的,所述手势识别操作板具有触控确认按键区域,遮挡该按键区域,即表示确定动作,以此操作智能眼镜所具有的软件,所述手势识别操作板具有触控取消按键区域,遮挡该按键区域,即表示取消动作,以此操作智能眼镜所具有的软件。
有益效果:本发明上述技术方案的使用,让专业修理工更规范:因为智能眼镜能够通过后台数据库,得到更加详尽的车辆状态信息,以便提供给普通修理工更加规范的,完全符合官方标准的维保流程。让人们选择非4S店修理工也能没有后顾之忧。让发烧友更专业:因为智能眼镜能够通过后台数据库,得到更加详尽的车辆状态信息,可以给与用户更专业的维保项目,可以让发烧友更专业的自己动手完成维修和保养。让菜鸟更从容:因为智能眼镜能够通过后台数据库,得到更加详尽的车辆状态信息,可以第一时间告知已经束手无策的用户如何摆脱困境。
附图说明
图1为本发明的智能眼镜的结构示意图;
图2为本发明的智能眼镜的主视图;
图3为本发明的智能眼镜的后视图;
图4为本发明的智能眼镜的左视图;
图5为本发明的智能眼镜的右视图;
图6为本发明的智能眼镜的俯视图;
图7为本发明的智能眼镜的仰视图;
图8为本发明的智能眼镜的分解图。
其中:1.镜腿,2.眼镜框,3.回旋弯折,4.第一直板,5.触控板,6.底板,7.光机,8.光源孔,9.摄像头支架,10.控制板,11.麦克风,12.喇叭,13.镜腿外侧,14.第二直板,15.摄像头,16.镜片框。
具体实施方式
为了更为清楚地阐述本发明创造,结合具体实施例对本发明进一步说明。
实施例1:一种用于车辆维保过程中的智能眼镜的手势识别方法,手势识别操作板检测手势特征,当检测到使用者在手势识别操作板上的手势特征为预设的滑动手势时,向主控芯片发送中断信号,主控芯片判断该手势的逻辑表示,手势识别操作板接收的手势为一次沿着镜腿向镜框的方向滑动,即启动摄像头进行拍照;手势识别操作板接收的手势为连续两次沿着镜腿向镜框的方向滑动,即启动摄像头进行录像;手势识别操作板接收的手势为沿着镜框向镜腿的方向滑动,则关闭拍照或录像动作;
遮挡手势识别操作板固定区域1秒时,光源被接通,光源发光以照射汽车检修时的区域;遮挡手势识别操作板固定区域2秒时关闭该光源;
手势识别操作板被划分出两个检测区域,为第一检测区域与第二检测区域,手势识别操作板接收的手势为间隔的两次沿着镜腿向镜框的方向滑动,间隔时间为1S以上,则启动分区检测模式:
第一区域在先检测到手势遮挡时,若第二区域在后也检测到手势遮挡,则启动麦克风,若第一区域再次检测到遮挡手势,则关闭麦克风;
第二区域在先检测到手势遮挡时,若第一区域在后也检测到手势遮挡,则启动喇叭,若第一区域再次检测到遮挡手势,则关闭喇叭;
所述智能眼镜,包括眼镜框2和镜腿1,其中一个镜腿1具有一个回旋弯折3,回旋弯折3的一侧连接第一直板4,该第一直板4设置有朝向镜腿外侧13的触控板5,该回旋弯折3的另一侧连接第二直板14,该第二直板14的上、下两侧具有伸出的底板6,与第二直板14形成摄像头15的容置部,第二直板14设有摄像头15安装孔,所述两个底板6与光机7连接,且该光机7位于与其更为相近的镜片框16的前方,镜片框16连接于第一直板4且设置于回旋弯折3较近处,第一直板4与第二直板14基本垂直,所述基本垂直为偏离垂直0-5度左右,使得二者大致呈垂直角度。
本发明所述的回旋弯折主要用于连接触控板与摄像头,并使得该两种元部件可以呈基本垂直位置,而图像采集与触控操作的该种位置关系,使得用户使用时,具有一种更为舒适的交互位置,且该种位置结构,也使得光机可以处于镜框正前方,该种画面显示位置与触控操作位置,是维保过程中的较佳位置,方便维保时的操作与观看画面,而镜片框连接于第一直板且设置于回旋弯折较近处,使得实现智能化的元部件直接由镜腿承担,没有对眼镜框造成不必要的改进而影响到视线观察范围。而摄像功能是用于车辆维保过程中的智能眼镜的手势识别方法的一个主要功能,因而摄像头置于容置部中,也是对摄像头的一种保护,该种结构也较为节省空间。
实施例2:与实施例1具有相同的技术方案,区别是:摄像头15容置部中安装光源且对应于第二直板14上的光源孔8,麦克风11安装在第一直板4内侧,眼镜框2和回旋弯折连接处附近;喇叭12安装于在佩戴智能眼镜时镜腿1上靠近耳朵的部位;摄像头15由摄像头15支架9支撑安装在摄像头15容置部中,陀螺仪,用以识别振动信号,设定不同的振动信号以对使汽车维保的智能眼镜执行对应动作。光源、麦克风和喇叭是实现使用智能眼镜进行维保的多方位交互手段,实现了一种全方位的智能交互,以提高智能眼镜的智能化。
实施例3:与实施例2具有相同的技术方案,区别是:摄像头15、光源、麦克风11和喇叭12连接于控制板10,该控制板10具有无线通讯模块,用于接收摄像头15、光源、麦克风11发出的信号,并可对该接收信号进行数据处理,且该控制板10安装有无线信号收发模块,且使用该信号收发模块向远程服务器发送和接收信号,无线信号包括,Wifi,蓝牙,GPS,FM。由于智能眼镜是直接与控制板连接,控制板再与远程服务器进行信号交互,而控制板还可对该接收信号进行数据处理,即一些简单的识别操作或者其它的操作,可以完全又控制板进行识别或其它处理,或者由控制板在先预处理,可以缓解远程服务器的处理压力,并且进一步提高了处理速度,特别是预处理过的信号再交于远程服务器完成后续处理,可以极大缩减远程服务器的处理时间,使得用户较快速地得到处理结果。
实施例4:与实施例1或2或3具有相同的技术方案,区别是:控制板10包括有图像识别匹配模块,用于图像的预处理,特征提取,分类识别;控制模块,用于输入信息识别后,执行相应操作以及反馈;图像输出模块,用于给操作者进行图像反馈;音频输出模块,用以给操作者进行声音反馈;震动反馈模块,用以进行震动反馈;服务器数据库模块,用于服务端数据的检索;控制板的上述各模块是下载在控制板中的程序运行得以实现的,设定上述模块,目的在于对采集的图像、声音等信号进行处理,以期得到相应的输出结果。
实施例5:与实施例1-4任意个具有相同的技术方案,区别是:控制板10还连接存储器,该控制板10通过信号线与摄像头15、光源、麦克风11和喇叭12连接,且集成于一主机箱内,该控制板10同步进行数据处理和信号收发。该处控制器连接存储器的目的在于,由于智能眼镜维保的时候,有可能出现网络故障等无法与远程服务器交互数据的情形,但是,智能眼镜仍然需要采集数据,那么采集的数据就可以暂时不停下来,先进行数据存储,在网络恢复时,继续就数据的传输。
实施例6:与实施例1-5任意个具有相同的技术方案,区别是:摄像头采集的车牌图像,仅由控制板执行图形识别处理,得到该车牌信息,直接将车牌信息发送于远程服务器。摄像头采集车牌信息,该车牌信息直接由智能眼镜的控制板进行识别,将识别之后的信息再发与远程服务器,该种方式的优点在于:直接发送车牌的图像至远程服务器进行识别再匹配,不仅传输的信号比较多,耗费时间,服务器接收该信号进行识别处理的时间很长,而在现场对该图片信息处理,得到识别的数据进行传输,信号传输时间短,速度快,可以尽快是的用户得到该车牌下的车辆信息或者其它信息。
实施例7:与实施例1-6任意个具有相同的技术方案,区别是:远程服务器具有车辆信息数据库、行车数据数据库、车辆结构模型数据库、维保流程数据库、工具模型数据库、汽车故障智能分析系统,所述车辆信息数据库存储车牌号,及该车牌号对应的车辆的车架号、车主信息、车辆保养记录和车辆维修记录,且还存储该车牌号下的车型、年款和车辆配置信息;所述的行车数据数据库存储由车牌号或者该车牌号下的车架号对应的车辆的OBD数据和故障码;所述车辆结构模型数据库存储由车型、年款和车辆配置信息对应的车辆组成及组成部分的说明和3D建模图形;所述维保流程数据库存储该车牌号或车架号对应的车辆行驶里程和故障信息,及维保流程说明;所述工具模型数据库存储针对不同车辆故障维修需要使用的工具的说明和3D建模图形,所述汽车故障智能分析系统,整合远程服务器具有车辆信息数据库、行车数据数据库、车辆结构模型数据库、维保流程数据库,分析车辆故障和确定保养流程。
在远程服务器设置上述数据库,对于智能眼镜采集的关于车辆维保的信息,都可以调取相关数据库中的数据,并反馈用户结果,于光机、喇叭等进行显示和提示,是实现智能眼镜用于车辆维保智能化的一个保障,且建立、健全该数据库的内容,会涉及智能眼镜的各个采集数据的处理,丰富智能眼镜用于车辆维保的功能。
实施例8:本发明还涉及一种使用智能眼镜进行车辆维保的方法,使用上述技术方案中的任一个所述的用于车辆维保过程中的智能眼镜的手势识别方法,包括如下步骤:
S1.启动智能眼镜,首先进入识别模式:
通过摄像头采集来的视频数据,自动扫描画面中是否出现车牌号,如果出现车牌号,识别出车牌号;通过识别出的车牌号,从车辆信息数据库中取得车架号或者直接识别出车架号;根据车架号,在车辆信息数据库中取得该车架号对应的车型、年款,在行车数据数据库中取得行驶里程、OBD数据和故障码;通过汽车故障智能分析系统,由行驶里程确定车辆需要做的保养项目;通过汽车故障智能分析系统,由OBD数据和故障码确定车辆需要做的维修项目;
S2.进入操作模式:用户通过语音输入和手势,选择系统提示的维保项目;
S3.进入教学模式:如果用户选择的维保项目是视频教学,则通过维保流程数据库取得维保流程视频,并开始播放;
S4.播放维保视频过程中进入操作模式:用户通过语音输入和手势,控制维保流程视频的播放;
S5.进入教学模式:如果用户选择的维保项目是文字动画教学,则通过维保流程数据库取得维保流程,如果维保流程中需要提示用户操作某汽车零件的时候,进入识别模式;
S6.进入识别模式:识别出画面中出现的特定汽车零件,并提示用户该零件的安装位置,再返回教学模式;
S7.进入教学模式:从车辆结构模型数据库中取得该零件的3D模型,并显示在视频输出系统,并且在3D模型上以动画的形式提示用户应该进行操作的位置以及操作方法;
S8.播放教学动画过程中进入操作模式:用户通过语音输入和手势,操作眼前的3D模型,包括转动,放大,缩小,拆分,合并的动作,使用户更加详细的了解教学过程;
S9退出教学和操作模式:完成操作和教学,退出。
将智能眼镜应用于车辆维保时,分出3个模式(识别,操作,教学),3个模式互相依托,互相支持,互相转换,以实现车辆维保的信息采集、辅助与自实现的目的,而3个模式又都依托于车辆信息数据库,行车数据数据库,车辆结构模型数据库,维保流程数据库,汽车故障智能分析系统(RDM)等一系列信息系统。并展现了一个完整地使用智能眼镜进行辅助车辆维保的过程。
实施例9:与实施例1-8任意个具有相同的技术方案,区别是:
所述手势识别操作板具有方向选择触控按键区域,遮挡不同按键区域,即表示选择该方向的动作,以此操作智能眼镜所具有的软件。所述手势识别操作板具有触控确认按键区域,遮挡该按键区域,即表示确定动作,以此操作智能眼镜所具有的软件,所述手势识别操作板具有触控取消按键区域,遮挡该按键区域,即表示取消动作,以此操作智能眼镜所具有的软件。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明披露的技术范围内,根据本发明的技术方案及其发明构思加以等同替换或改变,都应涵盖在本发明的保护范围之内。

Claims (10)

1.一种用于车辆维保过程中的智能眼镜的手势识别方法,其特征在于:手势识别操作板检测手势特征,当检测到使用者在手势识别操作板上的手势特征为预设的滑动手势时,向主控芯片发送中断信号,主控芯片判断该手势的逻辑表示,其特征在于:手势识别操作板接收的手势为一次沿着镜腿向镜框的方向滑动,即启动摄像头进行拍照;手势识别操作板接收的手势为连续两次沿着镜腿向镜框的方向滑动,即启动摄像头进行录像;手势识别操作板接收的手势为沿着镜框向镜腿的方向滑动,则关闭拍照或录像动作;
遮挡手势识别操作板固定区域1秒时,光源被接通,光源发光以照射汽车检修时的区域;遮挡手势识别操作板固定区域2秒时关闭该光源;
手势识别操作板被划分出两个检测区域,为第一检测区域与第二检测区域,手势识别操作板接收的手势为间隔的两次沿着镜腿向镜框的方向滑动,间隔时间为1S以上,则启动分区检测模式:
第一区域在先检测到手势遮挡时,若第二区域在后也检测到手势遮挡,则启动麦克风,若第一区域再次检测到遮挡手势,则关闭麦克风;
第二区域在先检测到手势遮挡时,若第一区域在后也检测到手势遮挡,则启动喇叭,若第一区域再次检测到遮挡手势,则关闭喇叭;
所述智能眼镜,包括眼镜框(2)和镜腿(1),其特征在于:其中一个镜腿(1)具有一个回旋弯折(3),回旋弯折(3)的一侧连接第一直板(4),该第一直板(4)设置有朝向镜腿外侧(13)的触控板(5),该回旋弯折(3)的另一侧连接第二直板(14),该第二直板(14)的上、下两侧具有伸出的底板(6),与第二直板(14)形成摄像头(15)的容置部,第二直板(14)设有摄像头安装孔,所述两个底板(6)与光机(7)连接,且该光机(7)位于与其更为相近的镜片框(16)的前方,镜片框连接于第一直板(4)且设置于回旋弯折(3)较近处,第一直板(4)与第二直板(14)基本垂直。
2.如权利要求1所述的用于车辆维保过程中的智能眼镜的手势识别方法,其特征在于:摄像头(15)容置部中安装光源且对应于第二直板(14)上的光源孔(8),麦克风(11)安装在第一直板(4)内侧的眼镜框(2)和回旋弯折(3)连接处附近;喇叭(12)安装于在佩戴智能眼镜时镜腿(1)上靠近耳朵的部位;摄像头(15)由摄像头支架(9)支撑安装在摄像头(15)容置部中,陀螺仪,用以识别振动信号,设定不同的振动信号以对使汽车维保的智能眼镜执行对应动作。
3.如权利要求2所述的用于车辆维保过程中的智能眼镜的手势识别方法,其特征在于:所述摄像头(15)、光源、麦克风(11)和喇叭(12)连接于控制板(10),该控制板(10)具有无线通讯模块,用于接收摄像头(15)、光源、麦克风(11)发出的信号,并可对该接收信号进行数据处理,且该控制板(10)安装有无线信号收发模块,且使用该信号收发模块向远程服务器发送和接收信号。
4.如权利要求1-3任一项所述的用于车辆维保过程中的智能眼镜的手势识别方法,其特征在于:控制板(10)包括图像识别匹配模块,用于图像的预处理,特征提取,分类识别;控制模块,用于输入信息识别别后,执行相应操作以及反馈。图像输出模块,用于给操作者进行图像反馈;音频输出模块,用以给操作者进行声音反馈;震动反馈模块,用以进行震动反馈;服务器数据库模块,用于服务端数据的检索。
5.如权利要求3所述的用于车辆维保过程中的智能眼镜的手势识别方法,其特征在于:控制板(10)还连接存储器,该控制板(10)通过信号线与摄像头(15)、光源、麦克风(11)和喇叭(12)连接,且集成于一主机箱内,该控制板(10)同步进行数据处理和信号收发。
6.如权利要求4所述的用于车辆维保过程中的智能眼镜的手势识别方法,其特征在于:摄像头(15)采集的车牌图像,仅由控制板(10)执行图形识别处理,得到该车牌信息,直接将车牌信息发送于远程服务器。
7.如权利要求4所述的用于车辆维保过程中的智能眼镜的手势识别方法,其特征在于:远程服务器具有车辆信息数据库、行车数据数据库、车辆结构模型数据库、维保流程数据库、工具模型数据库、汽车故障智能分析系统,所述车辆信息数据库存储车牌号,及该车牌号对应的车辆的车架号、车主信息、车辆保养记录和车辆维修记录,且还存储该车牌号下的车型、年款和车辆配置信息;所述的行车数据数据库存储由车牌号或者该车牌号下的车架号对应的车辆的OBD数据和故障码;所述车辆结构模型数据库存储由车型、年款和车辆配置信息对应的车辆组成及组成部分的说明和3D建模图形;所述维保流程数据库存储该车牌号或车架号对应的车辆行驶里程和故障信息,及维保流程说明;所述工具模型数据库存储针对不同车辆故障维修需要使用的工具的说明和3D建模图形,所述汽车故障智能分析系统,整合远程服务器具有车辆信息数据库、行车数据数据库、车辆结构模型数据库、维保流程数据库,分析车辆故障和确定保养流程。
8.如权利要求7所述的用于车辆维保过程中的智能眼镜的手势识别方法,其特征在于:实现智能眼镜进行车辆维保的方法,包括如下步骤:
S1.启动智能眼镜,首先进入识别模式:通过摄像头采集来的视频数据,自动扫描画面中是否出现车牌号,如果出现车牌号,识别出车牌号;通过识别出的车牌号,从车辆信息数据库中取得车架号或者直接识别出车架号;根据车架号,在车辆信息数据库中取得该车架号对应的车型、年款,在行车数据数据库中取得行驶里程、OBD数据和故障码;通过汽车故障智能分析系统,由行驶里程确定车辆需要做的保养项目;通过汽车故障智能分析系统,由OBD数据和故障码确定车辆需要做的维修项目;
S2.进入操作模式:用户通过语音输入和手势,选择系统提示的维保项目;
S3.进入教学模式:如果用户选择的维保项目是视频教学,则通过维保流程数据库取得维保流程视频,并开始播放;
S4.播放维保视频过程中进入操作模式:用户通过语音输入和手势,控制维保流程视频的播放;
S5.进入教学模式:如果用户选择的维保项目是文字动画教学,则通过维保流程数据库取得维保流程,如果维保流程中需要提示用户操作某汽车零件的时候,进入识别模式;
S6.进入识别模式:识别出画面中出现的特定汽车零件,并提示用户该零件的安装位置,再返回教学模式;
S7.进入教学模式:从车辆结构模型数据库中取得该零件的3D模型,并显示在视频输出系统,并且在3D模型上以动画的形式提示用户应该进行操作的位置以及操作方法;
S8.播放教学动画过程中进入操作模式:用户通过语音输入和手势,操作眼前的3D模型,包括转动,放大,缩小,拆分,合并的动作,使用户更加详细的了解教学过程;
S9退出教学和操作模式:完成操作和教学,退出。
9.如权利要求1所述的用于车辆维保过程中的智能眼镜的手势识别方法,其特征在于:所述手势识别操作板具有方向选择触控按键区域,遮挡不同按键区域,即表示选择该方向的动作,以此操作智能眼镜所具有的软件。
10.如权利要求1所述的用于车辆维保过程中的智能眼镜的手势识别方法,其特征在于:所述手势识别操作板具有触控确认按键区域,遮挡该按键区域,即表示确定动作,以此操作智能眼镜所具有的软件,所述手势识别操作板具有触控取消按键区域,遮挡该按键区域,即表示取消动作,以此操作智能眼镜所具有的软件。
CN201510627633.XA 2015-09-28 2015-09-28 用于车辆维保过程中的智能眼镜的手势识别方法 Pending CN105204643A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510627633.XA CN105204643A (zh) 2015-09-28 2015-09-28 用于车辆维保过程中的智能眼镜的手势识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510627633.XA CN105204643A (zh) 2015-09-28 2015-09-28 用于车辆维保过程中的智能眼镜的手势识别方法

Publications (1)

Publication Number Publication Date
CN105204643A true CN105204643A (zh) 2015-12-30

Family

ID=54952377

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510627633.XA Pending CN105204643A (zh) 2015-09-28 2015-09-28 用于车辆维保过程中的智能眼镜的手势识别方法

Country Status (1)

Country Link
CN (1) CN105204643A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107783315A (zh) * 2016-08-25 2018-03-09 大连楼兰科技股份有限公司 具有双向摄像头的智能眼镜及手势识别方法

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201159903Y (zh) * 2008-03-14 2008-12-03 北京信路威科技发展有限公司 一种车牌识别装置
CN102508363A (zh) * 2011-12-28 2012-06-20 王鹏勃 一种基于增强现实技术的无线显示眼镜及其实现方法
CN202394110U (zh) * 2011-11-09 2012-08-22 张红泉 汽车故障远程诊断装置
CN202758141U (zh) * 2012-01-19 2013-02-27 谷歌公司 电子装置及头戴式装置
CN203422526U (zh) * 2013-06-27 2014-02-05 孙鹏 一种用于飞机维修的质量保证装置
CN203506718U (zh) * 2013-09-03 2014-04-02 常州菲胜图自动化仪器有限公司 一种智能眼镜
US20140152539A1 (en) * 2012-12-03 2014-06-05 Qualcomm Incorporated Apparatus and method for an infrared contactless gesture system
CN104321684A (zh) * 2012-03-21 2015-01-28 谷歌公司 带有输入和输出结构的可佩戴装置
CN104793353A (zh) * 2015-01-04 2015-07-22 北京君正集成电路股份有限公司 智能眼镜
CN104880835A (zh) * 2015-05-13 2015-09-02 浙江吉利控股集团有限公司 智能眼镜
CN104932682A (zh) * 2015-05-27 2015-09-23 小米科技有限责任公司 操作控制方法及装置
CN104932782A (zh) * 2014-03-19 2015-09-23 联想(北京)有限公司 一种信息处理方法、装置及智能眼镜

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201159903Y (zh) * 2008-03-14 2008-12-03 北京信路威科技发展有限公司 一种车牌识别装置
CN202394110U (zh) * 2011-11-09 2012-08-22 张红泉 汽车故障远程诊断装置
CN102508363A (zh) * 2011-12-28 2012-06-20 王鹏勃 一种基于增强现实技术的无线显示眼镜及其实现方法
CN202758141U (zh) * 2012-01-19 2013-02-27 谷歌公司 电子装置及头戴式装置
CN104321684A (zh) * 2012-03-21 2015-01-28 谷歌公司 带有输入和输出结构的可佩戴装置
US20140152539A1 (en) * 2012-12-03 2014-06-05 Qualcomm Incorporated Apparatus and method for an infrared contactless gesture system
CN203422526U (zh) * 2013-06-27 2014-02-05 孙鹏 一种用于飞机维修的质量保证装置
CN203506718U (zh) * 2013-09-03 2014-04-02 常州菲胜图自动化仪器有限公司 一种智能眼镜
CN104932782A (zh) * 2014-03-19 2015-09-23 联想(北京)有限公司 一种信息处理方法、装置及智能眼镜
CN104793353A (zh) * 2015-01-04 2015-07-22 北京君正集成电路股份有限公司 智能眼镜
CN104880835A (zh) * 2015-05-13 2015-09-02 浙江吉利控股集团有限公司 智能眼镜
CN104932682A (zh) * 2015-05-27 2015-09-23 小米科技有限责任公司 操作控制方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107783315A (zh) * 2016-08-25 2018-03-09 大连楼兰科技股份有限公司 具有双向摄像头的智能眼镜及手势识别方法

Similar Documents

Publication Publication Date Title
CN105182535B (zh) 使用智能眼镜进行汽车维保的方法
CN105355196A (zh) 智能眼镜应用于汽车维保领域的语音指令识别方法
CN105158927B (zh) 智能眼镜在汽车维保过程中的零件拆卸的方法
CN105223706A (zh) 用于车辆维保过程中的智能眼镜判定车辆损伤程度的方法
US11142190B2 (en) System and method for controlling autonomous driving vehicle
CN105966405A (zh) 驾驶员分心检测系统
CN105182536B (zh) 汽车维保过程中智能眼镜通过车牌识别并获得车辆信息的方法
CN104011734B (zh) 从附着到车辆的对象获得信息的系统、方法和装置
US20190005310A1 (en) Public service system and method using autonomous smart car
US11520033B2 (en) Techniques for determining a location of a mobile object
CN205080316U (zh) 智能眼镜
CN105353510A (zh) 智能眼镜应用于汽车远程维保支援的方法
CN105184276B (zh) 智能眼镜维保过程中的零件识别方法
CN105223694B (zh) 智能眼镜应用于汽车维保过程中的室内定位及图像识别的方法
CN105224923B (zh) 智能眼镜应用于维保过程中的划分零件定损等级的方法
CN105182537B (zh) 智能眼镜维保过程中的漏液识别方法
CN105259657B (zh) 汽车维保过程中智能眼镜的照明方法
CN105353508A (zh) 智能眼镜检测汽车液体余量的方法
CN105158900B (zh) 汽车维保智能眼镜上的头部姿态识别的方法
WO2018123041A1 (ja) 情報処理システム、及び情報処理装置
CN105205471A (zh) 智能眼镜维保过程中的盲区查看的方法
CN105204643A (zh) 用于车辆维保过程中的智能眼镜的手势识别方法
CN105158931A (zh) 用于车辆维保过程中的智能眼镜触控板与按键的并行使用防油污的方法
CN105158901A (zh) 用于汽车维保的智能眼镜
CN105242401B (zh) 智能眼镜共享用于汽车维保的其他设备数据的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20151230

RJ01 Rejection of invention patent application after publication