CN111522260A - 基于信息抓取识别及大数据的智能辅助服务方法及其系统 - Google Patents

基于信息抓取识别及大数据的智能辅助服务方法及其系统 Download PDF

Info

Publication number
CN111522260A
CN111522260A CN202010331291.8A CN202010331291A CN111522260A CN 111522260 A CN111522260 A CN 111522260A CN 202010331291 A CN202010331291 A CN 202010331291A CN 111522260 A CN111522260 A CN 111522260A
Authority
CN
China
Prior art keywords
information
user
controlling
real time
shell
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202010331291.8A
Other languages
English (en)
Inventor
徐建红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN202010331291.8A priority Critical patent/CN111522260A/zh
Publication of CN111522260A publication Critical patent/CN111522260A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/04Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61FFILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F9/00Methods or devices for treatment of the eyes; Devices for putting-in contact lenses; Devices to correct squinting; Apparatus to guide the blind; Protective devices for the eyes, carried on the body or in the hand
    • A61F9/08Devices or methods enabling eye-patients to replace direct visual perception by another kind of perception

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Vascular Medicine (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • User Interface Of Digital Computer (AREA)
  • Studio Devices (AREA)

Abstract

基于信息抓取识别及大数据的智能辅助服务方法及其系统,包括:控制高清摄像头启动实时摄取高清影像并控制热成像仪启动实时获取周围的热成像图,实时分析跟随壳体绑定的用户手部是否有触摸物体,若有则实时分析用户手部触目的物体及手部触摸区域信息并提取分析出的物体及手部触摸区域信息,控制扬声器将物体及手部触摸区域信息进行语音播放并分析用户触摸的物体是否为使用物品,若是则联网搜索用户触摸的物体的使用方法信息并控制扬声器将物体的使用方法信息进行语音播放,若分析出用户触摸的物体为用户私有电器物体则分析用户是否有用手部进行多次点击,若有则控制扬声器播放开始使用提示并控制用户手部多次点击的物体进入使用状态。

Description

基于信息抓取识别及大数据的智能辅助服务方法及其系统
技术领域
本发明涉及人体辅助服务领域,特别涉及一种基于信息抓取识别及大数据的智能辅助服务方法及其系统。
背景技术
根据世界卫生组织的调查,全球范围内有两亿八千五百万人有视力障碍,其中三千九百万是盲人,两亿四千六百万是视力损伤。大多数视力障碍出行得靠拐杖,用拐杖敲击地面进行判断,这样走不仅慢、累,还容易发生意外。
因此,如何将信息抓取识别、大数据以及视力障碍服务相结合,在获取到用户触摸物体后,将物体及其使用方法进行语音提示并在用户多次点击私有电器后,自动控制该电器进入使用状态,且对用户触摸危险物品前进行自动化经过;当用户外出后,识别用户周围的环境影像并将影像转化为图片,然后将图片进行文字转化并进行语音播报是目前急需解决的问题。
发明内容
发明目的:为了克服背景技术中的缺点,本发明实施例提供了一种基于信息抓取识别及大数据的智能辅助服务方法及其系统,能够有效解决上述背景技术中涉及的问题。
技术方案:
一种基于信息抓取识别及大数据的智能辅助服务方法,所述方法包括以下步骤:
S1、控制设置于跟随壳体外部位置的高清摄像头启动实时摄取高清影像并控制设置于跟随壳体外部位置的热成像仪启动实时获取周围的热成像图;
S2、根据热成像图实时分析跟随壳体绑定的用户手部是否有触摸物体;
S3、若有则根据高清影像以及热成像图实时分析用户手部触目的物体信息以及手部触摸区域信息并提取分析出的物体信息以及手部触摸区域信息;
S4、控制设置于跟随壳体外部位置的扬声器将所述物体信息以及手部触摸区域信息进行语音播放并根据高清影像分析用户触摸的物体是否为使用物品;
S5、若是则根据物体信息联网搜索用户触摸的物体的使用方法信息并控制所述扬声器将所述物体的使用方法信息进行语音播放;
S6、若根据高清影像分析出用户触摸的物体为用户私有电器物体则根据高清影像以及热成像图分析用户是否有用手部进行多次点击;
S7、若有则控制所述扬声器播放开始使用提示并控制用户手部多次点击的物体进入使用状态。
作为本发明的一种优选方式,在S2中,所述方法还包括以下步骤:
S20、根据高清影像实时分析跟随壳体绑定的用户手部是否有准备触摸物体;
S21、若有则根据高清影像实时分析用户手部待触摸的物体信息并根据所述物体信息分析是否为危险物品;
S22、若是则控制设置于跟随壳体外部位置的扬声器播放警告语音提示。
作为本发明的一种优选方式,在S1后,所述方法还包括以下步骤:
S10、根据高清影像实时分析跟随壳体绑定的用户是否有位于道路;
S11、若有则根据高清影像实时分析道路盲道区域信息并根据道路盲道区域信息分析盲道是否有障碍物或处于危险区域;
S12、若有则控制设置于跟随壳体外部位置的扬声器播放移动警示语音并将高清影像包含的物体进行图片提取;
S13、将提取的图片进行文字转化并控制所述扬声器将转化的文字进行语音播放。
作为本发明的一种优选方式,在S1后,所述方法还包括以下步骤:
S14、根据高清影像实时分析跟随壳体绑定的用户是否有位于室外;
S15、若有则根据高清影像实时分析跟随壳体绑定的用户是否有丢失物品;
S16、若有则根据高清影像实时分析丢失物品信息并控制设置于跟随壳体外部位置的扬声器播放物品丢失语音以及丢失物品信息。
作为本发明的一种优选方式,在S2后,所述方法还包括以下步骤:
S23、根据高清影像实时分析跟随壳体绑定的用户手部触摸的物体是否为食品;
S24、若是则根据高清影像实时分析所述食品信息并根据分析出的食品信息联网搜索对应的食用方法或烹饪方法;
S25、控制设置于跟随壳体外部位置的扬声器播放食品信息以及对应的食用方法或烹饪方法。
一种基于信息抓取识别及大数据的智能辅助服务系统,使用权利要求1-5任一项所述的一种基于信息抓取识别及大数据的智能辅助服务方法,包括辅助装置以及处理器;
所述辅助装置包括跟随壳体、高清摄像头、热成像仪以及扬声器,所述跟随壳体可以设计为帽子、肩部上方装饰品以及胳膊装饰品等;所述高清摄像头设置于跟随壳体外部位置,用于摄取跟随壳体周围的环境影像;所述热成像仪设置于跟随壳体外部位置,用于获取跟随壳体周围的热成像图;所述扬声器设置于跟随壳体外部位置,用于播放语音信息;
所述处理器设置于跟随壳体内部位置,所述处理器包括:
无线模块,用于分别与高清摄像头、热成像仪、扬声器、用户外部设备、用户电器以及网络无线连接;
高清摄取模块,用于控制高清摄像头启动或关闭;
热成像模块,用于控制热成像仪启动或关闭;
信息分析模块,用于根据指定信息进行信息的处理和分析;
信息提取模块,用于提取指定信息包含的信息;
语音播放模块,用于控制扬声器播放指定语音信息;
物品搜索模块,用于联网搜索用户触摸物体的使用方法信息;
物品控制模块,用于控制用户多次点击的用户电器启动或关闭。
作为本发明的一种优选方式,所述处理器还包括:
警示语音模块,用于控制扬声器播放警示语音提示。
作为本发明的一种优选方式,所述处理器还包括:
图片提取模块,用于提取高清摄像头摄取的影像中包含的物体的图片;
图文转换模块,用于将图片转换为文字。
作为本发明的一种优选方式,所述处理器还包括:
食品搜索模块,用于联网搜索用户触摸食品的食用方法或烹饪方法。
本发明实现以下有益效果:
1.智能辅助服务系统启动完成后,实时识别绑定用户手部触摸的物体信息以及触摸物体的区域信息并通过扬声器将用户手部触摸的物体信息以及触摸物体的区域信息进行语音播报提醒,若用户手部触摸的物体为使用物品则搜索该物品的使用方法并利用扬声器进行播放提示用户,若用户手部触摸的物体为私有电器物体且用户手部多次点击后,控制扬声器播放即将启动语音提示并控制用户手部多次点击的物体进入使用状态;若用户手部待触摸的物体为危险物品则利用扬声器播放警告语音,通知用户立即停止触摸。
2.若分析出用户位于室外道路位置则识别用户周围道路的障碍物以及危险区域并将影像进行图片提取,然后将提取的图片进行文字转换并利用扬声器将转换的文字进行语音播放提醒用户;若分析出用户位于室外且分析出有物品丢失后,利用扬声器播放物品丢失、丢失物品信息以及物品掉落位置语音信息。
3.若识别出用户手部触摸的物体为食品则搜索该食品的食用方法或烹饪方法并利用扬声器播放该食品的食用方法或烹饪方法以提醒用户。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1为本发明其中一个示例提供的智能辅助服务方法的流程图;
图2为本发明其中一个示例提供的危险物品触摸示警方法的流程图;
图3为本发明其中一个示例提供的道路辅助服务方法的流程图;
图4为本发明其中一个示例提供的物品丢失辅助找回方法的流程图;
图5为本发明其中一个示例提供的食品识别及提示方法的流程图;
图6为本发明其中一个示例提供的智能辅助服务系统的连接关系图;
图7为本发明其中一个示例提供的跟随壳体的示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。
实施例一
参考图1-2,图6-7所示。
具体的,本实施例提供一种基于信息抓取识别及大数据的智能辅助服务方法,所述方法包括以下步骤:
S1、控制设置于跟随壳体10外部位置的高清摄像头11启动实时摄取高清影像并控制设置于跟随壳体10外部位置的热成像仪12启动实时获取周围的热成像图。
在S1中,具体在跟随壳体10处于启动状态后,处理器2包含高清摄取模块21控制设置于跟随壳体10外部位置的高清摄像头11启动实时摄取高清影像,所述高清影像是指高清摄像头11摄取的跟随壳体10周围的环境影像;同时所述处理器2包含的热成像模块22控制设置于跟随壳体10外部位置的热成像仪12启动实时获取周围的热成像图,且获取用户手部触摸后残留于物体位置的热量信息。
S2、根据热成像图实时分析跟随壳体10绑定的用户手部是否有触摸物体。
在S2中,具体在高清摄像头11以及热成像仪12启动完成后,所述处理器2包含的信息模块根据热成像图实时分析跟随壳体10绑定的用户手部是否有触摸物体,即分析是否有物体外部残留跟随壳体10绑定的用户手部触摸的热量。
S3、若有则根据高清影像以及热成像图实时分析用户手部触目的物体信息以及手部触摸区域信息并提取分析出的物体信息以及手部触摸区域信息。
在S3中,具体在信息分析模块23分析出所述用户手部有触摸物体后,所述信息分析模块23根据高清影像以及热成像图实时分析用户手部触目的物体信息以及手部触摸区域信息,在信息分析模块23分析完成后,所述处理器2包含的信息提取模块24提取信息分析模块23分析出的物体信息以及手部触摸区域信息。
S4、控制设置于跟随壳体10外部位置的扬声器13将所述物体信息以及手部触摸区域信息进行语音播放并根据高清影像分析用户触摸的物体是否为使用物品。
具体的,在信息提取模块24提取完成物体信息以及手部触摸区域信息后,所述处理器2包含的语音播放模块25控制设置于跟随壳体10外部位置的扬声器13将所述物体信息以及手部触摸区域信息进行语音播放,同时所述信息分析模块23根据高清影像分析用户触摸的物体是否为使用物品。
S5、若是则根据物体信息联网搜索用户触摸的物体的使用方法信息并控制所述扬声器13将所述物体的使用方法信息进行语音播放。
在S5中,具体在信息分析模块23分析出所述物体为使用物体后,所述处理器2包含的物品搜索模块26根据物体信息联网搜索用户触摸的物体的使用方法信息,在物品搜索模块26搜索完成使用方法信息后,所述语音播放模块25控制所述扬声器13将所述物体的使用方法信息进行语音播放。
S6、若根据高清影像分析出用户触摸的物体为用户私有电器物体则根据高清影像以及热成像图分析用户是否有用手部进行多次点击。
在S6中,具体在信息分析模块23根据高清影像分析出用户触摸的物体为用户私有电器物体后,其中所述电器物体包括但不限于电器以及电器配套的遥控器等;所述信息分析模块23根据高清影像以及热成像图分析用户是否有用手部进行多次点击。
S7、若有则控制所述扬声器13播放开始使用提示并控制用户手部多次点击的物体进入使用状态。
具体的,在信息分析模块23分析出用户有进出多次点击私有电器物体后,所述语音播放模块25控制所述扬声器13播放开始使用提示,在扬声器13语音播放完成后,所述处理器2包含的物品控制模块27控制用户手部多次点击的物体进入使用状态。
其中,本申请既可以用户视力障碍用户,也可以用于视力正常用户。
作为本发明的一种优选方式,在S2中,所述方法还包括以下步骤:
S20、根据高清影像实时分析跟随壳体10绑定的用户手部是否有准备触摸物体。
具体的,在高清摄像头11以及热成像仪12启动完成后,所述信息分析模块23根据高清影像实时分析跟随壳体10绑定的用户手部是否有准备触摸物体,即分析跟随壳体10绑定的用户手部是否有抬起且向物体位置移动。
S21、若有则根据高清影像实时分析用户手部待触摸的物体信息并根据所述物体信息分析是否为危险物品。
具体的,在信息分析模块23分析出所述用户手部有准备触摸物体后,所述信息分析模块23根据高清影像实时分析用户手部待触摸的物体信息,然后所述信息分析模块23根据所述物体信息分析是否为危险物品。
S22、若是则控制设置于跟随壳体10外部位置的扬声器13播放警告语音提示。
具体的,在信息分析模块23分析出所述物体为危险物品后,所述处理器2包含的警示语音模块28控制设置于跟随壳体10外部位置的扬声器13播放警告语音提示,以提醒用户,避免用户触摸危险物品造成伤害。
实施例二
参考图3-4,图6-7所示。
具体的,本实施例与实施例一基本上一致,区别之处在于,本实施例中,在S1后,所述方法还包括以下步骤:
S10、根据高清影像实时分析跟随壳体10绑定的用户是否有位于道路。
具体的,在高清摄像头11以及热成像仪12启动完成后,所述信息分析模块23根据高清影像实时分析跟随壳体10绑定的用户是否有位于道路位置。
S11、若有则根据高清影像实时分析道路盲道区域信息并根据道路盲道区域信息分析盲道是否有障碍物或处于危险区域。
具体的,在信息分析模块23分析出所述用户有位于道路位置后,所述信息分析模块23根据高清影像实时分析道路盲道区域信息,在分析出盲道区域信息后,所述信息分析模块23根据道路盲道区域信息分析盲道是否有障碍物或处于危险区域。
S12、若有则控制设置于跟随壳体10外部位置的扬声器13播放移动警示语音并将高清影像包含的物体进行图片提取。
具体的,在信息分析模块23分析出盲道有存在障碍物或危险区域后,所述语音播放模块25控制设置于跟随壳体10外部位置的扬声器13播放移动警示语音,同时所述处理器2包含的图片提取模块29将高清影像包含的物体进行图片提取。
S13、将提取的图片进行文字转化并控制所述扬声器13将转化的文字进行语音播放。
具体的,在图片提取模块29进行图片提取后,所述处理器2包含的图文转换模块30将所述图片提取模块29提取的图片进行文字转化,在图文转换模块30转换完成后,所述语音播放模块25控制所述扬声器13将转化的文字进行语音播放。
作为本发明的一种优选方式,在S1后,所述方法还包括以下步骤:
S14、根据高清影像实时分析跟随壳体10绑定的用户是否有位于室外。
具体的,在高清摄像头11以及热成像仪12启动完成后,所述信息分析模块23根据高清影像实时分析跟随壳体10绑定的用户是否有位于室外空间。
S15、若有则根据高清影像实时分析跟随壳体10绑定的用户是否有丢失物品。
具体的,在信息分析模块23分析出所述用户有位于室外空间后,所述信息分析模块23根据高清影像实时分析跟随壳体10绑定的用户是否有丢失物品,即分析所述用户身上是否有物体掉落于地面。
S16、若有则根据高清影像实时分析丢失物品信息并控制设置于跟随壳体10外部位置的扬声器13播放物品丢失语音以及丢失物品信息。
具体的,在信息分析模块23分析出所述用户有丢失物品后,所述信息分析模块23根据高清影像实时分析丢失物品信息,在信息分析模块23分析出丢失物品信息完成后,所述语音播放模块25控制设置于跟随壳体10外部位置的扬声器13播放物品丢失语音以及丢失物品信息,同时扬声器13播放物品掉落的位置信息,例如用户掉落钱包在身后2米位置,则扬声器13播放物品丢失,丢失的物品为钱包,丢失的钱包为身后2米位置的语音信息。
实施例三
参考图5-7所示。
具体的,本实施例与实施例一基本上一致,区别之处在于,本实施例中,在S2后,所述方法还包括以下步骤:
S23、根据高清影像实时分析跟随壳体10绑定的用户手部触摸的物体是否为食品。
具体的,在信息分析模块23分析出所述用户手部有触摸物体后,所述信息分析模块23根据高清影像实时分析跟随壳体10绑定的用户手部触摸的物体是否为食品。
S24、若是则根据高清影像实时分析所述食品信息并根据分析出的食品信息联网搜索对应的食用方法或烹饪方法。
具体的,在信息分析模块23分析出所述用户手部触摸的物体为食品后,所述信息分析模块23根据高清影像实时分析所述食品信息,在分析出食品信息后,所述食品搜索模块31根据信息分析模块23分析出的食品信息联网搜索对应的食用方法或烹饪方法。
S25、控制设置于跟随壳体10外部位置的扬声器13播放食品信息以及对应的食用方法或烹饪方法。
具体的,在食品搜索模块31搜索完成食用方法或烹饪方法后,所述语音播放模块25控制设置于跟随壳体10外部位置的扬声器13播放食品信息以及对应的食用方法或烹饪方法。
实施例四
参考图6-7所示。
具体的,本实施例提供一种基于信息抓取识别及大数据的智能辅助服务系统,使用一种基于信息抓取识别及大数据的智能辅助服务方法,包括辅助装置1以及处理器2;
所述辅助装置1包括跟随壳体10、高清摄像头11、热成像仪12以及扬声器13,所述跟随壳体10可以设计为帽子、肩部上方装饰品以及胳膊装饰品等;所述高清摄像头11设置于跟随壳体10外部位置,用于摄取跟随壳体10周围的环境影像;所述热成像仪12设置于跟随壳体10外部位置,用于获取跟随壳体10周围的热成像图;所述扬声器13设置于跟随壳体10外部位置,用于播放语音信息;
所述处理器2设置于跟随壳体10内部位置,所述处理器2包括:
无线模块20,用于分别与高清摄像头11、热成像仪12、扬声器13、用户外部设备、用户电器以及网络无线连接;
高清摄取模块21,用于控制高清摄像头11启动或关闭;
热成像模块22,用于控制热成像仪12启动或关闭;
信息分析模块23,用于根据指定信息进行信息的处理和分析;
信息提取模块24,用于提取指定信息包含的信息;
语音播放模块25,用于控制扬声器13播放指定语音信息;
物品搜索模块26,用于联网搜索用户触摸物体的使用方法信息;
物品控制模块27,用于控制用户多次点击的用户电器启动或关闭。
作为本发明的一种优选方式,所述处理器2还包括:
警示语音模块28,用于控制扬声器13播放警示语音提示。
作为本发明的一种优选方式,所述处理器2还包括:
图片提取模块29,用于提取高清摄像头11摄取的影像中包含的物体的图片;
图文转换模块30,用于将图片转换为文字。
作为本发明的一种优选方式,所述处理器2还包括:
食品搜索模块31,用于联网搜索用户触摸食品的食用方法或烹饪方法。
应理解,在实施例四中,上述各个模块的具体实现过程可与上述方法实施例(实施例一至实施例四)的描述相对应,此处不再详细描述。
上述实施例四所提供的系统,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上诉功能分配由不同的功能模块完成,即将系统的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
上述实施例只为说明本发明的技术构思及特点,其目的是让熟悉该技术领域的技术人员能够了解本发明的内容并据以实施,并不能以此来限制本发明的保护范围。凡根据本发明精神实质所作出的等同变换或修饰,都应涵盖在本发明的保护范围之内。

Claims (9)

1.一种基于信息抓取识别及大数据的智能辅助服务方法,其特征在于,所述方法包括以下步骤:
S1、控制设置于跟随壳体外部位置的高清摄像头启动实时摄取高清影像并控制设置于跟随壳体外部位置的热成像仪启动实时获取周围的热成像图;
S2、根据热成像图实时分析跟随壳体绑定的用户手部是否有触摸物体;
S3、若有则根据高清影像以及热成像图实时分析用户手部触目的物体信息以及手部触摸区域信息并提取分析出的物体信息以及手部触摸区域信息;
S4、控制设置于跟随壳体外部位置的扬声器将所述物体信息以及手部触摸区域信息进行语音播放并根据高清影像分析用户触摸的物体是否为使用物品;
S5、若是则根据物体信息联网搜索用户触摸的物体的使用方法信息并控制所述扬声器将所述物体的使用方法信息进行语音播放;
S6、若根据高清影像分析出用户触摸的物体为用户私有电器物体则根据高清影像以及热成像图分析用户是否有用手部进行多次点击;
S7、若有则控制所述扬声器播放开始使用提示并控制用户手部多次点击的物体进入使用状态。
2.根据权利要求1所述的一种基于信息抓取识别及大数据的智能辅助服务方法,其特征在于,在S2中,所述方法还包括以下步骤:
S20、根据高清影像实时分析跟随壳体绑定的用户手部是否有准备触摸物体;
S21、若有则根据高清影像实时分析用户手部待触摸的物体信息并根据所述物体信息分析是否为危险物品;
S22、若是则控制设置于跟随壳体外部位置的扬声器播放警告语音提示。
3.根据权利要求1所述的一种基于信息抓取识别及大数据的智能辅助服务方法,其特征在于,在S1后,所述方法还包括以下步骤:
S10、根据高清影像实时分析跟随壳体绑定的用户是否有位于道路;
S11、若有则根据高清影像实时分析道路盲道区域信息并根据道路盲道区域信息分析盲道是否有障碍物或处于危险区域;
S12、若有则控制设置于跟随壳体外部位置的扬声器播放移动警示语音并将高清影像包含的物体进行图片提取;
S13、将提取的图片进行文字转化并控制所述扬声器将转化的文字进行语音播放。
4.根据权利要求1所述的一种基于信息抓取识别及大数据的智能辅助服务方法,其特征在于,在S1后,所述方法还包括以下步骤:
S14、根据高清影像实时分析跟随壳体绑定的用户是否有位于室外;
S15、若有则根据高清影像实时分析跟随壳体绑定的用户是否有丢失物品;
S16、若有则根据高清影像实时分析丢失物品信息并控制设置于跟随壳体外部位置的扬声器播放物品丢失语音以及丢失物品信息。
5.根据权利要求1所述的一种基于信息抓取识别及大数据的智能辅助服务方法,其特征在于,在S2后,所述方法还包括以下步骤:
S23、根据高清影像实时分析跟随壳体绑定的用户手部触摸的物体是否为食品;
S24、若是则根据高清影像实时分析所述食品信息并根据分析出的食品信息联网搜索对应的食用方法或烹饪方法;
S25、控制设置于跟随壳体外部位置的扬声器播放食品信息以及对应的食用方法或烹饪方法。
6.一种基于信息抓取识别及大数据的智能辅助服务系统,使用权利要求1-5任一项所述的一种基于信息抓取识别及大数据的智能辅助服务方法,包括辅助装置以及处理器,其特征在于:
所述辅助装置包括跟随壳体、高清摄像头、热成像仪以及扬声器,所述跟随壳体可以设计为帽子、肩部上方装饰品以及胳膊装饰品等;所述高清摄像头设置于跟随壳体外部位置,用于摄取跟随壳体周围的环境影像;所述热成像仪设置于跟随壳体外部位置,用于获取跟随壳体周围的热成像图;所述扬声器设置于跟随壳体外部位置,用于播放语音信息;
所述处理器设置于跟随壳体内部位置,所述处理器包括:
无线模块,用于分别与高清摄像头、热成像仪、扬声器、用户外部设备、用户电器以及网络无线连接;
高清摄取模块,用于控制高清摄像头启动或关闭;
热成像模块,用于控制热成像仪启动或关闭;
信息分析模块,用于根据指定信息进行信息的处理和分析;
信息提取模块,用于提取指定信息包含的信息;
语音播放模块,用于控制扬声器播放指定语音信息;
物品搜索模块,用于联网搜索用户触摸物体的使用方法信息;
物品控制模块,用于控制用户多次点击的用户电器启动或关闭。
7.根据权利要求6所述的一种基于信息抓取识别及大数据的智能辅助服务系统,其特征在于,所述处理器还包括:
警示语音模块,用于控制扬声器播放警示语音提示。
8.根据权利要求6所述的一种基于信息抓取识别及大数据的智能辅助服务系统,其特征在于,所述处理器还包括:
图片提取模块,用于提取高清摄像头摄取的影像中包含的物体的图片;
图文转换模块,用于将图片转换为文字。
9.根据权利要求6所述的一种基于信息抓取识别及大数据的智能辅助服务系统,其特征在于,所述处理器还包括:
食品搜索模块,用于联网搜索用户触摸食品的食用方法或烹饪方法。
CN202010331291.8A 2020-04-24 2020-04-24 基于信息抓取识别及大数据的智能辅助服务方法及其系统 Withdrawn CN111522260A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010331291.8A CN111522260A (zh) 2020-04-24 2020-04-24 基于信息抓取识别及大数据的智能辅助服务方法及其系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010331291.8A CN111522260A (zh) 2020-04-24 2020-04-24 基于信息抓取识别及大数据的智能辅助服务方法及其系统

Publications (1)

Publication Number Publication Date
CN111522260A true CN111522260A (zh) 2020-08-11

Family

ID=71904441

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010331291.8A Withdrawn CN111522260A (zh) 2020-04-24 2020-04-24 基于信息抓取识别及大数据的智能辅助服务方法及其系统

Country Status (1)

Country Link
CN (1) CN111522260A (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040810A (zh) * 2007-04-19 2007-09-26 上海交通大学 基于物体辨识的盲人生活辅助装置
KR20120016479A (ko) * 2010-08-16 2012-02-24 한국표준과학연구원 열화상 좌표를 이용한 보안용 카메라 추적 감시 시스템 및 방법
CN202795228U (zh) * 2012-08-21 2013-03-13 北京意象致远科技有限公司 一种触摸桌
CN103019475A (zh) * 2012-12-11 2013-04-03 武汉智慧城市研究院股份有限公司 一种新型人机交互系统
CN103167082A (zh) * 2012-06-19 2013-06-19 深圳市金立通信设备有限公司 一种便于老年人购物的手机辅助系统及方法
CN104364800A (zh) * 2012-03-30 2015-02-18 前视红外系统股份公司 促进关联的可视光和红外线(ir)图像信息的分析和解释
CN104983511A (zh) * 2015-05-18 2015-10-21 上海交通大学 针对全盲视觉障碍者的语音帮助智能眼镜系统
CN105278658A (zh) * 2014-06-13 2016-01-27 广州杰赛科技股份有限公司 一种基于热敏的显示增强方法
CN106412522A (zh) * 2016-11-02 2017-02-15 北京弘恒科技有限公司 对室内外环境中物体的视频分析检测方法及系统
CN106773051A (zh) * 2016-12-28 2017-05-31 太仓红码软件技术有限公司 展示ar标识物虚拟营养信息的增强现实装置及其方法
CN107536699A (zh) * 2017-08-16 2018-01-05 广东小天才科技有限公司 一种用于盲人的信息提示的方法、装置及电子设备
US20180150685A1 (en) * 2016-11-30 2018-05-31 Whirlpool Corporation Interaction recognition and analysis system
US20190000382A1 (en) * 2017-06-29 2019-01-03 Goddess Approved Productions Llc System and method for analyzing items using image recognition, optical character recognition, voice recognition, manual entry, and bar code scanning technology
CN210222780U (zh) * 2019-10-22 2020-03-31 嘉应学院 一种人脸及手型手势的双模态识别系统

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040810A (zh) * 2007-04-19 2007-09-26 上海交通大学 基于物体辨识的盲人生活辅助装置
KR20120016479A (ko) * 2010-08-16 2012-02-24 한국표준과학연구원 열화상 좌표를 이용한 보안용 카메라 추적 감시 시스템 및 방법
CN104364800A (zh) * 2012-03-30 2015-02-18 前视红外系统股份公司 促进关联的可视光和红外线(ir)图像信息的分析和解释
CN103167082A (zh) * 2012-06-19 2013-06-19 深圳市金立通信设备有限公司 一种便于老年人购物的手机辅助系统及方法
CN202795228U (zh) * 2012-08-21 2013-03-13 北京意象致远科技有限公司 一种触摸桌
CN103019475A (zh) * 2012-12-11 2013-04-03 武汉智慧城市研究院股份有限公司 一种新型人机交互系统
CN105278658A (zh) * 2014-06-13 2016-01-27 广州杰赛科技股份有限公司 一种基于热敏的显示增强方法
CN104983511A (zh) * 2015-05-18 2015-10-21 上海交通大学 针对全盲视觉障碍者的语音帮助智能眼镜系统
CN106412522A (zh) * 2016-11-02 2017-02-15 北京弘恒科技有限公司 对室内外环境中物体的视频分析检测方法及系统
US20180150685A1 (en) * 2016-11-30 2018-05-31 Whirlpool Corporation Interaction recognition and analysis system
CN106773051A (zh) * 2016-12-28 2017-05-31 太仓红码软件技术有限公司 展示ar标识物虚拟营养信息的增强现实装置及其方法
US20190000382A1 (en) * 2017-06-29 2019-01-03 Goddess Approved Productions Llc System and method for analyzing items using image recognition, optical character recognition, voice recognition, manual entry, and bar code scanning technology
CN107536699A (zh) * 2017-08-16 2018-01-05 广东小天才科技有限公司 一种用于盲人的信息提示的方法、装置及电子设备
CN210222780U (zh) * 2019-10-22 2020-03-31 嘉应学院 一种人脸及手型手势的双模态识别系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
D. IWAI: "Document search support by making physical documents", 《VIRTUAL REALITY》 *
KURZ, DANIEL: "Thermal Touch: Thermography-Enabled Everywhere Touch Interfaces for Mobile Augmented Reality Applications", 《2014 IEEE INTERNATIONAL SYMPOSIUM ON MIXED AND AUGMENTED REALITY (ISMAR) - SCIENCE AND TECHNOLOGY》 *
梅寒: "《基于Unity3D的智能家居》", 《沈阳大学学报》 *

Similar Documents

Publication Publication Date Title
Jafri et al. Computer vision-based object recognition for the visually impaired in an indoors environment: a survey
CN107480236B (zh) 一种信息查询方法、装置、设备和介质
CN104820488B (zh) 用户定向式个人信息助理
US10636326B2 (en) Image processing apparatus, image processing method, and computer-readable storage medium for displaying three-dimensional virtual objects to modify display shapes of objects of interest in the real world
US20140285400A1 (en) Information processing apparatus and storage medium
CN107766403B (zh) 一种相册处理方法、移动终端以及计算机可读存储介质
CN103136986A (zh) 手语识别方法及系统
CN104219628B (zh) 一种基于增强现实与智能手机的盲人信息服务方法及系统
KR20150112708A (ko) 디스플레이 장치 및 그의 동작 방법
CN105825568A (zh) 便携式智能交互设备
KR101929875B1 (ko) 실시간 현장 동영상 중계를 이용한 시각장애인 안내 서비스 제공 방법
CN105825112A (zh) 移动终端的解锁方法及装置
JP2009252215A (ja) 警備装置および情報表示方法
US11289084B2 (en) Sensor based semantic object generation
CN109189986A (zh) 信息推荐方法、装置、电子设备和可读存储介质
CN109033991A (zh) 一种图像识别方法及装置
CN107290975A (zh) 一种家居智能机器人
CN105843595A (zh) 一种界面显示方法、装置及终端
CN104915428B (zh) 一种智能腕带设备信息查询、推送的方法、装置及智能腕带设备
CN107704851B (zh) 人物识别方法、公共传媒展示装置、服务器和系统
CN106777071B (zh) 一种图像识别获取参考信息的方法和装置
CN111522260A (zh) 基于信息抓取识别及大数据的智能辅助服务方法及其系统
CN110222245A (zh) 一种提示方法及装置
CN110262663B (zh) 基于眼球追踪技术的日程生成方法及相关产品
CN111611812B (zh) 翻译成盲文

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20200811

WW01 Invention patent application withdrawn after publication