CN107171872B - 一种智能家居中用户行为预测方法 - Google Patents

一种智能家居中用户行为预测方法 Download PDF

Info

Publication number
CN107171872B
CN107171872B CN201710590650.XA CN201710590650A CN107171872B CN 107171872 B CN107171872 B CN 107171872B CN 201710590650 A CN201710590650 A CN 201710590650A CN 107171872 B CN107171872 B CN 107171872B
Authority
CN
China
Prior art keywords
user
data
time point
characteristic data
sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710590650.XA
Other languages
English (en)
Other versions
CN107171872A (zh
Inventor
叶伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changzhou bailongzhi Technology Co.,Ltd.
Original Assignee
Shanghai Perspicace Intelligence Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Perspicace Intelligence Technology Co ltd filed Critical Shanghai Perspicace Intelligence Technology Co ltd
Priority to CN201710590650.XA priority Critical patent/CN107171872B/zh
Publication of CN107171872A publication Critical patent/CN107171872A/zh
Application granted granted Critical
Publication of CN107171872B publication Critical patent/CN107171872B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/147Network analysis or design for predicting network behaviour
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Automation & Control Theory (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

一种智能家居中用户行为预测方法,步骤一,在室内设置的一个或多个传感器,通过传感器获取的数据识别用户身份,收集该用户的特征数据;步骤二,将所述传感器获取的数据归类为包括图像、声音、姿态和位置维度,并以时间线关联逻辑,然后发给后台系统;步骤三,后台系统根据所获取的同一时间点上的所有维度数据进行综合数据清洗、挖掘并与下一个时间点的相关数据进行比较,同时预判出该用户在未来某一时间点可能做出的行为或提出的需求;步骤四,在用户到达该未来时间点后,系统会根据在这一时间点获取的所有维度的数据信息重新校验之前所做的预判。

Description

一种智能家居中用户行为预测方法
技术领域
本发明属于智能家居技术领域,特别涉及一种智能家居中用户行为预测方法。
背景技术
近年来,人工智能发展突飞猛进,得益于互联网大数据和云计算的快速发展,深度学习已经作为人工智能发展的核心驱动。但在日常的工作生活中,尤其是家庭生活的智能家居方面,人工智能的实际应用还停留在表面阶段,更多地强调物联、家电控制等,如用手机APP控制家里所有电灯的开关,无人在家时扫地机器人自动打扫卫生等,所以现有的智能家居系统仍然停留在简单的电器开关控制上,用户的使用体验还有待进一步提高。
发明内容
一种智能家居中用户行为预测方法,该方法包括以下步骤:
步骤一,在室内设置的一个或多个传感器,通过传感器获取的数据识别用户身份,收集该用户的特征数据;
步骤二,将所述传感器获取的数据归类为包括图像、声音、姿态和位置维度,并以时间线关联逻辑,然后发给后台系统;
步骤三,后台系统根据所获取的同一时间点上的所有维度数据进行综合数据清洗、挖掘并与下一个时间点的相关数据进行比较,同时预判出该用户在未来某一时间点可能做出的行为或提出的需求;
步骤四,在用户到达该未来时间点后,系统会根据在这一时间点获取的所有维度的数据信息重新校验之前所做的预判。
重复步骤一至四,直至对用户行为趋势的预判正确率达到95%以上。
在步骤一中,传感器收集到的用户特征数据,均会打上相应的时间点标签,使得所有的数据都可以时间轴进行关联逻辑。
在所述的传感器之间,通过本地网络或者云端网络进行数据交换,以便获取用户更全面的特征数据。
当后台系统对用户未来行为需求的推断成功概率达到95%之后,后台系统即会发出指令,要求前端设备跟用户主动进行交互,以便提供相关的服务。
所述传感器包括:
摄像头,用于抓取用户图像特征数据;
麦克风,用于获取用户声音特征数据;
实感3D摄像头,用于抓取用户姿态特征数据;
超声波传感器,用于获取用户位置特征数据。
所述的用户身份的识别过程是:
通过摄像头检测到拍摄范围内的人体,抓取人体面部特征,与样本库中预存的用户照片进行对比,计算出人脸匹配系数,初步判定该人体是否与某一授权用户一致,判断拥有权限的用户是否存在拍摄范围内;
使用麦克风接收用户语音,将音频模拟信号转换为数字序列,再将数字序列与样本库中预存的用户声纹进行对比,计算出声纹匹配系数,对人脸匹配系数与声纹识别匹配系数再次进行计算,计算出匹配程度,从而判断该用户身份。
通过摄像头检测到拍摄范围内的用户,抓取用户图像特征数据;
使用麦克风接收用户语音,通过对用户声音的采集、转换,将音频模拟信号转换为数字序列,形成用户声音特征数据;
使用实感3D摄像头检测到拍摄范围内的用户,抓取用户姿态特征数据,用户姿态含连续姿态;
使用超声波传感器检测检测范围内的用户位置,通过超声波采集、转换,将超声波音频信号转化为数字序列,行程用户位置特征数据。
步骤三中的预判采用的推算算法包括:
以m为时间间隔进行数据收集,先积累用户前m×n时间段的特征数据,然后推断出这m×n组特征数据的逻辑关联;
然后做出对m×n+1时间点的特征数据推断,之后则将推断出的m×n+1时间点特征数据与经过传感器获取的m×n+1时间点特征数据进行比对,该比对包括步骤:
首先,尝试单维度数据推断,即根据1~m×n时间段的特征数据,用单维度数据先找出中间的规律,然后推断m×n+1时间点的用户行为趋势,
如比对不正确,先把m×n+1时间点的信息采集下来放在库中,然后,用两个维度数据再去推断m×n+1时间点用户行为趋势,如果比对仍然不正确,就用三个维度数据进行推断,以此类推,直至推断正确;
如比对正确,先把正确的推断逻辑放在正确库内,然后依旧用多个维度来推导m×n+1时间点的用户行为趋势,把正确推断出m×n+1时间点用户行为趋势的推断逻辑全部收录到正确库中,数量为N;
其次,使用这N个逻辑,根据2~m×n+1秒的特征数据,来推断m×n+2时间点的用户行为趋势,通过这种推断算法去复核、筛选不符合常理的推断。
本发明通过传感器收集数据并推断用户未来行为需求的趋势,是人工智能深度学习在用户日常家居生活方面的针对性应用,目的在于通过大数据收集和云计算,后台系统能够正确推断出用户未来行为需求的趋势,并对前端设备发出指令,为用户主动提供相关服务,提高生活便利。
附图说明
通过参考附图阅读下文的详细描述,本发明示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中,以示例性而非限制性的方式示出了本发明的若干实施方式,其中:
图1是本发明传感器获取特征数据示意图。
图2是本发明实施例中后台系统的推断算法流程示意图。
图3是本发明预测方法流程示意图。
具体实施方式
如图3所示,本发明通过传感器收集数据并推断用户未来行为需求的趋势的方法,其特征在于,包括以下步骤:
步骤一,通过布置在有限空间内的固定位置的一个或多个传感器,获取用户身份,并在身份识别后,再收集该用户的各方面特征数据;
步骤二,传感器获取数据之后,通过将这些数据归类为图像、声音、姿态(含连续姿态)、位置等维度(包括但不限于这四个维度),并以时间线关联逻辑,然后发给后台系统;
步骤三,后台系统根据所获取的同一时间点上的所有维度数据进行综合数据清洗、挖掘并与下一个时间点的相关数据进行比较,同时预判出该用户在未来某一时间点可能做出的行为或提出的需求;
步骤四,在用户到达该未来时间点后,系统会根据在这一时间点获取的所有维度的数据信息重新校验之前所做的预判;
步骤五:重复上述步骤,直至对用户行为趋势的预判正确率达到95%以上。
传感器需要布置在封闭或者半封闭的空间内,且该空间完全处于传感器的有效测量范围内,如住宅房间、办公室等,当用户处于此空间时,传感器能有效获取用户数据。在有限空间内布置的一个或多个传感器,必须以固定位置存在,以获取用户在空间内的特征数据。传感器收集用户的图像、声音、姿态(含连续姿态)、位置等维度(包括但不限于这四个维度)特征数据。
传感器收集到的用户特征数据,均会打上相应的时间点标签,所有的数据都以时间轴进行关联逻辑。后台系统对用户未来行为需求做出推断,此推断的基础即为以某一时间点标签上的所有维度的特征数据。
某一区域的传感器,和同类传感器或者不同类传感器之间,可以通过本地网络或者云端网络进行数据交换,以便获取用户的全息化特征数据,获取的特征数据越多,后台系统推断用户未来行为需求的正确率就会越高。
当后台系统对用户未来行为需求的推断成功概率达到95%之后,后台系统即会发出指令,要求前端设备跟用户主动进行交互,以便提供相关的服务。
如图1所示的用户特征数据收集。
通过摄像头检测到拍摄范围内的用户,抓取用户图像特征数据。
使用麦克风接收用户语音,通过对用户声音的采集、转换,将音频模拟信号转换为数字序列,形成用户声音特征数据。
使用实感3D摄像头检测到拍摄范围内的用户,抓取用户姿态(含连续姿态)特征数据。
使用集成在固定位置终端设备内的超声波传感器检测一定范围内的用户位置,通过超声波采集、转换,将超声波音频信号转化为数字序列,行程用户位置特征数据。
使用其他传感器获取的其他用户数据。
将以上特征数据以时间线关联逻辑,并打上相应的时间点标签。
如图2所示的后台系统推断算法。
假设以秒为单位进行数据收集,后台系统会先积累用户前1000秒的特征数据,然后推断出这1000组特征数据的逻辑关联,然后系统会做出对1001秒的特征数据推断,之后则将其推断的1001秒特征数据与经过传感器获取的1001秒特征数据进行比对,包括步骤:
首先,系统尝试单维度数据推断,即根据1-1000秒的特征数据,用单维度数据先找出中间它认为的规律,然后推断1001秒的用户行为趋势,如比对不正确,系统会先把1001秒的信息采集下来放在库中。然后,用两个维度数据再去推断1001秒用户行为趋势,如果比对仍然不正确,就用三个维度数据进行推断,以此类推,直至推断正确。
如比对正确,系统会先把正确的逻辑放在正确库内,然后依旧用多个维度来推导1001秒的用户行为趋势。系统会把正确推断出1001秒用户行为趋势的逻辑全部收录到正确库中,数量为N。
其次,系统将使用这个N个逻辑,根据2-1001秒的特征数据,来推断1002秒的用户行为趋势。
通过这种推断算法去复核、筛选不符合常理的推断。比如说它工作了一天(86400秒),系统就能知道哪些推断是准确的。一个动作多次重复,它就能对单一的用户行为趋势做出准确的推断。
推断算法必须依靠大数据+云计算才能完成,因为数据的多维度,造成参与演算的数据量将会非常大,只有依靠云计算才能完成。
关于推断正确率,单一数据推断的准确率必须超过99.99%,然后然后在此基础上再叠加到不同需求,最后多维度数据推断成功率要求超过95%。
关于计算速度,云计算的数据推断时间远低于1秒,同时,系统会根据正确的推断逻辑编排公式,对用户行为趋势进行验证。
值得说明的是,虽然前述内容已经参考若干具体实施方式描述了本发明创造的精神和原理,但是应该理解,本发明并不限于所公开的具体实施方式,对各方面的划分也不意味着这些方面中的特征不能组合,这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。

Claims (1)

1.一种智能家居中用户行为预测方法,其特征在于,该方法包括以下步骤:
步骤一,在室内设置的一个或多个传感器,通过传感器获取的数据识别用户身份,收集该用户的特征数据;
步骤二,将所述传感器获取的数据归类为包括图像、声音、姿态和位置维度,并以时间线关联逻辑,然后发给后台系统;
步骤三,后台系统根据所获取的同一时间点上的所有维度数据进行综合数据清洗、挖掘并与下一个时间点的相关数据进行比较,同时预判出该用户在未来某一时间点可能做出的行为或提出的需求;
步骤四,在用户到达该未来时间点后,系统会根据在这一时间点获取的所有维度的数据信息重新校验之前所做的预判;
重复步骤一至四,直至对用户行为趋势的预判正确率达到95%以上,
其中,在步骤一中,传感器收集到的用户特征数据,均会打上相应的时间点标签,使得所有的数据都可以时间轴进行关联逻辑,
在所述的传感器之间,通过本地网络或者云端网络进行数据交换,以便获取用户更全面的特征数据,所述传感器可以是同类的,也可以是不同类的,传感器类型包括包括:摄像头,用于抓取用户图像特征数据;麦克风,用于获取用户声音特征数据;实感3D摄像头,用于抓取用户姿态特征数据;超声波传感器,用于获取用户位置特征数据,
传感器布置在封闭或者半封闭的空间内,且该空间完全处于传感器的有效测量范围内,传感器以固定位置布置,以获取用户在空间内的特征数据,使得传感器收集用户的图像、声音、连续姿态、位置维度的特征数据,
当后台系统对用户未来行为需求的推断成功概率达到95%之后,后台系统即会发出指令,要求前端设备跟用户主动进行交互,以便提供相关的服务,
所述的用户身份的识别过程是:
通过摄像头检测到拍摄范围内的人体并抓取人体面部特征,与样本库中预存的用户特征点进行对比,计算出人脸匹配系数,初步判定该人体是否与某一授权用户一致;
使用麦克风接收用户语音,将音频模拟信号转换为数字序列,再将数字序列与样本库中预存的用户声纹进行对比,计算出声纹匹配系数,对人脸匹配系数与声纹识别匹配系数再次进行计算,计算出匹配程度,从而判断该用户身份,
通过摄像头检测到拍摄范围内的用户,抓取用户图像特征数据;
使用麦克风接收用户语音,通过对用户声音的采集、转换,将音频模拟信号转换为数字序列,形成用户声音特征数据;
使用实感3D摄像头检测到拍摄范围内的用户,抓取用户姿态特征数据,用户姿态含连续姿态;
使用超声波传感器检测检测范围内的用户位置,通过超声波采集、转换,将超声波音频信号转化为数字序列,行程用户位置特征数据,
步骤三中的预判采用的推算算法包括:
以m为时间间隔进行数据收集,先积累用户前m×n时间段的特征数据,然后推断出这m×n组特征数据的逻辑关联;
然后做出对m×n+1时间点的特征数据推断,之后则将推断出的m×n+1时间点特征数据与经过传感器获取的m×n+1时间点特征数据进行比对,该比对包括步骤:
首先,尝试单维度数据推断,即根据1~m×n时间段的特征数据,用单维度数据先找出中间的规律,然后推断m×n+1时间点的用户行为趋势,
如比对不正确,先把m×n+1时间点的信息采集下来放在库中,然后,用两个维度数据再去推断m×n+1时间点用户行为趋势,如果比对仍然不正确,就用三个维度数据进行推断,以此类推,直至推断正确;
如比对正确,先把正确的推断逻辑放在正确库内,然后依旧用多个维度来推导m×n+1时间点的用户行为趋势,把正确推断出m×n+1时间点用户行为趋势的推断逻辑全部收录到正确库中,数量为N;
其次,使用这N个逻辑,根据2~m×n+1秒的特征数据,来推断m×n+2时间点的用户行为趋势,通过这种推断算法去复核、筛选不符合常理的推断。
CN201710590650.XA 2017-07-19 2017-07-19 一种智能家居中用户行为预测方法 Active CN107171872B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710590650.XA CN107171872B (zh) 2017-07-19 2017-07-19 一种智能家居中用户行为预测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710590650.XA CN107171872B (zh) 2017-07-19 2017-07-19 一种智能家居中用户行为预测方法

Publications (2)

Publication Number Publication Date
CN107171872A CN107171872A (zh) 2017-09-15
CN107171872B true CN107171872B (zh) 2020-06-02

Family

ID=59817223

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710590650.XA Active CN107171872B (zh) 2017-07-19 2017-07-19 一种智能家居中用户行为预测方法

Country Status (1)

Country Link
CN (1) CN107171872B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109752960A (zh) * 2017-11-08 2019-05-14 中兴通讯股份有限公司 一种智能家居联动控制方法及装置
CN108280489A (zh) * 2018-02-12 2018-07-13 中国银行股份有限公司 一种样本数据生成方法及装置
CN108921096A (zh) * 2018-06-29 2018-11-30 北京百度网讯科技有限公司 时间跟踪方法、装置、设备及计算机可读介质
KR20200013152A (ko) * 2018-07-18 2020-02-06 삼성전자주식회사 이전에 대화를 수집한 결과를 기반으로 인공 지능 서비스를 제공하는 전자 장치 및 방법
CN109348421B (zh) * 2018-08-14 2021-02-05 中国科学院计算技术研究所 一种管控监测方法和系统
CN109379259B (zh) * 2018-09-27 2020-12-15 四川长虹电器股份有限公司 一种根据声音设置智能家居设备局域网地址的方法
CN109212991A (zh) * 2018-10-10 2019-01-15 安徽省鹏徽物业管理有限公司 一种智能家居远程控制系统及智能家居服务器
CN109492595B (zh) * 2018-11-19 2020-10-16 浙江传媒学院 适用于固定群体的行为预测方法和系统
CN109726532B (zh) * 2018-12-22 2023-05-26 成都毅创空间科技有限公司 一种基于人工智能行为预测的安全管理方法
CN109613902B (zh) * 2019-02-26 2020-11-06 网宿科技股份有限公司 智能家居系统及控制智能家居设备的方法和云服务器
CN111306803B (zh) * 2020-03-01 2021-09-17 乐清市智格电子科技有限公司 基于大数据的水源供给控制系统及方法
CN115877723A (zh) * 2021-09-27 2023-03-31 华为技术有限公司 家庭设备控制方法、相关装置及系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103218442A (zh) * 2013-04-22 2013-07-24 中山大学 一种基于移动设备传感器数据的生活模式分析方法及系统
CN106383450A (zh) * 2016-11-10 2017-02-08 北京工商大学 一种基于大数据的智能家居用户行为分析系统及方法
CN106599866B (zh) * 2016-12-22 2020-06-02 上海百芝龙网络科技有限公司 一种多维度用户身份识别方法

Also Published As

Publication number Publication date
CN107171872A (zh) 2017-09-15

Similar Documents

Publication Publication Date Title
CN107171872B (zh) 一种智能家居中用户行为预测方法
CN107506684B (zh) 步态识别方法及装置
Zhou et al. Activity analysis, summarization, and visualization for indoor human activity monitoring
CN110135319A (zh) 一种异常行为检测方法及其系统
Chen et al. A fall detection system based on infrared array sensors with tracking capability for the elderly at home
JP2017156886A (ja) 画像間類似度を考慮して物体を追跡する装置、プログラム及び方法
CN112001347B (zh) 一种基于人体骨架形态与检测目标的动作识别方法
CN104616002A (zh) 用于年龄段判断的面部识别设备
CN110414376B (zh) 更新人脸识别模型的方法、人脸识别相机及服务器
CN109358546B (zh) 家用电器的控制方法、装置和系统
CN111291671B (zh) 手势控制方法及相关设备
Maekawa et al. WristSense: wrist-worn sensor device with camera for daily activity recognition
CN111401106A (zh) 一种行为识别方法、装置及设备
CN109595757B (zh) 空调器的控制方法、装置及具有其的空调器
CN106503631A (zh) 一种人群分析方法及计算机设备
Jin et al. Essential body-joint and atomic action detection for human activity recognition using longest common subsequence algorithm
CN113378691A (zh) 基于实时用户行为分析的智能家居管理系统及方法
Zhou et al. Video-based activity monitoring for indoor environments
Wongpatikaseree et al. Range-based algorithm for posture classification and fall-down detection in smart homecare system
CN116311357A (zh) 基于MBN-Transformer模型的不平衡牛身数据的双边识别方法
García et al. Algorithm for the Recognition of a Silhouette of a Person from an Image
CN110742559B (zh) 一种基于脑电波检测的扫地机器人控制方法及系统
CN115588149A (zh) 基于匹配优先级的跨相机多目标级联匹配方法
CN113894779A (zh) 一种应用于机器人交互的多模态数据处理方法
Ghaffarzadegan et al. Occupancy Detection in Commercial and Residential Environments Using Audio Signal.

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20180530

Address after: 200126 Yaohua Road, Pudong New Area, Shanghai, Room 204, room 560

Applicant after: Ye Wei

Address before: 200050 West Yan'an Road, Changning District, Changning District, Shanghai, 4

Applicant before: Shanghai Century Network Technology Co., Ltd.

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20190403

Address after: Room 1287, 1/1, 8 Block 33 Guangshun Road, Changning District, Shanghai, 2003

Applicant after: Shanghai Century Network Technology Co., Ltd.

Address before: 200126 Yaohua Road, Pudong New Area, Shanghai, Room 204, room 560

Applicant before: Ye Wei

GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210325

Address after: 213000 No.2 Hongyang Road, Tianning District, Changzhou City, Jiangsu Province

Patentee after: Changzhou bailongzhi Technology Co.,Ltd.

Address before: Room 1287, 1/1, 8 Block 33 Guangshun Road, Changning District, Shanghai, 2003

Patentee before: SHANGHAI PERSPICACE INTELLIGENCE TECHNOLOGY Co.,Ltd.