CN112327659A - 一种基于5g的智能家居控制方法、装置以及系统 - Google Patents
一种基于5g的智能家居控制方法、装置以及系统 Download PDFInfo
- Publication number
- CN112327659A CN112327659A CN202011350508.6A CN202011350508A CN112327659A CN 112327659 A CN112327659 A CN 112327659A CN 202011350508 A CN202011350508 A CN 202011350508A CN 112327659 A CN112327659 A CN 112327659A
- Authority
- CN
- China
- Prior art keywords
- user
- information
- pictures
- article
- acquiring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000004891 communication Methods 0.000 claims abstract description 4
- 238000012549 training Methods 0.000 claims description 32
- 230000000877 morphologic effect Effects 0.000 claims description 15
- 230000009471 action Effects 0.000 description 14
- 230000006399 behavior Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000013145 classification model Methods 0.000 description 5
- 239000003086 colorant Substances 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Manufacturing & Machinery (AREA)
- Quality & Reliability (AREA)
- Image Analysis (AREA)
Abstract
本发明涉及智能家居技术领域,尤其是涉及一种基于5G的智能家居控制方法、装置以及系统,所述方法应用于一种基于5G的智能家居控制系统,所述系统包括智能终端,以及多个摄像头,多个摄像头与所述智能终端通过5G网络通讯连接,其方法包括:当用户需要寻找物品时,获取当前用户输入的寻找信息;识别所述当前用户的身份信息;根据所述寻找信息和所述身份信息,从多个摄像头的历史画面中获取目标画面;根据所述目标画面,获取物品所在的位置信息,并输出位置信息,以使用户根据所述位置信息,寻找物品。本发明具有用户方便找寻物品、进而提高用户体验感的特点。
Description
技术领域
本发明涉及智能家居技术领域,尤其是涉及一种基于5G的智能家居控制方法、装置以及系统。
背景技术
随着智能化技术的不断发展,智能家居已走进千家万户,智能算法也越来越多的应用到日常生活,人们的工作生活也越来越便利。
目前,在生活中,对于物品的存放以及管理,目前都是靠用户自己去记忆或者记录物品的存放位置;用户需要用某个物品时,用户靠记忆力或者翻阅记录本才能得到该物品的存放位置,从而找到物品。
人的记忆具有遗忘性,当用户不记得所需物品放置的位置或是记录本记录的不够明确,很容易出现物品找不到的情况发生,由此造成了找寻物品这一过程操作难度高、用户体验感差。
发明内容
本发明目的是提供一种基于5G的智能家居控制方法、装置以及系统,具有用户方便找寻物品、进而提高用户体验感的特点。
本发明的上述发明目的一是通过以下技术方案得以实现的:
一方面,提供了一种基于5G的智能家居控制方法,所述方法应用于一种基于5G的智能家居控制系统,所述系统包括智能终端,以及多个摄像头,所述多个摄像头与所述智能终端通过5G网络通讯连接,所述方法包括:
当用户需要寻找物品时,获取当前用户输入的寻找信息,所述寻找信息用于指示当前用户需要寻找的物品;
识别所述当前用户的身份信息;
根据所述寻找信息和所述身份信息,从多个摄像头的历史画面中获取目标画面,所述目标画面为所述历史画面中包含所述物品以及所述物品对应的用户,且时间最近的画面;
根据所述目标画面,获取物品所在的位置信息,并输出位置信息,以使用户根据所述位置信息,寻找物品。
通过采用上述技术方案,用户输入寻找信息时,识别用户的身份,将历史画面中存在用户以及寻找信息的画面都找到,相较于传统的人工找寻物品,大大降低了人工找寻物品的操作难度,同时通过用户和寻找信息整体来寻找物品,使智能终端更迅速,更精准的找到物品,进而也提高了用户的体验感。
本发明在一较佳示例中可以进一步配置为,所述识别所述当前用户的身份信息之后,所述方法包括:
为用户的身份信息添加类别标签,所述类别标签用于指示用户的身份为父母、儿童、亲戚中的任意一个;
根据用户的类别标签,获取用户的寻找权限信息,所述寻找权限信息用于指示用户可以寻找的物品类别。
通过采用上述技术方案,根据不同的用户,添加不同的类别标签,并分配不同的寻找权限,既能保护用户的需求,又能满足用户的个性化需求,进而提高用户的体验感。
本发明在一较佳示例中可以进一步配置为,所述从多个摄像头的历史画面中获取目标画面,所述方法包括:
分别获取多个物品的多种形态图片,所述形态图片用于指示不同特征的同一种物品;
根据所述多种形态图片,对每一个物品的多种形态图片进行训练,并生成每一种物品的训练模型。
通过采用上述技术方案,对多个物品进行训练,生成训练模型,提高辨别物品的准确性,同时在确保准确性的前提下,还能提高识别物品的速度,加快了智能终端的反应速度,从而更快更准的替用户找到想要寻找的物品,进而提高用户的体验感。
本发明在一较佳示例中可以进一步配置为,所述根据所述寻找信息,从多个摄像头的历史画面中获取目标画面包括:
在所述训练模型的基础上,获取所述物品信息的多个第一待确定画面,所述第一待确定画面为历史画面中拍摄有所述物品信息的多个画面;
获取多个第一待确定画面中包含用户的所述面部信息的第二待确定画面;
分别获取所述多个第二待确定画面拍摄的多个时间点;
从所述多个第二待确定画面中,选取时间点最近的目标画面。
通过采用上述技术方案,根据用户的身份信息以及寻找信息,获取历史画面中的第二待确定画面,通过这样的方式,缩小了找寻物品的难度范围,同时也使找寻的结果更精准,进而提高用户的体验感。
本发明在一较佳示例中可以进一步配置为,所述根据所述目标画面,获取物品所在的位置信息,并输出位置信息包括:
在所述训练模型的基础上,对目标画面中其他物品进行分析,并生成分析结果;
根据所述分析结果,获取物品所在的位置信息。
通过采用上述技术方案,根据目标画面中的其他物品以及用户身份信息进行分析,找到物品的所在位置,使用户一目了然的知道物品所在位置,避免由于目标画面的拍摄问题,导致用户无法辨别这是室内某一个位置,而找寻不到物品的情况发生,进而提高了用户的体验感。
本发明在一较佳示例中可以进一步配置为,所述根据所述目标画面,获取物品所在的位置信息,并输出位置信息包括:
分别获取多个摄像头拍摄室内房间的场景画面,所述场景画面用于指示室内格局以及室内各物品的摆放位置;
根据所述场景画面,绘制与所述场景画面相对应的场景三维模型;
获取所述位置信息在所述场景三维模型中的场景位置;
输出位置信息,并对用户进行提示。
通过采用上述技术方案,将室内空间绘制成三维模型,使用户更清楚了解物品的所在位置,更方便了用户的寻找,进而提高了用户的体验感。
本发明在一较佳示例中可以进一步配置为,所述根据所述目标画面,获取物品所在的位置信息,并输出位置信息包括:
分别获取多个摄像头拍摄室内房间的场景画面,所述场景画面用于指示室内格局以及室内各物品的摆放位置;
根据所述场景画面,建立所述场景画面的位置坐标;
获取所述位置信息在所述位置坐标中的坐标位置;
输出位置信息以及所述目标画面,并对用户进行提示。
通过采用上述技术方案,获取到物品的位置信息,根据物品的位置信息建立位置坐标,并根据位置信息在位置坐标中的坐标位置展现给用户,并且在位置信息处将拍摄的目标画面展示给用户,满足了用户的多样化需求,进而提高了用户的体验感。
另一方面,提供了一种基于5G的智能家居控制装置,包括:
第一获取模块,用于当用户需要寻找物品时,获取当前用户输入的寻找信息,所述寻找信息用于指示当前用户需要寻找的物品;
识别模块,识别所述当前用户的身份信息;
第二获取模块,用于根据所述寻找信息和所述身份信息,从多个摄像头的历史画面中获取目标画面,所述目标画面用于指示所述历史画面中包含所述物品以及所述物品对应的用户,且时间最近的画面;
输出模块,用于根据所述目标画面,获取物品所在的位置信息,并输出位置信息,以使用户根据所述位置信息,寻找物品。
通过第一获取模块,获取用户输入的寻找信息,通过识别模块识别用户的身份,根据第二获取模块获取到目标画面,并通过输出模块输出找寻物品的位置,相较于传统的人工找寻物品,大大的降低了人工找寻物品的操作难度,同时也提高了用户的体验感。
本发明在一较佳示例中可以进一步配置为,所述识别模块具体用于:
为用户的身份信息添加类别标签,所述类别标签用于指示用户的身份为父母、儿童、亲戚中的任意一个;
根据用户的类别标签,获取用户的寻找权限信息,所述寻找权限信息用于指示用户可以寻找的物品类别。
本发明在一较佳示例中可以进一步配置为,所述模块包括:
分别获取多个物品的多种形态图片,所述形态图片用于指示不同特征的同一种物品;
根据所述多种形态图片,对每一个物品的多种形态图片进行训练,并生成每一种物品的训练模型。
本发明在一较佳示例中可以进一步配置为,所述第二获取模块具体用于:
在所述训练模型的基础上,获取所述物品信息的多个第一待确定画面,所述第一待确定画面为历史画面中拍摄有所述物品信息的多个画面;
获取多个第一待确定画面中包含用户的所述面部信息的第二待确定画面;
分别获取所述多个第二待确定画面拍摄的多个时间点;
从所述多个第二待确定画面中,选取时间点最近的目标画面。
本发明在一较佳示例中可以进一步配置为,所述输出模块具体用于:
在所述训练模型的基础上,对目标画面中其他物品进行分析,并生成分析结果;
根据所述分析结果,获取物品所在的位置信息。
本发明在一较佳示例中可以进一步配置为,所述输出模块具体用于:
分别获取多个摄像头拍摄室内房间的场景画面,所述场景画面用于指示室内格局以及室内各物品的摆放位置;
根据所述场景画面,绘制与所述场景画面相对应的场景三维模型;
获取所述位置信息在所述场景三维模型中的场景位置;
输出位置信息,并对用户进行提示。
本发明在一较佳示例中可以进一步配置为,所述输出模块具体用于:
分别获取多个摄像头拍摄室内房间的场景画面,所述场景画面用于指示室内格局以及室内各物品的摆放位置;
根据所述场景画面,建立所述场景画面的位置坐标;
获取所述位置信息在所述位置坐标中的坐标位置;
输出位置信息以及所述目标画面,并对用户进行提示。
另一方面,提供一种基于5G的智能家居控制系统,包括:
第一获取装置,用于当用户需要寻找物品时,获取当前用户输入的寻找信息,所述寻找信息用于指示当前用户需要寻找的物品;
识别装置,识别所述当前用户的身份信息;
第二获取装置,用于根据所述寻找信息和所述身份信息,从多个摄像头的历史画面中获取目标画面,所述目标画面用于指示所述历史画面中包含所述物品以及所述物品对应的用户,且时间最近的画面;
输出装置,用于根据所述目标画面,获取物品所在的位置信息,并输出位置信息,以使用户根据所述位置信息,寻找物品。
通过第一获取装置,获取用户输入的寻找信息,通过识别装置识别用户的身份,根据第二获取装置获取到目标画面,并通过输出装置输出找寻物品的位置,相较于传统的人工找寻物品,大大的降低了人工找寻物品的操作难度,同时也提高了用户的体验感。
本发明在一较佳示例中可以进一步配置为,所述识别装置具体用于:
为用户的身份信息添加类别标签,所述类别标签用于指示用户的身份为父母、儿童、亲戚中的任意一个;
根据用户的类别标签,获取用户的寻找权限信息,所述寻找权限信息用于指示用户可以寻找的物品类别。
本发明在一较佳示例中可以进一步配置为,所述装置包括:
分别获取多个物品的多种形态图片,所述形态图片用于指示不同特征的同一种物品;
根据所述多种形态图片,对每一个物品的多种形态图片进行训练,并生成每一种物品的训练模型。
本发明在一较佳示例中可以进一步配置为,所述第二获取装置具体用于:
在所述训练模型的基础上,获取所述物品信息的多个第一待确定画面,所述第一待确定画面为历史画面中拍摄有所述物品信息的多个画面;
获取多个第一待确定画面中包含用户的所述面部信息的第二待确定画面;
分别获取所述多个第二待确定画面拍摄的多个时间点;
从所述多个第二待确定画面中,选取时间点最近的目标画面。
本发明在一较佳示例中可以进一步配置为,所述输出装置具体用于:
在所述训练模型的基础上,对目标画面中其他物品进行分析,并生成分析结果;
根据所述分析结果,获取物品所在的位置信息。
本发明在一较佳示例中可以进一步配置为,所述输出装置具体用于:
分别获取多个摄像头拍摄室内房间的场景画面,所述场景画面用于指示室内格局以及室内各物品的摆放位置;
根据所述场景画面,绘制与所述场景画面相对应的场景三维模型;
获取所述位置信息在所述场景三维模型中的场景位置;
输出位置信息,并对用户进行提示。
本发明在一较佳示例中可以进一步配置为,所述输出装置具体用于:
分别获取多个摄像头拍摄室内房间的场景画面,所述场景画面用于指示室内格局以及室内各物品的摆放位置;
根据所述场景画面,建立所述场景画面的位置坐标;
获取所述位置信息在所述位置坐标中的坐标位置;
输出位置信息以及所述目标画面,并对用户进行提示。
另一方面,一种基于5G的智能家居控制装置,包括存储器和处理器,所述存储器上存储有能够被所述处理器加载并执行如第一方面任一种方法的计算机程序。
本申请所提供技术方案达到的有益效果:通过用户的寻找信息以及用户的身份,找寻物品,相较于传统的人工找寻物品,大大的降低了人工找寻物品的操作难度,同时也提高了用户的体验感。
附图说明
图1是本发明实施例提供的一种基于5G的智能家居控制方法的流程示意图。
图2是本发明实施例提供的一种基于5G的智能家居控制装置的结构示意图。
图3是本发明实施例提供的一种基于5G的智能家居控制系统的示意图。
图中,21、第一获取模块,22、识别模块,23、第二获取模块, 24、输出模块,31、第一获取装置,32、识别装置,33、第二获取装置,34、输出装置。
具体实施方式
以下结合附图对本发明作进一步详细说明。
本具体实施例仅仅是对本发明的解释,其并不是对本发明的限制,本领域技术人员在阅读完本说明书后可以根据需要对本实施例做出没有创造性贡献的修改,但只要在本发明的权利要求范围内都受到专利法的保护。
实施例一:
本发明实施例提供一种基于5G的智能家居控制方法,参照图1所示,所述方法应用于一种基于5G的智能家居控制系统,所述系统包括智能终端,以及多个摄像头,多个摄像头与智能终端通过5G网络通讯连接,所述方法包括:
智能终端在实际应用中可以为手机、平板、电脑、机器人等。
101、当用户需要寻找物品时,获取当前用户输入的寻找信息,寻找信息用于指示当前用户需要寻找的物品;
102、识别当前用户的身份信息;
103、根据寻找信息和身份信息,从多个摄像头的历史画面中获取目标画面,目标画面用于指示历史画面中包含物品以及物品对应的用户,且时间最近的画面;
104、根据目标画面,获取物品所在的位置信息,并输出位置信息,以使用户根据位置信息,寻找物品。
获取用户输入的寻找信息,并识别用户的身份,识别用户身份后,获取到历史画面中的目标画面,根据目标画面,找到物品的位置信息,并加以提示;这样的方式相较于传统的人工找寻物品,使找寻物品更快速、更精准,同时降低了人工找寻物品的操作难度,进而也提高了用户的体验感。
在本发明所提供的一种优选实施例中,步骤101当用户需要寻找物品时,获取当前用户输入的寻找信息,寻找信息用于指示当前用户需要寻找的物品的过程还可以为:
具体的,获取用户文字输入的物品名称以及关于物品的特征性条件,其中特征性条件用于指示物品上独有的颜色、图案,以及其他具有代表性的特点。
示例性的,用户文字输入红色的毛衣、蓝色的手机等。
可选的,获取用户语音输入的物品的名称以及关于物品的特征性条件,其中特征条件用于指示物品上独有颜色、图案,以及其他代表性的特点。
示例性的,用户语音输入红色的毛衣、蓝色的手机等。
可选的,获取预设物品名称,其中预设物品名称为,多个摄像头拍摄的历史画面中由智能终端识别出来的物品,存储并生成预设物品名称。
根据预设物品名称,获取用户选择需要寻找的物品。
示例性的,智能终端识别的预设物品为手机、手表、钥匙、钱包;则将识别出来的物品名称进行存储并进行物品名称显示,若用户想要寻找的物品为手机,即可选择手机。
用户通过不同的输入寻找信息方式,获取用户想要寻找的物品,多种方式的寻找信息输入,满足了用户的个性化需求,同时多样的输入方式也使用户输入更加便捷,进而提高了用户的体验感。
在本发明所提供的一种优选实施例中,步骤102识别当前用户的身份信息的过程可以为:
具体的,用户通过文字输入物品名称以及关于物品的特征性条件时,以机器人为例,通过机器人中的摄像头录入用户的面部信息以及需要机器人识别其他用户的面部信息。
将用户的面部信息以及其他用户的面部信息添加类别标签,类别标签用于指示用户的身份为父母、儿童、亲戚等其中的任意一个。
获取用户选择的寻找权限信息,其中寻找权限信息用于指示用户可以寻找的物品类别。
示例性的,当用户为大人时,用户可选择寻找所有物品的权限;当用户为儿童时,儿童可以选择寻找生活用品的物品权限,而电子类产品该儿童不具备寻找权限。
当用户输入寻找物品信息时,获取机器人中当前摄像头所拍摄的当前面部信息;
将用户当前面部信息与用户录入的面部信息进行比对,识别当前用户的身份信息。
可选的,用户通过语音输入物品名称以及关于物品的特征性条件时,获取用户的音色,音调,通过声纹技术辨别用户的声音。
通过机器人中的摄像头录入用户的面部信息以及需要机器人识别其他用户的面部信息。
将用户的声音与用户的面部信息进行关联,生成关联关系。
获取用户在输入寻找信息时的当前声音。
将用户的当前声音与用户录入的声音进行比对,识别当前用户的身份信息。
在本发明所提供的一种优选实施例中,步骤103之前的过程可以为:
分别获取多个物品的多种形态图片,形态照片用于指示同一种物品的不同特征;
具体的,通过网络分别获取多个物品的多种形态图片。
将多个物品的多种形态图片输入贝叶斯分类器中,通过贝叶斯分类器进行分类,生成多种分类模型。
示例性的,通过网络获取多个手机的多种图片,通过贝叶斯分类器将手机的多种图片进行分类,将手机的类别分成蓝色手机、红色手机、白色手机、绿色手机等。
在贝叶斯分类器的基础上,对每一个物品的多种分类模型进行训练,生成每一种物品多种形态的训练模型。
利用贝叶斯分类器,将每一种物品的多种形态对应生成多种形态的分类模型,并对分类模型进行训练生成训练模型,使机器人在识别的过程中,无论物品的形态、样式是如何变化的,都能将该物品识别出来,提高了机器人识别物品的能力,同时也使机器人更准确、更快速的识别物品。
在本发明所提供的一种优选实施例中,步骤103根据寻找信息和身份信息,从多个摄像头的历史画面中获取目标画面的过程可以为:
在训练模型的基础上,获取包含寻找信息的多个第一待确定画面,第一待确定画面用于指示历史画面中拍摄有物品信息的多个画面;
具体的,获取预设时间段的历史画面。
获取历史画面中出现寻找信息的多个第一待确定画面。
获取第一待确定画面中用户的面部信息。
根据面部信息,分析用户的身份信息;将用户录入寻找信息时的面部信息,与第一待确定画面中用户的面部信息进行比对,判断是否为同一用户。
若为同一用户,将第一待确定画面中用户的面部信息与寻找信息进行关联,生成关联关系。
在多个第一待确定画面中,获取存在关联关系的多个第二待确定画面。
分别获取拍摄多个第二待确定画面的多个待定时间点;其中,摄像头在进行拍摄的过程中,每拍摄一个画面,都将记录下来拍摄该画面的时间。
获取用户输入寻找信息的输入时间点。
将输入时间点分别与多个待定时间点进行对比。
获取多个第二待确定画面中,与输入时间点最接近的第二待确定画面,并生成目标画面。
优选的,智能终端还可以主动向用户提示物品所在位置,其过程可以为:
用户通过预设的方式,对需要进行实时监控的物品进行输入。
获取用户的多个行为动作,并将多个动作输入贝叶斯分类器中,生成用户的多个动作模型,其中,多个动作模型中包含用户寻找东西的找寻动作模型。
将找寻动作模型进行训练,生成找寻动作训练模型。
获取用户当前行为动作,当前用户行为动作用于指示物品脱离用户后,用户的行为动作。
将用户当前行为动作与找寻动作训练模型进行对比。
若一致,则获取用户当前行为动作的动作时间。
获取动作时间之前的历史画面中,与用户面部信息一致且用户使用实时监控的物品的第二待确定画面。
获取多个第二待确定画面中与用户当前行为动作时间最接近的第二待确定画面,并生成目标画面。
示例性的,若8:00—10:00时,用户在沙发上玩手机,10:00时,用户将手机放置在沙发上,10:15时,用户做出当前行为动作,获取10:15之前用户使用手机情况,发现10:00时,用户将手机放置在沙发上,机器人则主动提示用户手机在沙发附近。
在本发明所提供的一种优选实施例中,步骤104根据目标画面,获取物品所在的位置信息的过程可以为:
在训练模型的基础上,获取目标画面中除寻找信息以外的其他物品;
机器人对其他物品进行识分析,将其他物品与分类模型进行对比,识别其他物品名称;
根据分析结果,获取寻找信息在其他物品附近的位置信息。
步骤104输出位置信息的过程为:
室内每一个房间中都设置有一个摄像头,摄像头对房间内每一个角落进行拍摄,生成场景画面,场景画面用于指示室内格局以及室内各物品的摆放位置。
根据场景画面,通过使用三维模型软件,绘制与场景画面相对应的场景三维模型;
获取拍摄目标画面的摄像头编号,其中摄像头编号与摄像头所在室内的某一个房间中一一对应。
获取目标画面中其他物品的位置信息在场景三维模型中的场景位置。
获取寻找信息与其他物品的位置关系,并在三维模型中相对应的位置进行标注。
向用户语音输出寻找信息所在的位置信息。
示例性的,若目标画面中手机在沙发上,获取目标画面所对应的摄像头编号为1号,1号摄像头对应所在的位置是客厅,机器人识别出沙发,并找到沙发对应在三维模型的位置,并进行标注手机在沙发附近。
可选的,根据位置信息,生成并输出位置信息,以使用户根据位置信息,寻找物品的过程还可以为:
分别获取多个摄像头拍摄室内房间的场景画面,场景画面用于指示室内格局以及室内各物品的摆放位置;
以室内房间为单位使用绘图软件绘制房间地图,以某一点为原点建立平面直角坐标系。
获取拍摄目标画面的摄像头编号,其中摄像头编号与摄像头所在室内的某一个房间中一一对应。
获取目标画面中其他物品在房间地图中的坐标位置。
获取位置信息与其他物品的位置关系,并在房间地图中相对应的位置进行标注。
获取目标画面内容,并展示在房间地图中。
向用户语音输出寻找信息的位置信息。
示例性的,目标画面拍摄的内容为手机在沙发上,拍摄室内各个房间的画面,并生成房间地图,识别出沙发,并在房间地图通过沙发的坐标找到沙发的所在位置,并标注手机在沙发附近,并将目标画面也展示出来,用以提示用户寻找信息所在位置。
通过不同的形式向用户展现寻找信息的位置信息,使用户清晰的了解物品的所在位置,满足了用户多样化的需求,同时也提高了用户的体验感。
实施例二:
图2为本发明实施例提供的一种基于5G的智能家居控制装置,该装置2包括:
第一获取模块21,用于当用户需要寻找物品时,获取当前用户输入的寻找信息,寻找信息用于指示当前用户需要寻找的物品;
识别模块22,用于识别当前用户的身份信息;
第二获取模块23,用于根据寻找信息和身份信息,从多个摄像头的历史画面中获取目标画面,目标画面用于指示历史画面中包含物品以及物品对应的用户,且时间最近的画面。
输出模块24,用于根据目标画面,获取物品所在的位置信息,并输出位置信息,以使用户根据位置信息,寻找物品。
本发明在一较佳示例中可以进一步配置为,所述识别模块具体用于:
为用户的身份信息添加类别标签,类别标签用于指示用户的身份为父母、儿童、亲戚中的任意一个;
根据用户的类别标签,获取用户的寻找权限信息,寻找权限信息用于指示用户可以寻找的物品类别。
本发明在一较佳示例中可以进一步配置为,所述模块包括:
分别获取多个物品的多种形态图片,形态图片用于指示不同特征的同一种物品;
根据多种形态图片,对每一个物品的多种形态图片进行训练,并生成每一种物品的训练模型。
本发明在一较佳示例中可以进一步配置为,所述第二获取模块具体用于:
在训练模型的基础上,获取物品信息的多个第一待确定画面,第一待确定画面为历史画面中拍摄有物品信息的多个画面;
获取多个第一待确定画面中包含用户的面部信息的第二待确定画面;
分别获取多个第二待确定画面拍摄的多个时间点;
从多个第二待确定画面中,选取时间点最近的目标画面。
本发明在一较佳示例中可以进一步配置为,所述输出模块具体用于:
在训练模型的基础上,对目标画面中其他物品进行分析,并生成分析结果;
根据分析结果,获取物品所在的位置信息。
本发明在一较佳示例中可以进一步配置为,所述输出模块具体用于:
分别获取多个摄像头拍摄室内房间的场景画面,场景画面用于指示室内格局以及室内各物品的摆放位置;
根据场景画面,绘制与场景画面相对应的场景三维模型;
获取位置信息在场景三维模型中的场景位置;
输出位置信息,并对用户进行提示。
本发明在一较佳示例中可以进一步配置为,所述输出模块具体用于:
分别获取多个摄像头拍摄室内房间的场景画面,场景画面用于指示室内格局以及室内各物品的摆放位置;
根据场景画面,建立场景画面的位置坐标;
获取位置信息在位置坐标中的坐标位置;
输出位置信息以及目标画面,并对用户进行提示。
实施例三:
图3为本发明实施例提供一种基于5G的智能家居系统,该系统包括:
第一获取装置31,用于当用户需要寻找物品时,获取当前用户输入的寻找信息,寻找信息用于指示当前用户需要寻找的物品;
识别装置32,识别当前用户的身份信息;
第二获取装置33,用于根据寻找信息和身份信息,从多个摄像头的历史画面中获取目标画面,目标画面用于指示历史画面中包含物品以及物品对应的用户,且时间最近的画面;
输出装置34,用于根据目标画面,获取物品所在的位置信息,并输出位置信息,以使用户根据位置信息,寻找物品。
本发明在一较佳示例中可以进一步配置为,所述识别装置具体用于:
为用户的身份信息添加类别标签,类别标签用于指示用户的身份为父母、儿童、亲戚中的任意一个;
根据用户的类别标签,获取用户的寻找权限信息,寻找权限信息用于指示用户可以寻找的物品类别。
本发明在一较佳示例中可以进一步配置为,所述装置包括:
分别获取多个物品的多种形态图片,形态图片用于指示不同特征的同一种物品;
根据多种形态图片,对每一个物品的多种形态图片进行训练,并生成每一种物品的训练模型。
本发明在一较佳示例中可以进一步配置为,所述第二获取装置具体用于:
在训练模型的基础上,获取物品信息的多个第一待确定画面,第一待确定画面为历史画面中拍摄有物品信息的多个画面;
获取多个第一待确定画面中包含用户的面部信息的第二待确定画面;
分别获取多个第二待确定画面拍摄的多个时间点;
从多个第二待确定画面中,选取时间点最近的目标画面。
本发明在一较佳示例中可以进一步配置为,所述输出装置具体用于:
在训练模型的基础上,对目标画面中其他物品进行分析,并生成分析结果;
根据分析结果,获取物品所在的位置信息。
本发明在一较佳示例中可以进一步配置为,所述输出装置具体用于:
分别获取多个摄像头拍摄室内房间的场景画面,场景画面用于指示室内格局以及室内各物品的摆放位置;
根据场景画面,绘制与场景画面相对应的场景三维模型;
获取位置信息在场景三维模型中的场景位置;
输出位置信息,并对用户进行提示。
本发明在一较佳示例中可以进一步配置为,所述输出装置具体用于:
分别获取多个摄像头拍摄室内房间的场景画面,场景画面用于指示室内格局以及室内各物品的摆放位置;
根据场景画面,建立场景画面的位置坐标;
获取位置信息在位置坐标中的坐标位置;
输出位置信息以及目标画面,并对用户进行提示
实施例四:
本发明实施例提供一种基于5G的智能家居控制装置,该装置包括存储器和处理器,存储器上存储有能够被处理器加载并执行如上述方法实施例任一步骤的计算机程序。
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
另外,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,如无特殊说明,一般表示前后关联对象是一种“或”的关系。
Claims (10)
1.一种基于5G的智能家居控制方法,其特征在于,所述方法应用于一种基于5G的智能家居控制系统,所述系统包括智能终端,以及多个摄像头,所述多个摄像头与所述智能终端通过5G网络通讯连接,所述方法包括:
当用户需要寻找物品时,获取当前用户输入的寻找信息,所述寻找信息用于指示当前用户需要寻找的物品;
识别所述当前用户的身份信息;
根据所述寻找信息和所述身份信息,从多个摄像头的历史画面中获取目标画面,所述目标画面为所述历史画面中包含所述物品以及所述物品对应的用户,且时间最近的画面;
根据所述目标画面,获取物品所在的位置信息,并输出位置信息,以使用户根据所述位置信息,寻找物品。
2.根据权利要求1所述的方法,其特征在于,所述识别所述当前用户的身份信息之后,所述方法包括:
为用户的身份信息添加类别标签,所述类别标签用于指示用户的身份为父母、儿童、亲戚中的任意一个;
根据用户的类别标签,获取用户的寻找权限信息,所述寻找权限信息用于指示用户可以寻找的物品类别。
3.根据权利要求2所述的方法,其特征在于,所述从多个摄像头的历史画面中获取目标画面之前,所述方法包括:
分别获取多个物品的多种形态图片,所述形态图片用于指示同一种物品的不同特征;
根据所述多种形态图片,对每一个物品的多种形态图片进行训练,并生成每一种物品的训练模型。
4.根据权利要求3所述的方法,其特征在于,所述根据所述寻找信息,从多个摄像头的历史画面中获取目标画面包括:
在所述训练模型的基础上,获取所述物品信息的多个第一待确定画面,所述第一待确定画面为历史画面中拍摄有所述物品信息的多个画面;
获取多个第一待确定画面中包含用户的所述面部信息的第二待确定画面;
分别获取所述多个第二待确定画面拍摄的多个时间点;
从所述多个第二待确定画面中,选取时间点最近的目标画面。
5.根据权利要求4所述的方法,其特征在于,所述根据所述目标画面,获取物品所在的位置信息,并输出位置信息包括:
在所述训练模型的基础上,对目标画面中其他物品进行分析,并生成分析结果;
根据所述分析结果,获取物品所在的位置信息。
6.根据权利要求1所述的方法,其特征在于,所述根据所述目标画面,获取物品所在的位置信息,并输出位置信息包括:
分别获取多个摄像头拍摄室内房间的场景画面,所述场景画面用于指示室内格局以及室内各物品的摆放位置;
根据所述场景画面,绘制与所述场景画面相对应的场景三维模型;
获取所述位置信息在所述场景三维模型中的场景位置;
输出位置信息,并对用户进行提示。
7.根据权利要求1所述的方法,其特征在于,所述根据所述目标画面,获取物品所在的位置信息,并输出位置信息还包括:
分别获取多个摄像头拍摄室内房间的场景画面,所述场景画面用于指示室内格局以及室内各物品的摆放位置;
根据所述场景画面,建立所述场景画面的位置坐标;
获取所述位置信息在所述位置坐标中的坐标位置;
输出位置信息以及所述目标画面,并对用户进行提示。
8.一种基于5G的智能家居控制装置,其特征在于,所述装置包括:
第一获取模块(21),用于当用户需要寻找物品时,获取当前用户输入的寻找信息,所述寻找信息用于指示当前用户需要寻找的物品;
识别模块(22),用于识别所述当前用户的身份信息;
第二获取模块(23),用于根据所述寻找信息和所述身份信息,从多个摄像头的历史画面中获取目标画面,所述目标画面用于指示所述历史画面中包含所述物品以及所述物品对应的用户,且时间最近的画面;
输出模块(24),用于根据所述目标画面,获取物品所在的位置信息,并输出位置信息,以使用户根据所述位置信息,寻找物品。
9.一种基于5G的智能家居控制系统,其特征在于,所述系统包括:
第一获取装置(31),用于当用户需要寻找物品时,获取当前用户输入的寻找信息,所述寻找信息用于指示当前用户需要寻找的物品;
识别装置(32),用于识别所述当前用户的身份信息;
第二获取装置(33),用于根据所述寻找信息和所述身份信息,从多个摄像头的历史画面中获取目标画面,所述目标画面用于指示所述历史画面中包含所述物品以及所述物品对应的用户,且时间最近的画面;
输出装置(34),用于根据所述目标画面,获取物品所在的位置信息,并输出位置信息,以使用户根据所述位置信息,寻找物品。
10.一种基于5G的智能家居控制装置,其特征在于,所述装置包括存储器以及与所述存储器连接的处理器,其中,所述存储器用于存储一组程序代码,所述处理器调用所述存储器所存储的程序代码用于执行权利要求1至7任一所述方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011350508.6A CN112327659A (zh) | 2020-11-26 | 2020-11-26 | 一种基于5g的智能家居控制方法、装置以及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011350508.6A CN112327659A (zh) | 2020-11-26 | 2020-11-26 | 一种基于5g的智能家居控制方法、装置以及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112327659A true CN112327659A (zh) | 2021-02-05 |
Family
ID=74308016
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011350508.6A Pending CN112327659A (zh) | 2020-11-26 | 2020-11-26 | 一种基于5g的智能家居控制方法、装置以及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112327659A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112861753A (zh) * | 2021-02-23 | 2021-05-28 | 河南宏昌科技有限公司 | 一种常用空间内的管理方法 |
WO2023087962A1 (en) * | 2021-11-18 | 2023-05-25 | International Business Machines Corporation | Augmented device retrieval assistance |
CN117173239A (zh) * | 2023-11-02 | 2023-12-05 | 深圳市金大智能创新科技有限公司 | 一种智能设备物品记录寻找的控制方法 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1975778A (zh) * | 2006-11-03 | 2007-06-06 | 中山大学 | 一种数字家庭物品查找装置 |
CN103761505A (zh) * | 2013-12-18 | 2014-04-30 | 微软公司 | 对象跟踪 |
WO2016134559A1 (zh) * | 2015-02-26 | 2016-09-01 | 刘川民 | 一种基于固定位置的信息提示系统和方法 |
CN106294558A (zh) * | 2016-07-26 | 2017-01-04 | 北京小米移动软件有限公司 | 物体定位方法和装置 |
CN106293073A (zh) * | 2016-07-29 | 2017-01-04 | 深圳市前海安测信息技术有限公司 | 基于虚拟现实的辅助老年痴呆症患者寻找物品的系统及方法 |
CN107958040A (zh) * | 2017-11-22 | 2018-04-24 | 青岛乾恒智能科技有限公司 | 一种用于室内物品定位、管理以及分析的智能系统 |
CN111225340A (zh) * | 2019-11-26 | 2020-06-02 | 恒大智慧科技有限公司 | 一种景区寻物方法、装置及存储介质 |
CN111258224A (zh) * | 2018-11-30 | 2020-06-09 | 西安欧思奇软件有限公司 | 智能家居控制方法、装置、计算机设备及存储介质 |
CN111523545A (zh) * | 2020-05-06 | 2020-08-11 | 青岛联合创智科技有限公司 | 一种结合深度信息的物品查找方法 |
CN111858993A (zh) * | 2020-07-31 | 2020-10-30 | 重庆电子工程职业学院 | 用于特殊物品的寻物指引系统 |
-
2020
- 2020-11-26 CN CN202011350508.6A patent/CN112327659A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1975778A (zh) * | 2006-11-03 | 2007-06-06 | 中山大学 | 一种数字家庭物品查找装置 |
CN103761505A (zh) * | 2013-12-18 | 2014-04-30 | 微软公司 | 对象跟踪 |
WO2016134559A1 (zh) * | 2015-02-26 | 2016-09-01 | 刘川民 | 一种基于固定位置的信息提示系统和方法 |
CN106294558A (zh) * | 2016-07-26 | 2017-01-04 | 北京小米移动软件有限公司 | 物体定位方法和装置 |
CN106293073A (zh) * | 2016-07-29 | 2017-01-04 | 深圳市前海安测信息技术有限公司 | 基于虚拟现实的辅助老年痴呆症患者寻找物品的系统及方法 |
CN107958040A (zh) * | 2017-11-22 | 2018-04-24 | 青岛乾恒智能科技有限公司 | 一种用于室内物品定位、管理以及分析的智能系统 |
CN111258224A (zh) * | 2018-11-30 | 2020-06-09 | 西安欧思奇软件有限公司 | 智能家居控制方法、装置、计算机设备及存储介质 |
CN111225340A (zh) * | 2019-11-26 | 2020-06-02 | 恒大智慧科技有限公司 | 一种景区寻物方法、装置及存储介质 |
CN111523545A (zh) * | 2020-05-06 | 2020-08-11 | 青岛联合创智科技有限公司 | 一种结合深度信息的物品查找方法 |
CN111858993A (zh) * | 2020-07-31 | 2020-10-30 | 重庆电子工程职业学院 | 用于特殊物品的寻物指引系统 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112861753A (zh) * | 2021-02-23 | 2021-05-28 | 河南宏昌科技有限公司 | 一种常用空间内的管理方法 |
CN112861753B (zh) * | 2021-02-23 | 2024-03-19 | 河南宏昌科技有限公司 | 一种常用空间内的管理方法 |
WO2023087962A1 (en) * | 2021-11-18 | 2023-05-25 | International Business Machines Corporation | Augmented device retrieval assistance |
CN117173239A (zh) * | 2023-11-02 | 2023-12-05 | 深圳市金大智能创新科技有限公司 | 一种智能设备物品记录寻找的控制方法 |
CN117173239B (zh) * | 2023-11-02 | 2024-04-02 | 深圳市金大智能创新科技有限公司 | 一种智能设备物品记录寻找的控制方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112327659A (zh) | 一种基于5g的智能家居控制方法、装置以及系统 | |
CN107993191B (zh) | 一种图像处理方法和装置 | |
CN104615769B (zh) | 图片分类方法及装置 | |
CN107818180B (zh) | 视频关联方法、视频显示方法、装置及存储介质 | |
CN103686344B (zh) | 增强视频系统及方法 | |
CN105302315A (zh) | 图片处理方法及装置 | |
CN104182127B (zh) | 图标移动方法和装置 | |
CN107819652A (zh) | 智能家居设备的控制方法及装置 | |
CN109446961B (zh) | 姿势检测方法、装置、设备及存储介质 | |
CN106647677B (zh) | 一种智能管家系统 | |
US9953221B2 (en) | Multimedia presentation method and apparatus | |
CN107871001B (zh) | 音频播放方法、装置、存储介质及电子设备 | |
CN104133956B (zh) | 处理图片的方法及装置 | |
CN109271533A (zh) | 一种多媒体文件检索方法 | |
CN101300588A (zh) | 确定收集中的特定人的方法 | |
KR102102164B1 (ko) | 영상 전처리 방법, 장치 및 컴퓨터 프로그램 | |
CN109871843A (zh) | 字符识别方法和装置、用于字符识别的装置 | |
CN105095917B (zh) | 图像处理方法、装置及终端 | |
CN107153708A (zh) | 一种图片查看方法及装置、计算机装置、计算机可读存储介质 | |
US20130301938A1 (en) | Human photo search system | |
CN112052784A (zh) | 物品的搜索方法、装置、设备及计算机可读存储介质 | |
CN112672208A (zh) | 视频播放方法、装置、电子设备、服务器及系统 | |
CN111814538A (zh) | 目标对象的类别识别方法、装置、电子设备及存储介质 | |
CN113821296B (zh) | 可视化界面生成方法、电子设备及存储介质 | |
CN112732379B (zh) | 智能终端上应用程序的运行方法、终端和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |