CN110400346A - 基于智能家居操作系统的信息处理方法及装置、存储介质 - Google Patents
基于智能家居操作系统的信息处理方法及装置、存储介质 Download PDFInfo
- Publication number
- CN110400346A CN110400346A CN201910684995.0A CN201910684995A CN110400346A CN 110400346 A CN110400346 A CN 110400346A CN 201910684995 A CN201910684995 A CN 201910684995A CN 110400346 A CN110400346 A CN 110400346A
- Authority
- CN
- China
- Prior art keywords
- smart home
- article
- target area
- home device
- image information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供了一种基于智能家居操作系统的信息处理方法及装置、存储介质,上述信息处理方法包括:确定智能家居设备移动至目标区域;通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;获取每一所述图像信息内的物品的位置信息,采用上述技术方案,解决了相关技术中人工去寻找物品,操作难度高,体验度差等问题。
Description
技术领域
本发明涉及计算机领域,具体而言,涉及一种基于智能家居操作系统的信息处理方法及装置、存储介质。
背景技术
当用户在房间中物品时,需要在房间中寻找该的物品,的物品很可能会掉落在寻找难度高的区域,例如,床下面的区域、沙发下面的区域,因此,用户在房间中寻找该的物品时,也需要在寻找难度高的区域中进行寻找,但由于操作难度高,用户经常无法有效确认的品是否在床下面的区域、沙发下面的区域,即使能够确认,用户也需要抬起桌子或沙发等比较复杂的操作。
针对相关技术中,人工去寻找物品,操作难度高,体验度差等问题,目前尚未存在有效的解决方案。
发明内容
本发明实施例提供了一种基于智能家居操作系统的信息处理方法及装置、存储介质,以解决相关技术中人工去寻找物品,操作难度高,体验度差等问题。
根据本发明的一个实施例,提供了一种基于智能家居操作系统的信息处理方法,包括:确定智能家居设备移动至目标区域;通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;获取每一所述图像信息内的物品的位置信息。
在本发明实施例中,确定智能家居设备移动至目标区域,至少包括以下之一:确定所述智能家居设备移动至目标对象预先设置的第一目标区域;确定所述智能家居设备移动至满足预设条件的第二目标区域。
在本发明实施例中,所述预设条件包括:通过设置在所述智能家居设备上表面的测距传感器确定所述智能家居设备与目标物体下表面的距离小于第一阈值。
在本发明实施例中,通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个区域的图像信息之前,所述方法还包括:在通过设置在所述智能家居设备上的光强传感器检测到所述智能家居设备所处的环境的光强亮度低于第二阈值的情况下,打开设置在所述智能家居设备上的闪光灯,以通过所述图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息。
在本发明实施例中,获取每一所述图像信息内的物品的位置信息包括:当通过所述图像采集装置采集到所述目标区域内一个或多个子区域内存在的物品的图像信息时,将所述智能家居设备所处的第一位置信息作为所述物品的位置信息;或者当通过所述图像采集装置采集到所述目标区域内一个或多个子区域内存在的物品的图像信息时,将第二位置信息作为所述物品的位置信息,其中,所述第二位置信息为存在所述物品的子区域所对应的位置信息。
在本发明实施例中,确定智能家居设备移动至目标区域之后,所述方法还包括:在检测到所述智能家居设备位于所述目标区域的时间小于第四阈值,且所述智能家居设备位于所述目标区域的情况下,指示所述图像采集装置继续采集所述目标区域内一个或多个区域的图像信息;在检测到所述智能家居设备位于所述目标区域的时间小于第四阈值,且所述智能家居设备未位于所述目标区域的情况下,指示所述图像采集装置停止采集所述目标区域内一个或多个区域的图像信息。
在本发明实施例中,确定智能家居设备移动至目标区域之前或之后,所述方法包括:采集监听到的语音信息,从所述语音信息中确定待寻找的物品;在所述待寻找的物品与任一图像信息中的物品匹配的情况下,提示所述任一图像信息中的物品的位置信息。
在本发明实施例中,所述方法还包括:接收指定智能家居设备发送的第一指示信息,其中,第一指示信息用于指示所述指定智能家居设备通过对采集到的语音信息进行识别所确定的待寻找的物品;在所述第一指示信息中所指示的待寻找的物品与任一图像信息中的物品匹配的情况下,提示所述任一图像信息中的物品的位置信息。
在本发明实施例中,在采集监听到的语音信息,从所述语音信息中确定待寻找的物品,或接收指定智能家居设备发送的第一指示信息之前,所述方法还包括:对每一所述图像信息中的物品进行图像识别,以确定所述每一图像信息中所包含的物品。
根据本发明实施例的另一个技术方案,提供了一种基于智能家居操作系统的信息处理装置,包括:确定模块,用于确定智能家居设备移动至目标区域;采集模块,用于通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;保存模块,用于获取每一所述图像信息内的物品的位置信息。
根据本发明的又一个实施例,还提供了一种存储介质,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例,还提供了一种电子装置,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
通过本发明,在确定了智能家居设备移动至目标区域之后,通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;获取每一所述图像信息内的物品的位置信息,采用上述方案,解决了相关技术中,人工去寻找物品,操作难度高,体验度差等问题,进而通过智能家居设备去目标区域中搜寻,不再需要用户对寻找难度高的区域进行失物寻找,降低了寻找物品的难度,提升用户的体验。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明实施例的一种基于智能家居操作系统的信息处理方法的智能家居设备的硬件结构框图;
图2是根据本发明实施例的一种可选的网络架构示意图;
图3是根据本发明实施例的一种可选的基于智能家居操作系统的信息处理方法的流程图;
图4是根据本发明实施例的一种可选的基于智能家居操作系统的信息处理装置的结构框图;
图5是根据本发明实施例的一种可选的基于智能家居操作系统的信息处理装置的另一结构框图;
图6是根据本发明实施例的扫地机器人与家居设备的相对位置示意图;
图7是根据本发明实施例的扫地机器人与家居设备的另一相对位置示意图
图8是根据本发明实施例的物品位于家居设备的位置示意图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
本发明实施例所提供的方法实施例可以在智能家居设备、扫地机器人或者类似的运算装置中执行。以运行在智能家居设备上为例,图1是本发明实施例的一种基于智能家居操作系统的信息处理方法的智能家居设备的硬件结构框图。如图1所示,智能家居设备10可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)和用于存储数据的存储器104,可选地,上述移动终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解,图1所示的结构仅为示意,其并不对上述移动终端的结构造成限定。例如,智能家居设备10还可包括比图1中所示更多或者更少的组件,或者具有与图1所示等同功能或比图1所示功能更多的不同的配置。
存储器104可用于存储计算机程序,例如,应用软件的软件程序以及模块,如本发明实施例中的一种基于智能家居操作系统的信息处理方法对应的计算机程序,处理器102通过运行存储在存储器104内的计算机程序,从而执行各种功能应用以及数据处理,即实现上述的方法。存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器104可进一步包括相对于处理器102远程设置的存储器,这些远程存储器可以通过网络连接至智能家居设备10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括智能家居设备10的通信供应商提供的无线网络。在一个实例中,传输装置106包括一个网络适配器(Network Interface Controller,简称为NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输装置106可以为射频(Radio Frequency,简称为RF)模块,其用于通过无线方式与互联网进行通讯。
此外,本申请实施例还可以运行于图2所示的网络架构上,如图2所示,该网络架构包括:服务器、无线路由器、多个智能家居设备,终端,其中,智能家居设备可以理解为是物联网中的终端设备,各终端设备的操作系统均配置有通信模块,可实现物联网中多个智能家居设备之间的协同操作,图2中还设置有服务器,服务器可为各智能家居设备提供数据处理等服务,并实现智能家居设备之间的数据互通,服务器和终端可以通过无线路由器与智能家居设备建立通信连接,智能家居设备之间也可以通过无线路由器建立通信连接。
图3是根据本发明实施例的一种可选的基于智能家居操作系统的信息处理方法的流程图,应用于图1所示的智能家居设备或图2所示的网络架构中的智能家居设备,如图3所示,该流程包括如下步骤:
步骤S302,确定智能家居设备移动至目标区域;
该步骤可以通过以下技术方案实现:确定所述智能家居设备移动至目标对象预先设置的第一目标区域,即目标对象可以预先设定智能家居设备待移动至的第一目标区域;或确定所述智能家居设备移动至满足预设条件的第二目标区域,此处倾向于的满足预设条件的第二目标区域为寻找难度高的区域,例如,通过设置在所述智能家居设备上表面的测距传感器确定所述智能家居设备与目标家居设备下表面的距离小于第一阈值的情况下,确定所述智能家居设备移动至满足预设条件的第二目标区域。
步骤S304,通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;
步骤S306,获取每一所述图像信息内的物品的位置信息。
通过本发明,在确定了智能家居设备移动至目标区域之后,通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;获取每一所述图像信息内的物品的位置信息,采用上述方案,解决了相关技术中,人工去寻找物品,操作难度高,体验度差等问题,进而通过智能家居设备去目标区域中搜寻,不再需要用户对寻找难度高的区域进行失物寻找,降低了寻找物品的难度,提升用户的体验。
为了使得图像采集装置所采集的图像信息更加的清楚,准确,本发明实施例还提供了以下技术方案:通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个区域的图像信息之前,在通过设置在所述智能家居设备上的光强传感器检测到所述智能家居设备所处的环境的光强亮度低于第二阈值的情况下,打开设置在所述智能家居设备上的闪光灯,以通过所述图像采集装置采集所述目标区域内一个或多个区域的图像信息,其中,所述图像采集装置和所述闪光灯在所述智能家居设备上的距离小于第三阈值。
需要说明的是,步骤S306中保存的位置信息是为了后续确定物品所在位置用的,可选地,步骤S306可以通过以下技术方案实现:当通过所述图像采集装置采集到所述目标区域内一个或多个子区域内存在的物品的图像信息时,将所述智能家居设备所处的第一位置信息作为所述物品的位置信息;或者当通过所述图像采集装置采集到所述目标区域内一个或多个子区域内存在的物品的图像信息时,将第二位置信息作为所述物品的位置信息,其中,所述第二位置信息为存在所述物品的子区域所对应的位置信息。
为了减少不必要的功耗,在智能家居设备中设置定时器,定时器的时间为第四阈值,进一步地,在检测到所述智能家居设备位于所述目标区域的时间小于第四阈值,且所述智能家居设备位于所述目标区域的情况下,指示所述图像采集装置继续采集所述目标区域内一个或多个区域的图像信息;在检测到所述智能家居设备位于所述目标区域的时间小于第四阈值,且所述智能家居设备未位于所述目标区域的情况下,指示所述图像采集装置停止采集所述目标区域内一个或多个区域的图像信息,可选地,在检测到所述智能家居设备位于所述目标区域的时间小于第四阈值的情况下,可以直接指示所述图像采集装置停止采集所述目标区域内一个或多个区域的图像信息。
在本发明实施例中,智能家居设备从图像信息中确定是否存在物品的前提是智能家居设备知晓物品的类型,智能家居设备可以通过自身来采集监听到的语音信息,从所述语音信息中确定待寻找的物品;在所述待寻找的物品与任一图像信息中的物品匹配的情况下,提示所述任一图像信息中的物品的位置信息;智能家居设备也可以通过接收指定智能家居设备发送的第一指示信息,其中,第一指示信息用于指示所述指定智能家居设备通过对采集到的语音信息进行识别所确定的待寻找的物品,在所述第一指示信息中所指示的待寻找的物品与任一图像信息中的物品匹配的情况下,提示所述任一图像信息中的物品的位置信息,上述指定智能家居设备为具备语音接收,语音识别功能的智能家居设备,在本发明实施例中,在采集监听到的语音信息,从所述语音信息中确定待寻找的物品,或接收指定智能家居设备发送的第一指示信息之前,所述方法还包括:对每一所述图像信息中的物品进行图像识别,以确定所述每一图像信息中所包含的物品。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
在本实施例中还提供了一种基于智能家居操作系统的信息处理装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图4是根据本发明实施例的一种可选的基于智能家居操作系统的信息处理装置的结构框图,如图4所示,该装置包括:
确定模块40,用于确定智能家居设备移动至目标区域;
采集模块42,用于通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;
获取模块44,用于获取每一所述图像信息内的物品的位置信息。
通过本发明,在确定了智能家居设备移动至目标区域之后,通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;获取每一所述图像信息内的物品的位置信息,采用上述方案,解决了相关技术中,人工去寻找物品,操作难度高,体验度差等问题,进而通过智能家居设备去目标区域中搜寻,不再需要用户对寻找难度高的区域进行失物寻找,降低了寻找物品的难度,提升用户的体验。
可选地,确定模块40,还用于确定所述智能家居设备移动至目标对象预先设置的第一目标区域,即目标对象可以预先设定智能家居设备待移动至的第一目标区域;或确定所述智能家居设备移动至满足预设条件的第二目标区域,此处倾向于的满足预设条件的第二目标区域为寻找难度高的区域,例如,通过设置在所述智能家居设备上表面的测距传感器确定所述智能家居设备与目标家居设备下表面的距离小于第一阈值的情况下,确定所述智能家居设备移动至满足预设条件的第二目标区域。
为了使得图像采集装置所采集的图像信息更加的清楚,准确,采集模块42,还用于在通过设置在所述智能家居设备上的光强传感器检测到所述智能家居设备所处的环境的光强亮度低于第二阈值的情况下,打开设置在所述智能家居设备上的闪光灯,以通过所述图像采集装置采集所述目标区域内一个或多个区域的图像信息,其中,所述图像采集装置和所述闪光灯在所述智能家居设备上的距离小于第三阈值。
需要说明的是,获取到的位置信息是为了后续确定物品所在位置用的,可选地,获取模块44,还用于当通过所述图像采集装置采集到所述目标区域内一个或多个子区域内存在的物品的图像信息时,将所述智能家居设备所处的第一位置信息作为所述物品的位置信息;或者当通过所述图像采集装置采集到所述目标区域内一个或多个子区域内存在的物品的图像信息时,将第二位置信息作为所述物品的位置信息,其中,所述第二位置信息为存在所述物品的子区域所对应的位置信息。
图5是根据本发明实施例的一种可选的基于智能家居操作系统的信息处理装置的另一结构框图,如图5所示,该装置包括:指示模块46,用于在检测到所述智能家居设备位于所述目标区域的时间小于第四阈值,且所述智能家居设备位于所述目标区域的情况下,指示所述图像采集装置继续采集所述目标区域内一个或多个区域的图像信息;在检测到所述智能家居设备位于所述目标区域的时间小于第四阈值,且所述智能家居设备未位于所述目标区域的情况下,指示所述图像采集装置停止采集所述目标区域内一个或多个区域的图像信息,可选地,在检测到所述智能家居设备位于所述目标区域的时间小于第四阈值的情况下,可以直接指示所述图像采集装置停止采集所述目标区域内一个或多个区域的图像信息。
在本发明实施例中,智能家居设备从图像信息中确定是否存在物品的前提是智能家居设备知晓物品的类型,确定模块40,还用于通过自身来采集监听到的语音信息,从所述语音信息中确定待寻找的物品;在所述待寻找的物品与任一图像信息中的物品匹配的情况下,提示所述任一图像信息中的物品的位置信息;还用于通过接收指定智能家居设备发送的第一指示信息,其中,第一指示信息用于指示所述指定智能家居设备通过对采集到的语音信息进行识别所确定的待寻找的物品,在所述第一指示信息中所指示的待寻找的物品与任一图像信息中的物品匹配的情况下,提示所述任一图像信息中的物品的位置信息,上述指定智能家居设备为具备语音接收,语音识别功能的智能家居设备。
进一步地,指示模块46,还用于在本发明实施例中,在采集监听到的语音信息,从所述语音信息中确定待寻找的物品,或接收指定智能家居设备发送的第一指示信息之前,对每一所述图像信息中的物品进行图像识别,以确定所述每一图像信息中所包含的物品。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,对于后者,可以通过以下方式实现,但不限于此:上述模块均位于同一处理器中;或者,上述各个模块以任意组合的形式分别位于不同的处理器中。
为了更好的理解上述信息处理流程,以下结合优选实施例对上述技术方案进行解释说明,但不用于限定本发明实施例的技术方案。
本发明优选实施例包括以下步骤:
步骤一:扫地机器人(可以理解为是智能家居设备的一种)判断自身是否进入目标区域。
需要说明的是,目标区域可以是用户设定的区域,也可以是确定的寻找难度高的区域,本发明优选实施例还提供了如何确定区域是寻找难度高的技术方案:如图6所示,扫地机器人的上表面可以设置测距传感器,例如超声波测距传感器、激光测距传感器等。基于上表面设置的测距传感器,扫地机器人可以确定自身的上表面与天花板或家居设备(如床、沙发)的下表面之间的距离(如图6所示的d1和d2),具体地,扫地机器人可以通过测距传感器确定自身的上表面与智能家居设备的下表面之间的距离,当确定的距离小于预设的距离阈值时,扫地机器人可以确定自身进入到了目标区域。
在本发明优选实施例中,扫地机器人的上表面和侧面的交界处还可以设置摄像头,基于该设置的摄像头,扫地机器人可以获取扫地机器人行进前方区域的图像。此外,考虑到扫地机器人会进入到光强度较低的区域中,在本发明优选实施例中,还可以在摄像头的旁边设置闪光灯,以及光线传感器,在通过光纤传感器感应到扫地机器人进入到光强度较低的区域了,打开闪光灯,以确保扫地机器人在光强度较低的区域中也可以获取到扫地机器人行进前方区域内的较为清晰的图像。
实际操作过程中,扫地机器人可以在扫地过程中,通过自身的上表面设置的测距传感器来确定自身是否进入寻找难度较高的区域。
步骤二:若判断结果扫地机器人进入了目标区域,则扫地机器人可以开启摄像头,并对前方区域进行拍照,扫地机器人通过摄像头获取前方区域的图像;
可选地,扫地机器人在对前面区域进行拍照后,可以对拍照得到的图像进行存储,其中,在存储拍照得到的图像时,扫地机器人还可以对拍照时自身所处的位置进行存储,在另一个可选实施例中,摄像头可以和终端建立连接,并实时获取摄像头所拍摄的图像。
例如,如图7所示,扫地机器人可以在a点对前方区域M进行拍照,并得到图像1,然后,扫地机器人可以对图像1以及位置“a点”分别进行存储,并对图像1以及位置“a点”的对应关系进行存储,得到如表1所示的图像与位置的对应关系表。
表1
位置 | 图像 |
a点 | 图像1 |
… | … |
b点 | 图像2 |
可选地,扫地机器人可以在a点对前方区域M所拍摄的图像实时显示给与摄像头连接的终端上,用户可以通过终端实时查看扫地机器人所处的前方区域。
进一步地,在扫地机器人拍照之后,可以判断自身在预设时间段内,如30秒内,是否离开目标区域。若未离开目标区域,则扫地机器人可以再次对前方区域进行拍照,并对拍摄的照片以及拍照时自身当前所处的位置进行存储;若已离开目标区域,则扫地机器人可以指示摄像头停止对前方区域进行拍照。
步骤三:指定智能家居设备根据采集到的用户语音,确定物品的类型,扫地机器人确定物品的类型。
在本发明优选实施例中,指定智能家居设备可以是与扫地机器人建立了通信连接,且具备语音采集、语音识别以及语义分析功能的智能家居设备,在一个示例中,指定智能家居设备也可以为扫地机器人自身。
在本发明优选实施例中,指定智能家居设备可以对用户进行语音监听,并对监听到的语音进行语音识别和语义分析,当根据语义分析的结果确定用户了物品,并确定了物品的类型(如耳环、戒指)时,指定智能家居设备可以将物品的类型发送至扫地机器人,也可以是扫地机器人对用户进行语音监听,并对监听到的语音进行语音识别和语义分析,当根据语义分析的结果确定用户了物品,并确定物品的类型。
例如,指定智能家居设备监听到的语音可以为:我的耳环怎么不见了,则在对该语音进行语音识别和语义分析后,指定智能家居设备可以确定用户了物品,且确定物品的类型为:耳环,此时,指定智能家居设备可以将物品的类型“耳环”发送至扫地机器人,可选地,指定智能家居设备可以为扫地机器人。
需要说明的是,本发明优选实施例中,步骤三可以在步骤一和步骤二之后执行,也可以在步骤一和步骤二之前执行,本发明优选实施例对此不做限制。
特别地,步骤三可以发生在步骤二前,也即扫地机器人可以先确定用户需要找物品,并确定物品类型,再基于此,触发扫地机器人在进入目标区域后进行图像拍摄。
步骤四:扫地机器人判断存储的图像中是否包含物品的类型。
具体地,扫地机器人在获取到物品的类型之后,可以判断存储的图像中是否包含该物品的类型。其中,在判断时,可以根据现有的图像识别技术来判断,本发明优选实施例在此不再赘述。
步骤五:若存储的图像中包含物品的类型,则扫地机器人通过终端提醒用户该物品所处的位置,以使得用户根据该位置来找回的物品。
在本方案中,若扫地机器人存储的图像中包含该物品的类型,则扫地机器人可以向用户使用的终端(如手机、平板等)发送失物寻回消息,其中,该失物寻回消息中可以包括与该图像对应的位置。
用户使用的终端在接收到失物寻回消息后,可以通过震动、响铃等方式,发出失物寻回提醒,用户可以根据失物寻回提醒来打开终端,并在终端上查看到与该图像对应的位置(例如图8中的c点,需要说明的是,图7仅仅示出了大概示意图,实际的位置显示示意图可以更加细致),然后,用户可以根据该位置来确定该的物品可能存在的区域,并根据该的物品可能存在的区域来找回该的物品。
需要说明的是,本发明优选实施例中,位置的体现可以通过物品在房间内的相对位置来体现,也可以通过其他更明显的方式,本发明优先实施例对此不作限定。
本发明的实施例还提供了一种存储介质,该存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
可选地,在本实施例中,上述存储介质可以被设置为存储用于执行以下步骤的计算机程序:
S1,确定智能家居设备移动至目标区域;
S2,通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;
S3,获取每一所述图像信息内的物品的位置信息。
可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(Read-Only Memory,简称为ROM)、随机存取存储器(Random Access Memory,简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
本发明的实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
可选地,在本实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1,确定智能家居设备移动至目标区域;
S2,通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;
S3,获取每一所述图像信息内的物品的位置信息。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (12)
1.一种基于智能家居操作系统的信息处理方法,其特征在于,包括:
确定智能家居设备移动至目标区域;
通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;
获取每一所述图像信息内的物品的位置信息。
2.根据权利要求1所述的方法,其特征在于,确定智能家居设备移动至目标区域,至少包括以下之一:
确定所述智能家居设备移动至目标对象预先设置的第一目标区域;
确定所述智能家居设备移动至满足预设条件的第二目标区域。
3.根据权利要求2所述的方法,其特征在于,所述预设条件包括:通过设置在所述智能家居设备上表面的测距传感器确定所述智能家居设备与目标物体下表面的距离小于第一阈值。
4.根据权利要求1所述的方法,其特征在于,通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个区域存在的物品的图像信息之前,所述方法还包括:
在通过设置在所述智能家居设备上的光强传感器检测到所述智能家居设备所处的环境的光强亮度低于第二阈值的情况下,打开设置在所述智能家居设备上的闪光灯,以通过所述图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息。
5.根据权利要求1所述的方法,其特征在于,获取每一所述图像信息内的物品的位置信息包括:
当通过所述图像采集装置采集到所述目标区域内一个或多个子区域内存在的物品的图像信息时,将所述智能家居设备所处的第一位置信息作为所述物品的位置信息;
或者,当通过所述图像采集装置采集到所述目标区域内一个或多个子区域内存在的物品的图像信息时,将第二位置信息作为所述物品的位置信息,其中,所述第二位置信息为存在所述物品的子区域所对应的位置信息。
6.根据权利要求1所述的方法,其特征在于,确定智能家居设备移动至目标区域之后,所述方法还包括:
在检测到所述智能家居设备位于所述目标区域的时间小于第四阈值,且所述智能家居设备位于所述目标区域的情况下,指示所述图像采集装置继续采集所述目标区域内一个或多个区域存在的物品的图像信息;
在检测到所述智能家居设备位于所述目标区域的时间小于第四阈值,且所述智能家居设备未位于所述目标区域的情况下,指示所述图像采集装置停止采集所述目标区域内一个或多个区域存在的物品的图像信息。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
采集监听到的语音信息,从所述语音信息中确定待寻找的物品;
在所述待寻找的物品与任一图像信息中的物品匹配的情况下,提示所述任一图像信息中的物品的位置信息。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收指定智能家居设备发送的第一指示信息,其中,第一指示信息用于指示所述指定智能家居设备通过对采集到的语音信息进行识别所确定的待寻找的物品;
在所述第一指示信息中所指示的待寻找的物品与任一图像信息中的物品匹配的情况下,提示所述任一图像信息中的物品的位置信息。
9.根据权利要求7或8所述的方法,其特征在于,在从所述语音信息中确定待寻找的物品之前,或接收指定智能家居设备发送的第一指示信息之前,所述方法还包括:
对每一所述图像信息中的物品进行图像识别,以确定所述每一图像信息中所包含的物品。
10.一种基于智能家居操作系统的信息处理装置,其特征在于,包括:
确定模块,用于确定智能家居设备移动至目标区域;
采集模块,用于通过设置在所述智能家居设备上的图像采集装置采集所述目标区域内一个或多个子区域内存在的物品的图像信息;
保存模块,用于获取每一所述图像信息内的物品的位置信息。
11.一种存储介质,其特征在于,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行所述权利要求1至9中任一项中所述的方法。
12.一种扫地机器人,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行所述权利要求1至9任一项中所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910684995.0A CN110400346A (zh) | 2019-07-26 | 2019-07-26 | 基于智能家居操作系统的信息处理方法及装置、存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910684995.0A CN110400346A (zh) | 2019-07-26 | 2019-07-26 | 基于智能家居操作系统的信息处理方法及装置、存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110400346A true CN110400346A (zh) | 2019-11-01 |
Family
ID=68326217
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910684995.0A Pending CN110400346A (zh) | 2019-07-26 | 2019-07-26 | 基于智能家居操作系统的信息处理方法及装置、存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110400346A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111741230A (zh) * | 2019-11-21 | 2020-10-02 | 天津九安医疗电子股份有限公司 | 一种摄像头 |
CN111880488A (zh) * | 2020-06-29 | 2020-11-03 | 海尔优家智能科技(北京)有限公司 | 用于获取家电设备位置的方法及装置、设备 |
CN116091607A (zh) * | 2023-04-07 | 2023-05-09 | 科大讯飞股份有限公司 | 辅助用户寻找物体的方法、装置、设备及可读存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105246386A (zh) * | 2013-04-26 | 2016-01-13 | 艾薇波特公司 | 机器人吸尘器及其控制方法 |
CN105955051A (zh) * | 2016-06-20 | 2016-09-21 | 北京小米移动软件有限公司 | 智能家居设备控制方法及装置 |
CN107609616A (zh) * | 2017-11-01 | 2018-01-19 | 苏州经贸职业技术学院 | 一种家居物品智能分类寻找系统及其方法 |
CN108737740A (zh) * | 2018-07-10 | 2018-11-02 | 银河水滴科技(北京)有限公司 | 一种图像补光方法及系统 |
CN109326098A (zh) * | 2018-10-18 | 2019-02-12 | 上海闻泰信息技术有限公司 | 搜寻设备、方法及物品防丢系统 |
CN109522811A (zh) * | 2018-10-23 | 2019-03-26 | 中国人民解放军海军航空大学 | 一种物品搜寻系统及方法 |
CN109614897A (zh) * | 2018-11-29 | 2019-04-12 | 平安科技(深圳)有限公司 | 一种室内查找物品的方法及终端 |
CN109961074A (zh) * | 2017-12-22 | 2019-07-02 | 深圳市优必选科技有限公司 | 一种查找物品的方法、机器人及计算机可读存储介质 |
-
2019
- 2019-07-26 CN CN201910684995.0A patent/CN110400346A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105246386A (zh) * | 2013-04-26 | 2016-01-13 | 艾薇波特公司 | 机器人吸尘器及其控制方法 |
CN105955051A (zh) * | 2016-06-20 | 2016-09-21 | 北京小米移动软件有限公司 | 智能家居设备控制方法及装置 |
CN107609616A (zh) * | 2017-11-01 | 2018-01-19 | 苏州经贸职业技术学院 | 一种家居物品智能分类寻找系统及其方法 |
CN109961074A (zh) * | 2017-12-22 | 2019-07-02 | 深圳市优必选科技有限公司 | 一种查找物品的方法、机器人及计算机可读存储介质 |
CN108737740A (zh) * | 2018-07-10 | 2018-11-02 | 银河水滴科技(北京)有限公司 | 一种图像补光方法及系统 |
CN109326098A (zh) * | 2018-10-18 | 2019-02-12 | 上海闻泰信息技术有限公司 | 搜寻设备、方法及物品防丢系统 |
CN109522811A (zh) * | 2018-10-23 | 2019-03-26 | 中国人民解放军海军航空大学 | 一种物品搜寻系统及方法 |
CN109614897A (zh) * | 2018-11-29 | 2019-04-12 | 平安科技(深圳)有限公司 | 一种室内查找物品的方法及终端 |
Non-Patent Citations (1)
Title |
---|
韩力群: "《中国教育发展战略学会人工智能与机器人教育专业委员会规划丛书 人工智能上》", 30 June 2019 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111741230A (zh) * | 2019-11-21 | 2020-10-02 | 天津九安医疗电子股份有限公司 | 一种摄像头 |
CN111880488A (zh) * | 2020-06-29 | 2020-11-03 | 海尔优家智能科技(北京)有限公司 | 用于获取家电设备位置的方法及装置、设备 |
CN116091607A (zh) * | 2023-04-07 | 2023-05-09 | 科大讯飞股份有限公司 | 辅助用户寻找物体的方法、装置、设备及可读存储介质 |
CN116091607B (zh) * | 2023-04-07 | 2023-09-26 | 科大讯飞股份有限公司 | 辅助用户寻找物体的方法、装置、设备及可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110400346A (zh) | 基于智能家居操作系统的信息处理方法及装置、存储介质 | |
CN105956518A (zh) | 一种人脸识别方法、装置和系统 | |
WO2016026447A1 (zh) | 智能摄像系统的报警方法、智能摄像系统和网络摄像头 | |
TWI628611B (zh) | 同屏監控智慧設備狀態的方法、投影設備及用戶終端 | |
KR20180135817A (ko) | 보이스 에이젼트 포워딩 | |
CN106301429B (zh) | 有确定免提模式设置的公共交通工具检测的移动通信设备 | |
CN106714081B (zh) | 网络连接方法及智能设备 | |
CN104394505A (zh) | 救援方法及装置 | |
WO2017049612A1 (en) | Smart tracking video recorder | |
CN106214436A (zh) | 一种基于手机端的智能导盲系统及其导盲方法 | |
CN105374145A (zh) | 智能终端报警方法及装置 | |
CN106572152A (zh) | 一种消息提醒方法及装置 | |
CN106155050A (zh) | 智能清洁设备的工作模式调整方法及装置、电子设备 | |
CN207676159U (zh) | 一种家用养老管理系统 | |
CN106534785A (zh) | 监控方法及装置 | |
CN105044658B (zh) | 无线信号特征的生成方法、探测器及服务器 | |
CN111080968A (zh) | 一种独居老人意外发生联动控制预警方法及系统 | |
CN101507658A (zh) | 一种基于行为监测的病猪识别方法及系统 | |
CN106303961A (zh) | 自动报警方法及设备 | |
WO2011073499A1 (en) | Ad-hoc surveillance network | |
CN109993234A (zh) | 一种无人驾驶训练数据分类方法、装置及电子设备 | |
CN104916090A (zh) | 提示信息发送方法及装置 | |
CN108027644A (zh) | 一种启动眼球追踪功能的方法及移动设备 | |
CN109151994A (zh) | 一种室内定位方法及设备 | |
WO2018154902A1 (ja) | 情報処理装置、情報処理方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191101 |