CN111292412A - 一种环境管理方法及其装置 - Google Patents
一种环境管理方法及其装置 Download PDFInfo
- Publication number
- CN111292412A CN111292412A CN202010078308.3A CN202010078308A CN111292412A CN 111292412 A CN111292412 A CN 111292412A CN 202010078308 A CN202010078308 A CN 202010078308A CN 111292412 A CN111292412 A CN 111292412A
- Authority
- CN
- China
- Prior art keywords
- dimensional image
- target object
- target objects
- data information
- point cloud
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007726 management method Methods 0.000 title claims abstract description 24
- 238000000034 method Methods 0.000 claims abstract description 41
- 230000007613 environmental effect Effects 0.000 claims abstract description 39
- 238000012545 processing Methods 0.000 claims abstract description 32
- 238000012544 monitoring process Methods 0.000 claims abstract description 25
- 238000001514 detection method Methods 0.000 claims abstract description 14
- 230000008569 process Effects 0.000 claims description 9
- 239000007788 liquid Substances 0.000 description 16
- 239000000344 soap Substances 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 238000004422 calculation algorithm Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 238000012549 training Methods 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 238000001914 filtration Methods 0.000 description 4
- 230000011218 segmentation Effects 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 235000013361 beverage Nutrition 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000945 filler Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000002146 bilateral effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000002453 shampoo Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
- G06T2207/20028—Bilateral filtering
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Alarm Systems (AREA)
Abstract
本申请实施例提供一种环境管理方法及其装置,该方法包括:采集设备采集监测范围内的环境数据信息;检测范围内至少包括一个目标对象;根据环境数据信息识别出所有的目标对象,并确定所有的目标对象中的各个目标对象是否均满足相应的预设条件;在所有的目标对象中至少有一个目标对象满足相应的预设条件的情况下,进行预设处理。实施本申请实施例,能够保护用户隐私,节省人力成本,提升用户使用体验。
Description
技术领域
本申请涉及通信技术领域,尤其涉及一种环境管理方法及其装置。
背景技术
在现如今社会中,一般的公共场所都会安装有监控设备,它为人们的生活带来了一些便利和好处的同时,也使人们的隐私信息受到一定的威胁。
目前,大部分监控设备都是采用了机器识别的技术,机器识别是采用图像传感器识别图像,用户可通过观察识别到的图像、视频来查看监控区域的情况。但是对于一些隐私空间,比如公共洗手间,还是无法安装监控设备,而为了确保厕所能正常使用,不得不频繁的进行人工检测,造成人力成本的浪费。
发明内容
本申请实施例提供了一种环境管理方法及其装置,在对一些私密空间的环境进行管理的同时,能够保护用户的隐私,提升用户使用体验。
第一方面,本申请实施例提供了一种环境管理方法,包括:采集设备采集监测范围内的环境数据信息;所述检测范围内至少包括一个目标对象;根据所述环境数据信息识别出所有的目标对象,并确定所述所有的目标对象中的各个目标对象是否均满足相应的预设条件;在所述所有的目标对象中至少有一个所述目标对象满足相应的预设条件的情况下,进行预设处理。
可以看到,首先,采集设备采集监测范围内的环境数据信息,其中,环境数据信息包括物体的结构、形态、位置等信息;然后,并根据环境数据信息识别出所有的目标对象,检测所有的目标对象中的各个目标对象是否均满足相应的预设条件,若至少有一个目标对象满足相应的预设条件,则进行预设处理。本申请中,根据采集的环境中检测范围内的环境数据信息,来识别环境中的所有的目标对象,保护用户隐私,避免在利用拍摄的平面图像进行目标对象识别时,容易泄露用户隐私的情况;另外,在对环境进行管理时,无需人工频繁地进行检测,节省人力成本。
基于第一方面,在可能的实施方式中,所述根据所述环境数据信息识别出所有的目标对象,并确定所述所有的目标对象中的各个目标对象是否均满足相应的预设条件,包括:根据所述环境数据信息重构三维图像;所述三维图像中包括所述所有的目标对象;识别所述三维图像中的所有的目标对象,并确定所述三维图像中的各个目标对象是否均满足相应的预设条件。
可以看到,还可以先根据采集的环境数据信息构建三维图像,再去识别三维图像中包括的所有的额目标对象。需要说明的的是,这里的三维图像不同于平面图像,构建后得到的三维图像只包括了各个目标对象的轮廓、形状、位置信息(采集设备或装置能够识别该三维图像),并没有实物图像,所以实施本申请实施例,能够保护用户的隐私。
基于第一方面,在可能的实施方式中,所述环境数据信息包括在至少一个方向采集的点云数据;所述根据所述环境数据信息重构三维图像,包括:根据所述至少一个方向采集的点云数据得到表面的真实点云数据;根据所述表面的真实点云数据重构三维图像。
可以看到,本申请实施例中,环境数据信息包括在至少一个方向采集的点云数据,采集设备根据采集的至少一个方向的点云数据得到表面的真实点云数据,再根据表面的真实点云数据进行三维图像重建,。由至少一个方向的点云数据得到表面的真实点云数据,根据表面的真实点云数据重建三维图像,可以得到各个目标对象的三维图像。
基于第一方面,在可能的实施方式中,所述识别所述三维图像中的所有的目标对象,并确定所述三维图像中的各个目标对象是否均满足相应的预设条件,包括:将所述三维图像分割为多个子三维图像,使得每个子三维图像中包括一个目标对象;分别识别所述多个子三维图像的各个子三维图像中的目标对象,并确定所述各个子三维图像中的目标对象是否均满足相应的预设条件。
可以理解,本申请实施例中,在检测三维图像中的所有的目标对象是否均满足预设条件时,可以先将三维图像分割为多个子三维图像,使得每个子三维图像中包括一个目标对象,再检测每个子三维图像中的目标对象是否满足预设条件。
基于第一方面,在可能的实施方式中,所述预设处理包括以下其中一种操作:向终端发送提醒消息;控制更换装置将满足预设条件的目标对象更换为新的目标对象。
可以理解,在所有的目标对象中至少有一个目标对象满足预设条件(预设条件可以为,洗手液的液面高度低于某一阈值,或卷纸的厚度小于某一阈值等)时,说明环境中的有的目标对象处于快用尽的状态,需要及时更换,这时,可以向终端发送提醒消息,以提醒相关人员及时更换新的目标对象,或者也可以控制更换装置将满足预设条件的目标对象更换为新的目标对象,以供用户使用。
第二方面,本申请实施例提供了一种环境管理装置,包括:
采集模块,用于采集监测范围内的环境数据信息;所述检测范围内至少包括一个目标对象;
识别模块,根据所述环境数据信息识别出所有的目标对象,并确定所述所有的目标对象中的各个目标对象是否均满足相应的预设条件;
处理模块,用于在所述所有的目标对象中至少有一个所述目标对象满足相应的预设条件的情况下,进行预设处理。
在一具体实施方式中,所述识别模块具体用于:根据所述环境数据信息重构三维图像;所述三维图像中包括所述所有的目标对象;识别所述三维图像中包括的所有的目标对象,并确定所述三维图像中的各个目标对象是否均满足相应的预设条件。
在一具体实施方式中,所述环境数据信息包括在至少一个方向采集的点云数据;所述识别模块还用于:根据所述至少一个方向采集的点云数据得到表面的真实点云数据;根据所述表面的真实点云数据重构三维图像。
在一具体实施方式中,所述识别模块具体用于:将所述三维图像分割为多个子三维图像,使得每个子三维图像中包括一个目标对象;分别识别所述多个子三维图像的各个子三维图像中的目标对象,并确定所述各个子三维图像中的目标对象是否均满足相应的预设条件。
在一具体实施方式中,所述处理模块具体用于:向终端发送提醒消息;控制更换装置将满足预设条件的目标对象更换为新的目标对象。
在一种实现中,该装置可应用于采集设备。
本申请实施例提供的装置中的各个功能模块具体用于实现第一方面所描述的方法。
第三方面,本申请实施例提供一种计算设备,包括处理器、收发器以及存储器;所述存储器用于存储指令,所述处理器用于执行所述指令,所述收发器用于接收或者发送数据或信息;其中,所述处理器执行所述指令时,执行如上述第一方面或者第一方面的任意具体实现方式中所描述方法。
第四方面,本申请实施例提供一种环境管理系统,包括:采集设备和终端。采集设备首先采集环境数据信息,然后根据环境数据信息识别出所有的目标对象,其次,检测所有的目标对象是否满足预设条件,若有至少一个目标对象满足预设条件,则采集设备向终端发送提醒消息。终端,用于接收采集设备发送的提醒消息,以便相关人员根据提醒消息进行操作。本申请实施例提供的系统中的各个装置和设备具体用于实现第一方面所描述的方法。
第五方面,本申请实施例提供一种非易失性存储介质,用于存储程序指令,当该程序指令应用于采集设备时,可用于实现第一方面所描述的方法。
第六方面,本申请实施例提供一种计算机程序产品,该计算机程序产品包括程序指令,当该计算机程序产品被采集设备执行时,该采集设备执行前述第一方面所述方法。该计算机程序产品可以为一个软件安装包,在需要使用前述第一方面的任一种可能的设计提供的方法的情况下,可以下载该计算机程序产品并在采集设备上执行该计算机程序产品,以实现第一方面所述方法。
可以看到,本申请实施例提供了一种环境管理方法,该方法应用于采集设备。采集设备首先采集监测范围的环境数据信息,然后根据采集的环境数据信息识别所有的目标对象,或者根据采集的环境数据信息重构三维图像,识别三维图像中的所有的目标对象,检测所有的目标对象是否满足相应的预设条件,在至少一个目标对象满足相应的预设条件的情况下,进行预设处理。本申请中,利用环境数据信息识别目标对象,或者利用重构的三维图像识别目标对象,其中,三维图像中只包括目标对象的轮廓、形态、位置信息,并无实物图像,因此本申请实施例尤其适用于一些比较隐私的空间中,能够保护用户的隐私,同时,能够节省人力成本。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例的系统框架示意图;
图2是本申请实施例提供的一种采集设备的整体架构示意图;
图3是本申请实施例提供的一种环境管理方法的示意图;
图4是本申请实施例提供的一种环境管理装置的示意图;
图5是本申请实施例提供的一种采集设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
需要说明的是,在本申请实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
需要说明的是,当在本说明书和所附权利要求书中使用时,术语“包括”以及它们的任何变形,意图在于覆盖不排他的包含。例如包含了一系列单元/器件的系统、产品或者装置没有限定于已列出的单元/器件,而是可选地还包括没有列出的单元/器件,或者还可选地包括这些产品或者装置固有的其他单元/器件。
还应当理解,术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”或“在…的情况下”。
还需要说明的是,本说明书和权利要求书中的术语“第一”“第二”“第三”“第四”等用于区别不同的对象,而并非用于描述特定的顺序。
参见图1,图1为本申请实施例提供的一种系统架构,本系统架构涉及采集设备和终端,采集设备与终端通信连接。其中,采集设备用于采集监测范围内的环境数据信息,其中,环境数据信息包括监测范围内目标对象的位置信息、颜色信息、形态信息、结构信息等,采集设备上还安装有芯片,具有图像处理功能(包括图像分割、图像识别、图像重建等)和计算功能,且采集设备上具有通信装置,能够通过无线网络或有线网络向终端发送消息。终端可以是电脑、手机、平板电脑、手环、耳机等,甚至是具有连网功能的电子设备等。
其中,参考图2,图2是本申请实施例提供的一种采集设备的整体架构示意图,本申请中的采集设备不同于传统的采集设备,传统的采集设备是由传感器采集信息,然后发送给后台处理,由信号处理模块进行效果处理,再从信号处理模块传输到计算机视觉模块进行处理。本申请中的采集设备是传感器和计算机视觉模块的结合,采集设备采集完环境数据信息后,可以直接本地进行数据处理,包括:根据环境数据信息识别目标对象、确定各个目标对象是否均满足预设条件、根据环境数据信息重建三维图像、向终端发送提醒消息、控制更换装置更换新的目标对象等等,即由采集设备进行数据采集、分析处理得到结果,以及基于该结果进行特定控制等,且该采集设备的内部算法可以通过平台更新优化。
基于上述系统架构,对本申请实施例提供的方法进行描述。
参见图3,图3为本申请实施例提供的一种环境管理方法,可由采集设备执行,该方法首先采集检测范围内的环境数据信息,并根据采集的环境数据信息识别目标对象,再对目标对象进行检测,检测是否满足预设条件,在目标对象满足预设条件的情况下,采取一些后续处理操作。该方法适用于任一环境空间,尤其适用于隐私环境空间中。该方法流程包括但不限于以下步骤:
201、采集设备采集监测范围内的环境数据信息。
采集设备(可以通过3D结构光)采集环境中监测范围内的环境数据信息,其中检测范围内至少包括一个目标对象,环境数据信息包括环境内各个目标对象的结构信息、颜色信息、形态信息、位置信息等。在本申请实施例中,监测范围可以是洗手间,监测范围内的目标对象可以包括透明容器装的洗手液、纸巾等,监测范围还可以是酒店房间,监测范围的目标对象可以包括透明容器装的沐浴露、透明容器装的洗发液、香皂、纸巾等,监测范围还可以是办公室内的饮水机上水桶、餐厅自助饮料机上透明容器装的饮料等。
在一种实施例中,空间环境中有一台采集设备,至少一台采集设备在至少一个方向上采集检测范围内的环境数据信息,环境数据信息包括在至少一个方向上采集的点云数据。
在一种具体应用场景中,需要采集酒店各个房间的洗手间内物品的环境数据信息。酒店内存在很多个房间,每个房间的洗手间内均安装有一台采集设备,整个酒店内存在多台采集设备。每台采集设备能够采集洗手间内物品的环境数据信息,其中,环境数据信息包括物品的位置信息、颜色信息、形态信息、结构信息等。采集设备采集监测范围内的环境数据信息的频率,可以由用户根据具体的应用环境的需要进行设置,也可以采用采集设备默认的采集频率进行环境数据信息的采集。例如,若在公共洗手间等这种人流量比较大的场所,管理人员可以设置采集洗手间内物品的环境数据信息的频率为每五分钟一次或每十分钟一次;若在酒店的各个房间的洗手间内,或者在家庭里的洗手间等这种人流量相对比较少的场合,物品消耗比较慢,管理人员可以设置采集洗手间内物品的环境数据信息的频率为每半个小时一次或每一个小时一次,等等。
202、根据环境数据信息识别出所有的目标对象,并确定所有的目标对象中的各个目标对象是否均满足相应的预设条件。
采集的环境数据信息包括结构信息、形态信息、位置信息等,可以直接根据这些环境数据信息识别出所有的目标对象,并确定所有的目标对象是否均满足预设条件,其中,根据环境信息直接识别出目标对象,相比于,传统方法中先拍摄图像,再根据拍摄的图像识别图像中的目标对象来说,保护了用户隐私,避免用户的隐私通过图像被泄露出去的情况。需要说明的是,本申请中,采集设备根据环境数据信息识别所有的目标对象,识别的输出结果可以是目标对象的名称以及是否满足相应的预设条件,识别的输出结果也可以是各个目标对象的名称和相应的参数。例如,识别的输出结果为“洗手液,是”,则该输出结果表示目标对象为洗手液,洗手液满足相应的预设条件;识别的输出结果为“洗手液,液面高度:5cm”,假若预设条件为液面高度小于等于1cm,则该输出结果表示目标对象为洗手液,再经检测后得出,输出结果中的目标高度5cm不满足预设条件。
本申请中,也可以根据这些环境数据信息先重构出三维图像,再对三维图像进行识别,从而识别出三维图像中包括的所有目标对象,其中,重构后的三维图像只包括目标对象的轮廓信息、位置信息等,并没有实物图像,所以也能够保护用户的隐私。
在一种实施例中,可以根据采集的空间中的点云数据进行三维图像重建。若是点云数据是在至少两个方向上采集的,由于受到采集设备和环境的限制,在获取物体表面测量数据时,测量得到的点云数据往往只是物体的部分表面,可能会出现评议错位和旋转错位的现象,导致点云数据与实际理想数据出现偏差。因此,需要通过对这些点云数据进行整合配准,得到物体表面的真实点云数据。
其中,常用的配准方法是回顾性配准方法,即采集设备在对环境数据进行采集,成像后采取某种算法来寻找图像的空间相对关系。例如最大相关法,最大相关法是通过计算所得到的各点云数据的相关函数、相关系数、差值的平方和或差的绝对值和等,来优化各点云数据的变换参数,使各点云数据间相似性最大化的配准方法。
在至少两个方向的点云数据进行配准前,需要其他采集设备将采集的点云数据发送至主采集设备,由主采集设备进行配准及后续操作处理。其中,主采集设备可由用户自己在采集设备中设定。
若是点云数据在一个方向上采集的,其中,可直接根据采集的点云数据进行图像重建,获得透明容器的三维图像。
根据表面的真实点云数据重建三维图像的方法有多种,例如可以采用图像语义分割和卷积神经网络相结合的方法。首先,构建并训练识别模型,识别模型是采用大量的含有液体的透明容器的点云数据和对应的识别结果训练得到。对于单次训练来说,因为识别模型的输出尽可能的接近真正想要的识别结果,所以,可以将训练样本中的点云数据输入识别模型,从而得到对该训练样本中的点云数据进行识别后得到的识别结果,比较当前识别模型进行识别后得到的识别结果和真实值,再根据两者之间的差异值来更新识别模型中的卷积神经网络的每一层的权重向量(当然,在第一次更新之前通常会有初始化的过程,即为识别模型中的各层预先配置参数)。依照上述的方式不断地调整,直到识别模型输出的识别结果与阵势值的差异值足够的小。因此,就需要预先定义“如何比较当前识别结果和真实值之间的差异”,这便是损失函数(loss function)或目标函数(objective function),它们是用于衡量当前识别结果和真实值的差异的重要方程。其中,以损失函数举例,损失函数的输出值(loss)越高表示差异越大,那么识别模型的训练就变成了尽可能缩小这个loss的过程。然后,将采集的空间中的点云数据输入识别模型中进行识别。将采集的空间中的点云数据输入上述训练好的识别模型中,利用训练好的识别模型对采集的空间中的点云数据进行识别分析,得到每一个点云数据所属的物体类别。最后,根据识别结果输出三维图像的语义分割图。识别结果中每一个点云数据都有自己所属的类别,因此,根据识别结果可以构建出三维图像的语义分割图。
另外,还可以对重建得到的三维图像进行图像去噪等,故可以采用二维图像的去噪方法对重建后的三维图像进行去噪。可采用非局部均值滤波算法对重建后的三维图像进行去噪,使得在去除图像噪声的同时能较好地保留图像的边缘细节。除此之外,还可以采用双边滤波算法、高斯滤波、维纳滤波等算法,本申请对使用的去噪算法不做具体限定。
在确定重构后的三维图像中包括的所有目标对象是否满足预设条件时,可以对整个三维图像直接进行检测,其中整个三维图像中包括至少一个目标对象,在对整个三维图像直接进行检测时,需要对整个三维图像中的各个目标对象分别进行检测,分别判断是否满足预设条件;也可以将整个三维图像分割为多个子三维图像,每个子三维图像中包括一个目标对象,再对各个子三维图像进行进检测,判断各个子三维图像中的目标对象是否满足预设条件。
举例来说,若目标对象为洗手间的透明容器的洗手液,则判断该目标对象是否满足预设条件时,可以通过计算透明容器中的液体水位至透明容器底部的实际距离,再将该实际距离与预先设置的第一阈值进行比较,若实际距离小于预先设置的第一阈值,则确定该目标对象满足预设条件,否则确定该目标对象不满足预设条件;若目标对象为洗手间的纸,则判断该目标对象是否满足预设条件时,可以通过计算纸的实际厚度,再将该实际厚度与预先设置的第二阈值进行比较,若实际厚度小于预先设置的第二阈值,则确定该目标对象满足预设条件,否则确定该目标对象不满足预设条件;等等。
203、在所有的目标对象中至少有一个目标对象满足相应的预设条件的情况下,进行预设处理。
若所有的目标对象中至少有一个满足预设条件,则说明满足预设条件的目标对象(物品)已经接近用尽的状态,需要进行预设处理。其中,预设处理可以是向终端发送提醒消息,以提醒终端用户满足预设条件的目标对象(物品)已经接近用尽的状态,需要及时更换;或者也可以是采集设备控制更换装置更换满足预设条件的目标对象。例如,所有的目标对象包括:洗手间的透明容器中的洗手液和洗手间的纸,经识别检测后确定透明容器中的洗手液满足了预设条件,则采集设备会向管理终端的电脑发送提醒消息,以提醒工作人员,洗手液快用完了,工作人员在接收到该提醒消息后,会及时补充新的洗手液。
又例如,所有的目标对象包括:洗手间的透明容器中的洗手液和洗手间的纸,经识别检测后确定透明容器中的洗手液满足了预设条件,则采集设备控制液体加注器(更换装置)的阀门打开,液体加注器向透明容器中注入新的洗手液液体。
本申请中,经检测至少有一个目标对象满足相应的预设条件,需向终端发送提醒消息。在这之前可以设置各个终端的优先级,采集设备根据优先级向终端发送提醒消息。例如,在公共洗手间等这种人流量比较大的场所,管理人员设置的采集物品的环境数据信息的频率为每五分钟一次,预设置普通员工的手机优先级最高,然后组长的手机优先级次之,其次主管的手机比组长的手机的优先级次之,最终是经理的手机的优先级最低,当经检测至少有一个目标对象满足相应的预设条件时,采集设备会向优先级最高的普通员工的手机发送一次提醒消息,该提醒消息中至少包括:物品名称(也就是满足预设条件的目标对象的名称),物品名称的识别号(根据该识别号,相关人员可以确定物品的位置),并存储该提醒消息;至下次采集设备再次采集了环境数据信息后(上次采集设备采集环境数据信息后的五分钟),会再次根据采集的环境数据信息识别所有的目标对象,并得出所有的目标对象是否均满足相应的条件,在检测到有目标对象满足相应的预设条件的情况下,采集设备仍然会向优先级最高的普通员工的手机发送一次提醒消息,该提醒消息中至少包括:物品名称(也就是满足预设条件的目标对象的名称),物品名称的识别号(根据该识别号,相关人员可以确定物品的位置),并存储该提醒消息;再一次,集设备采集了环境数据信息,并根据采集的环境数据信息识别所有的目标对象,得出所有的目标对象是否均满足相应的条件,在检测到有目标对象满足相应的预设条件的情况下,这时,采集设备会将本次满足预设条件的物品名称和物品名称的识别号与前面连续两次的物品名称和物品名称的识别号进行判断,若本次满足预设条件的至少一个物品的物品名称和物品名称的识别号与前面两次的物品名称和物品名称的识别号均相同的,则意味着前两次优先级最高的普通员工并没有对该物品进行处理,则本次采集设备会将提醒消息发送至优先级次之的组长的手机,其中提醒消息中至少包括物品名称和物品名称的识别号;同理,在后续的处理过程中,若连续三次采集设备检测到有相同的物品名称和物品名称的标识号时,则默认为前两次的终端人员并未进行处理,第三次会转向优先级次之的终端发送提醒消息,提醒消息中至少包括物品名称和物品名称的标识号。
为了更加清楚地理解本申请的方案,下面以一实际应用场景为例进行描述。
在一应用场景中,首先,公共洗手间的多台采集设备在不同角度同时对洗手台上的含有洗手液的透明瓶子区域进行点云数据采集,采集频率为每一刻钟(15分钟)采集一次,其他设备将采集的局部点云数据发送至主采集设备,主采集设备经过对局部点云数据处理,得到完整表面的真实点云数据。然后,主采集设备根据完整表面的真实点云数据进行三维图像重建,得到含有洗手液的透明瓶子的三维图像。再次,主采集设备通过计算透明瓶子中洗手液的水位至瓶子底部的实际距离,与预设的阈值进行比较,若实际距离小于预设的阈值,则说明透明瓶子中洗手液已经不多,则主采集设备向公共洗手间所在的管理终端发送提醒消息,管理终端用户在接收到提醒消息后,会进行后续处理操作。
可以看到,实施本申请实施例的技术方案,采集设备根据采集的环境数据信息识别出目标对象,或者根据采集的环境数据信息重建三维图像,对去识别三维图像中的所有的目标对象,确定出各个目标对象是否满足预设条件,在至少有一个目标对象满足预设条件的情况下,进行相应的处理。本申请中,利用采集的环境数据信息识别目标对象或者根据采集的环境数据信息重建三维图像,对三维图像进行识别,其中,重建后的三维图像只包括目标对象的轮廓信息、位置信息等,不含有实物图像,起到保护用户隐私的作用,避免传统的图像识别中有可能导致用户图像或信息被泄露的情况;在环境管理中,无需人工不断地去检查环境,节省了人力成本。
上文描述了本申请实施例提供的一种环境管理方法,下面继续提供本申请实施例的硬件设备。
参见图4,图4是本申请实施例提供的一种环境管理装置30的结构示意图,该装置应用于采集设备,可以包括:
采集模块301,用于采集监测范围内的环境数据信息;检测范围内至少包括一个目标对象;
识别模块302,根据所述环境数据信息识别出所有的目标对象,并确定所述所有的目标对象中的各个目标对象是否均满足相应的预设条件;
处理模块303,用于在所有的目标对象中至少有一个目标对象满足预设条件的情况下,进行预设处理。
在一具体实施方式中,识别模块302具体用于:根据环境数据信息重构三维图像;所述三维图像中包括所述所有的目标对象;识别三维图像中包括的所有的目标对象,并确定所述三维图像中的各个目标对象是否均满足相应的预设条件。
在一具体实施方式中,环境数据信息包括在至少一个方向采集的点云数据;识别模块302还用于:根据至少一个方向采集的点云数据得到表面的真实点云数据;根据表面的真实点云数据重构三维图像。
在一具体实施方式中,识别模块302具体用于:将所述三维图像分割为多个子三维图像,使得每个子三维图像中包括一个目标对象;分别识别所述多个子三维图像的各个子三维图像中的目标对象,并确定所述各个子三维图像中的目标对象是否均满足相应的预设条件。
在一具体实施方式中,处理模块303具体用于:向终端发送提醒消息;控制更换装置将满足预设条件的目标对象更换为新的目标对象。
上述环境管理装置30的各功能模块可用于实现图3实施例所描述的方法,具体内容可参考图3实施例的相关内容中的描述,为了说明书的简洁,这里不再赘述。
参见图5,图5为本申请实施例公开的一种采集设备的结构示意图,用于描述采集设备的硬件组成及功能实体之间的数据流向。
本申请实施例中的采集设备可以是深度摄像机、模拟摄像机、摄像机或智能摄像头等各种摄像机,本申请中以摄像机600为例,摄像机600,又称IP摄像机(ip camera,IPC),采用嵌入式架构,集成了视频音频采集、信号处理、编码压缩、前端存储及网络传输等多种功能,再结合网络视频存储录像系统及管理平台软件,可以构成大规模、分布式的网络视频监控系统。参考图5,摄像机600包括镜头及传感器610、编码处理器620以及控制器630等部件。本领域技术人员可以理解,图4中示出的摄像机结构并不构成对摄像机的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。
下面结合图5对摄像机600的各个构成部件进行具体的介绍:
镜头及传感器610中的镜头是视频监控系统的关键设备,它的质量优劣直接影响摄像机600的整机质量。镜头可用于将外界的景物成像在传感器上,目前,摄像机600的镜头均是螺纹口的,通常由一组透镜和光阑组成,镜头有手动光圈(manual iris,MI)和自动光圈(auto iris,AI)之分,手动光圈镜头适合于亮度不变的场合,自动光圈镜头因亮度变更时其光圈会自动调整,所以适用于亮度变化的场合。可选地,该镜头可以为标准镜头、远摄镜头、变倍镜头或者可变焦点镜头等等,该镜头的材料可以为玻璃或者塑料。
镜头及传感器610中的传感器可以是影像传感器,如电荷耦合器件(chargecoupled device,CCD)传感器或互补性氧化金属半导体(complementary metal oxidesemiconductor,CMOS)传感器等,用于将传感器上接收到的光信号(物体的像)转化成电信号,并通过驱动电路输出至编码处理器620,由编码处理器620将镜头及传感器610采集的数字图像信号进行优化处理,如色彩、锐度或者白平衡等等,然后以网络视频信号的形式输入到控制器630。其中,编码处理器620用来对镜头及传感器610传来的数字图像信号进行优化处理,编码处理器620可以包括镜像信号处理器(image signal processor,ISP)或图像解码器等,此处不作具体限定。
控制器630具有刺刀螺母连接器(bayonet nut connector,BNC)视频输出、网络通讯接口、音频输入、音频输出、告警输出、告警输入、串口通讯接口等功能,控制器630还可以调用存储器640中的相应程序对获取的含有同一目标区域的多张平面图像进行三维重建获得含有该目标区域中多个目标物轮廓信息的三维图像。控制器630的数量可以是一个或多个。
存储器640与控制器630耦合,用于存储各种数据(如网络视频信号、摄像机的内外参数、图像处理算法,等等)、各种软件程序和/或多组程序指令。
具体实现中,存储器640可包括高速随机存取的存储器,并且也可包括非易失性存储器,例如一个或多个磁盘存储设备、闪存设备或其他非易失性固态存储设备。存储器640还可以存储一个或多个应用程序,如摄像机标定计算程序、图像处理程序、三维重建算法等。
通信接口650可以为有线接口或无线接口,用于与其他模块或设备进行通信,有线接口可以是以太接口、局域互联网络(local interconnect network,LIN)以及FlexRay接口,无线接口可以是蜂窝网络接口或使用无线局域网接口等。例如,本申请实施例中通信接口650具体可用于接收外部其他图像采集设备(例如,摄像机)发送的图像数据、接收外部输入设备输入的摄像机的外部参数以及焦距等内部参数。
尽管未示出,摄像机600还可以包括给各个部件供电的电源(比如电池)、滤光器或者蓝牙模块等,在此不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所揭露的仅为本发明一种较佳实施例而已,当然不能以此来限定本发明之权利范围,本领域普通技术人员可以理解实现上述实施例的全部或部分流程,并依本发明权利要求所作的等同变化,仍属于发明所涵盖的范围。
Claims (10)
1.一种环境管理方法,其特征在于,包括:
采集设备采集监测范围内的环境数据信息;所述检测范围内至少包括一个目标对象;
根据所述环境数据信息识别出所有的目标对象,并确定所述所有的目标对象中的各个目标对象是否均满足相应的预设条件;
在所述所有的目标对象中至少有一个所述目标对象满足相应的预设条件的情况下,进行预设处理。
2.根据权利要求1所述的方法,其特征在于,所述根据所述环境数据信息识别出所有的目标对象,并确定所述所有的目标对象中的各个目标对象是否均满足相应的预设条件,包括:
根据所述环境数据信息重构三维图像;所述三维图像中包括所述所有的目标对象;
识别所述三维图像中的所有的目标对象,并确定所述三维图像中的所述各个目标对象是否均满足相应的预设条件。
3.根据权利要求2所述的方法,其特征在于,所述环境数据信息包括在至少一个方向采集的点云数据;
所述根据所述环境数据信息重构三维图像,包括:
根据所述至少一个方向采集的点云数据得到表面的真实点云数据;
根据所述表面的真实点云数据重构三维图像。
4.根据权利要求2或3所述的方法,其特征在于,所述识别所述三维图像中的所有的目标对象,并确定所述三维图像中的所述各个目标对象是否均满足相应的预设条件,包括:
将所述三维图像分割为多个子三维图像,使得每个子三维图像中包括一个目标对象;
分别识别所述多个子三维图像的各个子三维图像中的目标对象,并确定所述各个子三维图像中的目标对象是否均满足相应的预设条件。
5.根据权利要求1-4所述的方法,其特征在于,所述预设处理包括以下其中一种操作:
向终端发送提醒消息;
控制更换装置将满足预设条件的目标对象更换为新的目标对象。
6.一种环境管理装置,其特征在于,包括:
采集模块,用于采集监测范围内的环境数据信息;所述检测范围内至少包括一个目标对象;
识别模块,根据所述环境数据信息识别出所有的目标对象,并确定所述所有的目标对象中的各个目标对象是否均满足相应的预设条件;
处理模块,用于在所述所有的目标对象中至少有一个所述目标对象满足相应的预设条件的情况下,进行预设处理。
7.根据权利要求6所述的装置,其特征在于,所述识别模块具体用于:
根据所述环境数据信息重构三维图像;所述三维图像中包括所述所有的目标对象;
识别所述三维图像中包括的所有的目标对象,并确定所述三维图像中的各个目标对象是否均满足相应的预设条件。
8.根据权利要求7所述的装置,其特征在于,所述环境数据信息包括在至少一个方向采集的点云数据;
所述识别模块还用于:根据所述至少一个方向采集的点云数据得到表面的真实点云数据;根据所述表面的真实点云数据重构三维图像。
9.根据权利要求7或8所述的装置,其特征在于,所述识别模块具体用于:
将所述三维图像分割为多个子三维图像,使得每个子三维图像中包括一个目标对象;
分别识别所述多个子三维图像的各个子三维图像中的目标对象,并确定所述各个子三维图像中的目标对象是否均满足相应的预设条件。
10.根据权利要求6-9任一项所述的装置,其特征在于,所述处理模块具体用于:
向终端发送提醒消息;
控制更换装置将满足预设条件的目标对象更换为新的目标对象。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010078308.3A CN111292412A (zh) | 2020-01-23 | 2020-01-23 | 一种环境管理方法及其装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010078308.3A CN111292412A (zh) | 2020-01-23 | 2020-01-23 | 一种环境管理方法及其装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111292412A true CN111292412A (zh) | 2020-06-16 |
Family
ID=71023533
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010078308.3A Pending CN111292412A (zh) | 2020-01-23 | 2020-01-23 | 一种环境管理方法及其装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111292412A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112418038A (zh) * | 2020-11-13 | 2021-02-26 | 深圳市优必选科技股份有限公司 | 人体检测方法、装置、电子设备及介质 |
CN112601054A (zh) * | 2020-12-14 | 2021-04-02 | 珠海格力电器股份有限公司 | 摄像画面的采集方法及装置、存储介质、电子设备 |
CN113870525A (zh) * | 2021-09-24 | 2021-12-31 | 国汽智控(北京)科技有限公司 | 电子监控方法、装置、设备、存储介质、程序产品 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101201605A (zh) * | 2007-12-07 | 2008-06-18 | 华中科技大学 | 一种基于机器视觉的医疗输液速度监测与控制系统 |
CN104225721A (zh) * | 2014-10-23 | 2014-12-24 | 戴文东 | 医用非接触点滴监测系统 |
CN107016518A (zh) * | 2017-03-21 | 2017-08-04 | 腾讯科技(深圳)有限公司 | 耗材使用状态管控方法和装置 |
CN107782675A (zh) * | 2017-09-30 | 2018-03-09 | 深圳迈瑞生物医疗电子股份有限公司 | 一种耗材信息处理方法及生物样本分析仪 |
CN108416337A (zh) * | 2018-04-28 | 2018-08-17 | 北京小米移动软件有限公司 | 提醒用户清洁镜头的方法及装置 |
CN109171585A (zh) * | 2018-09-21 | 2019-01-11 | 北京金山安全软件有限公司 | 洗碗机、洗碗机耗材监测方法、装置及存储介质 |
CN109543979A (zh) * | 2018-11-14 | 2019-03-29 | 广州慧睿思通信息科技有限公司 | 一种环境监控管理方法、系统、服务平台及介质 |
-
2020
- 2020-01-23 CN CN202010078308.3A patent/CN111292412A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101201605A (zh) * | 2007-12-07 | 2008-06-18 | 华中科技大学 | 一种基于机器视觉的医疗输液速度监测与控制系统 |
CN104225721A (zh) * | 2014-10-23 | 2014-12-24 | 戴文东 | 医用非接触点滴监测系统 |
CN107016518A (zh) * | 2017-03-21 | 2017-08-04 | 腾讯科技(深圳)有限公司 | 耗材使用状态管控方法和装置 |
CN107782675A (zh) * | 2017-09-30 | 2018-03-09 | 深圳迈瑞生物医疗电子股份有限公司 | 一种耗材信息处理方法及生物样本分析仪 |
CN108416337A (zh) * | 2018-04-28 | 2018-08-17 | 北京小米移动软件有限公司 | 提醒用户清洁镜头的方法及装置 |
CN109171585A (zh) * | 2018-09-21 | 2019-01-11 | 北京金山安全软件有限公司 | 洗碗机、洗碗机耗材监测方法、装置及存储介质 |
CN109543979A (zh) * | 2018-11-14 | 2019-03-29 | 广州慧睿思通信息科技有限公司 | 一种环境监控管理方法、系统、服务平台及介质 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112418038A (zh) * | 2020-11-13 | 2021-02-26 | 深圳市优必选科技股份有限公司 | 人体检测方法、装置、电子设备及介质 |
CN112601054A (zh) * | 2020-12-14 | 2021-04-02 | 珠海格力电器股份有限公司 | 摄像画面的采集方法及装置、存储介质、电子设备 |
CN113870525A (zh) * | 2021-09-24 | 2021-12-31 | 国汽智控(北京)科技有限公司 | 电子监控方法、装置、设备、存储介质、程序产品 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111292412A (zh) | 一种环境管理方法及其装置 | |
KR101803081B1 (ko) | 매장 관리 로봇 | |
CN110032670B (zh) | 时序数据的异常检测方法、装置、设备及存储介质 | |
CN105100724B (zh) | 一种基于视觉分析的智能家居远程安全监控方法 | |
CN109492536B (zh) | 一种基于5g架构的人脸识别方法及系统 | |
CN111339831B (zh) | 一种照明灯控制方法和系统 | |
CN110956060A (zh) | 动作识别、驾驶动作分析方法和装置及电子设备 | |
CN112699808B (zh) | 密集目标检测方法、电子设备及相关产品 | |
US11399520B2 (en) | System and method for smart aquaculture | |
CN108764100B (zh) | 一种目标行为检测方法及服务器 | |
CN111033445A (zh) | 用于手势辨识的系统和方法 | |
CN111240217B (zh) | 状态检测方法、装置、电子设备及存储介质 | |
CN109905641A (zh) | 一种目标监控方法、装置、设备及系统 | |
CN111401215A (zh) | 一种多类别目标检测的方法及系统 | |
JP7103229B2 (ja) | 不審度推定モデル生成装置 | |
CN107064159B (zh) | 一种依据植物黄叶检测判断生长趋势的装置及系统 | |
CN109284740A (zh) | 对鼠情进行统计的方法、装置、设备以及存储介质 | |
CN108765466A (zh) | 一种基于网络摄像头的智能视频监控系统及方法 | |
CN113158963B (zh) | 一种高空抛物的检测方法及装置 | |
CN114972727A (zh) | 用于多模态神经符号场景理解的系统和方法 | |
CN112863124B (zh) | 跌倒检测与协助 | |
CN109828474A (zh) | 基于大数据的云端智能环境管理方法及系统 | |
KR20150074429A (ko) | 가상자원의 위치정보 매핑 방법 및 장치 | |
CN111568233A (zh) | 饮水机控制方法、饮水机及计算机可读存储介质 | |
CN111200718A (zh) | 一种双目智能门锁系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |