CN110290352A - 监控方法及装置、电子设备以及存储介质 - Google Patents

监控方法及装置、电子设备以及存储介质 Download PDF

Info

Publication number
CN110290352A
CN110290352A CN201910579209.0A CN201910579209A CN110290352A CN 110290352 A CN110290352 A CN 110290352A CN 201910579209 A CN201910579209 A CN 201910579209A CN 110290352 A CN110290352 A CN 110290352A
Authority
CN
China
Prior art keywords
personage
information
camera
electronic equipment
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910579209.0A
Other languages
English (en)
Inventor
杜鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201910579209.0A priority Critical patent/CN110290352A/zh
Publication of CN110290352A publication Critical patent/CN110290352A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/65—Control of camera operation in relation to power supply
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/65—Control of camera operation in relation to power supply
    • H04N23/651—Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)

Abstract

本申请涉及一种监控方法及装置、电子设备和存储介质，监控方法应用于电子设备，电子设备包括摄像头及毫米波检测模组，电子设备内预置有监控白名单。监控方法包括：摄像头处于待机状态时，利用毫米波检测模组检测摄像头的拍摄区域内的动态目标；若拍摄区域内出现动态目标，则开启摄像头，摄像头进入监控状态；若动态目标为人物时，获取人物的影像，根据人物的影像及监控白名单，确定人物的身份信息；及根据人物的身份信息确定摄像头的工作状态，包括：若人物的身份信息存在于监控白名单内，则在预设的延时时长后控制摄像头待机。上述的方法中，根据出现在监控区域中的人物控制摄像头的工作状态，能够降低电子设备的能耗及监控所需的存储空间。

Description

监控方法及装置、电子设备以及存储介质
技术领域
本申请涉及消费性电子设备领域，尤其涉及一种监控方法及装置、电子设备以及存储介质。
背景技术
现代社会中监控设备已经被广泛应用于各个领域，如街道、商场、工业现场等，这些开放式区域为了确保安全，监控设备需要采用二十四小时不间断的方式运行，一方面生成大规模的视频数据信息需要存储，而要存储如此庞大的数据，人们通常采用更大容量的存储器存储数据，或者降低画质减小图像所占内存空间。采用大容量存储器，随之而来的是高额的成本并且受到技术瓶颈的限制，而降低画质仅是不得已而为之，并不利于监控设备发挥其作用。
发明内容
有鉴于此，本申请实施例提供一种监控方法及装置、电子设备以及存储介质，用于解决上述技术问题。
第一方面，本申请实施例提供一种监控方法，应用于电子设备，电子设备包括摄像头以及毫米波检测模组，电子设备内预置有监控白名单；监控方法包括：摄像头处于待机状态时，利用毫米波检测模组检测摄像头的拍摄区域内的动态目标；若拍摄区域内出现动态目标，则开启摄像头，摄像头进入监控状态；若动态目标为人物时，获取人物的影像，根据人物的影像以及监控白名单，确定人物的身份信息；以及根据人物的身份信息确定摄像头的工作状态，包括：若人物的身份信息存在于监控白名单内，则在预设的延时时长后控制摄像头处于待机状态。
第二方面，本申请实施例提供一种监控装置，应用于电子设备，电子设备包括摄像头以及毫米波检测模组，电子设备内预置有监控白名单；监控装置包括：检测模块、摄像头控制模块以及身份信息确定模块。检测模块用于在摄像头处于待机状态时，利用毫米波检测模组检测摄像头的拍摄区域内的动态目标。摄像头控制模块用于在拍摄区域内出现动态目标时开启摄像头，则摄像头进入监控状态。身份信息确定模块用于在动态目标为人物时获取人物的影像，根据人物的影像以及监控白名单，确定人物的身份信息。摄像头控制模块还用于根据人物的身份信息确定摄像头的工作状态，包括：若人物的身份信息存在于监控白名单内，则摄像头控制模块用于在预设的延时时长后控制摄像头处于待机状态。
第三方面，本申请实施例提供一种电子设备，包括摄像头以及毫米波检测模组；电子设备还包括：一个或多个处理器、存储器以及一个或多个应用程序，其中一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行，一个或多个程序配置用于执行上述的监控方法。
第四方面，本申请实施例提供一种计算机可读存储介质，其特征在于，计算机可读存储介质中存储有程序代码，程序代码可被处理器调用执行上述的监控方法。
在本申请实施例提供的监控方法应用于电子设备，利用电子设备的摄像头以及毫米波检测模组进行监控，当电子设备的拍摄区域为静态场景时，电子设备的摄像头处于待机状态，若拍摄区域内出现动态目标，则开启摄像头，摄像头进入监控状态，能够避免摄像头拍摄静止场景造成的存储资源、能量资源的浪费当拍摄区域内出现的动态目标是监控白名单允许的人物时，在预设的延时时长后控制摄像头处于待机状态，此时仍无需拍摄该人物存在时的场景，进一步地缩小监控视频文件所占用的空间，能够进一步节省存储资源、降低电子设备的能耗。
进一步地，由于运行监控所需能耗以及存储空间的要求均相对较低，上述的监控方法可以应用于电子设备，例如，可以应用于具有摄像头以及毫米波检测模组的便携式电子设备，由于便携式电子设备的便携特性，其可以由用户放置于任何需要临时执行监控任务的场所(例如，临时会议室等)作为监控设备，能够允许监控设备的位置得以灵活调整，适用性更为广泛。
附图说明
为了更清楚地说明申请的技术方案，下面将对实施方式中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是申请的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请提供的电子设备的立体示意图。
图2是本申请提供的监控方法的流程示意图。
图3是本申请提供的监控方法的应用场景示意图。
图4是本申请提供的监控装置的功能模块示意图。
图5是本申请实施例提供的用于执行本申请实施例的监控方法的电子设备的功能框图。
图6是本申请实施例提供的用于保存或者携带实现本申请实施例的监控方法的程序代码的存储单元。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
作为在本申请实施例中使用的“通信终端”(或简称为“终端”)、“电子设备”包括，但不限于被设置成经由有线线路连接(如经由公共交换电话网络(PSTN)、数字用户线路(DSL)、数字电缆、直接电缆连接，以及/或另一数据连接/网络)和/或经由(例如，针对蜂窝网络、无线局域网(WLAN)、诸如DVB-H网络的数字电视网络、卫星网络、AM-FM广播发送器，以及/或另一通信终端的)无线接口接收/发送通信信号的装置。被设置成通过无线接口通信的通信终端可以被称为“无线通信终端”、“无线终端”以及/或“电子设备”。电子设备、终端的示例包括但不限于包括卫星或蜂窝电话；可以组合蜂窝无线电电话与数据处理、传真以及数据通信能力的个人通信系统(PCS)终端；可以包括无线电电话、寻呼机、因特网/内联网接入、Web浏览器、记事簿、日历以及/或全球定位系统(GPS)接收器的PDA；以及常规膝上型和/或掌上型接收器、游戏机或包括无线电电话收发器的其它电子装置。下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。
请参阅图1，本申请实施方式提供一种电子设备100，电子设备100可以为但不限于为手机、平板电脑、游戏机等电子装置。本实施方式的电子设备100以手机为例进行说明。
电子设备100包括壳体20、显示屏30以及电子元件。在本申请实施例中，显示屏30为具有显示作用的屏幕，以显示电子设备100的相关界面或信息，供用户观看或操作。壳体20与显示屏30共同形成收容空间，电子元件容置于该收容空间。壳体200能够对电子元件提供防护作用，避免电子元件受外力撞击而导致内部元件错位或损坏，从而延长电子设备100的使用寿命。电子元件可以包括受话器、麦克风、摄像模组、电池、中央处理器、传感器等中至少一种，以实现电子设备100的相关功能。
电子设备100还可以包括摄像头40以及毫米波检测模组50，摄像头40以及毫米波检测模组50均可以设置于壳体20内。摄像头40的取景侧的朝向与显示屏30的朝向可以相同或相反，也即，摄像头40可以为电子设备100的前置摄像头或者后置摄像头。毫米波检测模组50可以集成于壳体20内，或贴附于壳体20的内表面。毫米波检测模组50用于检测预定范围内的人体、动物等能够辐射红外线的生物目标，也可以用于检测非生物目标。在本申请实施例中，电子设备100可以利用摄像头40获取识别对象的图像信息，并利用毫米波检测模组50获取识别对象的结构信息，从而能够精确地获取识别对象的三维信息。例如，电子设备100利用摄像头30拍摄用户的面部图像，同时利用毫米波检测模组50获取用户的面部的深度信息以及结构信息，结合面部图像、深度信息以及结构信息，电子设备100能够获取用户面部的较为精确的三维数据信息。
在一些实施方式中，毫米波检测模组50用于向识别对象发射波长为预设波长的电磁波，并用于接收经识别对象反射的电磁波，以根据收发的电磁波获取识别对象的结构信息。例如，毫米波检测模组50可以包括多个天线构成的天线阵列，每个天线用于发射出经过调制的毫米波，毫米波到达识别对象后被反射并由天线阵列接收，再利用解调技术、相干处理可得到反射毫米波信号的振幅和相位角信息，再对振幅和相位信息进行数字化处理，通过算法处理即可得到识别对象的结构信息。在一些实施方式中，上述用于获取识别对象的结构信息的毫米波检测模组50还可以用于收发无线通信信号，也即，可以与电子设备100中用于发送/接收无线通信信号的毫米波收发模组复用，从而避免电子设备100增加额外器件，降低电子设备100的制造成本。
请参阅图2，基于上述的电子设备，本申请实施例提供一种监控方法，利用电子设备的摄像头以及毫米波检测模组进行监控，当电子设备的拍摄区域为静态场景时，电子设备的摄像头处于待机状态，若拍摄区域内出现动态目标，则开启摄像头，摄像头进入监控状态，能够避免摄像头拍摄静止场景造成的存储资源、能量资源的浪费。进一步地，电子设备中预存有监控白名单，电子设备根据监控白名单确定识别对象的身份信息，并根据该身份信息控制摄像头工作。本申请实施例提供的监控方法一旦被触发，则实施例中方法的流程可以通过电子设备自动运行，其中，各个步骤在运行的时候可以是按照如流程图中的顺序先后进行，也可以是根据实际情况多个步骤同时进行，在此并不做限定。该监控方法可以包括步骤S101～S107。
步骤S101：摄像头处于待机状态时，利用毫米波检测模组检测摄像头的拍摄区域内的动态目标。
请参阅图3，上述的监控方法在电子设备中运行时，可以将电子设备放置于需要监控的区域，例如，可以将电子设备放置在用户所指定的室内或空间中。此时，可以通过电子设备的摄像头以及毫米波检测模组对摄像头的拍摄区域内的场景进行监控。
在本申请实施例中，摄像头处于待机状态应当理解为，摄像头未启动工作的状态。毫米波检测模组的检测方向可以与摄像头的取景方向一致。例如，当摄像头朝向监控区域的第一方向时，毫米波检测模组的信号发射方向也可以朝向第一方向，从而保证毫米波检测模组能够较为准确地检测摄像头的拍摄区域内的动态目标。可以理解的是，毫米波检测模组的信号发射方向并不唯一，其可以向四周发射信号，以检测全部的监控区域内的动态目标。毫米波检测模组用于发射以及接收预设波长的电磁波，从而检测摄像头的拍摄区域内的动态目标。具体而言，毫米波检测模组可以包括多个天线构成的天线阵列，每个天线用于发射出经过调制的毫米波，毫米波到达识别对象后反射回来被天线阵列接收，再利用解调技术、相干处理可得到反射毫米波信号的振幅和相位角信息。电子设备根据毫米波检测模组发射的毫米波信号的振幅和相位角信息、以及接收的毫米波信号的振幅和相位角信息，确定摄像头的拍摄区域内是否出现动态目标。
由于毫米波检测模组所发射的信号具有高分辨率和高穿透力的功能，其可以穿透障碍物并检测到较小的目标，而且具有极低的功率谱密度，可以防止在相同的频率范围内不受其他无线电系统的干扰，因此通过毫米波检测模组进行检测，不仅可以实现隐私保护，而且确保了检测的准确性并能够降低电子设备的功耗。
步骤S103：若拍摄区域内出现动态目标，则开启摄像头，摄像头进入监控状态。
进一步地，电子设备根据毫米波检测模组发射的毫米波信号的振幅和相位角信息、以及接收的毫米波信号的振幅和相位角信息，确定摄像头的拍摄区域内是否出现动态目标。例如，毫米波检测模组持续发射并接收多帧毫米波信号，当拍摄区域内未出现动态目标，则所监控的场景为静态场景，此时毫米波检测模组所接收的被障碍物反射的毫米波信号则处于稳定状态。若拍摄区域内出现动态目标，毫米波检测模组所接收的多帧毫米波信号则会发生变化。
具体在一些实施方式中，通过被识别对象反射的毫米波信号的接收时间的特征提取(FEAT，Feature extraction based on arrival time)来体现识别对象在检测区域内的运动状态以判断是否存在动态目标。FEAT可以根据识别对象与毫米波检测模组之间的距离来确定，通过多帧毫米波雷达信号的FEAT的变化可以体现识别对象与毫米波检测模组之间的距离变化，由此可以确定拍摄区域内出现动态目标。
步骤S105：若动态目标为人物，则获取人物的影像，根据人物的影像以及监控白名单，确定人物的身份信息。
进一步地，可以通过人脸识别技术、形体识别技术、姿态识别技术中的任意一种或多种，来判断动态目标是否为人物。若确定动态目标为人物，则电子设备进一步根据人物的影像以及监控白名单，确定人物的身份信息。
在一些实施方式中，电子设备内可以预置有监控白名单，该监控白名单包括免于监控的人物身份信息。例如，当监控区域为指定的会议室时，与会人员会被列为免于监控的人员，则与会人员的身份信息可以预置在电子设备中。预置与会人员的身份信息时，可以由用户手动输入监控白名单，也可以通过电子设备对每一位与会人员进行识别后导入监控白名单。免于监控的人物信息，可以包括人物所对应的人脸信息、形体信息、姿态信息、行为习惯信息中的至少一种，上述信息的储存形式可以包括文字、图像、视频、代码程序等，并不局限于本说明书描述，而保证电子设备能够根据摄像头所拍摄的人物的影像，通过人脸识别技术、形体识别技术、姿态识别技术中的任意一种或多种，在监控白名单中进行匹配以确定人物的身份信息即可。
步骤S107：根据人物的身份信息确定摄像头的工作状态。进一步地，步骤S105可以包括：若人物的身份信息存在于监控白名单内，则在预设的延时时长后控制摄像头处于待机状态。
电子设备通过将人物的影像与监控白名单中预置的人物身份信息相匹配后，确定人物的身份信息，其确定结果包括：当前监控区域内的人物为监控白名单中的人物，也即，监控区域内的人物的身份信息存在于监控白名单内；以及当前监控区域内的人物不是监控白名单中的人物，也即监控区域内的人物的身份信息不存在于监控白名单内。
进一步地，当电子设备确定监控区域内的人物的身份信息后，若电子设备确定人物的身份信息存在于监控白名单内，则该人物被认定为免监控对象，则电子设备启动计时，并在预设的延时时长后控制摄像头关闭。
本申请实施例提供的监控方法，利用电子设备的摄像头以及毫米波检测模组进行监控，当电子设备的拍摄区域为静态场景时，电子设备的摄像头处于待机状态，若拍摄区域内出现动态目标，则开启摄像头，摄像头进入监控状态，能够避免摄像头拍摄静止场景造成的存储资源、能量资源的浪费。当拍摄区域内出现的人物是监控白名单允许的人物时，在预设的延时时长后控制摄像头处于待机状态，此时仍无需拍摄该人物存在时的场景，进一步地缩小监控视频文件所占用的空间，能够进一步节省存储资源、降低电子设备的能耗。
基于上述的电子设备，本申请实施例还提供另一种监控方法，利用电子设备的摄像头以及毫米波检测模组进行监控，当电子设备的拍摄区域内无人时，电子设备的摄像头处于待机状态，若拍摄区域内出现人物，则开启摄像头，摄像头进入监控状态，能够避免摄像头拍摄无人场景造成的存储资源、能量资源的浪费。需要说明的是，本申请实施例的监控方法步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在说明书中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。在本实施例中，监控方法可以包括步骤S201～S204。
步骤S201：摄像头处于待机状态时，利用毫米波检测模组检测摄像头的拍摄区域内的动态目标。
请参阅图3，上述的监控方法在电子设备中运行时，可以将电子设备放置于需要监控的区域，例如，可以将电子设备放置在用户所指定的室内或空间中。此时，可以通过电子设备的摄像头以及毫米波检测模组对摄像头的拍摄区域内的场景进行监控。步骤S201的执行可以参考上述步骤S101，本说明书不再一一赘述。
步骤S202：若拍摄区域内出现动态目标，则开启摄像头，摄像头进入监控状态。
进一步地，电子设备根据毫米波检测模组发射的毫米波信号的振幅和相位角信息、以及接收的毫米波信号的振幅和相位角信息，确定摄像头的拍摄区域内是否出现动态目标。例如，毫米波检测模组持续发射并接收多帧毫米波信号，当拍摄区域内未出现动态目标，则所监控的场景为静态场景，此时毫米波检测模组所接收的被障碍物反射的毫米波信号则处于稳定状态。若拍摄区域内出现动态目标，毫米波检测模组所接收的多帧毫米波信号则会发生变化。
在一些实施例中，拍摄区域内出现动态目标后，电子设备根据动态目标的影像判断动态目标是否为人物。步骤S202还可以包括步骤：获取动态目标的影像，根据动态目标的影像，提取动态目标的外形特征，将外形特征与预设外形特征相匹配，若外形特征与预设外形特征的匹配度大于预设阈值，则确定动态目标为人物并执行步骤S203，否则确定动态目标为非人物；若动态目标为非人物，则保持摄像头处于待机状态，并返回执行步骤S201。在一些实施方式中，电子设备可以预置有外形特征数据库，该外形特征数据库可以包括人类的形体特征(例如躯干、四肢特征)、人类常见动作的姿态特征(例如行走、站立、坐卧等姿态)等图像或/及视频信息。电子设备通过将动态目标的外形特征与外形特征数据库中的外形特征相匹配，并根据匹配结果判断拍摄区域内的动态目标是否为人物。
步骤S203：若动态目标为人物，则获取人物的影像，根据人物的影像以及监控白名单，确定人物的身份信息。
进一步地，可以通过人脸识别技术、形体识别技术、姿态识别技术中的任意一种或多种，来判断动态目标是否为人物。若确定动态目标为人物，则电子设备进一步根据人物的影像以及监控白名单，确定人物的身份信息。在一些实施方式中，电子设备内可以预置有监控白名单，该监控白名单包括免于监控的人物身份信息。免于监控的人物信息，可以包括人物所对应的人脸信息、形体信息、姿态信息、行为习惯信息中的至少一种，上述信息的储存形式可以包括文字、图像、视频、代码程序等，并不局限于本说明书描述，而保证电子设备能够根据摄像头所拍摄的人物的影像，通过人脸识别技术、形体识别技术、姿态识别技术中的任意一种或多种，在监控白名单中进行匹配以确定人物的身份信息即可。
在本实施方式中，电子设备可以通过人脸识别技术确定人物的身份信息，则步骤S203可以包括：获取人物的影像，若人物的影像中存在人脸信息，则根据人脸信息以及监控白名单，确定人物的身份信息。具体在一些实施方式中，步骤S203可以包括：获取人物的影像，若人物的影像中存在面部特征，则提取人物的面部特征；根据人物的面部特征，确定人物的人脸信息；将人脸信息与监控白名单中预存的人脸信息进行匹配，获取匹配结果；以及根据匹配结果，确定人物的身份信息，其中，若人物的人脸信息与白名单中预存的人脸信息的匹配度大于预设阈值，则确定人物的身份信息存在于监控白名单内，若匹配度不大于预设阈值，则确定人物的身份信息不存在于监控白名单内。
在本实施方式中，电子设备可以根据摄像头拍摄的图像来识别人脸信息，也可以通过毫米波检测模组收发的毫米波信号识别人脸信息。进一步地，电子设备可以通过摄像头获取人物的影像，若人物的影像中存在面部特征，则提取人物的面部特征，包括：通过摄像头获取人物的面部图像，根据面部图像提取人物的面部特征；通过毫米波检测模组发射波长为预设波长的电磁波以及接收经人物面部反射的电磁波，获取人物的面部结构信息。则电子设备确定人物的人脸信息时，可以根据面部特征以及面部结构信息确定人物的人脸信息，以提高人脸识别的准确性。
进一步地，通过毫米波检测模组收发的毫米波信号识别人脸信息时，由毫米波检测模组发送的毫米波信号可以指向人物面部的各个点。具体而言，毫米波信号指向人物面部上的生物特征提取位置，生物特征提取位置可以为人物的右脸颊和左脸颊，当然，面部的其他部分(例如鼻子或眼睛等)可以代替人物脸颊用于识别。从生物特征提取位置反射的毫米波信号的相位角和振幅特性，确定人物面部的各种特征深度，并构建人物的人脸信息。
在其他的一些实施方式中，电子设备可以通过姿态识别技术确定人物的身份信息。在一些具体的实施例中，出现于拍摄区域中的人物的面部有可能存在被遮挡的状况，因此电子设备难以识别人物的人脸信息，此时，电子设备获取人物的影像后，通过人脸特征提取，不能识别人脸信息，则确定人物的影像中不存在人脸信息，并进一步地通过姿态识别技术确定人物的身份信息。具体而言，电子设备根据人物的影像，确定人物的行为习惯信息，并根据人物的行为习惯信息确定人物的身份信息。
进一步地，电子设备根据人物的行为习惯信息确定人物的身份信息时，执行：获取人物的影像，提取人物的行为特征；根据人物的行为特征，确定人物的行为习惯信息；将行为习惯信息与监控白名单中预存的行为习惯信息进行匹配，获取匹配结果；根据匹配结果，确定人物的身份信息，其中，若人物的行为习惯信息与白名单中预存的行为习惯信息的匹配度大于预设阈值，则确定人物的身份信息存在于监控白名单内，若人物的行为习惯信息与白名单中预存的行为习惯信息的匹配度不大于预设阈值，则确定人物的身份信息不存在于监控白名单内。
进一步地，通过毫米波检测模组的检测数据，提取人物的行为特征，包括：利用毫米波检测模组采集人体动作的深度图像，通过预置的人体骨架提取算法建立空间立体三维坐标，将每一帧图像中的人体提取出多个关节点的三维坐标，根据多个关节点的三维坐标，建立每一帧图像中的人体动作模型；以及根据连续的多帧人体动作模型，确定人物的行为特征。
具体而言，通过毫米波检测模组采集人体动作的深度图像，判断是否包含人体动作信息，若包含人体动作信息则通过电子设备预置的人体骨架提取算法建立空间立体三维坐标，将每一帧图像中的人体提取出多个关节点的三维坐标，对获得的人体骨架数据进行特征提取，对人体骨架模型中多个关节点提取其中的主要关节点，主要关节点可以包括脊椎关节点、中心肩关节点、头、左/右肩关节、左/右肘关节点、左/右手关节点、左/右髋关节点、左/右膝关节点和左/右踝关节点中的任意多个的组合，多个关节点中除主要关节点之外的其余关节点被省略；根据由相邻两个主要关节点建立肢体模型，通过坐标系转换，将世界坐标系转换为局部球坐标系来表示每个肢体模型的相对位置信息，从而根据肢体模型建立人体动作模型。进一步地根据毫米波检测模组的多帧毫米波信号，可以确定每一帧的人体动作模型，并根据连续的多帧人体动作模型，确定人物的行为特征。
应当理解的是，在具体的实施例中，人物的行为特征，可以包括人类常见动作的姿态特征(例如行走、站立、坐卧等姿态)。具体地例如：人物进入拍摄区域时的行走特征，人物在拍摄区域内的坐、卧、站立特征，人物在拍摄区域内执行特定动作(如开灯、打电话、写字)的动作特征等等。电子设备通过获取进入拍摄区域的人物的行为特征，可以确定其行为习惯，进而根据白名单中预存的行为习惯信息，确定该人物的身份信息，能够避免在人脸识别失效时的监控失效的状况，从而提高监控方法执行的可靠性。
步骤S204：根据人物的身份信息确定摄像头的工作状态。进一步地，步骤S204可以包括：若人物的身份信息存在于监控白名单内，则在预设的延时时长后控制摄像头处于待机状态。
电子设备通过将人物的影像与监控白名单中预置的人物身份信息相匹配后，确定人物的身份信息，其确定结果包括：当前监控区域内的人物为监控白名单中的人物，也即，监控区域内的人物的身份信息存在于监控白名单内；以及当前监控区域内的人物不是监控白名单中的人物，也即监控区域内的人物的身份信息不存在于监控白名单内。进一步地，当电子设备确定监控区域内的人物的身份信息后，若电子设备确定人物的身份信息存在于监控白名单内，则该人物被认定为免监控对象，则电子设备启动计时，并在预设的延时时长后控制摄像头关闭。
在一些实施方式中，电子设备的摄像头可转动地连接于壳体，并能够在电子设备的处理器的控制下相对壳体转动，则步骤S204还可以包括：若人物的身份信息不存在于监控白名单内，则控制摄像头持续追踪拍摄人物的影像，并存储所拍摄的影像。摄像头持续追踪拍摄人物的影像时，根据毫米波检测模组所接收的被该人物反射的毫米波信号，确定人物的实时空间坐标，并根据该实时空间坐标控制摄像头相对壳体转动，以确保摄像头能够始终拍摄到进入监控区域的人物。
进一步地，若人物的身份信息不存在于监控白名单内，则控制电子设备发出警报信息。当电子设备判断进入拍摄区域的人物不属于监控白名单中允许的人物时，则发出警报信息，包括：根据人物的影像，确定人物出现于拍摄区域的时间，并截取包含人物的图片；确定与电子设备绑定的关联电子设备；以及控制电子设备向关联电子设备发送警报信息，警报信息包括：人物出现于拍摄区域的时间、包含人物的图片中的至少一种信息。因此，若监控白名单以外的人物出现在监控区域内时，电子设备能够及时地发出警报信息，提高监控的可靠性。在一些实施例中，该关联的电子设备，可以为用户的另一台便携通信装置，通过绑定关联电子设备，能够使用户及时地获知用于监控的电子设备的监控状况。
在一些实施方式中，电子设备内可以预置有监控黑名单，该监控黑名单包括禁止进入监控区域的人物身份信息，则步骤S205还可以包括：若人物的身份信息存在于监控黑名单内，则根据人物的影像，确定人物出现于拍摄区域的时间，并截取包含人物的图片；确定与电子设备绑定的关联电子设备；以及控制电子设备向关联电子设备发送警报信息，警报信息包括：人物出现于拍摄区域的时间、包含人物的图片、电子装置的地理位置中的至少一种信息。
例如，当监控区域为指定的资料室时，不相关人员会被列为禁止进入监控区域的人员，则禁止进入监控区域的人物的身份信息可以预置在电子设备中。预置禁止进入监控区域的人员的身份信息时，可以由用户手动输入监控黑名单，也可以通过电子设备对每一位禁止进入监控区域的人员进行识别后导入监控黑名单。禁止进入监控区域的人员的人物信息，可以包括人物所对应的人脸信息、形体信息、姿态信息、行为习惯信息中的至少一种，上述信息的储存形式可以包括文字、图像、视频、代码程序等，并不局限于本说明书描述，而保证电子设备能够根据摄像头所拍摄的人物的影像，通过人脸识别技术、形体识别技术、姿态识别技术中的任意一种或多种，在监控黑名单中进行匹配以确定人物的身份信息即可。
本申请实施例提供的监控方法，利用电子设备的摄像头以及毫米波检测模组进行监控，当电子设备的拍摄区域内无人时，电子设备的摄像头处于待机状态，若拍摄区域内出现人物，则开启摄像头，摄像头进入监控状态，能够避免摄像头拍摄无人场景造成的存储资源、能量资源的浪费。当拍摄区域内出现的人物是监控白名单允许的人物时，在预设的延时时长后控制摄像头处于待机状态，此时仍无需拍摄该人物存在时的场景，进一步地缩小监控视频文件所占用的空间，能够进一步节省存储资源、降低电子设备的能耗。
请参阅图4，基于上述的监控方法，本申请实施方式还提供一种监控装置200，图4示出了监控装置200的结构框图。监控装置200运行于如图1所示的电子设备100中，其用于执行上述的监控方法。在本申请实施方式中，监控装置200被存储在电子设备100的存储器中，并被配置为由电子设备100的一个或多个处理器执行。
具体在图4所示的实施例中，监控装置200包括检测模块210、摄像头控制模块220以及身份信息确定模块230。可以理解的是，上述各模块可以为运行于计算机可读存储介质中的程序模块，上述各个模块的用途及工作具体如下：检测模块210用于在摄像头处于待机状态时，利用毫米波检测模组检测摄像头的拍摄区域内的动态目标。摄像头控制模块220用于在拍摄区域内出现动态目标时开启摄像头，则摄像头进入监控状态。身份信息确定模块230用于在动态目标为人物时获取人物的影像，根据人物的影像以及监控白名单，确定人物的身份信息。
在一些实施方式中，摄像头控制模块220还用于根据人物的身份信息确定摄像头的工作状态，包括：1)若人物的身份信息存在于监控白名单内，则摄像头控制模块220用于在预设的延时时长后控制摄像头处于待机状态；以及2)若人物的身份信息不存在于监控白名单内，则摄像头控制模块220控制摄像头持续追踪拍摄人物的影像，并存储所拍摄的影像。
在一些实施方式中，身份信息确定模块230用于获取人物的影像，若人物的影像中存在人脸信息，则用于根据人脸信息以及监控白名单，确定人物的身份信息。进一步地，在一些实施方式中，身份信息确定模块230用于获取人物的影像，若人物的影像中存在面部特征，则提取人物的面部特征；还用于根据人物的面部特征，确定人物的人脸信息，将人脸信息与监控白名单中预存的人脸信息进行匹配，获取匹配结果；以及用于根据匹配结果，确定人物的身份信息，其中，若人物的人脸信息与白名单中预存的人脸信息的匹配度大于预设阈值，则确定人物的身份信息存在于监控白名单内，若匹配度不大于预设阈值，则确定人物的身份信息不存在于监控白名单内。
进一步地，身份信息确定模块230提取人物的面部特征时，用于通过摄像头获取人物的面部图像，根据面部图像提取人物的面部特征；还用于通过毫米波检测模组发射波长为预设波长的电磁波以及接收经人物面部反射的电磁波，获取人物的面部结构信息。进一步地，身份信息确定模块230根据人物的面部特征，确定人物的人脸信息时，根据面部特征以及面部结构信息，确定人物的人脸信息。
在一些实施例中，身份信息确定模块230用于获取人物的影像，若人物的影像中不存在人脸信息，则根据人物的影像，确定人物的行为习惯信息，并根据人物的行为习惯信息确定人物的身份信息。进一步地，身份信息确定模块230用于获取人物的影像，提取人物的行为特征；根据人物的行为特征，确定人物的行为习惯信息；还用于将行为习惯信息与监控白名单中预存的行为习惯信息进行匹配，获取匹配结果；以及根据匹配结果，确定人物的身份信息，其中，若人物的行为习惯信息与白名单中预存的行为习惯信息的匹配度大于预设阈值，则确定人物的身份信息存在于监控白名单内，若人物的行为习惯信息与白名单中预存的行为习惯信息的匹配度不大于预设阈值，则确定人物的身份信息不存在于监控白名单内。
进一步地，身份信息确定模块230提取人物的行为特征时，利用毫米波检测模组采集人物的深度图像，通过预置的人体骨架提取算法建立空间立体三维坐标，将每一帧图像中的人物提取出多个关节点的三维坐标，再根据多个关节点的三维坐标，建立每一帧图像中的人体动作模型，并根据连续的多帧人体动作模型，确定人物的行为特征。
在一些实施方式中，监控装置200还可以包括警报模块240，若人物的身份信息不存在于监控白名单内，则警报模块240用于控制电子设备发出警报信息。进一步地，警报模块240用于根据人物的影像，确定人物出现于拍摄区域的时间，并截取包含人物的图片，还用于确定与电子设备绑定的关联电子设备，以及用于控制电子设备向关联电子设备发送警报信息，警报信息包括：人物出现于拍摄区域的时间、包含人物的图片中的至少一种信息。
在一些实施方式中，电子设备内还预置有监控黑名单，身份信息确定模块230还用于判断进入监控区域的人物是否存在于监控黑名单当中。进一步地，若人物的身份信息存在于监控黑名单内，则警报模块240还用于根据人物的影像，确定人物出现于拍摄区域的时间，并截取包含人物的图片，并确定与电子设备绑定的关联电子设备；以及用于控制电子设备向关联电子设备发送警报信息，警报信息包括：人物出现于拍摄区域的时间、包含人物的图片、电子装置的地理位置中的至少一种信息。
在一些实施方式中，监控装置200还可以包括动态目标确定模块250，动态目标确定模块2550用于获取动态目标的影像，根据动态目标的影像，提取动态目标的外形特征，将外形特征与预设外形特征相匹配，若外形特征与预设外形特征的匹配度大于预设阈值，则确定动态目标为人物，否则确定动态目标为非人物。在动态目标确定模块250确定动态目标为非人物，摄像头控制模块220还用于保持摄像头处于待机状态。
本申请实施例提供的监控方法以及装置中，利用电子设备的摄像头以及毫米波检测模组进行监控，当电子设备的拍摄区域内无人时，电子设备的摄像头处于待机状态，若拍摄区域内出现人物，则开启摄像头，摄像头进入监控状态，能够避免摄像头拍摄无人场景造成的存储资源、能量资源的浪费。当拍摄区域内出现的人物是监控白名单允许的人物时，在预设的延时时长后控制摄像头处于待机状态，此时仍无需拍摄该人物存在时的场景，进一步地缩小监控视频文件所占用的空间，能够进一步节省存储资源、降低电子设备的能耗。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本申请所提供的几个实施例中，所显示或讨论的模块相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。
另外，在本申请各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。
在实际的应用场景中，电子设备100可作为智能手机终端进行使用，在这种情况下，电子设备100通常还包括一个或多个(图5中仅示出一个)如下部件：处理器102、存储器104、拍摄模块108、音频电路110、输入模块118、电源模块122、以及一个或多个应用程序，其中一个或多个应用程序可以被存储在存储器104中并被配置为由一个或多个处理器102执行，一个或多个程序配置用于执行如前述方法实施例所描述的方法。拍摄模块108可以包括上述的摄像头40。本领域普通技术人员可以理解，图5所示的结构仅为示意，其并不对电子设备100的结构造成限定。例如，电子设备100还可包括比图5中所示更多或者更少的组件，或者具有与图5所示不同的配置。
处理器102可以包括一个或者多个处理核。处理器102利用各种接口和线路连接整个电子设备100内的各个部分，通过运行或执行存储在存储器104内的指令、程序、代码集或指令集，以及调用存储在存储器104内的数据，执行电子设备100的各种功能和处理数据。可选地，处理器102可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable LogicArray，PLA)中的至少一种硬件形式来实现。处理器102可集成中央处理器(CentralProcessing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器102中，单独通过一块通信芯片进行实现。
存储器104可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。存储器104可用于存储指令、程序、代码、代码集或指令集。存储器104可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储电子设备100在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。
拍摄模块108可以为上述的摄像头40，其设置于壳体20，其用于执行拍摄任务，例如，用于拍摄照片、视频或者进行可视电话通话等。音频电路110、扬声器101、声音插孔103、麦克风105共同提供用户与电子设备100之间的音频接口。具体地，音频电路110从处理器102处接收声音数据，将声音数据转换为电信号，将电信号传输至扬声器101。扬声器101将电信号转换为人耳能听到的声波。音频电路110还从麦克风105处接收电信号，将电信号转换为声音数据，并将声音数据传输给处理器102以进行进一步的处理。
本实施例中，输入模块118可包括设置在显示屏30上的触摸屏109，触摸屏109可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触摸屏109上或在触摸屏109附近的操作)，并根据预先设定的程序驱动相应的连接装置。除了触摸屏109，在其它变更实施方式中，输入模块118还可以包括其他输入设备，如按键107或麦克风105。按键107例如可包括用于输入字符的字符按键，以及用于触发控制功能的控制按键。控制按键的实例包括“返回主屏”按键、开机/关机按键等等。麦克风105可以用于接收用户的语音命令。
显示屏30用于显示由用户输入的信息、提供给用户的信息以及电子设备100的各种图形用户界面，这些图形用户界面可以由图形、文本、图标、数字、视频和其任意组合来构成，在一个实例中，触摸屏109可设置于显示屏30上从而与显示屏30构成一个整体。
电源模块122用于向处理器102以及其他各组件提供电力供应。具体地，电源模块122可包括电源管理装置、一个或多个电源(如电池或者交流电)、充电电路、电源失效检测电路、逆变器、电源状态指示灯以及其他任意与电子组件或显示屏30内电力的生成、管理及分布相关的组件。
应当理解的是，上述的电子设备100并不局限于智能手机终端，其应当指可以在移动中使用的计算机设备。具体而言，电子设备100，是指搭载了智能操作装置的移动计算机设备，电子设备100包括但不限于智能手机、智能手表、笔记本、平板电脑、POS机甚至包括车载电脑，等等。
请参考图6，其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读存储介质800中存储有程序代码，程序代码可被处理器调用执行上述方法实施例中所描述的方法。
计算机可读存储介质800可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地，计算机可读存储介质800包括非瞬时性计算机可读存储介质(non-transitory computer-readable storage medium)。计算机可读存储介质800具有执行上述方法中的任何方法步骤的程序代码810的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码810可以例如以适当形式进行压缩。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征或者特点包含于本申请的至少一个实施例或示例中。在本说明书中，描述的具体特征或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读存储介质中，以供指令执行装置、装置或设备(如基于计算机的装置、包括处理器的装置或其他可以从指令执行装置、装置或设备取指令并执行指令的装置)使用，或结合这些指令执行装置、装置或设备而使用。就本说明书而言，"计算机可读存储介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行装置、装置或设备或结合这些指令执行装置、装置或设备而使用的装置。计算机可读存储介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子设备)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读存储介质甚至可以是可在其上打印程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得程序，然后将其存储在计算机存储器中。
应当理解，本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行装置执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。此外，在本申请各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读存储介质中。
上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本申请的限制，本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。
最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (15)

1.一种监控方法，应用于电子设备，所述电子设备包括摄像头以及毫米波检测模组，所述电子设备内预置有监控白名单；所述监控方法包括：
所述摄像头处于待机状态时，利用所述毫米波检测模组检测所述摄像头的拍摄区域内的动态目标；
若所述拍摄区域内出现动态目标，则开启所述摄像头，所述摄像头进入监控状态；
若所述动态目标为人物，则获取所述人物的影像，根据所述人物的影像以及所述监控白名单，确定所述人物的身份信息；以及
根据所述人物的身份信息确定所述摄像头的工作状态，包括：若所述人物的身份信息存在于所述监控白名单内，则在预设的延时时长后控制所述摄像头处于待机状态。
2.如权利要求1所述的方法，其特征在于，所述电子设备的摄像头为可转动摄像头；所述根据所述监控白名单以及所述人物的身份信息确定所述摄像头的工作状态，还包括：
若所述人物的身份信息不存在于所述监控白名单内，则控制所述摄像头持续追踪拍摄所述人物的影像，并存储所拍摄的影像。
3.如权利要求2所述的方法，其特征在于，所述根据所述监控白名单以及所述人物的身份信息确定所述摄像头的工作状态，还包括：若所述人物的身份信息不存在于所述监控白名单内，则控制所述电子设备发出警报信息。
4.如权利要求3所述的方法，其特征在于，所述控制所述电子设备发出警报信息，包括：
根据所述人物的影像，确定所述人物出现于所述拍摄区域的时间，并截取包含所述人物的图片；
确定与所述电子设备绑定的关联电子设备；以及
控制所述电子设备向所述关联电子设备发送警报信息，所述警报信息包括：所述人物出现于所述拍摄区域的时间、包含所述人物的图片中的至少一种信息。
5.如权利要求1所述的方法，其特征在于，所述获取所述人物的影像，根据所述人物的影像以及所述监控白名单，确定所述人物的身份信息，包括：
获取所述人物的影像，若所述人物的影像中存在人脸信息，则
根据所述人脸信息以及所述监控白名单，确定所述人物的身份信息。
6.如权利要求5所述的方法，其特征在于，所述获取所述人物的影像，若所述人物的影像中存在人脸信息，则根据所述人脸信息以及所述监控白名单，确定所述人物的身份信息，包括：
获取所述人物的影像，若所述人物的影像中存在面部特征，则
提取所述人物的面部特征；
根据所述人物的面部特征，确定所述人物的人脸信息；
将所述人脸信息与所述监控白名单中预存的人脸信息进行匹配，获取匹配结果；以及
根据所述匹配结果，确定所述人物的身份信息，其中，若所述人物的人脸信息与所述白名单中预存的人脸信息的匹配度大于预设阈值，则确定所述人物的身份信息存在于所述监控白名单内，若所述匹配度不大于所述预设阈值，则确定所述人物的身份信息不存在于所述监控白名单内。
7.如权利要求6所述的方法，其特征在于，所述提取所述人物的面部特征，包括：
通过所述摄像头获取所述人物的面部图像，根据所述面部图像提取所述人物的面部特征；以及
通过所述毫米波检测模组发射波长为预设波长的电磁波以及接收经所述人物面部反射的电磁波，获取所述人物的面部结构信息；
所述根据所述人物的面部特征，确定所述人物的人脸信息，包括：根据所述面部特征以及所述面部结构信息，确定所述人物的人脸信息。
8.如权利要求5所述的方法，其特征在于，所述获取所述人物的影像，根据所述人物的影像以及所述监控白名单，确定所述人物的身份信息，包括：
获取所述人物的影像，若所述人物的影像中不存在人脸信息，则
根据所述人物的影像，确定所述人物的行为习惯信息，并根据所述人物的行为习惯信息确定所述人物的身份信息。
9.如权利要求8所述的方法，其特征在于，所述根据所述人物的影像，确定所述人物的行为习惯信息，并根据所述人物的行为习惯信息确定所述人物的身份信息，包括：
获取所述人物的影像，提取所述人物的行为特征；
根据所述人物的行为特征，确定所述人物的行为习惯信息；
将所述行为习惯信息与所述监控白名单中预存的行为习惯信息进行匹配，获取匹配结果；以及
根据所述匹配结果，确定所述人物的身份信息，其中，若所述人物的行为习惯信息与所述白名单中预存的行为习惯信息的匹配度大于预设阈值，则确定所述人物的身份信息存在于所述监控白名单内，若所述人物的行为习惯信息与所述白名单中预存的行为习惯信息的匹配度不大于预设阈值，则确定所述人物的身份信息不存在于所述监控白名单内。
10.如权利要求9所述的方法，其特征在于，所述获取所述人物的影像，提取所述人物的行为特征，包括：
利用所述毫米波检测模组采集所述人物的深度图像，通过预置的人体骨架提取算法建立空间立体三维坐标，将每一帧图像中的人物提取出多个关节点的三维坐标；
根据多个关节点的三维坐标，建立每一帧图像中的人体动作模型；以及
根据连续的多帧人体动作模型，确定所述人物的行为特征。
11.如权利要求1所述的方法，其特征在于，所述摄像头进入监控状态后，所述获取所述人物的影像之前，所述方法还包括：
获取所述动态目标的影像；
根据所述动态目标的影像，提取所述动态目标的外形特征；
将所述外形特征与预设外形特征相匹配，若所述外形特征与所述预设外形特征的匹配度大于预设阈值，则确定所述动态目标为人物，否则确定所述动态目标为非人物；以及
若所述动态目标为非人物，则保持所述摄像头处于待机状态。
12.如权利要求1～11中任一项所述的方法，其特征在于，所述电子设备内还预置有监控黑名单；所述根据所述人物的身份信息确定所述摄像头的工作状态，还包括：
若所述人物的身份信息存在于所述监控黑名单内，则根据所述人物的影像，确定所述人物出现于所述拍摄区域的时间，并截取包含所述人物的图片；
确定与所述电子设备绑定的关联电子设备；以及
控制所述电子设备向所述关联电子设备发送警报信息，所述警报信息包括：所述人物出现于所述拍摄区域的时间、包含所述人物的图片、所述电子装置的地理位置中的至少一种信息。
13.一种监控装置，应用于电子设备，所述电子设备包括摄像头以及毫米波检测模组，所述电子设备内预置有监控白名单；所述监控装置包括：
检测模块，用于在所述摄像头处于待机状态时，利用所述毫米波检测模组检测所述摄像头的拍摄区域内的动态目标；
摄像头控制模块，用于在所述拍摄区域内出现动态目标时开启所述摄像头，则所述摄像头进入监控状态；
身份信息确定模块，用于在所述动态目标为人物时获取所述人物的影像，根据所述人物的影像以及所述监控白名单，确定所述人物的身份信息；以及
摄像头控制模块还用于根据所述人物的身份信息确定所述摄像头的工作状态，包括：若所述人物的身份信息存在于所述监控白名单内，则所述摄像头控制模块用于在预设的延时时长后控制所述摄像头处于待机状态。
14.一种电子设备，其特征在于，所述电子设备包括摄像头以及毫米波检测模组；所述电子设备还包括：一个或多个处理器、存储器以及一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行如权利要求1-12中任一项所述的监控方法。
15.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有程序代码，所述程序代码可被处理器调用执行所述权利要求1-12中任一项所述的监控方法。
CN201910579209.0A 2019-06-28 2019-06-28 监控方法及装置、电子设备以及存储介质 Pending CN110290352A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910579209.0A CN110290352A (zh) 2019-06-28 2019-06-28 监控方法及装置、电子设备以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910579209.0A CN110290352A (zh) 2019-06-28 2019-06-28 监控方法及装置、电子设备以及存储介质

Publications (1)

Publication Number Publication Date
CN110290352A true CN110290352A (zh) 2019-09-27

Family

ID=68019835

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910579209.0A Pending CN110290352A (zh) 2019-06-28 2019-06-28 监控方法及装置、电子设备以及存储介质

Country Status (1)

Country Link
CN (1) CN110290352A (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110934585A (zh) * 2019-11-29 2020-03-31 维沃移动通信有限公司 一种监测方法及电子设备
CN110955795A (zh) * 2019-11-26 2020-04-03 秒针信息技术有限公司 录音控制方法和装置
CN111008574A (zh) * 2019-11-22 2020-04-14 智慧视通(杭州)科技发展有限公司 一种基于形体识别技术的重点人员轨迹分析方法
CN111083358A (zh) * 2019-12-05 2020-04-28 浙江大华技术股份有限公司 一种目标抓拍方法、装置及系统
CN111131695A (zh) * 2019-12-12 2020-05-08 深圳市大拿科技有限公司 门铃控制方法及相关装置
CN111199211A (zh) * 2019-12-31 2020-05-26 武汉星巡智能科技有限公司 具有红外唤醒功能的智能监控设备、监控方法及存储介质
CN111654616A (zh) * 2020-04-26 2020-09-11 成都市喜爱科技有限公司 拍摄方法和系统
CN111901567A (zh) * 2020-07-31 2020-11-06 平安信托有限责任公司 隐私保护方法、装置、设备及计算机可读存储介质
CN112019754A (zh) * 2020-09-16 2020-12-01 睿住科技有限公司 人脸识别监控方法及系统
CN112149552A (zh) * 2020-09-21 2020-12-29 三星电子（中国）研发中心 一种智能监控方法和装置
CN112363611A (zh) * 2020-11-27 2021-02-12 Oppo（重庆）智能科技有限公司 功耗调节方法和装置、电子设备、可读存储介质
CN112867104A (zh) * 2019-11-27 2021-05-28 云丁网络技术(北京)有限公司 用于节省设备功耗的方法和装置
CN112883348A (zh) * 2021-02-05 2021-06-01 西安电子科技大学 基于运动特征的身份验证方法、装置、设备及计算机存储介质
CN112989926A (zh) * 2021-02-03 2021-06-18 深圳达实智能股份有限公司 一种延长监控摄像头寿命方法和系统
CN113902888A (zh) * 2021-09-30 2022-01-07 中国电子技术标准化研究院 一种机器视觉环境快速构建方法和系统
CN113971501A (zh) * 2020-07-23 2022-01-25 易程融创信息科技有限公司 一种基于行为分析的绩效考核方法及系统
CN113992849A (zh) * 2021-10-20 2022-01-28 山东亲橙里教学用品有限公司 一种监测区间的间歇式监控设备
CN114554162A (zh) * 2022-03-07 2022-05-27 中国工商银行股份有限公司 视频监控方法、装置、计算机设备和存储介质

Citations (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102055954A (zh) * 2009-10-29 2011-05-11 财团法人工业技术研究院 监控方法及其系统
CN102685391A (zh) * 2012-04-25 2012-09-19 安徽师范大学 一种户外大型野生动物的拍摄装置
CN203142520U (zh) * 2013-01-31 2013-08-21 比亚迪股份有限公司 一种车用转向视频监控系统
CN103612599A (zh) * 2013-12-13 2014-03-05 奇瑞汽车股份有限公司 一种车辆报警系统
CN103731575A (zh) * 2012-10-15 2014-04-16 富士施乐株式会社 供电控制设备、图像处理设备和供电控制方法
CN104135642A (zh) * 2014-07-31 2014-11-05 青岛歌尔声学科技有限公司 一种智能监控方法及相关设备
CN203984590U (zh) * 2014-08-21 2014-12-03 成都易默生汽车技术有限公司 一种基于毫米波成像技术的公交车车载安检系统
CN105578130A (zh) * 2015-12-13 2016-05-11 深圳市贝尔信科技有限公司 一种视频楼宇监控系统
CN105791697A (zh) * 2016-04-15 2016-07-20 叶频 一种用于安防的摄像装置
CN105930767A (zh) * 2016-04-06 2016-09-07 南京华捷艾米软件科技有限公司 一种基于人体骨架的动作识别方法
CN205657777U (zh) * 2016-04-25 2016-10-19 北京泰信邦计算机系统网络工程技术有限公司 带有延时功能的省电监控摄像头
CN106503666A (zh) * 2016-10-26 2017-03-15 珠海格力电器股份有限公司 一种安全监控方法、装置及电子设备
CN206023931U (zh) * 2016-04-25 2017-03-15 北京泰信邦计算机系统网络工程技术有限公司 一种智能监控摄像头
CN106572268A (zh) * 2016-11-14 2017-04-19 北京小米移动软件有限公司 信息显示方法及装置
CN107231546A (zh) * 2017-07-05 2017-10-03 哈尔滨理工大学 基于云安全服务器的自主追踪移动特征的家用监控系统
CN107277452A (zh) * 2017-07-14 2017-10-20 中国矿业大学 基于信道状态信息的安防摄像头智能开闭装置及方法
CN108205656A (zh) * 2016-12-19 2018-06-26 日立乐金光科技株式会社 图像处理装置及图像处理方法
CN207908677U (zh) * 2017-12-28 2018-09-25 中科融通物联科技无锡有限公司 智能电子哨兵监控系统
CN108960173A (zh) * 2018-07-12 2018-12-07 芜湖博高光电科技股份有限公司 一种毫米波和摄像头融合人脸识别方法
CN109088982A (zh) * 2018-07-10 2018-12-25 Oppo广东移动通信有限公司 终端安全提高方法、装置、存储介质及终端设备
CN109151202A (zh) * 2018-08-30 2019-01-04 苏州矽典微智能科技有限公司 一种移动终端显示屏的控制方法及移动终端
CN109144728A (zh) * 2018-08-22 2019-01-04 Oppo广东移动通信有限公司 相机应用的占用控制方法和装置
CN109145883A (zh) * 2018-10-10 2019-01-04 百度在线网络技术（北京）有限公司 安全监控方法、装置、终端和计算机可读存储介质
CN109212499A (zh) * 2017-07-07 2019-01-15 英飞凌科技股份有限公司 使用雷达传感器识别目标的系统和方法
CN109344694A (zh) * 2018-08-13 2019-02-15 西安理工大学 一种基于三维人体骨架的人体基本动作实时识别方法
CN109558715A (zh) * 2018-10-31 2019-04-02 维沃移动通信有限公司 一种终端设备及人脸识别方法
CN109584492A (zh) * 2019-01-11 2019-04-05 江苏三棱智慧物联发展股份有限公司 一种用于边界入侵的智能预警系统及方法
CN109606357A (zh) * 2017-10-04 2019-04-12 英飞凌科技股份有限公司 用于使用毫米波雷达传感器控制车辆的操作的系统和方法

Patent Citations (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102055954A (zh) * 2009-10-29 2011-05-11 财团法人工业技术研究院 监控方法及其系统
CN102685391A (zh) * 2012-04-25 2012-09-19 安徽师范大学 一种户外大型野生动物的拍摄装置
CN103731575A (zh) * 2012-10-15 2014-04-16 富士施乐株式会社 供电控制设备、图像处理设备和供电控制方法
CN203142520U (zh) * 2013-01-31 2013-08-21 比亚迪股份有限公司 一种车用转向视频监控系统
CN103612599A (zh) * 2013-12-13 2014-03-05 奇瑞汽车股份有限公司 一种车辆报警系统
CN104135642A (zh) * 2014-07-31 2014-11-05 青岛歌尔声学科技有限公司 一种智能监控方法及相关设备
CN203984590U (zh) * 2014-08-21 2014-12-03 成都易默生汽车技术有限公司 一种基于毫米波成像技术的公交车车载安检系统
CN105578130A (zh) * 2015-12-13 2016-05-11 深圳市贝尔信科技有限公司 一种视频楼宇监控系统
CN105930767A (zh) * 2016-04-06 2016-09-07 南京华捷艾米软件科技有限公司 一种基于人体骨架的动作识别方法
CN105791697A (zh) * 2016-04-15 2016-07-20 叶频 一种用于安防的摄像装置
CN205657777U (zh) * 2016-04-25 2016-10-19 北京泰信邦计算机系统网络工程技术有限公司 带有延时功能的省电监控摄像头
CN206023931U (zh) * 2016-04-25 2017-03-15 北京泰信邦计算机系统网络工程技术有限公司 一种智能监控摄像头
CN106503666A (zh) * 2016-10-26 2017-03-15 珠海格力电器股份有限公司 一种安全监控方法、装置及电子设备
CN106572268A (zh) * 2016-11-14 2017-04-19 北京小米移动软件有限公司 信息显示方法及装置
CN108205656A (zh) * 2016-12-19 2018-06-26 日立乐金光科技株式会社 图像处理装置及图像处理方法
CN107231546A (zh) * 2017-07-05 2017-10-03 哈尔滨理工大学 基于云安全服务器的自主追踪移动特征的家用监控系统
CN109212499A (zh) * 2017-07-07 2019-01-15 英飞凌科技股份有限公司 使用雷达传感器识别目标的系统和方法
CN107277452A (zh) * 2017-07-14 2017-10-20 中国矿业大学 基于信道状态信息的安防摄像头智能开闭装置及方法
CN109606357A (zh) * 2017-10-04 2019-04-12 英飞凌科技股份有限公司 用于使用毫米波雷达传感器控制车辆的操作的系统和方法
CN207908677U (zh) * 2017-12-28 2018-09-25 中科融通物联科技无锡有限公司 智能电子哨兵监控系统
CN109088982A (zh) * 2018-07-10 2018-12-25 Oppo广东移动通信有限公司 终端安全提高方法、装置、存储介质及终端设备
CN108960173A (zh) * 2018-07-12 2018-12-07 芜湖博高光电科技股份有限公司 一种毫米波和摄像头融合人脸识别方法
CN109344694A (zh) * 2018-08-13 2019-02-15 西安理工大学 一种基于三维人体骨架的人体基本动作实时识别方法
CN109144728A (zh) * 2018-08-22 2019-01-04 Oppo广东移动通信有限公司 相机应用的占用控制方法和装置
CN109151202A (zh) * 2018-08-30 2019-01-04 苏州矽典微智能科技有限公司 一种移动终端显示屏的控制方法及移动终端
CN109145883A (zh) * 2018-10-10 2019-01-04 百度在线网络技术（北京）有限公司 安全监控方法、装置、终端和计算机可读存储介质
CN109558715A (zh) * 2018-10-31 2019-04-02 维沃移动通信有限公司 一种终端设备及人脸识别方法
CN109584492A (zh) * 2019-01-11 2019-04-05 江苏三棱智慧物联发展股份有限公司 一种用于边界入侵的智能预警系统及方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
公安部第三研究所: "《多摄像机协同关注目标检测跟踪技术》", 30 June 2017, 东南大学出版社 *
李祥明: "《电磁辐射与电磁环境监督管理》", 31 March 2019, 中国环境出版社 *

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111008574A (zh) * 2019-11-22 2020-04-14 智慧视通(杭州)科技发展有限公司 一种基于形体识别技术的重点人员轨迹分析方法
CN110955795A (zh) * 2019-11-26 2020-04-03 秒针信息技术有限公司 录音控制方法和装置
CN112867104A (zh) * 2019-11-27 2021-05-28 云丁网络技术(北京)有限公司 用于节省设备功耗的方法和装置
CN110934585A (zh) * 2019-11-29 2020-03-31 维沃移动通信有限公司 一种监测方法及电子设备
CN111083358A (zh) * 2019-12-05 2020-04-28 浙江大华技术股份有限公司 一种目标抓拍方法、装置及系统
US12106540B2 (en) 2019-12-05 2024-10-01 Zhejiang Dahua Technology Co., Ltd. Systems, methods, and devices for capturing images
CN111131695A (zh) * 2019-12-12 2020-05-08 深圳市大拿科技有限公司 门铃控制方法及相关装置
CN111199211A (zh) * 2019-12-31 2020-05-26 武汉星巡智能科技有限公司 具有红外唤醒功能的智能监控设备、监控方法及存储介质
CN111654616A (zh) * 2020-04-26 2020-09-11 成都市喜爱科技有限公司 拍摄方法和系统
CN113971501A (zh) * 2020-07-23 2022-01-25 易程融创信息科技有限公司 一种基于行为分析的绩效考核方法及系统
CN111901567A (zh) * 2020-07-31 2020-11-06 平安信托有限责任公司 隐私保护方法、装置、设备及计算机可读存储介质
CN112019754A (zh) * 2020-09-16 2020-12-01 睿住科技有限公司 人脸识别监控方法及系统
CN112149552A (zh) * 2020-09-21 2020-12-29 三星电子（中国）研发中心 一种智能监控方法和装置
CN112363611A (zh) * 2020-11-27 2021-02-12 Oppo（重庆）智能科技有限公司 功耗调节方法和装置、电子设备、可读存储介质
CN112363611B (zh) * 2020-11-27 2023-11-10 Oppo（重庆）智能科技有限公司 功耗调节方法和装置、电子设备、可读存储介质
CN112989926A (zh) * 2021-02-03 2021-06-18 深圳达实智能股份有限公司 一种延长监控摄像头寿命方法和系统
CN112989926B (zh) * 2021-02-03 2024-03-22 深圳达实智能股份有限公司 一种延长监控摄像头寿命方法和系统
CN112883348A (zh) * 2021-02-05 2021-06-01 西安电子科技大学 基于运动特征的身份验证方法、装置、设备及计算机存储介质
CN113902888A (zh) * 2021-09-30 2022-01-07 中国电子技术标准化研究院 一种机器视觉环境快速构建方法和系统
CN113992849A (zh) * 2021-10-20 2022-01-28 山东亲橙里教学用品有限公司 一种监测区间的间歇式监控设备
CN114554162A (zh) * 2022-03-07 2022-05-27 中国工商银行股份有限公司 视频监控方法、装置、计算机设备和存储介质

Similar Documents

Publication Publication Date Title
CN110290352A (zh) 监控方法及装置、电子设备以及存储介质
CN110290353A (zh) 监控方法及装置、电子设备以及存储介质
US11727789B2 (en) Augmented reality system for guards of controlled environment residents
CN113038362B (zh) 超宽带定位方法及系统
CN108989973B (zh) 移动终端
CN105550552B (zh) 一种移动终端的保护方法及装置
CN108671545A (zh) 控制虚拟对象与虚拟场景交互的方法、装置及存储介质
CN109558715A (zh) 一种终端设备及人脸识别方法
CN110505403A (zh) 一种录像处理方法及装置
CN108549802A (zh) 一种基于人脸识别的解锁方法、装置以及移动终端
CN110956580B (zh) 图像换脸的方法、装置、计算机设备以及存储介质
CN109510940A (zh) 一种图像显示方法及终端设备
CN108616682A (zh) 一种摄像头保护方法及终端
CN108494465A (zh) 一种智能天线的波束调整方法及移动终端
CN108647569B (zh) 一种指纹扫描方法、移动终端
CN110060062B (zh) 一种可穿戴设备丢失后的信息交流方法、可穿戴设备及存储介质
CN113900519A (zh) 注视点获取方法、装置以及电子设备
CN109218984A (zh) 一种追踪方法及移动终端
CN107967663A (zh) 一种布控区域防止非授权闯入的自动报警系统及方法
CN109995849A (zh) 一种信息记录方法及终端设备
CN108848240A (zh) 一种信息安全防护方法及终端
CN113329333B (zh) 一种室内定位的方法、装置、计算机设备及存储介质
CN109272549A (zh) 一种红外热点的位置确定方法及终端设备
CN110210851A (zh) 金融安全保护方法、可穿戴设备及计算机可读存储介质
CN114510698A (zh) 传感器控制方法、深度相机、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190927

RJ01 Rejection of invention patent application after publication