CN111915779A - 一种闸机控制方法、装置、设备和介质 - Google Patents

一种闸机控制方法、装置、设备和介质 Download PDF

Info

Publication number
CN111915779A
CN111915779A CN202010763067.6A CN202010763067A CN111915779A CN 111915779 A CN111915779 A CN 111915779A CN 202010763067 A CN202010763067 A CN 202010763067A CN 111915779 A CN111915779 A CN 111915779A
Authority
CN
China
Prior art keywords
gate
area
determining
image acquisition
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010763067.6A
Other languages
English (en)
Other versions
CN111915779B (zh
Inventor
战品先
彭明
周恒�
金龙
张洪科
熊启源
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202010763067.6A priority Critical patent/CN111915779B/zh
Publication of CN111915779A publication Critical patent/CN111915779A/zh
Application granted granted Critical
Publication of CN111915779B publication Critical patent/CN111915779B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/10Movable barriers with registering means
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/30Individual registration on entry or exit not involving the use of a pass
    • G07C9/32Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开了一种闸机控制方法、装置、设备和介质。由于本发明实施例中,根据采集的图像中人脸的眼间距,可以确定出该人脸的用户与闸机的垂直距离,根据该闸机对应的图像采集设备的视场角以及该闸机与相邻闸机的间距,可以确定出在用户与闸机在该垂直距离时,该图像采集设备的识别区域,由于在确定该图像采集设备的采集区域时,考虑到了该闸机与相邻闸机的间距,从而确保了该识别区域与相邻闸机的图像采集设备的识别区域不会存在重叠,从而提高了闸机控制方法的防干扰能力。

Description

一种闸机控制方法、装置、设备和介质
技术领域
本发明涉及人脸识别与闸机控制领域,尤其涉及一种闸机控制方法、装置、设备和介质。
背景技术
闸机是一种通道阻拦装置,用于管理人流实现一次只能通行一人。为了方便管理人流并规范行人出入,闸机的使用越来越普遍,目前闸机在地铁、高铁、写字楼、社区、工厂、旅游景区等有广泛的应用。
伴随着人脸识别技术的不断完善,通过图像采集设备识别人员身份的人脸识别闸机,因为其防伪性高、验证便捷,通过速率快的优点,逐渐取代了老式的刷卡闸机、指纹闸机等。
在现有技术中,图像采集设备与人脸识别闸机级联,通过图像采集设备获取图像,并根据图像中的人脸位置和大小判断该人脸的用户位于哪个人脸识别闸机,从而根据识别结果确定是否开启闸机。
而在人流量大的区域,例如地铁、车站等场景,为了增加通行速度,会安装多个人脸识别闸机,并且一个图像采集设备与一个人脸识别闸机相连,而由于图像采集设备的采集区域较大,会存在由于图像采集设备的采集区域重叠,导致当人员位于重叠的采集区域时,两个人脸识别闸机均开启,产生相互干扰的问题。
发明内容
本发明实施例提供了一种闸机控制方法、装置、设备和介质,用以解决现有技术中的由于图像采集设备的采集区域重叠,导致当人员位于重叠的采集区域时,两个闸机的通道均开启,产生相互干扰的问题。
本发明实施例提供了一种闸机控制方法,所述方法包括:
根据采集的图像中人脸的眼间距,确定所述人脸的用户与闸机的垂直距离;
根据所述闸机对应的图像采集设备的第一视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域;
若所述用户位于所述识别区域内,则对所述人脸的人脸图像进行识别确定是否控制闸机开启。
进一步地,所述根据所述闸机对应的图像采集设备的视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域,包括:
根据所述闸机对应的图像采集设备的第一视场角,确定所述第一视场角对应的第一区域内,所述人脸的用户与所述闸机在所述垂直距离时,所述图像采集设备的第一采集区域;
根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域;
在所述采集重叠区域中确定切分位置;
根据所述第一采集区域及所述切分位置,确定所述图像采集设备的识别区域。
进一步地,所述根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域,包括:
根据所述相邻闸机对应的图像采集设备的第二视场角,确定所述第二视场角对应的第二区域;
根据所述闸机与所述相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述第一区域与所述第二区域重合的采集重叠区域。
进一步地,所述在所述采集重叠区域中确定切分位置,包括:
若所述闸机与其相邻闸机对应的图像采集设备的参数相同,则针对与所述闸机存在相邻闸机的一侧,将所述采集重叠区域的中间位置作为切分位置。
相应地,本发明实施例提供了一种闸机控制装置,所述装置包括:
确定模块,用于根据采集的图像中人脸的眼间距,确定所述人脸的用户与闸机的垂直距离;根据所述闸机对应的图像采集设备的第一视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域;
识别模块,用于若所述用户位于所述识别区域内,则对所述人脸的人脸图像进行识别确定是否控制闸机开启。
进一步地,所述确定模块,具体用于根据所述闸机对应的图像采集设备的第一视场角,确定所述第一视场角对应的第一区域内,所述人脸的用户与所述闸机在所述垂直距离时,所述图像采集设备的第一采集区域;根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域;在所述采集重叠区域中确定切分位置;根据所述第一采集区域及所述切分位置,确定所述图像采集设备的识别区域。
进一步地,所述确定模块,具体用于根据所述相邻闸机对应的图像采集设备的第二视场角,确定所述第二视场角对应的第二区域;根据所述闸机与所述相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述第一区域与所述第二区域重合的采集重叠区域。
进一步地,所述确定模块,具体用于若所述闸机与其相邻闸机对应的图像采集设备的参数相同,则针对与所述闸机存在相邻闸机的一侧,将所述采集重叠区域的中间位置作为切分位置。
相应地,本发明实施例提供了一种电子设备,所述电子设备包括处理器和存储器,所述存储器用于存储程序指令,所述处理器用于执行存储器中存储的计算机程序时实现上述闸机控制方法中任一所述方法的步骤。
相应地,本发明实施例提供了一种计算机可读存储介质,其存储有计算机程序,所述计算机程序被处理器执行时实现上述闸机控制方法中任一所述方法的步骤。
由于本发明实施例中,根据采集的图像中人脸的眼间距,可以确定出该人脸的用户与闸机的垂直距离,根据该闸机对应的图像采集设备的视场角以及该闸机与相邻闸机的间距,可以确定出在用户与闸机在该垂直距离时,该图像采集设备的识别区域,由于在确定该图像采集设备的采集区域时,考虑到了该闸机与相邻闸机的间距,从而确保了该识别区域与相邻闸机的图像采集设备的识别区域不会存在重叠,从而提高了闸机控制方法的防干扰能力。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种闸机控制方法的过程示意图;
图2为本发明实施例提供的一种确定识别区域的示意图;
图3为本发明实施例提供的一种确定识别区域的示意图;
图4为本发明实施例提供的一种闸机控制方法的过程示意图;
图5为本发明实施例提供的一种闸机控制装置的结构示意图;
图6为本发明实施例提供的一种电子设备结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
实施例1:
图1为本发明实施例提供的一种闸机控制方法的过程示意图,该过程包括以下步骤:
S101:根据采集的图像中人脸的眼间距,确定所述人脸的用户与闸机的垂直距离。
本发明实施例提供的闸机控制方法应用于电子设备,该电子设备可以是服务器等设备,也可以是闸机控制器等设备。
电子设备为了对闸机进行控制需要获取到采集的闸机通道对应的图像,具体的该图像可以通过图像采集设备获取,该图像采集设备可以独立于该电子设备安装在闸机的对应位置,方便进行图像的采集,当图像采集设备采集到图像后,将该图像发送给电子设备。当然该图像采集设备也可以位于该电子设备中。
获取到采集的图像后,该电子设备可以通过人脸识别技术确定出该图像中的人脸区域图像,根据该图像中的人脸区域图像,确定该人脸区域图像中人脸的两眼之间的眼间距的值。
在本发明实施例中,根据镜头透射原理可知,在用户距离图像采集设备的镜头不同时,该用户的人脸在该图像采集设备采集的图像中的人脸区域的大小是不同的。而通过该图像采集设备采集的单张图像、以及该图像采集设备自身的参数,确定用户距镜头的距离,属于现有的单目视觉测量技术的手段。
具体的,在本发明实施例中,该电子设备根据预先确定的比例系数与该采集的图像中人脸的眼间距的乘积,确定该乘积为该采集的图像中人脸的眼间距对应的用户与闸机的垂直距离。其中,该比例系数是根据该电子设备的焦距和人脸的实际眼间距的常规值在出厂前预先设置的。
S102:根据所述闸机对应的图像采集设备的第一视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域。
根据该闸机对应的图像采集设备的第一视场角,该第一视场角对应的区域即为该图像采集设备能够采集到图像的采集区域。其中,视场角又称为视场,在光学仪器中,视场角是以光学仪器的镜头为顶点,以被测目标的物象可通过镜头的最大范围的两条边缘构成的夹角。视场角的大小决定了该图像采集设备的视野范围,视场角越大,该图像采集设备的视野范围就越大。
当图像采集设备的参数确定时,其对应的第一视场角是固定的,也就是夹角是固定的。用户与闸机的垂直距离不同时,在图像中经过用户且平行于成像平面的直线会与该夹角的边缘线产生交点,该两个交点之间的直线,可以认为是用户与闸机在该垂直距离时,该图像采集设备的第一采集区域。
在用户距离闸机在该垂直距离时,该闸机与相邻闸机的图像采集设备的采集区域之间可能存在重叠。在用户距离闸机的垂直距离为该垂直距离时,该图像采集设备的第一采集区域内,根据该闸机与相邻闸机的间距,可以确定出该图像采集设备的识别区域。
具体的,该相邻闸机的图像采集设备的参数确定时,该相邻闸机的图像采集设备对应的第二视场角是固定的。根据该第二视场角以及用户与闸机的垂直距离,可以确定出该相邻闸机的图像采集设备的第二采集区域。
根据该闸机与相邻闸机的间距、该闸机的图像采集设备的第一采集区域以及该相邻闸机的图像采集设备的第二采集区域,可以确定出该闸机与相邻闸机的图像采集设备的采集区域是否存在采集重叠区域。在确定该闸机与相邻闸机的图像采集设备的采集区域不存在采集重叠区域时,将该闸机的图像采集设备的第一采集区域作为该闸机的图像采集设备的识别区域。
在确定该闸机与相邻闸机的图像采集设备的采集区域存在采集重叠区域时,根据该闸机的图像采集设备的第一采集区域以及该采集重叠区域,确定该闸机的图像采集设备的第一采集区域去除该采集重叠区域之后的剩余区域,将该剩余区域作为该闸机的图像采集设备的识别区域,将该相邻闸机的图像采集设备的第二采集区域,作为该相邻闸机的图像采集设备的识别区域,即位于采集重叠区域的用户只能被该相邻闸机的图像采集设备识别。
S103:若所述用户位于所述识别区域内,则对所述人脸的人脸图像进行识别确定是否控制闸机开启。
根据该用户所在的位置,判断该位置是否位于该图像采集设备的识别区域内,若是,则对该图像采集设备采集的人脸图像进行识别,确定是否控制闸机开启。
其中,根据对图像采集设备采集的人脸图像进行识别控制闸机开启的方法属于现有技术。
由于本发明实施例中,根据采集的图像中人脸的眼间距,可以确定出该人脸的用户与闸机的垂直距离,根据该闸机对应的图像采集设备的视场角以及该闸机与相邻闸机的间距,可以确定出在用户与闸机在该垂直距离时,该图像采集设备的识别区域,由于在确定该图像采集设备的识别区域时,考虑到了该闸机与相邻闸机的采集重叠区域,从而确保了该识别区域与相邻闸机的图像采集设备的识别区域不存在重叠,从而提高了闸机控制方法的防干扰能力。
实施例2:
为了确定出该闸机对应的图像采集设备的识别区域,在上述实施例的基础上,在本发明实施例中,所述根据所述闸机对应的图像采集设备的视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域,包括:
根据所述闸机对应的图像采集设备的第一视场角,确定所述第一视场角对应的第一区域内,所述人脸的用户与所述闸机在所述垂直距离时,所述图像采集设备的第一采集区域;
根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域;
在所述采集重叠区域中确定切分位置;
根据所述第一采集区域及所述切分位置,确定所述图像采集设备的识别区域。
根据该闸机对应的图像采集设备的第一视场角,可以确定出该图像采集设备能够采集到图像的第一区域,该第一区域是指在第一视场角的两条边缘线的范围内的区域。
图2为本发明实施例提供的一种确定采集区域的示意图,如图2所示,该示意图为俯视图,角α即为该闸机1的图像采集设备的第一视场角的一半,Q点为闸机1的图像采集设备的镜头所在的位置,QA和QD即为视场角对应的两条边缘线,该第一视场角对应的第一区域为QA与QD所在的两条边缘线范围内的区域。其中,QA与QD所在的两条边缘线属于射线,射线的起点为Q点,QA所在的边缘线包括线段QA,QD所在的边缘线包括线段QD。
在人脸的用户与闸机的垂直距离为该垂直距离时,根据图像中经过用户且平行于成像平面的直线与该夹角的边缘线产生交点,该两个交点之间的直线,可以认为是该图像采集设备在用户与闸机在该垂直距离时的第一采集区域。具体的,在图2中,用户与闸机的垂直距离为该垂直距离QN时,直线AE即为经过用户且平行于成像平面的直线,该直线AE与该夹角AQD的边缘线的交点即为点A和点D,该点A和点D之间的直线AD即为该图像采集设备的第一采集区域。
根据该闸机与相邻闸机的间距,该相邻闸机中的一个闸机对应的图像采集设备的视场角对应区域的一条边缘线与该闸机的图像采集设备的一条边缘线相交时,在该人脸的用户与该闸机在该垂直距离,该相交的两条边缘线与该用户所在位置平行于成像平面的直线存在两个相交点,该两个相交点之间的直线,可以认为是用户与闸机在该垂直距离时,该图像采集设备与相邻闸机的图像采集设备的采集重叠区域。
如图2所示,该闸机1与闸机2的间距为QP时,该闸机2对应的图像采集设备的视场角对应区域的一条边缘线,即KB所在的直线与该闸机1的图像采集设备的一条边缘线QD所在的直线相交,在该人脸的用户与该闸机1在该垂直距离为该QN时,该相交的两条边缘线KB与QD,在该用户所在位置的水平线AE存在两个相交点B点和D点,该两个相交点B点和D点之间的直线BD,即为该闸机的图像采集设备与相邻闸机的图像采集设备的采集重叠区域。
由于与该闸机相邻的闸机最多有两个,故该闸机与相邻闸机的图像采集设备的采集重叠区域最多存在两个。
在确定出该图像采集设备与相邻闸机的图像采集设备的采集重叠区域后,为了确定出该图像采集设备的识别区域,还需要在该采集重叠区域中确定切分位置。
其中,该切分位置可以是该采集重叠区域中的任一位置,例如可以是该采集重叠区域的边缘位置,或者距离边缘三分之一的位置,或者四分之间的位置等。
根据该图像采集设备的第一采集区域及该切分位置时,该切分位置将该第一采集区域切分为两个第一子采集区域。将与该闸机的相邻闸机方向相反的第一子采集区域,确定为该图像采集设备的识别区域。
如图2所示,在该闸机1只与闸机2相邻时,用户与该闸机1的垂直距离为该垂直距离QN时,该闸机1的图像采集设备的第一采集区域为直线AD,该闸机1与闸机2的图像采集设备的采集重叠区域为直线BD,在该采集重叠区域BD中确定切分位置C,该切分位置C将该第一采集区域AD切分为区域AC和区域CD。该区域AC位于确定的该切分位置C的左侧,因此,将该区域AC确定为该闸机1的图像采集设备的识别区域。
图3为本发明实施例提供的一种确定识别区域的示意图,在该闸机1左侧存在相邻闸机,例如存在闸机3时,如图3所示,该闸机1与闸机3的图像采集设备的采集重叠区域为直线AR,在该采集重叠区域AR内存在切分位置S,该切分位置S将该第一采集区域AD切分为区域AS和区域SD。该区域SD位于确定的该切分位置S的右侧,因此,将该区域SD确定为该闸机1的图像采集设备的识别区域。
在该闸机1与闸机2和闸机3相邻时,根据确定出的闸机1的图像采集设备在只与闸机2相邻时确定的识别区域,以及该闸机1只与闸机3相邻时确定的识别区域,确定出两个识别区域的重合区域,将该重合区域确定为该闸机1在与闸机2、闸机3相邻时,闸机1的图像采集设备的识别区域。
如图3所示,在该闸机1与闸机2相邻时,该闸机1的图像采集设备的识别区域为直线AC。在该闸机1与闸机3相邻时,该闸机1的图像采集设备的识别区域为直线SD。在该闸机1与闸机2和闸机3相邻时,该直线AC和该直线SD的重合区域为直线SC,将该重合区域SC确定为该闸机1与闸机2、闸机3相邻时的识别区域。
实施例3:
为了确定图像采集设备的识别区域,在上述各实施例的基础上,在本发明实施例中,所述根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域,包括:
根据所述相邻闸机对应的图像采集设备的第二视场角,确定所述第二视场角对应的第二区域;
根据所述闸机与所述相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述第一区域与所述第二区域重合的采集重叠区域。
在本发明实施例中,该闸机的左右至少一端存在相邻闸机时,根据该相邻闸机对应的图像采集设备的第二视场角,可以确定出该第二视场角对应的第二区域。其中,该第二视场角与该第一视场角可以相同,也可以不同。
根据该相邻闸机对应的图像采集设备的第二视场角,可以确定出该图像采集设备能够采集到图像的第二区域,该第二区域是指在第二视场角的两条边缘线的范围内的区域。
如图2所示,在该闸机1的右边与闸机2相邻时,根据闸机2对应的图像采集设备的第二视场角,可以确定出该第二视场角对应的第二区域。以该闸机2对应的P点为闸机2的图像采集设备的镜头所在的位置,PB和PE即为视场角对应的区域的两条边缘线所在的直线,该第二视场角对应的第二区域为PB与PE所在的两条边缘线范围内的区域。
根据该闸机与所述相邻闸机的间距,在用户与所述闸机在所述垂直距离时,可以确定出位于该第一区域和第二区域内,由经过用户且平行于成像平面的直线与该第一区域和第二区域的边缘线的交点所限制的两个图像采集区域。
该两个图像采集区域的重合区域即为采集重叠区域。
如图2所示,在该闸机1与闸机2的间距为QP时,该第一区域与该第二区域的重合区域为以O点为顶点,边缘线OB与OD所限制的区域。在人脸的用户与闸机1在该垂直距离QN时,该第一区域与该第二区域的重合区域,与由经过用户且平行于成像平面的直线AE存在两个交点B点和D点,B点和D点之间的直线BD,即为人脸的用户与该闸机1在垂直距离QN时,该第一区域与该第二区域重合的采集重叠区域。
实施例4:
为了确定出采集重叠区域的切分位置,在上述各实施例的基础上,在本发明实施例中,所述在所述采集重叠区域中确定切分位置,包括:
若所述闸机与其相邻闸机对应的图像采集设备的参数相同,则针对与所述闸机存在相邻闸机的一侧,将所述采集重叠区域的中间位置作为切分位置。
在该闸机与相邻闸机对应的图像采集设备的参数相同时,该闸机对应的图像采集设备的第一视场角、与该相邻闸机对应的图像采集设备的第二视场角相同。
因此,在用户与该闸机的垂直距离为该垂直距离时,可以确定该闸机对应的第一采集区域、以及该相邻闸机对应的第二采集区域的区域大小相同。在确定出该闸机的图像采集设备与相邻闸机的图像采集设备的采集重叠区域后,根据该闸机存在相邻闸机的一侧,将该采集重叠区域的中间位置作为该切分位置。
具体的,在该闸机的右侧存在相邻闸机时,针对该闸机存在相邻闸机的右侧,将该采集重叠区域的中间位置作为该切分位置。在该闸机的左侧存在相邻闸机时,针对该闸机存在相邻闸机的左侧,将该采集重叠区域的中间位置作为该切分位置。在该闸机的左侧和右侧均存在相邻闸机时,针对该闸机存在相邻闸机的左侧和右侧,将左侧和右侧的采集重叠区域的中间位置均作为该切分位置。
图4为本发明实施例提供的一种闸机控制方法的过程示意图,如图4所示。
S401:根据采集的图像中人脸的眼间距Z,根据预先确定的比例系数X1与该采集的图像中人脸的眼间距的乘积,确定出人脸的用户与闸机的垂直距离。其中,该垂直距离=Z*X1。
S402:根据闸机对应的图像采集设备的第一视场角的一半视场角α,可以确定出该第一视场角对应的第一区域内,人脸的用户与闸机在该垂直距离Z*X1时,该闸机的图像采集设备的第一采集区域。
S403:在该闸机与其相邻闸机对应的图像采集设备的参数相同时,该相邻闸机对应的图像采集设备的第二视场角与第一视场角相同,根据该相邻闸机对应的图像采集设备的第二视场角,确定该第二视场角对应的第二区域。
S404:根据闸机与相邻闸机的间距QP,确定用户与该闸机在该垂直距离Z*X1时,该闸机的图像采集设备的采集重叠区域。其中,该采集重叠区域的实际宽度为Z*X1*tanα*2-QP。
S405:在该闸机与其相邻闸机对应的图像采集设备的参数相同时,针对存在相邻闸机的一侧,将采集重叠区域的中间位置作为切分位置。该采集重叠区域切分后的两部分采集重叠区域的实际宽度均为(Z*X1*tanα*2-QP)/2。
S406:根据该闸机对应的图像采集设备的第一采集区域、以及该采集重叠区域的中间位置,确定该图像采集设备的识别区域。
S407:若用户位于该识别区域内,则对人脸的人脸图像进行识别确定是否控制该闸机开启。
实施例5:
在上述各实施例的基础上,图5为本发明实施例提供的一种闸机控制装置的结构示意图,所述装置包括:
确定模块501,用于根据采集的图像中人脸的眼间距,确定所述人脸的用户与闸机的垂直距离;根据所述闸机对应的图像采集设备的第一视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域;
识别模块502,用于若所述用户位于所述识别区域内,则对所述人脸的人脸图像进行识别确定是否控制闸机开启。
所述确定模块501,具体用于根据所述闸机对应的图像采集设备的第一视场角,确定所述第一视场角对应的第一区域内,所述人脸的用户与所述闸机在所述垂直距离时,所述图像采集设备的第一采集区域;根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域;在所述采集重叠区域中确定切分位置;根据所述第一采集区域及所述切分位置,确定所述图像采集设备的识别区域。
所述确定模块501,具体用于根据所述相邻闸机对应的图像采集设备的第二视场角,确定所述第二视场角对应的第二区域;根据所述闸机与所述相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述第一区域与所述第二区域重合的采集重叠区域。
所述确定模块501,具体用于若所述闸机与其相邻闸机对应的图像采集设备的参数相同,则针对与所述闸机存在相邻闸机的一侧,将所述采集重叠区域的中间位置作为切分位置。
实施例6:
图6为本发明实施例提供的一种电子设备结构示意图,在上述各实施例的基础上,本发明实施例中还提供了一种电子设备,包括处理器601、通信接口602、存储器603和通信总线604,其中,处理器601,通信接口602,存储器603通过通信总线604完成相互间的通信;
所述存储器603中存储有计算机程序,当所述程序被所述处理器601执行时,使得所述处理器601执行如下步骤:
根据采集的图像中人脸的眼间距,确定所述人脸的用户与闸机的垂直距离;
根据所述闸机对应的图像采集设备的第一视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域;
若所述用户位于所述识别区域内,则对所述人脸的人脸图像进行识别确定是否控制闸机开启。
进一步地,所述处理器601具体用于所述根据所述闸机对应的图像采集设备的视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域,包括:
根据所述闸机对应的图像采集设备的第一视场角,确定所述第一视场角对应的第一区域内,所述人脸的用户与所述闸机在所述垂直距离时,所述图像采集设备的第一采集区域;
根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域;
在所述采集重叠区域中确定切分位置;
根据所述第一采集区域及所述切分位置,确定所述图像采集设备的识别区域。
进一步地,所述处理器601具体用于所述根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域,包括:
根据所述相邻闸机对应的图像采集设备的第二视场角,确定所述第二视场角对应的第二区域;
根据所述闸机与所述相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述第一区域与所述第二区域重合的采集重叠区域。
进一步地,所述处理器601具体用于所述在所述采集重叠区域中确定切分位置,包括:
若所述闸机与其相邻闸机对应的图像采集设备的参数相同,则针对与所述闸机存在相邻闸机的一侧,将所述采集重叠区域的中间位置作为切分位置。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口602用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选地,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述处理器可以是通用处理器,包括中央处理器、网络处理器(NetworkProcessor,NP)等;还可以是数字指令处理器(Digital Signal Processing,DSP)、专用集成电路、现场可编程门陈列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。
实施例7:
在上述各实施例的基础上,本发明实施例还提供了一种计算机可读存储介质,其存储有计算机程序,所述计算机程序被处理器执行如下步骤:
根据采集的图像中人脸的眼间距,确定所述人脸的用户与闸机的垂直距离;
根据所述闸机对应的图像采集设备的第一视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域;
若所述用户位于所述识别区域内,则对所述人脸的人脸图像进行识别确定是否控制闸机开启。
所述根据所述闸机对应的图像采集设备的视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域,包括:
根据所述闸机对应的图像采集设备的第一视场角,确定所述第一视场角对应的第一区域内,所述人脸的用户与所述闸机在所述垂直距离时,所述图像采集设备的第一采集区域;
根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域;
在所述采集重叠区域中确定切分位置;
根据所述第一采集区域及所述切分位置,确定所述图像采集设备的识别区域。
所述根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域,包括:
根据所述相邻闸机对应的图像采集设备的第二视场角,确定所述第二视场角对应的第二区域;
根据所述闸机与所述相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述第一区域与所述第二区域重合的采集重叠区域。
所述在所述采集重叠区域中确定切分位置,包括:
若所述闸机与其相邻闸机对应的图像采集设备的参数相同,则针对与所述闸机存在相邻闸机的一侧,将所述采集重叠区域的中间位置作为切分位置。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种闸机控制方法,其特征在于,所述方法包括:
根据采集的图像中人脸的眼间距,确定所述人脸的用户与闸机的垂直距离;
根据所述闸机对应的图像采集设备的第一视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域;
若所述用户位于所述识别区域内,则对所述人脸的人脸图像进行识别确定是否控制闸机开启。
2.根据权利要求1所述的方法,其特征在于,所述根据所述闸机对应的图像采集设备的视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域,包括:
根据所述闸机对应的图像采集设备的第一视场角,确定所述第一视场角对应的第一区域内,所述人脸的用户与所述闸机在所述垂直距离时,所述图像采集设备的第一采集区域;
根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域;
在所述采集重叠区域中确定切分位置;
根据所述第一采集区域及所述切分位置,确定所述图像采集设备的识别区域。
3.根据权利要求2所述的方法,其特征在于,所述根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域,包括:
根据所述相邻闸机对应的图像采集设备的第二视场角,确定所述第二视场角对应的第二区域;
根据所述闸机与所述相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述第一区域与所述第二区域重合的采集重叠区域。
4.根据权利要求2所述的方法,其特征在于,所述在所述采集重叠区域中确定切分位置,包括:
若所述闸机与其相邻闸机对应的图像采集设备的参数相同,则针对与所述闸机存在相邻闸机的一侧,将所述采集重叠区域的中间位置作为切分位置。
5.一种闸机控制装置,其特征在于,所述装置包括:
确定模块,用于根据采集的图像中人脸的眼间距,确定所述人脸的用户与闸机的垂直距离;根据所述闸机对应的图像采集设备的第一视场角及所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的识别区域;
识别模块,用于若所述用户位于所述识别区域内,则对所述人脸的人脸图像进行识别确定是否控制闸机开启。
6.根据权利要求5所述的装置,其特征在于,所述确定模块,具体用于根据所述闸机对应的图像采集设备的第一视场角,确定所述第一视场角对应的第一区域内,所述人脸的用户与所述闸机在所述垂直距离时,所述图像采集设备的第一采集区域;根据所述闸机与相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述图像采集设备的采集重叠区域;在所述采集重叠区域中确定切分位置;根据所述第一采集区域及所述切分位置,确定所述图像采集设备的识别区域。
7.根据权利要求6所述的装置,其特征在于,所述确定模块,具体用于根据所述相邻闸机对应的图像采集设备的第二视场角,确定所述第二视场角对应的第二区域;根据所述闸机与所述相邻闸机的间距,确定与所述闸机在所述垂直距离时,所述第一区域与所述第二区域重合的采集重叠区域。
8.根据权利要求5所述的装置,其特征在于,所述确定模块,具体用于若所述闸机与其相邻闸机对应的图像采集设备的参数相同,则针对与所述闸机存在相邻闸机的一侧,将所述采集重叠区域的中间位置作为切分位置。
9.一种电子设备,其特征在于,所述电子设备包括处理器和存储器,所述存储器用于存储程序指令,所述处理器用于执行存储器中存储的计算机程序时实现如权利要求1-4中任一所述闸机控制方法的步骤。
10.一种计算机可读存储介质,其特征在于,其存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1-4中任一所述闸机控制方法的步骤。
CN202010763067.6A 2020-07-31 2020-07-31 一种闸机控制方法、装置、设备和介质 Active CN111915779B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010763067.6A CN111915779B (zh) 2020-07-31 2020-07-31 一种闸机控制方法、装置、设备和介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010763067.6A CN111915779B (zh) 2020-07-31 2020-07-31 一种闸机控制方法、装置、设备和介质

Publications (2)

Publication Number Publication Date
CN111915779A true CN111915779A (zh) 2020-11-10
CN111915779B CN111915779B (zh) 2022-04-15

Family

ID=73287573

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010763067.6A Active CN111915779B (zh) 2020-07-31 2020-07-31 一种闸机控制方法、装置、设备和介质

Country Status (1)

Country Link
CN (1) CN111915779B (zh)

Citations (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2849500A1 (fr) * 2002-12-31 2004-07-02 Ier Dispositif de controle de la position d'une piece mecanique par rapport a une reference fixe
CN102184413A (zh) * 2011-05-16 2011-09-14 浙江大华技术股份有限公司 车辆智能监控系统中车身颜色自动识别方法
CN102510448A (zh) * 2011-10-13 2012-06-20 苏州百滨电子科技有限公司 多处理器嵌入式图像采集和处理方法和装置
CN102509255A (zh) * 2011-10-26 2012-06-20 苏州百滨电子科技有限公司 高速图像采集和处理方法和装置
US20130171683A1 (en) * 2003-03-28 2013-07-04 Inguran, Llc Flow cytometer apparatus and method
CN104899952A (zh) * 2015-06-18 2015-09-09 阿里巴巴集团控股有限公司 基于即时通讯应用的考勤方法及装置
EP3156978A1 (en) * 2015-10-14 2017-04-19 Samsung Electronics Polska Sp. z o.o. A system and a method for secure speaker verification
CN106845383A (zh) * 2017-01-16 2017-06-13 腾讯科技(上海)有限公司 人头检测方法和装置
CN107610296A (zh) * 2017-09-22 2018-01-19 浙江大华技术股份有限公司 一种门禁系统控制方法、装置及系统
CN107992797A (zh) * 2017-11-02 2018-05-04 中控智慧科技股份有限公司 人脸识别方法及相关装置
WO2018108711A1 (de) * 2016-12-13 2018-06-21 Deutsches Zentrum für Luft- und Raumfahrt e.V. Verfahren und vorrichtung zur ermittlung der schnittkanten von zwei sich überlappenden bildaufnahmen einer oberfläche
CN108549882A (zh) * 2018-05-14 2018-09-18 中国石油大学(华东) 一种基于深度学习的实时的铁路口多摄像头行人检测方法
CN108629337A (zh) * 2018-06-11 2018-10-09 深圳市益鑫智能科技有限公司 一种基于区块链的人脸识别门禁系统
CN109191635A (zh) * 2018-08-21 2019-01-11 万翼科技有限公司 基于人脸识别技术的判客方法、装置及存储介质
CN109492590A (zh) * 2018-11-13 2019-03-19 广东小天才科技有限公司 一种距离检测方法、距离检测装置及终端设备
CN109579868A (zh) * 2018-12-11 2019-04-05 上海元城汽车技术有限公司 车外目标定位方法、装置及汽车
CN109753930A (zh) * 2019-01-03 2019-05-14 京东方科技集团股份有限公司 人脸检测方法及人脸检测系统
CN110233970A (zh) * 2019-06-27 2019-09-13 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
CN110246241A (zh) * 2018-09-27 2019-09-17 浙江大华技术股份有限公司 一种闸机控制方法及装置
CN110246240A (zh) * 2018-09-27 2019-09-17 浙江大华技术股份有限公司 一种闸机控制方法及装置
CN110290324A (zh) * 2019-06-28 2019-09-27 Oppo广东移动通信有限公司 设备成像方法、装置、存储介质及电子设备
CN110390745A (zh) * 2019-06-03 2019-10-29 浙江大华技术股份有限公司 闸机控制方法、系统、可读存储介质和设备
CN110478903A (zh) * 2019-09-09 2019-11-22 珠海金山网络游戏科技有限公司 一种虚拟摄像机的控制方法和装置
CN111080557A (zh) * 2019-12-24 2020-04-28 科大讯飞股份有限公司 亮度均衡处理方法及相关装置
CN111402474A (zh) * 2020-03-17 2020-07-10 苏州雷格特智能设备股份有限公司 一种智慧站厅
CN113114981A (zh) * 2021-03-11 2021-07-13 联想(北京)有限公司 一种区域确定方法、电子设备及系统

Patent Citations (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2849500A1 (fr) * 2002-12-31 2004-07-02 Ier Dispositif de controle de la position d'une piece mecanique par rapport a une reference fixe
US20130171683A1 (en) * 2003-03-28 2013-07-04 Inguran, Llc Flow cytometer apparatus and method
CN102184413A (zh) * 2011-05-16 2011-09-14 浙江大华技术股份有限公司 车辆智能监控系统中车身颜色自动识别方法
CN102510448A (zh) * 2011-10-13 2012-06-20 苏州百滨电子科技有限公司 多处理器嵌入式图像采集和处理方法和装置
CN102509255A (zh) * 2011-10-26 2012-06-20 苏州百滨电子科技有限公司 高速图像采集和处理方法和装置
CN104899952A (zh) * 2015-06-18 2015-09-09 阿里巴巴集团控股有限公司 基于即时通讯应用的考勤方法及装置
EP3156978A1 (en) * 2015-10-14 2017-04-19 Samsung Electronics Polska Sp. z o.o. A system and a method for secure speaker verification
WO2018108711A1 (de) * 2016-12-13 2018-06-21 Deutsches Zentrum für Luft- und Raumfahrt e.V. Verfahren und vorrichtung zur ermittlung der schnittkanten von zwei sich überlappenden bildaufnahmen einer oberfläche
CN106845383A (zh) * 2017-01-16 2017-06-13 腾讯科技(上海)有限公司 人头检测方法和装置
CN107610296A (zh) * 2017-09-22 2018-01-19 浙江大华技术股份有限公司 一种门禁系统控制方法、装置及系统
CN107992797A (zh) * 2017-11-02 2018-05-04 中控智慧科技股份有限公司 人脸识别方法及相关装置
CN108549882A (zh) * 2018-05-14 2018-09-18 中国石油大学(华东) 一种基于深度学习的实时的铁路口多摄像头行人检测方法
CN108629337A (zh) * 2018-06-11 2018-10-09 深圳市益鑫智能科技有限公司 一种基于区块链的人脸识别门禁系统
CN109191635A (zh) * 2018-08-21 2019-01-11 万翼科技有限公司 基于人脸识别技术的判客方法、装置及存储介质
CN110246241A (zh) * 2018-09-27 2019-09-17 浙江大华技术股份有限公司 一种闸机控制方法及装置
CN110246240A (zh) * 2018-09-27 2019-09-17 浙江大华技术股份有限公司 一种闸机控制方法及装置
CN109492590A (zh) * 2018-11-13 2019-03-19 广东小天才科技有限公司 一种距离检测方法、距离检测装置及终端设备
CN109579868A (zh) * 2018-12-11 2019-04-05 上海元城汽车技术有限公司 车外目标定位方法、装置及汽车
CN109753930A (zh) * 2019-01-03 2019-05-14 京东方科技集团股份有限公司 人脸检测方法及人脸检测系统
CN110390745A (zh) * 2019-06-03 2019-10-29 浙江大华技术股份有限公司 闸机控制方法、系统、可读存储介质和设备
CN110233970A (zh) * 2019-06-27 2019-09-13 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
CN110290324A (zh) * 2019-06-28 2019-09-27 Oppo广东移动通信有限公司 设备成像方法、装置、存储介质及电子设备
CN110478903A (zh) * 2019-09-09 2019-11-22 珠海金山网络游戏科技有限公司 一种虚拟摄像机的控制方法和装置
CN111080557A (zh) * 2019-12-24 2020-04-28 科大讯飞股份有限公司 亮度均衡处理方法及相关装置
CN111402474A (zh) * 2020-03-17 2020-07-10 苏州雷格特智能设备股份有限公司 一种智慧站厅
CN113114981A (zh) * 2021-03-11 2021-07-13 联想(北京)有限公司 一种区域确定方法、电子设备及系统

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
YOUYI SONG,JING QIN,BAIYING LEI: "Joint Shape Matching for Overlapping Cytoplasm Segmentation in Cervical Smear Images", 《2019 IEEE 16TH INTERNATIONAL SYMPOSIUM ON BIOMEDICAL IMAGING》 *
王存睿等: "基于人脸检测的教室信息智能采集系统", 《大连民族学院学报》 *
白亮亮: "关于校园多摄像头协同工作的运动目标跟踪应用研究", 《现代信息科技》 *
高保华: "基于图像分析的体操落地稳定性分析", 《现代电子技术》 *

Also Published As

Publication number Publication date
CN111915779B (zh) 2022-04-15

Similar Documents

Publication Publication Date Title
CN110826519B (zh) 人脸遮挡检测方法、装置、计算机设备及存储介质
CN111523480B (zh) 一种面部遮挡物的检测方法、装置、电子设备及存储介质
CN109840883B (zh) 一种训练物体识别神经网络的方法、装置及计算设备
CN110390229B (zh) 一种人脸图片筛选方法、装置、电子设备及存储介质
CN107977650B (zh) 人脸检测方法及装置
CN110321814A (zh) 一种车辆违章取证方法、装置、电子设备及存储介质
CN106251338A (zh) 目标完整性检测方法及装置
CN107316312A (zh) 一种视频图像遮挡检测方法及系统
CN107038707B (zh) 一种图像分割方法及装置
CN111368615A (zh) 一种违章建筑预警方法、装置及电子设备
CN104077594A (zh) 一种图像识别方法和装置
CN107240078A (zh) 镜头清晰度验算方法、装置及电子设备
CN109086734A (zh) 一种对人眼图像中瞳孔图像进行定位的方法及装置
CN112037405A (zh) 一种闸机控制方法、装置、设备和介质
Nodado et al. Intelligent traffic light system using computer vision with android monitoring and control
CN112132853B (zh) 地面导向箭头的构建方法及其装置、电子设备及存储介质
CN104239843B (zh) 一种人脸特征点定位方法及装置
CN106331524A (zh) 一种识别镜头切换的方法及装置
CN111915779B (zh) 一种闸机控制方法、装置、设备和介质
CN111914845A (zh) 一种车牌中字符分层方法、装置及电子设备
EP2549408A1 (de) Verfahren zur Detektion und Klassifikation von Objekten
CN113762220B (zh) 目标识别方法、电子设备、计算机可读存储介质
CN107368817A (zh) 人脸识别方法和装置
EP2299388A2 (en) Apparatus and method for detecting face
CN107403429B (zh) 一种周期序列图像模型参数的快速自动获取方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant