CN113052609B - 用于自动取款机的安全防控方法、装置、电子设备和介质 - Google Patents
用于自动取款机的安全防控方法、装置、电子设备和介质 Download PDFInfo
- Publication number
- CN113052609B CN113052609B CN202110427331.3A CN202110427331A CN113052609B CN 113052609 B CN113052609 B CN 113052609B CN 202110427331 A CN202110427331 A CN 202110427331A CN 113052609 B CN113052609 B CN 113052609B
- Authority
- CN
- China
- Prior art keywords
- action
- image
- user
- matching
- matching result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 66
- 230000002265 prevention Effects 0.000 title claims abstract description 40
- 230000009471 action Effects 0.000 claims abstract description 149
- 238000004590 computer program Methods 0.000 claims abstract description 24
- 238000011217 control strategy Methods 0.000 claims abstract description 12
- 230000001815 facial effect Effects 0.000 claims description 32
- 230000015654 memory Effects 0.000 claims description 11
- 238000010586 diagram Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 238000012795 verification Methods 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000009472 formulation Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 108010001267 Protein Subunits Proteins 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 230000009747 swallowing Effects 0.000 description 1
- 208000008918 voyeurism Diseases 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/38—Payment protocols; Details thereof
- G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
- G06Q20/401—Transaction verification
- G06Q20/4014—Identity check for transactions
- G06Q20/40145—Biometric identity checks
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F19/00—Complete banking systems; Coded card-freed arrangements adapted for dispensing or receiving monies or the like and posting such transactions to existing accounts, e.g. automatic teller machines
- G07F19/20—Automatic teller machines [ATMs]
Landscapes
- Business, Economics & Management (AREA)
- Accounting & Taxation (AREA)
- Engineering & Computer Science (AREA)
- Finance (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
Abstract
本公开提供了一种用于自动取款机的安全防控方法,包括:在用户成功登录自动取款机的情况下,采集用户的视频图像;将视频图像中的动作信息与用户的预设动作信息进行动作匹配,得到动作匹配结果;以及根据动作匹配结果确定安全防控策略。此外,本公开还提供了一种用于自动取款机的安全防控装置、一种电子设备、一种计算机可读存储介质和一种计算机程序产品。本公开提供的用于自动取款机的安全防控方法和装置可用于金融领域或其他领域。
Description
技术领域
本公开涉及金融技术领域,更具体地,涉及一种用于自动取款机的安全防控方法、一种用于自动取款机的安全防控装置、一种电子设备、一种可读存储介质和一种计算机程序产品。
背景技术
随着具有人脸识别功能的自主取款机通过验收,银行卡密码不再作为自动取款机在处理交易时的唯一凭证,通过人脸识别,可以有效防止他人盗用银行卡的情况的发生。
在实现本公开的过程中发明,相关技术中的自动取款机并未形成线上线下结合的安全防控策略。
发明内容
有鉴于此,本公开提供了一种用于自动取款机的安全防控方法、一种用于自动取款机的安全防控装置、一种电子设备、一种可读存储介质和一种计算机程序产品。
本公开的一个方面提供了一种用于自动取款机的安全防控方法,包括:在用户成功登录上述自动取款机的情况下,采集上述用户的视频图像;将上述视频图像中的动作信息与上述用户的预设动作信息进行动作匹配,得到动作匹配结果;以及根据上述动作匹配结果确定安全防控策略。
根据本公开的实施例,在用户成功登录上述自动取款机之前还包括:获取在上述自动取款机预设范围内的上述用户的面部图像;对上述面部图像进行图像匹配,得到图像匹配结果;以及基于上述面部图像的图像匹配结果,确定是否通过上述用户的登录请求。
根据本公开的实施例,上述对上述面部图像进行图像匹配,得到图像匹配结果包括:将上述面部图像上传至事务系统的图像数据库以进行图像匹配,得到第一图像匹配结果;以及/或者将上述面部图像与上述用户的预设面部图像进行图像匹配,得到第二图像匹配结果。
根据本公开的实施例,上述基于上述面部图像的识别结果,确定是否通过上述用户的登录请求包括:在上述第一图像匹配结果为不匹配和上述第二图像匹配结果为匹配的情况下,通过上述用户的登录请求;以及在上述第一图像匹配结果为匹配或上述第二图像匹配结果为不匹配的情况下,拒绝上述用户的登录请求。
根据本公开的实施例,上述用户的预设动作信息包括上述用户的预设动作和上述预设动作的第一持续时间信息;上述将上述视频图像的动作信息与上述用户的预设动作信息进行动作匹配,得到动作匹配结果包括:将上述视频图像按帧进行拆分,得到带有时间标签的帧图像;将上述帧图像中面部动作关键点的位置与上述预设动作发生时面部动作关键点的位置进行位置匹配,得到位置匹配结果;基于上述位置匹配结果和上述帧图像的时间标签,确定上述视频图像的动作信息中,与上述预设动作相匹配的用户动作的第二持续时间;以及基于上述第一持续时间和上述第二持续时间,确定上述动作匹配结果。
根据本公开的实施例,上述基于上述第一持续时间和上述第二持续时间,确定上述动作匹配结果包括:在上述第二持续时间与上述第一持续时间的差值大于或等于预设阈值的情况下,得到的上述动作匹配结果为通过;以及在上述差值小于预设阈值的情况下,得到的上述动作匹配结果为未通过;其中,上述预设阈值是一个负数。
根据本公开的实施例,上述根据上述视频匹配结果确定安全防控策略包括:在上述动作匹配结果为通过的情况下,终止上述用户的交易请求,并向事务系统发送提示信息;以及在上述动作匹配结果为未通过的情况下,继续后续的正常交易流程。
本公开的另一方面提供了一种用于自动取款机的安全防控装置,包括采集模块、动作匹配模块和执行模块。其中,采集模块,用于在用户成功登录上述自动取款机的情况下,采集上述用户的视频图像;动作匹配模块,用于将上述视频图像的动作信息与上述用户的预设动作信息进行动作匹配,得到动作匹配结果;以及执行模块,用于根据上述动作匹配结果确定安全防控策略。
根据本公开的实施例,用于自动取款机的安全防控装置还包括图像匹配模块。上述图像匹配模块包括:第一图像匹配单元、第二图像匹配单元和第三图像匹配单元。其中,第一图像匹配单元,用于获取在上述自动取款机预设范围内的上述用户的面部图像;第二图像匹配单元,用于对上述面部图像进行图像匹配,得到图像匹配结果;以及第三图像匹配单元,用于基于上述面部图像的图像匹配结果,确定是否通过上述用户的登录请求。
根据本公开的实施例,上述第二图像匹配单元包括:第一图像匹配子单元和/或第二图像匹配子单元。其中,第一图像匹配子单元,用于将上述面部图像上传至事务系统的图像数据库以进行图像匹配,得到第一图像匹配结果;第二图像匹配子单元,用于将上述面部图像与上述用户的预设面部图像进行图像匹配,得到第二图像匹配结果。
根据本公开的实施例,上述第三图像匹配单元包括:第三图像匹配子单元和第四图像匹配子单元。其中,第三图像匹配子单元,用于在上述第一图像匹配结果为不匹配和上述第二图像匹配结果为匹配的情况下,通过上述用户的登录请求;以及第四图像匹配子单元,用于在上述第一图像匹配结果为匹配或上述第二图像匹配结果为不匹配的情况下,拒绝上述用户的登录请求。
根据本公开的实施例,上述用户的预设动作信息包括上述用户的预设动作和上述预设动作的第一持续时间信息;上述动作匹配模块包括:第一动作匹配单元、第二动作匹配单元、第三动作匹配单元和第四动作匹配单元。其中,第一动作匹配单元,用于将上述视频图像按帧进行拆分,得到带有时间标签的帧图像;第二动作匹配单元,用于将上述帧图像中面部动作关键点的位置与上述预设动作发生时面部动作关键点的位置进行位置匹配,得到位置匹配结果;第三动作匹配单元,用于基于上述位置匹配结果和上述帧图像的时间标签,确定上述视频图像的动作信息中,与上述预设动作相匹配的用户动作的第二持续时间;以及第四动作匹配单元,用于基于上述第一持续时间和上述第二持续时间,确定上述动作匹配结果。
根据本公开的实施例,上述第四动作匹配单元包括:第一动作匹配子单元和第二动作匹配子单元。其中,第一动作匹配子单元,用于在上述第二持续时间与上述第一持续时间的差值为正数,或者上述差值小于或等于预设阈值的情况下,得到的上述动作匹配结果为通过;以及第二动作匹配子单元,用于在上述差值大于预设阈值的情况下,得到的上述动作匹配结果为未通过;其中,上述预设阈值是一个负数。
根据本公开的实施例,上述执行模块包括:第一执行单元和第二执行单元。其中,第一执行单元,用于在上述动作匹配结果为通过的情况下,终止上述用户的交易请求,并向事务系统发送提示信息;以及第二执行单元,用于在上述动作匹配结果为未通过的情况下,继续后续的正常交易流程。
本公开的另一方面提供了电子设备,包括:一个或多个处理器;存储器,用于存储一个或多个指令,其中,当上述一个或多个指令被上述一个或多个处理器执行时,使得上述一个或多个处理器实现如上所述的方法。
本公开的另一方面提供了一种计算机可读存储介质,存储有计算机可执行指令,上述指令在被执行时用于实现如上所述的方法。
本公开的另一方面提供了一种计算机程序产品,上述计算机程序产品包括计算机可执行指令,上述指令在被执行时用于实现如上所述的方法。
根据本公开的实施例,通过在用户成功登录自动取款机的情况下,采集用户的视频图像;将视频图像中的动作信息与用户的预设动作信息进行动作匹配,得到动作匹配结果;以及根据动作匹配结果确定安全防控策略。通过采用用户的预设动作信息作为验证信息,解决了因用户在使用自动取款机进行交易时缺乏人机交互渠道,从而造成的用户安全状况无法评估的问题,有效保障了用户的人身和财产安全。
附图说明
通过以下参照附图对本公开实施例的描述,本公开的上述以及其他目的、特征和优点将更为清楚,在附图中:
图1示意性示出了根据本公开实施例的用于自动取款机的安全防控方法的示例性系统架构100;
图2示意性示出了根据本公开实施例的用于自动取款机的安全防控方法200的流程图;
图3示意性示出了根据本公开实施例的用户面部信息设置流程的示意图;
图4示意性示出了根据本公开另一实施例的用于自动取款机的安全防控方法的流程图;
图5示意性示出了根据本公开的实施例的用于自动取款机的安全防控装置的框图;
图6示意性示出了根据本公开实施例的适于实现用于自动取款机的安全防控方法的电子设备600的框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了上述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
本公开的实施例提供了一种用于自动取款机的安全防控方法和装置。该方法包括:在用户成功登录自动取款机的情况下,采集用户的视频图像;将视频图像中的动作信息与用户的预设动作信息进行动作匹配,得到动作匹配结果;以及根据动作匹配结果确定安全防控策略。
需要说明的是,本公开实施例提供的安全防控方法和装置可用于金融领域,例如,可用于为用户在银行中进行线下交易时提供安全防护。此外本公开实施例提供的安全防控方法和装置也可用于除金融领域之外的任意领域,例如,可用于火车站、汽车站等人流量较多的区域,降低安保压力。本公开实施例提供的安全防控方法和装置的应用领域不做限定。
图1示意性示出了根据本公开实施例的用于自动取款机的安全防控方法的示例性系统架构100。需要注意的是,图1所示仅为可以应用本公开实施例的系统架构的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,根据该实施例的系统架构100可以包括终端设备101,服务器102、103和网络104。
网络104用以在终端设备101和服务器102、103之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线和/或无线通信链路等。用户可以使用终端设备101通过网络104与服务器102、103交互,以进行信息验证。
终端设备101可以包括自动取款机等应用于金融领域的线下交易终端设备。终端设备101具备显示屏和图像采集功能,可以将采集的图像通过网络104上传至服务器102、103进行验证,并在显示屏上显示验证反馈信息。
服务器102、103可以是提供图像或视频验证服务的服务器或服务器集群,服务器102、103中包含有处理器和图像数据库,处理器中装载有图像或视频处理方法,用于实现终端设备101发送过来的图像或视频处理请求,并将处理结果反馈至终端设备101。
需要说明的是,本公开实施例所提供的用于自动取款机的安全防控方法可以由终端设备101执行。相应地,本公开实施例所提供的用于自动取款机的安全防控装置一般可以设置于终端设备101中。此外本公开实施例所提供的用于自动取款机的安全防控方法也可以由服务器102、103执行,或者由能够通过网络104与服务器102、103建立通信的服务器或服务器集群执行。相应地,本公开实施例所提供的用于自动取款机的安全防控装置也可以设置于服务器102、103中,或者设置于能够通过网络104与服务器102、103建立通信的服务器或服务器集群中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
图2示意性示出了根据本公开实施例的用于自动取款机的安全防控方法200的流程图。
如图2所示,该方法200包括操作S210~S230。
在操作S210,在用户成功登录自动取款机的情况下,采集用户的视频图像。
根据本公开的实施例,在用户成功登录自动取款机时,自动取款机可以在显示屏上给出开始采集视频图像的暗示,该暗示可以是用户在注册银行卡时与银行约定的语句。例如,在用户与银行无约定语句,即视频图像采集功能不工作的情况下,显示屏上显示的语句为“正在登录中,请稍候”;在视频图像采集功能工作的情况下,显示屏上显示的语句为用户与用户约定的语句,比如“正在处理中,请稍候”等。
根据本公开的实施例,采集到的用户的视频图像的时长范围可以在5秒到10秒之间,也可以是一个不在上述时间范围内的用户与银行约定的时间,例如3.5秒、12秒等。
根据本公开的实施例,通过视频图像的静默采集,可以有效保障用户在偶遇突发状况时的人身安全。
在操作S220,将视频图像中的动作信息与用户的预设动作信息进行动作匹配,得到动作匹配结果。
根据本公开的实施例,用户的预设动作信息可以是用户通过银行柜台、手机银行等渠道进行设置的。例如,用户在注册银行卡时,设置了面部暗号作为预设动作信息,面部暗号可以为“咬住下嘴唇,同时眼睛向右看,持续3秒”。
根据本公开的实施例,将视频图像中的动作信息与用户的预设动作信息进行动作匹配所采取的方法可以是基于深度网络的视频识别方法等,采用上述方法可以有效鉴别视频图像中的用户是否完成了预设动作。
在操作S230,根据动作匹配结果确定安全防控策略。
根据本公开的实施例,用户在设置预设动作信息的同时,还可以对响应预设动作信息的反馈信息进行约定。例如,自动取款机在成功接收到预设动作信息时,在其显示屏上显示的反馈信息为“交易处理中,请知悉”,而在正常交易流程中,自动取款机的显示屏上显示的反馈信息为“交易处理中,请稍候”。
根据本公开的实施例,安全防控策略可以包括吞卡、显示机器故障等。
根据本公开的实施例,通过在用户成功登录自动取款机的情况下,采集用户的视频图像;将视频图像中的动作信息与用户的预设动作信息进行动作匹配,得到动作匹配结果;以及根据动作匹配结果确定安全防控策略。通过采用用户的预设动作信息作为验证信息,解决了因用户在使用自动取款机进行交易时缺乏人机交互渠道,从而造成的用户安全状况无法评估的问题,有效保障了用户的人身和财产安全。
本公开的技术方案中,所涉及的用户个人信息的获取、存储和应用等,均符合相关法律法规的规定,且不违背公序良俗。
下面参考图3~图4,结合具体实施例对图2所示的方法做进一步说明。
需要说明的是,本公开实施例中的流程图所示的操作除非明确说明不同操作之间存在执行的先后顺序,或者不同操作在技术实现上存在执行的先后顺序,否则,多个操作之间的执行顺序可以不分先后,多个操作也可以同时执行。
图3示意性示出了根据本公开实施例的用户面部信息设置流程的示意图。
如图3所示,用户可以通过银行柜台、手机银行等渠道完成面部信息的设置,面部信息可以包括用于表征用户身份的人脸图像信息和用于示警的面部暗号信息,如动作信息等。
首先,执行操作S301~S302的方法,通过摄像设备获取用户的人脸图像信息,并录制面部暗号信息。在操作S301~S302中,还可以对获取的人脸图像信息和面部暗号信息进行清晰度检测,对于清晰度小于阈值的信息,向用户发送重新进行信息获取的反馈。
然后,执行操作S303的方法,将获取的面部信息存入数据库中。该数据库可以是银行后台处理系统中的面部信息数据库,也可以是云计算中心的用于存放面部信息的数据库。在操作S303中,还可以包括对获取的面部信息进行加密处理,然后再存入数据库中。
最后,执行操作S304的方法,提示用户使用方法。该使用方法包括在用户使用自动取款机时,人脸图像信息和面部暗号信息起作用的时机;在人脸图像信息或面部暗号信息匹配时,自动取款机给出的反馈信息等。例如,在用户进行登录前,对人脸图像信息进行匹配,在匹配不成功的情况下,给出“密码错误”的反馈。用户还可以自定义信息起效时机或反馈信息。该使用方法还包括使用时用户需承担的法律责任等。
图4示意性示出了根据本公开另一实施例的用于自动取款机的安全防控方法的流程图。
如图4所示,该方法包括操作S401~S409。
在操作S401,获取在自动取款机预设范围内的用户的面部图像。
根据本公开的实施例,在用户将银行卡插入自动取款机后,在用户成功输入密码登入系统之前,获取用户的面部图像进行验证。
根据本公开的实施例,用户的面部图像包括自动取款机前预设范围内的所有面部图像,该预设范围可以是用户的安全操作范围,具体数值可以为0.5~2米范围内的任意一个数值,例如可以为0.8米或1.5米等。
根据本公开的实施例,获取预设范围内的所有面部图像,可以有效防止陌生人干预或窥视具体业务操作。
在操作S402,将面部图像上传至事务系统的图像数据库以进行图像匹配,得到第一图像匹配结果。
具体地,操作S402可以包括:将面部图像上传至事务系统,交由事务系统将面部图像与图像数据库中留存的图像进行匹配,最后再接收得到第一图像匹配结果。
根据本公开的实施例,事务系统的图像数据库中可以包括在逃犯罪嫌疑人图像等。
根据本公开的实施例,在第一图像匹配结果为匹配时,表示采集到的面部图像存在可疑人员。
在操作S403,将面部图像与用户的预设面部图像进行图像匹配,得到第二图像匹配结果。
具体地,操作S403可以包括:从银行后台系统的数据库中提取对应于银行卡信息的用户的预设面部图像,再将面部图像与用户预设的人脸图像信息进行匹配,从而得到第二图像匹配结果。
根据本公开的实施例,用户的预设面部图像可以依据如图3所示的用户面部信息设置流程来进行设置。
根据本公开的实施例,在第二图像匹配结果为不匹配时,表示此时进行交易操作的用户并非该银行卡的持有人。
在操作S404,判断是否允许用户登录。
根据本公开的实施例,可以根据第一图像匹配结果和第二图像匹配结果来确定是否允许用户登录。在第一图像匹配结果为不匹配和第二图像匹配结果为匹配的情况下,允许用户的登录请求;在第一图像匹配结果为匹配或第二图像匹配结果为不匹配的情况下,拒绝用户的登录请求。
根据本公开的实施例,在用户允许登录的情况下,执行操作S405的方法进行面部暗号的验证;在用户被拒绝登录的情况下,执行操作S409的方法,终止交易请求。
根据本公开的实施例,操作S402和操作S403可以都不执行,此时,可以在操作S404中默认允许用户登录。操作S402和操作S403还可以只执行其中的一种操作,此时,在操作S404中可以仅根据第一图像匹配结果或第二图像匹配结果来确定是否允许用户登录。
在操作S405,判断用户是否设置面部暗号。
根据本公开的实施例,可以通过在银行后台系统的数据库中寻找相关记录,以确定用户是否设置面部暗号。在银行后台系统的数据库中不存在相应的预设动作信息的记录时,确定用户未设置面部暗号,直接执行操作S408的方法,转入正常交易流程。
根据本公开的实施例,面部暗号可以依据如图3所示的用户面部信息设置流程来进行设置。
在操作S406,采集用户的视频图像。
根据本公开的实施例,可以采取与安全防控方法200中的操作S210中相似的方法处理操作S406。
在操作S407,判断视频图像是否匹配面部暗号。
根据本公开的实施例,用户设置的预设动作信息构成面部暗号,预设动作信息可以是动态信息或者静态信息。
根据本公开的实施例,动态信息例如是在一定时间范围内多个面部动作的组合。对于动态信息的匹配,可以采取光流法完成匹配。具体地,首先根据第一个面部动作确定视频图像中的开始动作时间;然后根据预设的动作关键点,分别建立视频图像中和预设动作信息中这些动作关键点的光流场矢量图;最后,基于两张光流场矢量图进行相似度分析,得到匹配结果。在相似度大于或等于一个预设值时,得到的动作匹配结果为通过;在相似度小于一个预设值时,得到的动作匹配结果为未通过。在此,预设值可以是一个0.8至1之间的正数,例如可以取0.9。光流法属于视频识别领域中的常用技术,因此不再赘述其具体原理。
根据本公开的实施例,静态信息例如是持续一个预设时间的预设动作。对于静态信息的匹配,可以直接采用现有的图像识别技术解决。例如,静态信息包括用户的预设动作和该预设动作的第一持续时间信息,可以将视频图像按帧进行拆分,得到带有时间标签的帧图像;将帧图像中面部动作关键点的位置与预设动作发生时面部动作关键点的位置进行位置匹配,得到位置匹配结果;基于位置匹配结果和帧图像的时间标签,确定视频图像的动作信息中,与预设动作相匹配的用户动作的第二持续时间;以及基于第一持续时间和第二持续时间,确定动作匹配结果。在第二持续时间与第一持续时间的差值大于或等于预设阈值的情况下,得到的动作匹配结果为通过;以及在差值小于预设阈值的情况下,得到的动作匹配结果为未通过。在此,预设阈值是一个较小的负数,其具体取值与第一持续时间相关,例如,第一持续时间为4秒,则该预设阈值可以取-2~0之间的一个值,例如是-1.5。
在操作S408,继续正常交易流程。
在操作S409,终止用户交易请求。
根据本公开的实施例,在终止用户交易请求的同时,还可以向事务系统发送提示信息,提示信息可以包括自动取款机的地理位置信息、用户相关信息等。
根据本公开的实施例,如图4所示的用于自动取款机的安全防控方法对用户在使用自动取款机进行交易时可能面临的情境都采取了合理的安全防控策略,可以有效保障用户的人身和财产安全。
图5示意性示出了根据本公开的实施例的用于自动取款机的安全防控装置的框图。
如图5所示,用于自动取款机的安全防控装置包括采集模块510、动作匹配模块520和执行模块530。
采集模块510,用于在用户成功登录上述自动取款机的情况下,采集上述用户的视频图像。
动作匹配模块520,用于将上述视频图像的动作信息与上述用户的预设动作信息进行动作匹配,得到动作匹配结果。
执行模块530,用于根据上述动作匹配结果确定安全防控策略。
根据本公开的实施例,通过在用户成功登录自动取款机的情况下,采集用户的视频图像;将视频图像中的动作信息与用户的预设动作信息进行动作匹配,得到动作匹配结果;以及根据动作匹配结果确定安全防控策略。通过采用用户的预设动作信息作为验证信息,解决了因用户在使用自动取款机进行交易时缺乏人机交互渠道,从而造成的用户安全状况无法评估的问题,有效保障了用户的人身和财产安全。
根据本公开的实施例,用于自动取款机的安全防控装置还包括图像匹配模块。上述图像匹配模块包括:第一图像匹配单元、第二图像匹配单元和第三图像匹配单元。其中,第一图像匹配单元,用于获取在上述自动取款机预设范围内的上述用户的面部图像;第二图像匹配单元,用于对上述面部图像进行图像匹配,得到图像匹配结果;以及第三图像匹配单元,用于基于上述面部图像的图像匹配结果,确定是否通过上述用户的登录请求。
根据本公开的实施例,上述第二图像匹配单元包括:第一图像匹配子单元和/或第二图像匹配子单元。其中,第一图像匹配子单元,用于将上述面部图像上传至事务系统的图像数据库以进行图像匹配,得到第一图像匹配结果;第二图像匹配子单元,用于将上述面部图像与上述用户的预设面部图像进行图像匹配,得到第二图像匹配结果。
根据本公开的实施例,上述第三图像匹配单元包括:第三图像匹配子单元和第四图像匹配子单元。其中,第三图像匹配子单元,用于在上述第一图像匹配结果为不匹配和上述第二图像匹配结果为匹配的情况下,通过上述用户的登录请求;以及第四图像匹配子单元,用于在上述第一图像匹配结果为匹配或上述第二图像匹配结果为不匹配的情况下,拒绝上述用户的登录请求。
根据本公开的实施例,上述用户的预设动作信息包括上述用户的预设动作和上述预设动作的第一持续时间信息;上述动作匹配模块520包括:第一动作匹配单元、第二动作匹配单元、第三动作匹配单元和第四动作匹配单元。其中,第一动作匹配单元,用于将上述视频图像按帧进行拆分,得到带有时间标签的帧图像;第二动作匹配单元,用于将上述帧图像中面部动作关键点的位置与上述预设动作发生时面部动作关键点的位置进行位置匹配,得到位置匹配结果;第三动作匹配单元,用于基于上述位置匹配结果和上述帧图像的时间标签,确定上述视频图像的动作信息中,与上述预设动作相匹配的用户动作的第二持续时间;以及第四动作匹配单元,用于基于上述第一持续时间和上述第二持续时间,确定上述动作匹配结果。
根据本公开的实施例,上述第四动作匹配单元包括:第一动作匹配子单元和第二动作匹配子单元。其中,第一动作匹配子单元,用于在上述第二持续时间与上述第一持续时间的差值为正数,或者上述差值小于或等于预设阈值的情况下,得到的上述动作匹配结果为通过;以及第二动作匹配子单元,用于在上述差值大于预设阈值的情况下,得到的上述动作匹配结果为未通过;其中,上述预设阈值是一个负数。
根据本公开的实施例,上述执行模块530包括:第一执行单元和第二执行单元。其中,第一执行单元,用于在上述动作匹配结果为通过的情况下,终止上述用户的交易请求,并向事务系统发送提示信息;以及第二执行单元,用于在上述动作匹配结果为未通过的情况下,继续后续的正常交易流程。
根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图6示意性示出了根据本公开实施例的适于实现用于自动取款机的安全防控方法的电子设备600的框图。图6示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示,根据本公开实施例的电子设备600包括处理器601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。处理器601例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器601还可以包括用于缓存用途的板载存储器。处理器601可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
在RAM 603中,存储有电子设备600操作所需的各种程序和数据。处理器601、ROM602以及RAM 603通过总线604彼此相连。处理器601通过执行ROM 602和/或RAM 603中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意,上述程序也可以存储在除ROM 602和RAM 603以外的一个或多个存储器中。处理器601也可以通过执行存储在上述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。
根据本公开的实施例,电子设备600还可以包括输入/输出(I/O)接口605,输入/输出(I/O)接口605也连接至总线604。电子设备600还可以包括连接至I/O接口605的以下部件中的一项或多项:包括键盘、鼠标等的输入部分606;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。
根据本公开的实施例,根据本公开实施例的方法流程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读存储介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被处理器601执行时,执行本公开实施例的系统中限定的上述功能。根据本公开的实施例,上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。
本公开还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现根据本公开实施例的方法。
根据本公开的实施例,计算机可读存储介质可以是非易失性的计算机可读存储介质。例如可以包括但不限于:便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
例如,根据本公开的实施例,计算机可读存储介质可以包括上文描述的ROM 602和/或RAM 603和/或ROM 602和RAM 603以外的一个或多个存储器。
本公开的实施例还包括一种计算机程序产品,其包括计算机程序,该计算机程序包含用于执行本公开实施例所提供的方法的程序代码,当计算机程序产品在电子设备上运行时,该程序代码用于使电子设备实现本公开实施例所提供的用于自动取款机的安全防控方法。
在该计算机程序被处理器601执行时,执行本公开实施例的系统/装置中限定的上述功能。根据本公开的实施例,上文描述的系统、装置、模块、单元等可以通过计算机程序模块来实现。
在一种实施例中,该计算机程序可以依托于光存储器件、磁存储器件等有形存储介质。在另一种实施例中,该计算机程序也可以在网络介质上以信号的形式进行传输、分发,并通过通信部分609被下载和安装,和/或从可拆卸介质611被安装。该计算机程序包含的程序代码可以用任何适当的网络介质传输,包括但不限于:无线、有线等等,或者上述的任意合适的组合。
根据本公开的实施例,可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例提供的计算机程序的程序代码,具体地,可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。程序设计语言包括但不限于诸如Java,C++,python,“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
以上对本公开的实施例进行了描述。但是,这些实施例仅仅是为了说明的目的,而并非为了限制本公开的范围。尽管在以上分别描述了各实施例,但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围,本领域技术人员可以做出多种替代和修改,这些替代和修改都应落在本公开的范围之内。
Claims (8)
1.一种用于自动取款机的安全防控方法,包括:
在用户成功登录所述自动取款机的情况下,采集所述用户的视频图像;
将所述视频图像中的动作信息与所述用户的预设动作信息进行动作匹配,得到动作匹配结果;以及
根据所述动作匹配结果确定安全防控策略;
其中,所述用户的预设动作信息包括所述用户的预设动作和所述预设动作的第一持续时间信息;
所述将所述视频图像的动作信息与所述用户的预设动作信息进行动作匹配,得到动作匹配结果包括:
将所述视频图像按帧进行拆分,得到带有时间标签的帧图像;
将所述帧图像中面部动作关键点的位置与所述预设动作发生时面部动作关键点的位置进行位置匹配,得到位置匹配结果;
基于所述位置匹配结果和所述帧图像的时间标签,确定所述视频图像的动作信息中,与所述预设动作相匹配的用户动作的第二持续时间;以及
基于所述第一持续时间和所述第二持续时间,确定所述动作匹配结果;
其中,所述基于所述第一持续时间和所述第二持续时间,确定所述动作匹配结果包括:
在所述第二持续时间与所述第一持续时间的差值大于或等于预设阈值的情况下,得到的所述动作匹配结果为通过;以及
在所述差值小于预设阈值的情况下,得到的所述动作匹配结果为未通过;
其中,所述预设阈值是一个负数;
其中,所述根据所述动作匹配结果确定安全防控策略包括:
在所述动作匹配结果为通过的情况下,终止所述用户的交易请求,并向事务系统发送提示信息;以及
在所述动作匹配结果为未通过的情况下,继续后续的正常交易流程。
2.根据权利要求1所述的方法,其中,在用户成功登录所述自动取款机之前还包括:
获取在所述自动取款机预设范围内的所述用户的面部图像;
对所述面部图像进行图像匹配,得到图像匹配结果;以及
基于所述面部图像的图像匹配结果,确定是否通过所述用户的登录请求。
3.根据权利要求2所述的方法,其中,所述对所述面部图像进行图像匹配,得到图像匹配结果包括:
将所述面部图像上传至事务系统的图像数据库以进行图像匹配,得到第一图像匹配结果;以及/或者
将所述面部图像与所述用户的预设面部图像进行图像匹配,得到第二图像匹配结果。
4.根据权利要求3所述的方法,其中,所述基于所述面部图像的识别结果,确定是否通过所述用户的登录请求包括:
在所述第一图像匹配结果为不匹配和所述第二图像匹配结果为匹配的情况下,通过所述用户的登录请求;以及
在所述第一图像匹配结果为匹配或所述第二图像匹配结果为不匹配的情况下,拒绝所述用户的登录请求。
5.一种用于自动取款机的安全防控装置,包括:
采集模块,用于在用户成功登录所述自动取款机的情况下,采集所述用户的视频图像;
动作匹配模块,用于将所述视频图像的动作信息与所述用户的预设动作信息进行动作匹配,得到动作匹配结果;以及
执行模块,用于根据所述动作匹配结果确定安全防控策略;
其中,所述用户的预设动作信息包括所述用户的预设动作和所述预设动作的第一持续时间信息;
所述动作匹配模块包括:
第一动作匹配单元,用于将所述视频图像按帧进行拆分,得到带有时间标签的帧图像;
第二动作匹配单元,用于将所述帧图像中面部动作关键点的位置与所述预设动作发生时面部动作关键点的位置进行位置匹配,得到位置匹配结果;
第三动作匹配单元,用于基于所述位置匹配结果和所述帧图像的时间标签,确定所述视频图像的动作信息中,与所述预设动作相匹配的用户动作的第二持续时间;以及
第四动作匹配单元,用于基于所述第一持续时间和所述第二持续时间,确定所述动作匹配结果;
其中,所述第四动作匹配单元包括:
第一动作匹配子单元,用于在所述第二持续时间与所述第一持续时间的差值为正数,或者所述差值小于或等于预设阈值的情况下,得到的所述动作匹配结果为通过;以及
第二动作匹配子单元,用于在所述差值大于预设阈值的情况下,得到的所述动作匹配结果为未通过;其中,所述预设阈值是一个负数;
其中,所述执行模块包括:
第一执行单元,用于在所述动作匹配结果为通过的情况下,终止所述用户的交易请求,并向事务系统发送提示信息;以及
第二执行单元,用于在所述动作匹配结果为未通过的情况下,继续后续的正常交易流程。
6.一种电子设备,包括:
一个或多个处理器;
存储器,用于存储一个或多个指令,
其中,当所述一个或多个指令被所述一个或多个处理器执行时,使得所述一个或多个处理器实现权利要求1至4中任一项所述的方法。
7.一种计算机可读存储介质,其上存储有可执行指令,所述可执行指令被处理器执行时使处理器实现权利要求1至4中任一项所述的方法。
8.一种计算机程序产品,所述计算机程序产品包括计算机可执行指令,所述计算机可执行指令在被执行时用于实现权利要求1至4中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110427331.3A CN113052609B (zh) | 2021-04-20 | 2021-04-20 | 用于自动取款机的安全防控方法、装置、电子设备和介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110427331.3A CN113052609B (zh) | 2021-04-20 | 2021-04-20 | 用于自动取款机的安全防控方法、装置、电子设备和介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113052609A CN113052609A (zh) | 2021-06-29 |
CN113052609B true CN113052609B (zh) | 2024-03-22 |
Family
ID=76519801
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110427331.3A Active CN113052609B (zh) | 2021-04-20 | 2021-04-20 | 用于自动取款机的安全防控方法、装置、电子设备和介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113052609B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105427480A (zh) * | 2015-11-06 | 2016-03-23 | 南京信息工程大学 | 一种基于图像分析的柜员机 |
CN107992739A (zh) * | 2017-11-30 | 2018-05-04 | 北京旷视科技有限公司 | 用户验证方法、装置及系统 |
CN108573202A (zh) * | 2017-03-17 | 2018-09-25 | 北京旷视科技有限公司 | 身份认证方法、装置和系统以及终端、服务器和存储介质 |
CN109448271A (zh) * | 2018-09-03 | 2019-03-08 | 深圳壹账通智能科技有限公司 | 一种无卡取款方法、计算机可读存储介质及服务器 |
CN110348193A (zh) * | 2019-05-24 | 2019-10-18 | 招银云创(深圳)信息技术有限公司 | 验证方法、装置、设备和存储介质 |
CN110602701A (zh) * | 2018-06-13 | 2019-12-20 | 阿里巴巴集团控股有限公司 | 数据处理方法及终端 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2018204004A1 (en) * | 2018-06-06 | 2020-01-02 | Canon Kabushiki Kaisha | Method, system and apparatus for selecting frames of a video sequence |
-
2021
- 2021-04-20 CN CN202110427331.3A patent/CN113052609B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105427480A (zh) * | 2015-11-06 | 2016-03-23 | 南京信息工程大学 | 一种基于图像分析的柜员机 |
CN108573202A (zh) * | 2017-03-17 | 2018-09-25 | 北京旷视科技有限公司 | 身份认证方法、装置和系统以及终端、服务器和存储介质 |
CN107992739A (zh) * | 2017-11-30 | 2018-05-04 | 北京旷视科技有限公司 | 用户验证方法、装置及系统 |
CN110602701A (zh) * | 2018-06-13 | 2019-12-20 | 阿里巴巴集团控股有限公司 | 数据处理方法及终端 |
CN109448271A (zh) * | 2018-09-03 | 2019-03-08 | 深圳壹账通智能科技有限公司 | 一种无卡取款方法、计算机可读存储介质及服务器 |
CN110348193A (zh) * | 2019-05-24 | 2019-10-18 | 招银云创(深圳)信息技术有限公司 | 验证方法、装置、设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113052609A (zh) | 2021-06-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20180315049A1 (en) | Multi factor authentication rule-based intelligent bank cards | |
US20210089635A1 (en) | Biometric identity verification and protection software solution | |
WO2019015634A1 (zh) | 门禁控制方法和装置、系统、电子设备、程序和介质 | |
US20230034040A1 (en) | Face liveness detection method, system, and apparatus, computer device, and storage medium | |
US11722510B2 (en) | Monitoring and preventing remote user automated cyber attacks | |
CN109816521A (zh) | 一种银行业务处理方法、装置及系统 | |
US10282627B2 (en) | Method and apparatus for processing handwriting data | |
US10108849B2 (en) | Biometric facial recognition for accessing device and authorizing event processing | |
CN112288398A (zh) | 面签验证方法、装置、计算机设备及存储介质 | |
US20210097540A1 (en) | Transaction Terminal Fraud Processing | |
CN111885128A (zh) | 基于区块链的身份管理方法 | |
US11348415B2 (en) | Cognitive automation platform for providing enhanced automated teller machine (ATM) security | |
CN107609368A (zh) | 应用程序的安全防护方法、装置、设备和计算机存储介质 | |
US11763547B2 (en) | Monitoring devices at enterprise locations using machine-learning models to protect enterprise-managed information and resources | |
CN113285945B (zh) | 通信安全监控方法、装置、设备及存储介质 | |
US20200137050A1 (en) | Method and system for applying negative credentials | |
CN113052609B (zh) | 用于自动取款机的安全防控方法、装置、电子设备和介质 | |
US20220414193A1 (en) | Systems and methods for secure adaptive illustrations | |
CN110690973B (zh) | 身份验证方法、装置、介质及电子设备 | |
CN112367314B (zh) | 身份认证的方法、装置、计算设备和介质 | |
CN110457877B (zh) | 用户认证方法和装置、电子设备、计算机可读存储介质 | |
CN113449796A (zh) | 交易安全防控方法、装置、设备、存储介质、程序产品 | |
US20230262053A1 (en) | Intelligent authentication mechanism for applications | |
US11803898B2 (en) | Account establishment and transaction management using biometrics and intelligent recommendation engine | |
US20220237316A1 (en) | Methods and systems for image selection and push notification |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |