CN114415901B - 人机交互方法、装置、设备及存储介质 - Google Patents

人机交互方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN114415901B
CN114415901B CN202210320944.1A CN202210320944A CN114415901B CN 114415901 B CN114415901 B CN 114415901B CN 202210320944 A CN202210320944 A CN 202210320944A CN 114415901 B CN114415901 B CN 114415901B
Authority
CN
China
Prior art keywords
preset
mark
action
authentication
visual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210320944.1A
Other languages
English (en)
Other versions
CN114415901A (zh
Inventor
周波
段炼
苗瑞
邹小刚
莫少锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Haiqing Zhiyuan Technology Co.,Ltd.
Original Assignee
Shenzhen HQVT Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen HQVT Technology Co Ltd filed Critical Shenzhen HQVT Technology Co Ltd
Priority to CN202210320944.1A priority Critical patent/CN114415901B/zh
Publication of CN114415901A publication Critical patent/CN114415901A/zh
Application granted granted Critical
Publication of CN114415901B publication Critical patent/CN114415901B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/30Individual registration on entry or exit not involving the use of a pass
    • G07C9/32Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition

Abstract

本申请提供了一种人机交互方法、装置、设备及存储介质,该方法当识别到视觉标记定位标识时,对视觉标记定位标识进行跟踪识别;若在第一预设时间内,视觉标记定位标识始终位于图像采集设备前方,则发起鉴权;获取视觉标记定位标识的解锁动作,根据解锁动作对用户进行鉴权;若鉴权成功,则显示操作菜单和虚拟鼠标,获取视觉标记定位标识的控制动作;根据控制动作和预设指令对应信息,对操作菜单进行控制,其中,预设指令对应信息包括控制动作和控制动作对应的预设指令。

Description

人机交互方法、装置、设备及存储介质
技术领域
本发明涉及计算机技术领域,尤其涉及一种人机交互方法、装置、设备及存储介质。
背景技术
随着移动互联网的崛起,人脸识别技术广泛应用于生活中的各个领域。人脸识别平板设备是用于人脸刷卡开门的一种户外设备,带有显示屏幕,摄像头,通过对人脸的拍摄和识别用于门禁系统的开门动作。
由于人脸识别平板设备是户外设备,需要保持防水特性,因此整个设备采取封闭式设计,在对该设备进行参数配置的时候,往往采取如下的方式:在设备末端保留网络接口,菜单通过网络进行配置;在设备显示液晶屏上加装防水触摸屏接口,通过触摸屏控制或者通过防水薄膜键盘控制。
然而通过外接网络接口的方式,需要安装复杂的接线及软件安装,实现方式复杂,而加装硬件的方式成本较高、且硬件容易损坏。
发明内容
本申请提供一种人机交互方法、装置、设备及存储介质,从而解决现有技术中的通过外接网络接口的方式,需要安装复杂的接线及软件安装,实现方式复杂,而加装硬件的方式成本较高、且硬件容易损坏的技术问题。
第一方面,本申请提供了一种人机交互方法,包括:
当识别到视觉标记定位标识时,对所述视觉标记定位标识进行跟踪识别;
若在第一预设时间内,所述视觉标记定位标识始终位于图像采集设备前方,则发起鉴权;
获取所述视觉标记定位标识的解锁动作,根据所述解锁动作对用户进行鉴权;
若鉴权成功,则显示操作菜单和虚拟鼠标,获取所述视觉标记定位标识的控制动作;
根据所述控制动作和预设指令对应信息,对所述操作菜单进行控制,其中,所述预设指令对应信息包括控制动作和所述控制动作对应的预设指令。
需要说明的是,在本申请中的视觉标记定位标识为arcuo marker标识。
这里,本申请实施例提供的人机交互方法,可以采用非接触的方式实现与人脸识别平板设备等设备的互动交互,实现参数配置等控制,通过对arcuo marker标识的识别,首先对用户进行鉴权,保证了设备的精准及安全控制,在鉴权时,可识别arcuo marker标识的解锁动作来实现对用户的鉴权,若鉴权成功,则用户可通过对arcuo marker标识的移动等指令动作,实现对操作菜单的控制。无需在设备中增加硬件,也无需布置复杂的接线,节省了成本,简化了设备的配置步骤,同时无接触式的控制满足了设备的防水需求,且虚拟鼠标的操控实现了精准控制,提高了人机交互的准确性。
可选地,所述若在第一预设时间内,所述arcuo marker标识始终位于图像采集设备前方,则发起鉴权,包括:
若在第一预设时间内,所述arcuo marker标识始终位于图像采集设备前方,则显示虚拟锁标识。
这里,本申请实施例在对用户进行鉴权时,当识别到arcuo marker置于图像采集设备前方,系统识别到该标识,持续第一预设时间以上,屏幕上可以出现一个虚拟锁的标识,以提示用户进行鉴权操作,提高了人机交互的安全性,且虚拟锁标识便于用户识别,提高了用户体验。
可选地,所述获取所述arcuo marker标识的解锁动作,根据所述解锁动作对用户进行鉴权,包括:
获取所述arcuo marker标识的解锁动作;
根据所述解锁动作,确定用户输入的虚拟锁密码;
根据所述虚拟锁密码和预设密码,对所述用户进行鉴权。
其中,本申请实施例提供了一种鉴权方式,用户可基于虚拟锁标识通过arcuomarker标识做出解锁动作,设备根据用户的解锁动作结合虚拟锁确定密码,若用户的解锁动作符合预设密码,那么确定鉴权成功,进一步地提高了人机互动的安全性及准确性。
可选地,所述虚拟锁标识为角度为360度的表盘,所述表盘包括60个格,每个所述格为6度;
所述根据所述解锁动作,确定用户输入的虚拟锁密码,包括:
若所述解锁动作的旋转角度与所述表盘中的任意一个格的角度的差值小于预设角度,则确定用户输入的虚拟锁密码为所述格对应的密码角度。
这里,本申请实施例提供的虚拟锁标识为了方便扭动,在表盘每格之间设立一种虚拟吸入感,例如表盘为360度,分为60个格,每个格子为6度,则在并判断角度靠近预设角度(例如±1度)的时候,虚拟表盘会自动嵌入此格,便于用户操作,且密码识别准确,进一步地提高了用户体验。
可选地,在所述获取所述arcuo marker标识的解锁动作,根据所述解锁动作对用户进行鉴权之后,还包括:
若在第二预设时间内鉴权失败,则退出鉴权。
这里,本申请实施例设置了鉴权时间,若在设备发起鉴权之后的一段时间内,用户没有成功实现权限验证,那么可以退出鉴权,节省人脸识别平板设备的功耗,进一步地提高了人脸识别平板设备的安全性和稳定性。
可选地,所述控制动作包括出现、消失、左旋、右旋和移动中的至少一种,所述预设指令包括左键点击、右键点击和鼠标移动中的至少一种;
所述根据所述控制动作和预设指令对应信息,对所述操作菜单进行控制,包括:
根据所述预设指令对应信息,确定所述控制动作对应的预设指令;
根据所述控制动作对应的预设指令,对所述操作菜单进行控制。
其中,本申请实施例可以根据用户的简单操作,例如出现、消失、左旋、右旋和移动等动作实现对虚拟鼠标左键点击、右键点击和鼠标移动等的控制,简化了用户的操作,进一步地提高了用户体验。
可选地,在所述若鉴权成功,则显示虚拟鼠标,获取所述arcuo marker标识指令动作之后,还包括:
若在第三预设时间内,未获取到arcuo marker标识的指令动作,则退出操作菜单。
这里,本申请实施例在一段时间无用户操作时可以退出菜单操作,以提高设备的安全性,进一步地节省功耗。
第二方面,本申请实施例提供了一种人机交互装置,包括:
识别模块,用于当识别到arcuo marker标识时,对所述arcuo marker标识进行跟踪识别;
发起模块,用于若在第一预设时间内,所述arcuo marker标识始终位于图像采集设备前方,则发起鉴权;
鉴权模块,用于获取所述arcuo marker标识的解锁动作,根据所述解锁动作对用户进行鉴权;
处理模块,用于若鉴权成功,则显示操作菜单和虚拟鼠标,获取所述arcuo marker标识的控制动作;
控制模块,用于根据所述控制动作和预设指令对应信息,对所述操作菜单进行控制,其中,所述预设指令对应信息包括控制动作和所述控制动作对应的预设指令。
可选地,所述发起模块具体用于:
若在第一预设时间内,所述arcuo marker标识始终位于图像采集设备前方,则显示虚拟锁标识。
可选地,所述鉴权模块具体用于:
获取所述arcuo marker标识的解锁动作;
根据所述解锁动作,确定用户输入的虚拟锁密码;
根据所述虚拟锁密码和预设密码,对所述用户进行鉴权。
可选地,所述虚拟锁标识为角度为360度的表盘,所述表盘包括60个格,每个所述格为6度;
所述鉴权模块还具体用于:
若所述解锁动作的旋转角度与所述表盘中的任意一个格的角度的差值小于预设角度,则确定用户输入的虚拟锁密码为所述格对应的密码角度。
可选地,在所述鉴权模块获取所述arcuo marker标识的解锁动作,根据所述解锁动作对用户进行鉴权之后,上述装置还包括:
第一退出模块,用于若在第二预设时间内鉴权失败,则退出鉴权。
可选地,所述控制动作包括出现、消失、左旋、右旋和移动中的至少一种,所述预设指令包括左键点击、右键点击和鼠标移动中的至少一种;
所述控制模块具体用于:
根据所述预设指令对应信息,确定所述控制动作对应的预设指令;
根据所述控制动作对应的预设指令,对所述操作菜单进行控制。
可选地,在所述处理模块若鉴权成功,则显示虚拟鼠标,获取所述arcuo marker标识指令动作之后,上述装置还包括:
第二退出模块,用于若在第三预设时间内,未获取到arcuo marker标识的指令动作,则退出操作菜单。
第三方面,本申请提供一种人机交互设备,包括:至少一个处理器和存储器;
所述存储器存储计算机执行指令;
所述至少一个处理器执行所述存储器存储的计算机执行指令,使得所述至少一个处理器执行如上第一方面以及第一方面各种可能的设计所述的人机交互方法。
第四方面,本发明提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如上第一方面以及第一方面各种可能的设计所述的人机交互方法。
第五方面,本发明提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时,实现如上第一方面以及第一方面各种可能的设计所述的人机交互方法。
本申请提供的人机交互方法、装置、设备及存储介质,其中该方法可以采用非接触的方式实现与人脸识别平板设备等设备的互动交互,实现参数配置等控制,通过对arcuomarker标识的识别,首先对用户进行鉴权,保证了设备的精准及安全控制,在鉴权时,可识别arcuo marker标识的解锁动作来实现对用户的鉴权,若鉴权成功,则用户可通过对arcuomarker标识的移动等指令动作,实现对操作菜单的控制。无需在设备中增加硬件,也无需布置复杂的接线,节省了成本,简化了设备的配置步骤,同时无接触式的控制满足了设备的防水需求,且虚拟鼠标的操控实现了精准控制,提高了人机交互的准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种人机交互的场景示意图;
图2为本申请实施例提供的一种人机交互方法的流程示意图;
图3为本申请实施例提供的一种虚拟锁标识的结构示意图;
图4为本申请实施例提供的一种人机交互装置的结构示意图;
图5为本申请实施例提供的一种人机交互设备的结构示意图。
通过上述附图,已示出本公开明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围,而是通过参考特定实施例为本领域技术人员说明本公开的概念。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”及“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
人脸识别平板设备是用于人脸刷卡开门的一种户外设备,带有显示屏幕,摄像头,通过对人脸的拍摄和识别用于门禁系统的开门动作。因为其户外使用的防水特性,整个设备采取封闭式设计,在对该设备进行参数配置的时候,往往采取如下的方式:在设备末端保留网络接口,通过网络进行配置;在设备显示液晶屏上加装防水触摸屏接口,通过触摸屏控制;通过防水薄膜键盘控制。然而在设备末端保留网络接口的方法需要现场使用一台电脑终端连接设备,在网络接线方面比较复杂,同时电脑中需要安装配套的软件,通过培训才可以操作;在设备显示液晶屏上加装防水触摸屏接口,通过触摸屏控制或者是通过防水薄膜键盘控制的方法使用简单快捷,但成本较高,因为有了物理接触方式,在频繁使用中,很容易损坏。
为了解决上述问题,本申请实施例提供一种人机交互方法、装置、设备及存储介质,其中该方法通过aruco marker标识的应用实现非接触互动交互,通过对arcuo marker标识的识别,首先对用户进行鉴权,保证了设备的精准及安全控制,在鉴权时,可识别arcuomarker标识的解锁动作来实现对用户的鉴权,若鉴权成功,则用户可通过对arcuo marker标识的移动等指令动作,实现对操作菜单的控制。
示范性的,图1为本申请实施例提供的一种人机交互的场景示意图,如图1所示,该场景包括人机交互设备101和用户终端102。
其中,人机交互设备101可以为人脸识别平板设备、门禁识别设备等,人机交互设备101可以带有显示屏幕、摄像头,通过对人脸的拍摄和识别用于门禁系统的开门动作。可选地,人机交互设备101包括至少一个负责处理图像的头像采集设备(例如摄像头),摄像头有:镜片、互补金属氧化物半导体(Complementary Metal Oxide Semiconductor,CMOS)传感器、图像信号处理(Image Signal Processing,ISP)光学处理器和后端处理器中的至少一种。
可选地,用户终端102后面可以粘贴arcuo marker标识103。
其中,aruco marker,是一种类似于二维码的标记,可以通过输入marker的尺寸,检测图像中的marker计算处marker在相机坐标系中的3D位置;根据aruco marker这个三维识别的特性,我们可以把它状态定义为出现,消失,左旋,右旋,移动等。
可选地,如图1所示,将一个aruco marker置于摄像头后,摄像头对画面中的arucomarker进行识别,跟踪,可以实现对人机交互设备101的控制。
可选地,arcuo marker可以通过不干胶贴于用户终端102后面,或者用户终端102拍摄后展示在人机交互设备101的图像采集设备的前方。
另外,本申请实施例描述的网络架构以及业务场景是为了更加清楚的说明本申请实施例的技术方案,并不构成对于本申请实施例提供的技术方案的限定,本领域普通技术人员可知,随着网络架构的演变和新业务场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。
下面结合具体的实施例对本申请的技术方案进行详细的说明:
可选地,图2为本申请实施例提供的一种人机交互方法的流程示意图。本申请实施例的执行主体可以为图1中的人机交互设备101,具体执行主体可以根据实际应用场景确定。如图2所示,该方法包括如下步骤:
S201:当识别到视觉标记定位标识时,对视觉标记定位标识进行跟踪识别。
其中,视觉标记定位标识为arcuo marker标识。
可选地,当用户(管理人员)出现在屏幕或者图像采集设备(摄像头)的可视范围之内,那么首先对arcuo marker标识进行跟踪识别。
S202:若在第一预设时间内,视觉标记定位标识始终位于图像采集设备前方,则发起鉴权。
其中,可以理解的是,这里的第一预设时间可以根据实际情况确定,本申请实施例对此不做具体限制。
在一种可能的实现方式中,当arcuo marker置于摄像头前方,系统识别到该标识,持续3秒以上,则发起鉴权。
S203:获取视觉标记定位标识的解锁动作,根据解锁动作对用户进行鉴权。
可选地,在获取arcuo marker标识的解锁动作,根据解锁动作对用户进行鉴权之后,还包括:若在第二预设时间内鉴权失败,则退出鉴权。
其中,这里的第二预设时间可以根据实际情况确定,本申请实施例对此不做具体限制。
示范性的,在发起鉴权时,系统开始倒计时,计时结束后如没输入完整密码则退出。
这里,本申请实施例设置了鉴权时间,若在设备发起鉴权之后的一段时间内,用户没有成功实现权限验证,那么可以退出鉴权,节省人脸识别平板设备的功耗,进一步地提高了人脸识别平板设备的安全性和稳定性。
S204:若鉴权成功,则显示操作菜单和虚拟鼠标,获取视觉标记定位标识的控制动作。
可选地,控制动作包括出现、消失、左旋、右旋和移动中的至少一种。
S205:根据控制动作和预设指令对应信息,对操作菜单进行控制。
其中,预设指令对应信息包括控制动作和控制动作对应的预设指令。
可选地,控制动作包括出现、消失、左旋、右旋和移动中的至少一种,预设指令包括左键点击、右键点击和鼠标移动中的至少一种。
根据控制动作和预设指令对应信息,对操作菜单进行控制,包括:
根据预设指令对应信息,确定控制动作对应的预设指令;根据控制动作对应的预设指令,对操作菜单进行控制。
其中,本申请实施例可以根据用户的简单操作,例如出现、消失、左旋、右旋和移动等动作实现对虚拟鼠标左键点击、右键点击和鼠标移动等的控制,简化了用户的操作,进一步地提高了用户体验。
可选地,在若鉴权成功,则显示虚拟鼠标,获取arcuo marker标识指令动作之后,还包括:若在第三预设时间内,未获取到arcuo marker标识的指令动作,则退出操作菜单。
其中,这里的第三预设时间可以根据实际情况确定,本申请实施例对此不做具体限制。
这里,本申请实施例在一段时间无用户操作时可以退出菜单操作,以提高设备的安全性,进一步地节省功耗。
本申请实施例提供的人机交互方法,可以采用非接触的方式实现与人脸识别平板设备等设备的互动交互,实现参数配置等控制,通过对arcuo marker标识的识别,首先对用户进行鉴权,保证了设备的精准及安全控制,在鉴权时,可识别arcuo marker标识的解锁动作来实现对用户的鉴权,若鉴权成功,则用户可通过对arcuo marker标识的移动等指令动作,实现对操作菜单的控制。无需在设备中增加硬件,也无需布置复杂的接线,节省了成本,简化了设备的配置步骤,同时无接触式的控制满足了设备的防水需求,且虚拟鼠标的操控实现了精准控制,提高了人机交互的准确性。
在一些可能的实现方式中,本申请实施例提供了一种鉴权方式,具体的,若在第一预设时间内,arcuo marker标识始终位于图像采集设备前方,则发起鉴权,包括:
若在第一预设时间内,arcuo marker标识始终位于图像采集设备前方,则显示虚拟锁标识。
这里,本申请实施例在对用户进行鉴权时,当识别到arcuo marker置于图像采集设备前方,系统识别到该标识,持续第一预设时间以上,屏幕上可以出现一个虚拟锁的标识,以提示用户进行鉴权操作,提高了人机交互的安全性,且虚拟锁标识便于用户识别,提高了用户体验。
可选地,获取arcuo marker标识的解锁动作,根据解锁动作对用户进行鉴权,包括:
获取arcuo marker标识的解锁动作;根据解锁动作,确定用户输入的虚拟锁密码;根据虚拟锁密码和预设密码,对用户进行鉴权。
其中,本申请实施例提供了一种鉴权方式,用户可基于虚拟锁标识通过arcuomarker标识做出解锁动作,设备根据用户的解锁动作结合虚拟锁确定密码,若用户的解锁动作符合预设密码,那么确定鉴权成功,进一步地提高了人机互动的安全性及准确性。
可选地,虚拟锁标识为角度为360度的表盘,表盘包括60个格,每个格为6度。
根据解锁动作,确定用户输入的虚拟锁密码,包括:若解锁动作的旋转角度与表盘中的任意一个格的角度的差值小于预设角度,则确定用户输入的虚拟锁密码为格对应的密码角度。
这里,本申请实施例提供的虚拟锁标识为了方便扭动,在表盘每格之间设立一种虚拟吸入感,例如表盘为360度,分为60个格,每个格子为6度,则在并判断角度靠近预设角度(例如±1度)的时候,虚拟表盘会自动嵌入此格,便于用户操作,且密码识别准确,进一步地提高了用户体验。
可选地,图3为本申请实施例提供的一种虚拟锁标识的结构示意图,如图3所示,虚拟锁标识为角度为360度的表盘,表盘包括60个格,每个格为6度。
其中,虚拟锁的开锁机制可以基于机械锁来实现,例如旋转式锁打开方法:机械密码锁(三组数码锁)假设密码锁的三组数码为(10);(20);(30)。无论标记线已对着哪组数码,都需以顺时针方向旋转两周后再继续旋转使(10)对准固定盘上面的标线即停;以逆时针方向旋转一周后再继续旋转使(20)对准上面标记线即可;以顺时针方向旋转使(30)对准上面标记线即停,此时密码锁开启完毕,即鉴权成功。
具体地,在屏幕当中映射一个密码锁的图像,当arcuo marker置于摄像头前方,系统识别到该标识,持续3秒以上,屏幕上出现一个虚拟锁的标识。
系统开始倒计时,在一定时间内,通过旋转arcuo marker,由系统识别到角度的变化,虚拟的扭动锁盘,按照开锁密码,左右扭动各个数值,扭动成功后,则解锁成功,进入管理员模式。
为了方便扭动,在表盘每格之间设立一种虚拟吸入感,假设表盘为360度,分为60个格,每个格子为6度,则在并判断角度靠近±1度的时候,虚拟表盘会自动嵌入此格,同时,继续扭动,必须计算到偏离±1度以后,表盘才会继续偏离。
倒计时结束后如没输入完整密码则退出。
可以理解的是,上述密码即解锁机制可以根据实际情况确定,本申请实施例不做具体限制。
图4为本申请实施例提供的一种人机交互装置的结构示意图,如图4所示,本申请实施例的装置包括:识别模块401、发起模块402、鉴权模块403、处理模块404和控制模块405。这里的人机交互装置可以是上述人机交互设备101的处理器本身,或者是实现处理器的功能的芯片或者集成电路。这里需要说明的是,识别模块401、发起模块402、鉴权模块403、处理模块404和控制模块405的划分只是一种逻辑功能的划分,物理上两者可以是集成的,也可以是独立的。
其中,识别模块,用于当识别到arcuo marker标识时,对arcuo marker标识进行跟踪识别;
发起模块,用于若在第一预设时间内,arcuo marker标识始终位于图像采集设备前方,则发起鉴权;
鉴权模块,用于获取arcuo marker标识的解锁动作,根据解锁动作对用户进行鉴权;
处理模块,用于若鉴权成功,则显示操作菜单和虚拟鼠标,获取arcuo marker标识的控制动作;
控制模块,用于根据控制动作和预设指令对应信息,对操作菜单进行控制,其中,预设指令对应信息包括控制动作和控制动作对应的预设指令。
可选地,发起模块具体用于:
若在第一预设时间内,arcuo marker标识始终位于图像采集设备前方,则显示虚拟锁标识。
可选地,鉴权模块具体用于:
获取arcuo marker标识的解锁动作;
根据解锁动作,确定用户输入的虚拟锁密码;
根据虚拟锁密码和预设密码,对用户进行鉴权。
可选地,虚拟锁标识为角度为360度的表盘,表盘包括60个格,每个格为6度;
鉴权模块还具体用于:
若解锁动作的旋转角度与表盘中的任意一个格的角度的差值小于预设角度,则确定用户输入的虚拟锁密码为格对应的密码角度。
可选地,在鉴权模块获取arcuo marker标识的解锁动作,根据解锁动作对用户进行鉴权之后,上述装置还包括:
第一退出模块,用于若在第二预设时间内鉴权失败,则退出鉴权。
可选地,控制动作包括出现、消失、左旋、右旋和移动中的至少一种,预设指令包括左键点击、右键点击和鼠标移动中的至少一种;
控制模块具体用于:
根据预设指令对应信息,确定控制动作对应的预设指令;
根据控制动作对应的预设指令,对操作菜单进行控制。
可选地,在处理模块若鉴权成功,则显示虚拟鼠标,获取arcuo marker标识指令动作之后,上述装置还包括:
第二退出模块,用于若在第三预设时间内,未获取到arcuo marker标识的指令动作,则退出操作菜单。
本申请实施例还提供一种人机交互装置,如图5所示,该人机交互设备包括:处理器501和存储器502,各个部件利用不同的总线互相连接,并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器501可以对在人机交互设备内执行的指令进行处理,包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如,耦合至接口的显示设备)上显示的图形信息的指令。在其它实施方式中,若需要,可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。图5中以一个处理器501为例。
存储器502作为一种非瞬时计算机可读存储介质,可用于存储非瞬时软件程序、非瞬时计算机可执行程序以及模块,如本申请实施例中的人机交互设备的方法对应的程序指令/模块(例如,附图4所示的,识别模块401、发起模块402、鉴权模块403、处理模块404和控制模块405)。处理器501通过运行存储在存储器502中的非瞬时软件程序、指令以及模块,从而执行各种功能应用以及人机交互方法,即实现上述方法实施例中的人机交互设备的方法。
人机交互设备还可以包括:输入装置503和输出装置504。处理器501、存储器502、输入装置503和输出装置504可以通过总线或者其他方式连接,图5中以通过总线连接为例。
输入装置503可接收输入的数字或字符信息,以及产生与人机交互设备的用户设置以及功能控制有关的键信号输入,例如触摸屏、小键盘、鼠标、或者多个鼠标按钮、轨迹球、操纵杆等输入装置。输出装置504可以是人机交互设备的显示设备等输出设备。该显示设备可以包括但不限于,液晶显示器(LCD)、发光二极管(LED)显示器和等离子体显示器。在一些实施方式中,显示设备可以是触摸屏。
本申请实施例的人机交互设备,可以用于执行本申请上述各方法实施例中的技术方案,其实现原理和技术效果类似,此处不再赘述。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机执行指令,计算机执行指令被处理器执行时用于实现上述任一项的人机交互方法。
本申请实施例还提供一种计算机程序产品,包括计算机程序,计算机程序被处理器执行时,用于实现上述任一项的人机交互方法。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求书指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求书来限制。

Claims (7)

1.一种人机交互方法,其特征在于,包括:
当识别到视觉标记定位标识时,对所述视觉标记定位标识进行跟踪识别;
若在第一预设时间内,所述视觉标记定位标识始终位于图像采集设备前方,则显示虚拟锁标识,所述虚拟锁标识为角度为360度的表盘,所述表盘包括60个格,每个所述格为6度;
获取所述视觉标记定位标识的解锁动作,所述解锁动作包括预设顺序下的多个解锁动作,所述每个解锁动作是通过旋转所述视觉标记定位标识来获取;
若所述每个解锁动作的旋转角度与所述表盘中的任意一个格的角度的差值小于预设角度,则确定用户输入的虚拟锁密码为所述格对应的密码角度,其中,所述虚拟密码是按照所述预设顺序旋转视觉标记定位标识所获取的预设顺序下的多个旋转角度组合而成;
根据所述虚拟锁密码和预设密码,对所述用户进行鉴权;
若鉴权成功,则显示操作菜单和虚拟鼠标,获取所述视觉标记定位标识的控制动作;
根据所述控制动作和预设指令对应信息,对所述操作菜单进行控制,其中,所述预设指令对应信息包括控制动作和所述控制动作对应的预设指令。
2.根据权利要求1所述的方法,其特征在于,在所述获取所述视觉标记定位标识的解锁动作,根据所述解锁动作对用户进行鉴权之后,还包括:
若在第二预设时间内鉴权失败,则退出鉴权。
3.根据权利要求1或2所述的方法,其特征在于,所述控制动作包括出现、消失、左旋、右旋和移动中的至少一种,所述预设指令包括左键点击、右键点击和鼠标移动中的至少一种;
所述根据所述控制动作和预设指令对应信息,对所述操作菜单进行控制,包括:
根据所述预设指令对应信息,确定所述控制动作对应的预设指令;
根据所述控制动作对应的预设指令,对所述操作菜单进行控制。
4.根据权利要求1或2所述的方法,其特征在于,在所述若鉴权成功,则显示虚拟鼠标,获取所述视觉标记定位标识指令动作之后,还包括:
若在第三预设时间内,未获取到视觉标记定位标识的指令动作,则退出操作菜单。
5.一种人机交互装置,其特征在于,包括:
识别模块,用于当识别到视觉标记定位标识时,对所述视觉标记定位标识进行跟踪识别;
发起模块,用于若在第一预设时间内,所述视觉标记定位标识始终位于图像采集设备前方,则发起鉴权;
鉴权模块,用于获取所述视觉标记定位标识的解锁动作,根据所述解锁动作对用户进行鉴权;
处理模块,用于若鉴权成功,则显示操作菜单和虚拟鼠标,获取所述视觉标记定位标识的控制动作;
控制模块,用于根据所述控制动作和预设指令对应信息,对所述操作菜单进行控制,其中,所述预设指令对应信息包括控制动作和所述控制动作对应的预设指令;
所述发起模块具体用于:
若在第一预设时间内,所述视觉标记定位标识始终位于图像采集设备前方,则显示虚拟锁标识,所述虚拟锁标识为角度为360度的表盘,所述表盘包括60个格,每个所述格为6度;
所述鉴权模块具体用于:
获取所述视觉标记定位标识的解锁动作,所述解锁动作包括预设顺序下的多个解锁动作,所述每个解锁动作是通过旋转所述视觉标记定位标识来获取;
若所述每个解锁动作的旋转角度与所述表盘中的任意一个格的角度的差值小于预设角度,则确定用户输入的虚拟锁密码为所述格对应的密码角度,其中,所述虚拟密码是按照所述预设顺序旋转视觉标记定位标识所获取的预设顺序下的多个旋转角度组合而成;
根据所述虚拟锁密码和预设密码,对所述用户进行鉴权。
6.一种人机交互设备,其特征在于,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如权利要求1至4中任一项所述的人机交互方法。
7.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现如权利要求1至4中任一项所述的人机交互方法。
CN202210320944.1A 2022-03-30 2022-03-30 人机交互方法、装置、设备及存储介质 Active CN114415901B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210320944.1A CN114415901B (zh) 2022-03-30 2022-03-30 人机交互方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210320944.1A CN114415901B (zh) 2022-03-30 2022-03-30 人机交互方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN114415901A CN114415901A (zh) 2022-04-29
CN114415901B true CN114415901B (zh) 2022-06-28

Family

ID=81264561

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210320944.1A Active CN114415901B (zh) 2022-03-30 2022-03-30 人机交互方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN114415901B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020042035A1 (en) * 2018-08-29 2020-03-05 Moqi Technology (beijing) Co., Ltd. Method and device for automatic fingerprint image acquisition
CN114127837A (zh) * 2019-05-01 2022-03-01 奇跃公司 内容提供系统和方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102917132B (zh) * 2012-10-23 2014-05-14 上海斐讯数据通信技术有限公司 具有图像识别解锁系统的移动终端及图像识别解锁方法
US11039121B2 (en) * 2017-06-20 2021-06-15 Sony Interactive Entertainment Inc. Calibration apparatus, chart for calibration, chart pattern generation apparatus, and calibration method
JP2022553616A (ja) * 2019-09-04 2022-12-26 北京図森智途科技有限公司 自動運転車両サービス方法及びシステム
CN110827361B (zh) * 2019-11-01 2023-06-23 清华大学 基于全局标定架的相机组标定方法及装置
CN110989674B (zh) * 2019-12-16 2023-03-31 西安因诺航空科技有限公司 一种基于ArUco标签的无人机视觉引导降落方法
CN111637851B (zh) * 2020-05-15 2021-11-05 哈尔滨工程大学 一种基于Aruco码的平面旋转角度视觉测量方法及装置
CN113168189A (zh) * 2020-06-29 2021-07-23 深圳市大疆创新科技有限公司 飞行作业方法、无人机及存储介质
CN113538762B (zh) * 2021-09-16 2021-12-14 深圳市海清视讯科技有限公司 门禁平板设备菜单控制方法、装置、系统、介质及产品

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020042035A1 (en) * 2018-08-29 2020-03-05 Moqi Technology (beijing) Co., Ltd. Method and device for automatic fingerprint image acquisition
CN114127837A (zh) * 2019-05-01 2022-03-01 奇跃公司 内容提供系统和方法

Also Published As

Publication number Publication date
CN114415901A (zh) 2022-04-29

Similar Documents

Publication Publication Date Title
CN107402663B (zh) 指纹验证方法和用于执行该方法的电子设备
DK2996015T3 (en) PROCEDURE TO USE IMPROVED REALITY AS HMI VIEW
EP2876529B1 (en) Unlocking mobile device with various patterns on black screen
CN102968276B (zh) 一种屏幕解锁方法及触摸屏终端
US9189614B2 (en) Password entry for double sided multi-touch display
KR101497762B1 (ko) 잠금 해제 방법과, 이를 위한 단말기 및 기록매체
CN108446638B (zh) 身份验证方法、装置、存储介质及电子设备
CN108139864A (zh) 使用指纹识别的操作方法、装置、移动终端
US20140366127A1 (en) Touchscreen security user input interface
CN105320871A (zh) 屏幕解锁方法及屏幕解锁装置
CN106445328B (zh) 一种移动终端屏幕的解锁方法及移动终端
CN106657455A (zh) 一种带可旋转摄像头的电子设备
CN105718778A (zh) 一种终端界面的控制方法及终端
US20150033328A1 (en) Information terminal and execution control method
CN109117704A (zh) 压力识别装置和包括压力识别装置的电子装置
CA2955072A1 (en) Reflection-based control activation
CN111881431A (zh) 人机验证方法、装置、设备及存储介质
CN111949192A (zh) 密码输入提示方法、装置和电子设备
US20120291123A1 (en) Method and electronic device for inputting passwords
CN106227438B (zh) 终端操控方法和装置
CN114415901B (zh) 人机交互方法、装置、设备及存储介质
WO2020118491A1 (zh) 基于指纹识别的交互方法、电子设备及相关装置
WO2016131181A1 (zh) 一种指纹事件的处理方法、装置及终端
KR101380718B1 (ko) 센싱 정보를 이용한 패스워드 인증 장치 및 그 방법
CN210691314U (zh) 一种基于活体检测的接入控制系统及登录设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: 518000 Guangdong Shenzhen Baoan District Xixiang street, Wutong Development Zone, Taihua Indus Industrial Park 8, 3 floor.

Patentee after: Shenzhen Haiqing Zhiyuan Technology Co.,Ltd.

Address before: 518000 Guangdong Shenzhen Baoan District Xixiang street, Wutong Development Zone, Taihua Indus Industrial Park 8, 3 floor.

Patentee before: SHENZHEN HIVT TECHNOLOGY Co.,Ltd.