CN112309025B - 信息展示方法、装置、电子设备及存储介质 - Google Patents

信息展示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN112309025B
CN112309025B CN202011193364.8A CN202011193364A CN112309025B CN 112309025 B CN112309025 B CN 112309025B CN 202011193364 A CN202011193364 A CN 202011193364A CN 112309025 B CN112309025 B CN 112309025B
Authority
CN
China
Prior art keywords
information
target user
target
image
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011193364.8A
Other languages
English (en)
Other versions
CN112309025A (zh
Inventor
侯欣如
李园园
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sensetime Technology Development Co Ltd
Original Assignee
Beijing Sensetime Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sensetime Technology Development Co Ltd filed Critical Beijing Sensetime Technology Development Co Ltd
Priority to CN202011193364.8A priority Critical patent/CN112309025B/zh
Publication of CN112309025A publication Critical patent/CN112309025A/zh
Application granted granted Critical
Publication of CN112309025B publication Critical patent/CN112309025B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/30Individual registration on entry or exit not involving the use of a pass
    • G07C9/32Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18Status alarms
    • G08B21/24Reminder alarms, e.g. anti-loss alarms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/178Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition

Abstract

本公开提供了一种信息展示方法、装置、电子设备及计算机可读存储介质,本公开首先获取目标区域内的第一图像;之后识别第一图像中的目标用户的身份属性信息,并基于目标用户的身份属性信息,生成是否允许目标用户进入预设作业区域的通行结果信息;最后通过目标用户的增强现实AR设备展示通行结果信息。

Description

信息展示方法、装置、电子设备及存储介质
技术领域
本公开涉及增强现实技术领域,具体而言,涉及一种信息展示方法、装置、电子设备及计算机可读存储介质。
背景技术
目前,在监控工作人员是否能够进入一些特定区域,一般都是通过人工核查、通过刷卡、或者通过刷指纹的方式实现,这些方式效率低下,并且在工作人员忘记带卡,由于手指皮肤问题或机器故障刷不上指纹的情况下,相关的工作人员将无法进入特定区域,进一步降低了通行监测的效率。
发明内容
本公开实施例至少提供一种信息展示方法、装置。
第一方面,本公开实施例提供了一种信息展示方法,包括:
获取目标区域内的第一图像;所述目标区域为预设作业区域对应的入口区域;
识别所述第一图像中的目标用户的身份属性信息;
基于所述目标用户的身份属性信息,生成是否允许所述目标用户进入所述预设作业区域的通行结果信息;
通过所述目标用户的增强现实AR设备展示所述通行结果信息。
该方面,利用在目标区域入口拍摄的图像,识别目标用户的身份属性信息,并基于身份属性信息生成并显示是否允许用户进入目标区域的通行结果信息,相比于现有技术中的人工核查、刷卡方式和刷指纹方式进行的通行监测,该方面能够有效提高通行监测的效率,并且上述通行监测的方式也可广泛应用于各类工业场景中,达到控制目标用户能否进入危险、特殊工种等特定的作业区域的目的,以提高工业场景中通行管控的安全性。
在一种可能的实施方式中,上述信息展示方法还包括:
获取所述预设作业区域内的第二图像;
在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,生成目标作业岗位的作业提示信息;
通过所述AR设备展示所述作业提示信息。
该实施方式,在目标用户位于预设作业区域内时,生成并向目标用户展示目标工作岗位对应的操作提示、注意事项等作业提示信息,达到了将作业任务的操作、注意事项等提示等较为丰富的信息展示给目标用户的目的。
在一种可能的实施方式中,所述识别所述第一图像中的目标用户的身份属性信息,包括:
从所述第一图像中提取与所述目标用户的身份相关的目标特征信息;所述目标特征信息包括人脸特征信息、人体特征信息、作业服饰特征信息、年龄特征信息、和性别特征信息中的至少一种;
基于所述目标特征信息,确定所述目标用户的身份属性信息。
该实施方式,利用人脸特征信息、人体特征信息、作业服饰特征信息、年龄特征信息、和性别特征信息中的一种或多种能够较为准确的确定目标用户的身份属性信息,以便基于该身份属性信息确定目标用户能否进入危险、特殊工种等特定的作业区域。
在一种可能的实施方式中,所述基于所述目标用户的身份属性信息,生成是否允许所述目标用户进入所述预设作业区域的通行结果信息,包括:
基于所述目标用户的身份属性信息,以及允许进入所述预设作业区域的合法用户的身份属性信息,确定所述目标用户是否为合法用户;
在确定所述目标用户为合法用户的情况下,生成允许所述目标用户进入所述预设作业区域的通行结果信息。
该实施方式,已经登记的或工作岗位匹配的等具有对应权限的合法用户才允许进入危险、特殊工种等特定的作业区域,能够提高工业场景中通行管控的安全性。
在一种可能的实施方式中,所述在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,生成目标作业岗位的作业提示信息,包括:
在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,从所述第二图像中提取所述目标用户的操作属性信息,所述操作属性信息包括运动轨迹信息、运动方向信息、和姿势信息中的至少一种;
基于所述操作属性信息,生成所述目标作业岗位的作业提示信息。
该实施方式,基于目标用户当前操作的特征和属性,能够生成针对当前操作的操作提示、注意事项等作业提示信息,实现了向目标用户展示特定工业场景中的针对当前操作的作业提示信息。
在一种可能的实施方式中,所述作业提示信息包括以下至少一项:
作业任务信息;作业注意事项信息;操作提示信息。
该实施方式,将作业任务信息、作业注意事项信息或操作提示信息展示给用户,达到了将作业任务的操作、注意事项等提示等较为丰富的信息展示给特定工业场景中的目标用户的目的。
第二方面,本公开实施例提供了一种信息展示装置,,包括:
图像获取模块,用于获取目标区域内的第一图像;所述目标区域为预设作业区域对应的入口区域;
识别模块,用于识别所述第一图像中的目标用户的身份属性信息;
信息处理模块,用于基于所述目标用户的身份属性信息,生成是否允许所述目标用户进入所述预设作业区域的通行结果信息;
展示模块,用于通过所述目标用户的增强现实AR设备展示所述通行结果信息。
在一种可能的实施方式中,所述图像获取模块,还用于获取所述预设作业区域内的第二图像;
所述信息处理模块,还用于在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,生成目标作业岗位的作业提示信息;
所述展示模块,还用于通过所述AR设备展示所述作业提示信息。
第三方面,本公开实施例还提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。
第四方面,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。
关于上述信息展示装置、电子设备、及计算机可读存储介质的效果描述参见上述信息展示方法的说明,这里不再赘述。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种信息展示方法的流程图;
图2A示出了本公开实施例所提供的再一种信息展示方法中向目标用户展示与作业任务相关的作业提示信息的流程图;
图2B示出了本公开实施例所提供的另一种信息展示方法中生成目标作业岗位的作业提示信息的流程图;
图3示出了本公开实施例所提供的一种信息展示装置的示意图;
图4示出了本公开实施例所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
本文中术语“和/或”,仅仅是描述一种关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
针对目前通行监测效率低下的缺陷,本公开提供了一种信息展示方法、装置、电子设备和计算机可读存储介质,本公开利用在目标区域入口拍摄的图像,识别目标用户的身份属性信息,之后基于身份属性信息生成并显示是否允许用户进入目标区域的通行结果信息,相比于现有技术中的人工核查、刷卡方式和刷指纹方式进行的通行监测,本公开能够有效提高通行监测的效率,并且上述通行监测的方式也可广泛应用于各类工业场景中,达到控制目标用户能否进入危险、特殊工种等特定的作业区域的目的,以提高工业场景中通行管控的安全性。
下面通过具体的实施例,对本公开公开的信息展示方法、装置、电子设备及存储介质进行说明。
如图1所示,本公开实施例公开了一种信息展示方法,该方法可以应用于具有计算能力的设备。具体地,该信息展示方法可以包括如下步骤:
S110、获取目标区域内的第一图像;所述目标区域为预设作业区域对应的入口区域。
上述目标区域可以设置为预设作业区域的入口区域,入口区域是进入预设作业区域之前,目标用户经过的区域,可以是预设作业区域的入口附近的区域。
上述的第一图像可以是安装在预设作业区域内的摄像头拍摄的,也可以是安装在入口区域内的摄像头拍摄的。
获取的第一图像中可能存在目标用户,也可能不存在目标用户,因此在获取到第一图像之后,可以对图像进行识别,确定第一图像中是否存在目标用户;如果第一图像中存在目标用户,则执行步骤S120,如果第一图像中不存在目标用户,则再次执行步骤S110。
在具体实施时,可以利用如下步骤识别第一图像中是否存在目标用户:
提取第一图像中各个用户的人脸特征信息、作业服饰特征信息中的一种;将提取的特征信息与预设的目标用户的标准特征信息进行匹配,如果匹配成功,则将对应的用户作为目标对象,如果第一图像中所有的用户都匹配失败,则确定第一图像中不存在目标用户。
上述人脸特征信息包括用户面部关键点的特征信息,例如,眼部对应的关键点的特征信息、眉梢对应的关键点的特征信息、嘴部对应的关键点的特征信息、鼻子对应的关键点的特征信息、脸部轮廓对应的关键点的特征信息等。
作业服饰特征信息是指用户所穿戴的服饰的特征信息,例如可以包括安全帽的特征信息、肩章的特征信息服饰颜色特征信息等。
基于上述人脸特征信息可以确定对应的用户的身份特征,基于作业服饰特征信息可以确定用户的作业岗位,根据身份特征或作业岗位都能够确定对应的用户是否为目标用户。这里的目标用户是指具有特定身份或是具有特定作业岗位的用户。
S120、识别所述第一图像中的目标用户的身份属性信息。
在确定第一图像中存在目标用户的情况下,从所述第一图像中提取与所述目标用户的身份相关的目标特征信息,该目标特征信息包括人脸特征信息、人体特征信息、作业服饰特征信息、年龄特征信息、和性别特征信息中的至少一种。应当说明的是,在步骤S110中已经提取了人脸特征信息和作业服饰特征信息,这里可以直接采用,并不用再次提取。之后,可以基于目标特征信息,确定所述目标用户的身份属性信息。这里可以将目标特征信息直接作为目标用户的身份属性信息,也可以根据目标特征信息,确定目标用户的目标作业岗位信息,并将目标作业岗位信息作为目标用户的身份属性信息。
上述作业服饰特征信息可以包括目标用户的服饰的特征信息、所戴的帽子的特征信息等。例如,在建筑场景中,工人需要佩戴安全帽,安全帽上会标注有所属单位的字样或标识符,通过对安全帽上工人所属单位的字样或标识符的图像特征的提取,得到上述作业服饰特征信息。通过得到的作业服饰特征信息能够确定工人是否属于这个建筑工地,如果属于则允许进入,否则不允许进入。再例如,发电场景中,工人穿戴的工服上或肩章上会标注有工人作业岗位的字样或标识符,通过对工服上工人的作业岗位的字样或标识符的图像特征的提取,得到上述作业服饰特征信息。通过得到的作业服饰特征信息能够确定工人是否属于这个发电区域的工作人员,如果属于则允许进入,否则不允许进入。
利用人脸特征信息、人体特征信息、作业服饰特征信息、年龄特征信息、和性别特征信息中的一种能够较为准确的确定目标用户的身份属性信息。
S130、基于所述目标用户的身份属性信息,生成是否允许所述目标用户进入所述预设作业区域的通行结果信息。
这里,基于身份属性信息如果识别到目标用户为合法用户,则允许目标用户进入预设作业区域,如果识别到目标用户为非法用户,则不允许用户进入预设作业区域。具体可以是通过如下子步骤生成通行结果信息:
基于所述目标用户的身份属性信息,以及允许进入所述预设作业区域的合法用户的身份属性信息,确定所述目标用户是否为合法用户;在确定所述目标用户为合法用户的情况下,生成允许所述目标用户进入所述预设作业区域的通行结果信息。
上述允许进入所述预设作业区域的合法用户的身份属性信息是预先设置并存储的,在获取到目标用户的身份属性信息之后,判断目标用户的身份属性信息是否为已存储的合法用户的身份属性信息中的一个,如果是,则生成允许所述目标用户进入所述预设作业区域的通行结果信息。如果不是,则确定目标用户为不合法用户,并生成拒绝所述目标用户进入所述预设作业区域的通行结果信息。
在允许所述目标用户进入所述预设作业区域时,生成的上述通行结果信息具体可以是:“请进入作业区域”、“欢迎进入作业区域”等。在不允许所述目标用户进入所述预设作业区域时,生成的上述通行结果信息具体可以是:“请不要进入作业区域”、“您不具备进入作业区域的权限”等。
如果存在多个预设作业区域,在获取到目标用户的身份属性信息之后,可以首先根据目标用户的身份属性信息,从各个预设作业区域中筛选目标用户需要进入的目标预设作业区域,之后基于筛选的目标预设作业区域,生成允许所述目标用户进入所述预设作业区域的通行结果信息;如果筛选不到目标预设作业区域,则生成拒绝所述目标用户进入所述预设作业区域的通行结果信息。
在允许所述目标用户进入目标预设作业区域时,生成的上述通行结果信息具体可以是:“请进入XXX作业区域”、“欢迎进入作业区域XXX”等。在不允许所述目标用户进入所述目标预设作业区域时,生成的上述通行结果信息具体可以是:“请不要进入XXX作业区域”、“您不具备进入作业区域XXX的权限”等。
利用目标用户的身份属性信息和允许进入预设作业区域的合法用户的身份属性信息,能够准确的判断目标用户是否为合法用户,在目标用户为合法用户的情况下,生成允许所述目标用户进入所述预设作业区域的通行结果信息,提高了通行监测的准确度和效率。
S140、通过所述目标用户的增强现实AR设备展示所述通行结果信息。
将通行结果信息显示在目标用户持有或佩戴的AR设备上,目标用户可以直接看到通行结果信息。
上述实施例能够实现对目标用户能否进入预设作业区进行监控,以及显示是否允许目标用户进入预设作业区域的通行结果信息。
上述实施例是对目标用户进入预设作业区之前的监控,本公开了还公开了以下实施例,以在目标用户进入预设作业区域之后,向目标用户展示与作业任务相关的作业提示信息,如图2A所示:
S210、获取所述预设作业区域内的第二图像,并判断第二图像中是否存在目标用户。
这里第二图像可以是从安装在预设作业区域内的摄像头获取的。
获取的第二图像中可能存在目标用户,也可能不存在目标用户,因此在获取到第二图像之后,需要对图像进行识别,确定第二图像中是否存在目标用户;如果第二图像中存在目标用户,则执行步骤220,如果第二图像中不存在目标用户,则再次执行步骤210。
在具体实施时,可以利用如下步骤识别第二图像中是否存在目标用户:
提取第二图像中各个用户的人脸特征信息、作业服饰特征信息中的一种;将提取的特征信息与预设的目标用户的标准特征信息进行匹配,如果匹配成功,则将对应的用户作为目标对象,如果第二图像中所有的用户都匹配失败,则确定第二图像中不存在目标用户。
基于上述人脸特征信息可以确定对应的用户的身份特征,基于作业服饰特征信息可以确定用户的作业岗位,根据身份特征或作业岗位都能够确定对应的用户是否为目标用户。
S220、在第二图像中存在目标用户,并且基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,生成目标作业岗位的作业提示信息。
在确定所述目标用户位于所述预设作业区域内之后,可以先确定目标用户对应的目标作业岗位。在确定目标用户的目标作业岗位的过程中,可以首先从第二图像中提取的目标用户的人脸特征信息,之后基于提取的人脸特征信息,确定目标用户的身份特征,最后将与身份特征匹配的作业岗位作为目标用户的目标作业岗位。在执行此步骤之前,预先存储有身份特征与作业岗位之间一一对应的映射关系。这里的人脸特征信息可以不是本步骤提取的,可以直接利用步骤一中提取的人脸特征信息。
另外,还可以利用如下子步骤确定目标用户的目标作业岗位:首先从第二图像中提取的目标用户的作业服饰特征信息,之后里将与作业服饰特征信息匹配的作业岗位作为目标用户的目标作业岗位。在执行此步骤之前,预先存储有作业服饰特征信息与作业岗位之间一一对应的映射关系。这里的作业服饰特征信息可以不是本步骤提取的,可以直接利用步骤一中提取的作业服饰特征信息。
如图2B所示,在确定了上述目标作业岗位之后,可以利用如下子步骤生成目标作业岗位的作业提示信息:
S2201、在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,从所述第二图像中提取所述目标用户的操作属性信息,所述操作属性信息包括运动轨迹信息、运动方向信息、和姿势信息中的至少一种。
对于运动轨迹信息可以利用如下步骤检测:获取与该第二图像相邻的N张第二图像,从所有第二图像中识别出目标用户,并确定目标用户在每张第二图像中的预设部位关键点的位置坐标,之后,利用多个不同是时间点同一位置的关键点的位置坐标构成运动轨迹信息。上述预设部位可以是目标用户的手部、胳膊等部位。
对于运动方向信息可以利用如下步骤检测:获取与该第二图像相邻的、在该第二图像之后拍摄的至少一张第二图像;从所有第二图像中识别出目标用户,并确定目标用户在每张第二图像中预设部位关键点的位置坐标,之后,利用多个不同是时间点同一位置的关键点的位置坐标构成运动轨迹,最后根据得到运动轨迹的切线方向,确定上述运动方向信息。上述预设部位可以是目标用户的手部、胳膊等部位。
对于姿势信息可以利用如下步骤检测:从该第二图像中提取手部等预设部位的特征点,基于特征点的坐标确定上述姿势信息。
在具体实施时,上述操作属性信息还可以根据目标用户的在AR设备上点击的控件的属性确定,例如,目标用户的在AR设备上点击了结束作业,此时操作属性信息即包括结束作业的信息。
S2202、基于所述操作属性信息,生成所述目标作业岗位的作业提示信息。
基于运动轨迹信息、运动方向信息或姿势信息等操作属性信息可以确定目标用户当前执行的操作,根据目标用户当前执行的操作,可以生成作业提示信息。例如,如果根据操作属性信息确定目标用户正在执行维修部件A的操作,此时作业提示信息可以包括维修部件A的作业注意事项信息、维修部件A的操作提示信息等。再例如,如果根据操作属性信息确定目标用户维修部件B的操作完成,此时作业提示信息可以包括当前作业完成得信息、下一个作业任务的信息等。将作业任务信息、作业注意事项信息或操作提示信息展示给用户,能够提高用户执行作业任务的效率和作业任务的执行效果。
本步骤能够基于目标用户当前操作的特征和属性,生成对应的作业提示信息,有利于提高目标用户的操作效率和处理效果。
S230、通过所述AR设备展示所述作业提示信息。
在利用第二图像确定目标用户位于预设作业区域内时,生成并向目标用户展示目标工作岗位的作业提示信息,有利于目标用户快速完成工作任务,提高工作效率。
对应于上述信息展示方法,本公开还公开了一种信息展示装置,该装置中的各个模块能够实现上述各个实施例的信息展示方法中的每个步骤,并且能够取得相同的有益效果,因此,对于相同的部分这里不再进行赘述。具体地,如图3所示,信息展示装置包括:
图像获取模块310,用于获取目标区域内的第一图像;所述目标区域为预设作业区域对应的入口区域。
识别模块320,用于识别所述第一图像中的目标用户的身份属性信息;
信息处理模块330,用于基于所述目标用户的身份属性信息,生成是否允许所述目标用户进入所述预设作业区域的通行结果信息;
展示模块340,用于通过所述目标用户的增强现实AR设备展示所述通行结果信息。
在一些实施例中,所述图像获取模块310,还用于获取所述预设作业区域内的第二图像;
所述信息处理模块330,还用于在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,生成目标作业岗位的作业提示信息;
所述展示模块340,还用于通过所述AR设备展示所述作业提示信息。
在一些实施例中,所述识别模块320在识别所述第一图像中的目标用户的身份属性信息时,用于:
从所述第一图像中提取与所述目标用户的身份相关的目标特征信息;所述目标特征信息包括人脸特征信息、人体特征信息、作业服饰特征信息、年龄特征信息、和性别特征信息中的至少一种;
基于所述目标特征信息,确定所述目标用户的身份属性信息。
在一些实施例中,所述信息处理模块330在基于所述目标用户的身份属性信息,生成是否允许所述目标用户进入所述预设作业区域的通行结果信息时,用于:
基于所述目标用户的身份属性信息,以及允许进入所述预设作业区域的合法用户的身份属性信息,确定所述目标用户是否为合法用户;
在确定所述目标用户为合法用户的情况下,生成允许所述目标用户进入所述预设作业区域的通行结果信息。
在一些实施例中,所述信息处理模块330在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,生成目标作业岗位的作业提示信息时,用于:
在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,从所述第二图像中提取所述目标用户的操作属性信息,所述操作属性信息包括运动轨迹信息、运动方向信息、和姿势信息中的至少一种;
基于所述操作属性信息,生成所述目标作业岗位的作业提示信息。
在一些实施例中,所述作业提示信息包括以下至少一项:
作业任务信息;作业注意事项信息;操作提示信息。
对应于上述神经网络训练方法,本公开实施例还提供了一种电子设备400,如图4所示,为本公开实施例提供的电子设备400结构示意图,包括:
处理器41、存储器42、和总线43;存储器42用于存储执行指令,包括内存421和外部存储器422;这里的内存421也称内存储器,用于暂时存放处理器41中的运算数据,以及与硬盘等外部存储器422交换的数据,处理器41通过内存421与外部存储器422进行数据交换,当电子设备400运行时,处理器41与存储器42之间通过总线43通信,使得处理器41执行以下指令:
获取目标区域内的第一图像;所述目标区域为预设作业区域对应的入口区域;识别所述第一图像中的目标用户的身份属性信息;基于所述目标用户的身份属性信息,生成是否允许所述目标用户进入所述预设作业区域的通行结果信息;通过所述目标用户的增强现实AR设备展示所述通行结果信息。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述信息展示方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例还提供一种计算机程序产品,该计算机程序产品承载有程序代码,所述程序代码包括的指令可用于执行上述方法实施例中所述信息展示方法的步骤,具体可参见上述方法实施例,在此不再赘述。
其中,上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。

Claims (7)

1.一种信息展示方法,其特征在于,包括:
获取目标区域内的第一图像;所述目标区域为预设作业区域对应的入口区域;
识别所述第一图像中的目标用户的身份属性信息;
基于所述目标用户的身份属性信息,生成是否允许所述目标用户进入所述预设作业区域的通行结果信息;
通过所述目标用户的增强现实AR设备展示所述通行结果信息;
获取所述预设作业区域内的第二图像;
在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,确定所述目标用户对应的目标作业岗位,并生成所述目标作业岗位的作业提示信息;
通过所述AR设备展示所述作业提示信息;
其中,在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,采用如下步骤生成所述目标作业岗位的作业提示信息:
在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,从所述第二图像中提取所述目标用户的操作属性信息,所述操作属性信息包括运动轨迹信息、运动方向信息、和姿势信息中的至少一种;
基于所述操作属性信息,确定所述目标用户当前执行的操作,并根据所述目标用户当前执行的操作,生成所述目标作业岗位的作业提示信息。
2.根据权利要求1所述的信息展示方法,其特征在于,所述识别所述第一图像中的目标用户的身份属性信息,包括:
从所述第一图像中提取与所述目标用户的身份相关的目标特征信息;所述目标特征信息包括人脸特征信息、人体特征信息、作业服饰特征信息、年龄特征信息、和性别特征信息中的至少一种;
基于所述目标特征信息,确定所述目标用户的身份属性信息。
3.根据权利要求2所述的信息展示方法,其特征在于,所述基于所述目标用户的身份属性信息,生成是否允许所述目标用户进入所述预设作业区域的通行结果信息,包括:
基于所述目标用户的身份属性信息,以及允许进入所述预设作业区域的合法用户的身份属性信息,确定所述目标用户是否为合法用户;
在确定所述目标用户为合法用户的情况下,生成允许所述目标用户进入所述预设作业区域的通行结果信息。
4.根据权利要求1所述的信息展示方法,其特征在于,所述作业提示信息包括以下至少一项:
作业任务信息;作业注意事项信息;操作提示信息。
5.一种信息展示装置,其特征在于,包括:
图像获取模块,用于获取目标区域内的第一图像;所述目标区域为预设作业区域对应的入口区域;
识别模块,用于识别所述第一图像中的目标用户的身份属性信息;
信息处理模块,用于基于所述目标用户的身份属性信息,生成是否允许所述目标用户进入所述预设作业区域的通行结果信息;
展示模块,用于通过所述目标用户的增强现实AR设备展示所述通行结果信息;
所述图像获取模块,还用于获取所述预设作业区域内的第二图像;
所述信息处理模块,还用于在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,确定所述目标用户对应的目标作业岗位,并生成所述目标作业岗位的作业提示信息;
所述展示模块,还用于通过所述AR设备展示所述作业提示信息;其中,所述信息处理模块,还用于在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,采用如下步骤生成所述目标作业岗位的作业提示信息:
在基于所述第二图像确定所述目标用户位于所述预设作业区域内的情况下,从所述第二图像中提取所述目标用户的操作属性信息,所述操作属性信息包括运动轨迹信息、运动方向信息、和姿势信息中的至少一种;
基于所述操作属性信息,确定所述目标用户当前执行的操作,并根据所述目标用户当前执行的操作,生成所述目标作业岗位的作业提示信息。
6.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至4任一项所述的信息展示方法的步骤。
7.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至4任一项所述的信息展示方法的步骤。
CN202011193364.8A 2020-10-30 2020-10-30 信息展示方法、装置、电子设备及存储介质 Active CN112309025B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011193364.8A CN112309025B (zh) 2020-10-30 2020-10-30 信息展示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011193364.8A CN112309025B (zh) 2020-10-30 2020-10-30 信息展示方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN112309025A CN112309025A (zh) 2021-02-02
CN112309025B true CN112309025B (zh) 2022-11-04

Family

ID=74333045

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011193364.8A Active CN112309025B (zh) 2020-10-30 2020-10-30 信息展示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN112309025B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113111844B (zh) * 2021-04-28 2022-02-15 中德(珠海)人工智能研究院有限公司 一种作业姿态评估方法、装置、本地终端及可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN205563458U (zh) * 2016-03-25 2016-09-07 深圳青橙视界数字科技有限公司 智能头戴设备及智能穿戴系统
CN107680220A (zh) * 2017-09-28 2018-02-09 朱明增 一种基于机器视觉技术的作业违规行为智能识别方法
CN109118617A (zh) * 2018-07-13 2019-01-01 河南腾龙信息工程有限公司 一种应用于变电站的门禁系统及其识别方法
CN109905680A (zh) * 2019-04-15 2019-06-18 秒针信息技术有限公司 操作的监控方法及装置、存储介质、电子装置
CN110580024A (zh) * 2019-09-17 2019-12-17 Oppo广东移动通信有限公司 基于增强现实的车间辅助作业实现方法、系统及存储介质
CN111314490A (zh) * 2020-03-24 2020-06-19 红云红河烟草(集团)有限责任公司 一种电子显示牌的管理系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017091091A (ja) * 2015-11-06 2017-05-25 三菱電機株式会社 作業情報生成装置
CN106230628B (zh) * 2016-07-29 2019-08-02 山东工商学院 一种设备辅助检修方法和系统
CN108197801A (zh) * 2017-12-29 2018-06-22 安徽博诺思信息科技有限公司 基于可视化现场监控系统的工地人员管理方法及系统及方法
US10846899B2 (en) * 2019-04-17 2020-11-24 Honeywell International Inc. Methods and systems for augmented reality safe visualization during performance of tasks

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN205563458U (zh) * 2016-03-25 2016-09-07 深圳青橙视界数字科技有限公司 智能头戴设备及智能穿戴系统
CN107680220A (zh) * 2017-09-28 2018-02-09 朱明增 一种基于机器视觉技术的作业违规行为智能识别方法
CN109118617A (zh) * 2018-07-13 2019-01-01 河南腾龙信息工程有限公司 一种应用于变电站的门禁系统及其识别方法
CN109905680A (zh) * 2019-04-15 2019-06-18 秒针信息技术有限公司 操作的监控方法及装置、存储介质、电子装置
CN110580024A (zh) * 2019-09-17 2019-12-17 Oppo广东移动通信有限公司 基于增强现实的车间辅助作业实现方法、系统及存储介质
CN111314490A (zh) * 2020-03-24 2020-06-19 红云红河烟草(集团)有限责任公司 一种电子显示牌的管理系统

Also Published As

Publication number Publication date
CN112309025A (zh) 2021-02-02

Similar Documents

Publication Publication Date Title
Niinuma et al. Soft biometric traits for continuous user authentication
JP2019522278A (ja) 身分認証方法および装置
CN109756458B (zh) 身份认证方法和系统
US20120320181A1 (en) Apparatus and method for security using authentication of face
CN104169933A (zh) 用于认证用户的方法、装置和计算机可读记录介质
CN113366487A (zh) 基于表情组别的操作确定方法、装置及电子设备
CN107506629B (zh) 解锁控制方法及相关产品
JP2017524998A (ja) 本人照合を行うための方法およびシステム
CN108108711B (zh) 人脸布控方法、电子设备及存储介质
CN109886111A (zh) 基于微表情的比赛监控方法、装置、计算机设备及存储介质
WO2020079741A1 (ja) 虹彩認証装置、虹彩認証方法および記録媒体
CN111597910A (zh) 一种人脸识别方法、装置、终端设备及介质
CN110298246A (zh) 开锁验证方法、装置、计算机设备及存储介质
CN110619689A (zh) 智慧楼宇的自动签到打卡方法、计算机设备及存储介质
Haji et al. Real time face recognition system (RTFRS)
WO2020065954A1 (ja) 認証装置、認証方法および記憶媒体
CN112309025B (zh) 信息展示方法、装置、电子设备及存储介质
CN106339698A (zh) 一种基于虹膜识别的购票方法及装置
JP2018055231A (ja) 生体認証装置
JP2011502296A (ja) バイオメトリック行動コンテキストベースの人間認識のためのシステム及び方法
CN113033243A (zh) 一种人脸识别方法、装置及设备
CN110795715A (zh) 一种数据录入方法、装置、系统及存储介质
CN111104923A (zh) 一种人脸识别方法及装置
KR101286750B1 (ko) 제스처를 이용한 패스워드 판단시스템
WO2018179723A1 (ja) 顔認証処理装置、顔認証処理方法及び顔認証処理システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant