CN112149587A - 基于图像识别的对象处理方法、装置和计算机设备 - Google Patents
基于图像识别的对象处理方法、装置和计算机设备 Download PDFInfo
- Publication number
- CN112149587A CN112149587A CN202011039490.8A CN202011039490A CN112149587A CN 112149587 A CN112149587 A CN 112149587A CN 202011039490 A CN202011039490 A CN 202011039490A CN 112149587 A CN112149587 A CN 112149587A
- Authority
- CN
- China
- Prior art keywords
- article
- state
- record information
- item
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
- G06Q10/0875—Itemisation or classification of parts, supplies or services, e.g. bill of materials
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Economics (AREA)
- Library & Information Science (AREA)
- Accounting & Taxation (AREA)
- Entrepreneurship & Innovation (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Finance (AREA)
- Development Economics (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本申请涉及人工智能领域,提供了一种基于图像识别的对象处理方法、装置、计算机设备和存储介质。方法包括:接收离岗请求,提取离岗请求中携带的身份信息,识别与身份信息关联的物品存取区域的视频数据,并获取与身份信息关联的物品清单,获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息,当物品清单中的各项物品标识的物品状态记录信息为存放状态、且上锁状态记录信息为已上锁时,推送离岗成功消息。通过上述方法,实现物品的智能管理,确保各项物品在离岗之前归位至物品存放空间,避免在离岗之后物品上记载信息的泄露,提高小体积物品所携带信息的安全性。本申请可应用于智慧安防中,从而推动智慧城市的建设。
Description
技术领域
本申请涉及人工智能技术领域,特别是涉及一种基于图像识别的对象处理方法、装置、计算机设备和存储介质。
背景技术
当前工业4.0新时代是利用信息化技术促进产业变革的时代,也就是智能化时代,金融行业正在进行数字化业务转型,通过新一代信息技术如人工智能、5G、大数据、云计算、区块链等,对原有业务模式进行改造升级。随着新一代信息化技术的深度利用,伴随而来的信息安全风险也将愈发突出。
公司的信息数据是无形资产,不当泄露将给公司造成损失。随着现在技术的越来越发达,信息的载体也多种多样。但是对于办公环境中由员工个人管理的体积较小的记载重要信息的载体如U盘、硬盘等或是某些记载有重要信息的纸质材料,其保存和管理难度较大,存在容易丢失导致信息泄露的安全隐患。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高小体积物品所携带信息的安全性的基于图像识别的对象处理方法、装置、计算机设备和存储介质。
一种基于图像识别的对象处理方法,方法包括:
接收离岗请求,提取离岗请求中携带的身份信息;
识别与身份信息关联的物品存取区域的视频数据,并获取与身份信息关联的物品清单;
获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息;
当物品清单中的各项物品对应的物品状态记录信息为存放状态、且上锁状态记录信息为已上锁时,推送离岗成功消息。
在其中一个实施例中,获取物品存取区域的上锁状态记录信息包括:
获取视频数据中的待分析图像帧,识别待分析图像帧中的机械锁的状态标志,机械锁在上锁状态和未上锁状态时对应的状态标志不同,根据状态标志,得到物品存取区域的上锁状态记录信息;
在其中一个实施例中,获取物品存取区域的上锁状态记录信息包括:
接收物品存取区域对应的电子锁上传的状态更新信息,根据状态更新信息对应的当前状态,得到物品存取区域的上锁状态记录信息。
在其中一个实施例中,物品状态记录信息中所述物品状态,查找视频数据对应的物品状态记录信息之前,还包括:
对视频数据进行视频解析,得到多个图像帧;
对图像帧进行物品标识识别,得到携带有相同物品标识的连续目标图像帧;
获取连续目标图像帧中的物品标识的位置数据,得到物品标识在连续目标图像帧的位置变化信息;
根据位置变化信息,确定物品标识对应物品的移动方向;
根据移动方向,记录物品状态。
在其中一个实施例中,根据移动方向,记录物品状态包括:
当移动方向为由外向物品存取区域移动时,将物品状态记录为存放状态;
当移动方向为由物品存取区域向外移动时,将物品状态记录为取出状态。
在其中一个实施例中,方法还包括:
当物品清单中的至少一项物品对应的物品状态记录信息为取出状态或上锁状态记录信息为未上锁时,推送离岗失败消息。
在其中一个实施例中,当物品清单中的至少一项物品对应的物品状态记录信息为取出状态或上锁状态记录信息为未上锁时,推送离岗失败消息包括:
当物品清单中的至少一项物品对应的物品状态记录信息为取出状态时,获取与身份信息关联的豁免信息;
当豁免信息中不包含物品标识或上锁状态记录信息为未上锁时,推送离岗失败消息。
在其中一个实施例中,当物品清单中的至少一项物品对应的物品状态记录信息为取出状态时,方法还包括:
获取物品状态记录信息为取出状态的目标物品标识;
生成并反馈携带有目标物品标识的提示信息。
一种基于图像识别的对象处理装置,装置包括:
请求接收模块,用于接收离岗请求,提取离岗请求中携带的身份信息;
视频识别模块,用于识别与身份信息关联的物品存取区域的视频数据,并获取与身份信息关联的物品清单;
信息获取模块,用于获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息;
请求处理模块,用于当物品清单中的各项物品对应的物品状态记录信息为存放状态、且上锁状态记录信息为已上锁时,推送离岗成功消息。
一种计算机设备,包括存储器和处理器,存储器存储有计算机程序,处理器执行计算机程序时实现以下步骤:
接收离岗请求,提取离岗请求中携带的身份信息;
识别与身份信息关联的物品存取区域的视频数据,并获取与身份信息关联的物品清单;
获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息;
当物品清单中的各项物品对应的物品状态记录信息为存放状态、且上锁状态记录信息为已上锁时,推送离岗成功消息。
一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
接收离岗请求,提取离岗请求中携带的身份信息;
识别与身份信息关联的物品存取区域的视频数据,并获取与身份信息关联的物品清单;
获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息;
当物品清单中的各项物品对应的物品状态记录信息为存放状态、且上锁状态记录信息为已上锁时,推送离岗成功消息。
上述基于图像识别的对象处理方法、装置、计算机设备和存储介质,通过在用户离岗时,通过查找关联的物品存取区域的视频数据,对视频数据中的图像帧进行物品标识识别和物品状态分析,得到视频数据对应各物品的物品状态记录信息,并基于与身份信息关联的物品清单,通过得到物品清单中的各物品的物品标识对应的物品状态记录信息,当物品清单中的各项物品均已存放至物品存取区域且物品存取区域已上锁时,记录该用户的离岗信息。实现用户个人负责的各体积较小的物品的智能管理,确保用户管理的各项物品在离岗之前归位至物品存放空间,避免在离岗之后物品上记载信息的泄露,提高小体积物品所携带信息的安全性。
附图说明
图1为一个实施例中基于图像识别的对象处理方法的应用环境图;
图2为一个实施例中基于图像识别的对象处理方法的流程示意图;
图3为另一个实施例中基于图像识别的对象处理方法的流程示意图;
图4为一个实施例中基于图像识别的对象处理装置的结构框图;
图5为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的基于图像识别的对象处理方法,可以应用于如图1所示的基于图像识别的对象处理系统中。该系统包括终端102,服务器104,采集物品存取区域106的视频数据的摄像装置108以及对物品存取区域106上锁的锁110,锁110可以是能够标示上锁状态的机械锁或是通过网络与服务器104通讯的电子锁。终端102通过网络与服务器104进行通信,终端102可以是打卡终端,用于响应用户打卡操作,向服务器104发送上岗或离岗请求。终端102也可以是集成有打卡功能的用户办公终端,还能用于接收服务器反馈的提示信息等。服务器104接收用户通过终端102发送的离岗请求,提取离岗请求中携带的身份信息,识别与身份信息关联的物品存取区域的视频数据,并获取与身份信息关联的物品清单,获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息,物品状态记录信息通过对视频数据中的图像帧进行物品标识识别和物品状态分析处理得到,当物品清单中的各项物品对应的物品状态记录信息为存放状态、且上锁状态记录信息为已上锁时,推送离岗成功消息至终端102。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种基于图像识别的对象处理方法,以该方法应用于图1中的服务器为例进行说明,包括以下步骤202至步骤208。
步骤202,接收离岗请求,提取离岗请求中携带的身份信息。
离岗请求包括下班请求和外出请求。离岗请求可以通过打卡终端或集成有打卡功能的用户办公终端发送,打卡终端是指用户触发后基于用户的身份信息向服务器发送打卡请求的终端,用户办公终端是指用户接收服务器下发的办公数据或发送办公数据至服务器的终端。具体来说,打卡终端或用户办公终端可以用于上班打卡、下班打卡、外出打卡等。离岗请求包括下班打卡请求或外出请求。与传统打卡处理不同的是,与打卡终端连接的服务器在接收到离岗请求后,先验证用户的生物特征信息匹配验证用户身份信息。如果验证成功,不直接形成打卡记录,而是检测该用户管理的各物品是否归位至该用户关联的物品存取区域中,在确认归位以及物品存取区域上锁之后,再形成打卡记录。员工管理的各物品可以是可以放置在指定的物品存取区域的信息数据载体、例如U盘、纸质材料、文件等。物品存取区域可以是带锁的抽屉、柜子等。
步骤204,识别与身份信息关联的物品存取区域的视频数据,并获取与身份信息关联的物品清单。
视频数据用于记录携带有物品标识的物品在物品存储空间的存放和取出的过程。具体来说,由用户管理的抽屉或柜子等物品存取区域内设置有摄像装置,其中该摄像装置设置有照明灯进行补光。在一个具体的实施例中,照明灯可配置有光敏元件,光敏元件在光线不足时连通,使得照明灯在光线不足时开启。在另一个具体的实施例中,照明灯与抽屉或柜子的限位开关连接,限位开关在抽屉或柜子被打开时触发,以使得用户在抽屉或柜子时自动开启照明灯。
摄像装置会将采集的视频数据上传至服务器,由服务器对接收的视频数据进行分析处理得到物品状态记录信息。每个摄像装置都具有特定的设备标识,设备标识与用户的身份信息相关联,设备标识与身份信息的关联关系可以存储在服务器,服务器通过存储的关联关系,可以查找到与用户的身份信息关联的设备标识,从而根据查找到的设备标识获取到对应的视频数据。
步骤206,获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息。
物品状态记录信息通过对视频数据中的图像帧进行物品标识识别和物品状态分析处理得到。
物品存取区域的上锁状态数据、以及与视频数据对应的物品状态记录信息可以通过服务器的状态记录信息得到。
在实施例中,服务器会实时接收摄像装置上传的数据,当物品存取区域的锁为电子锁时,还会实时接收电子锁上传的状态更新数据。服务器通过对接收的数据进行分析处理,确定上锁状态以及物品的存取状态,并形成状态记录信息,状态记录信息包括物品状态记录信息和上锁状态记录信息,在接收到用户的离岗请求时,通过数据查找,得到物品存取区域的上锁状态记录信息、以及与出现在视频数据中的各物品的物品状态记录信息。
视频数据由多个图像帧组成,用户管理的各个物品携带有物品标识。在一个实施例中,服务器通过对视频数据进行解析,得到图像帧,通过对图像帧进行物品标识识别,根据物品标识在连续的图像帧中的位置变化方向,对物品状态分析处理,得到物品状态记录信息。
在实施例中,服务器会实时接收摄像装置上传的视频数据,在对视频数据进行处理后可以确定在视频的图像帧中出现携带有物品标识的物品,以及物品的物品状态具体为取出状态还是存放状态。由于在一段时间内,物品状态可能发生多次变化,为获得准确的最新物品状态,服务器通过对分析得到的物品状态按视频来源信息进行记录,得到物品状态记录信息。视频来源信息具体可以是摄像装置的身份标识也可以是视频编号等,在接收到离岗请求时,根据视频数据对应的视频来源信息,查找得到物品状态记录信息。
步骤208,当物品清单中的各项物品对应的物品状态记录信息为存放状态、且上锁状态记录信息为已上锁时,推送离岗成功消息。
在实施例中,服务器推送离岗成功消息至离岗请求的发送终端之后,还可以记录离岗信息,例如离岗时间等。服务器在获取到物品状态记录信息之后,需要判断用户管理的各项物品是否归位,通过获取与用户的身份信息关联的物品清单,确定用户管理的各项物品的物品标识,通过将物品清单中的物品标识与在视频数据中出现的各项物品标识的比对,得到物品清单中各项物品是否归位的判断结果,当物品状态记录信息中的处于存放状态的物品标识包括物品清单中的各项物品的物品标识时,表征用户管理的各项物品均已归位。
上述基于图像识别的对象处理方法,通过在用户离岗时,通过查找关联的物品存取区域的视频数据,对视频数据中的图像帧进行物品标识识别和物品状态分析,得到视频数据对应各物品的物品状态记录信息,并基于与身份信息关联的物品清单,通过得到物品清单中的各物品的物品标识对应的物品状态记录信息,当物品清单中的各项物品均已存放至物品存取区域且物品存取区域已上锁时,记录该用户的离岗信息。实现用户个人负责的各体积较小的物品的智能管理,确保用户管理的各项物品在离岗之前归位至物品存放空间,避免在离岗之后物品上记载信息的泄露,提高小体积物品所携带信息的安全性。
在其中一个实施例中,获取物品存取区域的上锁状态记录信息包括:获取视频数据中的待分析图像帧,识别待分析图像帧中的机械锁的状态标志,机械锁在上锁状态和未上锁状态时对应的状态标志不同,根据状态标志,得到物品存取区域的上锁状态记录信息。
机械锁是相较于电子锁而言,不能通过网络连接与服务器进行通讯的锁。在实施例中,机械锁携带有状态标示,摄像装置可以通过视频采集和图像分析,得到物品存取区域当前的上锁状态。具体来说,状态标示可以通过不同的颜色或不同的文字来标识,例如当用户对物品存取区域进行上锁时,利用上锁时产生的机械位移,同步带动状态标示进行切换,例如,上锁时状态标示为红色,未上锁时状态标示为绿色。再例如,上锁时状态标示为文字“已上锁”,未上锁时状态标示为文字“未上锁”。通过设置能够识别上锁状态的机械锁,能够在准确获取物品存取区域当前的上锁状态的同时,节约硬件成本。
在其中一个实施例中,获取物品存取区域的上锁状态记录信息包括:接收物品存取区域对应的电子锁上传的状态更新信息,根据状态更新信息对应的当前状态,得到物品存取区域的上锁状态记录信息。
电子锁能与服务器进行网络连接。电子锁内部具有感应器,能够在上锁或开锁时检测到不同的感应信号,通过将感应信号发送至服务器,能使服务器获取到物品存取区域当前的上锁状态。通过设置与服务器连接的电子锁,能够简化图像处理过程,节约服务器的计算资源。
在其中一个实施例中,物品状态记录信息中包含物品状态。获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息,如图3所示,即步骤206之前,还包括步骤302至步骤310。
步骤302,对视频数据进行视频解析,得到多个图像帧。
步骤304,对图像帧进行物品标识识别,得到携带有相同物品标识的连续目标图像帧。
步骤306,获取连续目标图像帧中的物品标识的位置数据,得到物品标识在连续目标图像帧的位置变化信息。
步骤308,根据位置变化信息,确定物品标识对应物品的移动方向。
步骤310,根据移动方向,记录物品状态。
视频数据的解析包括视频解码、转码等过程,将视频流拆分成连续的图像帧,服务器对各图像帧分别进行物品标识识别。物品标识用于表征物品身份。不同物品具有不同的物品标识,具体来说,物品标识可以是二维码、条码、数值串、颜色串等。为避免物品标识脱离物品,物品标识可以直接印刷在物品表面,避免单独从物品上撕下或者取下。服务器通过对各图像帧进行物品标识识别,首先筛选出携带有物品标识的目标图像帧,再从目标图像帧中筛选出携带有相同物品标识的连续目标图像帧。由于视频数据记录的是物品的存放和取出过程,在连续目标图像帧中,记录的实际上是物品的存放动作或取出动作的拆解过程图,因此,在连续目标图像帧中物品标识的位置数据是变化的,根据物品标识在连续目标图像帧的位置变化信息对应的物品移动方向,可以得到物品状态记录信息。
在其中一个实施例中,根据移动方向,记录物品状态包括:当移动方向为由外向物品存取区域移动时,将物品状态记录为存放状态;当移动方向为由物品存取区域向外移动时,将物品状态记录为取出状态。
在一个具体的实施例中,以物品存取区域为抽屉为例,由外向物品存取区域移动可以是从抽屉外到抽屉内的方向,由物品存取区域向外可以是从抽屉外到抽屉内的方向。通过分析连续图像帧的位置变化,当物品的移动方向是有抽屉外到抽屉内时,可以判定用户对该物体的操作是物品的存放,当物品的移动方向是有抽屉内到抽屉外时,可以判定用户对该物体的操作是物品的取出,从而实现对物品的存取状态的分析与记录。
在其中一个实施例中,服务器在分析得到物品状态之后,先记录得到的物品状态,得到物品状态记录信息,以便在接收到用户的离岗请求时,直接查找得到该用户对应的物品状态记录信息。
具体来说,通过对物品状态进行记录,可以得到物品状态记录信息,物品状态的记录方式包括以下任意一种:
第一种:每一个物品记录有多条物品状态,每条物品状态对应有更新时间。在接收到用户的离岗请求时,获取各物品更新时间最新的物品状态记录信息。
第二种:每一个物品记录有一条物品状态更新数据,服务器分析得到新的物品状态时,会更新原有的物品状态,得到物品状态更新数据。在接收到用户的离岗请求时,获取各物品的物品状态更新数据得到最新的物品状态记录信息。
第三种:每一个物品对应有多条物品状态和一条物品状态更新数据,服务器得到新的物品状态时,先根据更新时间,记录物品状态,然后基于记录的物品状态,对物品状态更新数据进行更新处理。在接收到用户的离岗请求时,获取各物品的物品状态更新数据得到最新的物品状态记录信息。
通过以上任意一种方式,都能实现对物品状态的记录,便于实现物品状态记录信息的准确查找。
在一个实施例中,方法还包括:当物品清单中的至少一项物品对应的物品状态记录信息为取出状态或上锁状态记录信息为未上锁时,推送离岗失败消息。
在实施例中,离岗失败消息可以反馈至离岗请求的发送终端,同时,还可以反馈离岗失败原因或处理建议,例如,提醒用户离岗失败和清理物品至物品存取区域并上锁,确保在用户离岗前,将用户管理的各项物品存放至物品存取区域并上锁,实现用户个人负责的各体积较小的物品的有效管理,避免在离岗之后的物品上记载信息的泄露,实现对小体积物品及其携带信息的安全管控。
在其他实施例中,当物品清单中的至少一项物品对应的物品状态记录信息为取出状态时,方法还包括:获取物品状态记录信息为取出状态的目标物品标识,生成并反馈携带有目标物品标识的提示信息。
在实施例中,通过获取与用户身份关联的用户终端,将携带有目标物品标识的提示信息反馈至用户终端,提示信息可以通过邮件、短信、管理软件弹窗讯息等方式反馈至用户终端。其中,用户终端可以是离岗请求的发送终端,也可以是用户的办公终端,例如与服务器连接的办公电脑,通过登录用户账号与服务器连接的手机终端等。通过反馈携带有目标物品标识的提示信息,可以使用户准确了解需要存放的目标物品,进行针对性处理,以提高效率。
在其中一个实施例中,当物品清单中的至少一项物品对应的物品状态记录信息为取出状态或上锁状态记录信息为未上锁时,推送离岗失败消息包括:
当物品清单中的至少一项物品对应的物品状态记录信息为取出状态时,获取与身份信息关联的豁免信息。
当豁免信息中不包含物品标识或上锁状态记录信息为未上锁时,推送离岗失败消息。
当豁免信息中包含物品标识,且上锁状态记录信息为已上锁时,推送离岗成功消息并反馈离岗成功消息至离岗请求的发送终端。
进一步地,豁免信息中还可以包括物品的豁免起止时间。豁免起始时间用于表征物品豁免的有效时间。获取与身份信息关联的豁免信息包括:获取豁免终止时间晚于当前时间、且与身份信息关联的豁免信息。进一步地,用户还可以通过向预先配置的豁免签报对象(比如上级领导)发送豁免请求,以获得物品的豁免权限。具体来说,服务器接收用户上传的豁免请求,确定豁免请求对应的豁免签报对象;将豁免请求转发至豁免签报对象的终端,当接收到豁免签报对象终端反馈的豁免允许信息时,配置与该物品对应的豁免信息。通过配置豁免信息能够有效实现对用户管理的各项物品的存放要求进行修改,实现个性化管理。
应该理解的是,虽然上述各流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,上述各流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图4所示,提供了一种基于图像识别的对象处理装置,包括:请求接收模块402、视频识别模块404、信息获取模块406和请求处理模块408,其中:
请求接收模块402,用于接收离岗请求,提取离岗请求中携带的身份信息。
视频识别模块404,用于识别与身份信息关联的物品存取区域的视频数据,并获取与身份信息关联的物品清单。
信息获取模块406,用于获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息。
请求处理模块408,用于当物品清单中的各项物品对应的物品状态记录信息为存放状态、且上锁状态记录信息为已上锁时,推送离岗成功消息。
在其中一个实施例中,信息获取模块还用于获取视频数据中的待分析图像帧,识别待分析图像帧中的机械锁的状态标志,机械锁在上锁状态和未上锁状态时对应的状态标志不同,根据状态标志,得到物品存取区域的上锁状态记录信息。
在其中一个实施例中,信息获取模块还用于接收物品存取区域对应的电子锁上传的状态更新信息,根据状态更新信息对应的当前状态,得到物品存取区域的上锁状态记录信息。
在其中一个实施例中,物品状态记录信息中包含物品状态,基于图像识别的对象处理装置还包括物品状态记录模块,用于对视频数据进行视频解析,得到多个图像帧;对图像帧进行物品标识识别,得到携带有相同物品标识的连续目标图像帧;获取连续目标图像帧中的物品标识的位置数据,得到物品标识在连续目标图像帧的位置变化信息;根据位置变化信息,确定物品标识对应物品的移动方向;根据移动方向,记录物品状态。
在其中一个实施例中,物品状态记录模块,用于当移动方向为由外向物品存取区域移动时,将物品状态记录为存放状态;当移动方向为由物品存取区域向外移动时,将物品状态记录为取出状态。
在其中一个实施例中,基于图像识别的对象处理装置还包括信息反馈模块,用于当物品清单中的至少一项物品对应的物品状态记录信息为取出状态或上锁状态记录信息为未上锁时,推送离岗失败消息。
在其中一个实施例中,信息反馈模块,还用于当物品清单中的至少一项物品对应的物品状态记录信息为取出状态时,获取与身份信息关联的豁免信息;当豁免信息中不包含物品标识或上锁状态记录信息为未上锁时,推送离岗失败消息。
在其中一个实施例中,当物品清单中的至少一项物品对应的物品状态记录信息为取出状态时,信息反馈模块还用于获取物品状态记录信息为取出状态的物品标识;生成并反馈携带有物品标识的提示信息。
上述基于图像识别的对象处理装置,通过在用户离岗时,通过查找关联的物品存取区域的视频数据,对视频数据中的图像帧进行物品标识识别和物品状态分析,得到视频数据对应各物品的物品状态记录信息,并基于与身份信息关联的物品清单,通过得到物品清单中的各物品的物品标识对应的物品状态记录信息,当物品清单中的各项物品均已存放至物品存取区域且物品存取区域已上锁时,记录该用户的离岗信息。实现用户个人负责的各体积较小的物品的智能管理,确保用户管理的各项物品在离岗之前归位至物品存放空间,避免在离岗之后物品上记载信息的泄露,提高小体积物品所携带信息的安全性。
关于基于图像识别的对象处理装置的具体限定可以参见上文中对于基于图像识别的对象处理方法的限定,在此不再赘述。上述基于图像识别的对象处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储物品状态记录信息以及上锁状态记录信息。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种基于图像识别的对象处理方法。
本领域技术人员可以理解,图5中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
接收离岗请求,提取离岗请求中携带的身份信息;识别与身份信息关联的物品存取区域的视频数据,并获取与身份信息关联的物品清单;获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息;当物品清单中的各项物品对应的物品状态记录信息为存放状态、且上锁状态记录信息为已上锁时,推送离岗成功消息。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取视频数据中的待分析图像帧,识别待分析图像帧中的机械锁的状态标志,机械锁在上锁状态和未上锁状态时对应的状态标志不同,根据状态标志,得到物品存取区域的上锁状态记录信息。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
接收物品存取区域对应的电子锁上传的状态更新信息,根据状态更新信息对应的当前状态,得到物品存取区域的上锁状态记录信息。
在一个实施例中,物品状态记录信息中包含物品状态,处理器执行计算机程序时还实现以下步骤:
对视频数据进行视频解析,得到多个图像帧;对图像帧进行物品标识识别,得到携带有相同物品标识的连续目标图像帧;获取连续目标图像帧中的物品标识的位置数据,得到物品标识在连续目标图像帧的位置变化信息;根据位置变化信息,确定物品标识对应物品的移动方向;根据移动方向,记录物品状态。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
当移动方向为由外向物品存取区域移动时,将物品状态记录为存放状态;当移动方向为由物品存取区域向外移动时,将物品状态记录为取出状态。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
当物品清单中的至少一项物品对应的物品状态记录信息为取出状态或上锁状态记录信息为未上锁时,推送离岗失败消息。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
当物品清单中的至少一项物品对应的物品状态记录信息为取出状态时,获取与身份信息关联的豁免信息;当豁免信息中不包含物品标识或上锁状态记录信息为未上锁时,推送离岗失败消息。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取物品状态记录信息为取出状态的目标物品标识;生成并反馈携带有目标物品标识的提示信息。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
接收离岗请求,提取离岗请求中携带的身份信息;识别与身份信息关联的物品存取区域的视频数据,并获取与身份信息关联的物品清单;获取物品存取区域的上锁状态记录信息,并查找视频数据对应的物品状态记录信息;当物品清单中的各项物品对应的物品状态记录信息为存放状态、且上锁状态记录信息为已上锁时,推送离岗成功消息。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取视频数据中的待分析图像帧,识别待分析图像帧中的机械锁的状态标志,机械锁在上锁状态和未上锁状态时对应的状态标志不同,根据状态标志,得到物品存取区域的上锁状态记录信息。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
接收物品存取区域对应的电子锁上传的状态更新信息,根据状态更新信息对应的当前状态,得到物品存取区域的上锁状态记录信息。
在一个实施例中,物品状态记录信息中包含物品状态,计算机程序被处理器执行时还实现以下步骤:
对视频数据进行视频解析,得到多个图像帧;对图像帧进行物品标识识别,得到携带有相同物品标识的连续目标图像帧;获取连续目标图像帧中的物品标识的位置数据,得到物品标识在连续目标图像帧的位置变化信息;根据位置变化信息,确定物品标识对应物品的移动方向;根据移动方向,记录物品状态。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
当移动方向为由外向物品存取区域移动时,将物品状态记录为存放状态;当移动方向为由物品存取区域向外移动时,将物品状态记录为取出状态。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
当物品清单中的至少一项物品对应的物品状态记录信息为取出状态或上锁状态记录信息为未上锁时,推送离岗失败消息。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
当物品清单中的至少一项物品对应的物品状态记录信息为取出状态时,获取与身份信息关联的豁免信息;当豁免信息中不包含物品标识或上锁状态记录信息为未上锁时,推送离岗失败消息。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取物品状态记录信息为取出状态的目标物品标识;生成并反馈携带有目标物品标识的提示信息。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,该计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种基于图像识别的对象处理方法,其特征在于,所述方法包括:
接收离岗请求,提取所述离岗请求中携带的身份信息;
识别与所述身份信息关联的物品存取区域的视频数据,并获取与所述身份信息关联的物品清单;
获取所述物品存取区域的上锁状态记录信息,并查找所述视频数据对应的物品状态记录信息;
当所述物品清单中的各项物品对应的物品状态记录信息为存放状态、且所述上锁状态记录信息为已上锁时,推送离岗成功消息。
2.根据权利要求1所述的方法,其特征在于,所述获取所述物品存取区域的上锁状态记录信息包括:
获取所述视频数据中的待分析图像帧,识别所述待分析图像帧中的机械锁的状态标志,所述机械锁在上锁状态和未上锁状态时对应的状态标志不同,根据所述状态标志,得到所述物品存取区域的上锁状态记录信息;
或;
接收所述物品存取区域对应的电子锁上传的状态更新信息,根据所述状态更新信息对应的当前状态,得到所述物品存取区域的上锁状态记录信息。
3.根据权利要求1所述的方法,其特征在于,所述物品状态记录信息中包含物品状态;所述查找所述视频数据对应的物品状态记录信息之前,还包括:
对所述视频数据进行视频解析,得到多个图像帧;
对所述图像帧进行物品标识识别,得到携带有相同物品标识的连续目标图像帧;
获取所述连续目标图像帧中的物品标识的位置数据,得到所述物品标识在所述连续目标图像帧的位置变化信息;
根据所述位置变化信息,确定所述物品标识对应物品的移动方向;
根据所述移动方向,记录物品状态。
4.根据权利要求3所述的方法,其特征在于,所述根据所述移动方向,记录物品状态包括:
当所述移动方向为由外向物品存取区域移动时,将物品状态记录为存放状态;
当所述移动方向为由物品存取区域向外移动时,将物品状态记录为取出状态。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述物品清单中的至少一项物品对应的物品状态记录信息为取出状态或所述上锁状态记录信息为未上锁时,推送离岗失败消息。
6.根据权利要求5所述的方法,其特征在于,所述当所述物品清单中的至少一项物品对应的物品状态记录信息为取出状态或所述上锁状态记录信息为未上锁时,推送离岗失败消息包括:
当所述物品清单中的至少一项物品对应的物品状态记录信息为取出状态时,获取与所述身份信息关联的豁免信息;
当所述豁免信息中不包含所述物品标识或所述上锁状态记录信息为未上锁时,推送离岗失败消息。
7.根据权利要求5所述的方法,其特征在于,当所述物品清单中的至少一项物品对应的物品状态记录信息为取出状态时,所述方法还包括:
获取所述物品状态记录信息为取出状态的目标物品标识;
生成并反馈携带有所述目标物品标识的提示信息。
8.一种基于图像识别的对象处理装置,其特征在于,所述装置包括:
请求接收模块,用于接收离岗请求,提取所述离岗请求中携带的身份信息;
视频识别模块,用于识别与所述身份信息关联的物品存取区域的视频数据,并获取与所述身份信息关联的物品清单;
信息获取模块,用于获取所述物品存取区域的上锁状态记录信息,并查找所述视频数据对应的物品状态记录信息;
请求处理模块,用于当所述物品清单中的各项物品对应的物品状态记录信息为存放状态、且所述上锁状态记录信息为已上锁时,推送离岗成功消息。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011039490.8A CN112149587A (zh) | 2020-09-28 | 2020-09-28 | 基于图像识别的对象处理方法、装置和计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011039490.8A CN112149587A (zh) | 2020-09-28 | 2020-09-28 | 基于图像识别的对象处理方法、装置和计算机设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112149587A true CN112149587A (zh) | 2020-12-29 |
Family
ID=73894834
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011039490.8A Pending CN112149587A (zh) | 2020-09-28 | 2020-09-28 | 基于图像识别的对象处理方法、装置和计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112149587A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20080006702A (ko) * | 2006-07-13 | 2008-01-17 | 에이치디에스씨큐리티(주) | 보관함 관리 시스템과 그 방법 |
CN105723327A (zh) * | 2013-06-19 | 2016-06-29 | 美国邮政管理局 | 用于提供对流通网络中的物品的实时追踪的系统和方法 |
CN106104593A (zh) * | 2014-02-16 | 2016-11-09 | 美国联合包裹服务公司 | 基于收货人的时间安排或者位置确定交付位置和时间 |
CN106204811A (zh) * | 2014-12-05 | 2016-12-07 | 中兴保全股份有限公司 | 电子标签保全装置 |
CN106297055A (zh) * | 2016-08-30 | 2017-01-04 | 湖南大学 | 一种储物柜、储物柜控制方法及系统 |
-
2020
- 2020-09-28 CN CN202011039490.8A patent/CN112149587A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20080006702A (ko) * | 2006-07-13 | 2008-01-17 | 에이치디에스씨큐리티(주) | 보관함 관리 시스템과 그 방법 |
CN105723327A (zh) * | 2013-06-19 | 2016-06-29 | 美国邮政管理局 | 用于提供对流通网络中的物品的实时追踪的系统和方法 |
CN106104593A (zh) * | 2014-02-16 | 2016-11-09 | 美国联合包裹服务公司 | 基于收货人的时间安排或者位置确定交付位置和时间 |
CN106204811A (zh) * | 2014-12-05 | 2016-12-07 | 中兴保全股份有限公司 | 电子标签保全装置 |
CN106297055A (zh) * | 2016-08-30 | 2017-01-04 | 湖南大学 | 一种储物柜、储物柜控制方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10997788B2 (en) | Context-aware tagging for augmented reality environments | |
KR101496646B1 (ko) | 인스턴트 qr코드를 통한 출입관리방법 | |
CN109146539A (zh) | 用户画像的更新方法及装置 | |
CN109636582B (zh) | 信贷信息管理方法、装置、设备和存储介质 | |
US20160189395A1 (en) | Information processing apparatus, recording medium, and information processing method | |
US20130343618A1 (en) | Searching for Events by Attendants | |
CN112732949A (zh) | 一种业务数据的标注方法、装置、计算机设备和存储介质 | |
CN113157315A (zh) | 一种软件不同版本的差异信息识别方法、装置、设备及介质 | |
CN114386509A (zh) | 数据融合方法、装置、电子设备及存储介质 | |
US9665574B1 (en) | Automatically scraping and adding contact information | |
CN112925899B (zh) | 排序模型建立方法、案件线索推荐方法、装置及介质 | |
US20050071740A1 (en) | Task extraction and synchronization | |
CN114117387A (zh) | 变电站工具监测方法、装置、计算机设备和存储介质 | |
CN114066533A (zh) | 产品推荐方法、装置、电子设备及存储介质 | |
CN103929460A (zh) | 获取联系人状态信息的方法及移动设备 | |
CN112149587A (zh) | 基于图像识别的对象处理方法、装置和计算机设备 | |
CN116595069A (zh) | 一种基于大数据的过滤展示方法及系统 | |
CN103093213A (zh) | 视频文件分类方法及终端 | |
CN108268545B (zh) | 一种分级的用户标签库的创建的方法和装置 | |
CN112698866B (zh) | 一种基于Git的代码行生命周期追溯方法及电子装置 | |
CN111221803B (zh) | 一种特征库管理方法及协处理器 | |
KR102192682B1 (ko) | 초근접 직접통신 기반 nfc 리더를 이용한 문서 및 물품 수납장 및 이를 이용한 문서 및 물품 수납 방법 | |
CN111125383B (zh) | 基于事件模型的媒资标签存储及检索的方法 | |
US11763613B2 (en) | Automatic creation and management of digital identity profiles for access control | |
CN112053141A (zh) | 基于磁感应的对象处理方法、装置和计算机设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |