CN113177452B - 一种基于图像处理与射频技术的封样方法及装置 - Google Patents

一种基于图像处理与射频技术的封样方法及装置 Download PDF

Info

Publication number
CN113177452B
CN113177452B CN202110434218.8A CN202110434218A CN113177452B CN 113177452 B CN113177452 B CN 113177452B CN 202110434218 A CN202110434218 A CN 202110434218A CN 113177452 B CN113177452 B CN 113177452B
Authority
CN
China
Prior art keywords
radio frequency
seal
sample
action
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110434218.8A
Other languages
English (en)
Other versions
CN113177452A (zh
Inventor
温富国
李金霞
卞华星
余建新
沈键
吴静沁
周晓宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Materials Branch of State Grid Jiangsu Electric Power Co Ltd
Original Assignee
Materials Branch of State Grid Jiangsu Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Materials Branch of State Grid Jiangsu Electric Power Co Ltd filed Critical Materials Branch of State Grid Jiangsu Electric Power Co Ltd
Priority to CN202110434218.8A priority Critical patent/CN113177452B/zh
Publication of CN113177452A publication Critical patent/CN113177452A/zh
Application granted granted Critical
Publication of CN113177452B publication Critical patent/CN113177452B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
    • G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Burglar Alarm Systems (AREA)

Abstract

本发明提供了一种基于图像处理与射频技术的封样方法及装置，该基于图像处理与射频技术的封样方法及装置通过图像监控和射频监控相结合的方式对样品的封样形成过程进行实时的和智能化的监控，并从图像监控和射频监控得到的数据信息中识别出封样处理对应的封样动作信息，以及对该封样动作信息进行违规与否的判断处理，从而对封样处理的每一个工序进行细节化和无人化的识别分析处理，从而有效地提高对封样处理过程中违规动作行为的监控识别有效性和准确性，以及同时提高封样处理过程的信息保密性。

Description

一种基于图像处理与射频技术的封样方法及装置
技术领域
本发明涉及封样监控的技术领域，特别涉及一种基于图像处理与射频技术的封样方法及装置。
背景技术
样品在送检之前都需要进行相应的封样处理，而封样处理会涉及不同的操作人员和不同的操作工序，才能够实现对样品的完整保全。在实际操作过程中，样品在封样处理中经过不同人员的接触，这难以保证所有人员在执行相应的封样操作工序时能够按照相应的规定执行，为了保证封样处理执行的正确性，需要对每一个人员执行的每一个封样操作工序进行定点和定时的监控，以此确定封样过程是否存在相应的违规行为。但是，由于封样处理涉及的工序繁多，并且封样处理通常需要保密性，若对封样处理进行人工监控，不仅需要耗费较多的人力物力，并且还不利于对封样进行保密，这都增加了对封样处理进行准确的和全面的监控的难度。可见，现有技术的封样方法和装置并不能有效地提高对封样处理过程中违规动作行为的监控识别有效性和准确性，以及同时提高封样处理过程的信息保密性。
发明内容
针对现有技术存在的缺陷，本发明提供一种基于图像处理与射频技术的封样方法及装置，该基于图像处理与射频技术的封样方法及装置通过在封样形成过程中分别获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据、和关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此形成相应的第一识别信息和第二识别信息，再根据该第一识别信息和第二识别信息构建该封样形成过程中封样相关人员的动作数据集合，最后对该动作数据集合进行预定模式的动作匹配处理，以此确定该封样形成过程中存在的违规动作行为；可见，该基于图像处理与射频技术的封样方法及装置通过图像监控和射频监控相结合的方式对样品的封样形成过程进行实时的和智能化的监控，并从图像监控和射频监控得到的数据信息中识别出封样处理对应的封样动作信息，以及对该封样动作信息进行违规与否的判断处理，从而对封样处理的每一个工序进行细节化和无人化的识别分析处理，从而有效地提高对封样处理过程中违规动作行为的监控识别有效性和准确性，以及同时提高封样处理过程的信息保密性。
本发明提供一种基于图像处理与射频技术的封样方法，其特征在于，所述基于图像处理与射频技术的封样方法包括如下步骤：
步骤S1，在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据，以此确定第一识别信息；
步骤S2，在所述封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此确定第二识别信息；
步骤S3，根据所述第一识别信息和所述第二识别信息，构建所述封样形成过程中封样相关人员的动作数据集合；
步骤S4，对所述动作数据集合进行预定模式的动作匹配处理，以此确定所述封样形成过程中存在的违规动作行为；
进一步，在所述步骤S1中，在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据，以此确定第一识别信息具体包括，
步骤S101，获取所述封样形成过程对应的封样形成环境状态和/或封样相关人员分布状态，以此确定相应的图像数据采集模式；
步骤S102，根据所述图像数据采集模式，对所述封样形成过程执行相应的单目视觉图像采集操作和/或多目视觉图像采集操作，以此采集得到关于封样本身和/或封样相关人员的所述动态图像数据和/或所述静态图像数据；
步骤S103，对所述动态图像数据和/或所述静态图像数据进行图像帧解析处理，以此获得关于封样本身和/或封样相关人员状态变化的所述第一识别信息，其中，获得关于封样本身的第一识别信息具体包括
A、根据所述图像帧解析处理，获得m帧图像信息集合S，S＝{K1,K2,…,Km}，Ki表示第i帧图像的图像信息，而每一帧图像信息均由n个特征向量表示，即K1＝{F11,F12,…,F1n}、K2＝{F21,F22,…,F2n}、…、Km＝{Fm1,Fm2,…,Fmn}，所述图像信息至少包括图像的亮度、图像中对象的基本信息、图像的缩放比和图像中不同对象的相位位置关系；
B、根据下面公式，计算每一帧图像对应的变化信息量
在上述公式中，Δ(i,i+1)为第i帧图像与第i+1帧图像之间的变化信息量，Fij为第i帧图像对应的第j个特征向量，Fi+1,j为第i+1帧图像对应的第j个特征向量；
C、根据下面公式计算得到所述第一识别信息
f＝{δk}
在上述公式中，f为第一识别信息，δk为中间量，所述中间量δk具体如下
在上述公式中，Fi为第i帧图像的图像信息，Fi+1为第i+1帧图像的图像信息，Δ(i,i+1)为第i帧图像与第i+1帧图像之间的变化信息量；
进一步，在所述步骤S2中，在所述封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此确定第二识别信息具体包括，
步骤S201，获取封样对应的射频标签的标签布置状态信息和/或射频工作参数信息，并根据所述标签布置状态信息和/或所述射频工作参数信息，确定相应的射频相关数据采集模式；
步骤S202，根据所述射频相关数据采集模式，对所述封样形成过程执行相应的射频标签实体监控操作和/或射频标签信号监控操作，以此采集得到关于射频标签工作的所述射频标签物理状态数据和/或所述射频标签信号状态数据；
步骤S203，对所述射频标签物理状态数据和所述射频标签信号状态数据分别进行标签物理属性解析处理和射频信号解析处理，以此获得关于所述射频标签状态变化的第二识别信息；
进一步，在所述步骤S3中，根据所述第一识别信息和所述第二识别信息，构建所述封样形成过程中封样相关人员的动作数据集合具体包括，
步骤S301，从所述第一识别信息和所述第二识别信息中，分别提取关于所述封样形成过程的封样自身定标特征、相关人员定标特征和射频标签定标特征；
步骤S302，根据所述封样自身定标特征、所述相关人员定标特征和射频标签定标特征，确定所述封样形成过程对应的封样变化评判模型；
步骤S303，根据所述封样变化评判模型，对所述封样形成过程中相对应的封样形成图像集合进行摘选处理和图像内容处理，以此构建所述封样相关人员的动作数据集合；
进一步，在所述步骤S4中，对所述动作数据集合进行预定模式的动作匹配处理，以此确定所述封样形成过程中存在的违规动作行为具体包括，
步骤S401，对所述动作数据集合进行关于六自由度的动作姿态提取处理，以此获得所述封样形成过程对应的动作细节识别数据；
步骤S402，对所述动作细节识别数据与预设动作合规/违规判断模型进行所述动作匹配处理，以确定所述动作细节识别数据中的封样合规动作存在状态和封样违规动作存在状态；
步骤S403，根据所述封样合规动作存在状态和所述封样违规动作存在状态，对所述封样形成过程中的封样行为安全性进行预警处理。
本发明还提供一种基于图像处理与射频技术的封样装置，其特征在于：
所述基于图像处理与射频技术的封样装置包括封样图像数据获取模块、第一识别信息确定模块、射频标签相关数据获取模块、第二识别信息确定模块、动作数据集合构建模块和违规动作行为确定模块；其中，
所述封样图像数据获取模块用于在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据；
所述第一识别信息确定模块用于根据所述动态图像数据和/或所述静态图像数据，确定第一识别信息；
所述射频标签相关数据获取模块用于在所述封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据；
所述第二识别信息确定模块用于根据所述射频标签物理状态数据和/或所述射频标签信号状态数据，确定第二识别信息；
所述动作数据集合构建模块用于根据所述第一识别信息和所述第二识别信息，构建所述封样形成过程中封样相关人员的动作数据集合；
所述违规动作行为确定模块用于对所述动作数据集合进行预定模式的动作匹配处理，以此确定所述封样形成过程中存在的违规动作行为；
进一步，所述封样图像数据获取模块包括图像数据采集模式确定子模块和图像数据采集子模块；其中，
所述图像数据采集模式确定子模块用于根据所述封样形成过程对应的封样形成环境状态和/或封样相关人员分布状态，确定相应的图像数据采集模式；
所述图像数据采集子模块用于根据所述图像数据采集模式，对所述封样形成过程执行相应的单目视觉图像采集操作和/或多目视觉图像采集操作，以此采集得到关于封样本身和/或封样相关人员的所述动态图像数据和/或所述静态图像数据；
所述第一识别信息确定模块用于对所述动态图像数据和/或所述静态图像数据进行图像帧解析处理，以此获得关于封样本身和/或封样相关人员状态变化的所述第一识别信息；
进一步，所述射频标签相关数据获取模块包括射频相关数据采集模式确定子模块和射频相关数据采集子模块；其中
所述射频相关数据采集模式确定子模块用于根据封样对应的射频标签的标签布置状态信息和/或射频工作参数信息，并根据所述标签布置状态信息和/或所述射频工作参数信息，确定相应的射频相关数据采集模式；
所述射频相关数据采集子模块用于根据所述射频相关数据采集模式，对所述封样形成过程执行相应的射频标签实体监控操作和/或射频标签信号监控操作，以此采集得到关于射频标签工作的所述射频标签物理状态数据和/或所述射频标签信号状态数据；
所述第二识别信息确定模块用于对所述射频标签物理状态数据和所述射频标签信号状态数据分别进行标签物理属性解析处理和射频信号解析处理，以此获得关于所述射频标签状态变化的第二识别信息；
进一步，所述动作数据集合构建模块包括封样定标提取子模块、封样变化评判模型确定子模块和动作数据集合生成子模块；其中，
所述封样定标提取子模块用于从所述第一识别信息和所述第二识别信息中，分别提取关于所述封样形成过程的封样自身定标特征、相关人员定标特征和射频标签定标特征；
所述封样变化评判模型确定子模块用于根据所述封样自身定标特征、所述相关人员定标特征和射频标签定标特征，确定所述封样形成过程对应的封样变化评判模型；
所述动作数据集合生成子模块用于根据所述封样变化评判模型，对所述封样形成过程中相对应的封样形成图像集合进行摘选处理和图像内容处理，以此生成所述封样相关人员的动作数据集合；
进一步，所述违规动作行为确定模块包括动作细节识别数据确定子模块、动作匹配处理子模块和预警子模块；其中，
所述动作细节识别数据确定子模块用于对所述动作数据集合进行关于六自由度的动作姿态提取处理，以此获得所述封样形成过程对应的动作细节识别数据；
所述动作匹配处理子模块用于对所述动作细节识别数据与预设动作合规/违规判断模型进行所述动作匹配处理，以确定所述动作细节识别数据中的封样合规动作存在状态和封样违规动作存在状态；
所述预警子模块用于根据所述封样合规动作存在状态和所述封样违规动作存在状态，对所述封样形成过程中的封样行为安全性进行预警处理。
相比于现有技术，该基于图像处理与射频技术的封样方法及装置通过在封样形成过程中分别获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据、和关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此形成相应的第一识别信息和第二识别信息，再根据该第一识别信息和第二识别信息构建该封样形成过程中封样相关人员的动作数据集合，最后对该动作数据集合进行预定模式的动作匹配处理，以此确定该封样形成过程中存在的违规动作行为；可见，该基于图像处理与射频技术的封样方法及装置通过图像监控和射频监控相结合的方式对样品的封样形成过程进行实时的和智能化的监控，并从图像监控和射频监控得到的数据信息中识别出封样处理对应的封样动作信息，以及对该封样动作信息进行违规与否的判断处理，从而对封样处理的每一个工序进行细节化和无人化的识别分析处理，从而有效地提高对封样处理过程中违规动作行为的监控识别有效性和准确性，以及同时提高封样处理过程的信息保密性。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
图1为本发明提供的一种基于图像处理与射频技术的封样方法的流程示意图。
图2为本发明提供的一种基于图像处理与射频技术的封样装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参阅图1，为本发明实施例提供的一种基于图像处理与射频技术的封样方法的流程示意图。该基于图像处理与射频技术的封样方法包括如下步骤：
步骤S1，在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据，以此确定第一识别信息；
步骤S2，在该封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此确定第二识别信息；
步骤S3，根据该第一识别信息和该第二识别信息，构建该封样形成过程中封样相关人员的动作数据集合；
步骤S4，对该动作数据集合进行预定模式的动作匹配处理，以此确定该封样形成过程中存在的违规动作行为。
优选地，在该步骤S1中，在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据，以此确定第一识别信息具体包括，
步骤S101，获取该封样形成过程对应的封样形成环境状态和/或封样相关人员分布状态，以此确定相应的图像数据采集模式；
步骤S102，根据该图像数据采集模式，对该封样形成过程执行相应的单目视觉图像采集操作和/或多目视觉图像采集操作，以此采集得到关于封样本身和/或封样相关人员的该动态图像数据和/或该静态图像数据；
步骤S103，对该动态图像数据和/或该静态图像数据进行图像帧解析处理，以此获得关于封样本身和/或封样相关人员状态变化的该第一识别信息，其中，获得关于封样本身的第一识别信息具体包括
A、根据该图像帧解析处理，获得m帧图像信息集合S，S＝{K1,K2,…,Km}，Ki表示第i帧图像的图像信息，而每一帧图像信息均由n个特征向量表示，即K1＝{F11,F12,…,F1n}、K2＝{F21,F22,…,F2n}、…、Km＝{Fm1,Fm2,…,Fmn}，该图像信息至少包括图像的亮度、图像中对象的基本信息、图像的缩放比和图像中不同对象的相位位置关系；
B、根据下面公式，计算每一帧图像对应的变化信息量
在上述公式中，Δ(i,i+1)为第i帧图像与第i+1帧图像之间的变化信息量，Fij为第i帧图像对应的第j个特征向量，Fi+1,j为第i+1帧图像对应的第j个特征向量；
C、根据下面公式计算得到该第一识别信息
f＝{δk}
在上述公式中，f为第一识别信息，δk为中间量，该中间量δk具体如下
在上述公式中，Fi为第i帧图像的图像信息，Fi+1为第i+1帧图像的图像信息，Δ(i,i+1)为第i帧图像与第i+1帧图像之间的变化信息量；
通过上述获取第一识别信息的过程，不仅可以确定状态变化信息，而且可以定位到哪一帧到哪一帧之间发生了变化，同时计算变化量的计算公式只要相邻帧的特征向量发生了变化就会被计算出来，进而被所述第一识别信息记录下来。
优选地，在该步骤S2中，在该封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此确定第二识别信息具体包括，
步骤S201，获取封样对应的射频标签的标签布置状态信息和/或射频工作参数信息，并根据该标签布置状态信息和/或该射频工作参数信息，确定相应的射频相关数据采集模式；
步骤S202，根据该射频相关数据采集模式，对该封样形成过程执行相应的射频标签实体监控操作和/或射频标签信号监控操作，以此采集得到关于射频标签工作的该射频标签物理状态数据和/或该射频标签信号状态数据；
步骤S203，对该射频标签物理状态数据和该射频标签信号状态数据分别进行标签物理属性解析处理和射频信号解析处理，以此获得关于该射频标签状态变化的第二识别信息。
优选地，在该步骤S3中，根据该第一识别信息和该第二识别信息，构建该封样形成过程中封样相关人员的动作数据集合具体包括，
步骤S301，从该第一识别信息和该第二识别信息中，分别提取关于该封样形成过程的封样自身定标特征、相关人员定标特征和射频标签定标特征；
步骤S302，根据该封样自身定标特征、该相关人员定标特征和射频标签定标特征，确定该封样形成过程对应的封样变化评判模型；
步骤S303，根据该封样变化评判模型，对该封样形成过程中相对应的封样形成图像集合进行摘选处理和图像内容处理，以此构建该封样相关人员的动作数据集合。
优选地，在该步骤S4中，对该动作数据集合进行预定模式的动作匹配处理，以此确定该封样形成过程中存在的违规动作行为具体包括，
步骤S401，对该动作数据集合进行关于六自由度的动作姿态提取处理，以此获得该封样形成过程对应的动作细节识别数据；
步骤S402，对该动作细节识别数据与预设动作合规/违规判断模型进行该动作匹配处理，以确定该动作细节识别数据中的封样合规动作存在状态和封样违规动作存在状态；
步骤S403，根据该封样合规动作存在状态和该封样违规动作存在状态，对该封样形成过程中的封样行为安全性进行预警处理。
参阅图2，为本发明实施例提供的一种基于图像处理与射频技术的封样装置的结构示意图。该基于图像处理与射频技术的封样装置包括封样图像数据获取模块、第一识别信息确定模块、射频标签相关数据获取模块、第二识别信息确定模块、动作数据集合构建模块和违规动作行为确定模块；其中，
该封样图像数据获取模块用于在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据；
该第一识别信息确定模块用于根据该动态图像数据和/或该静态图像数据，确定第一识别信息；
该射频标签相关数据获取模块用于在该封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据；
该第二识别信息确定模块用于根据该射频标签物理状态数据和/或该射频标签信号状态数据，确定第二识别信息；
该动作数据集合构建模块用于根据该第一识别信息和该第二识别信息，构建该封样形成过程中封样相关人员的动作数据集合；
该违规动作行为确定模块用于对该动作数据集合进行预定模式的动作匹配处理，以此确定该封样形成过程中存在的违规动作行为。
优选地，该封样图像数据获取模块包括图像数据采集模式确定子模块和图像数据采集子模块；其中，
该图像数据采集模式确定子模块用于根据该封样形成过程对应的封样形成环境状态和/或封样相关人员分布状态，确定相应的图像数据采集模式；
该图像数据采集子模块用于根据该图像数据采集模式，对该封样形成过程执行相应的单目视觉图像采集操作和/或多目视觉图像采集操作，以此采集得到关于封样本身和/或封样相关人员的该动态图像数据和/或该静态图像数据；
该第一识别信息确定模块用于对该动态图像数据和/或该静态图像数据进行图像帧解析处理，以此获得关于封样本身和/或封样相关人员状态变化的该第一识别信息。
优选地，该射频标签相关数据获取模块包括射频相关数据采集模式确定子模块和射频相关数据采集子模块；其中
该射频相关数据采集模式确定子模块用于根据封样对应的射频标签的标签布置状态信息和/或射频工作参数信息，并根据该标签布置状态信息和/或该射频工作参数信息，确定相应的射频相关数据采集模式；
该射频相关数据采集子模块用于根据该射频相关数据采集模式，对该封样形成过程执行相应的射频标签实体监控操作和/或射频标签信号监控操作，以此采集得到关于射频标签工作的该射频标签物理状态数据和/或该射频标签信号状态数据；
该第二识别信息确定模块用于对该射频标签物理状态数据和该射频标签信号状态数据分别进行标签物理属性解析处理和射频信号解析处理，以此获得关于该射频标签状态变化的第二识别信息。
优选地，该动作数据集合构建模块包括封样定标提取子模块、封样变化评判模型确定子模块和动作数据集合生成子模块；其中，
该封样定标提取子模块用于从该第一识别信息和该第二识别信息中，分别提取关于该封样形成过程的封样自身定标特征、相关人员定标特征和射频标签定标特征；
该封样变化评判模型确定子模块用于根据该封样自身定标特征、该相关人员定标特征和射频标签定标特征，确定该封样形成过程对应的封样变化评判模型；
该动作数据集合生成子模块用于根据该封样变化评判模型，对该封样形成过程中相对应的封样形成图像集合进行摘选处理和图像内容处理，以此生成该封样相关人员的动作数据集合。
优选地，该违规动作行为确定模块包括动作细节识别数据确定子模块、动作匹配处理子模块和预警子模块；其中，
该动作细节识别数据确定子模块用于对该动作数据集合进行关于六自由度的动作姿态提取处理，以此获得该封样形成过程对应的动作细节识别数据；
该动作匹配处理子模块用于对该动作细节识别数据与预设动作合规/违规判断模型进行该动作匹配处理，以确定该动作细节识别数据中的封样合规动作存在状态和封样违规动作存在状态；
该预警子模块用于根据该封样合规动作存在状态和该封样违规动作存在状态，对该封样形成过程中的封样行为安全性进行预警处理。
从上述实施例的内容可知，该基于图像处理与射频技术的封样方法及装置通过图像监控和射频监控相结合的方式对样品的封样形成过程进行实时的和智能化的监控，并从图像监控和射频监控得到的数据信息中识别出封样处理对应的封样动作信息，以及对该封样动作信息进行违规与否的判断处理，从而对封样处理的每一个工序进行细节化和无人化的识别分析处理，从而有效地提高对封样处理过程中违规动作行为的监控识别有效性和准确性，以及同时提高封样处理过程的信息保密性。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (8)

1.一种基于图像处理与射频技术的封样方法，其特征在于，所述基于图像处理与射频技术的封样方法包括如下步骤：
步骤S1，在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据，以此确定第一识别信息；
步骤S2，在所述封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此确定第二识别信息；
步骤S3，根据所述第一识别信息和所述第二识别信息，构建所述封样形成过程中封样相关人员的动作数据集合；
步骤S4，对所述动作数据集合进行预定模式的动作匹配处理，以此确定所述封样形成过程中存在的违规动作行为；
在所述步骤S1中，在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据，以此确定第一识别信息具体包括，
步骤S101，获取所述封样形成过程对应的封样形成环境状态和/或封样相关人员分布状态，以此确定相应的图像数据采集模式；
步骤S102，根据所述图像数据采集模式，对所述封样形成过程执行相应的单目视觉图像采集操作和/或多目视觉图像采集操作，以此采集得到关于封样本身和/或封样相关人员的所述动态图像数据和/或所述静态图像数据；
步骤S103，对所述动态图像数据和/或所述静态图像数据进行图像帧解析处理，以此获得关于封样本身和/或封样相关人员状态变化的所述第一识别信息，其中，获得关于封样本身的第一识别信息具体包括：
A、根据所述图像帧解析处理，获得m帧图像信息集合S，S＝{K1,K2,…,Km}，Ki表示第i帧图像的图像信息，而每一帧图像信息均由n个特征向量表示，即K1＝{F11,F12,…,F1n}、K2＝{F21,F22,…,F2n}、…、Km＝{Fm1,Fm2,…,Fmn}，所述图像信息至少包括图像的亮度、图像中对象的基本信息、图像的缩放比和图像中不同对象的相位位置关系；
B、根据下面公式，计算每一帧图像对应的变化信息量
在上述公式中，Δ(i,i+1)为第i帧图像与第i+1帧图像之间的变化信息量，Fij为第i帧图像对应的第j个特征向量，Fi+1,j为第i+1帧图像对应的第j个特征向量；
C、根据下面公式计算得到所述第一识别信息
f＝{δk}
在上述公式中，f为第一识别信息，δk为中间量，所述中间量δk具体如下
在上述公式中，Fi为第i帧图像的图像信息，Fi+1为第i+1帧图像的图像信息，Δ(i,i+1)为第i帧图像与第i+1帧图像之间的变化信息量。
2.如权利要求1所述的基于图像处理与射频技术的封样方法，其特征在于：
在所述步骤S2中，在所述封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此确定第二识别信息具体包括，
步骤S201，获取封样对应的射频标签的标签布置状态信息和/或射频工作参数信息，并根据所述标签布置状态信息和/或所述射频工作参数信息，确定相应的射频相关数据采集模式；
步骤S202，根据所述射频相关数据采集模式，对所述封样形成过程执行相应的射频标签实体监控操作和/或射频标签信号监控操作，以此采集得到关于射频标签工作的所述射频标签物理状态数据和/或所述射频标签信号状态数据；
步骤S203，对所述射频标签物理状态数据和所述射频标签信号状态数据分别进行标签物理属性解析处理和射频信号解析处理，以此获得关于所述射频标签状态变化的第二识别信息。
3.如权利要求1所述的基于图像处理与射频技术的封样方法，其特征在于：
在所述步骤S3中，根据所述第一识别信息和所述第二识别信息，构建所述封样形成过程中封样相关人员的动作数据集合具体包括，
步骤S301，从所述第一识别信息和所述第二识别信息中，分别提取关于所述封样形成过程的封样自身定标特征、相关人员定标特征和射频标签定标特征；
步骤S302，根据所述封样自身定标特征、所述相关人员定标特征和射频标签定标特征，确定所述封样形成过程对应的封样变化评判模型；
步骤S303，根据所述封样变化评判模型，对所述封样形成过程中相对应的封样形成图像集合进行摘选处理和图像内容处理，以此构建所述封样相关人员的动作数据集合。
4.如权利要求1所述的基于图像处理与射频技术的封样方法，其特征在于：
在所述步骤S4中，对所述动作数据集合进行预定模式的动作匹配处理，以此确定所述封样形成过程中存在的违规动作行为具体包括，
步骤S401，对所述动作数据集合进行关于六自由度的动作姿态提取处理，以此获得所述封样形成过程对应的动作细节识别数据；
步骤S402，对所述动作细节识别数据与预设动作合规/违规判断模型进行所述动作匹配处理，以确定所述动作细节识别数据中的封样合规动作存在状态和封样违规动作存在状态；
步骤S403，根据所述封样合规动作存在状态和所述封样违规动作存在状态，对所述封样形成过程中的封样行为安全性进行预警处理。
5.一种基于图像处理与射频技术的封样装置，其特征在于：
所述基于图像处理与射频技术的封样装置包括封样图像数据获取模块、第一识别信息确定模块、射频标签相关数据获取模块、第二识别信息确定模块、动作数据集合构建模块和违规动作行为确定模块；其中，
所述封样图像数据获取模块用于在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据；
所述第一识别信息确定模块用于根据所述动态图像数据和/或所述静态图像数据，确定第一识别信息；
所述射频标签相关数据获取模块用于在所述封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据；
所述第二识别信息确定模块用于根据所述射频标签物理状态数据和/或所述射频标签信号状态数据，确定第二识别信息；
所述动作数据集合构建模块用于根据所述第一识别信息和所述第二识别信息，构建所述封样形成过程中封样相关人员的动作数据集合；
所述违规动作行为确定模块用于对所述动作数据集合进行预定模式的动作匹配处理，以此确定所述封样形成过程中存在的违规动作行为；
所述封样图像数据获取模块包括图像数据采集模式确定子模块和图像数据采集子模块；其中，
所述图像数据采集模式确定子模块用于根据所述封样形成过程对应的封样形成环境状态和/或封样相关人员分布状态，确定相应的图像数据采集模式；
所述图像数据采集子模块用于根据所述图像数据采集模式，对所述封样形成过程执行相应的单目视觉图像采集操作和/或多目视觉图像采集操作，以此采集得到关于封样本身和/或封样相关人员的所述动态图像数据和/或所述静态图像数据；
所述第一识别信息确定模块用于对所述动态图像数据和/或所述静态图像数据进行图像帧解析处理，以此获得关于封样本身和/或封样相关人员状态变化的所述第一识别信息。
6.如权利要求5所述的基于图像处理与射频技术的封样装置，其特征在于：
所述射频标签相关数据获取模块包括射频相关数据采集模式确定子模块和射频相关数据采集子模块；其中
所述射频相关数据采集模式确定子模块用于根据封样对应的射频标签的标签布置状态信息和/或射频工作参数信息，并根据所述标签布置状态信息和/或所述射频工作参数信息，确定相应的射频相关数据采集模式；
所述射频相关数据采集子模块用于根据所述射频相关数据采集模式，对所述封样形成过程执行相应的射频标签实体监控操作和/或射频标签信号监控操作，以此采集得到关于射频标签工作的所述射频标签物理状态数据和/或所述射频标签信号状态数据；
所述第二识别信息确定模块用于对所述射频标签物理状态数据和所述射频标签信号状态数据分别进行标签物理属性解析处理和射频信号解析处理，以此获得关于所述射频标签状态变化的第二识别信息。
7.如权利要求5所述的基于图像处理与射频技术的封样装置，其特征在于：
所述动作数据集合构建模块包括封样定标提取子模块、封样变化评判模型确定子模块和动作数据集合生成子模块；其中，
所述封样定标提取子模块用于从所述第一识别信息和所述第二识别信息中，分别提取关于所述封样形成过程的封样自身定标特征、相关人员定标特征和射频标签定标特征；
所述封样变化评判模型确定子模块用于根据所述封样自身定标特征、所述相关人员定标特征和射频标签定标特征，确定所述封样形成过程对应的封样变化评判模型；所述动作数据集合生成子模块用于根据所述封样变化评判模型，对所述封样形成过程中相对应的封样形成图像集合进行摘选处理和图像内容处理，以此生成所述封样相关人员的动作数据集合。
8.如权利要求5所述的基于图像处理与射频技术的封样装置，其特征在于：
所述违规动作行为确定模块包括动作细节识别数据确定子模块、动作匹配处理子模块和预警子模块；其中，
所述动作细节识别数据确定子模块用于对所述动作数据集合进行关于六自由度的动作姿态提取处理，以此获得所述封样形成过程对应的动作细节识别数据；
所述动作匹配处理子模块用于对所述动作细节识别数据与预设动作合规/违规判断模型进行所述动作匹配处理，以确定所述动作细节识别数据中的封样合规动作存在状态和封样违规动作存在状态；
所述预警子模块用于根据所述封样合规动作存在状态和所述封样违规动作存在状态，对所述封样形成过程中的封样行为安全性进行预警处理。
CN202110434218.8A 2021-04-22 2021-04-22 一种基于图像处理与射频技术的封样方法及装置 Active CN113177452B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110434218.8A CN113177452B (zh) 2021-04-22 2021-04-22 一种基于图像处理与射频技术的封样方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110434218.8A CN113177452B (zh) 2021-04-22 2021-04-22 一种基于图像处理与射频技术的封样方法及装置

Publications (2)

Publication Number Publication Date
CN113177452A CN113177452A (zh) 2021-07-27
CN113177452B true CN113177452B (zh) 2024-02-27

Family

ID=76924369

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110434218.8A Active CN113177452B (zh) 2021-04-22 2021-04-22 一种基于图像处理与射频技术的封样方法及装置

Country Status (1)

Country Link
CN (1) CN113177452B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104966163A (zh) * 2015-06-19 2015-10-07 徐州市建设工程检测中心 基于移动终端的见证取样系统及方法
WO2020165242A1 (en) * 2019-02-13 2020-08-20 Validicity Sweden Ab Tamper evident rfid based system and method
CN111597524A (zh) * 2020-05-22 2020-08-28 江苏濠汉信息技术有限公司 一种用于封样抽检人员的验证方法及系统
CN111784745A (zh) * 2020-07-28 2020-10-16 国网江苏省电力有限公司南通供电分公司 一种用于封样送检的样品追踪方法与系统
CN111983247A (zh) * 2020-07-28 2020-11-24 国网江苏省电力有限公司南通供电分公司 一种用于封样送检的取样方法及系统
CN112052719A (zh) * 2020-07-16 2020-12-08 国网浙江省电力有限公司 基于图像特征识别的人员行为分析方法及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2017243976B2 (en) * 2016-03-31 2023-05-25 Snpshot Trustee Limited Apparatus and methods for sampling

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104966163A (zh) * 2015-06-19 2015-10-07 徐州市建设工程检测中心 基于移动终端的见证取样系统及方法
WO2020165242A1 (en) * 2019-02-13 2020-08-20 Validicity Sweden Ab Tamper evident rfid based system and method
CN111597524A (zh) * 2020-05-22 2020-08-28 江苏濠汉信息技术有限公司 一种用于封样抽检人员的验证方法及系统
CN112052719A (zh) * 2020-07-16 2020-12-08 国网浙江省电力有限公司 基于图像特征识别的人员行为分析方法及系统
CN111784745A (zh) * 2020-07-28 2020-10-16 国网江苏省电力有限公司南通供电分公司 一种用于封样送检的样品追踪方法与系统
CN111983247A (zh) * 2020-07-28 2020-11-24 国网江苏省电力有限公司南通供电分公司 一种用于封样送检的取样方法及系统

Also Published As

Publication number Publication date
CN113177452A (zh) 2021-07-27

Similar Documents

Publication Publication Date Title
Fang et al. A deep learning-based method for detecting non-certified work on construction sites
Schlegel et al. Towards a rigorous evaluation of XAI methods on time series
EP3776462B1 (en) System and method for image-based target object inspection
CN108596221B (zh) 标尺读数的图像识别方法及设备
CN111325128A (zh) 违规操作检测方法、装置、计算机设备和存储介质
CN111126153A (zh) 基于深度学习的安全监测方法、系统、服务器及存储介质
CN115857413B (zh) 一种基于物联网的智能楼宇安全监测系统及方法
Yang et al. Vision-based crane tracking for understanding construction activity
CN116664551B (zh) 基于机器视觉的显示屏检测方法、装置、设备及存储介质
CN111126196A (zh) 一种设备漏油检测方法
JP2009068946A (ja) 欠陥分類装置および方法並びにプログラム
US20130208951A1 (en) Identification and quantification of microtextured regions in materials with ordered crystal structure
Kim et al. Sequential pattern learning of visual features and operation cycles for vision-based action recognition of earthmoving excavators
CN114821852B (zh) 基于特征金字塔的电网缺陷深度识别巡查机器人控制系统
CN116229299A (zh) 基于无人机的建筑或构筑物损伤评估方法、终端及介质
CN117114420B (zh) 一种基于图像识别的工贸安全事故风险管控系统和方法
CN111091104A (zh) 一种目标物体的防护检测方法、装置、设备及存储介质
Guo et al. Surface defect detection of civil structures using images: Review from data perspective
Zhao et al. Pose estimation method for construction machine based on improved AlphaPose model
CN113177452B (zh) 一种基于图像处理与射频技术的封样方法及装置
JP5137805B2 (ja) 検査システム及びその制御方法、コンピュータプログラム
CN113297945A (zh) 基于混合现实空间定位的室内设备巡检辅助方法及系统
CN117392452A (zh) 基于图像分析的墙体裂缝检测系统及其方法
KR20240064037A (ko) 피로 테스트를 통해 물체의 표면 결함 및 브레이크 디스크의 크랙을 인공 지능에 의해 식별 및 특성화하는 방법
EP4050560B1 (en) Wafer testing method and apparatus, and device and storage medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant