CN113916911B - 物品的安全检查方法和系统 - Google Patents

物品的安全检查方法和系统 Download PDF

Info

Publication number
CN113916911B
CN113916911B CN202010583786.XA CN202010583786A CN113916911B CN 113916911 B CN113916911 B CN 113916911B CN 202010583786 A CN202010583786 A CN 202010583786A CN 113916911 B CN113916911 B CN 113916911B
Authority
CN
China
Prior art keywords
image
article
item
appearance
label
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010583786.XA
Other languages
English (en)
Other versions
CN113916911A (zh
Inventor
陈志强
张丽
孙运达
李栋
张竹霖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Nuctech Co Ltd
Original Assignee
Tsinghua University
Nuctech Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University, Nuctech Co Ltd filed Critical Tsinghua University
Priority to CN202010583786.XA priority Critical patent/CN113916911B/zh
Publication of CN113916911A publication Critical patent/CN113916911A/zh
Application granted granted Critical
Publication of CN113916911B publication Critical patent/CN113916911B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/04—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and forming images of the material
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B15/00—Measuring arrangements characterised by the use of electromagnetic waves or particle radiation, e.g. by the use of microwaves, X-rays, gamma rays or electrons
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B15/00—Measuring arrangements characterised by the use of electromagnetic waves or particle radiation, e.g. by the use of microwaves, X-rays, gamma rays or electrons
    • G01B15/04—Measuring arrangements characterised by the use of electromagnetic waves or particle radiation, e.g. by the use of microwaves, X-rays, gamma rays or electrons for measuring contours or curvatures
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01V—GEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V5/00—Prospecting or detecting by the use of ionising radiation, e.g. of natural or induced radioactivity
    • G01V5/20—Detecting prohibited goods, e.g. weapons, explosives, hazardous substances, contraband or smuggled objects
    • G01V5/22—Active interrogation, i.e. by irradiating objects or goods using external radiation sources, e.g. using gamma rays or cosmic rays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404—Methods for optical code recognition
    • G06K7/1408—Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/1413—1D bar codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404—Methods for optical code recognition
    • G06K7/1408—Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/1417—2D bar codes

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Theoretical Computer Science (AREA)
  • Toxicology (AREA)
  • Biochemistry (AREA)
  • Analytical Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • High Energy & Nuclear Physics (AREA)
  • General Life Sciences & Earth Sciences (AREA)
  • Geophysics (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Analysis (AREA)

Abstract

公开了一种物品的安全检查方法和系统。在该方法中，获取所述物品的标签图像，并基于所述标签图像得到所述物品的标签信息；获取所述物品的外观图像，并基于所述外观图像提取所述物品的外部特征；以及利用所述标签信息和所述外部特征二者从感兴趣物品库中确定所述物品是否属于感兴趣物品。

Description

物品的安全检查方法和系统
技术领域
本公开的实施例总体上涉及安全检查领域，具体涉及物品的安全检查方法和系统。
背景技术
通常，机场到港物品(货物，行李等)在出仓后需要经过安全检查，对于确认安全的物品放行，而对于存在不安全问题的可疑物品需要工作人员进行开包检查。
现有检查方案通常依赖实体标签，根据检查结果给物品贴上不同类别的实体标签。待物品流转到出关检测区域后，再通过检测实体标签来识别出需要开箱检查的物品。实体标签在物品流转过程中可能脱落或被有意撕掉，从而导致在检测区域漏检该物品。此外，实体标签的使用会消耗较多人力物力资源。目前还有一种使用基于提取物品外观图像的检查方法，然而在面对外观高度相像的物品时，可能会导致较高的漏检和误检率。
公开内容
鉴于现有技术中的一个或多个问题，提出了一种物品的安全检查方法和系统。
在本公开的一个方面，提出了一种物品的安全检查方法，包括：获取所述物品的标签图像，并基于所述标签图像得到所述物品的标签信息；获取所述物品的外观图像，并基于所述外观图像提取所述物品的外部特征；以及利用所述标签信息和所述外部特征二者从感兴趣物品库中确定所述物品是否属于感兴趣物品。
根据一些实施例，所述安全检查方法还包括：获取一个或多个物品的透射图像，并基于所述透射图像确定所述一个或多个物品是否属于感兴趣物品；获取所述一个或多个物品的标签图像，并基于所述标签图像得到所述一个或多个物品的标签信息；获取所述一个或多个物品的外观图像，并基于所述外观图像提取所述一个或多个物品的外部特征；以及将所述一个或多个物品中被确定为感兴趣物品的物品的标签信息和外部特征相关联存储在所述感兴趣物品库中。
根据一些实施例，所述获取所述物品的外观图像包括：在获取所述物品的标签图像的同时连续获取所述物品的多个外观图像；计算所述多个外观图像中的每个外观图像的光源相关指数；以及从所述外观图像中选择光源相关指数最小的外观图像作为所述物品的外观图像。
根据一些实施例，所述计算所述多个外观图像中的每个外观图像的光源相关指数包括：获取在获取所述标签图像时所用的补光光源的光学特性；以及计算每个外观图像中具有与所述补光光源相同的光学特性的像素数目与总像素数目的比值，作为该外观图像的光源相关指数。
根据一些实施例，所述标签图像包括一维码图像和二维码图像中的至少一个和文本图像。
根据一些实施例，所述标签信息包括条码信息和文本信息。
根据一些实施例，所述条码信息包括：所述物品所属人的个人信息、航班/车次信息、物品提取岛信息、出发地信息、中转地信息以及目的信息中的至少一个。
根据一些实施例，所述文本信息包括机场代码和值机柜台信息。
根据一些实施例，所述物品的图像特征包括：物品的形状、物品的尺寸、物品的颜色、物品的纹理或物品的材料中的至少一个。
根据一些实施例，所述安全检查方法还包括：在确定所述物品属于感兴趣物品时发出警报。
在本公开的另一方面，提出了一种物品的安全检查系统，包括：标签相机，获取所述物品的标签图像；外观图像相机，获取所述物品的外观图像；以及信息处理装置，基于所述标签图像得到所述物品的标签信息，基于所述外观图像提取所述物品的外部特征，并且利用所述标签信息和所述外部特征二者从感兴趣物品库中确定所述物品是否属于感兴趣物品。
根据一些实施例，所述安全检查系统还包括：辐射成像装置，获取一个或多个物品的透射图像，其中，所述标签相机还获取所述一个或多个物品的标签图像，所述外观图像相机还获取所述一个或多个物品的外观图像，以及其中，所述信息处理装置基于所述透射图像确定所述一个或多个物品是否属于感兴趣物品，基于所述标签图像得到所述一个或多个物品的标签信息，基于所述外观图像提取所述一个或多个物品的外部特征，并且将所述一个或多个物品中被确定为感兴趣物品的物品的标签信息和外部特征相关联存储在所述感兴趣物品库中。
根据一些实施例，所述外观图像相机在所述标签相机获取所述物品的标签图像的同时连续获取所述物品的多个外观图像，以及所述信息处理装置计算所述多个外观图像中的每个外观图像的光源相关指数，并且从所述外观图像中选择光源相关指数最小的外观图像作为所述物品的外观图像。
根据一些实施例，所述信息处理装置获取在获取所述标签图像时所用的补光光源的光学特性，并且计算每个外观图像中具有与所述补光光源相同的光学特性的像素数目与总像素数目的比值，作为该外观图像的光源相关指数。
根据一些实施例，所述信息处理装置在确定所述物品属于感兴趣物品时发出警报。
根据一些实施例，所述标签相机包括一个或多个标签相机，所述一个或多个标签相机被布置在所述物品的前方、后方和侧方。
根据一些实施例，所述外观图像相机包括一个或多个外观图像相机，所述一个或多个外观图像相机被布置在所述物品的上方、斜前方和斜后方。
本公开的实施例提出了一种高效的物品安全检查方法，在物品被乘客领取前，通过辐射成像扫描装置，对感兴趣目标物品进行记录，同时对该物品的标签进行读取识别，并采集物品的外观图像以提取图像特征。在物品流转到检测区域时，再次对物品标签进行读取识别并采集物品外观图像以提取图像特征。将物品的标签信息与图像特征与记录为感兴趣物品的相应信息进行比对。本公开所提出的标签识别和外观图像识别相融合的物品安全检查方法和系统能够有效降低成本，同时通过融合标签识别和外观识别信息，有效提高外观高度相似物品的检出率。
附图说明
为了更好地理解本公开，将根据以下附图对本公开进行详细描述：
图1是根据本公开实施例的物品的安全检查方法的示意性流程图；
图2是根据本公开实施例的物品的安全检查过程的示意性框图；
图3是根据本公开实施例的获得受补光影响最小的外观图像的过程的示意图；以及
图4是根据本公开实施例的物品的安全检查系统的结构示意图。
具体实施方式
下面将详细描述本公开的具体实施例，应当注意，这里描述的实施例只用于举例说明，并不用于限制本公开。在以下描述中，为了提供对本公开的透彻理解，阐述了大量特定细节。然而，对于本领域普通技术人员显而易见的是：不必采用这些特定细节来实行本公开。在其他实例中，为了避免混淆本公开，未具体描述公知的结构、材料或方法。
在整个说明书中，对“一个实施例”、“实施例”、“一个示例”或“示例”的提及意味着：结合该实施例或示例描述的特定特征、结构或特性被包含在本公开至少一个实施例中。因此，在整个说明书的各个地方出现的短语“在一个实施例中”、“在实施例中”、“一个示例”或“示例”不一定都指同一实施例或示例。此外，可以以任何适当的组合和/或子组合将特定的特征、结构或特性组合在一个或多个实施例或示例中。此外，本领域普通技术人员应当理解，这里使用的术语“和/或”包括一个或多个相关列出的项目的任何和所有组合。
本公开以机场到港货物、行李等物品的安全检查为例来描述对感兴趣物品的进行安全检查。在本公开中，感兴趣物品可以包括可疑物品，例如藏匿违规的可疑夹带物的行李。现有物品安全检查方案中，一种检查方法依赖实体标签，根据对物品的检查结果给物品贴上不同类别的实体标签。对物品的检查结果可以通过对物品进行X射线辐射从而获得物品的透射图像并根据透射图像来检测物品中是否存在嫌疑物。在安全检查过程中当确定物品中存在嫌疑物时，需要将第一标签，例如RFID标签，附着到每一个物品，同时也可以使用第二标签，光分子或者气味分子标签。无论RFID标签还是光分子或气味分子都属于实体标签。待物品流转到出关检测区域(例如，行李提取岛)后，通过检测实体标签来识别出需要开箱检查的物品。然而实体标签在物品流转过程中可能脱落或被有意撕掉，从而导致在检测区域漏检该物品。此外，实体标签的使用会消耗较多人力物力资源。目前还有一种使用提取物品的外观图像的检查方法，然而在面对外观高度相像的物品时，可能会导致较高的漏检和误检率。
综上所述，基于实体标签和单一的物品外观图像的嫌疑物检查方法均有很大的劣势。为了解决上述问题，并且实现更高效、准确的物品检查，本公开的实施例提出一种高效的物品安全检查方法，在物品到达安全检测区域被领取前，通过辐射成像扫描装置，对被确定为感兴趣的目标物品进行记录，同时对该物品的标签进行读取识别并采集物品的外观图像以提取图像特征，并记录在数据库中。在本公开实施例中，物品的标签通常是在办理托运手续时由值机员帖在物品(货物，或行李)上，用于标明物品的品名、重量、体积、用途等信息，同时为了提取相似的物品不被拿错并便于工作人员核对。在物品流转到检测区域时，再次对物品标签进行读取识别并采集物品外观图像以提取图像特征。将物品的标签信息和外观图像与记录为感兴趣物品的相应信息进行比对。本公开所提出的标签识别和外观图像识别相融合的物品安全检查方法和系统能够有效降低成本，同时通过融合标签识别和外观识别信息，有效提高外观高度相似物品的检出率。
图1是根据本公开实施例的物品的安全检查方法的示意性流程图。如图1所示，在步骤S11，获取物品的标签图像，并基于所述标签图像得到所述物品的标签信息。在实施例中，旅客在乘飞机之前通常需要办理登机牌，并托运自己的行李。在办理行李托运时值机员会在行李上贴上标签(例如纸带)。行李托运标签是为了到达后相似的行李不被拿错，同时便于工作人员核对旅客的登机牌和托运标签上的姓名。因此托运标签是在进行安全检查之前已经存在于物品上的，属于物品的一部分。在物品到港之后，当物品到达指定检测区域时(例如，行李提取岛的指定位置)，设置在检测区域处的标签读取相机可以实现对物品上的标签的扫描和读取，以识别标签信息。现在行李托运标签上都打印有条形码和文本。条形码可以是一维码或二维码，按照一定的编码规则排列，用以表达一组信息的图形标识符。条形码是为实现对信息的自动扫描而设计的，它是实现快速、准确而可靠地采集数据的有效手段。本公开中的标签信息包括条码信息和文本信息。条码信息可以包括物品的品名、重量、体积、用途，以及物品所属人的个人信息、航班/车次信息、物品提取岛信息、出发地信息、中转地信息以及目的信息等。在实施例中，文本信息例如包括机场代码、值机柜台信息，以便于获取物品的更详细信息。
在步骤S12，获取物品的外观图像，并基于外观图像提取物品的外部特征。在对物品上的标签进行扫描和读取的同时，同样设置在检测区域处的外观图像相机对该物品进行拍摄，以获得该物品的外观图像。外观图像可以包括可见光图像、红外图像和/或深度图像。在获得物品的外观图像之后，可以从该外观图像中提取外部特征。在一些实施例中，物品的外部特征可以包括但不限于：物品的形状、物品的尺寸、物品的颜色、物品的纹理、或物品的材料。这些外部特征可以组合成物品的外部信息，从而可以根据外部信息容易地将不同的行李区分开。
在步骤S13，在利用所述标签信息和所述外部特征二者从感兴趣物品库中确定所述物品是否属于感兴趣物品。在实施例中，感兴趣物品库是在物品到达检测区域之前建立的，其中记录了感兴趣物品及其标签信息和外部特征。感兴趣物品库的建立在下文中参照图2进行详细描述。
本公开实施例的物品安全检查方法将标签识别和外观图像识别相融合，在降低了使用实物标签引起的人力成本的同时，有效地提高了外观高度相似物品的检出率。
图2是根据本公开实施例的物品的安全检查过程的示意性框图。在物品到港之后，一个或多个物品会被放置在机场的行李分拣系统中的传输带上，从而进入托盘系统。例如通过对行李上的行李标签信息进行实时分析，给每个行李进行最佳路线。行李车间还安装多个相机，识别行李身份，以防止发生行李走错路径。在物品到达检测区域之前的指定位置时，在方框202处，获取一个或多个物品的透射图像，并基于所述透射图像确定所述一个或多个物品是否属于感兴趣物品。在实施例中，在该指定位置处设置辐射成像装置，对每一个物品进行X射线扫描，从而生成X射线透射图像。通过对X射线透射图像进行图像处理和分析，可以在方框208处确定该物品是否为感兴趣物品。在实施例中，感兴趣物品为物品中夹带有嫌疑物。
同时，在方框204处，获取物品的标签图像，并在方框206处，获取物品的外观图像。接着，在方框210处，基于所述标签图像得到所物品的标签信息，并在方框212处，基于所述外观图像提取所述一个或多个物品的外部特征。
如果确定为感兴趣物品，则在方框214处，将所述一个或多个物品中被确定为感兴趣物品的物品的标签信息和外部特征相关联存储在所述感兴趣物品库中。因此感兴趣物品数据库中存储的是感兴趣物品的标签信息和外部特征。然而在本公开实施例中，感兴趣物品库中也可以存储所有物品的标签信息和外部特征，即将每一个物品的标签信息和外部特征信息与其是否为感兴趣物品的确定结果相关联地存储。在实施例中，感兴趣物品库可以按照查找表的形式来形成，然而本公开实施例不限于此。
当物品到达检测区域的指定位置时，在方框216处，获取物品的标签图像，在方框218处，获取物品的外观图像。接着在方框220处，基于获得的标签图像，获得标签信息，并且在方框222处，基于获得外观图像，获得外部特征。
在方框224和方框226处，将物品的标签信息和外部特征与感兴趣物品库中的被确定为感兴趣物品的标签信息和外部特征进行比对。从而在方框228处确定该物品是否为感兴趣物品。如果确定为感兴趣物品，则在方框230处发出警报，以提醒工作人员对该物品进行开箱检查。本本公开实施例的物品安全检查方法将标签识别和外观图像识别相融合，在降低了使用实物标签引起的人力成本的同时，有效地提高了外观高度相似物品的检出率。
在利用标签相机对物品的标签上的条形码和文本进行扫描和成像时，由于物品所处的环境并且物品处于行进中，因此需要在拍摄过程中会施加一定强度的频闪光作为补光用以提高标签相机拍摄图像的质量。在一些实施例中，利用补光灯尤其在光线昏暗的环境下以相同功率和频率连续地闪光，以获得清晰的图像。而外观图像相机也会在这个过程中对物品外观进行拍摄。如果物品外观相机曝光时间范围内存在用于标签读取识别的频闪光，则会影响外观图像的质量，从而影响外观特征的提取与比对，进而影响对嫌疑行李的检查效果。
为了减轻频闪补光对物品外观图像质量的影响，本申请实施例提出了在标签识别连续频闪光补光环境下仍能获取到高质量物品外观图像的方法。图3是根据本公开实施例的获得受补光影响最小的外观图像的过程的示意图。在方框302处，在获取物品的标签图像的同时连续获取所述物品的多个外观图像。在物品的行进过程中，物品上的标签的位置随机，并且传送物品的隧道环境的光线也比较昏暗。此外，标签在物品传送过程也可能也会被挤压污染，而导致读取和识别困难。因此通常使用补光灯以相同功率和频率连续地闪光，以获得清晰的标签图像。而这种频闪光会对获取物品外观图像的相机的成像质量产生影响。本申请实施例在上述频闪光补光环境下对同一物品连续拍摄多张外观图像，然后从这些外图像中选择受频闪补光影响最小的图像作为该物品的外观图像，并基于该外观图像提取物品的图像特征。
在本实施例中，计算多个外观图像中的每个外观图像的光源相关指数。光源相关指数是指一种可衡量外观图像受频闪光补光影响程度的指标，外观图像受频闪补光影响越大，该光源相关指数越大，反之，外观图像受频闪补光影响越小，该光源相关指数越小。下面描述如何获得外观图像的光源相关指数。
在方框304处，获取在获取所述标签图像时所用的补光光源的光学特性。在实施例中，拍摄标签图像时所使用的补光光源是一种补光灯。补光灯的技术参数通常包括光源的平均功率、光源类型、中心照度、均匀度、光通量(亮度)，显色指数、色温等。可以基于这些参数中一个或一些来得到补光灯的光学特性。在实施例中，可以采用亮度、饱和度和色调作为补光光源的光学特性。
在方框306处，计算每个外观图像中具有所述补光光源的光学特性的像素数目与总像素数目的比值，作为该外观图像的光源相关指数。在实施例中，首先计算外观图像中具有与补光光源的光学特性(例如亮度、饱和度或色调)相同的像素的数目。具体地，计算外观图像中每个像素的亮度值、饱和度值和色调值，将像素的亮度值、饱和度值和色调值分别与补光光源的亮度、饱和度和色调进行比较。例如如果比较结果示出了像素的亮度值与补光光源的亮度之差的绝对值小于预设亮度、像素的饱和度值与补光光源的饱和度之差的绝对值小于预设饱和度，或像素的色调值与补光光源的色调之差的绝对值小于预设值色调值，则确定该像素具有所述补光光源的光学特性。在实施例中，可以使用像素的亮度值、饱和度值和色调值中的至少一项来进行比较，以确定该像素是否具有补光光源的光学特性。然后计算该像素数目与外观图像的总像素数目的比值，该比值即为光源相关指数。该比值越小(光学特性相同的像素越少)意味着该外观图像受补光光源的影响越小，该比值越大则该外观图像受补光光源的影响越大。
在方框308处，从所述外观图像中选择光源相关指数最小的外观图像作为所述物品的外观图像。
在本申请实施例中使得在标签相机频闪光补光的条件下仍然能获得高质量的、受频闪光影响很小的物品外观图像，从而后续的物品外部特征提取更准确。同时由于实现了可在频闪光补光下找到受补光光源影响最小的外观图像，因此将标签相机与外观图像相机布置在一起使得整个系统结构紧凑，占用空间小。
图4示出了根据本公开实施例的物品的安全检查系统的结构示意图。如图4所示，根据本公开实施例的物品的安全检查系统包括辐射成像装置410，标签相机420、外观图像相机430、信息处理装置440和存储设备450。
在物品到港之后，一个或多个物品400进入安全检查系统。在实施例中，在指定位置处设置辐射成像装置410，对每一个物品进行X射线扫描，从而生成X射线透射图像。通过对X射线透射图像进行图像处理和分析，可以确定该物品是否为感兴趣物品。随着物品的行进，标签相机420获取每个物品的标签图像，外观图像相机430获取每个物品的外观图像。安全检查系统中配备有多个标签相机和多个外观图像相机，以便于对行进中的多个物品进行拍摄。在实施例中，标签相机可以布置在物品的前部、后部和侧面，这种标签相机的布置方式可以读取识别到物品五个面上的标签。外观图像相机布置在物品的顶部、斜前方和斜后方，其中斜前方和斜后方的外观图像相机处于对角位置，这种外观图像相机的布置方式可以采集到物品五个面的外观图像。
信息处理装置440基于所述透射图像确定所述一个或多个物品是否属于感兴趣物品，基于所述标签图像得到所述一个或多个物品的标签信息，基于所述外观图像提取所述一个或多个物品的外部特征，并且将所述一个或多个物品中被确定为感兴趣物品的物品的标签信息和外部特征相关联存储在所述感兴趣物品库中。存储设备450可以用于存储该感兴趣物品库。
当行李到达检测区域的指定位置时，标签相机420再次获取物品的标签图像，外观图像相机430再次获取物品的外观图像。信息处理装置440基于获得的标签图像，获得标签信息，并且基于获得外观图像，获得外部特征。信息处理装置440将物品的标签信息和外部特征与感兴趣物品库中的被确定为感兴趣物品的标签信息和外部特征进行比对。从而确定该物品是否为感兴趣物品。如果确定为感兴趣物品，则发出警报，以提醒工作人员对该物品进行开箱检查。
本公开实施例的物品安全检查系统将标签识别和外观图像识别相融合，在降低了使用实物标签引起的人力成本的同时，有效地提高了外观高度相似物品的检出率。
应注意，以上方法中各个步骤的序号仅作为该步骤的表示以便描述，而不应被看作表示该各个步骤的执行顺序。除非明确指出，否则该方法不需要完全按照所示顺序来执行。
以上的详细描述通过使用示意图、流程图和/或示例，已经阐述了物品的安全检查方法和系统的众多实施例。在这种示意图、流程图和/或示例包含一个或多个功能和/或操作的情况下，本领域技术人员应理解，这种示意图、流程图或示例中的每一功能和/或操作可以通过各种结构、硬件、软件、固件或实质上它们的任意组合来单独和/或共同实现。在一个实施例中，本公开的实施例所述主题的若干部分可以通过专用集成电路(ASIC)、现场可编程门阵列(FPGA)、数字信号处理器(DSP)、或其他集成格式来实现。然而，本领域技术人员应认识到，这里所公开的实施例的一些方面在整体上或部分地可以等同地实现在集成电路中，实现为在一台或多台计算机上运行的一个或多个计算机程序(例如，实现为在一台或多台计算机系统上运行的一个或多个程序)，实现为在一个或多个处理器上运行的一个或多个程序(例如，实现为在一个或多个微处理器上运行的一个或多个程序)，实现为固件，或者实质上实现为上述方式的任意组合，并且本领域技术人员根据本公开，将具备设计电路和/或写入软件和/或固件代码的能力。此外，本领域技术人员将认识到，本公开所述主题的机制能够作为多种形式的程序产品进行分发，并且无论实际用来执行分发的信号承载介质的具体类型如何，本公开所述主题的示例性实施例均适用。信号承载介质的示例包括但不限于：可记录型介质，如软盘、硬盘驱动器、紧致盘(CD)、数字通用盘(DVD)、数字磁带、计算机存储器等；以及传输型介质，如数字和/或模拟通信介质(例如，光纤光缆、波导、有线通信链路、无线通信链路等)。
虽然已参照几个典型实施例描述了本公开，但应当理解，所用的术语是说明和示例性、而非限制性的术语。由于本公开能够以多种形式具体实施而不脱离公开的精神或实质，所以应当理解，上述实施例不限于任何前述的细节，而应在随附权利要求所限定的精神和范围内广泛地解释，因此落入权利要求或其等效范围内的全部变化和改型都应为随附权利要求所涵盖。

Claims (15)

1.一种物品的安全检查方法，包括：
获取所述物品的标签图像，并基于所述标签图像得到所述物品的标签信息；
获取所述物品的外观图像，并基于所述外观图像提取所述物品的外部特征；以及
利用所述标签信息和所述外部特征二者从感兴趣物品库中确定所述物品是否属于感兴趣物品，
其中，所述获取所述物品的外观图像包括：
在获取所述物品的标签图像的同时连续获取所述物品的多个外观图像；
计算所述多个外观图像中的每个外观图像的光源相关指数；以及
从所述外观图像中选择光源相关指数最小的外观图像作为所述物品的外观图像，并且
其中，所述光源相关指数用于指示所述外观图像受频闪光补光的影响程度。
2.如权利要求1所述的安全检查方法，还包括：
获取一个或多个物品的透射图像，并基于所述透射图像确定所述一个或多个物品是否属于感兴趣物品；
获取所述一个或多个物品的标签图像，并基于所述标签图像得到所述一个或多个物品的标签信息；
获取所述一个或多个物品的外观图像，并基于所述外观图像提取所述一个或多个物品的外部特征；以及
将所述一个或多个物品中被确定为感兴趣物品的物品的标签信息和外部特征相关联存储在所述感兴趣物品库中。
3.如权利要求1所述的安全检查方法，其中，所述计算所述多个外观图像中的每个外观图像的光源相关指数包括：
获取在获取所述标签图像时所用的补光光源的光学特性；以及
计算每个外观图像中具有所述补光光源的光学特性的像素数目与总像素数目的比值，作为该外观图像的光源相关指数。
4.如权利要求1所述的安全检查方法，其中所述标签图像包括一维码图像和二维码图像中的至少一个以及文本图像。
5.如权利要求1所述的安全检查方法，其中，所述标签信息包括条码信息和文本信息。
6.如权利要求5所述的安全检查方法，其中，所述条码信息包括：所述物品所属人的个人信息、航班/车次信息、物品提取岛信息、出发地信息、中转地信息以及目的信息中的至少一个。
7.如权利要求5所述的安全检查方法，其中，所述文本信息包括机场代码和值机柜台信息。
8.如权利要求1所述的安全检查方法，其中，所述物品的图像特征包括：物品的形状、物品的尺寸、物品的颜色、物品的纹理或物品的材料中的至少一个。
9.如权利要求1所述的安全检查方法，还包括：在确定所述物品属于感兴趣物品时发出警报。
10.一种物品的安全检查系统，包括：
标签相机，获取所述物品的标签图像；
外观图像相机，获取所述物品的外观图像；以及
信息处理装置，基于所述标签图像得到所述物品的标签信息，基于所述外观图像提取所述物品的外部特征，并且利用所述标签信息和所述外部特征二者从感兴趣物品库中确定所述物品是否属于感兴趣物品，
其中，所述外观图像相机在所述标签相机获取所述物品的标签图像的同时连续获取所述物品的多个外观图像，
所述信息处理装置计算所述多个外观图像中的每个外观图像的光源相关指数，并且从所述外观图像中选择光源相关指数最小的外观图像作为所述物品的外观图像，并且
其中，所述光源相关指数用于指示所述外观图像受频闪光补光的影响程度。
11.如权利要求10所述的安全检查系统，还包括：辐射成像装置，获取一个或多个物品的透射图像，
其中，所述标签相机还获取所述一个或多个物品的标签图像，所述外观图像相机还获取所述一个或多个物品的外观图像，以及
其中，所述信息处理装置基于所述透射图像确定所述一个或多个物品是否属于感兴趣物品，基于所述标签图像得到所述一个或多个物品的标签信息，基于所述外观图像提取所述一个或多个物品的外部特征，并且将所述一个或多个物品中被确定为感兴趣物品的物品的标签信息和外部特征相关联存储在所述感兴趣物品库中。
12.如权利要求10所述的安全检查系统，其中，所述信息处理装置获取在获取所述标签图像时所用的补光光源的光学特性，并且计算每个外观图像中具有所述补光光源的光学特性的像素数目与总像素数目的比值，作为该外观图像的光源相关指数。
13.如权利要求10所述的安全检查系统，其中所述信息处理装置在确定所述物品属于感兴趣物品时发出警报。
14.如权利要求10所述的安全检查系统，其中所述标签相机包括一个或多个标签相机，所述一个或多个标签相机被布置在所述物品的前方、后方和侧方。
15.如权利要求10所述的安全检查系统，其中所述外观图像相机包括一个或多个外观图像相机，所述一个或多个外观图像相机被布置在所述物品的上方、斜前方和斜后方。
CN202010583786.XA 2020-06-23 2020-06-23 物品的安全检查方法和系统 Active CN113916911B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010583786.XA CN113916911B (zh) 2020-06-23 2020-06-23 物品的安全检查方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010583786.XA CN113916911B (zh) 2020-06-23 2020-06-23 物品的安全检查方法和系统

Publications (2)

Publication Number Publication Date
CN113916911A CN113916911A (zh) 2022-01-11
CN113916911B true CN113916911B (zh) 2023-03-24

Family

ID=79231206

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010583786.XA Active CN113916911B (zh) 2020-06-23 2020-06-23 物品的安全检查方法和系统

Country Status (1)

Country Link
CN (1) CN113916911B (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110660222A (zh) * 2019-11-01 2020-01-07 河北工业大学 一种智能环保道路黑烟车辆电子抓拍系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3658326B2 (ja) * 2001-01-19 2005-06-08 日立エンジニアリング株式会社 液体充填容器内の異物検査装置及びその方法
ES2446546T3 (es) * 2009-12-10 2014-03-10 Emhart Glass S.A. Método y sistema para la monitorización de un proceso de formación de recipientes de vidrio
CN107037493B (zh) * 2016-12-16 2019-03-12 同方威视技术股份有限公司 安全检查系统和方法
CN107862239A (zh) * 2017-09-15 2018-03-30 广州唯品会研究院有限公司 一种结合文本与图片进行图片识别的方法及其装置
CN110493531B (zh) * 2018-12-12 2021-12-03 杭州海康威视数字技术股份有限公司 一种图像处理方法和系统
CN109977876A (zh) * 2019-03-28 2019-07-05 腾讯科技（深圳）有限公司 图像识别方法、装置、计算设备、系统和存储介质
CN110749934A (zh) * 2019-10-15 2020-02-04 北京中盾安民分析技术有限公司 一种旅检智能通道自动匹配远程集中判读系统及方法
CN110554062A (zh) * 2019-10-15 2019-12-10 实源科技(广州)有限公司 快递邮品违禁品检测装置及检测方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110660222A (zh) * 2019-11-01 2020-01-07 河北工业大学 一种智能环保道路黑烟车辆电子抓拍系统

Also Published As

Publication number Publication date
CN113916911A (zh) 2022-01-11

Similar Documents

Publication Publication Date Title
JP6728242B2 (ja) セキュリティ検査システムおよび方法
US20230186509A1 (en) Article identification and tracking
US8570377B2 (en) System and method for recognizing a unit load device (ULD) number marked on an air cargo unit
CA3016217C (en) Method for making a description of a piece of luggage and luggage description system
US8849447B2 (en) Method and system for controlling production of items
CN111612020B (zh) 一种异常被检物的定位方法以及安检分析设备、系统
CN106952402A (zh) 一种数据处理方法及装置
US7938323B2 (en) Method and apparatus for monitoring the transportation of a luggage item
EP3005231B1 (en) Method and device for counting objects in image data in frames, computer program product
EP3786836B1 (en) Article identification and tracking
CN102246186A (zh) 物品识别方法和系统
KR101998018B1 (ko) 복수 개의 물품에 대해 보안 검사를 진행하는 방법 및 시스템
WO2018103486A1 (zh) 安检物品定位的标签和安检物品定位的方法
CN112712093A (zh) 安检图像识别方法、装置、电子设备及存储介质
CN115497169A (zh) 一种仓库作业行为识别方法、装置及设备
CN113916911B (zh) 物品的安全检查方法和系统
JP6908690B2 (ja) 物体を検査するためのシステム及び方法。
CN108921574A (zh) 基于区块链的产品防伪和生产流通追溯系统
KR102154427B1 (ko) 위탁 수하물 처리 방법 및 위탁 수하물 처리 시스템
CN205844544U (zh) 物品跟踪系统
AU2020202039B2 (en) Baggage identification kit
KR102608256B1 (ko) 공항만 금지 수화물 식별 자동 밴딩시스템
CN212862731U (zh) 货物识别装置
Vidhya et al. A Hybrid Deep Learning Model for Fire Detection and Trigger Alert
Haida Visual object recognition system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant