CN114624263B - 一种双源双视角基于目标识别的切图方法及系统 - Google Patents

一种双源双视角基于目标识别的切图方法及系统 Download PDF

Info

Publication number
CN114624263B
CN114624263B CN202210288943.3A CN202210288943A CN114624263B CN 114624263 B CN114624263 B CN 114624263B CN 202210288943 A CN202210288943 A CN 202210288943A CN 114624263 B CN114624263 B CN 114624263B
Authority
CN
China
Prior art keywords
ray
time point
view
frame
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210288943.3A
Other languages
English (en)
Other versions
CN114624263A (zh
Inventor
严军
姜旭
连天友
张利
李阳
胡靖�
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Zhiyuanhui Information Technology Co Ltd
Original Assignee
Chengdu Zhiyuanhui Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Zhiyuanhui Information Technology Co Ltd filed Critical Chengdu Zhiyuanhui Information Technology Co Ltd
Priority to CN202210288943.3A priority Critical patent/CN114624263B/zh
Publication of CN114624263A publication Critical patent/CN114624263A/zh
Application granted granted Critical
Publication of CN114624263B publication Critical patent/CN114624263B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/04Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and forming images of the material
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00Investigating materials by wave or particle radiation
    • G01N2223/40Imaging
    • G01N2223/401Imaging image processing
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00Investigating materials by wave or particle radiation
    • G01N2223/60Specific applications or type of materials
    • G01N2223/652Specific applications or type of materials impurities, foreign matter, trace amounts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Analysing Materials By The Use Of Radiation (AREA)

Abstract

本发明公开了一种双源双视角基于目标识别的切图方法及系统,具体包括以下步骤:S1、获取所述双视角安检机扫描的包裹第一视角X光图像和第二视角X光图像;S2、从所述第一视角X光图像中提取一帧待识别X光图片并输入目标识别模型,获得所述待识别X光图片中包裹的位置;S3、获取所述待识别X光图片对应的获取时间点t1,从所述第二视角数据库中提取一帧包含所述同一包裹的关联X光图片;S4、基于所述包裹的位置,进行剪切处理得到同一包裹的第一视角图片与第二视角图片。本发明通过关联处理,获得该同一包裹的关联X光图片,用以解决现有双源双视角X光机进行双视角包裹关联时运算复杂、效率低下的问题。

Description

一种双源双视角基于目标识别的切图方法及系统
技术领域
本发明涉及智慧安检技术领域,具体涉及一种双源双视角基于目标识别的切图方法及系统。
背景技术
而采用双源双视角设备借助另一视角图像可以准确识别,危险品无以遁形;对于一些具有明确目标物的检查,如照相机,手机,爆炸装置等,双视角可以准确判断物体外观判图准确,无需复检,极大提高通过流量;但在现有技术中对于同一包裹在各个视角中剪切处理形成的图像,如何找到彼此的关联关系成为最大的难点。现有技术中采用将包裹进行编号,对于同一包裹,不同视角的包裹将使用同一编号。此编号随包裹图像在各个步骤中传递,最终根据包裹编号保证后台每次处理的一组图像来自于同一包裹,然后这种技术需要对两种视角的图像均进行目标识别处理,从而增加了系统运算量的同时,降低了系统性能以及关联效率,而且现有从俯视角和侧视角对相同位置的包裹进行X光成像,经过深度学习模型识别出的违禁物信息彼此没有关联,呈现给安检人员的标注信息都是离散的,若从两个视角识别的违禁品是同一分类,违禁物在两个视角的图像可能都不标注出来,更有可能造成信息混乱。
发明内容
本发明的目的在于提供一种双源双视角基于目标识别的切图方法及系统,将接收到的第一视角X光图像每隔N帧提取一帧待识别X光图片并输入目标识别模型,获得所述待识别X光图片中包裹的位置,将第二视角X光图像每预设时长Δ存入第二视角数据库,根据待识别图片获取校正时间差Δt0,获得该同一包裹的关联X光图片,用以解决现有双源双视角X光机进行双视角包裹关联时运算复杂、效率低下的问题。
一种双源双视角基于目标识别的切图方法,具体包括以下步骤:
S1、获取所述双视角安检机扫描的包裹第一视角X光图像和第二视角X光图像,所述第一视角与第二视角相互正交;
S2、从所述第一视角X光图像中提取一帧待识别X光图片并输入目标识别模型,获得所述待识别X光图片中包裹的位置;
S3、获取所述待识别X光图片对应的获取时间点t1,从所述第二视角数据库中提取一帧包含所述同一包裹的关联X光图片,所述第二视角数据库用于存储第二视角X光图像;
S4、基于所述包裹的位置,从所述X光图片与关联X光图片中分别进行剪切处理得到同一包裹的第一视角图片与第二视角图片。
进一步地,所述步骤S3具体包括以下步骤:
获取所述一帧待识别X光图片及其对应的获取时间点t1,并将所述输入目标识别模型,获得X光图片中包裹位置;
获得校正时间差Δt0;
基于所述校正时间差Δt0以及获取时间点t1,计算关联时间点t2;
根据所述关联时间点t2,从所述第二视角数据库中提取所述关联时间点t2对应的一帧X光图片,确定为包含所述同一包裹的关联X光图片。
进一步地,在初始化后,第一次接收所述第一视角X光图像和第二视角X光图像时,计算所述校正时间差Δt0,通过以下步骤得到:
获取所述第一视角X光图像的首帧X光图片的获取时间点t0;
获取所述第二视角X光图像的首帧X光图片的获取时间点t0′;
所述校正时间差Δt0为接收第一视角X光图像的时刻t0与接收第二视角X光图像的时刻t0′的差值。
进一步地,将第二视角X光图像的每预设时长Δ存入第二视角数据库,并记录每一次存储时的存储序号及对应的存储时间点、每帧X光图片的获取时间,所述关联X光图片,通过以下步骤得到:
基于所述校正时间差Δt0以及获取时间点t1,获得第二视角数据库定位时间点t2′,其中t2′=t1-Δt0;
根据所述第二视角数据库定位时间点t2′,在所有存储时间点中,计算与所述第二视角数据库定位时间点t2′距离最接近的一个时间点,确定为关联存储时间点t2‘’;
根据所述第二视角数据库定位时间点t2′与关联存储时间点t2‘’之间的大小确定包含所述同一包裹的关联X光图片的存储序号;
根据所述存储序号对应的一次存储中计算与所述第二视角数据库定位时间点t2′最接近的一个X光图片的获取时间,确定为关联时间点t2;
从所述存储序号对应的一次存储中提取所述关联时间点t2对应的一帧X光图片,确定为包含所述同一包裹的关联X光图片。
进一步地,所述同一包裹的关联X光图片的存储序号,由以下步骤得到:
判断所述第二视角数据库定位时间点t2′与关联存储时间点t2‘’之间的大小:
在所述第二视角数据库定位时间点t2′小于等于关联存储时间点t2‘’时,确定所述关联存储时间点t2‘’对应的存储序号的存储中存在包含所述同一包裹的关联X光图片;
在所述第二视角数据库定位时间点t2′>关联存储时间点t2‘’时,计算关联存储时间点τ=t2‘’+Δ,确定所述关联存储时间点τ对应的存储序号的存储中存在包含所述同一包裹的关联X光图片。
进一步地,依次获取第二视角X光图像的每一帧X光图片并存入第二视角数据库,并记录每一帧X光图片的获取时间,所述关联X光图片,通过以下步骤得到:
基于所述校正时间差Δt0以及获取时间点t1,获得第二视角数据库定位时间点t2′,其中t2′=t1-Δt0;
根据所述第二视角数据库定位时间点t2′,遍历所有X光图片的获取时间,获取与所述第二视角数据库定位时间点t2′最接近的一个X光图片的获取时间,确定为关联时间点t2;
根据所述关联时间点t2,从所述第二视角数据库中提取所述关联时间点t2对应的一帧X光图片,确定为包含所述同一包裹的关联X光图片。
进一步地,所述一帧待识别X光图片由每间隔预设数量的帧图片从所述第一视角X光图像中提取一帧X光图片,将所述一帧X光图片确定为待识别X光图片。
一种双源双视角基于目标识别的切图系统,包括:
一个或多个处理器;
存储单元,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,能使得所述一个或多个处理器实现所述的一种双源双视角基于目标识别的切图方法,所述一个或多个程序包括:
接收模块,用于获取所述双视角安检机扫描的包裹第一视角X光图像和第二视角X光图像,所述第一视角与第二视角相互正交;
识别模块,用于从所述第一视角X光图像中提取一帧待识别X光图片并输入目标识别模型,获得所述待识别X光图片中包裹的位置;
关联模块,用于获取所述待识别X光图片对应的获取时间点t1,从所述第二视角数据库中提取一帧包含所述同一包裹的关联X光图片,所述第二视角数据库用于存储第二视角X光图像;
切图模块,用于基于所述包裹的位置,从所述X光图片与关联X光图片中分别进行剪切处理得到同一包裹的第一视角图片与第二视角图片。
本发明具有的有益效果:
1、双源双视角X光机通过对接收到的双视角X光图像进行不同的处理,对其中一种视角的X光图像进行目标识别处理,以获得待识别包裹的位置信息,对其中另外一种视角的X光图像进行存储处理,以存储时间点、存储序号以及每帧X光图片的获取时间,根据待识别包裹的位置信息以及该视角的获取时间,确定另外一种视角的包含所述同一包裹的关联X光图片,减少对双视角的X光图像分别进行目标识别处理量,从而提高系统性能,降低运算量;
2、对其中另外一种视角的X光图像进行存储处理时,采取将第二视角X光图像每预设时长Δ存入第二视角数据库,每进行一次存储,获得对应的存储时间点、存储序号以及每帧X光图片的获取时间,同时,获取第一视角X光图像中的待识别图片的获取时间,以及校正时间差Δt0,计算第二视角数据库定位时间点t2',在所有存储时间点中,计算与所述第二视角数据库定位时间点t2'距离最接近的一个存储时间点,确定为关联存储时间点t2”,根据所述第二视角数据库定位时间点t2'与关联存储时间点t2”之间的大小确定关联时间点t2以及存储序号,从所述存储序号对应的一次存储中提取所述关联时间点t2对应的一帧X光图片,确定为包含所述同一包裹的关联X光图片,避免遍历第二视角数据库中所有X光图片的获取时间的获取时间,从而进一步降低系统运算量;
3、由于两套相同或不同的探测装置同时安装在安检机上,由于安装位置、射线源等的限制因素,常常会导致这两套探测装置扫描出来的X光图像可能不是同步产生的,因此,为了避免先出来的X光图像先出来,而后出来的X光图像后出来,从而出现图像不对应性,进而造成安检人员视觉的不适性,以及危险物品判断失误的概率,因此,根据两套探测装置的位置关系拟合出两个X光图像的校正时间差Δt0。从而保证即使两套X光图像不能同时产生,亦可以同时且同步播放,方便安检工作人员进行安检过程的操作以及顺利进行。
附图说明
图1为本发明的切图方法示意图;
图2为本发明的切图系统示意图;
图3为本发明的同一包裹的关联X光图片获取流程示意图;
图4为本发明的剪切处理流程示意图;
图5为本发明的X,Y是双源双视角示意图;
图6为本发明的主视角帧图片与侧视角帧图片示意图;
具体实施方式
下面结合实施例及附图,对本发明作进一步的详细说明,但本发明的实施方式不限于此。
在本发明的描述中,需要说明的是,术语“中心”、“上”、“下”、“左”、“右”、“竖向”、“纵向”、“侧向”、“水平”、“内”、“外”、“前”、“后”、“顶”、“底”等指示的方位或位置关系为基于附图所示的方位或位置关系,或者是该发明产品使用时惯常摆放的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
在本发明的描述中,还需要说明的是,除非另有明确的规定和限定,术语“设置”、“开有”、“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
实施例1
一种双源双视角基于目标识别的切图方法,具体包括以下步骤:
S1、获取所述双视角安检机扫描的包裹第一视角X光图像和第二视角X光图像,所述第一视角与第二视角相互正交;
S2、从所述第一视角X光图像中提取一帧待识别X光图片并输入目标识别模型,获得所述待识别X光图片中包裹的位置;
S3、获取所述待识别X光图片对应的获取时间点t1,从所述第二视角数据库中提取一帧包含所述同一包裹的关联X光图片,所述第二视角数据库用于存储第二视角X光图像;
S4、基于所述包裹的位置,从所述X光图片与关联X光图片中分别进行剪切处理得到同一包裹的第一视角图片与第二视角图片。
包裹层面的视角间协同。过去只是在显示数据上进行了视角之间的对齐,但是现在还需要考虑在包裹层面上进行视角间“对齐”。首先在包裹剪切处理时,两个视角的分包结果要基本一致、互相对应;其次在执行探测时,有些功能需要同一包裹的多个视角的图像协同使用,才能进行探测,典型如液体探测功能。
在本实施例中,通过多套探测装置采集到行李的不同角度的多个X光图像并进行显示,从而避免出现探测装置漏检过包行李中的物品特别是危险物品(如小的危险物品因其旁边的大物品的遮挡而不能被检出,或因为行李放置在探测装置的辐射死角而漏检等),且安检工作人员通过对同一危险物品的不同角度的视图可以快速的判断出该危险物品的结构,因而更加容易对该危险物品进行定位和识别,进而及时采取相关的有效措施,提高了安检的工作效率。更优的是,由于是多套探测装置,因此这些个探测装置的安装面之间的角度关系按预设值进行设置,从而尽量避免出现安检死角的出现。本安检系统实用性强,符合我国国情,具有良好的市场前景。
在本实施例中,处理器和安检机连接,从而实现处理器启闭安检机或安检机启闭处理器,从而实现本系统的全自动化和智能化。
在本实施例中,所述第一视角为俯视角,第二视角为侧视角;所述两个视角由2组X射线源和探测器组成,每组X射线源和探测器组成一个视角的成像系统,所述的两个视角为围绕X光安检机输送通道设置的第一视角、第二视角;所述第一视角包括第一X射线源和第一探测器;所述第二视角包括第二X射线源和第二探测器;所述第一X射线源位于输送通道正上方,所述第二X射线源位于输送通道一个侧面。
所述步骤S3具体包括以下步骤:
获取所述一帧待识别X光图片及其对应的获取时间点t1,并将所述输入目标识别模型,获得X光图片中包裹位置;
获得校正时间差Δt0;
基于所述校正时间差Δt0以及获取时间点t1,计算关联时间点t2;
根据所述关联时间点t2,从所述第二视角数据库中提取所述关联时间点t2对应的一帧X光图片,确定为包含所述同一包裹的关联X光图片。
具体的,在初始化后,第一次接收所述第一视角X光图像和第二视角X光图像时,计算所述校正时间差Δt0,通过以下步骤得到:
获取所述第一视角X光图像的首帧X光图片的获取时间点t0;
获取所述第二视角X光图像的首帧X光图片的获取时间点t0′;
所述校正时间差Δt0为接收第一视角X光图像的时刻t0与接收第二视角X光图像的时刻t0′的差值。
具体的,将第二视角X光图像的每预设时长Δ存入第二视角数据库,并记录每一次存储时的存储序号及对应的存储时间点、每帧X光图片的获取时间,所述关联X光图片,通过以下步骤得到:
基于所述校正时间差Δt0以及获取时间点t1,获得第二视角数据库定位时间点t2′,其中t2′=t1-Δt0;
根据所述第二视角数据库定位时间点t2′,在所有存储时间点中,计算与所述第二视角数据库定位时间点t2′距离最接近的一个时间点,确定为关联存储时间点t2‘’;
根据所述第二视角数据库定位时间点t2′与关联存储时间点t2‘’之间的大小确定包含所述同一包裹的关联X光图片的存储序号;
根据所述存储序号对应的一次存储中计算与所述第二视角数据库定位时间点t2′最接近的一个X光图片的获取时间,确定为关联时间点t2;
从所述存储序号对应的一次存储中提取所述关联时间点t2对应的一帧X光图片,确定为包含所述同一包裹的关联X光图片。
具体的,所述包含所述同一包裹的关联X光图片的存储序号,由以下步骤得到:
判断所述第二视角数据库定位时间点t2′与关联存储时间点t2‘’之间的大小:
在所述第二视角数据库定位时间点t2′小于等于关联存储时间点t2‘’时,确定所述关联存储时间点t2‘’对应的存储序号的存储中存在包含所述同一包裹的关联X光图片;
在所述第二视角数据库定位时间点t2′>关联存储时间点t2‘’时,计算关联存储时间点τ=t2‘’+Δ,确定所述关联存储时间点τ对应的存储序号的存储中存在包含所述同一包裹的关联X光图片。
在一种实施例中,依次获取第二视角X光图像的每一帧X光图片并存入第二视角数据库,并记录每一帧X光图片的获取时间,所述关联X光图片,通过以下步骤得到:
基于所述校正时间差Δt0以及获取时间点t1,获得第二视角数据库定位时间点t2′,其中t2′=t1-Δt0;
根据所述第二视角数据库定位时间点t2′,遍历所有X光图片的获取时间,获取与所述第二视角数据库定位时间点t2′最接近的一个X光图片的获取时间,确定为关联时间点t2;
根据所述关联时间点t2,从所述第二视角数据库中提取所述关联时间点t2对应的一帧X光图片,确定为包含所述同一包裹的关联X光图片。
所述一帧待识别X光图片由每间隔预设数量的帧图片从所述第一视角X光图像中提取一帧X光图片,将所述一帧X光图片确定为待识别X光图片。
在一种具体的实现方式中,沿着X光机传送带运动的方向,取两个与运动方向垂直的两个视角,且两个视角是正交的。如图5所示,Z方向为传送带运动的方向,X,Y方向与Z方向垂直,X,Y是双源双视角的两个视角,其中X方向和Y方向是垂直的。
X方向和Y方向中选定一个为主视角,另外一个则为侧视角。这里选定X方向是主视角,Y方向为侧视角。
在系统初始化时,通过对主视角和侧视角的图像进行校正获得校正时间差Δt0,获取主视角和侧视角提供的视频帧,主视角和侧视角视频帧中包裹的长是相同的,即w0=w1。记主视角和俯视角校正时的校正时间差Δt0:获取所述第一视角X光图像的首帧X光图片的获取时间点t0;获取所述第二视角X光图像的首帧X光图片的获取时间点t0',则Δt0=t0-t0′;
本领域技术人员可以理解的是,由于两套探测装置扫描出来的X光图像可能不是同步产生的,因此需要确定系统分别接收两套探测装置扫描出来的X光图像,以进行相同包裹的两个视角的X光图像之间的关联。因此如何获得两套探测装置之间的时间差是解决关联问题的关键点。本申请还可以采用以下步骤:
获取大量的双视角安检机扫描的包裹第一视角X光图像和第二视角X光图像,确定为实验数据,所述第一视角与第二视角相互正交;
将所述第一视角X光图像输入至目标识别模型,获取包裹的便签、包裹的宽度Wi以及获取时间Ti;
将所述第二视角X光图像输入至目标识别模型,获取包裹的便签、包裹的宽度Wj以及获取时间Tj;
确定需要关联的目标包裹的宽度W1及获取时间T1,根据所述宽度W1,遍历所有第二视角X光图像的包裹的宽度Wj,找出所有与宽度W1相等的第二视角X光图像的包裹,再进行获取时间的比对,根据获取时间T1,遍历所有与宽度W1相等的第二视角X光图像的包裹的获取时间,找到与所述获取时间T1最接近的一个获取时间,确定获取时间对应的帧视频图片为该目标包裹关联的第二视角X帧视频图片。
找出所有实验数据的第一视角X光图像和第二视角X光图像的同一包裹的双视角关联图片,计算关联图片之间获取时间的差值tti,将所有差值tti求平均值处理,获得校正时间差Δt0
主视角和侧视角校正后,每隔△t则缓存一次视频帧图片,记为qi={△ti,Ii},i表示第i次缓存,i=1,2,3…n,△ti表示缓存图片时相对于校准时间t0的时间差,记缓存时候的时间为ti',△ti=ti'-t0'=△t*i,Ii表示第i次缓存的图片。
切图系统对主视图的某一视频帧采用目标识别的方式,识别出包裹的位置,视频帧的时间为t1,包裹PG0在主视图中的左上顶点P0(x0,y0),右下顶点(x1,y1)。计算主视角该视频的时间相对于校正时间差Δt0的差值△t2=t1-Δt0,然后找出步骤五中min(△t2-ti')的侧视角图片Ii。
因为主视角和侧视角的视频帧具有相同的长度,所以通过左上顶点P0’=(h0,y0)和右下顶点P1’=(h1,y1)可从侧视图中切出包裹图片PG1。
通过以上步骤则切出了双源双视角的两个视角的包裹图片PG0和PG1。
实施例2
一种双源双视角基于目标识别的切图系统,包括:
一个或多个处理器;
存储单元,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,能使得所述一个或多个处理器实现所述的一种双源双视角基于目标识别的切图方法,所述一个或多个程序包括:
接收模块,用于获取所述双视角安检机扫描的包裹第一视角X光图像和第二视角X光图像,所述第一视角与第二视角相互正交;
识别模块,用于从所述第一视角X光图像中提取一帧待识别X光图片并输入目标识别模型,获得所述待识别X光图片中包裹的位置;
关联模块,用于获取所述待识别X光图片对应的获取时间点t1,从所述第二视角数据库中提取一帧包含所述同一包裹的关联X光图片,所述第二视角数据库用于存储第二视角X光图像;
切图模块,用于基于所述包裹的位置,从所述X光图片与关联X光图片中分别进行剪切处理得到同一包裹的第一视角图片与第二视角图片。
实施例3,一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时能实现所述的双源双视角基于目标识别的方法及系统。
以上所述,仅是本发明的较佳实施例而已,并非对本发明作任何形式上的限制,依据本发明的技术实质,在本发明的精神和原则之内,对以上实施例所作的任何简单的修改、等同替换与改进等,均仍属于本发明技术方案的保护范围之内。

Claims (6)

1.一种双源双视角基于目标识别的切图方法,其特征在于,具体包括以下步骤:
S1、获取双视角安检机扫描的包裹第一视角X光图像和第二视角X光图像,所述第一视角与第二视角相互正交;
S2、从所述第一视角X光图像中提取一帧待识别X光图片并输入目标识别模型,获得所述待识别X光图片中包裹的位置;
S3、获取所述待识别X光图片对应的获取时间点t1,从第二视角数据库中提取一帧包含同一包裹的关联X光图片,所述第二视角数据库用于存储第二视角X光图像;
所述步骤S3具体包括以下步骤:
获取所述一帧待识别X光图片及其对应的获取时间点t1,并将所述输入目标识别模型,获得X光图片中包裹位置;
获得校正时间差Δt0;
在初始化后,第一次接收所述第一视角X光图像和第二视角X光图像时,计算所述校正时间差Δt0,通过以下步骤得到:
获取所述第一视角X光图像的首帧X光图片的获取时间点t0;
获取所述第二视角X光图像的首帧X光图片的获取时间点t0′;
所述校正时间差Δt0为接收第一视角X光图像的时刻t0与接收第二视角X光图像的时刻t0′的差值;
基于所述校正时间差Δt0以及获取时间点t1,计算关联时间点t2;
根据所述关联时间点t2,从所述第二视角数据库中提取所述关联时间点t2对应的一帧X光图片,确定为包含所述同一包裹的关联X光图片,
S4、基于所述包裹的位置,从所述X光图片与关联X光图片中分别进行剪切处理得到同一包裹的第一视角图片与第二视角图片。
2.根据权利要求1所述的一种双源双视角基于目标识别的切图方法,其特征在于,将第二视角X光图像的每预设时长Δ存入第二视角数据库,并记录每一次存储时的存储序号及对应的存储时间点、每帧X光图片的获取时间,所述关联X光图片,通过以下步骤得到:
基于所述校正时间差Δt0以及获取时间点t1,获得第二视角数据库定位时间点t2′,其中t2′=t1-Δt0;
根据所述第二视角数据库定位时间点t2′,在所有存储时间点中,计算与所述第二视角数据库定位时间点t2′距离最接近的一个时间点,确定为关联存储时间点t2″;
根据所述第二视角数据库定位时间点t2′与关联存储时间点t2″之间的大小确定包含所述同一包裹的关联X光图片的存储序号;
根据所述存储序号对应的一次存储中计算与所述第二视角数据库定位时间点t2′最接近的一个X光图片的获取时间,确定为关联时间点t2;
从所述存储序号对应的一次存储中提取所述关联时间点t2对应的一帧X光图片,确定为包含所述同一包裹的关联X光图片。
3.根据权利要求2所述的一种双源双视角基于目标识别的切图方法,其特征在于,所述同一包裹的关联X光图片的存储序号,由以下步骤得到:
判断所述第二视角数据库定位时间点t2′与关联存储时间点t2″之间的大小:
在所述第二视角数据库定位时间点t2′小于等于关联存储时间点t2″时,确定所述关联存储时间点t2″对应的存储序号的存储中存在包含所述同一包裹的关联X光图片;
在所述第二视角数据库定位时间点t2′>关联存储时间点t2″时,计算关联存储时间点τ=t2″+Δ,确定所述关联存储时间点τ对应的存储序号的存储中存在包含所述同一包裹的关联X光图片。
4.根据权利要求1所述的一种双源双视角基于目标识别的切图方法,其特征在于,依次获取第二视角X光图像的每一帧X光图片并存入第二视角数据库,并记录每一帧X光图片的获取时间,所述关联X光图片,通过以下步骤得到:
基于所述校正时间差Δt0以及获取时间点t1,获得第二视角数据库定位时间点t2′,其中t2′=t1-Δt0;
根据所述第二视角数据库定位时间点t2′,遍历所有X光图片的获取时间,获取与所述第二视角数据库定位时间点t2′最接近的一个X光图片的获取时间,确定为关联时间点t2;
根据所述关联时间点t2,从所述第二视角数据库中提取所述关联时间点t2对应的一帧X光图片,确定为包含所述同一包裹的关联X光图片。
5.根据权利要求1所述的一种双源双视角基于目标识别的切图方法,其特征在于,所述一帧待识别X光图片由每间隔预设数量的帧图片从所述第一视角X光图像中提取一帧X光图片,将所述一帧X光图片确定为待识别X光图片。
6.一种双源双视角基于目标识别的切图系统,其特征在于,包括:
一个或多个处理器;
存储单元,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,能使得所述一个或多个处理器实现根据权利要求1至5中任意一项所述的一种双源双视角基于目标识别的切图方法,所述一个或多个程序包括:
接收模块,用于获取双视角安检机扫描的包裹第一视角X光图像和第二视角X光图像,所述第一视角与第二视角相互正交;
识别模块,用于从所述第一视角X光图像中提取一帧待识别X光图片并输入目标识别模型,获得所述待识别X光图片中包裹的位置;
关联模块,用于获取所述待识别X光图片对应的获取时间点t1,从第二视角数据库中提取一帧包含所述同一包裹的关联X光图片,所述第二视角数据库用于存储第二视角X光图像;
切图模块,用于基于所述包裹的位置,从所述X光图片与关联X光图片中分别进行剪切处理得到同一包裹的第一视角图片与第二视角图片。
CN202210288943.3A 2022-03-23 2022-03-23 一种双源双视角基于目标识别的切图方法及系统 Active CN114624263B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210288943.3A CN114624263B (zh) 2022-03-23 2022-03-23 一种双源双视角基于目标识别的切图方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210288943.3A CN114624263B (zh) 2022-03-23 2022-03-23 一种双源双视角基于目标识别的切图方法及系统

Publications (2)

Publication Number Publication Date
CN114624263A CN114624263A (zh) 2022-06-14
CN114624263B true CN114624263B (zh) 2023-05-02

Family

ID=81903730

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210288943.3A Active CN114624263B (zh) 2022-03-23 2022-03-23 一种双源双视角基于目标识别的切图方法及系统

Country Status (1)

Country Link
CN (1) CN114624263B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115494556B (zh) * 2022-08-18 2023-09-12 成都智元汇信息技术股份有限公司 一种基于段落法模糊匹配的包包关联方法
CN115423996B (zh) * 2022-08-18 2023-09-22 成都智元汇信息技术股份有限公司 基于包裹运动提取包裹图片的方法、电子设备以及介质
CN115471560B (zh) * 2022-11-11 2023-02-14 成都智元汇信息技术股份有限公司 一种基于主视角和侧视角的切图方法及装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4228222B2 (ja) * 2004-04-15 2009-02-25 株式会社島津製作所 X線ct装置
JP2012085069A (ja) * 2010-10-08 2012-04-26 Canon Inc 画像処理装置及びその制御方法
CN107202808A (zh) * 2017-06-14 2017-09-26 上海英曼尼安全装备有限公司 一种双源双视角安检方法及其系统
CN111290040A (zh) * 2020-03-12 2020-06-16 安徽启新明智科技有限公司 一种基于图像识别的主动式双视角关联的方法
CN113744264A (zh) * 2021-09-26 2021-12-03 上海联影医疗科技股份有限公司 一种图像处理方法和系统

Also Published As

Publication number Publication date
CN114624263A (zh) 2022-06-14

Similar Documents

Publication Publication Date Title
CN114624263B (zh) 一种双源双视角基于目标识别的切图方法及系统
US10424060B2 (en) Method for estimating blood component quantities in surgical textiles
CN114660097B (zh) 一种基于双源双视角的同步校正方法及系统
CN112949577B (zh) 信息关联方法、装置、服务器及存储介质
WO2018228410A1 (zh) 一种目标对象抓拍方法、装置及视频监控设备
US9836635B2 (en) Systems and methods for tracking optical codes
CN103471512B (zh) 一种基于机器视觉的玻璃板宽检测系统
US7574045B2 (en) Model-based recognition of objects using a calibrated image system
US11475800B2 (en) Method of displaying price tag information, apparatus, and shelf system
US20090080706A1 (en) Machine imaging apparatus and method for detecting foreign materials
US20210225476A1 (en) Image acquisition for medical dose preparation system
CA2640884A1 (en) Methods and systems for use in security screening, with parallel processing capability
US9733200B2 (en) Defect judging device, radiography system, and defect judging method
CN103942773B (zh) 一种通过图像分析获取排队长度的方法及装置
CN114155473B (zh) 基于帧补偿的切图方法、电子设备及介质
CN107710280A (zh) 对象可视化方法
CN109596631B (zh) 一种基于机器视觉技术的烟包封签错牌检测装置及方法
CN112037204A (zh) 一种基于大数据分析的药品安全智能检测管理系统
CN112149658A (zh) 目标物尺寸确定方法、系统、电子设备及存储介质
CN108401115A (zh) 一种便携图像采集终端的自动修正采集装置及方法
CN107820041B (zh) 隐私遮挡方法及装置
CN107403444A (zh) 识别系统
CN112001963A (zh) 消防通道的排查的方法、系统和计算机设备
CN114861846A (zh) 扫码采集方法以及装置、存储介质、电子装置
CN115471560B (zh) 一种基于主视角和侧视角的切图方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant