CN113643360A - 目标物体定位方法、装置、设备、介质和程序产品 - Google Patents

目标物体定位方法、装置、设备、介质和程序产品 Download PDF

Info

Publication number
CN113643360A
CN113643360A CN202010395321.1A CN202010395321A CN113643360A CN 113643360 A CN113643360 A CN 113643360A CN 202010395321 A CN202010395321 A CN 202010395321A CN 113643360 A CN113643360 A CN 113643360A
Authority
CN
China
Prior art keywords
envelope region
volume data
dimensional volume
dimensional
envelope
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010395321.1A
Other languages
English (en)
Inventor
张丽
唐虎
孙运达
王朔
李新斌
金鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Nuctech Co Ltd
Original Assignee
Tsinghua University
Nuctech Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University, Nuctech Co Ltd filed Critical Tsinghua University
Priority to CN202010395321.1A priority Critical patent/CN113643360A/zh
Priority to EP21803947.7A priority patent/EP4152254A1/en
Priority to PCT/CN2021/102460 priority patent/WO2021228281A1/zh
Publication of CN113643360A publication Critical patent/CN113643360A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10081Computed x-ray tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30112Baggage; Luggage; Suitcase

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Quality & Reliability (AREA)
  • Analysing Materials By The Use Of Radiation (AREA)
  • Image Analysis (AREA)

Abstract

本公开提供了一种目标物体定位方法,包括:获取被检查行李的第一三维体数据。基于第一三维体数据,生成被检查行李在任一方向上的投影图像。基于该投影图像,从第一三维体数据中分割出第二三维体数据,并基于第二三维体数据,确定针对被检查行李中的至少一个物体的至少一个包络区域。然后,从所确定的至少一个包络区域中确定目标物体的包络区域。本公开还提供了一种目标物体定位装置、设备、介质和程序产品。

Description

目标物体定位方法、装置、设备、介质和程序产品
技术领域
本公开的实施例涉及辐射成像,具体涉及一种目标物体定位方法、装置、设备、介质和程序产品。
背景技术
在对被检查行李进行安全检查时,需要确定被检查行李中是否存在目标物体,并在被检查行李中存在目标物体时对目标物体进行定位。通常情况下,被检查行李中物体之间的相互遮挡会给目标物体的识别和定位带来诸多障碍,导致花费较长时间,用户的操作过程也较为繁琐。
发明内容
根据本公开实施例,提出了一种目标物体定位方法、装置、设备、介质和程序产品。
在本公开的一个方面,提出了一种目标物体定位方法,包括:获取被检查行李的第一三维体数据。基于第一三维体数据,生成被检查行李在任一方向上的投影图像。基于该投影图像,从第一三维体数据中分割出第二三维体数据,并基于第二三维体数据,确定针对被检查行李中的至少一个物体的至少一个包络区域。然后,从所确定的至少一个包络区域中确定目标物体的包络区域。
根据本公开实施例,上述基于投影图像,从第一三维体数据中分割出第二三维体数据包括:在该投影图像中形成二维有效区域。将该二维有效区域沿上述任一方向延伸,以形成以该二维有效区域为横截面的柱状三维区域。将针对该柱状三维区域的三维体数据作为第二三维体数据。
根据本公开实施例,上述在投影图像中形成二维有效区域包括:获取预定形状的尺寸参数,并且,基于针对投影图像中指定点的第一触发操作,生成以该指定点为中心、且符合尺寸参数的预定形状的二维有效区域。
根据本公开实施例,上述获取预定形状的尺寸参数包括:获取配置表中预先配置的预定形状的尺寸参数。
根据本公开实施例,上述获取预定形状的尺寸参数包括:根据投影图像的尺寸参数,确定预定形状的尺寸参数,以使预定形状的尺寸参数与投影图像的尺寸参数成预定比例。
根据本公开实施例,上述基于第二三维体数据,确定针对被检查行李中的至少一个物体的至少一个包络区域包括:利用图像识别算法,从第二三维体数据中分割出符合预定图像特征的至少一组三维体数据。然后,根据上述至少一组三维体数据,确定至少一个包络区域。
根据本公开实施例,上述从至少一个包络区域中确定目标物体的包络区域包括:计算至少一个包络区域各自的优先级。按照所计算的优先级从高至低的顺序,依次展示上述至少一个包络区域。并且,基于针对上述至少一个包络区域中的任一包络区域的第二触发操作,确定该任一包络区域为目标物体的包络区域。
根据本公开实施例,上述计算至少一个包络区域各自的优先级包括:针对上述至少一个包络区域中的每个包络区域,获取该包络区域的属性参数。根据该包络区域的属性参数,计算该包络区域的优先级。
根据本公开实施例,上述获取该包络区域的属性参数包括如下至少一项:根据该包络区域的三维体数据,计算该包络区域的体积;根据该包络区域的三维体数据,计算该包络区域的密度;以及,根据该包络区域的三维体数据,计算该包络区域在上述投影图像中的位置坐标。
根据本公开实施例,上述按照优先级从高至低的顺序,依次展示上述至少一个包络区域包括:按照优先级从高至低的顺序,对上述至少一个包络区域进行排序,以得到展示序列。从展示序列中的第一个包络区域开始展示。在展示该展示序列中的任一包络区域的图像时,基于针对该任一包络区域的第三触发操作,切换展示在展示序列中的该任一包络区域的在后包络区域,并且,基于针对该任一包络区域的第四触发操作,切换展示在展示序列中的第一个包络区域。
根据本公开实施例,上述方法还包括:在确定任一包络区域为目标物体的包络区域之后,对该任一包络区域添加标签,并且,将该任一包络区域的三维体数据和标签相关联地添加存储至预定存储区域。
根据本公开实施例,上述获取被检查行李的第一三维体数据包括:利用计算机断层扫描成像设备获取被检查行李的第一三维体数据。
在本公开的另一个方面,提出了一种目标物体定位装置,包括:获取模块、投影模块、分割模块、确定模块和定位模块。其中,获取模块用于获取被检查行李的第一三维体数据。投影模块用于基于第一三维体数据,生成被检查行李在任一方向上的投影图像。分割模块用于基于该投影图像,从第一三维体数据中分割出第二三维体数据。确定模块用于基于第二三维体数据,确定针对被检查行李中的至少一个物体的至少一个包络区域。定位模块用于从所确定的至少一个包络区域中确定目标物体的包络区域。
在本公开的另一个方面,提出了一种电子设备,包括存储器和至少一个处理器。存储器用于存储指令。至少一个处理器执行存储在存储器中的指令,以实现如上任一实施例所述的方法。
在本公开的另一个方面,提出了一种计算机可读存储介质,其上存储有计算机指令,该计算机指令被处理器执行时实现如上任一实施例所述的方法。
在本公开的另一个方面,提出了一种计算机程序产品,包括可执行指令,该指令被处理器执行时实现如上任一实施例所述的方法。
利用本公开上述实施例的方案,基于被检查行李的第一三维体数据,可以仅在任意一个方向上进行投影,并依据投影图像从被检查行李的第一三维体数据中分割出部分区域的第二三维体数据,大幅度缩小了目标物体的定位范围。并且,基于第二三维体数据确定被检查行李所包含的至少一个物体各自的包络区域,以从该至少一个包络无区域中确定目标物体的包络区域。上述过程无需多次转换视角进行目标物体所在区域的拾取,也无需考虑上述任意一个方向上是否有其它物体对目标物体发生遮挡。此外,定位范围的缩小简化了目标物体的定位过程,提高了目标物体定位的效率和准确率。
附图说明
为了更好地理解本公开实施例,将根据以下附图对本公开实施例进行详细描述:
图1示意性示出了根据本公开实施例的目标物体定位方法和装置的应用场景;
图2示意性示出了根据本公开实施例的目标物体定位方法的流程图;
图3示意性示出了根据本公开另一实施例的目标物体定位方法的示例流程图;
图4A示意性示出了根据本公开实施例的二维有效区域的示例图;
图4B示意性示出了根据本公开实施例的柱状三维区域的示例图;
图5示意性示出了根据本公开另一实施例的目标物体定位方法的示例流程图;
图6示意性示出了根据本公开实施例的目标物体定位装置的框图;以及
图7示意性示出了根据本公开实施例的电子设备的框图。
具体实施方式
下面将详细描述本公开实的具体实施例,应当注意,这里描述的实施例只用于举例说明,并不用于限制本公开实施例。在以下描述中,为了提供对本公开实施例的透彻理解,阐述了大量特定细节。然而,对于本领域普通技术人员显而易见的是:不必采用这些特定细节来实行本公开实施例。在其他实例中,为了避免混淆本公开实施例,未具体描述公知的结构、材料或方法。
在整个说明书中,对“一个实施例”、“实施例”、“一个示例”或“示例”的提及意味着:结合该实施例或示例描述的特定特征、结构或特性被包含在本公开至少一个实施例中。因此,在整个说明书的各个地方出现的短语“在一个实施例中”、“在实施例中”、“一个示例”或“示例”不一定都指同一实施例或示例。此外,可以以任何适当的组合和/或子组合将特定的特征、结构或特性组合在一个或多个实施例或示例中。此外,本领域普通技术人员应当理解,这里使用的术语“和/或”包括一个或多个相关列出的项目的任何和所有组合。
本公开的实施例提出了一种目标物体定位方法、装置、设备、介质和程序产品。其中,目标物体定位方法可以包括获取过程、投影过程、分割过程、确定过程和定位过程。在获取过程,获取被检查行李的第一三维体数据。然后进行投影过程,基于第一三维体数据,生成被检查行李在任一方向上的投影图像。在分割过程,基于该投影图像,从第一三维体数据中分割出第二三维体数据。在确定过程,基于第二三维体数据,确定针对被检查行李中的至少一个物体的至少一个包络区域。然后进行定位过程,从所确定的至少一个包络区域中确定目标物体的包络区域。
图1示意性示出了根据本公开实施例的目标物体定位方法和装置的应用场景。需要注意的是,图1所示仅为可以应用本公开实施例的场景的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,该应用场景示例性地展示了电子设备100的结构示意图。本例中该电子设备100为CT(Computed Tomography,计算机断层扫描成像)设备,在其他例子中,该电子设备100可以为单能X射线检测设备、双能X射线检测设备等,在此不做限制。根据本公开的实施例,CT设备100可以包括X射线源10、机械运动装置50、探测器和数据采集系统20、以及控制和数据处理装置60。CT设备100用于对被检查对象40进行CT扫描和数据处理,例如对被检查行李进行CT扫描和数据处理,以对被检查行李中的目标物体(例如危险物品、违规物品等)进行识别和定位。
X射线源10例如可以为X光机,可以根据成像的分辨率选择合适的X光机焦点尺寸。在其他实施例中也可以不使用X光机,而是使用直线加速器等产生X射线束。
机械运动装置50包括载物台和机架以及控制系统等。载物台可平移以调整旋转中心的位置,机架可平移以使X射线源(X光机)10、探测器和旋转中心三者对准。本实施例中按照旋转载物台、固定机架的圆周扫描轨迹或者螺旋轨迹进行描述。由于载物台与机架的运动属于相对运动,也可采用载物台静止、机架旋转的方式实现本实施例的方法。
探测器及数据采集系统20包括X射线探测器和数据采集电路等。X射线探测器可以使用固体探测器,也可以使用气体探测器或者其他探测器,本公开的实施例不限于此。数据采集电路包括读出电路、采集触发电路及数据传输电路等。
控制和数据处理装置60例如包括安装有控制程序和数据处理程序的计算机设备,负责完成CT设备运行过程的控制,包括机械平移、机械转动、电气控制、安全联锁控制等,还可以对采集到的数据进行处理等。
需要说明的是,本公开实施例所提供的目标物体定位方法一般可以由控制和数据处理装置60执行。相应地,本公开实施例所提供的目标物体定位装置可以设置于控制和数据处理装置60中。或者,本公开实施例所提供的目标物体定位方法也可以由不同于控制和数据处理装置60且能够与控制和数据处理装置60通信的服务器或服务器集群执行。相应地,本公开实施例所提供的目标物体定位装置也可以设置于不同于控制和数据处理装置60且能够与控制和数据处理装置60通信的服务器或服务器集群中。
基于以上应用场景,在对被检查行李进行安全检查时,需要确定被检查行李中是否存在目标物体,并在被检查行李中存在目标物体时对目标物体进行定位。一种处理方式下,通过光线投射等体绘制方法来剔除被检查行李的三维体数据中的透明区域,在不同光线的透射范围内对目标物体所在的区域进行多次多视角的选取,最终获得紧密包络嫌疑物的包围盒,以便剔除周围其他区域的影响。考虑到被检查行李中物体通常相互交叠放置,在任意视角的深度方向上可能交叠存在多个物体,导致感兴趣的目标物体所在的区域可能被遮挡。在定位过程中可能误选取与目标物体相交叠的其他物体所在的区域,从而给目标物体所在区域的正确拾取带来更多障碍。为了正确定位目标物体,可能需要较多次数的视角调整,从而花费较长时间,用户的操作过程也较为繁琐,导致无法实现准确、高效的定位过程。
根据本公开实施例,提供了一种目标物体定位方法,能够降低被检查行李中物体相互遮挡对目标物体定位所带来的影响,简化用户操作过程,提高目标物体定位的效率和准确率。下面通过图例对该方法进行示例性说明。应注意,以下方法中各个操作的序号仅作为该操作的表示以便描述,而不应被看作表示该各个操作的执行顺序。除非明确指出,否则该方法不需要完全按照所示顺序来执行。
图2示意性示出了根据本公开实施例的目标物体定位方法的流程图。
如图2所示,该方法可以包括以下操作S210~S250。
在操作S210,获取被检查行李的第一三维体数据。
其中,三维体数据可以是一个三维均匀分布的数据集合,即由三维网格组成的结构化数据集合。被检查行李的第一三维体数据可以通过多种检测方式获得,例如上文提到的计算机断层扫描成像技术、X射线检测技术等,在此不做限制。
在操作S220,基于第一三维体数据,生成被检查行李在任一方向上的投影图像。
其中,上述“任一方向”可以是任意一个方向,在方向选取时可以没有任何限制。示例性地,投影图像可以为DR(Digital Radiography,数字X射线摄影)图像。
在操作S230,基于该投影图像,从第一三维体数据中分割出第二三维体数据。
在操作S240,基于第二三维体数据,确定针对被检查行李中的至少一个物体的至少一个包络区域。
在操作S250,从所确定的至少一个包络区域中确定目标物体的包络区域。
本领域技术人员可以理解,根据本公开实施例的目标物体定位方法基于被检查行李的第一三维体数据,可以仅在任意一个方向上进行投影,并依据投影图像从被检查行李的第一三维体数据中分割出部分区域的第二三维体数据,从而缩小了目标物体的定位范围。并且,基于第二三维体数据确定被检查行李所包含的至少一个物体各自的包络区域,以从该至少一个包络区域中确定目标物体的包络区域。上述过程无需多次转换视角进行目标物体所在区域的拾取,也无需考虑上述任意一个方向上是否有其它物体对目标物体发生遮挡。此外,定位范围的缩小简化了目标物体的定位过程,提高了目标物体定位的效率和准确率。
图3示意性示出了根据本公开另一实施例的目标物体定位方法的示例流程图,用于说明上述操作S230的一种示例性实施过程。
如图3所示,上述基于投影图像,从第一三维体数据中分割出第二三维体数据的过程可以包括操作S231~S232。
在操作S231,在上述投影图像中形成二维有效区域。
示例性地,根据本公开实施例,上述在投影图像中形成二维有效区域的过程可以包括:获取预定形状的尺寸参数。基于针对上述投影图像中指定点的第一触发操作,生成以该指定点为中心、且符合尺寸参数的预定形状的二维有效区域。
图4A示意性示出了根据本公开实施例的二维有效区域的示例图。如图4A所示,例如第一触发操作可以是点击操作。在生成被检查行李在任一方向(例如第一方向)的投影图像400后,对该投影图像400进行展示。可以理解,图4所示的例子中第一方向垂直于纸面。当用户认为该投影图像的某个区域疑似为目标物体时,可以点击该区域中的任一点作为指定点。响应于用户针对该投影图像400上的指定点A的点击操作,生成以该指定点A为中心,且符合尺寸参数的预定形状的二维有效区域401。本例中,预定形状可以为圆形,预定形状的尺寸参数为圆形的半径。在其他例子中,预定形状可以是任意形状,例如矩形、三角形、椭圆形等,相应地,预定形状的尺寸参数可以包括:矩形的长和宽、三角形的边长、椭圆形的长轴和短轴等,在此不做限制。
在本公开的另一实施例中,上述在投影图像中形成二维有效区域的过程也可以包括:基于用户在投影图像中绘制封闭轨迹的操作,在投影图像中形成以该封闭轨迹为边界的二维有效区域。
根据本公开实施例,上述获取预定形状的尺寸参数的过程可以采用预先配置的尺寸参数,也可以根据实际探测数据计算得到。示例性地,一种情况下,可以从电子设备存储的配置表中获取预先配置的预定形状的尺寸参数。例如,配置表中记录有如下信息:预定形状为圆形,半径为x个像素,x为正整数;或者,预定形状为矩形,长为y个像素,宽为z个像素,y和z均为正整数;等等。另一种情况下,可以根据投影图像的尺寸参数,确定预定形状的尺寸参数,以使预定形状的尺寸参数与投影图像的尺寸参数成预定比例。例如,被检查行李在第一方向上的投影图像的尺寸为1024×1024像素。设置圆形的半径与投影图像的边长之间的预定比例为1/10,估算出圆形的半径为102个像素。或者设置矩形的边长与投影图像的边长之间的预定比例为1/10,估算出矩形的长和宽均为102个像素。或者,也可以设置预定比例表征预定形状的面积与投影图像的面积之间的比例,根据该预定比例和投影面积的面积来计算出预定形状的面积,进而再计算得到预定形状的尺寸参数。
继续参考图3,在操作S232,将该二维有效区域沿上述任一方向延伸,以形成以该二维有效区域为横截面的柱状三维区域,将针对该柱状三维区域的三维体数据作为第二三维体数据。
其中,二维有效区域的延伸方向与上述被检查行李的投影图像的投影方向(沿用上文中的例子为第一方向)一致,也可称为投影图像的深度方向。
图4B示意性示出了根据本公开实施例的柱状三维区域的示例图。如图4B左侧所示,在形成二维有效区域401后,将该二维有效区域401沿第一方向延伸,以形成以该二维有效区域401为横截面的柱状三维区域402。由于本例中二维有效区域401为圆形,所形成的柱状三维区域402为圆柱。在其他例子中,如果二维有效区域401为矩形,则所形成的柱状三维区域402为四棱柱。基于其他预定形状的二维有效区域所形成的柱状三维区域与此同理,在此不再赘述。在被检查行李的第一三维体数据中,针对该柱状三维区域402的三维体数据可以作为从第一三维体数据中分割出来的第二三维体数据。
由于上述二维有效区域是依据用户针对投影图像的第一触发操作形成的,表示目标物体的实际位置应该在该二维有效区域的深度方向上。因此,将二维有效区域在深度方向延伸,所形成的柱状三维区域可以包含目标物体所在的区域,在缩小定位范围的同时不会误将目标物体所在的区域删除。针对该柱状三维区域的第二三维体数据用于确定被检查行李中至少一个物体的包络区域,对此,下文将详细说明。
图5示意性示出了根据本公开另一实施例的目标物体定位方法的示例流程图,用于举例说明目标物体定位方法的一种实施过程,不对本公开造成限制。
如图5所示,目标物体定位方法可以包括操作S501~S514。
在操作S501,载入(load)被检查行李的三维体数据。
其中,被检查行李的三维体数据可称为第一三维体数据,以与分割出的第二三维体数据相区分。在获取到第一三维体数据后,可以将该第一三维体数据载入执行上述目标定位方法的程序产品中。
在操作S502,生成被检查行李在任意一个方向(例如第一方向)上的投影图像。
在操作S503,基于用户针对投影图像上指定点的第一触发操作,形成以该指定点为中心的二维有效区域。
根据本公开的实施例,形成二维有效区域的实施方式在上文中已举例说明,在此不再赘述。
在操作S504,基于二维有效区域,形成柱状三维区域。
根据本公开的实施例,形成柱状三维区域的实施方式在上文中已举例说明,在此不再赘述。
在操作S505,从第一三维体数据中分割出针对柱状三维区域的第二三维体数据。
在操作S506,基于第二三维体数据,确定针对被检查行李中的至少一个物体的至少一个包络区域。
根据本公开的实施例,由于第二三维体数据是从被检查行李的第一三维体数据中分割出的、对应于上述柱状三维区域的三维体数据。因此本操作S506根据第二三维体数据的具体分布情况所确定的至少一个物体是指被检查行李中的、且沿第一方向的投影图像位于上述柱状三维区域中的至少一个物体。
示例性地,上述基于第二三维体数据,确定针对被检查行李中的至少一个物体的至少一个包络区域的过程可以包括:利用图像识别算法,从第二三维体数据中分割出符合预定图像特征的至少一组三维体数据。然后,根据上述至少一组三维体数据,确定至少一个包络区域。该过程中,由于物体所对应的三维体数据与背景所对应的三维体数据的特征存在差异,可以利用各种图像识别算法来识别并分割出各个物体的包络区域,本公开不对图像识别算法进行限制。例如可以通过光线透射体绘制方法将第二三维体数据中的背景区域筛除,保留并分割出各个物体的包络区域。
如图4B所示,例如,根据左侧的柱状三维区域所对应的第二三维体数据,可以分割出右侧示出的:物体1的包络区域、物体2的包络区域、……、物体N的包络区域。其中N为大于2的整数。
继续参阅图5,在操作S507,将所确定的至少一个包络区域按照预定规则进行排序,以得到展示序列。
根据本公开实施例,上述预定规则例如可以是按照优先级从高至低的顺序进行排序。示例性地,上述计算至少一个包络区域各自的优先级的过程可以包括:针对上述至少一个包络区域中的每个包络区域,获取该包络区域的属性参数。然后根据该包络区域的属性参数,计算该包络区域的优先级。
例如,上述获取该包络区域的属性参数可以包括如下至少一项:根据该包络区域的三维体数据,计算该包络区域的体积;根据该包络区域的三维体数据,计算该包络区域的密度,例如根据该包络区域的像素值分布计算该包络区域的密度;以及,根据该包络区域的三维体数据,计算该包络区域在上述投影图像中的位置坐标。其中,包络区域的体积可以反映所包络的物体的大小和形状,包络区域的密度可以反映所包络的物体的密度,进而反映物体的材料。根据包络区域在上述投影图像中的位置坐标可以计算出包络区域所包络的物体的质心与指定点在投影图像上的距离。以上一种或多种属性参数可以表征包络区域所针对的物体的属性特征。在此基础上,上述针对任意一个包络区域,根据该包络区域的属性参数,计算该包络区域的优先级的过程可以包括:以物体1的包络区域为例,将物体1的属性特征与所期望的目标物体的属性特征进行比对。如物体的属性特征可以通过向量形式表示,计算物体1的属性特征与所期望的目标物体之间的相似度,以表征二者之间的相似程度。例如,与目标物体的相似程度越高的物体,对该物体的包络区域设置更高的优先级。
继续参阅图5,在操作S508,从展示序列中的第一个包络区域开始,对上述展示序列中的包络区域依次进行展示。例如,展示序列中共有N个包络区域,展示该展示序列中的第i个包络区域。其中i为大于等于1且小于等于N的整数,i的初始值为1,在每次切换展示时i递增1,当i=N时,切换展示时重新展示第1个包络区域。
示例性地,在展示第i个包络区域时,可以展示该第i个包络区域在第二方向上的投影图像,第二方向可以与第一方向相同,也可以与第一方向不同,在此不做限制。在一个例子中,在展示第i个包络区域时,可以展示该包络区域在多个方向下的投影图像,以使用户能够更加快速准确地辨认该包络区域所针对的物体。
根据本公开的实施例,如果展示序列中的包络区域是按照优先级从高至低的顺序进行排列的,则上述对展示序列中的包络区域依次进行展示的过程是按照优先级从高至低的顺序依次展示包络区域的过程。在上述例子中,由于优先级越高表征包络区域所针对的物体越接近期望的目标物体,故这样的展示顺序可以使得用户可以快速从中确认出目标物体的包络区域。
继续参阅图5,在操作S509,确定是否接收到用户针对第i个包络区域的第二触发操作。如果是,则执行操作S512。如果否,则执行操作S510。
在操作S510,确定是否接收到用户针对第i个包络区域的第三触发操作。如果是,则进行切换展示,将i递增1后返回操作S508。如果否,则执行操作S511。
在操作S511,确定是否接收到用户针对第i个包络区域的第四触发操作。如果是,则进行重新展示,令i=1并返回操作S508。如果否,则直接返回操作S508,继续展示第i个包络区域。
在操作S512,确定第i个包络区域为目标物体的包络区域。
在操作S513,对第i个包络区域添加标签。
在操作S514,将该第i个包络区域的三维体数据和标签相关联地添加存储至预定存储区域。其中标签的内容例如可以是预定标识符或标识信息,以表明与该标签关联存储的三维体数据为目标物体的包络区域的三维体数据。
本操作S514将所确定的目标物体的三维体数据与标签相关联地进行存储,可以便于后续使用。例如后续该存储内容可以作为样本数据进行图像处理模型的训练等,在安全检查过程中逐渐积累各种目标物体的相关样本数据,从而能够训练出性能更为优良的图像处理模型。
根据本公开的实施例,上述第二触发操作、第三触发操作和第四触发操作可以根据需要进行预先设置。例如,在展示第i个包络区域时关联展示第一控件和第二控件,当用户点击第一控件时,确定针对第i个包络区域进行第一触发操作,当用户点击第二控件时,确定针对第i个包络区域进行第二触发操作。或者,针对第i个包络区域的单击操作为第一触发操作,针对第i个包络区域的双击操作为第二触发操作。又例如,在一个较短的预定时长内连续预定次数的点击,可以作为第四触发操作。
图6示意性示出了根据本公开实施例的目标物体定位装置的框图。
如图6所示,该目标物体定位装置600可以包括:获取模块610、投影模块620、分割模块630、确定模块640和定位模块650。
获取模块610用于获取被检查行李的第一三维体数据。
投影模块620用于基于第一三维体数据,生成被检查行李在任一方向上的投影图像。
分割模块630用于基于该投影图像,从第一三维体数据中分割出第二三维体数据。
确定模块640用于基于第二三维体数据,确定针对被检查行李中的至少一个物体的至少一个包络区域。
定位模块650用于从所确定的至少一个包络区域中确定目标物体的包络区域。
需要说明的是,装置部分实施例中各模块/单元/子单元等的实施方式、解决的技术问题、实现的功能、以及达到的技术效果分别与方法部分实施例中各对应的步骤的实施方式、解决的技术问题、实现的功能、以及达到的技术效果相同或类似,在此不再赘述。
图7示意性示出了根据本公开实施例的用于实现上文所描述的方法的电子设备的框图。图7示出的设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图7所示,根据本公开实施例的设备700包括处理器701,其可以根据存储在只读存储器(ROM)702中的程序或者从存储部分708加载到随机访问存储器(RAM)703中的程序而执行各种适当的动作和处理。处理器701例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器701还可以包括用于缓存用途的板载存储器。处理器701可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
在RAM 703中,存储有设备700操作所需的各种程序和数据。处理器701、ROM 702以及RAM 703通过总线704彼此相连。处理器701通过执行ROM 702和/或RAM 703中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意,所述程序也可以存储在除ROM 702和RAM 703以外的一个或多个存储器中。处理器701也可以通过执行存储在所述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。
根据本公开的实施例,设备700还可以包括输入/输出(I/O)接口705,输入/输出(I/O)接口705也连接至总线704。设备700还可以包括连接至I/O接口705的以下部件中的一项或多项:包括键盘、鼠标等的输入部分706;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分707;包括硬盘等的存储部分708;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分709。通信部分709经由诸如因特网的网络执行通信处理。驱动器710也根据需要连接至I/O接口705。可拆卸介质711,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器710上,以便于从其上读出的计算机程序根据需要被安装入存储部分708。
根据本公开的实施例,根据本公开实施例的方法流程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读存储介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分709从网络上被下载和安装,和/或从可拆卸介质711被安装。在该计算机程序被处理器701执行时,执行本公开实施例的系统中限定的上述功能。根据本公开的实施例,上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。
根据本公开的实施例,上文所述的电子设备可以用于实现根据本公开实施例的目标物体定位方法。
本公开还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现根据本公开实施例的方法。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。

Claims (16)

1.一种目标物体定位方法,包括:
获取被检查行李的第一三维体数据;
基于所述第一三维体数据,生成所述被检查行李在任一方向上的投影图像;
基于所述投影图像,从所述第一三维体数据中分割出第二三维体数据;
基于所述第二三维体数据,确定针对所述被检查行李中的至少一个物体的至少一个包络区域;以及
从所述至少一个包络区域中确定所述目标物体的包络区域。
2.根据权利要求1所述的方法,其中,所述基于所述投影图像,从所述第一三维体数据中分割出第二三维体数据包括:
在所述投影图像中形成二维有效区域;
将所述二维有效区域沿所述任一方向延伸,以形成以所述二维有效区域为横截面的柱状三维区域;以及
将针对所述柱状三维区域的三维体数据作为所述第二三维体数据。
3.根据权利要求2所述的方法,其中,所述在所述投影图像中形成二维有效区域包括:
获取预定形状的尺寸参数;以及
基于针对所述投影图像中指定点的第一触发操作,生成以所述指定点为中心、且符合所述尺寸参数的预定形状的二维有效区域。
4.根据权利要求3所述的方法,其中,所述获取预定形状的尺寸参数包括:
获取配置表中预先配置的预定形状的尺寸参数。
5.根据权利要求3所述的方法,其中,所述获取预定形状的尺寸参数包括:
根据所述投影图像的尺寸参数,确定所述预定形状的尺寸参数,以使所述预定形状的尺寸参数与所述投影图像的尺寸参数成预定比例。
6.根据权利要求1所述的方法,其中,所述基于所述第二三维体数据,确定针对所述被检查行李中的至少一个物体的至少一个包络区域包括:
利用图像识别算法,从所述第二三维体数据中分割出符合预定图像特征的至少一组三维体数据;以及
根据所述至少一组三维体数据,确定至少一个包络区域。
7.根据权利要求6所述的方法,其中,所述从所述至少一个包络区域中确定所述目标物体的包络区域包括:
计算所述至少一个包络区域各自的优先级;
按照所述优先级从高至低的顺序,依次展示所述至少一个包络区域;以及
基于针对所述至少一个包络区域中的任一包络区域的第二触发操作,确定所述任一包络区域为所述目标物体的包络区域。
8.根据权利要求7所述的方法,其中,所述计算所述至少一个包络区域各自的优先级包括:针对所述至少一个包络区域中的每个包络区域,
获取所述包络区域的属性参数;以及
根据所述属性参数,计算所述包络区域的优先级。
9.根据权利要求8所述的方法,其中,所述获取所述包络区域的属性参数包括如下至少一项:
根据所述包络区域的三维体数据,计算所述包络区域的体积;
根据所述包络区域的三维体数据,计算所述包络区域的密度;以及
根据所述包络区域的三维体数据,计算所述包络区域在所述投影图像中的位置坐标。
10.根据权利要求7所述的方法,其中,所述按照所述优先级从高至低的顺序,依次展示所述至少一个包络区域包括:
按照所述优先级从高至低的顺序,对所述至少一个包络区域进行排序,以得到展示序列;
从所述展示序列中的第一个包络区域开始展示;
在展示所述展示序列中的任一包络区域的图像时,
基于针对所述任一包络区域的第三触发操作,切换展示在所述展示序列中的所述任一包络区域的在后包络区域;以及
基于针对所述任一包络区域的第四触发操作,切换展示在所述展示序列中的第一个包络区域。
11.根据权利要求7所述的方法,还包括:在所述确定所述任一包络区域为所述目标物体的包络区域之后,
对所述任一包络区域添加标签;以及
将所述任一包络区域的三维体数据和所述标签相关联地添加存储至预定存储区域。
12.根据权利要求1所述的方法,其中,所述获取被检查行李的第一三维体数据包括:
利用计算机断层扫描成像设备获取所述被检查行李的第一三维体数据。
13.一种目标物体定位装置,包括:
获取模块,用于获取被检查行李的第一三维体数据;
投影模块,用于基于所述第一三维体数据,生成所述被检查行李在任一方向上的投影图像;
分割模块,用于基于所述投影图像,从所述第一三维体数据中分割出第二三维体数据;
确定模块,用于基于所述第二三维体数据,确定针对所述被检查行李中的至少一个物体的至少一个包络区域;以及
定位模块,用于从所述至少一个包络区域中确定所述目标物体的包络区域。
14.一种电子设备,包括:
存储器,用于存储指令;
至少一个处理器:
所述至少一个处理器执行存储在存储器中的指令,以实现根据权利要求1~12之一所述的方法。
15.一种计算机可读存储介质,其上存储有计算机指令,所述计算机指令被处理器执行时实现根据权利要求1~12之一所述的方法。
16.一种计算机程序产品,包括可执行指令,该指令被处理器执行时实现根据权利要求1~12之一所述的方法。
CN202010395321.1A 2020-05-11 2020-05-11 目标物体定位方法、装置、设备、介质和程序产品 Pending CN113643360A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202010395321.1A CN113643360A (zh) 2020-05-11 2020-05-11 目标物体定位方法、装置、设备、介质和程序产品
EP21803947.7A EP4152254A1 (en) 2020-05-11 2021-06-25 Target object positioning method and apparatus, device, medium, and program product
PCT/CN2021/102460 WO2021228281A1 (zh) 2020-05-11 2021-06-25 目标物体定位方法、装置、设备、介质和程序产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010395321.1A CN113643360A (zh) 2020-05-11 2020-05-11 目标物体定位方法、装置、设备、介质和程序产品

Publications (1)

Publication Number Publication Date
CN113643360A true CN113643360A (zh) 2021-11-12

Family

ID=78415594

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010395321.1A Pending CN113643360A (zh) 2020-05-11 2020-05-11 目标物体定位方法、装置、设备、介质和程序产品

Country Status (3)

Country Link
EP (1) EP4152254A1 (zh)
CN (1) CN113643360A (zh)
WO (1) WO2021228281A1 (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6088423A (en) * 1998-06-05 2000-07-11 Vivid Technologies, Inc. Multiview x-ray based system for detecting contraband such as in baggage
GB0303211D0 (en) * 2003-02-12 2003-03-19 Canon Europa Nv Image processing apparatus
WO2013008804A1 (ja) * 2011-07-11 2013-01-17 キヤノン株式会社 計測装置および情報処理装置
CN103903303A (zh) * 2012-12-27 2014-07-02 清华大学 三维模型创建方法和设备
CN103901489A (zh) * 2012-12-27 2014-07-02 清华大学 检查物体的方法、显示方法和设备
CN104715471A (zh) * 2014-01-03 2015-06-17 杭州海康威视数字技术股份有限公司 目标定位跟踪方法及其装置
WO2016095776A1 (zh) * 2014-12-18 2016-06-23 同方威视技术股份有限公司 一种定位三维ct图像中的目标的方法和安检ct系统
US10025887B1 (en) * 2017-02-22 2018-07-17 Stellar Vdc Residential, Llc Building model with virtual capture of as built features and objective performance tracking
CN109146801A (zh) * 2018-07-25 2019-01-04 深圳汇创联合自动化控制有限公司 创建被检查行李中物体的三维模型的设备
CN110660123A (zh) * 2018-06-29 2020-01-07 清华大学 基于神经网络的三维ct图像重建方法和设备以及存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1886257A1 (en) * 2005-05-11 2008-02-13 Optosecurity Inc. Method and system for screening luggage items, cargo containers or persons
CN101882319B (zh) * 2010-06-24 2011-11-30 西北工业大学 基于最小三维凸包的锥束ct快速重建方法
JP2012161460A (ja) * 2011-02-07 2012-08-30 Fujifilm Corp 画像処理装置および画像処理方法、並びに、画像処理プログラム
US10380727B2 (en) * 2016-05-06 2019-08-13 L-3 Communications Security & Detection Systems, Inc. Systems and methods for generating projection images
CN108459802B (zh) * 2018-02-28 2020-11-20 北京航星机器制造有限公司 一种触控显示终端交互方法和装置

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6088423A (en) * 1998-06-05 2000-07-11 Vivid Technologies, Inc. Multiview x-ray based system for detecting contraband such as in baggage
GB0303211D0 (en) * 2003-02-12 2003-03-19 Canon Europa Nv Image processing apparatus
US20040155877A1 (en) * 2003-02-12 2004-08-12 Canon Europa N.V. Image processing apparatus
WO2013008804A1 (ja) * 2011-07-11 2013-01-17 キヤノン株式会社 計測装置および情報処理装置
CN103903303A (zh) * 2012-12-27 2014-07-02 清华大学 三维模型创建方法和设备
CN103901489A (zh) * 2012-12-27 2014-07-02 清华大学 检查物体的方法、显示方法和设备
CN104715471A (zh) * 2014-01-03 2015-06-17 杭州海康威视数字技术股份有限公司 目标定位跟踪方法及其装置
WO2016095776A1 (zh) * 2014-12-18 2016-06-23 同方威视技术股份有限公司 一种定位三维ct图像中的目标的方法和安检ct系统
US10025887B1 (en) * 2017-02-22 2018-07-17 Stellar Vdc Residential, Llc Building model with virtual capture of as built features and objective performance tracking
CN110660123A (zh) * 2018-06-29 2020-01-07 清华大学 基于神经网络的三维ct图像重建方法和设备以及存储介质
CN109146801A (zh) * 2018-07-25 2019-01-04 深圳汇创联合自动化控制有限公司 创建被检查行李中物体的三维模型的设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张惠, PASCAL HAIGRON, 舒华忠, 罗立民: "X射线图像和CT图像的多维配准", 电子学报, no. 10, 25 October 2002 (2002-10-25) *

Also Published As

Publication number Publication date
WO2021228281A1 (zh) 2021-11-18
EP4152254A1 (en) 2023-03-22

Similar Documents

Publication Publication Date Title
RU2599277C1 (ru) Система кт для досмотра и соответствующий способ
US6359960B1 (en) Method for identifying and locating markers in a 3D volume data set
JP6635648B2 (ja) 医用画像処理装置、医用画像処理方法及び分類器トレーニング方法
US9576356B2 (en) Region clustering forest for analyzing medical imaging data
US10319119B2 (en) Methods and systems for accelerated reading of a 3D medical volume
US20120194425A1 (en) Interactive selection of a region of interest in an image
NL8500884A (nl) Werkwijze en inrichting voor het lokaliseren van een punt in een driedimensionaal lichaam gebruikmakend van afbeeldingen van het lichaam genomen uit een aantal hoekposities.
JP2015520846A (ja) Ct密度画像とスパースマルチエネルギーデータを用いてボクセルセットのz−有効値を決定する方法およびシステム{determinationofz−effectivevalueforsetofvoxelsusingctdensityimageandsparsemulti−energydata}
CN102132322B (zh) 用于确定对象的尺寸改变的设备
US11928818B2 (en) Out-of-view CT scan detection
US10083527B2 (en) Multi-structure atlas and/or use thereof
EP4026102B1 (en) Confidence map for neural network based limited angle artifact reduction in cone beam ct
JP5122650B2 (ja) 経路近傍レンダリング
EP4152261A1 (en) Target region positioning method and apparatus, device, medium, and program product
CN113643360A (zh) 目标物体定位方法、装置、设备、介质和程序产品
CN108876783B (zh) 图像融合方法及系统、医疗设备和图像融合终端
US6690762B1 (en) N-dimensional data encoding of projected or reflected data
CN111325077B (zh) 一种图像显示方法、装置、设备及计算机存储介质
US20230401699A1 (en) Detection of spine vertebrae in image data
US20100266204A1 (en) Method and system for threat image projection
WO2024017742A1 (en) Efficient rib plane visualization via auto augmentation
US20220245886A1 (en) Techniques for generating synthetic three-dimensional representations of threats disposed within a volume of a bag
Li et al. A novel method of micro-tomography geometric angle calibration with random phantom
Lee et al. Fast and accurate marker-based projective registration method for uncalibrated transmission electron microscope tilt series
CN117475058A (zh) 一种图像处理方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination