CN111694065A - 移动体 - Google Patents
移动体 Download PDFInfo
- Publication number
- CN111694065A CN111694065A CN202010173090.XA CN202010173090A CN111694065A CN 111694065 A CN111694065 A CN 111694065A CN 202010173090 A CN202010173090 A CN 202010173090A CN 111694065 A CN111694065 A CN 111694065A
- Authority
- CN
- China
- Prior art keywords
- inspection object
- imaging system
- camera
- aisle
- body according
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007689 inspection Methods 0.000 claims abstract description 266
- 238000003384 imaging method Methods 0.000 claims abstract description 178
- 238000012545 processing Methods 0.000 claims description 68
- 238000005286 illumination Methods 0.000 claims description 62
- 230000003287 optical effect Effects 0.000 claims description 6
- 230000004888 barrier function Effects 0.000 description 31
- 238000010586 diagram Methods 0.000 description 30
- 238000005192 partition Methods 0.000 description 26
- 239000000126 substance Substances 0.000 description 25
- 238000012544 monitoring process Methods 0.000 description 23
- 238000000034 method Methods 0.000 description 21
- 239000013256 coordination polymer Substances 0.000 description 16
- 238000001514 detection method Methods 0.000 description 12
- 239000002184 metal Substances 0.000 description 12
- 239000000383 hazardous chemical Substances 0.000 description 11
- 238000013473 artificial intelligence Methods 0.000 description 10
- 239000011347 resin Substances 0.000 description 10
- 229920005989 resin Polymers 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 238000012805 post-processing Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 238000007781 pre-processing Methods 0.000 description 7
- 230000001678 irradiating effect Effects 0.000 description 6
- 238000010801 machine learning Methods 0.000 description 6
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 239000000463 material Substances 0.000 description 5
- 238000010521 absorption reaction Methods 0.000 description 4
- 239000000919 ceramic Substances 0.000 description 4
- 239000002360 explosive Substances 0.000 description 4
- 238000010183 spectrum analysis Methods 0.000 description 4
- XTFIVUDBNACUBN-UHFFFAOYSA-N 1,3,5-trinitro-1,3,5-triazinane Chemical compound [O-][N+](=O)N1CN([N+]([O-])=O)CN([N+]([O-])=O)C1 XTFIVUDBNACUBN-UHFFFAOYSA-N 0.000 description 3
- 238000009825 accumulation Methods 0.000 description 3
- 239000000470 constituent Substances 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000002265 prevention Effects 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 238000002835 absorbance Methods 0.000 description 2
- 238000000862 absorption spectrum Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 239000011248 coating agent Substances 0.000 description 2
- 238000000576 coating method Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 239000004744 fabric Substances 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 231100001261 hazardous Toxicity 0.000 description 2
- 239000002117 illicit drug Substances 0.000 description 2
- 239000010985 leather Substances 0.000 description 2
- 239000004081 narcotic agent Substances 0.000 description 2
- 230000003746 surface roughness Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 229920001577 copolymer Polymers 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 229920001903 high density polyethylene Polymers 0.000 description 1
- 239000004700 high-density polyethylene Substances 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 230000004297 night vision Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000013441 quality evaluation Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000391 smoking effect Effects 0.000 description 1
- 238000004611 spectroscopical analysis Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000032258 transport Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01V—GEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
- G01V8/00—Prospecting or detecting by optical means
- G01V8/10—Detecting, e.g. by using light barriers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B61—RAILWAYS
- B61D—BODY DETAILS OR KINDS OF RAILWAY VEHICLES
- B61D1/00—Carriages for ordinary railway passenger traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B61—RAILWAYS
- B61D—BODY DETAILS OR KINDS OF RAILWAY VEHICLES
- B61D49/00—Other details
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/25—Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
- G01N21/31—Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry
- G01N21/35—Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry using infrared light
- G01N21/3581—Investigating relative effect of material at wavelengths characteristic of specific elements or molecules, e.g. atomic absorption spectrometry using infrared light using far infrared light; using Terahertz radiation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Toxicology (AREA)
- Chemical & Material Sciences (AREA)
- General Life Sciences & Earth Sciences (AREA)
- Geophysics (AREA)
- Radar, Positioning & Navigation (AREA)
- Electromagnetism (AREA)
- Computer Networks & Wireless Communication (AREA)
- Remote Sensing (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Abstract
一种移动体,包括获取由太赫兹波形成的图像的成像系统,其中,所述图像是通过捕获移动体内部的检查对象而获得的图像。
Description
技术领域
本发明涉及包括成像系统的移动体。
背景技术
使用太赫兹波的检查技术是已知的。太赫兹波能够被定义为具有30GHz(含)至30THz(含)的频率的电磁波。日本专利公开号2004-286716公开了一种检查装在密封的信件中的诸如麻醉药品的违禁药品的方法。在该方法中,诸如麻醉药品的违禁药品在太赫兹带中具有的特征吸收光谱用于不破坏密封而识别密封的信件中的物质。
近来,被带入移动体中的危险物品(诸如刀)从预防犯罪的角度来看是严重的问题。强烈需要在移动体中检测这样的危险物品的技术,但是尚未实现这样的技术。
本发明提供有利于移动体中的犯罪预防的技术。
发明内容
根据本发明的一个方面的移动体包括被配置为获取由太赫兹波形成的图像的成像系统。该成像系统能够被布置为捕获移动体内部的检查对象。
本发明的方面中的一个方面提供包括被配置为获取由太赫兹波形成的图像的成像系统的移动体,其中图像是通过捕获移动体内部的检查对象而获得的图像。根据以下参考附图对示例性实施例的描述,本发明的其它特征将变得清楚。
附图说明
图1A至1C是各示出根据实施例的车厢的图;
图2是示意性地示出第一布置例的车厢已经停在车站中的站台处的状态的图;
图3是示意性地示出第二布置例的车厢已经停在车站中的站台处的状态的图;
图4是示出第二布置例的更详细的示例的图;
图5A和5B是示意性地示出多个照射源和多个相机的布置例的图;
图6是示意性地示出第三布置例的车厢的图;
图7是示意性地示出第四布置例的车厢的图;
图8是示意性地示出第五布置例的车厢的图;
图9是示意性地示出第六布置例的车厢的图;
图10是示意性地示出第七布置例的车厢的图;
图11是示意性地示出第八布置例的车厢的图;
图12是示意性地示出第八布置例的车厢的图;
图13是示出车厢的布置和车站监视系统的布置的框图;
图14A和14B是示出布置有根据实施例的相机系统中包括的成像系统的检票机的布置例的图;
图15A和15B是示出图14A和14B所示的检票机的修改的图;
图16A和16B是示出布置有根据实施例的相机系统中包括的成像系统的隔断的布置例的图;
图17A至17C是示出图16A和16B所示的隔断的修改的图;
图18A和18B是示出布置有根据实施例的相机系统中包括的成像系统的自动扶梯的布置例的图;
图19A和19B是示出布置有根据实施例的相机系统中包括的成像系统的阶梯的布置例的图;
图20A和20B是示出布置有根据实施例的相机系统中包括的成像系统的通道的布置例的图;
图21是示出布置有根据实施例的相机系统中包括的成像系统的车站的布置例的图;
图22是示出当根据实施例的相机系统和铁路车厢监视检查对象时的布置例的图;
图23是根据第一实施例的处理系统的概念图;
图24是根据第一实施例的处理的流程图;
图25是根据第二实施例的处理系统的概念图;
图26是根据第二实施例的处理的流程图;
图27是根据第三实施例的处理系统的概念图;
图28是根据第三实施例的处理的流程图;
图29是根据第四实施例的处理系统的概念图;
图30是根据第五实施例的处理系统的概念图;
图31是示出处理系统的布置例的图;
图32是示出处理系统的布置例的图;
图33是示出根据实施例的相机系统的操作例的流程图;
图34是示出根据实施例的相机系统的操作例的流程图;
图35是示出根据实施例的相机系统的操作例的流程图;以及
图36是示出根据实施例的相机系统的操作例的流程图。
具体实施方式
在下文中,将参考附图详细地描述实施例。注意,以下实施例并不意图限制要求保护的发明的范围。实施例中描述了多个特征,但是并不限制发明需要所有的这样的特征,并且多个这样的特征可以视情况组合。此外,在附图中,将相同的标号给予相同的或类似的配置,并且省略其冗余的描述。
在说明书中,“实施例”可以是所附权利要求书中描述的发明的实施例,或者可以是所附权利要求书中没有描述的发明的实施例。
图1A至1C分别示例性地示出根据实施例的车厢(coach)100a、100b和100c。车厢100a、100b和100c能够是铁路车厢,但也可以是公共汽车。在一个示例中,列车能够通过连接一个车厢100a、一个或多个车厢100b以及一个车厢100c而形成。如果没有相互区分而说明车厢100a、100b和100c,则它们将被称为车厢100。
车厢100能够包括例如侧门(侧滑门)110、直通门111、座位112、设施113、隔断门114、客舱过道115以及连廊(deck)116。侧门110、直通门111和隔断门114是门。在本说明书中,为了相互识别门,根据惯例给予独有的名称。侧门110是布置在车厢100的内侧和外侧之间的门。直通门111是布置在车厢100的两个端部中的一个或两个处的门。座位112能够被用作例如非预约座位或预约座位。设施113能够包括例如盥洗台、卫生间、吸烟室等。隔断门114是布置在连廊116和布置有多个座位112的客舱(换句话说,客舱过道115)之间的门。客舱过道115是设在客舱中以便经过布置有多个座位112的空间的一侧的过道。客舱过道115能够被布置在例如由多个第一座位形成的第一座位排和由多个第二座位形成的第二座位排之间。连廊116是被例如隔断门114、直通门111和侧门110隔断的过道。注意,这里将描述车厢作为示例。然而,该技术能够被应用于运载人或货物的移动体(汽车(标准大小的车辆、公共汽车和卡车)、飞机、直升机和船)。
图2示意性地示出第一布置例的车厢100已经停止在车站中的站台PF处的状态。站台PF能够包括站台屏蔽门FD。车厢100能够包括被配置为获取由太赫兹波TW形成的图像的成像系统ICS。成像系统ICS能够被布置为对使用作为移动体的内部的车厢100的共用部分的检查对象M进行捕获。共用部分是许多非指定的人可用的地方或空间。检查对象M通常是人,但也可以是除了人之外的动物或机器人。
还能够在站台PF上布置成像系统ICS’。成像系统ICS能够包括一个或多个成像单元3a、3b、3c、3d和3e。成像系统ICS’能够包括一个或多个成像单元3f。如果不相互区分而说明成像单元3a、3b、3c、3d、3e和3f,则它们将被称为成像单元3。太赫兹波穿过织物、皮革、化学纤维、树脂等。由于这个原因,连接到成像系统ICS的处理器(未示出)能够基于从成像系统ICS提供的图像来检测诸如火器、切割工具或者爆炸物的危险物品。
成像单元3可以是被动型成像单元,或者可以是主动型成像单元。在被动型成像单元3中,不使用太赫兹波TW照射检查对象M而由成像单元获取(也就是说,捕获)由从外围环境或检查对象M辐射的太赫兹波TW在成像单元的成像面上形成的图像作为电图像。主动型成像单元3能够包括照射源1和相机2。在图2所示的示例中,成像系统ICS包括由多个照射源1a、1b、1c、1d和1e以及多个相机2a、2b、2c、2d和2e形成的多个成像单元3a、3b、3c、3d和3e。另外,成像系统ICS’包括由照射源1f和相机2f形成的成像单元3f。如果不相互区分而说明多个照射源1a、1b、…则它们将被称为照射源1,并且如果不相互区分而说明多个相机2a、2b、…则它们将被称为相机2。
多个相机2能够被布置为使得它们的光轴面向彼此不同的方向。照射源1辐射太赫兹波TW,并且检查对象M能够被太赫兹波TW照射。相机2获取(也就是说,捕获)由被太赫兹波TW照射的检查对象M主要地镜面反射的太赫兹波TW在成像面上形成的图像作为电图像。成像系统ICS可以包括捕获由可见光形成的图像的可见光相机。类似地,成像系统ICS’可以包括捕获由可见光形成的图像的可见光相机。
车厢100能够包括共用部分。共用部分能够包括例如过道。过道能够包括例如连廊116和/或客舱过道115。连廊116能够包括在第一方向(图2中的水平方向)上延伸的第一过道116-1以及在不同于第一方向的第二方向(图2中的垂直方向)上延伸并且连接到第一过道116-1的第二过道116-2。如图2所示,第一过道116-1和第二过道116-2可以相交。第一过道116-1和客舱过道115能够相互平行。第二过道116-2和客舱过道115能够相互正交。
站台PF上的检查对象M能够经由随着侧门110打开而形成的开口部分进入车厢100中,移动通过第二过道116-2,并且在第一过道116-1和第二过道116-2之间的连接部分CP处将前进方向改变为面向隔断门114的方向。此后,检查对象M能够经由随着隔断门114打开而形成的开口部分进入客舱过道115。可替代地,站台PF上的检查对象M能够经由随着侧门110打开而形成的开口部分进入车厢100中,移动通过第二过道116-2,并且在连接部分CP处将路线改变为第一过道116-1(设施113一侧)的方向。也就是说,检查对象M能够在第一过道116-1和第二过道116-2之间的连接部分CP处改变前进方向。连接部分CP能够被认为是检查对象M改变前进方向的分支点或拐角。也就是说,连接部分CP能够是在车厢(移动体)中移动的检查对象进行方向改变的位置、检查对象减速或停止的位置或者检查对象旋转的位置。可替代地,连接部分CP能够是在车厢(移动体)中移动的检查对象被整流的位置。这里的整流意思是在站台上排成队列的多个检查对象的铺展队列在他们进入车厢100时缩小。通常,检查对象在车厢100中被整流成一队或两队。
当成像系统ICS被布置为捕获连接部分CP处的检查对象M时,能够根据检查对象M的方向的改变来从各种方向捕获检查对象M。另外,当成像系统ICS的多个相机2被布置为捕获连接部分CP处的检查对象M时,能够进一步从各种方向/角度捕获检查对象M。这能够改善连接到成像系统ICS的处理器对危险物品的位置/形状/材料的检测概率。
第一过道116-1和第二过道116-2可以在连接部分CP处相交,第一过道116-1的端部可以在连接部分CP处结束,并且第二过道116-2的端部可以在连接部分CP处结束。可替代地,第一过道116-1的端部和第二过道116-2可以在连接部分CP处结束。此外,客舱过道115可以被理解为第二过道,第二过道和第一过道116-1可以在连接部分CP处连接。连接部分CP的另一个示例能够包括用作第一过道的平面过道和用作第二过道的阶梯之间的连接部分。
在图2所示的示例中,成像系统ICS包括捕获存在于连接部分CP处的检查对象M的成像单元3a、3b和3c。成像单元3c能够被布置在客舱中以经由随着隔断门114打开而形成的开口部分捕获检查对象M。因为检查对象M一般在隔断门114之前通常出于本能而停止,所以成像单元3c在捕获大量图像方面是有利的。成像单元3d能够被布置为捕获通过客舱过道115的检查对象M。成像单元3c和3d能够被布置在座位112、架子、地板和天花板中的全部或一些上。特别地,因为太赫兹波穿过树脂等,所以成像单元3c和3d能够被容易地布置在各种地方。这里,成像单元3c和3d在地板和天花板上布置的自由度高于在位置固定的座位112上布置的自由度。因此,成像单元3c和3d能够被嵌入地板和/或天花板中而布置。
在一些机场中,使用利用毫米波的身体扫描仪。因为这样的身体扫描仪极其庞大并且用其进行的检查是耗时的,所以将其应用于运输巨大数量的人的地面运输系统是不现实的。在图2所示的示例中,能够提供紧凑的成像系统或监视系统。
成像单元3e能够被布置在客舱中以经由随着侧门110打开而形成的开口部分来捕获检查对象M。因为检查对象M一般在侧门110之前通常出于本能而停止,所以成像单元3e在捕获大量图像方面是有利的。被配置为帮助由成像单元3e进行的图像捕获的一个或多个照射源1g和1h能够被布置在站台PF上。此外,被配置为帮助由成像单元3e进行的图像捕获的反射表面MR能够被布置在站台PF上。反射表面MR能够包括弯曲的表面。反射表面MR可以被设在车厢100上。反射表面MR能够由金属表面形成。可以将涂层等的膜或用纸等制成的海报(poster)设在金属表面上。可替代地,例如,反射表面MR可以由用具有等于或小于辐照的电磁波的波长、优选为波长的1/10或更小并且通常为大约10至100毫米的表面粗糙度的树脂等制成的构件的表面形成。
图3示意性地示出第二布置例的车厢100已经停在车站中的站台PF处的状态。没有作为第二布置例提及的内容能够遵从第一布置例。成像系统ICS能够包括多个照射源1a、1b和1c以及多个相机2a、2b、2c和2d。多个照射源1a、1b和1c的数量以及多个相机2a、2b、2c和2d的数量可以是彼此相等的,或者可以是彼此不同的。多个相机2a、2b、2c和2d中的全部或一些能够被布置在车厢100中的墙壁的拐角部分处。尽管在图3中没有示出,但是多个照射源1a、1b和1c中的全部或一些可以被布置在车厢100中的墙壁的拐角部分处。多个相机2a、2b、2c和2d中的全部或一些可以在垂直方向上被重叠而布置。多个照射源1a、1b和1c中的全部或一些可以在垂直方向上被重叠而布置。成像系统ICS可以包括多个相机1a、1b和1c以及多个照射源2a、2b、2c和2d。
图4示出第二布置例的更详细的示例。如图4所示,一个或多个照射源1能够在垂直方向上被重叠而布置在车厢100中的墙壁的拐角部分处。拐角部分能够是面向连接部分CP的墙壁的拐角部分。另外,能够布置一个或多个相机2。一个或多个相机2可以被布置在拐角部分处,或者可以被布置在天花板或地板上。照射源1和相机2能够被嵌入诸如墙壁、天花板和地板的构造(structure)中,使得检查对象M不能从视觉上辨识它们。
图5A示意性地示出多个照射源1a和1b以及多个相机2a和2b的布置例。如图5A中示意性地示出的,多个照射源1a和1b以及多个相机2a和2b能够被布置在天花板C上。这里,多个照射源1a和1b以及多个相机2a和2b能够被嵌入天花板C中而布置。
图5B示意性地示出多个照射源1和多个相机2的另一个布置例。如图5B中示意性地示出的,多个照射源1能够被布置在天花板C上,并且多个相机2能够被布置在地板F上。这里,多个照射源1能够被嵌入天花板C中而布置,并且多个相机2能够被嵌入地板F中而布置。与此相反,多个照射源1可以被布置在地板F上,并且多个相机2可以被布置在天花板C上。这里,多个照射源1能够被嵌入地板F中而布置,并且多个相机2能够被嵌入天花板C中而布置。
图6示意性地示出第三布置例的车厢100。没有作为第三布置例提及的内容能够遵从第一布置例或第二布置例。第三布置例可以与第一布置例和第二布置例中的至少一个组合而实现。在第三布置例中,成像系统能够包括布置在多个座位112上以用太赫兹波TW辐照使用作为共用部分的客舱过道115的检查对象M的多个照射源1a至1d。此外,成像系统能够包括布置在客舱的门口(隔断门114)的外围以捕获用太赫兹波辐照的检查对象M的多个相机2a和2b。客舱过道115能够被布置在例如由多个第一座位112形成的第一座位排S1和由多个第二座位112形成的第二座位排S2之间。多个照射源1a至1d能够被布置在面向客舱过道115的座位112上。
车厢100能够包括被配置为检测检查对象M的传感器30。能够基于传感器30的输出来控制多个照射源1a至1d。例如,多个照射源1a至1d能够被控制以响应于由传感器30检测到检查对象M而辐射太赫兹波TW。传感器30还可以用作被配置为检测检查对象M的靠近并打开隔断门114的传感器。
图7示意性地示出第四布置例的车厢100。没有作为第四布置例提及的内容能够遵从第一布置例至第三布置例。第四布置例可以与第一布置例至第三布置例中的至少一个组合而实现。在第四布置例中,成像系统能够包括被配置为用太赫兹波TW辐照使用作为共用部分的客舱过道115的检查对象M的多个照射源1a、1b、…,以及被配置为捕获被太赫兹波辐照的检查对象M的多个相机2a、2b、…。在第一座位排S1中,作为多个照射源1a、1b、…中的一些的照射源1a…以及作为多个相机2a、2b、…中的一些的相机2a…能够被交替地布置。在第二座位排S2中,作为多个照射源1a、1b、…中的一些的照射源1b…以及作为多个相机2a、2b、…中的一些的相机2b…能够被交替地布置。该布置对交替地捕获通过客舱过道115的检查对象M的左侧和右侧并早期检测出检查对象M持有危险物品是有利的。
图8示意性地示出第五布置例的车厢100。没有作为第五布置例提及的内容能够遵从第一布置例至第四布置例。第五布置例可以与第一布置例至第四布置例中的至少一个组合而实现。在第五布置例中,成像系统能够包括被配置为用太赫兹波辐照使用作为共用部分的客舱过道的检查对象的多个照射源1以及被配置为捕获被太赫兹波辐照的检查对象的多个相机(未示出)。如图8所示,多个照射源1能够包括布置在座位112的靠背上的至少两个照射源1。该布置对从各种角度或位置用太赫兹波辐照检查对象是有利的。
图9示意性地示出第六布置例的车厢100。没有作为第六布置例提及的内容能够遵从第一布置例至第四布置例。第六布置例可以与第一布置例至第四布置例中的至少一个组合而实现。在第六布置例中,成像系统能够包括被配置为用太赫兹波辐照使用客舱过道的检查对象的多个照射源1以及被配置为捕获被太赫兹波辐照的检查对象的多个相机2。如图9所示,多个照射源1能够包括布置在座位112的靠背上的至少两个照射源1。该布置对从各种角度或位置用太赫兹波辐照检查对象是有利的。如图9所示,多个相机2能够包括例如布置在座位112的靠背上的至少一个相机2。
图10示意性地示出第七布置例的车厢100。没有作为第七布置例提及的内容能够遵从第一布置例至第六布置例。第七布置例可以与第一布置例至第六布置例中的至少一个组合而实现。在第七布置例中,成像系统能够包括被配置为用太赫兹波TW辐照使用客舱过道的检查对象M的多个照射源1以及被配置为捕获被太赫兹波TW辐照的检查对象M的多个相机2。多个照射源1能够包括例如布置在座位112的靠背上的至少一个照射源1。多个相机2能够包括布置在天花板上的至少一个相机2。布置在天花板上的相机2在图10中能够由检查对象M在视觉上辨识,但是也可以被嵌入天花板中。
图11和图12示意性地示出第八布置例的车厢100。没有作为第八布置例提及的内容能够遵从第一布置例至第七布置例。第八布置例可以与第一布置例至第七布置例中的至少一个组合而实现。在第八布置例中,成像系统ICS包括被配置为反射太赫兹波TW的反射表面MR1,反射表面MR1能够包括弯曲的表面。反射表面MR1能够例如由金属表面形成。可以将涂层等的膜或用纸等制成的海报设在金属表面上。可替代地,例如,反射表面MR1可以由用具有等于或小于辐照的电磁波的波长、优选为波长的1/10或更小并且通常为大约10至100毫米的表面粗糙度的树脂等制成的构件的表面形成。该布置使得可以通过反射表面MR1反射多个照射源1用来辐照检查对象M的太赫兹波TW中被检查对象M散射的光或者未被辐照的光,再次辐照检查对象M,并且使所述光进入相机2。因此,该布置能够改善成像系统ICS的检测性能。
图13示出车厢100的布置和车站监视系统120的布置。注意,尽管这里将描述监视系统设在车站中的示例,但是该技术的应用范围不限于该示例。例如,移动体离开/到达的地方的其它示例是机场和港口(船)。除了上述成像系统ICS之外,车厢100还能够包括处理器10和通信单元15。处理器10执行从成像系统ICS输出的信号的处理。该处理能够包括决定关于检查对象M的风险。该处理能够包括指定具有预定风险的检查对象M的位置。可替代地,该处理能够包括指定具有预定风险的检查对象M的座位。处理器10能够例如由诸如FPGA(现场可编程门阵列的缩写)的PLD(可编程逻辑器件的缩写)、ASIC(专用集成电路的缩写)、安装有程序的通用或专用计算机或者它们中的一些或全部的组合来形成。
处理器10能够基于将检查对象M的特征信息与分配给具有与该特征信息相对应的特征的乘客的座位信息相关联的对应信息来指定检查对象M的座位。特征信息能够是由处理器10从由成像系统ICS捕获的图像提取的信息。特征信息可以是例如基于从由成像系统ICS捕获的图像提取的部分图像的形状、大小等指定的特征量,可以是指定危险物品的类型的信息,或者可以是表示另一个特征的信息。可替代地,特征信息可以是表示上述风险的信息。从由成像系统ICS捕获的图像提取部分图像能够包括例如提取具有比预定亮度高的亮度的部分。AI(人工智能)能够用于提取特征信息。更具体地,已经经历深度学习的AI被安装在处理器10中,并且特征信息能够被该AI提取。例如,表示由相机2捕获的图像中的风险的信息根据相机2的位置和朝向而以不同的方式出现。因此,能够基于由多个相机2捕获的图像来执行深度学习。
处理器10能够经由通信单元15将上述处理的结果发送给预先设置的终端20。终端20能够例如由车厢10中的乘务员携带。终端20可以包括由车厢100中的乘务员之外的人携带的终端、布置在车站等中的安全办公室中设置的终端以及诸如派出所的行政机关中设置的终端。
车站监视系统120能够包括成像系统21、控制系统22和检票机23。成像系统21能够包括被配置为获取由太赫兹波TW形成的图像的相机。成像系统21可以包括被配置为获取由不同于太赫兹波的波长的电磁波(例如可见光)形成的图像的相机。成像系统21能够包括被安装来捕获至少通过检票机23的检查对象并且被配置为获取由太赫兹波TW形成的图像的相机。检票机23不仅能够具有检票口功能,而且能够具有读取经历检票的检查对象所持有的票据(包括通过诸如便携式终端的便携式介质持有的电子票据)的座位信息(用于指定预约的座位的信息)并且向控制系统22通知该座位信息的功能。
成像系统21能够使用太赫兹波TW来捕获通过检票机23的检查对象,并且将捕获的图像发送给控制系统。控制系统22能够基于从成像系统21接收的图像来决定检查对象的风险。另外,控制系统22能够从接收自成像系统21的图像提取检查对象的特征信息。能够通过与上述处理器10进行的特征信息的提取方法相同或类似的提取方法来提取特征信息。控制系统22能够例如由安装有程序的通用或专用计算机形成。
控制系统22生成将从接收自成像系统21的图像提取的检查对象的特征信息与由检票机23读取的座位信息相关联的对应信息。例如,特征信息能够是强烈暗示持有火器的信息,座位信息能够是由检票机23从持有火器的检查对象所持有的票据读取的座位信息。对应信息能够从控制系统22发送到车厢100。特征信息可以包括识别检查对象的ID的信息(也就是说,指定个人的信息)。如果成像系统21包括可见光相机,则能够通过AI等从检查对象的可见光图像或者从可见光图像识别检查对象的ID。具有预定风险的检查对象的可见光图像能够与上述对应信息一起发送到车厢100,并且还能够发送到终端20。
在下文中,将描述在通过安装在设施中的相机系统改善罪犯预防方面有利的技术。
将参考图14A至图22来描述根据本发明的一些实施例的相机系统200。根据本实施例的相机系统200被安装在设施中。设施的示例是诸如铁路车站和机场的场站(terminal)、商业设施和娱乐设施。根据本实施例的相机系统200被安装在铁路车站等的构造中。车站的构造包括布置有检票口、售票处、等待室等的车站建筑,铁路车厢到达的站台,连接车站建筑和站台的通道等等。这里,通道不仅能够是平坦的通道,而且还能够是乘客通过的地方,诸如阶梯、自动扶梯或电梯。另外,铁路车厢是移动体的示例。如果设施是机场,则移动体例如是飞机。根据本实施例的相机系统200能够是被布置为形成车站的监视系统的部分的相机系统。
相机系统200包括被配置为获取由被检查对象250反射的太赫兹波形成的图像的成像系统201。成像系统201能够包括被配置为辐照太赫兹波的至少一个照射单元202以及被配置为获取由太赫兹波形成的图像的至少一个相机203。照射单元202也被称为辐照单元。为了在以下说明中区别多个照射单元202和多个相机203,对每个标号添加后缀,比如照射单元202“a”和相机203“a”。如果照射单元和相机不需要被区别,则它们被简单地表达为“照射单元202”和“相机203”。这也适用于其它组成元素。
在该实施例中,检测太赫兹波的相机203是被称为主动相机的类型,并且能够与照射单元202组合使用。然而,相机不限于此,并且可以是被动类型的相机。在这种情况下,不使用从照射单元202辐照的太赫兹波照射检查对象250,而能够通过从检查对象250辐射的太赫兹波来获取图像。
成像系统201能够被布置为捕获使用车站的检查对象250。检查对象250通常是人,但是也可以是除了人之外的动物或者机器人。太赫兹波穿过织物、皮革等。由于这个原因,连接到相机系统200的处理器(例如控制系统22)(未示出)能够基于从相机系统200的成像系统201提供的图像来检测诸如火器、切割工具或爆炸物的危险物品。
图14A和14B分别是示出布置有根据本发明的相机系统200中包括的成像系统201的检票机211的布置例的平面图和前视图。检票机211被安装在车站的检票口中,并且分隔检票口的内侧和检票口的外侧。这里,检票机的内侧能够是需要诸如站台票或搭乘票的票据以进入的区域。检票机211可以是自动检票机。成像系统201被布置为获取通过检票机211的通道240的检查对象250的图像。例如,成像系统201可以获取从检票口的外侧进入检票口的内侧的检查对象250的图像。下面将在假定检查对象250以图14A所示的箭头的方向从检票口的外侧向检票口的内侧通过的情况下进行描述。
在图14A和14B所示的布置中,检票机211包括被布置为隔着通道彼此面对的检票机211a和检票机211b。也就是说,检票机211的通道240的宽度和长度能够由检票机211a和检票机211b决定。成像系统201包括布置在检票机211a上的照射单元202以及布置在检票机211b上的相机203。从照射光源202辐照的太赫兹波能够被诸如人的检查对象250镜面反射。由于这个原因,当照射单元202和相机203分别被布置在隔着通道240彼此面对的检票机211a和检票机211b上时,从照射单元202辐照的太赫兹波容易被检查对象250反射并被相机203检测到。
如图14B所示,照射单元202能够使用几乎整个通道240的范围204作为辐照范围。能够通过使用透镜等来调整从照射单元202辐照的太赫兹波的展度。另外,太赫兹波被金属等反射。因此,检查对象250甚至在检票机211a的下方部分附近也被照射,因为太赫兹波被检票机211b的侧表面反射。此外,为了有效地使用由检票机211的通道240一侧的每个侧表面进行的太赫兹波的反射,照射单元202和相机203可以被布置在照射单元202和相机203的光轴的方向的相对侧的检票机211的端部附近,如图14A所示。也就是说,被配置为从检票机211捕获检票口的外侧的照射单元202和相机203可以被布置在检票口的内侧的检票机211的端部附近。
照射单元202和相机203的布置不限于上述布置。例如,照射单元202和相机203可以被布置在检票机211a上。可替代地,例如,照射单元202和相机203可以被布置在检票机211的中心附近,或者可以被布置在图14A中的检票口的外侧的端部附近。对于一个相机203,照射单元202可以由多个照射设备形成。例如,照射单元202可以由太赫兹波辐照方向不同的多个照射装置形成。另外,照射单元202和相机203可以以不可移动的状态固定到检票机211,或者可以例如根据检查对象250的移动而可旋转地布置。
如果相机系统200的成像系统201被用作监控相机,则在一些情况下,通过逐个捕获作为检查对象250的人,有助于诸如由相机系统200的成像系统201的后一级处的处理器(未示出)进行的图像处理这样的后处理。检票机211使作为检查对象250的人以高可能性逐个通过。因此,当成像系统201被布置在检票机211中时,能够抑制诸如图像处理的后处理的负担。也就是说,成像系统201可以被布置在检查对象250排成队列的地方。另外,作为检查对象250的人通过检票机211所需的时间大约为1秒。然而,成像系统201能够以50fps或更快的帧速率获取由太赫兹波形成的图像。由于这个原因,可以多次执行捕获一个检查对象250。在多次图像捕获中,可以整个地捕获检查对象250,或者可以仅部分地捕获检查对象250。
相机系统200的成像系统201可以包括被配置为检测检查对象250靠近的传感器260。例如,如图14B所示,检票机211可以设有传感器260。可替代地,例如,传感器260可以被添加到照射单元202或相机203。基于传感器260的输出来控制照射单元202。例如,照射单元202可以根据传感器260检测到检查对象250来开始辐照太赫兹波。这能够抑制成像系统201消耗的功率。
图15A示出两组照射单元202和相机203被布置在检票机211上作为成像系统201的示例。如图15A所示,照射单元202a和202b被布置在检票机211a上,相机203a和203b被布置在检票机211b上。此时,如图15A所示,照射单元202a和相机203a被布置为从检票机211照射并且捕获检票口的内侧,并且照射单元202b和相机203b被布置为从检票机211照射并且捕获检票口的外侧。通过该布置,不仅能够捕获检查对象250的前侧,而且还能够捕获检查对象250的后侧。此时,如上所述,为了有效地使用从照射单元202a和202b辐照的太赫兹波,照射单元202a和相机203a可以被布置在检票口的相对于照射单元202b和相机203b的内侧。然而,照射单元202a和202b以及相机203a和203b的布置不限于此,并且如上所述,它们能够被自由地布置。另外,如上所述,检票机211的通道240一侧的每个侧表面可以形成反射太赫兹波的反射表面。也就是说,检票机211的通道240一侧的每个表面可以用金属制成,或者可以包括具有太赫兹波的波长的大约1/10的不均匀度的粗糙表面。另外,例如,如图15B所示,检票机211可以具有包括用于太赫兹波的更多反射的上方构造212的门形构造。此时,上方构造212的通道240一侧的每个表面可以用金属制成,或者可以包括具有太赫兹波的波长的大约1/10的不均匀度的粗糙表面。当太赫兹波被检票机211的表面反射或散射时,从各种角度照射检查对象250,并且能够改善相机203所获得的图像的质量。
另外,在图14A至15B中,照射单元202和相机203被很大地例示为检票机211上的单独的实体以简化描述。然而,本发明不限于此。太赫兹波能够穿过诸如树脂的材料。由于这个原因,可以将用树脂制成的窗设在检票机211的部分中,并且可以将照射单元202或相机203布置在检票机211中。作为树脂,例如,能够使用诸如高密度聚乙烯或环烯烃共聚物的适当材料。在以下说明中,也将照射单元202和相机203在附图中例示得很大。
接着将参考图16A和16B来描述成像系统201被应用于车站的站台216上的隔断墙213的示例。图16A和16B分别是示出布置有根据本发明的相机系统200中包括的成像系统201的隔断墙213的布置例的平面图和前视图。成像系统201被布置为与隔断墙213相邻,隔断墙213被配置为隔断站台216和轨道侧区域217,并且包括能够打开和关闭的门部分214。隔断墙213是安装在站台216上的所谓的站台屏蔽门。在该实施例中,成像系统201获取当隔断墙213的门部分214打开时通过通道241的检查对象250的图像。
成像系统201包括布置在轨道侧区域217中的照射单元202a和相机203a。当门部分214打开时,照射单元202a和相机203a从轨道侧区域217执行通道241的照射和图像捕获。另外,成像系统201包括布置在站台216中的照射单元202b和相机203b。当门部分214打开时,照射单元202b和相机203b从站台216执行通道241的照射和图像捕获。当布置了照射单元202a和相机203a以及照射单元202b和相机203b时,可以获取经由门219进入铁路车厢218的检查对象250和经由门219离开铁路车厢218的检查对象250这二者的前侧图像和后侧图像。然而,本发明不限于此,并且可以仅布置照射单元202a和相机203a或者仅布置照射单元202b和相机203b。
如图16A和16B所示,照射单元202a和202b中的每个可以包括多个照射设备。如图16A和16B所示,照射单元202a和202b可以被布置在隔断墙213中的门套部分215在打开和关闭门部分214的方向上的端部处,门套部分215在门部分214打开时存放门部分214。另外,如图16A所示,当门部分214打开时,在一些情况下门部分214的部分未被存放在门套部分215中。在这种情况下,门部分214的未被存放的部分的侧表面可以形成反射太赫兹波的反射表面,比如上述检票机211的通道240一侧的侧表面。这使得能够更高效地使用从照射单元202a和202b辐照的太赫兹波。另外,铁路车厢218的车体可以被用作反射太赫兹波的反射表面。当隔断墙213的门部分214被打开以形成通道241时,铁路车厢218可能已经到达。铁路车厢218的车体能够用金属制成。由于这个原因,铁路车厢218的车体能够被用作反射太赫兹波的反射表面。
另外,如图16B所示,相机203a和203b可以被附到诸如杆220的构造。作为相机203a或203b,如图16B所示,可以使用多个图像捕获设备。如图16B所示,相机203a和203b可以被布置在例如检查对象250的腰部的高度处或者高于检查对象250的位置处。当相机203a和203b被布置在高位置处时,即使检查对象250在前后方向上的间隔小,能够逐个获取图像的可能性也变得比相机203a和203b被布置在低位置处的情况下高。另外,当相机203a和203b相对于通道241成一个角度而布置时,获取检查对象250的前面的图像和后面的图像的可能性变高。
照射单元202a和202b以及相机203a和203b的布置不限于图16A和16B所示的布置。例如,如图17A至17C所示,照射单元202a和202b可以被附到诸如杆220的构造。此时,如图17A和17B所示,照射单元202和相机203可以被附到单独的杆220a和220b。另外,例如,如图17C所示,照射单元202和相机203可以被附到相同的杆220。
如上所述,如果成像系统201被用作监控相机,则能够通过逐个捕获作为检查对象250的人来减轻诸如图像处理的后处理的负担。因此,相机系统200中包括的成像系统201可以被应用于安装在人们排成队列并且逐个进入的子弹头列车或特快车停止的车站中的隔断墙213。在这种情况下,用于子弹头列车或特快车的铁路车厢218的门219的宽度大约为700mm至1,000mm。因此,在图16A或17A所示的布置中,照射单元202和相机203之间的最大距离能够减小到例如大约1,100mm(含)至2,000mm(含)。这使得能够高效地使用从照射单元202辐照的太赫兹波。子弹头列车或特快车通常具有固定的列车编组。因此,能够根据铁路车厢218的门219的大小来改变门部分214的大小。因此,例如,与对应于具有小的宽度(例如,700mm)的门219的门部分214相邻的照射单元202和相机203之间的距离可以是例如700mm(含)至1,000mm(含)。在这种情况下,照射单元202和相机203之间的最大距离可以是例如850mm或更大。
例如,成像系统201可以被应用于例如通勤列车等的铁路车站中的隔断墙213。在这种情况下,除了高峰时间之外,可以逐个获取人的图像。即使在多个检查对象250同时进入或离开的情况下,检查对象250也通常排成两队或三队并进入。每个检查对象250能够通过使用相机系统200中包括的处理器的图像处理等来区分。在通勤列车等中,门的宽度大约为1,300mm至2,000mm。由于这个原因,在图16A或17A所示的布置中,照射单元202和相机203之间的最大距离可以是例如1,500mm(含)至3,000mm(含)。可以根据照射单元202和相机203之间的距离来改变从照射单元202辐照的太赫兹波的输出。在这种情况下,到相机203的距离较长的照射单元202可以以比到相机203的距离较短的照射单元高的输出来辐照太赫兹波。
在一些情况下,站台216被布置在户外。因此,布置在站台216或轨道侧区域217上的成像系统201容易受外部环境的影响。太赫兹波容易被水吸收,并且可能不能在高湿度的环境(诸如下雨)中获得具有足够图像质量的图像。因此,如图16B所示,成像系统201可以包括被配置为检测外部环境的传感器261。基于传感器261的输出来控制照射单元202。例如,如果传感器261检测到湿度的信息并且湿度高,则可以增加辐照太赫兹波的照射单元202的输出。这能够改善由相机203获取的图像的质量。
另外,例如,照射单元202或相机203可以被附到铁路车厢218的车体。也就是说,相机系统200可以包括安装在铁路车厢218上的照射单元或相机。在这种情况下,相机系统200能够包括布置在车站中的成像系统201和包括铁路车厢218中包括的照射单元或相机的成像系统之间的通信单元。
另外,例如,当隔断墙213的门部分214打开时,照射单元202和相机203可以开始操作。例如,成像系统201可以与门部分214的操作同步,或者可以包括被配置为检测门部分214已经打开的传感器。这能够抑制成像系统201的功率消耗。
接着将参考图18A和18B来描述成像系统201被应用于自动扶梯221的示例。图18A和18B分别是示出布置有根据本发明的相机系统200中包括的成像系统201的自动扶梯221的布置例的侧视图和平面图。
成像系统201被布置为与自动扶梯221相邻以获取通过自动扶梯221的检查对象250的图像。在图18A所示的布置中,成像系统201包括照射单元202和相机203。照射单元202可以包括多个照射设备,相机203可以包括多个图像捕获设备。另外,照射单元202和相机203可以如图18A所示被布置在诸如多个杆220的单独的构造上,或者可以被布置在诸如一个杆220的相同的构造上。例如,如图18A所示,照射单元202和相机203可以被布置为面向与自动扶梯221的前进方向相反的方向并执行照射和图像捕获。这使得可以在前侧获取检查对象250的图像。
例如,如图18B所示,照射单元202和相机203可以被布置在与自动扶梯221的前进方向相交的方向上并且将自动扶梯221夹在中间。可以获得与上述布置在检票机211a上的照射单元202和布置在检票机211b上的相机203相同的效果。另外,此时,照射单元202a和相机203a可以被布置为面向与自动扶梯221的前进方向相反的方向并执行照射和图像捕获,并且照射单元202b和相机203b可以被布置为面向自动扶梯221的前进方向并执行照射和图像捕获。这使得不仅可以捕获检查对象250的前侧,而且还可以捕获检查对象250的后侧。
如上所述,如果成像系统201被用作监控相机,则能够逐个捕获作为检查对象250的人可以是有利的。因为自动扶梯221以预定速度运行,所以能够逐个获取检查对象250的图像的可能性高。另外,如图18A所示,自动扶梯221包括台阶。当相机203被布置在高的位置处时,能够逐个获取图像的可能性变高。在自动扶梯221上,检查对象250通常排成一队或两队。例如,在检查对象排成两队的自动扶梯221中,可以使用两个相机203来获取检查对象250的图像。这提高了能够逐个获取图像的可能性。作为结果,能够减轻相机系统200的成像系统201的后一级处的图像处理的负担。
另外,如上所述,太赫兹波能够穿过树脂等。由于这个原因,照射单元202或相机203可以被嵌入布置有自动扶梯221的部分的地板、墙壁或天花板中。例如,照射单元202可以与普通的照明一起被安装在自动扶梯221的层板(deck board)上。
接着将参考图19A和19B描述成像系统201被应用于阶梯222的示例。图19A和19B分别是示出布置有根据本发明的相机系统200中包括的成像系统201的阶梯222的布置例的平面图和截面图。
成像系统201被布置在阶梯222中以获取通过阶梯222的检查对象250的图像。在图19A和19B所示的布置中,成像系统201包括照射单元202和相机203。照射单元202和相机203被嵌入阶梯222中,并且被布置为从阶梯222的立板部分223的窗224照射并捕获检查对象250。如图19A和19B所示,照射单元202和相机203能够被布置在阶梯222的相同立板部分223中。
因为作为检查对象250的人一级一级(或者大约两级)地走上或走下阶梯222,所以能够从检查对象250的头(或脚)到脚(或头)顺序地获取检查对象250的图像。
对于阶梯222的立板部分223中设置的窗224,如上所述,能够使用透过太赫兹波的各种树脂。当根据用于阶梯222未布置成像系统201的立板部分223或踏板部分225的材料来选择适当的树脂材料时,能够使成像系统201不引人注意(能够隐藏其存在)。
接着将参考图20A和20B描述成像系统201被应用于通道242的示例。图20A和20B是示出布置有根据本发明的相机系统200中包括的成像系统201的通道242的布置例的侧视图。
成像系统201被布置在通道242中以获取通过通道242的检查对象250的图像。成像系统201包括照射单元202和相机203。此时,照射单元202和相机203中的一个被布置在通道242的天花板227上,并且照射单元202和相机203中的另一个被嵌入通道242的地板226中。在图20A和20B所示的布置中,相机203被布置在通道242的天花板227上,并且照射单元202被嵌入通道242的地板226中。然而,本发明不限于此。照射单元202可以被布置在通道242的天花板227上,并且相机203可以被嵌入通道242的地板226中。
在图20A和20B所示的布置中,照射单元202a和相机203a被布置为从通道242在通过方向上的一侧向另一侧执行照射和图像捕获。另外,照射单元202b和相机203b被布置为从通道242在通过方向上的所述另一侧向所述一侧执行照射和图像捕获。这使得可以获取在通道242的两个通过方向这二者上前进的检查对象25的前侧图像和后侧图像。然而,本发明不限于此,并且可以仅在通道242上布置照射单元202a和相机203a。
图20B示出相机203a和203b被嵌入通道242的天花板227中的示例。因此,与如图20A所示相机203a和203b从天花板227悬挂的情况相比,能够使相机203a和203b不引人注意(能够隐藏它们的存在)。另外,照射单元202或相机203的光轴在图20B所示的布置中比在图20A所示的布置中相对于检查对象250的前进方向成更大角度而设置。如图20A和20B中所示的虚线所指示,当光轴的角度被设置得大时,能够逐个获取检查对象250的图像的可能性能够变高。
另外,在图20A和20B所示的布置中,照射单元202和相机203中的一个被布置在地板226中,另一个被布置在天花板227上。如上所述,太赫兹波能够被检查对象250镜面反射。因此,当照射单元202和相机203被布置为彼此面对时,从照射单元202辐照的太赫兹波能够容易地被相机203检测到。
然而,照射单元202和相机203在通道242上的布置不限于图20A和20B所示的布置。例如,照射单元202和相机203可以被布置在通道242的侧壁等上。照射单元202和相机203这二者都可以被布置在地板226或天花板227上。在这种情况下,未布置照射单元202和相机203的地板226或天花板227可以用作反射太赫兹波的反射表面。例如,通道242的除了照射单元202或相机203的部分(用作通过太赫兹波的窗)之外的整个内部可以用作反射太赫兹波的反射表面。另外,例如,照射单元202可以包括多个照射设备。在这种情况下,照射单元202中包括的多个照射设备可以以适当的数量布置在诸如地板226、天花板227或侧壁的适当的地方。
如上所述,当成像系统201被布置在阶梯222或通道242中时,多个相机203可以被布置在阶梯222或通道242的宽度方向上。因此,能够逐个捕获检查对象250的图像的可能性变高。另外,成像系统201可以被布置在阶梯222或通道242的宽度减小的部分中。在阶梯222或通道242的宽度减小的部分中,检查对象250能够容易地排成队列。
图21是示出布置有相机系统200中包括的成像系统201的车站245的布置例的图。如上所述,成像系统201能够被布置在检票口处的检票机211、通道242、自动扶梯221、阶梯222、隔断墙213等上。布置根据本实施例的相机系统200中包括的包括照射单元202和相机203的成像系统201的地方不限于上述地方。例如,成像系统201可以被布置在认为能够逐个获取检查对象250的图像的另一个地方,诸如洗手间的入口或洗手盆。包括照射单元202和相机203并且被配置为使用太赫兹波获取图像的上述成像系统201可以被布置在安装有使用可见光的普通的监控相机的地方。
另外,根据本实施例的相机系统200能够与铁路车厢218合作监视图21所示的检查对象250。图22示出相机系统200与铁路车厢218合作监视检查对象250的监视系统的布置例。除了布置在车站中的上述成像系统201之外,相机系统200还能够包括控制系统310和通信单元315。控制系统310对从成像系统201输出的信号进行处理。该处理能够包括决定关于检查对象250的风险。该处理能够包括指定具有预定风险的检查对象250的位置。可替代地,该处理能够包括例如基于具有预定风险的检查对象250在通过检票机211时已经放入检票机211中的票据来指定已经进入铁路车厢218中的检查对象250的座位。控制系统310能够例如由诸如FPGA(现场可编程门阵列的缩写)的PLD(可编程逻辑器件的缩写)、诸如ASIC(专用集成电路的缩写)的处理器、安装有程序的通用或专用计算机或者它们中的一些或全部的组合来形成。
控制系统310能够基于检查对象250的特征信息以及将特征信息与分配给具有对应于该特征信息的特征的乘客的座位信息相关联的对应信息来指定检查对象250。特征信息能够是由控制系统310从由成像系统201获得的图像提取的信息。特征信息可以是例如基于从由成像系统201获得的图像提取的部分图像的形状、大小等指定的特征量,可以是指定危险物品的类型的信息,或者可以是表示另一个特征的信息。可替代地,特征信息可以是表示上述风险的信息。从由成像系统201获取的图像提取部分图像能够包括例如提取具有比预定亮度高的亮度的部分。AI(人工智能)能够用于提取特征信息。更具体地,已经经历深度学习的AI被安装在控制系统310中,并且特征信息能够被AI提取。例如,表示由相机203捕获的图像中的风险的信息根据相机203的位置和朝向而以不同的方式出现。因此,能够基于由多个相机203捕获的图像来执行深度学习。
控制系统310能够经由通信单元315将上述处理的结果发送给预先设置的终端320。终端320能够例如由铁路车厢218中的乘务员携带。终端320可以包括由铁路车厢218中的乘务员之外的人携带的终端、布置在车站等中的安全办公室中设置的终端以及诸如派出所的行政机关中设置的终端。
成像系统201能够获取通过检票机211的检查对象250的图像,并且将所获得的图像发送给控制系统310。控制系统310能够基于从成像系统201接收的图像来决定检查对象的风险。另外,控制系统310能够从接收自成像系统201的图像提取检查对象的特征信息。
控制系统310生成将从接收自成像系统201的图像提取的检查对象250的特征信息与由检票机211读取的座位信息相关联的对应信息。例如,特征信息能够是强烈暗示持有枪支的信息,座位信息能够是由检票机211从持有枪支的检查对象250所持有的票据读取的座位信息。对应信息能够从控制系统310发送到铁路车厢218中的终端320。特征信息可以包括识别检查对象250的ID的信息(也就是说,指定个人的信息)。成像系统201可以包括可见光相机,并且能够通过AI等从检查对象250的可见光图像或者从可见光图像识别检查对象250的ID。具有预定风险的检查对象的可见光图像能够与上述对应信息一起发送到铁路车厢218,并且还能够发送到终端320。这里已经描述了布置在检票机211上的成像系统201获取检查对象250的图像的情况。然而,可以基于从布置在隔断墙213、自动扶梯221、阶梯222或通道242上的成像系统201获得的图像来开始或继续追踪检查对象250。另外,可以基于由布置在检票机211上的成像系统201获得的图像来开始追踪检查对象250,此后,可以使用利用可见光的监控相机来继续追踪检查对象250。
在下文中,将描述能够更有利地执行使用太赫兹波的检查的处理系统。在以下描述中,太赫兹波包括30GHz至30THz的频率范围内的电磁波。电磁波的概念能够包括可见光、红外光和诸如毫米波的无线电波。
(第一实施例)
将参考图23来描述根据第一实施例的处理系统401的概要。处理系统401包括第一成像系统、第二成像系统和处理器,第一成像系统包括第一照射源404和第一相机402,第二成像系统包括第二相机405,处理器包括预处理单元406和后处理单元407。
第一成像系统的第一相机402基于从第一照射源404辐射的第一波长的太赫兹波403来获取第一图像。从第一照射源404辐射的太赫兹波403辐照检查对象410。如果检查对象410是穿衣服的人,则太赫兹波403穿过衣服的纤维并被检查对象410所持有的金属或陶瓷反射。特定物质,例如作为爆炸物的RDX(三亚甲基三硝基胺),已知吸收0.8THz附近的太赫兹波,因此,反射波减小。第一相机402基于该反射波获取第一图像。
第二成像系统的第二相机405从与从第一照射源404辐照的太赫兹波不同的波长的电磁波获取第二图像。作为不同波长的电磁波,能够使用可见光、红外光或毫米波。当使用红外光时,可以准备不同于第一照射源404的照射源(未示出)。由第二相机405获取的第二图像被预处理单元406处理。预处理单元406执行从第二图像检测检查区域的处理。
如果第二图像是通过可见光获取的并且检查对象410是人,则可以通过检测衣服的特定部分作为检查区域来执行对检查区域的检测。可以通过机器学习创建模型并且由该模型对捕获的第二图像的区域进行分类从而指定检查区域。可替代地,可以基于存储在数据库409中的物体的形状的信息来指定所述区域。如果第二图像是通过毫米波获取的,则可以将图像中的强度分布大于阈值的部分或者强度差大的部分检测为检查区域。如果红外光被用于获取第二图像,则可以将由水导致的红外光的辐射少的部分或者通过夜视检测到的图像中的衣服的特定部分检测为检查区域。即使在黑暗的地方或者由于天气而导致视野差的地方,也能够使用红外光或毫米波来检测检查区域。当从穿衣服的人的图像检测检查区域时,可以将衣服不自然鼓出的部分、人的胸部或者衣服的口袋部分检测为检查区域。
将基于图24来描述由处理器进行的对检查对象410的检查。预处理单元406通过上述方法,从由第二相机405获取的第二图像(步骤S421)检测检查区域(步骤S422和S423)。后处理单元407针对与从第二图像检测到的检查区域相对应的第一图像的区域的信息来执行图像数据的处理(步骤S425)。第一图像是由第一相机402使用太赫兹波获取的图像(步骤S424),并且是通过看透衣服等获得的图像。如果衣服下存在金属或陶瓷物体,则能够从反射波获得图像。因此,能够通过对第一图像进行处理来检测物体的形状。在从第二图像检测到检查区域之后,通过比较第一图像和第二图像来选择第一图像中与检查区域相对应的区域。针对与从第二图像检测到的检查区域相对应的区域执行对第一图像的后续图像处理。
当从第一图像选择了与检查区域相对应的区域并且执行了图像处理时,能够减少不必要的信息而执行所述处理。由于这个原因,与处理整个图像数据相比,能够减轻处理负担。因此,即使检查对象410正在移动,也能够在短时间内在短的移动距离中多次从第一图像检测到特征。确定单元408基于多个检测到的特征来估计衣服下的物体(步骤S426)。多个特征可以是物体的部分的特征。确定单元408可以基于数据库409中的数据来对从第一图像检测到的物体的形状进行分类。分类可以使用通过机器学习创建的模型来完成。认为因为检查对象410的移动或者检查对象和相机之间的位置关系,从图像获得的形状的信息可能是物体的部分的信息。即使在这种情况下,也能够通过基于多个特征的信息对特征进行分类、累积多个结果、并且基于累积的分类结果执行确定来改善估计准确度(步骤S427)。
当处理系统被用于安全监视系统中时,基于对检查对象410的分类结果的累积来确定从检查区域检测到的物体的风险(步骤S428)。关于所述确定,可以基于通过机器学习得到的模型来执行基于分类的累积结果的确定。如果确定了检查对象410持有危险物质,则可以向外部通知检查对象410持有危险物质。当检查对象410通过布置有处理系统的门时,处理系统可以向外部通知警报。当检查对象410放入票据并且通过检票口时,处理系统可以将该票据与检查对象410链接,并且通知检查对象410是监视目标。如果第二图像是使用可见光获得的,则能够显示检查对象410使得能够通过在监视器上以重叠的方式显示第二图像和第一图像来容易地看见它。当确定被暂停时,重复检查直到满足结束条件为止。结束条件可以是检查的重复次数(S429)。
(第二实施例)
在该实施例中,第二成像系统设有辐射太赫兹波的第二照射源411。将参考图25来描述该实施例。第二照射源411是生成不同于第一照射源404的第二波长的太赫兹波的照射源。如第一实施例中所描述的,已知有吸收特定波长的太赫兹波的特定物质。因此,第一波长(对于作为爆炸物的RDX而言大约0.8THz)的太赫兹波从第一照射源404辐射到检查对象410,第一波长是特定物质容易吸收的波长。如果检查对象410持有具有容易吸收第一波长的太赫兹波的特性的物质,则持有该物质的部分中的反射变小。另一方面,当选择特定物质吸收少的波长(当第一波长为0.8THz时大约0.5THz)作为由第二照射源411生成的第二波长的太赫兹波时,特定物质反射第二波长的太赫兹波。能够针对相同的检查区域,使用来自特定物质的反射波之间的差异来指定物质。
将基于图26来描述根据该实施例的处理。预处理单元406检测通过第二波长的太赫兹波获取的第二图像中的高反射区域作为检查区域(步骤S431和S432)。后处理单元407获取由第一相机402捕获的基于第一波长的太赫兹波的第一图像(步骤S434),并且开始针对第一图像的与从第二图像检测到的检查区域相对应的区域处理图像数据。后处理单元407能够计算第二图像中的检查区域的信息和第一图像的与该检查区域相对应的区域的信息之间的差异(步骤S435)。
第二图像中的反射和吸收几乎等于第一图像中的反射和吸收的部分的数据通过计算所述两条信息之间的差异而几乎被消除。然而,反射和吸收在第一波长和第二波长之间不同的部分的数据即使通过计算所述两个图像之间的差异也不被消除。这样,能够使用物质对太赫兹波的吸收率的差异来执行检查区域中的物质的光谱分析。能够使用光谱分析来估计物质的类型。另外,因为衣服的散射或反射被消除,所以能够从获得的图像信息减少来自衣服的不必要的信号,并且能够改善图像的信噪比。
如果作为检查对象的人持有容易吸收第一波长的物质,则能够基于第一波长和第二波长之间的吸收率的差异来对在检查区域中检测到的物质进行分类(步骤S436)。关于分类,当数据库409中保存了特定物质和波长之间的关系时,确定单元408能够基于数据库409来执行分类。确定单元408可以使用通过机器学习创建的模型来执行分类。通过上述方法,可以估计检查对象410持有吸收特定波长的物质。已知吸收特定波长的太赫兹波的物质中存在危险物质。能够通过光谱分析来估计危险物质的存在。能够通过累积多个光谱分析结果来提高检测准确度(步骤S437)。
因此确定检查对象410可能持有危险物质(步骤S438)。关于所述确定,可以基于通过机器学习得到的模型来执行基于分类的累积结果的确定。如果确定持有危险物质,则处理系统向外部通知检查对象410持有危险物质。当检查对象410通过布置有处理系统的门时,处理系统可以向外部通知警报。当检查对象410的人放入票据并通过检票口时,处理系统可以将该票据与检查对象410链接,并且向外部通知这个人作为监视目标。关于从第二照射源411辐照的太赫兹波的波长,可以根据要检测的物质的吸收光谱来组合能够辐照多个(也就是说,三个或更多)波长的太赫兹波的多个照射源。当暂停确定时,重复检查直到满足结束条件为止。结束条件可以是检查的重复次数(S439)。
(第三实施例)
在该实施例中,基于对由第二成像系统捕获的第二图像中的特定区域的检测,对控制单元412进行控制以控制第一成像系统中的第一照射源404和第一相机402。将参考图27和图28来描述该实施例。
第二成像系统的第二相机405从与从第一照射源404辐射的太赫兹波不同的波长的电磁波获取第二图像。作为不同波长的电磁波,能够使用可见光、红外光或毫米波。由第二相机405获取的第二图像被预处理单元406处理。预处理单元406从第二图像检测检查区域(步骤S452和S453)。如第一实施例中所描述的那样执行对检查区域的检测。
根据从第二图像检测到的检查区域的位置和范围以及检查区域的状态来控制第一相机捕获时的条件。条件包括第一相机的姿势的控制、针对获取的图像的增益的控制、以及缩放或裁剪的捕获范围和视角的控制(步骤S454)。可以根据来自检查区域的反射信号的强度或者检查区域中的目标物体来改变从第一照射源404辐照的太赫兹波的输出电平(输出功率)和波长。通过该控制,能够提高检查准确度。控制单元412所控制的第一成像系统基于第一波长的太赫兹波来获取第一图像(步骤S455)。
后处理单元407基于获取的第一图像来执行检查区域的处理(步骤S456)。此后,确定单元408执行物体的确定和分类(步骤S457、S458和S459)。当处理系统是安全监视系统时,基于分类结果的累积来确定风险。如果确定了检查对象410持有危险物质,则处理系统向外部通知检查对象410持有危险物质。当检查对象410通过布置有处理系统的门时,处理系统可以向外部通知警报。当检查对象410放入票据并通过检票口时,处理系统可以将该票据与检查对象410链接,并且将检查对象410设置为监视目标。当暂停确定时,重复检查直到满足结束条件为止。结束条件可以是检查的重复次数(S460)。
(第四实施例)
在该实施例中,设置了被配置为监视处理单元周围的湿度的环境监视单元413。将参考图29来描述该实施例。太赫兹波容易被水蒸气吸收。较长波长的太赫兹波几乎不受水蒸气的影响。因此,设置环境监视单元413来测量湿度,并且控制成像系统使得几乎不受周围环境的影响。
更具体地,如果环境监视单元413检测到湿度已经变高,则将从第一照射源404辐射的太赫兹波403的波长切换到比目前使用的波长长的波长。根据湿度,可以将波长切换到几乎不受水蒸气影响的波长(1.2mm或0.75mm的波长附近存在的区域,其中大气的衰减特别小)。当太赫兹波的波长变长时,由相机捕获的图像的分辨率降低。然而,可以减轻水蒸气的影响并且继续检查。
(第五实施例)
在该实施例中,使用不同波长的太赫兹波执行捕获。使用比捕获第一图像时的波长长的第二波长的太赫兹波获取第二图像,并且从第二图像检测检查区域。可以使用通过机器学习创建的模型来将检查区域检测为包括预定形状的物体的区域,或者可以检测预定波长的反射波的光谱改变的区域作为检查区域。
将参考图30来描述该实施例。基于从第二图像检测到的检查区域,对第一图像的与该检查区域相对应的区域的图像数据进行处理。通过从第一照射源404生成的第一波长的太赫兹波捕获的第一图像是捕获1,通过从照射源411生成的第二波长的太赫兹波捕获的第二图像是捕获2。因为捕获1的图像是使用比捕获2中的波长短的波长的太赫兹波获取的,所以分辨率高并且信息量大。因此,检查对象410所持有的每个物体的形状在通过太赫兹波获取的图像中是清楚的。然而,因为使用短波长的太赫兹波,所以景深浅,并且捕获对检查对象410的姿势的改变敏感。
更具体地,根据检查对象410的姿势,部分形状被获取为检查对象410所持有的物体的形状。另一方面,在通过捕获2获得的图像中,因为太赫兹波的波长长,所以分辨率低,并且与捕获1相比每个物体的形状不清楚。然而,因为使用长波长的太赫兹波,所以景深深,并且捕获对检查对象410的姿势的改变不敏感。更具体地,独立于检查对象410的姿势,获取检查对象410所持有的物体的整个形状。当处理低分辨率的捕获2以指定检查对象410所持有的物体的位置并且基于检测到的检查区域处理捕获1的数据时,能够减轻处理负担,并且能够以较高的速度执行处理。因此,即使检查对象410正在移动,也能够在短时间内在短移动距离中多次检测检查对象410的特征,并且能够基于检测到的特征来估计衣服下的物体。
另外,当计算使用两个不同波长的太赫兹波执行的捕获1和捕获2之间的差异时,由衣服造成的反射被消除,并且可以从获得的图像信息减轻噪声。更具体地,因为散射是来自整个衣服的反射的主要分量,所以强度差小,并且捕获对检查对象410的姿势的改变不敏感(随机噪声被整体添加到获取的图像)。由于这个原因,当计算捕获1和捕获2之间的差分图像时,衣服的信号被消除。另外,当计算差异时,能够获得基于太赫兹波穿过的物质的太赫兹波吸收率的差异的图像。因此,能够从第一图像和第二图像之间的差异检测包含金属或陶瓷之外的物质作为组成部分的物体的形状。
通过确定单元408通过对从捕获1检测到的物体的形状进行分类来估计检查区域中的物体。如果检查对象410移动,则从图像获得的物体的形状通常是部分的。因此,能够通过累积多个分类结果并且基于累积的分类结果执行确定来改善确定准确度。在安全监视系统的情况下,基于分类结果的累积来确定风险。如果确定了检查对象410持有危险物质,则处理系统通知检查对象410持有危险物质。当检查对象410通过布置有处理系统的门时,处理系统可以向外部通知警报。当检查对象410放入票据并通过检票口时,处理系统可以将该票据与检查对象410链接,并且将检查对象410设置为监视目标。
(第六实施例)
将参考图31和图32来描述处理系统的应用示例。图31示出第一波长的太赫兹波的第一照射源404和不同于第一波长的第二波长的第二照射源411被布置在车辆等的门口414的一侧的示例。被配置为基于第一波长的太赫兹波执行捕获的第一相机402,被配置为基于可见光、红外光和毫米波中的一个执行捕获的第二相机405-1,以及被配置为基于第二波长的太赫兹波执行捕获的第二相机405-2被布置在门口414的另一侧。当相机和照射源被组合时,能够组合地执行第一实施例至第五实施例中描述的关于检查的处理。
能够由第二相机405-1追踪检查对象410,并且能够控制第一相机402的姿势和视角。当根据物质的吸收率设置用于被配置为基于太赫兹波执行捕获的第二相机405-2进行捕获的太赫兹波的波长时,能够执行光谱分析。另外,当第二相机405-1和405-2被用于检测检查区域时,能够减轻对由第一相机402捕获的第一图像的处理负担。
此外,能够使用物质对太赫兹波的波长的吸收率的差异来检测包含金属或陶瓷之外的物质作为组成部分的物体的形状。在该实施例中,作为第二相机405,使用用于可见光、红外光或毫米波的相机以及用于第二波长的太赫兹波的相机。然而,可以仅使用用于可见光、红外光或毫米波的相机以及用于第二波长的太赫兹波的相机中的一个作为第二相机。能够将照射源和相机不引人注意地埋入墙壁表面、天花板或地板表面中。照射源和相机可以被布置在门口414的左侧和右侧这二者。当在门口414附近设置照射源和相机时,能够减轻多个检查对象410重叠的状况,并且能够改善检查准确度。
将参考图32来描述处理系统被布置在安装在车站的检票口处的检票机415附近的示例。第一波长的太赫兹波的第一照射源404和不同于第一波长的第二波长的第二照射源411被布置在检票机415的一侧。被配置为基于第一波长的太赫兹波执行捕获的第一相机402,被配置为基于可见光、红外光和毫米波中的一个执行捕获的第二相机405-1,以及被配置为基于第二波长的太赫兹波执行捕获的第二相机405-2被布置在检票机415的另一侧。当处理系统被布置在检票机415附近时,能够减轻多个检查对象410重叠的状况,并且能够改善检查准确度。
可以根据由独立于处理系统设置的传感器检测到检查对象410的运动、车辆的门的打开/关闭、将票据放入检票机415中等来开始处理系统的操作。可以设置多个第一相机和第二相机。通过使用多个相机,能够改善检测准确度,能够增加检查对象的数量,并且能够扩大检查区域。
将参考图33来描述相机200的操作。图33是示出根据该实施例的相机系统200的操作的示例的流程图。作为相机系统200的布置,能够应用上述实施例的布置。在该实施例中,将描述相机系统200获取基于太赫兹波的图像(有时将被称为太赫兹图像)之后的操作。在图33中,相机系统200评估获取的图像,如果质量低于期望的质量,则再次执行捕获图像的操作(再次捕获)。
首先,在步骤S1001中,照射单元202在期望的条件下用太赫兹波辐照检查对象250。接着,在步骤S1002中,相机203检测被检查对象250反射的太赫兹波,并且获取基于该太赫兹波的信息。在步骤S1003中,控制单元执行将基于太赫兹波的信息转换为图像的处理。这里,控制单元能够是例如如上所述的控制系统310。
接着,控制单元评估获取的太赫兹图像的质量(步骤S1004)。作为评估项目,能够适当地设置表示是否能够获取对应于检查对象250的适当的太赫兹图像、是否能够从该图像质量的太赫兹图像检测到物品等的项目。在图像质量评估中,如果不满足期望的图像质量,则相机系统200执行步骤S1005的操作。在步骤S1005中,控制单元将用于改变波长和提高辐照的太赫兹波的功率的控制信号供应给照射单元202。照射单元202再次执行太赫兹波辐照(步骤S1001)。通过一系列操作,能够适当地检测期望的物品。
注意,在图像评估中,当确定能够获得期望的图像质量时,控制单元判断有无所检测的物品,在一些情况下判断该物品的类型(步骤S1006)。如果检测到物品,则控制单元使监视器系统显示警告。可替代地,控制单元输出执行将标志添加到高风险的物品或人的操作的指令(步骤S1007)。如果没有检测到物品,则控制单元可以将标志添加到已确认的低风险的人(步骤S1008)。
对于所述一系列操作,能够按以下组合使用照射单元202和相机203。如果在第一捕获中使用照射单元202和相机203,则可以使用相同的照射单元202和相同的相机203来执行第二捕获和后续捕获。另外,如果在第一捕获中使用照射单元202和相机203,则可以使用与第一捕获中相同的照射单元202和与第一捕获中的相机不同的相机203来执行第二捕获和后续捕获。此外,如果在第一捕获中使用照射单元202和相机203,则可以使用与第一捕获中的照射单元不同的照射单元202和与第一捕获中相同的相机来执行第二捕获和后续捕获。此外,如果在第一捕获中使用照射单元202和相机203,则可以使用与第一捕获中的照射单元和相机不同的照射单元202和相机203来执行第二捕获和后续捕获。
接着将参考图34来描述相机系统200的另一个操作。在该示例中,将描述与铁路车厢的上车门、客车厢的进入门或站台屏蔽门的打开和关闭同步地捕获图像的操作。图34是示出与门同步地捕获图像的操作的流程图。在该实施例中,控制单元也能够是例如如上所述的控制系统310。与其它实施例中相同的布置和操作的描述将被省略。另外,门能够是例如图16A至17C所示的铁路车厢218的门219或门部分214。
首先,在相机系统200中,照射单元202处于待机状态(步骤S1101)。此时,相机203也可以处于待机状态。控制单元检测门打开信号(步骤S1102)。当检测到门打开信号时,控制单元将用于辐照检查对象250的控制信号供应给照射单元202,并且将用于捕获检查对象250的控制信号供应给相机203。照射单元202根据来自控制单元的控制信号来开始太赫兹波辐照(步骤S1103)。相机203根据照射单元202开始照射来开始检测太赫兹波(步骤S1104)。如果控制单元没有检测到门打开信号,则保持待机状态(步骤1101)。当在步骤S1102中检测到门打开信号时,控制单元被设置为能够始终检测门关闭信号的状态(步骤S1106)。当在步骤S1106中检测到门关闭信号时,控制单元将用于停止太赫兹波辐照的控制信号供应给照射单元202,并且将用于停止太赫兹波检测的控制信号供应给相机203(步骤S1107和S1108)。这里,如果控制单元检测到门关闭信号,则执行步骤S1107和S1108中的至少一个。如果没有检测到门关闭信号,则继续太赫兹波的辐照和检测,并且相机系统200继续捕获。通过监视门的打开和关闭状态的一系列操作,能够节省相机系统200的电力。另外,通过所述一系列操作,能够在必要的定时执行可靠的捕获。
接着将参考图34来描述相机系统200的又一个操作。在该示例中,将描述与检票机211的操作同步地捕获图像的情况。图34是示出与检票机211同步地捕获图像的操作的流程图。在该实施例中,控制单元也能够是例如如上所述的控制系统310。与其它实施例中相同的布置和操作的描述将被省略。
首先,在相机系统200中,照射单元202处于待机状态(步骤S1201)。此时,相机也可以处于待机状态。控制单元处于能够检测通知设在检票机211中的门打开的门打开信号的状态(步骤S1202)。如果控制单元检测到门打开信号,则照射单元202开始太赫兹波辐照(步骤S1203)。另外,相机203根据照射单元202开始照射来开始检测太赫兹波(步骤S1204)。如果控制单元没有检测到门打开信号,则保持待机状态(步骤S1201)。为了在步骤S1202中检测门打开信号,能够使用由放入检票机211中的票据生成的信号、通过使诸如IC卡的票据与检票机211接触而生成的信号、或者用于在检票机211中使用毫米波检测有无诸如IC卡的票据的信号。当以这种方式监视检票机211的门的打开和关闭状态时,能够节省电力。另外,通过所述操作,能够执行可靠的捕获。
接着将参考图36来描述相机系统200的又一个操作。在该实施例中,将描述在使用参考图14B描述的传感器260的情况下执行的操作。图36是示出检票机211中的捕获操作的流程图。在该实施例中,控制单元也能够是例如如上所述的控制系统310。与其它实施例中相同的布置和操作的描述将被省略。
如上所述,传感器260检测检查对象250。这里,传感器260可以是例如使用红外线的运动传感器或者使用可见光的相机。首先,在相机系统200中,照射单元202处于待机状态(步骤S1301)。此时,相机也可以处于待机状态。接着,使用传感器260检测检查对象250(步骤S1302)。来自传感器260的信号被发送到控制单元。当确定检测到检查对象250时,控制单元将用于辐照检查对象250的控制信号供应给照射单元202。照射单元202根据来自控制单元的控制信号来开始太赫兹波辐照(步骤S1303)。另外,控制单元将用于捕获检查对象250的控制信号供应给相机203。相机203根据来自控制单元的控制信号来开始检测太赫兹波(步骤S1304)。如果控制单元没有确定检测到检查对象250,则保持待机状态(步骤S1301)。
通过该操作,能够节省电力。另外,通过该操作,能够执行可靠的捕获。在该实施例中,已经描述了检查对象250是人的情况。然而,检查对象250可以是物体。该布置也能够被应用于图18A和18B所示的自动扶梯221等。如果自动扶梯包括运动传感器,则该传感器能够被共享。
其它实施例
本发明的(一个或多个)实施例还能够通过以下来实现:系统或装置的计算机,该计算机读出并执行记录在存储介质(也可以被更完整地称为“非暂时性计算机可读存储介质”)上的计算机可执行指令(例如一个或多个程序)以执行上述(一个或多个)实施例中的一个或多个的功能,和/或包括用于执行上述(一个或多个)实施例中的一个或多个的功能的一个或多个电路(例如专用集成电路(ASIC));方法,由所述系统或装置的所述计算机例如通过从所述存储介质读出并执行所述计算机可执行指令来执行上述(一个或多个)实施例中的一个或多个的功能和/或控制所述一个或多个电路来执行上述(一个或多个)实施例中的一个或多个的功能而执行该方法。所述计算机可以包括一个或多个处理器(例如中央处理单元(CPU)、微型处理单元(MPU)),并且可以包括读出并执行所述计算机可执行指令的独立计算机或独立处理器的网络。所述计算机可执行指令可以例如从网络或所述存储介质提供给所述计算机。所述存储介质可以包括例如以下中的一个或多个:硬盘,随机存取存储器(RAM),只读存储器(ROM),分布式计算系统的储存器,光学盘(诸如紧凑盘(CD)、数字多功能盘(DVD)或蓝光盘(BD)TM),闪存设备,内存卡等。
其它实施例
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然已经参考示例性实施例描述了本发明,但是要理解,本发明不限于所公开的示例性实施例。以下权利要求书的范围要被给予最广泛的解释以便包含所有这样的修改以及等同的结构和功能。
Claims (36)
1.一种移动体,包括被配置为获取由太赫兹波形成的图像的成像系统,其特征在于,所述图像是通过捕获所述移动体内部的检查对象而获得的图像。
2.根据权利要求1所述的移动体,其中,所述成像系统被布置为使用所述移动体的共用部分来捕获所述检查对象。
3.根据权利要求2所述的移动体,其中,所述共用部分包括过道,并且所述成像系统包括被配置为捕获使用所述过道的检查对象的相机。
4.根据权利要求3所述的移动体,其中,所述过道包括连廊,并且所述成像系统包括被配置为捕获使用所述连廊的检查对象的相机。
5.根据权利要求3所述的移动体,其中,所述过道包括经过布置有座位的空间的一侧的客舱过道,并且所述成像系统包括被配置为捕获使用所述客舱过道的检查对象的相机。
6.根据权利要求5所述的移动体,其中,所述相机被布置在所述座位上。
7.根据权利要求3所述的移动体,其中,所述相机被布置在架子上。
8.根据权利要求3所述的移动体,其中,所述过道包括在第一方向上延伸的第一过道以及在不同于所述第一方向的第二方向上延伸并且连接到所述第一过道的第二过道,并且
所述成像系统包括被配置为捕获通过所述第一过道和所述第二过道之间的连接部分的检查对象的相机。
9.根据权利要求3所述的移动体,其中,所述过道包括在第一方向上延伸的第一过道以及在不同于所述第一方向的第二方向上延伸并且连接到所述第一过道的第二过道,并且
所述成像系统包括被配置为捕获通过所述第一过道和所述第二过道之间的连接部分的检查对象的多个相机,并且所述多个相机的光轴面向彼此不同的方向。
10.根据权利要求8所述的移动体,其中,所述第一过道和所述第二过道在所述连接部分处相交。
11.根据权利要求3所述的移动体,其中,所述过道包括阶梯,并且
所述成像系统包括被配置为捕获通过所述阶梯的检查对象的相机。
12.根据权利要求3所述的移动体,其中,所述共用部分包括盥洗台,并且所述成像系统包括被配置为捕获使用所述过道的检查对象的相机。
13.根据权利要求3所述的移动体,其中,所述共用部分包括卫生间,并且所述成像系统捕获使用所述卫生间的检查对象。
14.根据权利要求3所述的移动体,其中,所述成像系统包括被配置为辐射所述太赫兹波的照射源。
15.根据权利要求3所述的移动体,其中,所述成像系统包括被配置为用所述太赫兹波辐照使用所述过道的检查对象的多个照射源、以及被配置为捕获被所述太赫兹波辐照的检查对象的多个相机。
16.根据权利要求15所述的移动体,其中,所述多个照射源中的每个照射源被嵌入所述移动体的天花板和地板中的一个中,并且所述多个相机中的每个相机被嵌入所述天花板和所述地板中的一个中。
17.根据权利要求3所述的移动体,其中,所述共用部分包括在第一方向上延伸的第一过道以及在不同于所述第一方向的第二方向上延伸并且连接到所述第一过道的第二过道,并且
所述成像系统包括被配置为用所述太赫兹波辐照通过所述第一过道和所述第二过道之间的连接部分的检查对象的多个照射源、以及被配置为捕获被所述太赫兹波辐照的检查对象的多个相机。
18.根据权利要求17所述的移动体,其中,面向所述连接部分的墙壁包括被配置为反射所述太赫兹波的弯曲表面。
19.根据权利要求17所述的移动体,其中,所述多个照射源和所述多个相机被嵌入面向所述连接部分的墙壁中。
20.根据权利要求2所述的移动体,其中,所述成像系统包括被布置在座位上以用所述太赫兹波辐照使用所述共用部分的检查对象的多个照射源、以及被配置为捕获被所述太赫兹波辐照的检查对象的相机。
21.根据权利要求20所述的移动体,其中,所述多个照射源包括布置在所述座位的靠背上的至少两个照射源。
22.根据权利要求20所述的移动体,其中,所述相机被布置在所述移动体的天花板和地板中的一个上。
23.根据权利要求2所述的移动体,其中,所述共用部分包括布置在由多个第一座位形成的第一座位排和由多个第二座位形成的第二座位排之间的过道,
所述成像系统包括被配置为用所述太赫兹波辐照使用所述过道的检查对象的多个照射源、以及被配置为捕获用所述太赫兹波辐照的检查对象的多个相机,
所述多个照射源中的一些照射源和所述多个相机中的一些相机被交替地布置在所述第一座位排中,并且
所述多个照射源中的其它一些照射源和所述多个相机中的其它一些相机被交替地布置在所述第二座位排中。
24.根据权利要求2所述的移动体,其中,所述成像系统包括被布置在多个座位上以用所述太赫兹波辐照使用所述共用部分的检查对象的多个照射源、以及被布置在客舱的门口的外围上以捕获被所述太赫兹波辐照的检查对象的相机。
25.根据权利要求24所述的移动体,还包括被配置为检测所述检查对象的传感器,
其中,基于所述传感器的输出来控制所述多个照射源。
26.根据权利要求14所述的移动体,其中,所述成像系统包括被配置为反射所述太赫兹波的反射表面,并且所述反射表面包括弯曲表面。
27.根据权利要求2所述的移动体,还包括被配置为执行从所述成像系统输出的信号的处理的处理器,
其中,所述处理包括决定关于所述检查对象的风险。
28.根据权利要求27所述的移动体,其中,所述处理包括指定具有预定风险的检查对象的位置。
29.根据权利要求27所述的移动体,其中,所述处理包括指定具有预定风险的检查对象的座位。
30.根据权利要求29所述的移动体,其中,所述处理器基于将所述检查对象的特征信息与分配给具有与所述特征信息相对应的特征的乘客的座位信息相关联的对应信息来指定所述检查对象的座位。
31.根据权利要求30所述的移动体,其中,所述特征信息是从由所述成像系统捕获的图像提取的信息。
32.根据权利要求27所述的移动体,其中,所述处理器将所述处理的结果发送给预先设置的终端。
33.根据权利要求1所述的移动体,其中,所述成像系统被布置于在所述移动体中移动的检查对象被整流的位置处。
34.根据权利要求1所述的移动体,其中,所述成像系统被布置于在所述移动体中移动的检查对象被整流的位置处。
35.根据权利要求1所述的移动体,其中,所述成像系统被布置于在所述移动体中移动的检查对象减速或停止的位置处。
36.根据权利要求1所述的移动体,其中,所述成像系统被布置于在所述移动体中移动的检查对象旋转的位置处。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019047787 | 2019-03-14 | ||
JP2019-047787 | 2019-03-14 | ||
JP2020032189A JP2020153973A (ja) | 2019-03-14 | 2020-02-27 | 移動体 |
JP2020-032189 | 2020-02-27 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111694065A true CN111694065A (zh) | 2020-09-22 |
Family
ID=72241124
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010173090.XA Pending CN111694065A (zh) | 2019-03-14 | 2020-03-13 | 移动体 |
Country Status (3)
Country | Link |
---|---|
US (2) | US20200296266A1 (zh) |
CN (1) | CN111694065A (zh) |
DE (1) | DE102020106655A1 (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11590650B2 (en) * | 2019-06-10 | 2023-02-28 | Preferred Networks, Inc. | Generation method for training dataset, model generation method, training data generation apparatus, inference apparatus, robotic controller, model training method and robot |
JP7317632B2 (ja) | 2019-08-21 | 2023-07-31 | キヤノン株式会社 | 素子、画像形成装置 |
JP7395281B2 (ja) | 2019-08-23 | 2023-12-11 | キヤノン株式会社 | 素子 |
JP7317653B2 (ja) | 2019-09-24 | 2023-07-31 | キヤノン株式会社 | 素子 |
JP7362409B2 (ja) | 2019-10-17 | 2023-10-17 | キヤノン株式会社 | 照明装置およびカメラシステム |
JP2022055561A (ja) | 2020-09-29 | 2022-04-08 | キヤノン株式会社 | 検出器および画像形成装置 |
US20240127568A1 (en) * | 2021-02-10 | 2024-04-18 | The Regents Of The University Of California | Multi-wavelength structured light camera system for precision positioning and quality control |
JP2022160201A (ja) * | 2021-04-06 | 2022-10-19 | キヤノン株式会社 | 検出システムおよび画像形成装置 |
CN114099192B (zh) * | 2021-10-09 | 2023-07-21 | 丁小芳 | 一种多用途的太赫兹舱以及其使用方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040065831A1 (en) * | 2002-05-31 | 2004-04-08 | John Federici | Terahertz imaging system and method |
JP2005265793A (ja) * | 2004-03-22 | 2005-09-29 | Pentax Corp | 特定物質探知装置 |
CN102119359A (zh) * | 2008-08-07 | 2011-07-06 | 罗伯特.博世有限公司 | 太赫兹辐射源以及用于生成太赫兹辐射的方法 |
US20160078576A1 (en) * | 2014-09-17 | 2016-03-17 | Fortress Systems International, Inc. | Cloud-based vehicle monitoring systems and methods |
CN106094050A (zh) * | 2016-06-15 | 2016-11-09 | 中国工程物理研究院应用电子学研究所 | 一种太赫兹主动式安检仪 |
CN208156212U (zh) * | 2018-05-04 | 2018-11-27 | 烟台太赫兹光电科技有限公司 | 一种步行通道用主动式太赫兹人体隐藏物检测装置 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR3036097B1 (fr) * | 2015-05-12 | 2017-04-28 | Airbus Operations Sas | Dispositif d'acces a parois independantes mobiles permettant la communication securisee entre au moins deux zones d'une enceinte |
US10979649B2 (en) * | 2018-01-29 | 2021-04-13 | Don Atkinson | Auxiliary apparatus for a digital imaging device |
-
2020
- 2020-03-11 DE DE102020106655.4A patent/DE102020106655A1/de active Pending
- 2020-03-11 US US16/815,171 patent/US20200296266A1/en not_active Abandoned
- 2020-03-13 CN CN202010173090.XA patent/CN111694065A/zh active Pending
-
2023
- 2023-04-26 US US18/307,268 patent/US20230262312A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040065831A1 (en) * | 2002-05-31 | 2004-04-08 | John Federici | Terahertz imaging system and method |
JP2005265793A (ja) * | 2004-03-22 | 2005-09-29 | Pentax Corp | 特定物質探知装置 |
CN102119359A (zh) * | 2008-08-07 | 2011-07-06 | 罗伯特.博世有限公司 | 太赫兹辐射源以及用于生成太赫兹辐射的方法 |
US20160078576A1 (en) * | 2014-09-17 | 2016-03-17 | Fortress Systems International, Inc. | Cloud-based vehicle monitoring systems and methods |
CN106094050A (zh) * | 2016-06-15 | 2016-11-09 | 中国工程物理研究院应用电子学研究所 | 一种太赫兹主动式安检仪 |
CN208156212U (zh) * | 2018-05-04 | 2018-11-27 | 烟台太赫兹光电科技有限公司 | 一种步行通道用主动式太赫兹人体隐藏物检测装置 |
Also Published As
Publication number | Publication date |
---|---|
US20200296266A1 (en) | 2020-09-17 |
DE102020106655A1 (de) | 2020-09-17 |
US20230262312A1 (en) | 2023-08-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111694065A (zh) | 移动体 | |
JP2020153973A (ja) | 移動体 | |
US20200293806A1 (en) | Camera system and facility | |
US10347062B2 (en) | Personal identification for multi-stage inspections of persons | |
JP6162208B2 (ja) | 一体型セキュリティ検査システム | |
US8150105B2 (en) | Inspection using three-dimensional profile information | |
JP6881898B2 (ja) | ゲート装置 | |
EP2390845A1 (en) | Check-point apparatus to manage the access to restricted-acces areas | |
CN110415409A (zh) | 一种安检与检票一体化的闸机系统 | |
EP1670684B1 (en) | Mobile security unit | |
US20160224843A1 (en) | Method for counting people | |
CN213751221U (zh) | 一种卫检自助查验通道 | |
JP2020153974A (ja) | カメラシステムおよび施設 | |
US20230375695A1 (en) | Screening device and method for screening a person | |
CN211669384U (zh) | 一种多通道安检机 | |
US11585957B2 (en) | System and method for object screening and handling | |
US10809415B2 (en) | Imaging device for use in vehicle security check and method therefor | |
CN210864072U (zh) | 自助安检系统 | |
JP2022008167A (ja) | 航空機のための対象物監視システム | |
JP2021157435A (ja) | 不審物検知システム | |
US20230043595A1 (en) | Interlock; system, comprising an interlock; method for controlling a flow of people and/or for security checking; computer program product | |
CN218332001U (zh) | 一种一体化通道站内安检设备 | |
CN208672817U (zh) | 一种用于安检的3d图像处理装置 | |
CN110927807B (zh) | 一种多通道安检机及安检方法 | |
CN111552007A (zh) | 检查系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |