WO2021085512A1 - 検査システム - Google Patents

検査システム Download PDF

Info

Publication number
WO2021085512A1
WO2021085512A1 PCT/JP2020/040530 JP2020040530W WO2021085512A1 WO 2021085512 A1 WO2021085512 A1 WO 2021085512A1 JP 2020040530 W JP2020040530 W JP 2020040530W WO 2021085512 A1 WO2021085512 A1 WO 2021085512A1
Authority
WO
WIPO (PCT)
Prior art keywords
inspection
image
luggage
camera
time
Prior art date
Application number
PCT/JP2020/040530
Other languages
English (en)
French (fr)
Inventor
和朗 ▲高▼山
真起 高橋
豊 長谷部
川崎 栄嗣
清孝 内田
千隼 小川
石毛 隆晴
Original Assignee
日本信号株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2019196618A external-priority patent/JP7345357B2/ja
Priority claimed from JP2020179004A external-priority patent/JP2022070006A/ja
Application filed by 日本信号株式会社 filed Critical 日本信号株式会社
Priority to US17/772,543 priority Critical patent/US20220404294A1/en
Priority to CN202080075619.2A priority patent/CN114829915A/zh
Publication of WO2021085512A1 publication Critical patent/WO2021085512A1/ja

Links

Images

Classifications

    • G01V5/22
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/04Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and forming images of the material
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/06Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and measuring the absorption
    • G01N23/10Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and measuring the absorption the material being confined in a container, e.g. in a luggage X-ray scanners
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/10Scanning
    • G01N2201/102Video camera
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/12Circuits of general importance; Signal processing
    • G01N2201/123Conversion circuit
    • G01N2201/1235Measuring or displaying selectably absorbance or density

Definitions

  • the present invention relates to a technique for inspecting an object to be inspected.
  • Patent Document 1 provides efficient baggage inspection by moving a baggage floor board that moves in a baggage lane and a person's floor board that moves in a person's lane at substantially the same speed. The technology to be performed is disclosed.
  • the baggage inspection device conventionally used at airports, etc. has multiple staff members, and the baggage is transported at a low speed for time-consuming inspection.
  • the targets of terrorist attacks are diversifying to event venues, transportation facilities, office buildings, hotels, etc., and even if it is not airport-level security, it improves safety while maintaining throughput close to the current level, and is convenient.
  • the need for high security is increasing.
  • the installation space is limited and it is often difficult to assign multiple staff members as in airports. Therefore, in order to perform baggage inspection with high throughput, an inspection device that can be handled by a small number of inspectors is required.
  • the conventional baggage inspection device requires a person who operates the device, a person who looks at the screen, a person who receives the user's baggage and puts it in the inspection device, a person who receives the inspected baggage and hands it to the user, and the like. There was a problem that a small number of inspectors could not handle it.
  • the inspection device In order to handle with a small number of inspectors, it is necessary to improve the efficiency of inspection. For example, if the inspection device detects a dangerous substance in the baggage, the inspector will perform a secondary inspection, but at that time, if it takes time to search for the baggage in which the dangerous substance is detected, it will take more time. It will be wasted.
  • an object of the present invention is to make it possible to easily identify a baggage in which a dangerous substance is detected.
  • the present invention is an inspection system that inspects a load transported by a continuously operating belt conveyor by an inspection device, and obtains an external image of the entrance side of the load of the inspection device.
  • An inspection system including a camera for photographing is provided as a first aspect.
  • the baggage in which the dangerous substance is detected can be easily identified from the image taken by the camera.
  • the inspection system of the second aspect it is possible to prevent the owner of the luggage from being psychologically anxious due to seeing the camera.
  • a transparent antireflection member arranged on the entrance side of the inspection device for transmitting visible light and reducing light reflection is provided, and the camera is loaded through the transparent antireflection member.
  • the configuration of taking an external image of the above may be adopted as the third aspect.
  • the inspection system of the third aspect it is possible to reduce the possibility that the camera is reflected on a light-reflecting member such as a hood and causes psychological anxiety to the baggage holder.
  • the fourth aspect is that the transparent antireflection member is provided on at least one of two surfaces of the transparent hood arranged on the inlet side of the inspection device. May be adopted as.
  • the inspection system of the fourth aspect it is possible to suppress the reflection of the camera arranged above the transparent hood.
  • the configuration in which the transparent antireflection member is provided on at least one of two surfaces of the transparent hood hanging in the photographing direction of the camera is adopted as the fifth aspect. You may.
  • the inspection system of the fifth aspect it is possible to suppress the reflection of the camera on the transparent hood regardless of the position of the camera.
  • a configuration including a display control means for displaying the image taken by the camera and the inspection result of the inspection device on the display device at the same time or by switching is adopted as the sixth aspect. May be done.
  • the inspector of the inspection system can see both the inspection result of the baggage and the appearance of the baggage put into the inspection device. There is no need to separately assign an observer to visually monitor the loaded luggage.
  • the display control means is an image taken by the camera on the display device based on the inspection result of the inspection device or the loading state of the luggage placed on the belt conveyor. And the display of the inspection result of the inspection device may be switched, as the seventh aspect.
  • the inspector of the inspection system can confirm the loading state of the luggage when necessary according to the loading state of the luggage.
  • the inspection system of the eighth aspect it is possible to suppress the possibility that the user's hand or the like is involved at the entrance of the inspection device.
  • the inspector can monitor the inside of the cover by the image taken by the camera through the cover.
  • the possibility that the luggage comes into contact with the cover and becomes clogged and the transportation is delayed is suppressed.
  • the time when the baggage reaches a predetermined area in the photographing area of the camera is specified based on the time when the baggage arrives at the inspection area of the inspection device, and the camera is at that time.
  • a configuration may be adopted in which the image taken by the camera is provided with a corresponding means for associating the image taken with the inspection device with the inspection result of the inspection device.
  • the result of the inspection performed by the inspection device at an appropriate timing regardless of the state of the package can be associated with the image of the package.
  • the corresponding means identifies the time when the baggage reaches the predetermined area based on the time when the central area of the baggage reaches the reference position in the inspection area.
  • the configuration may be adopted as the twelfth aspect.
  • the inspection system of the twelfth aspect it is possible to make it less likely that the inclusions of the luggage are not reflected in the inspection result as compared with the case where the end of the luggage reaches the reference position.
  • the inspection device captures a transparent image of the package, and the corresponding means is from a reference position of the transparent image in the central region of the package in the transparent image captured by the inspection device.
  • the time from the time when the baggage arrives at the predetermined area to the time when the baggage arrives at the inspection area is adjusted according to the amount of deviation of the baggage, and the baggage reaches the predetermined area using the adjusted time.
  • a configuration in which the time is specified may be adopted as the thirteenth aspect.
  • the inspection system of the thirteenth aspect it is possible to make it easy to show the main part of the baggage in the image taken in the predetermined area while making the whole baggage appear in the transparent image.
  • the time when the baggage arrives at the inspection area is specified based on the time when the baggage arrives at a predetermined area in the imaging area of the camera, and the inspection device according to the time is specified.
  • a configuration may be adopted in which the inspection result of the above and the corresponding means for associating the image taken by the camera with the time when the baggage arrives at the predetermined area are provided.
  • the result of the inspection performed by the inspection device at an appropriate timing regardless of the state of the package can be associated with the image of the package.
  • the camera repeatedly shoots the predetermined area, the corresponding means performs recognition processing on the image taken by the camera, and recognizes the package from the central area of the image. If this is the case, a configuration in which the shooting time of the image is specified as the time when the baggage reaches the predetermined area may be adopted as the fifteenth aspect.
  • the inspection system of the fifteenth aspect it is possible to improve the accuracy of specifying the time when the package arrives in the predetermined area, as compared with the case where the identification is performed based on the time when the end of the package arrives.
  • the corresponding means means the time when the package reaches the predetermined area based on the period during which the sensor that detects the presence of the object in the predetermined area detects the object.
  • the configuration of specifying the above may be adopted as the sixteenth aspect.
  • the inspection system of the 16th aspect it is possible to specify the time when the baggage arrives at the predetermined area even when the baggage is difficult to recognize from the captured image.
  • the seventeenth aspect is provided with a mechanism for bringing a portion extending outward from the main body of the luggage closer to the main body on the upstream side in the transport direction of the luggage from the predetermined area. May be adopted as.
  • the main part of the baggage is more likely to be reflected in the image taken in a predetermined area while the entire baggage is shown in the transparent image as compared with the case where the mechanism of the present aspect is not provided. Can be done.
  • the figure which shows the appearance of the inspection system which concerns on 1st Example The figure which shows the appearance of the inspection system which concerns on 1st Example.
  • the figure which shows the example of the structure of the inspection system which concerns on 2nd Example The figure which shows the example of the entrance image which is displayed when the abnormality which concerns on 2nd Example is not detected.
  • It is a figure which shows the example which the area which a baggage comes in contact with is covered with a film by the cover which concerns on the modification of 2nd Example.
  • the figure which shows the appearance of the entrance inspection system which concerns on 3rd Example The figure which shows the appearance of the entrance inspection system which concerns on 3rd Example.
  • the functional configuration of the inspection system according to the third embodiment is shown.
  • the figure which shows an example of the reference position and the central area in the inspection system which concerns on 3rd Example The figure which shows an example of the reference position and the central area in the inspection system which concerns on 3rd Example.
  • the figure which shows an example of the reference position and the central area in the inspection system which concerns on 3rd Example The figure which enlarges and shows the transmission photography area and the visible light photography area of the inspection system which concerns on 3rd Example.
  • FIG. 1 shows the appearance of the inspection system 1 according to the first embodiment of the present invention.
  • the inspection system 1 is a system that uses an inspection device to inspect whether or not the luggage of visitors at an event venue contains items that are prohibited from being brought in (prohibited items) such as knives.
  • FIG. 1 shows an example in which the baggage J is subject to inspection.
  • the inspection system 1 is used by the owner P of the luggage J and the inspector Q who performs the work related to the inspection.
  • a plurality of inspection systems 1 may be installed depending on the size of the entrance, but in this embodiment, a so-called one operation in which only one inspector Q is assigned to each inspection system 1 is carried out. Has been done.
  • FIG. 1A shows the inspection system 1 viewed from above vertically
  • FIG. 1B shows the inspection system 1 viewed from the horizontal direction.
  • the inspection system 1 includes a first transport device 10, a second transport device 20, an inspection device 30, a hood 40, a camera 50, a control device 60, and a display 70.
  • Both the first transport device 10 and the second transport device 20 are belt conveyors that transport the load J in the transport direction A1. That is, the luggage J is conveyed by a belt conveyor that operates continuously.
  • the first transfer device 10 and the second transfer device 20 are arranged side by side in the transfer direction A1 to form a transfer path B1.
  • an inspector Q is arranged on either the left or right side of the transport path B1, and an inspection lane B2 through which the owner P of the luggage J passes is provided on the opposite side of the inspector Q.
  • the first transport device 10 is arranged on the upstream side of the second transport device 20, and is provided with a storage place B3 where the owner P puts the luggage J.
  • a hood 40 and an inspection device 30 are installed on the downstream side of the hood 40 at the end of the transport path B1 where the luggage placed in the storage place B3 is transported.
  • the inspection device 30 is a device that captures a transmitted image through which the transported inspection object is transmitted.
  • the transparent image is an image used for inspection of luggage and shows the result of inspection of the inspection device 30.
  • the inspection device 30 irradiates the baggage J passing through the photographing area B4 for taking a transmitted image in the own device with an electromagnetic wave, and displays an image drawn by a shade according to the intensity of the electromagnetic wave transmitted through the baggage J. Generate as a transparent image.
  • the electromagnetic wave emitted by the inspection device 30 to the baggage J is an electromagnetic wave in a frequency band that passes through the baggage J but has a different transmittance depending on the substance of the contents of the baggage J, and is, for example, X-ray.
  • the inspector Q When it is determined in the primary inspection based on the transparent image taken by the inspection device 30 that an object that may be prohibited to be brought in is shown, the inspector Q opens the baggage J and confirms what is actually contained. Perform a secondary inspection.
  • the control device 60 determines the necessity of the secondary inspection based on the captured transparent image. The detailed determination method will be described later.
  • the hood 40 is arranged on the upstream side of the transport direction A1 from the photographing area B4 of the inspection device 30.
  • the hood 40 is a transparent member that covers the transport path of the luggage J, and is provided to prevent the hands of the owner P from entering the photographing area B4 where electromagnetic waves fly around.
  • the hood 40 is an example of the "transparent hood" of the present invention.
  • the hood 40 has an upper surface portion 41, a side surface portion 42, and a side surface portion 43.
  • the upper surface portion 41, the side surface portion 42, and the side surface portion 43 each have a quadrangular plate shape.
  • the internal space B5 of the hood 40 having a U-shaped cross section formed by the upper surface portion 41, the side surface portion 42, and the side surface portion 43 in the direction orthogonal to the transport direction A1 is sized so that the luggage J can pass through.
  • a camera 50 is provided on the upstream side of the inspection device 30 in the transport direction A1 and vertically above the upper surface portion 41.
  • FIG. 2 shows an enlarged view of the periphery of the camera 50.
  • the camera 50 captures an external image showing the appearance of the luggage J transported by the first transport device 10.
  • the camera 50 is arranged in the internal space 32 of the housing 31 of the inspection device 30, and photographs the external space through the opening 33 that opens vertically downward in the housing 31.
  • the camera 50 captures an external image of the luggage J passing through the external space on the entrance side of the inspection device 30.
  • the housing 31 which is a part of the inspection device 30 shields the camera 50 from the inspection lane B2 side through which the owner P of the luggage J passes to the person who looks toward the inspection device 30. Acts as a shield (makes it invisible). Strictly speaking, even from the inspection lane B2 side, a part of the camera 50 may be seen by looking into the opening 33 from the vertically lower side, but the entire camera 50 cannot be seen and a part of the camera 50 is always shielded. Further, when viewed from a position higher than the housing 31, the entire camera 50 is shielded.
  • the camera 50 is arranged at a position visually shielded from the inspection lane B2 side through which the owner P of the luggage J passes.
  • the camera 50 is shielded by the housing 31 which is a shield as shown in FIG. 2, so that the owner P is not given psychological anxiety due to the visibility of the camera 50. ..
  • the camera 50 photographs the appearance of the luggage J passing through the internal space B5 surrounded by the hood 40 through the upper surface portion 41 of the hood 40. Therefore, the upper surface portion 41 is formed of a member that transmits visible light. Further, the upper surface 411 of the upper surface portion 41 facing the camera 50 side is processed to suppress light reflection, and the processing causes light reflection as compared with the case where it is simply processed into a flat surface. It is designed to be suppressed.
  • the upper surface 411 is, for example, processed to attach an antireflection film.
  • the antireflection film is, for example, a two-layer film, and the light reflected by the two layers is out of phase and cancels each other by interference to suppress reflection. Further, the antireflection film may be a film that scatters light to suppress reflection by providing minute irregularities on the surface, or may be a film having both two layers and irregularities.
  • the antireflection film is a member that is transparent and has a function of preventing light reflection, and is an example of the "transparent antireflection member" of the present invention.
  • the camera 50 captures an external image of the luggage J through the transparent antireflection member provided on the hood 40 arranged on the entrance side of the inspection device 30.
  • the transparent antireflection member may be provided not only on the upper surface 411 of the hood 40 but also on the back upper surface 412 or only on the back upper surface 412. By providing the transparent antireflection member at these positions, the reflection of the camera 50 arranged above the hood 40 on the hood 40 is suppressed. Further, by providing the transparent antireflection member, it is possible to improve the sharpness of the image of the luggage photographed through the hood 40.
  • the owner P When the camera 50 is reflected in the hood 40, the owner P will be made aware of the existence of the camera 50, and as described above, some people may be anxious. In this embodiment, since this reflection is suppressed, it is possible to make it difficult for the owner P of the luggage J to notice the existence of the camera 50 and reduce the possibility of giving psychological anxiety to the owner P.
  • a transparent antireflection member may be provided not only on the upper surface portion 41 but also on the side surface portion 42 and the side surface portion 43. Further, a transparent antireflection member may be provided not only on the front surface of the side surface portion 42 and the side surface portion 43 but also on the back surface (the surface on the internal space B5 side). A transparent antireflection member may be provided on any surface by processing the surface itself to have the same structure as the antireflection film, instead of attaching the antireflection film.
  • the hood 40 is also provided with a transparent antireflection member on the side surface. As a result, it is possible to prevent the owner of the luggage from being reflected on the transparent hood and making it difficult to see the luggage.
  • the load J transported by the first transport device 10 reaches the downstream end of the transport direction A1 of the first transport device 10, it is subsequently transported by the second transport device 20.
  • the owner P proceeds to the second transport device 20 through the inspection lane B2 provided along the transport path B1 and receives the luggage J.
  • the transport speed of the second transport device 20 is slower than the transport speed of the first transport device 10, so that the owner P can easily receive the luggage J.
  • the inspector Q receives the baggage J before the owner P.
  • the control device 60 is a device that controls the operation of each device included in the inspection system 1.
  • the control device 60 is a computer including a processor such as a CPU (Central Processing Unit), a memory, a storage, a communication unit, and the like.
  • the control device 60 is electrically connected to the first transfer device 10, the second transfer device 20, the inspection device 30, and the display 70 by wiring (not shown).
  • the control device 60 controls the operation of each device while exchanging data with each electrically connected device.
  • the control device 60 performs an inspection process for inspecting whether or not the baggage J contains prohibited items. Specifically, the control device 60 may be prohibited from being brought into the baggage based on the photographing process of causing the inspection device 30 to photograph the baggage passing through the photographing area B4 and the transparent image taken by the photographing process.
  • the inspection process is a determination process for determining whether or not an object is included, that is, whether or not a secondary inspection by the inspector Q is necessary.
  • the control device 60 analyzes the shape of the contents contained in the baggage from the captured transparent image by a well-known image analysis method, and whether or not the contents are prohibited from being brought in from the analyzed shape by a method such as pattern matching. To judge.
  • the control device 60 causes the display 70 to display the determination result of the determination process and the transparent image and the appearance image of the luggage J as described above.
  • FIG. 3 shows an example of the displayed transparent image and external image.
  • the control device 60 causes the display surface 71 of the display 70 to display the transparent image G1 of the luggage J, the appearance image G2 of the luggage J, and the determination result C1.
  • the determination result C1 is an image showing the character string "A prohibited item has been detected.”
  • the knife-shaped contents in the luggage J are determined to be prohibited items.
  • the control device 60 analyzes the image taken by the camera 50 and recognizes an object passing on the transport path B1. Then, the control device 60 sets the camera at a time before the time when the transparent image G1 is taken (hereinafter referred to as “transparent shooting time”) and closest to the transparent shooting time (hereinafter referred to as “appearance shooting time”).
  • transparent shooting time a time before the time when the transparent image G1 is taken
  • applying shooting time a time before the time when the transparent shooting time
  • the object on the transport path B1 photographed by 50 is determined to be a baggage in which the transparent image G1 is photographed, and the appearance image G2 of the baggage is associated with the transparent image G1 and displayed at the same time.
  • the inspection system 1 captures the transparent image G1 and the external appearance image G2 of the luggage J that is being transported by transporting the luggage J, and displays the captured transparent image G1 and the external appearance image G2. It is linked to the display 70, which is a means, and displayed at the same time. As shown in FIG. 1, the display 70 is provided at a position where it can be viewed from a place where the inspector receives the photographed baggage J.
  • the inspector when the inspector is at the place where the baggage to be inspected for the secondary inspection is received, the inspector can see the baggage to be carried out for the secondary inspection only by looking at the display 70.
  • the appearance of the can be known from the appearance image.
  • the transport path B1 is arranged at a position about the height of a person's waist so that the baggage holder can easily place and receive the baggage. Therefore, the inspector also looks down on the luggage from above.
  • the camera 50 captures the appearance image of the luggage from the vertically upper side, it is easier for the inspector to identify the actual luggage indicated by the appearance image as compared with the case where the luggage is photographed from the horizontal direction, for example. Can be.
  • FIG. 4 shows an enlarged view of the periphery of the camera 50a of this modified example.
  • the camera 50a and the like seen from above vertically are shown.
  • the camera 50a captures an external image of the luggage J transported by the first transport device 10a.
  • the camera 50a is arranged in the internal space 32a of the housing 31a of the inspection device 30a.
  • the internal space 32a is provided on the inspection lane B2 side of the housing 31a through which the owner P passes.
  • the internal space 32a has an opening 33a that opens on the hood 40a side.
  • the camera 50a photographs the external space through the opening 33a.
  • the camera 50a is arranged at a position invisible from the inspection lane B2 side through which the owner P passes, rather than the camera 50a itself.
  • the camera 50a is invisible to the holder P passing through the inspection lane B2. Thereby, as in the embodiment, it is possible to prevent the owner P from being given psychological anxiety due to seeing the camera.
  • the camera 50a photographs the appearance of the luggage J as viewed from the horizontal direction through the side surface portion 43a of the hood 40a.
  • a transparent antireflection member such as an antireflection film is provided on either or both of the front surface and the back surface of the hood 40a hanging in the shooting direction of the camera 50a.
  • the surface hanging in the photographing direction is a surface located in the photographing direction, and the camera 50a photographs the luggage J through the surface.
  • the transparent antireflection member is provided on either or both of the front surface 431a and the back surface 432a of the side surface portion 43a of the hood 40a.
  • the housing 31 of the inspection device 30 is used as a shield for shielding the camera 50, but the present invention is not limited to this.
  • the camera 50 may be attached to the outside of the housing 31 of the inspection device 30 and a cover serving as a shield for shielding the camera 50 may be provided. Further, the camera 50 may be attached to the hood 40 to provide a similar cover.
  • At least a part of the camera 50 is shielded by a shield from a person who looks at the camera 50 from the inspection lane B2 side.
  • a shield By providing such a shield, it is possible to prevent the owner P from being given psychological anxiety due to seeing the camera as in the embodiment.
  • the inspection device 30 which is a device for capturing a transparent image as a shield as in the embodiment, the camera cannot be seen more naturally by the owner P as compared with the case where the shield is separately provided. Can be done.
  • the baggage inspection is performed at the event venue, but other than this, for example, it may be performed at the entrance of a vehicle such as an airport, a station, a port, a bus terminal, or a concert venue. It may be held at the entrance of facilities such as sports stadiums, stadiums and museums. In short, if it is necessary to check the contents of the luggage of the visitors at the entrance for safety, the luggage may be inspected at any place (entrance).
  • a vehicle such as an airport, a station, a port, a bus terminal, or a concert venue. It may be held at the entrance of facilities such as sports stadiums, stadiums and museums. In short, if it is necessary to check the contents of the luggage of the visitors at the entrance for safety, the luggage may be inspected at any place (entrance).
  • the number of transport devices is two, but it may be one.
  • the transport speed may be constant at all times, and when the number of packages to be inspected is small (for example, when only one package is inspected at one time), the transport speed is increased when the packages pass through the photographing area B4. After the baggage has passed through the photographing area B4, the transport speed may be slowed down.
  • FIG. 5 is a diagram showing an example of the configuration of the inspection system 2 according to the embodiment of the present invention.
  • the inspection system 2 is a system for inspecting a customer's luggage at the time of admission at a place such as a transportation facility, a concert hall, a public hall, etc., which provides a service to the admitted customer.
  • FIG. 5 shows an outline of how the inspection system 2 is looked down from above.
  • the inspection system 2 transports and inspects the luggage J of the owner P who is a customer who intends to enter the hall H from the outside L along the arrow shown in FIG.
  • the inspection system 2 includes a controller 21, an inspection device 22, a conveyor 23, a camera 24, and a display device 25.
  • the controller 21 is a means for controlling the operation of each part of the inspection system 2.
  • the controller 21 includes a processing unit such as a CPU (Central Processing Unit) and a storage device such as a ROM (Read Only Memory), a RAM (Random Access Memory), a solid state drive, and a hard disk drive, and stores in these storage devices.
  • the arithmetic processing unit executes the executed program.
  • the inspection device 22 is a device that continuously inspects the cargo J conveyed by the conveyor 23 under the control of the controller 21 by, for example, irradiating X-rays.
  • FIG. 5 the entrance where the luggage J of the inspection device 22 is carried in is shown downward, and the exit where the luggage J is carried out is shown upward.
  • the conveyor 23 is a device that conveys the luggage J placed by the owner P so that the inspection device 22 can inspect it.
  • the conveyor 23 carries the luggage J placed by the owner P into the entrance of the inspection device 22. Then, the conveyor 23 further conveys the baggage J carried into the inlet, passes the position to be inspected by the inspection device 22, and carries it out from the outlet of the inspection device 22.
  • the conveyor 23 is, for example, a belt conveyor. In FIG. 5, the conveyor 23 conveys the luggage J from the lower outside L to the upper inside H.
  • the conveyor 23 may be composed of, for example, an integrated belt conveyor. Further, the conveyor 23 is linked with a belt conveyor or the like divided into an upstream side in the transport direction from the inlet of the inspection device 22, an inside of the inspection device 22, and a downstream side in the transport direction from the outlet of the inspection device 22. It may be composed of.
  • the cover 26 is provided so as to cover the region from the inlet of the inspection device 22 toward the upstream in the transport direction of the conveyor 23. Further, in the example shown in FIG. 5, a cover 27 is provided so as to cover a region from the outlet of the inspection device 22 toward the downstream in the transport direction of the conveyor 23. Both the cover 26 and the cover 27 are made of transparent members, and the inside can be visually recognized from the outside.
  • the camera 24 is an imaging device that images an object, and includes, for example, an optical system including a lens, a reflector, a prism, and an imaging element such as a CMOS (Complementary Metal Oxide Semiconductor) or a CCD (Charge Coupled Device). It is a digital still camera.
  • an optical system including a lens, a reflector, a prism, and an imaging element such as a CMOS (Complementary Metal Oxide Semiconductor) or a CCD (Charge Coupled Device). It is a digital still camera.
  • CMOS Complementary Metal Oxide Semiconductor
  • CCD Charge Coupled Device
  • the camera 24 takes an image of the entrance where the luggage J of the inspection device 22 is carried in, and supplies image data showing the captured image (hereinafter, referred to as an entrance image S1 (see FIG. 6 and the like)) to the controller 21.
  • the inspection device 22 inspects the inside of the baggage J by seeing through, and controls image data showing an image showing the result of the inspection of the baggage J (hereinafter referred to as an inspection image S2 (see FIG. 7 or the like)). Supply to 21.
  • the display device 25 has a display screen such as a liquid crystal display, and displays an image according to the control of the controller 21.
  • a transparent touch panel that accepts operations by detecting contact / approach of an indicator such as a finger may be superposed.
  • the controller 21 When the controller 21 receives the supply of the image data indicating the entrance image S1 described above from the camera 24, the controller 21 sends a control signal for displaying the entrance image S1 to the display device 25 based on the image data.
  • the display device 25 receives the control signal from the controller 21, the display device 25 displays the above-mentioned entrance image S1 on the display screen in response to the control signal.
  • the controller 21 when the controller 21 receives the supply of the image data indicating the inspection image S2 described above from the inspection device 22, the controller 21 sends a control signal for displaying the inspection image S2 to the display device 25 based on the image data. ..
  • the display device 25 receives the control signal from the controller 21, the display device 25 displays the above-mentioned inspection image S2 on the display screen in response to the control signal.
  • the display screen of the display device 25 is directed to the inspector Q on the exit side of the inspection device 22, and the entrance image S1 and the inspection image S2 displayed on the display screen are visually recognized by the inspector Q.
  • the camera 24 images the entrance of the inspection device 22 through the transparent cover 26, and supplies image data indicating the captured entrance image S1 to the controller 21.
  • the controller 21 causes the display device 25 to display the entrance image S1 indicated by the supplied image data.
  • the display device 25 displays the entrance image S1 on the display screen, and the inspector Q confirms this.
  • the inspector Q confirms the inspection result of the baggage J by the inspection device 22, and at the same time, monitors the entrance of the inspection device 22 by the entrance image S1 captured by the camera 24.
  • FIG. 6 is a diagram showing an example of an entrance image S1 displayed on the display device 25 when the inspection device 22 does not detect an abnormality. While the inspection device 22 inspects the inside of the luggage J and does not detect an abnormality (that is, in normal times), the controller 21 displays the entrance image S1 supplied from the camera 24 on the display device 25 as shown in FIG. Display it.
  • the entrance image S1 is an image taken by the camera 24 of the luggage J being transported inside the cover 26.
  • the display device 25 displays the entrance image S1 in all areas U0 of the display screen.
  • the inspector Q monitors the entrance image S1 for example, and confirms whether or not there is an abnormality such as whether the baggage J is clogged or the user has accidentally put his or her hand in it.
  • the controller 21 receives the image data indicating the above-mentioned inspection image S2 as the inspection result. Then, the controller 21 causes the display device 25 to display the inspection image S2 indicated by the image data. That is, the controller 21 switches the displayed entrance image S1 to the inspection image S2 and displays it on the display device 25.
  • FIG. 7 is a diagram showing an example of an inspection image S2 displayed on the display device 25 when the inspection device 22 detects an abnormality.
  • the inspection device 22 analyzes the transmitted image obtained by irradiating the luggage J with X-rays and recognizes the shape and type of the contents of the luggage J.
  • the inspection device 22 recognizes the shape of a dangerous object (knife in the example of FIG. 7) in the contents of the baggage J, it determines that "an abnormality has been detected” and displays a warning on the transparent image of the baggage J, for example (FIG. 7).
  • the inspection image S2 in which “WARNING !!”) is written is generated and supplied to the controller 21.
  • the controller 21 When the controller 21 receives the inspection image S2 from the inspection device 22, the controller 21 displays the inspection image S2 on the display device 25. That is, when the inspection device 22 inspects the inside of the luggage J and detects an abnormality (that is, when an abnormality is detected), the controller 21 displays an image to be displayed on the display device 25 on the display device 25 as shown in FIG. To switch to the inspection image S2.
  • the inspection system 2 images the inside of the cover 26 with the camera 24, and the captured entrance image S1 is displayed on the display device 25 in real time.
  • the observer can confirm whether the cargo J carried by the conveyor 23 is not clogged at the entrance or the hand of the owner P is caught in the entrance.
  • the display of the display device 25 is switched, so that the inspector Q needs to pay attention only to the display screen of the display device 25.
  • the inspection device 22 supplies the inspection image S2 to the controller 21 at the time of abnormality detection, but the inspection image S2 may be supplied to the controller 21 other than at the time of abnormality detection.
  • the inspection device 22 may supply the inspection image S2 to the controller 21 every time the inspection result is obtained, regardless of whether the inspection result is abnormal or normal, for example.
  • the controller 21 preferentially displays the inspection image S2 on the display device 25 for a certain period of time at the timing when the inspection device 22 supplies the inspection image S2, and causes the display device 25 to display the other entrance image S1. .. That is, the controller 21 switches the entrance image S1 to the inspection image S2 and displays it on the display device 25 at the timing when the inspection result is obtained.
  • FIG. 8 is a diagram showing an example of the inspection image S2 displayed at the timing when the inspection result is obtained.
  • the controller 21 outputs the inspection result of the cargo J and supplies the inspection image S2 while the entrance image S1 shown in FIG. 6 is displayed on the display device 25, the controller 21 supplies the inspection image S2 for a certain period of time such as several seconds.
  • the inspection image S2 shown in FIG. 8 is displayed on the display device 25.
  • the controller 21 causes the display device 25 to display the original entrance image S1.
  • the inspector Q sees the inspection image S2 for a certain period of time at the timing when the inspection result is obtained, regardless of the content of the inspection.
  • the inspection image S2 is displayed at the timing when the inspection result is obtained, so that the inspector Q can easily find the abnormality.
  • FIG. 9 is a diagram showing an example of an entrance image S1 and an inspection image S2 simultaneously displayed by the display device 25.
  • the display screen of the display device 25 is divided into left and right halves, and the entrance image S1 is displayed in the left area U1 and the inspection image S2 is displayed in the right area U2.
  • the inspector Q simultaneously confirms the entrance image S1 and the inspection image S2.
  • the display device 25 divides the display screen into a rectangular area whose width and height are both half or less of the entire display screen and an area other than this area. Then, the display device 25 may simultaneously display the entrance image S1 and the inspection image S2 in these two regions having different areas. In this way, when the area of each area where the display screen is divided is different, the amount of information of the image that the inspector Q can see in detail differs for each area. It is desirable to display in a large area.
  • the display device 25 simultaneously displays, for example, the inspection image S2 in a region having a relatively small area and the entrance image S1 in a region having a relatively large area.
  • the inspector Q confirms the entrance image S1 and the inspection image S2 at the same time.
  • the inspector Q will monitor the entrance image S1 displayed in the area occupying a larger area than the area in which the inspection image S2 is displayed more carefully than the inspection image S2.
  • the controller 21 instructs the display device 25 to switch the display of the two divided areas.
  • the display device 25 simultaneously displays the entrance image S1 in a region having a relatively small area and the inspection image S2 in a region having a relatively large area.
  • the inspector Q confirms the entrance image S1 and the inspection image S2 at the same time.
  • the inspector Q monitors the inspection image S2 displayed in the area occupying a larger area than the area in which the entrance image S1 is displayed more carefully than the entrance image S1. Will be done.
  • the controller 21 switches the image to be displayed on the display device 25 when an abnormality is detected from the entrance image S1 to the inspection image S2. That is, in the above-described embodiment, the controller 21 switches the display of the display device 25 based on the inspection result of the baggage J inspected by the inspection device 22, but the owner P of the baggage J placed on the conveyor 23. The display of the display device 25 may be switched based on the mounting state.
  • FIG. 10 is a diagram for explaining the loading state of the luggage J.
  • the luggage J shown in FIG. 10 is a luggage such as a tote bag.
  • the height of the luggage J shown in FIG. 10 is larger than the height and width of the cover 26.
  • the cover 26 shown in FIG. 10 covers the transport path of the conveyor 23 on the inlet side of the inspection device 22.
  • the conveyor 23 conveys the load J placed on the transfer path in the direction of the arrow shown in FIG. 10, passes through the transfer space S surrounded by the cover 26 and the conveyor 23, and carries it into the entrance of the inspection device 22. To do.
  • FIG. 11 is a diagram showing an example of the entrance image S1 when there is an abnormality in the loading state of the luggage J. Since the luggage J rolls over in the width direction of the conveyor 23 before entering the transport space S, as shown in FIG. 11, the luggage J is not transported while being in contact with the upstream end of the cover 26.
  • the controller 21 analyzes the entrance image S1 supplied from the camera 24.
  • the controller 21 acquires, for example, the entrance image S1 at a relatively short fixed period such as 1 second, detects the contour of the object reflected on each entrance image S1, and identifies the change with time of the contour.
  • the state of the baggage J is analyzed by.
  • the controller 21 detects that the luggage J has not moved at the upstream end of the cover 26 for a predetermined period of time. As a result, the controller 21 determines that there is an abnormality in the loading state of the luggage J, and instructs the display device 25 to display the entrance image S1. That is, the inspection system 2 switches the display of the display device 25 based on the loading state of the luggage J placed on the conveyor 23 by the owner P. As a result, the inspector Q recognizes that the loading state of the luggage J is abnormal.
  • Each of the divided areas of the display screen may have attributes such as area, position, shape, thickness and color of the boundary line, and presence / absence of blinking. Further, these attributes may change depending on the inspection result of the luggage J and the degree of abnormality in the loading state of the luggage J.
  • the controller 21 or the inspection device 22 classifies the above-mentioned inspection results and mounting states into three stages such as “danger”, “caution”, and “monitoring required” according to the degree of the abnormality.
  • “danger” is a stage where the degree of abnormality is higher than "caution”
  • “caution” is a stage where the degree of abnormality is higher than “monitoring required”.
  • the controller 21 may adjust the attributes of each area so that the area for displaying important items becomes larger according to these stages.
  • the controller 21 assigns the display device 25 to the entrance image S1 and the inspection image S2, respectively, with the allocation shown in FIG. Is displayed.
  • the inspector Q sees the entrance image S1 and the inspection image S2 displayed in the areas of the same area, respectively, and pays equal attention to both of them.
  • the controller 21 tells the display device 25 according to the degree of each abnormality.
  • the display screen is divided into different areas. Then, the controller 21 displays the entrance image S1 and the inspection image S2 in each of the divided areas by changing the allocation.
  • the inspection image S2 showing the inspection result determined to be more dangerous is displayed in an area having a larger area.
  • the entrance image S1 showing the mounting state determined to be not dangerous is displayed in another area having a smaller area than the above-mentioned area.
  • the inspector Q pays more attention to the inspection image S2 than to the entrance image S1.
  • the cover 26 covers the region from the inlet of the inspection device 22 toward the upstream of the conveyor 23 in the transport direction
  • the cover 27 covers the region from the outlet of the inspection device 22 toward the downstream of the conveyor 23 in the transport direction. It was set up like this.
  • the inspection system 2 may be provided with only one of these covers. That is, the inspection system 2 may be provided with a cover at at least one of the entrance of the inspection device 22 and the exit of the inspection device 22 from which the luggage J is carried out.
  • the camera 24 may image the inside of these covers
  • the controller 21 may display the image captured by the camera 24 on the display device 25.
  • the cover 26 and the cover 27 are both made of transparent members, and all of the inside is visible from the outside, but at least a part of the inside is visible from the outside. May be good.
  • FIG. 12 is a diagram showing an example of a cover 26 in which a part of the inside is visible from the outside.
  • the cover 26 shown in FIG. 12 is composed of a plurality of wires 28 assembled in a grid pattern. Since there is no object in the gap region A between the wires 28, the inside of the cover 26 can be visually recognized. That is, in the cover 26 shown in FIG. 12, a part of the inside of the gap region A can be visually recognized from the outside.
  • FIG. 13 is a diagram showing an example in which the area of the inner wall surface of the cover 26 where the luggage J contacts is covered with the film 29.
  • the film 29 shown in FIG. 13 is a member made of a transparent material having a friction coefficient smaller than that of the material of the cover 26, and covers the area where the luggage J comes into contact with the inner wall surface of the cover 26.
  • the cover 26 is made of a material such as glass, acrylic resin, or polycarbonate resin
  • the luggage J is made of a leather or vinyl material, it is not slippery and easily clogged when it comes into direct contact.
  • the film 29 is made of a transparent material having a coefficient of friction smaller than that of the cover 26, the luggage J and the cover 26 do not come into direct contact with each other, and the luggage J slips even if it comes into contact with the film 29. Therefore, as shown in FIG. 13, the cover 26 is less likely to be clogged than when the cover 26 is not coated with the film 29.
  • the program executed by the controller 21 of the inspection system 2 is a recording medium that can be read by a computer device, such as a magnetic recording medium such as a magnetic tape or a magnetic disk, an optical recording medium such as an optical disk, an optical magnetic recording medium, or a semiconductor memory. Can be provided in a memorized state. It is also possible to download this program via a communication line such as the Internet.
  • a computer device such as a magnetic recording medium such as a magnetic tape or a magnetic disk, an optical recording medium such as an optical disk, an optical magnetic recording medium, or a semiconductor memory.
  • a communication line such as the Internet.
  • various devices other than the CPU may be applied, and for example, a dedicated processor or the like is used.
  • FIG. 14 shows the appearance of the inspection system 3 according to the embodiment.
  • FIG. 14A shows the inspection system 3 viewed from above vertically
  • FIG. 14B shows the inspection system 3 viewed from the horizontal direction.
  • the inspection system 3 is a system for inspecting whether or not a visitor brings in a prohibited item (prohibited item) such as a knife at a place where the person enters an event venue or the like.
  • the inspection system 3 inspects the luggage J1 shown in FIG. 14, for example.
  • the inspection system 3 is used by the inspector Q who performs the work related to the inspection.
  • the inspection system 3 includes a transport device 310, an inspection device 320, a camera 330, and a control device 340.
  • the transport device 310 is a belt conveyor that transports the cargo J1 in the transport direction A11, and forms a transport path D1.
  • an inspector Q is arranged on either the left or right side of the transport path D1, and an inspection lane through which the owner of the luggage J1 passes is provided on the opposite side of the inspector Q.
  • the inspection device 320 is a device that captures a transparent image through which the transported luggage is transmitted.
  • a transparent image is an image used for baggage inspection.
  • the inspection device 320 irradiates the baggage J1 passing through the transmission photographing region D2 for taking a transmission image in the own device with an electromagnetic wave, and draws an image drawn by shading according to the intensity of the electromagnetic wave transmitted through the baggage J1. It is generated as a transparent image of.
  • the electromagnetic wave emitted by the inspection device 320 to the baggage J1 is an electromagnetic wave in a frequency band that passes through the baggage J1 but has a different transmittance depending on the substance of the contents of the baggage J1, for example, X-rays.
  • a camera 330 is provided vertically above the entrance side of the inspection device 320.
  • the camera 330 has an image sensor that detects visible light, and photographs an imaged object represented by visible light.
  • the camera 330 is provided so as to fit the visible light photographing area D3 defined on the upstream side of the transmission photographing area D2 defined on the transport path D1 within the angle of view.
  • the camera 330 repeatedly captures an appearance image showing the appearance of the luggage J1 conveyed by the transport device 310 and passing through the visible light photographing region D3 in visible light.
  • the visible light photographing region D3 is an example of the "predetermined region" of the present invention.
  • the control device 340 is a device that controls the operation of each device included in the inspection system 3.
  • the control device 340 is a computer including a processor such as a CPU (Central Processing Unit), a memory, a storage, and a communication unit.
  • the control device 340 is electrically connected to the transfer device 310, the inspection device 320, and the camera 330 by wiring (not shown).
  • the control device 340 controls the operation of each device while exchanging data with each electrically connected device.
  • the control device 340 is also connected to a display and displays an image on the display.
  • the control device 340 by loading predetermined software (program) on hardware such as memory, the processor performs calculations, controls communication by each communication device, and reads and writes data in memory and storage.
  • the function shown in FIG. 15 is realized by controlling at least one of the above.
  • FIG. 15 shows the functional configuration realized by the control device 340.
  • the control device 340 includes a transport control unit 341, an appearance image acquisition unit 342, a transparent image acquisition unit 343, an arrival time identification unit 344, an image association unit 345, and an image display unit 346.
  • the transport control unit 341 controls the transport of the load J1 by the transport device 310.
  • the transport control unit 341 starts and ends the transport of the package J1 based on the operation of the inspector Q, for example.
  • the transfer control unit 341 rotates the belt conveyor so as to reach a predetermined transfer speed or a transfer speed set by the inspector Q.
  • the transport control unit 341 notifies the arrival time specifying unit 344 of the transport speed under control.
  • the appearance image acquisition unit 342 controls the camera 330 to repeatedly shoot the visible light photographing region D3, and acquires the appearance image of the luggage J1 passing through the visible light photographing region D3.
  • the appearance image acquisition unit 342 supplies the acquired appearance image to the arrival time specifying unit 344.
  • the transmission image acquisition unit 343 controls the inspection device 320 to repeatedly shoot the transmission imaging region D2, and acquires the transmission image of the baggage J1 passing through the transmission imaging region D2.
  • the transparent image acquisition unit 343 supplies the acquired transparent image to the arrival time specifying unit 344.
  • the arrival time specifying unit 344 is the time when the baggage J1 reaches the visible light photographing area D3 based on the time when the baggage J1 arrives at the transmission photographing area D2 (hereinafter referred to as “first arrival time”) (hereinafter referred to as “second arrival time”). Specify the time).
  • the arrival time specifying unit 344 specifies the time when the central region of the luggage J1 arrives at the reference position in the transmission photographing area D2 as the first arrival time, and the second arrival time of the luggage J1 based on the specified first arrival time. To identify.
  • FIG. 16 represent an example of a reference position and a central region.
  • the reference position E2 and the central region F1 of the transmission imaging region D2 are represented by alternate long and short dash lines, respectively.
  • the inspection device 320 and the camera 330 are not shown and are omitted in order to make the figure easier to see.
  • the reference position E2 is defined as a position where the distance between the front end and the rear end of the transmission direction A11 of the transmission photographing region D2 is the same L1.
  • a position centered on the transport direction A11 of the transmission photographing region D2 is defined.
  • a rectangular region including the center of the luggage J1 is defined as the central region F1.
  • the central region F1 an region in which the distance from the front end and the distance from the rear end of the transport direction A11 of the luggage J1 are the same L3 is defined.
  • a distance of a predetermined ratio of the length L2 in the transport direction A11 of the luggage J1 is determined.
  • the distance L3 the distance L2 ⁇ 0.4
  • the length L4 in the transport direction A11 of the central region F1 is the distance L2 ⁇ 0.2.
  • the central region F1 a region is defined in which the distances from the left and right ends of the transport device 310 in the width direction A12 (direction orthogonal to the transport direction A11) are the same L6.
  • the arrival time specifying unit 344 detects an object (baggage J1 in the example of FIG. 16) to be conveyed by using an image recognition technique from the transparent image repeatedly supplied from the transparent image acquisition unit 343.
  • the arrival time specifying unit 344 detects the baggage J1 from the transparent image.
  • the arrival time specifying unit 344 sets the coordinates of the front end and the rear end of the detected baggage J1 in the transport direction A11 based on the coordinate system set for the transparent image (for example, the two-dimensional coordinate system with the upper left corner of the transparent image as the origin). , Calculate the coordinates of the left and right ends of the luggage J1 in the width direction A12.
  • the arrival time specifying unit 344 calculates, for example, the coordinates of the four corners of the central region F1 as the coordinates of the central region F1 determined as described above from the calculated coordinates.
  • the arrival time specifying unit 344 calculates the coordinates of the central region F1 each time a transparent image is supplied, and as shown in FIG. 16C, even one of the calculated coordinates has reached the reference position E2 of the transparent photographing region D2.
  • the time is specified as the time when the central region F1 reaches the reference position E2, that is, the first arrival time.
  • the arrival time specifying unit 344 specifies the time when the front end of the transport direction A11 in the central region F1 reaches the reference position E2 as the first arrival time.
  • the arrival time specifying unit 344 stores in advance the distances related to the transmission photographing area D2 and the visible light photographing area D3.
  • FIG. 17 shows the transmission imaging region D2 and the visible light imaging region D3 in an enlarged manner.
  • the arrival time specifying unit 344 stores the distance L11 in the transport direction A11 between the reference position E2 in the transmission photographing area D2 and the reference position E3 in the visible light photographing area D3.
  • the reference position E3 is a position where the distance from the front end and the distance from the rear end of the visible light photographing region D3 are equal (both are the distance L12).
  • the arrival time specifying unit 344 determines the value obtained by dividing the distance L11 by the transport speed V1 notified from the transport control unit 341, and the time required for the package J1 to be transported from the reference position E3 to the reference position E2 (hereinafter referred to as). It is calculated as a value indicating (referred to as "transportation time").
  • the arrival time specifying unit 344 specifies the time retroactive by the transport time calculated from the specified first arrival time as the second arrival time.
  • the arrival time specifying unit 344 notifies the image associating unit 345 of the specified first arrival time and second arrival time.
  • the image associating unit 345 with the appearance image taken by the camera 330 based on the notified first arrival time and second arrival time, that is, the first arrival time and the second arrival time specified by the arrival time specifying unit 344. It is associated with the transparent image taken by the inspection device 320.
  • the image association unit 345 includes an external image of the luggage J1 taken by the camera 330 at the second arrival time specified by the arrival time specifying unit 344, and the first arrival specified by the arrival time specifying unit 344.
  • the transparent image of the luggage J1 taken by the inspection device 320 is associated with the time.
  • the image association unit 345 supplies the associated appearance image and transparent image to the image display unit 346.
  • the image display unit 346 displays both the supplied appearance image and the transparent image.
  • FIG. 18 shows an example of the displayed appearance image and transparent image.
  • the image display unit 346 displays the transparent image K1 and the external image K2 side by side on the inspector screen H1.
  • the inspector Q looks at the displayed transparent image and determines whether or not the visitors have brought in prohibited items.
  • the inspector Q sees the external image displayed together, distinguishes the baggage J1 coming out of the inspection device 320 from other baggage, and distinguishes it from other baggage. Pick up the luggage J1 from the transport path D1 and take it to the place for re-inspection to check the contents.
  • the control device 340 performs an association process of associating the acquired transparent image and the appearance image.
  • FIG. 19 shows an example of the operation of the control device 340 in the association processing.
  • the control device 340 (transfer control unit 341) conveys the load J1 by the transfer device 310 (step S11).
  • the control device 340 (appearance image acquisition unit 342) repeatedly captures and acquires an appearance image of the luggage J1 passing through the visible light photographing region D3 by the camera 330 (step S12).
  • the control device 340 (transmission image acquisition unit 343) repeatedly captures and acquires the transmission image of the baggage J1 passing through the transmission imaging region D2 by the inspection device 320 (step S13).
  • the control device 340 (arrival time specifying unit 344) specifies the time when the baggage J1 arrives at the transmission photographing area D2 as the first arrival time (step S14).
  • the control device 340 (arrival time specifying unit 344) specifies the time when the luggage J1 reaches the visible light photographing region D3 as the second arrival time (step S15).
  • control device 340 inspects the appearance image of the luggage J1 taken by the camera 330 at the second arrival time specified in step S15 and the first arrival time specified in step S14.
  • the transparent image of the luggage J1 taken by the device 320 is associated with the transparent image (step S16).
  • control device 340 image display unit 346) displays both the appearance image and the transparent image associated with each other (step S17).
  • the second arrival time when the baggage J1 reaches the visible light photographing area D3 is specified based on the first arrival time when the baggage J1 reaches the reference position E2 of the transmission photographing area D2. If the first arrival time and the transport speed of the luggage J1 are known, the second arrival time when the luggage J1 arrives at the visible light photographing area D3 where the distance from the reference position E2 is determined can be accurately specified. That is, according to the present embodiment, the transparent image and the image of the baggage taken at an appropriate timing can be associated with each other regardless of the state of the baggage J1.
  • the time when the central region F1 of the luggage J1 arrives at the reference position E2 is specified as the first arrival time.
  • the time when the front end of the baggage reaches the reference position E2 is set as the first arrival time
  • the baggage is a handbag or the like and the shoulder strap is extended forward long
  • a part of the baggage inclusions or Not all may appear in the transparent image.
  • the time when the baggage J1 reaches the visible light photographing area D3 (second arrival time) is specified based on the time when the baggage J1 reaches the transmission photographing area D2 (first arrival time).
  • the time when the luggage J1 reaches the transmission photographing region D2 is specified based on the time when the luggage J1 reaches the visible light photographing region D3.
  • the appearance image and the transparent image of the luggage J1 are supplied to the arrival time specifying unit 344.
  • the arrival time specifying unit 344 is more than the visible light photographing area D3 based on the time when the luggage J1 arrives at the visible light photographing area D3 of the transport path D1 (hereinafter referred to as “third arrival time”).
  • the time when the luggage J1 arrives at the transmission photographing area D2 on the downstream side of the transport path D1 (hereinafter referred to as the "fourth arrival time”) is specified.
  • the arrival time specifying unit 344 specifies the shooting time of the appearance image as the third arrival time when the luggage J1 is recognized from the central region of the appearance image taken by the camera 330.
  • FIGS. 20A to 20C represent an example of a photographed external image. Since the appearance image acquisition unit 342 repeatedly acquires the appearance image of the luggage J1, as shown in FIGS. 20A, 20B, 20C, the images in which the luggage J1 gradually moves in the transport direction A11 are the appearance images K11, K12, K13 ( When no distinction is made, it is acquired as "appearance image K10").
  • the central region F11 is represented as a region located at the center of the transport direction A11 of the external image K10.
  • the central region F11 is a region separated from the front end and the rear end of the transport direction A11 of the appearance image K10 by a distance L13 or more, respectively, and the length of the width direction A12 of the transport path D1 is the same as the length of the width direction A12 of the appearance image K10. It has become.
  • the luggage J1 has not yet reached the central region F11.
  • the front end of the luggage J1 reaches the central region F11, but only one-third of the entire luggage J1 reaches the central region F11.
  • FIG. 20C two-thirds of the entire luggage J1 reaches the central region F11.
  • the arrival time specifying unit 344 recognizes the luggage J1 from the central region F11, for example, when the central region F11 of the external image K10 includes a certain ratio (for example, two-thirds) of the luggage J1. Judge.
  • the arrival time specifying unit 344 specifies the time when the appearance image K13 is acquired as the third arrival time.
  • the arrival time specifying unit 344 calculates the transport time (the time required for the luggage J1 to be transported from the reference position E3 in the visible light photographing area D3 to the reference position E2 in the transmitted photographing area D2) in the same manner as in the third embodiment.
  • the time retroactive by the transport time calculated from the specified third arrival time is specified as the fourth arrival time.
  • the arrival time specifying unit 344 notifies the image matching unit 345 of the specified third arrival time and the fourth arrival time.
  • the image association unit 345 captures the transmitted image of the luggage J1 taken during the period corresponding to the notified third arrival time and the appearance of the luggage J1 photographed by the camera 330 at the time when the luggage J1 arrives at the visible light photographing area D3. Associate with the image.
  • the image mapping unit 345 sets, for example, the third arrival time itself as a period corresponding to the third arrival time.
  • the image associating unit 345 identifies the arrival time and the transparent image of the baggage J1 taken by the inspection device 320 at the third arrival time (period corresponding to the third arrival time) specified by the arrival time identification unit 344.
  • the appearance image of the luggage J1 taken by the camera 330 is associated with the fourth arrival time (the time when the luggage J1 arrives at the visible light photographing area D3) specified by the unit 344.
  • the baggage J1 is placed in the transmitted photographing area D2 where the distance from the visible light photographing area D3 is determined.
  • the fourth arrival time to arrive can also be accurately specified. That is, according to the present embodiment, as in the third embodiment, the transparent image and the image of the luggage taken at appropriate timings can be associated with each other regardless of the state of the luggage J1.
  • the shooting time of the external image is specified as the third arrival time.
  • the third embodiment it is possible to make it less likely that the inclusions of the luggage are not reflected in the transparent image, as compared with the case where the third arrival time is specified based on the front end of the luggage.
  • the method of determining the central region of the luggage is not limited to the above. ..
  • the distance from the front end and the distance from the rear end may not be exactly the same but may be slightly different. These are methods of determining the central area based on the distance from the edge of the load.
  • the central region based on the arrangement of the pixel group representing the luggage.
  • the area including the center of gravity of the pixel group representing the luggage is defined as the central area.
  • the center of gravity of the pixel group is a point represented by the average value of the x-coordinate and the average value of the y-coordinate of each pixel as coordinates.
  • 21A and 21B show an example of the central region of the luggage of this modification. In FIG. 21A, the center of gravity M11 of the luggage J1 and the central region F11 centered on the center of gravity M11 are shown.
  • Luggage J1 has a shape with a short handle J12 attached to the main body J11 that stores the contents.
  • the handle J12 since the handle J12 is short, the distance between the center of gravity M11 and the center point M12 at which the distances from both ends of the transport direction A11 and the width direction A12 are equal is short.
  • FIG. 21B the center of gravity M11a of the luggage J2 and the central region F12a centered on the center of gravity M11a are shown.
  • the luggage J2 has a shape in which a long handle J22 is attached to a main body J21 for storing the contents.
  • the luggage J2 since the rectangular main body J21 has an elongated handle J22, the distance between the center of gravity M11a and the center point M12a where the distances from both ends of the transport direction A11 and the width direction A12 are equal is the luggage J1. Longer than. Further, the longitudinal direction of the handle J22 is along the transport direction A11. When the center point of the luggage and the center of gravity are deviated from each other in the transport direction A11, the image of the transmission photographing region D2 used when specifying the first arrival time is also different.
  • FIG. 22A and 22B show an example of an image in the transmission photographing region D2.
  • the transparent image K31 taken when the center point M12a of the luggage J2 reaches the reference position E2 of the transparent photographing region D2 is shown.
  • the image of the main body J21 including the contents is close to the end of the transparent image K31, but the entire baggage J2 is included in the transparent image K31.
  • FIG. 22B the transparent image K32 taken when the center of gravity M11a of the luggage J2 reaches the reference position E2 of the transparent photographing region D2 is shown.
  • the image of the main body J21 including the contents is close to the center of the transparent image K32, but a part of the handle J22 protrudes from the transparent image K32.
  • the handle is not dangerous, but if it is known that a part of the handle does not appear in the transparent image, dangerous materials may be charged there.
  • the appearance image taken by the camera 330 at the specified second arrival time also shows the main body J21 of the luggage J2 at a place away from the center of the appearance image like the transparent image K31. This is fine if the external image captures the same range as the transparent image, but if the external image capture range is narrower than the transparent image capture range, the main body J21 of the luggage J2 may protrude from the external image. ..
  • the center point may be used in the transparent image, but the center of gravity may be used in the external image.
  • the arrival time specifying unit 344 transmits from the time when the baggage J2 arrives at the visible light photographing area D3 according to the amount of deviation from the reference position E2 of the transmitted image K31 of the central region F12 of the baggage J2 in the transmitted image K31. The time until the arrival time of the luggage J2 in the shooting area D2 is adjusted, and the adjusted time is used to specify the second arrival time.
  • the distance L21 between the center point M12a of the luggage J2 and the transport direction A11 of the central region F12 is the amount of deviation.
  • the arrival time specifying unit 344 calculates, for example, the time required to transport the distance L21, which is the amount of deviation at the current transfer speed (hereinafter referred to as “deviation time”). Further, the arrival time specifying unit 344 calculates the transport time (the time required for the package J2 to be transported from the reference position E3 to the reference position E2) in the same manner as in the third embodiment.
  • the arrival time specifying unit 344 adjusts by subtracting the calculated deviation time from the calculated transport time, and specifies the time retroactive from the first arrival time by the time obtained by subtraction as the second arrival time.
  • FIGS. 23A to 23D represent the inspection system 3b of this modified example.
  • a luggage J3 having a main body J31 containing the contents and a soft and elongated handle J32 connected to the main body J31 is represented.
  • the inspection system 3b is provided with an approach mechanism 350 that brings the handle J32, which is a portion extending outward from the main body J31 of the luggage J3, closer to the main body J31 on the upstream side of the visible light photographing region D3.
  • the approach mechanism 350 is an example of the "mechanism" of the present invention.
  • the approach mechanism 350 is a plate-like mechanism formed of a highly elastic material such as rubber, and has a contact portion 351 having elongated rod-shaped portions arranged at one end without a gap.
  • the approach mechanism 350 has a contact portion 351 fixed to a height where the lower end of the contact portion 351 is in contact with the transport device 310 on the upstream side of the visible light photographing region D3 as shown in FIG. 23B.
  • the handle J32 is dragged in the direction opposite to the transport direction A11 to approach the main body J31, and since it is elastic, it becomes the transport direction A11. Pass the main body J31.
  • the approach mechanism 350 makes it easier to show the main part of the baggage in the external image while making the entire baggage appear in the transparent image as compared with the case where the approach mechanism 350 is not provided. Can be.
  • the inspection device 320 and the camera 330 for photographing the luggage are used, but in addition to these, a sensor for detecting an object may be used.
  • FIG. 24 shows the inspection system 3c of this modified example.
  • the inspection system 3c includes an object detection sensor 360 on the upstream side of the visible light photographing region D3 in the transport direction A11.
  • the object detection sensor 360 has a light emitting unit 361 and a light receiving unit 362.
  • the light emitting unit 361 and the light receiving unit 362 are provided so as to face one end and the other end of the width direction A12 of the transport device 310.
  • the object is not detected while the light receiving unit 362 receives the light emitted by the light emitting unit 361, and the object is detected when the amount of light received by the light receiving unit 362 decreases by a certain amount or more.
  • the object detection sensor 360 is provided at a position where an object is detected in the visible light photographing region D3.
  • the arrival time specifying unit 344 is based on the period during which the object detection sensor 360 that detects the presence of an object in the visible light photographing region D3 is detecting the object (hereinafter referred to as “detection period”). The first arrival time when the luggage reaches the visible light photographing area D3 is specified.
  • FIG. 25 shows an example of the detection status of an object.
  • the object detection sensor 360 detects an object during the detection period T1 from time t1 to t2.
  • the arrival time specifying unit 344 specifies, for example, the time in the middle of the detection period T1 (the time when half of the detection period T1 has elapsed from the time t1) as the first arrival time.
  • the luggage is transparent or reflects like a mirror, it may be difficult to recognize the luggage from the captured external image. According to this modification, even if it is difficult to recognize the luggage from the external image, if the object can be detected by the object detection sensor 360, the time when the luggage arrives in the visible light photographing area D3 can be specified. Can be done.
  • the type of inspection performed by the inspection system 3 is not limited to that described in the third embodiment or the fourth embodiment.
  • an inspection may be performed in which a transmitted image is taken by millimeter waves or terahertz waves instead of X-rays.
  • an inspection for detecting a liquid contained in baggage (a suspected explosive), an inspection for detecting a trace of an explosive called a trace, or the like may be performed.
  • the admissions inspection system is equipped with an inspection device that performs each inspection and performs those inspections. In short, any inspection may be performed as long as it is an inspection for detecting prohibited items and preventing danger at the venue.
  • Appearance image acquisition unit 343 ... Transparent image acquisition unit, 344 ... Arrival time identification unit, 345 ... Image association unit, 346 ... Image display unit, 350 ... Approach mechanism, 351 ... Contact unit, 360 ... Object detection sensor, 361. ... light emitting part, 362 ... light receiving part, 411 ... upper surface, 412 ... back upper surface.

Abstract

本発明は、検査装置による荷物の検査において、危険物が検出された荷物を容易に特定可能とする技術を提供する。本発明の一実施例において、検査装置(30)は、搬送される荷物(J)を透過させた透過画像を撮影する装置である。フード(40)は、荷物(J)の搬送路を覆う部材であり、電磁波が飛び交う撮影領域(B4)に所持者(P)の手が入り込まないようにするために設けられている。カメラ(50)は、第1搬送装置(10)によって搬送される荷物(J)の外観を示す外観画像を撮影する。荷物検査システム(1)は、制御装置(60)の制御により、荷物(J)を搬送して搬送中の荷物(J)の透過画像及び外観画像を撮影し、撮影した透過画像及び外観画像を表示手段であるディスプレイ(70)に紐付けして同時に表示させる。

Description

検査システム
 本発明は、検査対象物を検査する技術に関する。
 検査対象物を検査する技術として、特許文献1には、荷物用レーンを移動する荷物用床板と人用レーンを移動する人用床板とを略同じ速度で移動させることで効率的な荷物検査を行う技術が開示されている。
特開2019-11981号公報
 従来空港等で使用されている手荷物検査装置は、複数の係員が配置され、低速度で荷物を搬送して時間をかけた検査が行われている。その一方で、テロ攻撃のターゲットがイベント会場、交通機関、オフィスビル、ホテルなどと多様化しており、空港レベルのセキュリティでなくとも現状に近いスループットを維持しつつ安全性を向上させ、利便性の高いセキュリティのニーズが高まっている。
 イベント会場向けの手荷物検査装置においては、設置スペースが限られており空港のように複数の係員を配置することが困難である場合が多い。その為、ハイスループットで手荷物検査を行う為には、少人数の検査員で対応可能な検査装置が求められる。しかしながら、従来の手荷物検査装置は、装置を操作する人、画面を見る人、利用者の手荷物を受取り、検査装置に投入する人、検査済みの手荷物を受け取り利用者に渡す人などが必要な構成となっており、少人数の検査員では対応できないという問題があった。
 少人数の検査員で対応するためには、検査の効率化が必要である。例えば、検査装置が荷物の中の危険物を検出した場合、検査員は2次検査を行うことになるが、その際、危険物が検出された荷物を探すのに手間取れば、それだけ時間が無駄になってしまう。
 本発明は、上記の背景に鑑み、危険物が検出された荷物を容易に特定可能とすることを目的とする。
 上述した課題を解決するために、本発明は、連続して稼働するベルトコンベヤにより搬送される荷物を、検査装置により検査する検査システムであって、前記検査装置の荷物の入口側の外観画像を撮影するカメラを備える検査システムを第1の態様として提供する。
 第1の態様の検査システムによれば、カメラが撮影する画像により、危険物が検出された荷物を容易に特定できる。
 上記の第1の態様の検査システムにおいて、前記カメラが、荷物の所持者が通過するレーン側から視覚的に遮蔽された位置に配置されている、という構成が第2の態様として採用されてもよい。
 第2の態様の検査システムによれば、カメラが見えることによる心理的不安を荷物の所持者に与えないようにすることができる。
 上記の第1の態様の検査システムにおいて、前記検査装置の入口側に配置された可視光を透過し且つ光の反射を低減する透明反射防止部材を備え、前記カメラは前記透明反射防止部材を通して荷物の外観画像を撮影する、という構成が第3の態様として採用されてもよい。
 第3の態様の検査システムによれば、カメラがフード等の光を反射する部材に映り込んで荷物の所持者に心理的不安を与える、という可能性を低くすることができる。
 上記の第3の態様の検査システムにおいて、前記透明反射防止部材が、前記検査装置の入口側に配置された透明フードの2つの面の少なくとも一方に設けられている、という構成が第4の態様として採用されてもよい。
 第4の態様の検査システムによれば、透明フードの上方に配置されたカメラの映り込みを抑制することができる。
 上記の第3の態様の検査システムにおいて、前記透明反射防止部材が、前記カメラの撮影方向に掛かる透明フードの2つの面の少なくとも一方に設けられている、という構成が第5の態様として採用されてもよい。
 第5の態様の検査システムによれば、カメラの位置にかかわらず透明フードへのカメラの映り込みを抑制することができる。
 上記の第1の態様の検査システムにおいて、前記カメラが撮影した画像と前記検査装置の検査結果とを同時又は切り替えて表示装置に表示させる表示制御手段を備える、という構成が第6の態様として採用されてもよい。
 第6の態様の検査システムによれば、検査システムの検査員が、荷物の検査結果と検査装置に投入される荷物の外観の両方を見ることができるため、検査装置の入口側で検査装置に投入される荷物を目視で監視する監視員を別途、配置する必要がない。
 上記の第6の態様の検査システムにおいて、前記表示制御手段は、前記検査装置の検査結果又は前記ベルトコンベヤに載置した荷物の載置状態に基づいて、前記表示装置に前記カメラが撮影した画像と前記検査装置の検査結果の表示の切り替えを行わせる、という構成が第7の態様として採用されてもよい。
 第7の態様の検査システムによれば、検査システムの検査員は、荷物の載置状態に応じて必要な場合に、その載置状態を確認できる。
 上記の第6又は第7の態様の検査システムにおいて、前記検査装置の入口に配置されたカバーを備え、前記カメラは前記カバーの内側を撮影する、という構成が第8の態様として採用されてもよい。
 第8の態様の検査システムによれば、検査装置の入口において、利用者の手等が巻き込まれる可能性を抑制することができる。
 上記の第8の態様の検査システムにおいて、前記カバーは、外側から少なくとも内側の一部が視認可能である、という構成が第9の態様として採用されてもよい。
 第9の態様の検査システムによれば、検査員は、カメラがカバー越しに撮影した画像によりカバーの内側を監視できる。
 上記の第8又は第9の態様の検査システムにおいて、前記カバーは、荷物が接触する領域が前記カバーよりも摩擦の小さい部材で覆われている、という構成が第10の態様として採用されてもよい。
 第10の態様の検査システムによれば、荷物がカバーに接触して詰まり、その搬送が滞る可能性が抑制される。
 上記の第1の態様の検査システムにおいて、前記検査装置の検査領域に荷物が到達した時刻に基づき当該荷物が前記カメラの撮影領域内の所定領域に到達した時刻を特定し、当該時刻に前記カメラが撮影した画像と前記検査装置の検査結果とを対応付ける対応付手段を備える、という構成が第11の態様として採用されてもよい。
 第11の態様の検査システムによれば、荷物の状態によらず適切なタイミングで検査装置により行われた検査の結果を荷物の画像に対応付けることができる。
 上記の第11の態様の検査システムにおいて、前記対応付手段は、前記検査領域内の基準位置に荷物の中央領域が到達した時刻に基づき当該荷物が前記所定領域に到達した時刻を特定する、という構成が第12の態様として採用されてもよい。
 第12の態様の検査システムによれば、荷物の端が基準位置に到達した時刻に基づく場合に比べて、検査結果に荷物の内包物が映らない事態を起こりにくくすることができる。
 上記の第12の態様の検査システムにおいて、前記検査装置は荷物の透過画像を撮影し、前記対応付手段は、前記検査装置が撮影した透過画像における荷物の中央領域の当該透過画像の基準位置からのずれ量に応じて、前記所定領域に当該荷物が到達した時刻から前記検査領域に当該荷物が到達した時刻までの時間を調整し、当該調整した時間を用いて当該荷物が前記所定領域に到達した時刻を特定する、という構成が第13の態様として採用されてもよい。
 第13の態様の検査システムによれば、透過画像に荷物の全体が映るようにしつつ、所定領域で撮影される画像に荷物の要部が映りやすいようにすることができる。
 上記の第11の態様の検査システムにおいて、前記カメラの撮影領域内の所定領域に荷物が到達した時刻に基づき前記検査領域に当該荷物が到達する時刻を特定し、当該時刻に応じた前記検査装置の検査結果と前記所定領域に当該荷物が到達した時刻に前記カメラが撮影した画像とを対応付ける対応付手段を備える、という構成が第14の態様として採用されてもよい。
 第14の態様の検査システムによれば、荷物の状態によらず適切なタイミングで検査装置により行われた検査の結果を荷物の画像に対応付けることができる。
 上記の第14の態様の検査システムにおいて、前記カメラは前記所定領域を繰り返し撮影し、前記対応付手段は、前記カメラが撮影した画像に対し認識処理を行い、当該画像の中央領域から荷物を認識した場合、当該画像の撮影時刻を、当該荷物が前記所定領域に到達した時刻として特定する、という構成が第15の態様として採用されてもよい。
 第15の態様の検査システムによれば、荷物の端が到達した時刻に基づいて特定を行う場合に比べて、所定領域に荷物が到達した時刻の特定精度を向上させることができる。
 上記の第14の態様の検査システムにおいて、前記対応付手段は、前記所定領域に物体があることを検知するセンサが物体を検知している期間に基づいて、荷物が前記所定領域に到達した時刻を特定する、という構成が第16の態様として採用されてもよい。
 第16の態様の検査システムによれば、撮影された画像から荷物が認識しにくい場合でも所定領域に荷物が到達した時刻を特定することができる。
 上記の第14の態様の検査システムにおいて、前記所定領域より荷物の搬送方向の上流側において荷物の本体から外側に延伸している部分を当該本体に近付ける機構を備える、という構成が第17の態様として採用されてもよい。
 第17の態様の検査システムによれば、本態様の機構を備えない場合に比べて、透過画像に荷物の全体が映るようにしつつ、所定領域で撮影される画像に荷物の要部が映りやすいようにすることができる。
第1実施例に係る検査システムの外観を表す図。 第1実施例に係る検査システムの外観を表す図。 第1実施例に係るカメラの周辺を拡大して表す図。 第1実施例に係る表示された透過画像及び外観画像の一例を表す図。 第1実施例の変形例に係るカメラの周辺を拡大して表す図。 第2実施例に係る検査システムの構成の例を示す図。 第2実施例に係る異常を検知していないときに表示される入口画像の例を示す図。 第2実施例に係る異常を検知したときに表示される検査画像の例を示す図。 第2実施例の変形例に係る検査結果が出るタイミングで表示される検査画像の例を示す図。 第2実施例の変形例に係る同時に表示される入口画像及び検査画像の例を示す図。 第2実施例の変形例に係る荷物の載置状態を説明するための図。 第2実施例の変形例に係る荷物の載置状態に異常があるときの入口画像の例を示す図。 第2実施例の変形例に係る外側から内側の一部が視認可能なカバーの例を示す図。 第2実施例の変形例に係るカバーで荷物が接触する領域が膜で覆われている例を示す図。 第3実施例に係る入場検査システムの外観を表す図。 第3実施例に係る入場検査システムの外観を表す図。 第3実施例に係る検査システムの機能構成を表す。 第3実施例に係る検査システムにおける基準位置及び中央領域の一例を表す図。 第3実施例に係る検査システムにおける基準位置及び中央領域の一例を表す図。 第3実施例に係る検査システムにおける基準位置及び中央領域の一例を表す図。 第3実施例に係る検査システムの透過撮影領域及び可視光撮影領域を拡大して表す図。 第3実施例に係る検査システムにより表示された外観画像及び透過画像の一例を表す図。 第3実施例に係る検査システムの制御装置の対応付け処理における動作の一例を表す図。 第4実施例に係る検査システムにより撮影された外観画像の一例を表す図。 第4実施例に係る検査システムにより撮影された外観画像の一例を表す図。 第4実施例に係る検査システムにより撮影された外観画像の一例を表す図。 第3実施例の変形例に係る荷物の中央領域の例を表す図。 第3実施例の変形例に係る荷物の中央領域の例を表す図。 第3実施例の変形例に係る検査システムの透過撮影領域の画像の例を表す図。 第3実施例の変形例に係る検査システムの透過撮影領域の画像の例を表す図。 第3実施例の変形例に係る検査システムを表す図。 第3実施例の変形例に係る検査システムを表す図。 第3実施例の変形例に係る検査システムを表す図。 第3実施例の変形例に係る検査システムを表す図。 第4実施例の変形例に係る検査システムを表す図。 第4実施例の変形例に係る検査システムにより物体の検知状況の一例を表す図。
[第1実施例]
 図1A及び図1B(以下、これらの図を図1と総称する)は本発明の第1実施例に係る検査システム1の外観を表す。検査システム1は、例えばイベント会場において入場者の荷物にナイフ等の持ち込みが禁止されている物(持ち込み禁止物)が含まれていないかを検査装置により検査するシステムである。図1では、荷物Jが検査の対象となる例を示している。
 検査システム1は、荷物Jの所持者Pと、検査に関する作業を行う検査員Qとによって利用される。検査システム1は、入場口の広さに応じて複数設置される場合があるが、本実施例では、いずれの検査システム1にも1人の検査員Qだけが配置されるいわゆるワンオペレーションが実施されている。図1Aでは鉛直上方から見た検査システム1が表され、図1Bでは水平方向に見た検査システム1が表されている。
 検査システム1は、第1搬送装置10と、第2搬送装置20と、検査装置30と、フード40と、カメラ50と、制御装置60と、ディスプレイ70とを備える。第1搬送装置10及び第2搬送装置20は、いずれも、荷物Jを搬送方向A1に搬送するベルトコンベヤである。つまり、荷物Jは、連続して稼働するベルトコンベヤにより搬送される。第1搬送装置10及び第2搬送装置20は、搬送方向A1に並べて配置され、搬送路B1を形成している。
 検査システム1においては、搬送路B1の左右のいずれかに検査員Qが配置されており、検査員Qとは反対側に荷物Jの所持者Pが通過する検査レーンB2が設けられている。第1搬送装置10は、第2搬送装置20の上流側に配置されており、所持者Pが荷物Jを置く置き場所B3が設けられている。置き場所B3に置かれた荷物が搬送される搬送路B1の先にはフード40と、フード40の下流側に検査装置30とが設置されている。
 検査装置30は、搬送される検査対象物を透過させた透過画像を撮影する装置である。透過画像は荷物の検査のために用いられる画像であり、検査装置30の検査の結果を示す。検査装置30は、例えば自装置内で透過画像を撮影する撮影領域B4を通過する荷物Jに対し電磁波を照射し、荷物Jを透過した電磁波の強度に応じた濃淡により描かれる画像を荷物Jの透過画像として生成する。検査装置30が荷物Jに照射する電磁波は、荷物Jを透過するが荷物Jの内容物の物質に応じて透過率が異なる周波数帯域の電磁波であり、例えばX線である。
 検査装置30が撮影した透過画像に基づく1次検査で持ち込み禁止物の可能性がある物が写っていたと判定された場合、検査員Qは荷物Jを開けて実際に何が入っているかを確認する2次検査を行う。この2次検査の要否の判定は、撮影された透過画像を元に制御装置60が行う。詳しい判定方法については後ほど説明する。
 検査装置30の撮影領域B4よりも搬送方向A1の上流側には、フード40が配置されている。フード40は、荷物Jの搬送路を覆う透明な部材であり、電磁波が飛び交う撮影領域B4に所持者Pの手が入り込まないようにするために設けられている。フード40は本発明の「透明フード」の一例である。
 フード40は、上面部41、側面部42及び側面部43を有する。上面部41、側面部42及び側面部43は、それぞれ四角形の板状の形をしている。上面部41、側面部42及び側面部43により搬送方向A1に直行する方向の断面がコの字形状に形成されたフード40の内部空間B5は、荷物Jが通過可能な大きさとなっている。検査装置30の搬送方向A1の上流側で、上面部41の鉛直上方には、カメラ50が設けられている。
 図2はカメラ50の周辺を拡大して表す。カメラ50は、第1搬送装置10によって搬送される荷物Jの外観を示す外観画像を撮影する。カメラ50は、検査装置30の筐体31の内部空間32に配置され、筐体31の鉛直下向きに開口する開口部33を介して外部空間を撮影する。カメラ50は、この外部空間を通過する荷物Jの検査装置30入口側の外観画像を撮影する。
 図2に表す配置により、検査装置30の一部である筐体31は、荷物Jの所持者Pが通過する検査レーンB2側から検査装置30の方を見る者に対してカメラ50を遮蔽する(見えなくする)遮蔽物として機能する。厳密には、検査レーンB2側からでも、開口部33を鉛直下側から覗き込めばカメラ50の一部が見える場合があるが、カメラ50の全体は見えず、必ず一部は遮蔽される。さらに、筐体31よりも高い位置から見た場合は、カメラ50の全体が遮蔽される。
 このように、カメラ50は、荷物Jの所持者Pが通過する検査レーンB2側から視覚的に遮蔽された位置に配置されている。カメラ50が所持者Pから見えると、人によっては、何が撮影されているのか気になって不安になる場合がある。本実施例では、カメラ50が遮蔽物である筐体31によって図2に表すように遮蔽されることで、カメラ50が見えることによる心理的不安を所持者Pに与えないようにすることができる。
 カメラ50は、フード40によって囲まれた内部空間B5を通過中の荷物Jの外観を、フード40の上面部41越しに撮影する。そのため、上面部41は、可視光を透過する部材によって形成されている。また、上面部41のカメラ50側を向いた上面411は、光の反射を抑制する加工が施されており、その加工により、単純に平面に加工されている場合に比べて、光の反射を抑制するようになっている。
 上面411は、例えば、反射防止フィルムを貼り付ける加工が施されている。反射防止フィルムは、例えば、2層のフィルムであり、その2層で反射する光が逆位相になって干渉により打ち消し合うことで反射を抑制する。また、反射防止フィルムは、表面に微小な凹凸を設けることで光を散乱させて反射を抑制するフィルムであってもよいし、2層と凹凸の両方を備えるフィルムであってもよい。
 反射防止フィルムは、透明であり且つ光の反射を防止する機能を有する部材であり、本発明の「透明反射防止部材」の一例である。このように、カメラ50は、検査装置30の入口側に配置されたフード40に設けられた透明反射防止部材を通して荷物Jの外観画像を撮影する。
 なお、透明反射防止部材は、フード40の上面411だけに限らず、裏上面412にも設けられてもよいし、裏上面412だけに設けられてもよい。これらの位置に透明反射防止部材が設けられることで、フード40の上方に配置されたカメラ50のフード40への映り込みが抑制される。また、透明反射防止部材が設けられることで、フード40を介して撮影する荷物の映りの鮮明度を向上させることができる。
 カメラ50がフード40へ映り込むと、所持者Pにカメラ50の存在を気付かせることになり、上述したように人によっては不安になる場合がある。本実施例では、この映り込みが抑制されるので、荷物Jの所持者Pがカメラ50の存在に気付きにくいようにして、所持者Pに心理的不安を与える可能性を低くすることができる。
 フード40においては、上面部41だけでなく、側面部42及び側面部43にも透明反射防止部材が設けられていてもよい。また、側面部42及び側面部43の表面だけでなく、裏面(内部空間B5側の面)にも透明反射防止部材が設けられていてもよい。なお、いずれの面も、反射防止フィルムが貼り付けるのではなく、面自体が反射防止フィルムと同じ構造に加工されることで透明反射防止部材が設けられてもよい。
 以上のとおり、フード40は、側面にも透明反射防止部材が設けられている。これにより、透明フードに荷物の所持者自身が映りこんで荷物が見えにくくなることを抑制することができる。第1搬送装置10によって搬送された荷物Jは、第1搬送装置10の搬送方向A1の下流の端まで到達すると、続いて第2搬送装置20によって搬送される。
 所持者Pは、搬送路B1に沿って設けられた検査レーンB2を通って第2搬送装置20のところまで進み、荷物Jを受け取る。第2搬送装置20の搬送速度は第1搬送装置10の搬送速度よりも遅くなっており、所持者Pが荷物Jを受け取りやすいようにしている。ただし、上述した2次検査が行われる場合は、所持者Pより先に検査員Qが荷物Jを受け取ることになる。
 上述した制御装置60による2次検査の判定方法について説明する。制御装置60は、検査システム1が備える各装置の動作を制御する装置である。制御装置60は、CPU(Central Processing Unit)等のプロセッサ、メモリ、ストレージ及び通信部等を備えるコンピュータである。制御装置60は、第1搬送装置10、第2搬送装置20、検査装置30及びディスプレイ70と図示せぬ配線で電気的に接続されている。
 制御装置60は、電気的に接続された各装置とデータのやり取りを行いながら各装置の動作を制御する。制御装置60は、荷物Jに持ち込み禁止物が含まれているか否かを検査するための検査処理を行う。具体的には、制御装置60は、撮影領域B4を通過する荷物を検査装置30に撮影させる撮影処理と、撮影処理により撮影された透過画像に基づいて、荷物に持ち込み禁止物の可能性がある物が含まれているか否か、すなわち検査員Qによる2次検査が必要か否かを判定する判定処理とを検査処理として行う。
 制御装置60は、撮影された透過画像から周知の画像解析手法により荷物に含まれる内容物の形状を解析し、解析した形状からパターンマッチング等の手法により内容物が持ち込み禁止物であるか否かを判定する。制御装置60は、判定処理の判定結果と、上述したとおり荷物Jについて撮影された透過画像及び外観画像とを、ディスプレイ70に表示させる。
 図3は表示された透過画像及び外観画像の一例を表す。制御装置60は、図3の例では、ディスプレイ70の表示面71に、荷物Jの透過画像G1と、荷物Jの外観画像G2と、判定結果C1とを表示させている。判定結果C1は、「持ち込み禁止物を検出しました。」という文字列を示す画像である。図3の例では、荷物Jの中にあるナイフの形をした内容物が持ち込み禁止物と判定されている。
 制御装置60は、カメラ50が撮影する画像を解析して搬送路B1上を通過する物体を認識する。そして、制御装置60は、透過画像G1が撮影された時刻(以下「透過撮影時刻」と言う)よりも前で且つその透過撮影時刻に最も近い時刻(以下「外観撮影時刻」と言う)にカメラ50が撮影した搬送路B1上の物体を透過画像G1が撮影された荷物と判断し、その荷物の外観画像G2を透過画像G1と紐付けして同時に表示させる。
 以上のとおり、検査システム1は、制御装置60の制御により、荷物Jを搬送して搬送中の荷物Jの透過画像G1及び外観画像G2を撮影し、撮影した透過画像G1及び外観画像G2を表示手段であるディスプレイ70に紐付けして同時に表示させる。ディスプレイ70は、図1に表すように、撮影後の荷物Jを検査員が受け取る場所から視聴可能な位置に設けられている。
 以上のとおり、検査員は、2次検査をすべき荷物を受け取る場所にいる場合に、ディスプレイ70を見るだけで、透過画像G1に持ち込み禁止物が写っていれば、2次検査をすべき荷物の外観を外観画像によって知ることができる。このように、本実施例によれば、透過画像及び外観画像が同じ表示手段に紐付けして同時に表示されない場合に比べて、2次検査すべき検査対象物を見つけやすくすることができる。
 搬送路B1は、荷物の所持者が荷物を置いたり受け取ったりしやすいように、人の腰の高さ程度の位置に配置されている。そのため、検査員も荷物を上から見下ろすことになる。本実施例では、カメラ50が鉛直上方側から荷物の外観画像を撮影するため、例えば水平方向側から荷物を撮影する場合に比べて、外観画像が示す荷物の実物を検査員が特定しやすいようにすることができる。
[第1実施例の変形例]
 上述した第1実施例は本発明の実施の一例に過ぎず、以下のように変形させてもよい。また、以下の変形例の2以上が必要に応じて組み合わされてもよい。
[変形例1]
 外観画像を撮影するカメラの配置は実施例と異なっていてもよい。
 図4は本変形例のカメラ50aの周辺を拡大して表す。図4では、鉛直上方から見たカメラ50a等が表されている。カメラ50aは、第1搬送装置10aによって搬送される荷物Jの外観画像を撮影する。
 カメラ50aは、検査装置30aの筐体31aの内部空間32aに配置されている。内部空間32aは、筐体31aのうち、所持者Pが通過する検査レーンB2側に設けられている。内部空間32aは、フード40a側に開口する開口部33aを有する。カメラ50aは、開口部33aを介して外部空間を撮影する。このように、カメラ50aは、カメラ50a自身よりも所持者Pが通過する検査レーンB2側からは見えない位置に配置されている。
 従って、カメラ50aは、検査レーンB2を通過中の所持者Pからは見えないようになっている。これにより、実施例と同様に、カメラが見えることによる心理的不安を所持者Pに与えないようにすることができる。カメラ50aは、水平方向から見た荷物Jの外観を、フード40aの側面部43a越しに撮影する。
 本変形例では、反射防止フィルム等の透明反射防止部材が、カメラ50aの撮影方向に掛かるフード40aの表面又は裏面のいずれか又は両方に設けられる。撮影方向に掛かる面とは、撮影方向に位置する面のことであり、カメラ50aはその面を通して荷物Jを撮影する。図4の例であれば、透明反射防止部材は、フード40aの側面部43aの表面431a又は裏面432aのいずれか又は両方に設けられる。
 これにより、実施例と同様に、荷物Jの所持者Pがカメラ50aの存在に気付きにくいようにして、所持者Pに心理的不安を与える可能性を低くすることができる。また、透明反射防止部材が、カメラ50aの撮影方向に掛かるフード40aに設けられることで、カメラ50aの位置にかかわらずフード40aへのカメラの映り込みを抑制することができる。
[変形例2]
 実施例では、検査装置30の筐体31がカメラ50を遮蔽する遮蔽物として用いられたが、これに限らない。例えば、検査装置30の筐体31の外部にカメラ50を取り付けて、そのカメラ50を遮蔽する遮蔽物となる覆いが設けられてもよい。また、カメラ50をフード40に取り付けて同様の覆いが設けられてもよい。
 いずれの場合でも、検査レーンB2側からカメラ50の方を見る者からカメラ50の少なくとも一部が遮蔽物によって遮蔽されるようになっていればよい。そのような遮蔽物を設けることで、実施例と同様にカメラが見えることによる心理的不安を所持者Pに与えないようにすることができる。なお、実施例のように透過画像を撮影する装置である検査装置30の一部を遮蔽物として用いることで、遮蔽物を別途設ける場合に比べて、より自然にカメラを所持者Pから見えないようにすることができる。
[変形例3]
 実施例では、荷物の検査がイベント会場で行われる場合を説明したが、これ以外にも、例えば、空港、駅、港及びバスターミナル等の乗り物の入場口で行われてもよいし、コンサート会場、スポーツ競技場、スタジアム及び美術館等の施設の入場口で行われてもよい。要するに、入場口において安全のため入場者の荷物の中身を確認する必要があれば、どのような場所(入場口)で荷物の検査が行われてもよい。
[変形例4]
 実施例では、搬送装置が2つであったが1つであってもよい。その場合、搬送速度は常に一定であってもよいし、検査する荷物が少ない場合(例えば一時点では1つの荷物しか検査しない場合)、荷物が撮影領域B4を通過する際は搬送速度を速くし、荷物が撮影領域B4を通過した後は搬送速度を遅くしてもよい。
[第2実施例]
[検査システムの構成]
 図5は、本発明の一実施形態に係る検査システム2の構成の例を示す図である。検査システム2は、交通機関やコンサートホール、公会堂等、入場した客にサービスを提供する場所において、その入場の際に客の荷物を検査するシステムである。
 図5には、検査システム2を上から見下ろした様子の概略が示されている。検査システム2は、図5に示す矢印に沿って場外Lから場内Hへ入場しようとする客である所持者Pの荷物Jを搬送して検査する。検査システム2は、コントローラ21、検査装置22、コンベヤ23、カメラ24、及び表示装置25を備える。
 コントローラ21は、検査システム2の各部の動作を制御する手段である。コントローラ21は、CPU(Central Processing Unit)等の演算処理装置や、ROM(Read Only Memory)、RAM(Random Access Memory)、ソリッドステートドライブ、ハードディスクドライブ等の記憶装置を備え、これらの記憶装置に記憶されたプログラムを演算処理装置が実行する。
 検査装置22は、コントローラ21の制御の下でコンベヤ23により搬送される荷物Jを、例えばX線を照射することにより連続して検査する装置である。図5において、検査装置22の荷物Jが搬入される入口は下方向に、荷物Jが搬出される出口は上方向に、それぞれ示されている。
 コンベヤ23は、所持者Pにより載置された荷物Jを検査装置22に検査させるために搬送する装置である。コンベヤ23は、所持者Pが載置した荷物Jを検査装置22の入口に搬入する。そして、コンベヤ23は、入口に搬入した荷物Jをさらに搬送して検査装置22により検査を受ける位置を通過させ、検査装置22の出口から搬出する。コンベヤ23は、例えばベルトコンベヤである。図5において、コンベヤ23は、下側の場外Lから上側の場内Hに向かって荷物Jを搬送する。
 なお、コンベヤ23は、例えば一体のベルトコンベヤによって構成されていてもよい。また、コンベヤ23は、検査装置22の入口から搬送方向の上流側と、検査装置22の内部と、検査装置22の出口から搬送方向の下流側と、にそれぞれ分かれたベルトコンベヤ等が連携することで構成されていてもよい。
 図5に示す例では、検査装置22の入口からコンベヤ23の搬送方向の上流に向かう領域を覆うようにカバー26が設けられている。また、図5に示す例では、検査装置22の出口からコンベヤ23の搬送方向の下流に向かう領域を覆うようにカバー27が設けられている。カバー26及びカバー27はいずれも透明の部材で構成され、外側から内側が視認可能である。
 カメラ24は、対象物を撮像する撮像装置であり、例えば、レンズ、反射鏡、プリズム等を含む光学系と、CMOS(Complementary Metal Oxide Semiconductor)やCCD(Charge Coupled Device)等の撮像素子とを備えたデジタルスチルカメラである。
 カメラ24は、検査装置22の荷物Jが搬入される入口を撮像し、撮像した画像(以下、入口画像S1(図6等参照)という)を示す画像データをコントローラ21に供給する。
 また、検査装置22は、荷物Jの内部を透視することにより検査して、その荷物Jの検査の結果を示す画像(以下、検査画像S2(図7等参照)という)を示す画像データをコントローラ21に供給する。
 表示装置25は、液晶ディスプレイ等の表示画面を有しており、コントローラ21の制御に応じて画像を表示する。表示装置25の表示画面の上には、指等の指示体の接触・接近等を感知することにより操作を受け付ける透明のタッチパネルが重ねて配置されてもよい。
 コントローラ21は、カメラ24から、上述した入口画像S1を示す画像データの供給を受けると、この画像データに基づいて、表示装置25にこの入口画像S1を表示させるための制御信号を送る。表示装置25は、コントローラ21からこの制御信号を受けると、この制御信号に応じて上述した入口画像S1を表示画面に表示する。
 また、コントローラ21は、検査装置22から、上述した検査画像S2を示す画像データの供給を受けると、この画像データに基づいて、表示装置25にこの検査画像S2を表示させるための制御信号を送る。表示装置25は、コントローラ21からこの制御信号を受けると、この制御信号に応じて上述した検査画像S2を表示画面に表示する。
 表示装置25の表示画面は、検査装置22の出口側にいる検査員Qに向けられており、表示画面に表示される入口画像S1及び検査画像S2は、検査員Qにより視認される。
[検査システムの動作]
 以下に検査システムの動作の例を説明する。図5に示す検査員Qは、場外Lから場内Hに入ってくる所持者Pに対して、例えば引き留めや再検査の促しといった荷物Jの検査結果に応じた対応をする必要があるため、検査装置22の出口側に立っている。そのため、検査員Qからは、透明なカバー27を介して検査装置22の出口が見えるが、入口が検査装置22の影(死角)になって見えない。
 カメラ24は検査装置22の入口を、透明なカバー26を介して撮像して、撮像した入口画像S1を示す画像データをコントローラ21に供給する。コントローラ21は、供給された画像データが示す入口画像S1を表示装置25に表示させる。表示装置25は表示画面に入口画像S1を表示し、検査員Qはこれを確認する。これにより、検査員Qは、検査装置22による荷物Jの検査結果を確認すると同時に、検査装置22の入口を、カメラ24で撮像した入口画像S1により監視する。
 図6は、検査装置22が異常を検知していないときに表示装置25に表示される入口画像S1の例を示す図である。コントローラ21は、検査装置22が荷物Jの内部を検査して異常を検知しない間(すなわち、平常時)には、図6に示す通り、カメラ24から供給される入口画像S1を表示装置25に表示させる。
 この入口画像S1は、カバー26の内側で荷物Jが搬送される様子をカメラ24が撮像したものである。図6に示す例では、表示装置25は、表示画面の全ての領域U0に入口画像S1を表示する。検査員Qは、例えば、この入口画像S1を監視して荷物Jが詰まっていたり、利用者が誤って手等を入れていたりしていないか、といった異常の有無を確認する。
 一方、コントローラ21は、検査装置22が異常を検知すると、上述した検査画像S2を示す画像データを検査結果として受け取る。そして、コントローラ21は、この画像データが示す検査画像S2を表示装置25に表示させる。つまり、コントローラ21は、表示されていた入口画像S1を検査画像S2に切り替えて表示装置25に表示させる。
 図7は、検査装置22が異常を検知したときに表示装置25に表示される検査画像S2の例を示す図である。検査装置22は、荷物JにX線を照射して得られた透過画像を解析して、荷物Jの内容物の形状・種別を認識する。検査装置22は、荷物Jの内容物に危険物(図7の例ではナイフ)の形状を認識すると、「異常を検知した」と判定して、例えば荷物Jの透過画像に警告の表示(図7の例では「WARNING!!」)を書き込んだ検査画像S2を生成しコントローラ21に供給する。
 コントローラ21は、検査装置22から検査画像S2を受け取ると、この検査画像S2を表示装置25に表示させる。つまり、コントローラ21は、検査装置22が荷物Jの内部を検査して異常を検知したとき(すなわち、異常検知時)に、図7に示す通り、表示装置25に表示させる画像を、入口画像S1から検査画像S2に切り替える。
 以上、説明した通り、検査システム2は、カメラ24でカバー26の内部を撮像し、撮像された入口画像S1がリアルタイムで表示装置25に表示される。これにより、監視員は、コンベヤ23で搬送される荷物Jが、入口で詰まったり、所持者Pの手が入口に巻き込まれたりしていないかを確認できる。また、検査装置22が危険物を検知すると、表示装置25の表示が切り替わるので検査員Qは表示装置25の表示画面のみに注意していればよい。
 そして、この検査システム2によれば、検査装置22の出口側のみに検査員Qを配置していれば、検査装置22の入口側を目視で監視する他の監視員は不要である。
[第2実施例の変形例]
 上述した第2実施例は本発明の実施の一例に過ぎず、以下のように変形させてもよい。また、以下の変形例の2以上が必要に応じて組み合わされてもよい。
[変形例1]
 上述した第2実施例において、検査装置22は、異常検知時に検査画像S2をコントローラ21に供給していたが、異常検知時以外にも、検査画像S2をコントローラ21に供給してもよい。検査装置22は、例えば、検査結果の異常/正常に関わらず、検査結果が出る度に検査画像S2をコントローラ21に供給してもよい。
 この場合、コントローラ21は、検査装置22が検査画像S2を供給したタイミングで、この検査画像S2を優先的に一定時間にわたって表示装置25に表示させ、その他は入口画像S1を表示装置25に表示させる。つまり、コントローラ21は検査結果が出るタイミングで、入口画像S1を検査画像S2に切り替えて表示装置25に表示させる。
 図8は、検査結果が出るタイミングで表示される検査画像S2の例を示す図である。コントローラ21は、図6に示した入口画像S1を表示装置25に表示させているときに検査装置22が荷物Jの検査結果を出し、検査画像S2を供給すると、例えば数秒間等の一定時間にわたって、図8に示した検査画像S2を表示装置25に表示させる。そして、この一定時間が経過するとコントローラ21は、元の入口画像S1を表示装置25に表示させる。これにより、検査員Qは、例えば、検査結果が出るタイミングで一定時間にわたり、検査の内容に関わらず検査画像S2を見る。その結果、例えば検査装置22による検査に漏れがあったとしても、検査結果が出るタイミングで検査画像S2が表示されるため、検査員Qが異常を発見しやすくなる。
[変形例2]
 上述した第2実施例において、コントローラ21は、表示装置25に、入口画像S1と検査画像S2とを切り替えて表示させていたが、これらを同時に表示させてもよい。図9は、表示装置25により同時に表示される入口画像S1及び検査画像S2の例を示す図である。表示装置25の表示画面は、図9に示す通り左右半分ずつに分割され、左側の領域U1には入口画像S1が、右側の領域U2には検査画像S2が、それぞれ表示される。これにより、検査員Qは、入口画像S1と検査画像S2とを同時に確認する。
[変形例3]
 また、表示装置25が表示画面に入口画像S1と検査画像S2とを同時に表示させる場合、それぞれを表示する領域の面積、位置、形状、境界線の太さや色、明滅の有無等の属性は異なっていてもよい。
 例えば表示装置25は、表示画面を、幅及び高さが共に表示画面全体の半分以下である矩形の領域と、この領域以外の領域とに分割する。そして、表示装置25は、面積の異なるこれら2つの領域に、それぞれ入口画像S1と検査画像S2とを同時に表示させればよい。このように、表示画面を分割した各領域の面積が異なっている場合、検査員Qが詳細に見ることができる画像の情報量が領域ごとに異なるから、より注意深く監視する必要がある画像を、面積の大きい領域に表示することが望ましい。
 表示装置25は、例えば検査画像S2を比較的面積の小さい領域に、入口画像S1を比較的面積の大きい領域に、それぞれ同時に表示する。
 これにより、検査員Qは、入口画像S1と検査画像S2とを同時に確認する。検査員Qは、検査画像S2が表示された領域に比べて大きな面積を占める領域に表示された入口画像S1の方を、検査画像S2よりも注意深く監視することとなる。
[変形例4]
 表示装置25が表示画面に入口画像S1と検査画像S2とを同時に表示させる場合に、検査装置22により異常が検知されたか否かに応じて、分割された2つの領域にそれぞれ表示させる画像を切り替えてもよい。
 例えば、検査装置22が異常を検知してコントローラ21にその旨を通知すると、コントローラ21は、分割した2つの領域の表示を入れ替えるよう表示装置25に指示する。その結果、表示装置25は、入口画像S1を比較的面積の小さい領域に、検査画像S2を比較的面積の大きい領域に、それぞれ同時に表示する。
 これにより、検査員Qは、入口画像S1と検査画像S2とを同時に確認する。検査員Qは、検査装置22が異常を検知した後において、入口画像S1が表示された領域に比べて大きな面積を占める領域に表示された検査画像S2の方を、入口画像S1よりも注意深く監視することとなる。
[変形例5]
 上述した実施形態において、コントローラ21は、異常検知時に表示装置25に表示させる画像を、入口画像S1から検査画像S2に切り替えていた。つまり、上述した実施形態において、コントローラ21は、検査装置22が検査した荷物Jの検査結果に基づいて表示装置25の表示を切り替えていたが、所持者Pがコンベヤ23に載置した荷物Jの載置状態に基づいて表示装置25の表示を切り替えてもよい。
 図10は、荷物Jの載置状態を説明するための図である。図10に示す荷物Jはトートバッグ等の荷物である。図10に示す荷物Jの高さは、カバー26の高さ及び幅に比べて大きい。図10に示すカバー26は、検査装置22の入口側で、コンベヤ23の搬送路の上を覆っている。コンベヤ23は、搬送路の上に載置された荷物Jを、図10に示す矢印方向に搬送し、カバー26とコンベヤ23とで囲われる搬送空間Sを通過させて検査装置22の入口に搬入する。
 従って、図10に示すこの荷物Jは、長手方向が搬送方向に沿うように載置しなければ、カバー26の高さ方向や幅方向で接触して詰まる可能性が高い。
 図11は、荷物Jの載置状態に異常があるときの入口画像S1の例を示す図である。この荷物Jは、搬送空間Sに入る前にコンベヤ23の幅方向に横転したため、図11に示す通り、カバー26の上流端で接触したまま搬送されなくなっている。
 コントローラ21は、カメラ24から供給される入口画像S1を解析する。コントローラ21は、例えば入口画像S1を1秒等の比較的短い一定期間ごとに取得してそれぞれの入口画像S1に対して映り込んだ物体の輪郭を検出し、その輪郭の経時変化を特定することにより、荷物Jの状態を解析する。
 図11に示す入口画像S1を解析すると、コントローラ21は、カバー26の上流端で所定期間にわたって荷物Jが移動していないことを検知する。その結果、コントローラ21は荷物Jの載置状態に異常があると判定し、この入口画像S1を表示するよう表示装置25に指示する。すなわち、検査システム2は、所持者Pがコンベヤ23に載置した荷物Jの載置状態に基づいて表示装置25の表示を切り替える。これにより、検査員Qは、荷物Jの載置状態に異常があることを認識する。
[変形例6]
 表示画面の分割された各領域は、面積、位置、形状、境界線の太さや色、明滅の有無等の属性が変化するものであってもよい。また、これらの属性は、荷物Jの検査結果や荷物Jの載置状態の異常の程度に応じて変化するものであってもよい。
 例えば、コントローラ21又は検査装置22は、上述した検査結果や載置状態を、その異常の程度に合わせて「危険」「注意」「要監視」といった3段階等に分類する。ここで、「危険」は、「注意」よりも異常の程度が高い段階であり、「注意」は「要監視」よりも異常の程度が高い段階である。コントローラ21は、これらの段階に応じて、重要なものを表示させる領域ほど面積が大きくなるように、各領域の属性を調整すればよい。
 例えば、上述した検査結果及び載置状態の異常の程度がいずれも「要監視」に分類されれば、コントローラ21は、表示装置25に図9に示した割当でそれぞれ入口画像S1及び検査画像S2を表示させる。この場合、検査員Qは、それぞれ等しい面積の領域に表示された入口画像S1及び検査画像S2を見るので、この両方に等しく注意を払う。
 一方、検査結果の異常の程度が「危険」に、載置状態の異常の程度が「要監視」に、それぞれ分類されると、コントローラ21は、表示装置25に、それぞれの異常の程度に応じた領域に表示画面を分割させる。そして、コントローラ21は、分割した各領域に、割当を変えて入口画像S1及び検査画像S2を表示させる。
 すなわち、より危険である(異常の程度が高い)、と判断された検査結果を示す検査画像S2は、より面積の大きい領域に表示される。一方、検査結果に比べて危険ではない(異常の程度が低い)、と判断された載置状態を示す入口画像S1は、上述した領域よりも面積の小さい別の領域に表示される。この場合、検査員Qは、入口画像S1よりも検査画像S2に、より多くの注意を払うこととなる。
[変形例7]
 上述した実施形態において、カバー26が検査装置22の入口からコンベヤ23の搬送方向の上流に向かう領域を、カバー27が検査装置22の出口からコンベヤ23の搬送方向の下流に向かう領域を、それぞれ覆うように設けられていた。検査システム2には、これらカバーのいずれかのみが設けられてもよい。すなわち、検査システム2は、検査装置22の入口及び、荷物Jが搬出される検査装置22の出口の少なくとも一方にカバーを設けてもよい。この場合、カメラ24は、これらカバーの内側を撮像し、コントローラ21は、カメラ24が撮像した画像を表示装置25に表示させてもよい。
[変形例8]
 上述した実施形態において、カバー26及びカバー27は、いずれも透明の部材で構成されており、外側から内側の全てが視認可能であったが、外側から少なくとも内側の一部が視認可能であってもよい。
 図12は、外側から内側の一部が視認可能なカバー26の例を示す図である。図12に示すカバー26は、格子状に組まれた複数のワイヤー28で構成されている。ワイヤー28同士の隙間領域Aは、物体がないため、カバー26の内部が視認可能である。つまり、図12に示すカバー26では、隙間領域Aの外側から内側の一部が視認可能である。
[変形例9]
 また、カバー26又はカバー27は、その内壁面で荷物Jが接触する領域がこれらよりも摩擦の小さい部材で覆われていてもよい。図13は、カバー26の内壁面で荷物Jが接触する領域が膜29で覆われている例を示す図である。図13に示す膜29は、カバー26の材料よりも摩擦係数が小さい透明の材料で形成された部材であり、カバー26の内壁面で荷物Jが接触する領域を覆っている。
 例えば、カバー26がガラスやアクリル樹脂、ポリカーボネート樹脂等の材料で形成されている場合、荷物Jが皮革やビニル系の素材で形成されていると直接、接触した場合に滑りにくく、詰まりやすい。
 膜29は、カバー26の材料よりも摩擦係数が小さい透明の材料で形成されているため、荷物Jとカバー26とが直接に接触することはなく、荷物Jは膜29と接触しても滑るため図13に示す通りカバー26を膜29でコーティングしていない場合に比べて詰まりにくい。
[変形例10]
 検査システム2のコントローラ21によって実行されるプログラムは、磁気テープや磁気ディスク等の磁気記録媒体、光ディスク等の光記録媒体、光磁気記録媒体、半導体メモリ等の、コンピュータ装置が読み取り可能な記録媒体に記憶された状態で提供し得る。また、このプログラムを、インターネット等の通信回線経由でダウンロードさせることも可能である。なお、上述したコントローラ21によって例示した制御手段としてはCPU以外にも種々の装置が適用される場合があり、例えば、専用のプロセッサ等が用いられる。
[第3実施例]
 図14A及び図14B(以下、これらの図を図14と総称する)は実施例に係る検査システム3の外観を表す。図14Aでは鉛直上方から見た検査システム3が表され、図14Bでは水平方向に見た検査システム3が表されている。
 検査システム3は、例えばイベント会場等に入場する場所において、ナイフ等の持ち込みが禁止されている物(持ち込み禁止物)を入場者が持ち込んでないかどうかを検査するためのシステムである。検査システム3は、例えば図14に表す荷物J1に対して検査を行う。検査システム3は、検査に関する作業を行う検査員Qによって利用される。
 検査システム3は、搬送装置310と、検査装置320と、カメラ330と、制御装置340とを備える。搬送装置310は、荷物J1を搬送方向A11に搬送するベルトコンベヤであり、搬送路D1を形成している。検査システム3においては、搬送路D1の左右のいずれかに検査員Qが配置されており、検査員Qとは反対側に荷物J1の所持者が通過する検査レーンが設けられている。
 検査装置320は、搬送される荷物を透過させた透過画像を撮影する装置である。透過画像は手荷物の検査のために用いられる画像である。検査装置320は、例えば自装置内で透過画像を撮影する透過撮影領域D2を通過する荷物J1に対し電磁波を照射し、荷物J1を透過した電磁波の強度に応じた濃淡により描かれる画像を荷物J1の透過画像として生成する。検査装置320が荷物J1に照射する電磁波は、荷物J1を透過するが荷物J1の内容物の物質に応じて透過率が異なる周波数帯域の電磁波であり、例えばX線である。
 検査装置320の入口側の鉛直上方には、カメラ330が設けられている。カメラ330は、可視光を検出するイメージセンサを有し、可視光によって表される撮影対象を撮影する。カメラ330は、搬送路D1に定められた透過撮影領域D2よりも上流側に定められた可視光撮影領域D3を画角に収めるように設けられている。カメラ330は、搬送装置310によって搬送されて可視光撮影領域D3を通過する荷物J1の外観を可視光で示す外観画像を繰り返し撮影する。可視光撮影領域D3は本発明の「所定領域」の一例である。
 制御装置340は、検査システム3が備える各装置の動作を制御する装置である。制御装置340は、CPU(Central Processing Unit)等のプロセッサ、メモリ、ストレージ及び通信部等を備えるコンピュータである。制御装置340は、搬送装置310、検査装置320及びカメラ330と図示せぬ配線で電気的に接続されている。制御装置340は、電気的に接続された各装置とデータのやり取りを行いながら各装置の動作を制御する。
 また、制御装置340は、ディスプレイにも接続されており、そのディスプレイに画像を表示する。制御装置340は、メモリなどのハードウェア上に所定のソフトウェア(プログラム)を読み込ませることによって、プロセッサが演算を行い、各々の通信装置による通信を制御したり、メモリ及びストレージにおけるデータの読み出し及び書き込みの少なくとも一方を制御したりすることによって図15に表す機能を実現する。
 図15は制御装置340が実現する機能構成を表す。制御装置340は、搬送制御部341と、外観画像取得部342と、透過画像取得部343と、到達時刻特定部344と、画像対応付け部345と、画像表示部346とを備える。搬送制御部341は、搬送装置310による荷物J1の搬送を制御する。搬送制御部341は、例えば、検査員Qの操作に基づき荷物J1の搬送を開始し、終了する。
 搬送制御部341は、搬送の開始後は予め決められた搬送速度又は検査員Qにより設定された搬送速度になるようにベルトコンベヤを回転させる。搬送制御部341は、制御中の搬送速度を到達時刻特定部344に通知する。外観画像取得部342は、カメラ330を制御して、可視光撮影領域D3を繰り返し撮影させ、可視光撮影領域D3を通過する荷物J1の外観画像を取得する。外観画像取得部342は、取得した外観画像を到達時刻特定部344に供給する。
 透過画像取得部343は、検査装置320を制御して、透過撮影領域D2を繰り返し撮影させ、透過撮影領域D2を通過する荷物J1の透過画像を取得する。透過画像取得部343は、取得した透過画像を到達時刻特定部344に供給する。到達時刻特定部344は、透過撮影領域D2に荷物J1が到達した時刻(以下「第1到達時刻」と言う)に基づきその荷物J1が可視光撮影領域D3に到達した時刻(以下「第2到達時刻」と言う)を特定する。
 到達時刻特定部344は、透過撮影領域D2内の基準位置に荷物J1の中央領域が到達した時刻を第1到達時刻として特定し、特定した第1到達時刻に基づきその荷物J1の第2到達時刻を特定する。
 図16A~図16C(以下、これらの図を図16と総称する)は基準位置及び中央領域の一例を表す。図16では、透過撮影領域D2の基準位置E2及び中央領域F1がそれぞれ二点鎖線で表されている。なお、図16では、図を見やすくするため検査装置320及びカメラ330は図示せず省略している。
 図16の例では、基準位置E2として、透過撮影領域D2の搬送方向A11の前端との距離と後端との距離が同じL1になる位置が定められている。言い換えると、基準位置E2として、透過撮影領域D2の搬送方向A11の中心となる位置が定められている。また、図16の例では、中央領域F1として、荷物J1の中心を含む矩形の領域が定められている。具体的には、中央領域F1として、荷物J1の搬送方向A11の前端からの距離及び後端からの距離が同じL3になる領域が定められている。
 距離L3としては、例えば、荷物J1の搬送方向A11の長さL2の所定の割合の距離が定められる。例えば、所定の割合を40%とした場合は、距離L3=距離L2×0.4となり、中央領域F1の搬送方向A11の長さL4が距離L2×0.2となる。また、中央領域F1として、搬送装置310の幅方向A12(搬送方向A11に直交する方向)の左右の端からの距離が同じL6になる領域が定められている。
 距離L6としては、例えば、荷物J1の幅方向A12の長さL5の所定の割合の距離が定められる。例えば、所定の割合を40%とした場合は、距離L6=距離L5×0.4となり、中央領域F1の幅方向A12の長さL7が距離L5×0.2となる。到達時刻特定部344は、透過画像取得部343から繰り返し供給される透過画像から画像認識技術を用いて搬送される物体(図16の例では荷物J1)を検出する。
 図16Aでは、荷物J1が透過撮影領域D2よりも手前にあるため荷物J1の検出がまだ行われない。図16Bでは、荷物J1の全体が透過撮影領域D2に含まれるようになっているため、到達時刻特定部344が透過画像から荷物J1を検出する。到達時刻特定部344は、透過画像について設定された座標系(例えば透過画像の左上角を原点とする二次元座標系)に基づき、検出した荷物J1の搬送方向A11の前端及び後端の座標と、荷物J1の幅方向A12の左右の端の座標とを算出する。
 到達時刻特定部344は、算出した座標から上記のとおり定めた中央領域F1の座標として、例えば中央領域F1が有する4つの角の座標を算出する。到達時刻特定部344は、透過画像が供給されるたびに中央領域F1の座標を算出し、図16Cに表すように、算出した座標のうち1つでも透過撮影領域D2の基準位置E2に到達した時刻を中央領域F1が基準位置E2に到達した時刻、すなわち第1到達時刻として特定する。
 つまり、到達時刻特定部344は、中央領域F1の搬送方向A11の前端が基準位置E2に到達した時刻を第1到達時刻として特定する。到達時刻特定部344は、予め透過撮影領域D2及び可視光撮影領域D3に関する距離を記憶しておく。
 図17は透過撮影領域D2及び可視光撮影領域D3を拡大して表す。到達時刻特定部344は、透過撮影領域D2の基準位置E2と可視光撮影領域D3の基準位置E3との搬送方向A11の距離L11を記憶しておく。
 図17の例では、基準位置E3は、可視光撮影領域D3の前端からの距離と後端からの距離が等しくなる(どちらも距離L12となる)位置である。到達時刻特定部344は、搬送制御部341から通知された搬送速度V1で距離L11を除算して得られる値を、基準位置E3から基準位置E2まで荷物J1が搬送されるのに要する時間(以下「搬送時間」と言う)を示す値として算出する。
 到達時刻特定部344は、特定した第1到達時刻から算出した搬送時間だけ遡った時刻を第2到達時刻として特定する。到達時刻特定部344は、特定した第1到達時刻及び第2到達時刻を画像対応付け部345に通知する。画像対応付け部345は、通知された第1到達時刻及び第2到達時刻、すなわち到達時刻特定部344により特定された第1到達時刻及び第2到達時刻に基づき、カメラ330が撮影した外観画像と検査装置320が撮影した透過画像とを対応付ける。
 画像対応付け部345は、具体的には、到達時刻特定部344により特定された第2到達時刻にカメラ330が撮影した荷物J1の外観画像と、到達時刻特定部344により特定された第1到達時刻に検査装置320が撮影した荷物J1の透過画像とを対応付ける。画像対応付け部345は、対応付けた外観画像及び透過画像を画像表示部346に供給する。画像表示部346は、供給された外観画像及び透過画像を共に表示する。
 図18は表示された外観画像及び透過画像の一例を表す。図18の例では、画像表示部346が、検査員画面H1に、透過画像K1と外観画像K2とを並べて表示している。検査員Qは、表示された透過画像を見て、持ち込み禁止物を入場者が持ち込んでないかどうかを判断する。図18の例では持ち込み禁止物であるナイフが持ち込まれているので、検査員Qは、共に表示された外観画像を見て、検査装置320から出てきた荷物J1を他の荷物から見分けて、荷物J1を搬送路D1から取り上げて、再検査用の場所に持っていき中身を確認する。
 制御装置340は、上記の構成に基づいて、取得された透過画像及び外観画像を対応付ける対応付け処理を行う。
 図19は対応付け処理における制御装置340の動作の一例を表す。まず、制御装置340(搬送制御部341)は、搬送装置310により荷物J1を搬送する(ステップS11)。次に、制御装置340(外観画像取得部342)は、可視光撮影領域D3を通過する荷物J1の外観画像をカメラ330により繰り返し撮影して取得する(ステップS12)。
 続いて、制御装置340(透過画像取得部343)は、透過撮影領域D2を通過する荷物J1の透過画像を検査装置320により繰り返し撮影して取得する(ステップS13)。次に、制御装置340(到達時刻特定部344)は、透過撮影領域D2に荷物J1が到達した時刻を第1到達時刻として特定する(ステップS14)。続いて、制御装置340(到達時刻特定部344)は、荷物J1が可視光撮影領域D3に到達した時刻を第2到達時刻として特定する(ステップS15)。
 次に、制御装置340(画像対応付け部345)は、ステップS15で特定された第2到達時刻にカメラ330が撮影した荷物J1の外観画像と、ステップS14で特定された第1到達時刻に検査装置320が撮影した荷物J1の透過画像とを対応付ける(ステップS16)。そして、制御装置340(画像表示部346)は、互いに対応付けられた外観画像及び透過画像を共に表示する(ステップS17)。
 外観画像と透過画像とを対応付ける方法として、荷物が搬送されるタイミングをセンサで検知して荷物を撮影し、透過画像と対応付けることが考えられるが、荷物には様々な形状のものがあり、また、その形状も一定とは限らないので、センサによる検知が早すぎたり遅すぎたりして適切なタイミングで撮影された透過画像が外観画像に対応付けられない場合がある。
 本実施例では、荷物J1が透過撮影領域D2の基準位置E2に到達した第1到達時刻に基づきその荷物J1が可視光撮影領域D3に到達する第2到達時刻を特定する。第1到達時刻と荷物J1の搬送速度が分かっていれば、基準位置E2との距離が決まっている可視光撮影領域D3に荷物J1が到達する第2到達時刻も正確に特定することができる。つまり、本実施例によれば、荷物J1の状態によらず適切なタイミングで撮影された透過画像及び荷物の画像を互いに対応付けることができる。
 また、本実施例では、基準位置E2に荷物J1の中央領域F1が到達した時刻を第1到達時刻として特定している。これに対し、例えば荷物の前端が基準位置E2に到達した時刻を第1到達時刻とする場合、荷物がハンドバッグ等で肩掛け用の紐が前方に長く伸びていると荷物の内包物の一部又は全部が透過画像に映らないことになり得る。本実施例のように荷物J1の中央領域F1に基づいて第1到達時刻を特定することで、荷物の前端に基づいて第3到達時刻の特定を行う場合に比べて、透過画像に荷物の内包物が映らない事態を起こりにくくすることができる。
[第4実施例]
 第3実施例では、荷物J1が透過撮影領域D2に到達した時刻(第1到達時刻)に基づいて荷物J1が可視光撮影領域D3に到達する時刻(第2到達時刻)が特定されたが、第4実施例では、反対に、荷物J1が可視光撮影領域D3に到達した時刻に基づいて荷物J1が透過撮影領域D2に到達する時刻が特定される。
 本実施例でも、到達時刻特定部344には、荷物J1の外観画像及び透過画像が供給される。ただし、本実施例では、到達時刻特定部344は、搬送路D1の可視光撮影領域D3に荷物J1が到達した時刻(以下「第3到達時刻」と言う)に基づき可視光撮影領域D3よりも搬送路D1の下流側の透過撮影領域D2に荷物J1が到達する時刻(以下「第4到達時刻」と言う)を特定する。
 到達時刻特定部344は、詳細には、カメラ330が撮影した外観画像の中央領域から荷物J1が認識された場合、その外観画像の撮影時刻を第3到達時刻として特定する。
 図20A~図20C(以下、これらの図を図20と総称する)は撮影された外観画像の一例を表す。外観画像取得部342は、荷物J1の外観画像を繰り返し取得するので、図20A、20B、20Cに表すように、荷物J1が搬送方向A11に少しずつ移動する画像が外観画像K11、K12、K13(区別しない場合は「外観画像K10」と言う)として取得される。
 図20には、外観画像K10の搬送方向A11の中央に位置する領域として中央領域F11が表されている。中央領域F11は、外観画像K10の搬送方向A11の前端及び後端からそれぞれ距離L13以上離れた領域であり、搬送路D1の幅方向A12の長さが外観画像K10の幅方向A12の長さと同じになっている。図20Aでは、荷物J1がまだ中央領域F11に到達していない。
 図20Bでは、荷物J1の前端が中央領域F11に到達しているが、荷物J1の全体の3分の1しか中央領域F11に到達していない。図20Cでは、荷物J1の全体の3分の2が中央領域F11に到達している。到達時刻特定部344は、例えば、外観画像K10の中央領域F11に荷物J1のうち一定の割合(例えば3分の2)が含まれるようになったときに、中央領域F11から荷物J1が認識されたと判断する。
 一定の割合が3分の2である場合、到達時刻特定部344は、外観画像K13が取得された時刻を第3到達時刻として特定する。到達時刻特定部344は、第3実施例と同様に搬送時間(可視光撮影領域D3の基準位置E3から透過撮影領域D2の基準位置E2まで荷物J1が搬送されるのに要する時間)を算出し、特定した第3到達時刻から算出した搬送時間だけ遡った時刻を第4到達時刻として特定する。
 到達時刻特定部344は、特定した第3到達時刻及び第4到達時刻を画像対応付け部345に通知する。画像対応付け部345は、通知された第3到達時刻に応じた期間に撮影された荷物J1の透過画像と可視光撮影領域D3に荷物J1が到達した時刻にカメラ330で荷物J1を撮影した外観画像とを対応付ける。画像対応付け部345は、例えば、第3到達時刻そのものを第3到達時刻に応じた期間とする。
 その場合、画像対応付け部345は、到達時刻特定部344により特定された第3到達時刻(第3到達時刻に応じた期間)に検査装置320が撮影した荷物J1の透過画像と、到達時刻特定部344により特定された第4到達時刻(可視光撮影領域D3に荷物J1が到達した時刻)にカメラ330が撮影した荷物J1の外観画像とを対応付ける。
 可視光撮影領域D3に荷物J1が到達した時刻である第3到達時刻と荷物J1の搬送速度が分かっていれば、可視光撮影領域D3との距離が決まっている透過撮影領域D2に荷物J1が到達する第4到達時刻も正確に特定することができる。つまり、本実施例によれば、第3実施例と同様に、荷物J1の状態によらず適切なタイミングで撮影された透過画像及び荷物の画像を互いに対応付けることができる。
 また、本実施例では、外観画像の中央領域F11から荷物J1が認識された場合に、その外観画像の撮影時刻を第3到達時刻として特定している。これにより、第3実施例と同様に、荷物の前端に基づいて第3到達時刻の特定を行う場合に比べて、透過画像に荷物の内包物が映らない事態を起こりにくくすることができる。
[第3実施例又は第4実施例の変形例]
 上述した第3実施例及び第4実施例は本発明の実施の一例に過ぎず、以下のように変形させてもよい。また、以下の変形例の2以上が必要に応じて組み合わされてもよい。
[変形例1]
 第3実施例において、荷物の中央領域の定め方(荷物J1の搬送方向A11の前端からの距離及び後端からの距離が同じL3になる領域(図16参照))は上述したものに限らない。例えば、前端からの距離及び後端からの距離を全く同じ距離としないで少し異ならせてもよい。これらは、荷物の端からの距離に基づいて中央領域を定める方法である。
 これに対し、荷物を表す画素群の配置に基づいて中央領域を定める方法もある。例えば、透過画像において荷物を表す画素群の重心を含む領域を中央領域として定める。画素群の重心とは、各画素のx座標の平均値とy座標の平均値を座標として表される点のことである。
 図21A及び図21Bは本変形例の荷物の中央領域の例を表す。図21Aでは、荷物J1の重心M11と、重心M11を中心とする中央領域F11とが表されている。
 荷物J1は、内容物を収める本体J11に短い持ち手J12が付いた形状をしている。荷物J1の場合、持ち手J12が短いので、重心M11と搬送方向A11及び幅方向A12の両端からの距離が等しい中心点M12との距離が短い。図21Bでは、荷物J2の重心M11aと、重心M11aを中心とする中央領域F12aとが表されている。荷物J2は、内容物を収める本体J21に長い持ち手J22が付いた形状をしている。
 荷物J2の場合、矩形の本体J21に細長い持ち手J22が付いた形状をしているので、重心M11aと搬送方向A11及び幅方向A12の両端からの距離が等しい中心点M12aとの距離が荷物J1に比べて長い。また、持ち手J22の長手方向は搬送方向A11に沿っている。このよう荷物の中心点と重心とが搬送方向A11にずれている場合、第1到達時刻の特定の際に用いられる透過撮影領域D2の画像も異なってくる。
 図22A及び図22Bは透過撮影領域D2の画像の例を表す。図22Aでは、荷物J2の中心点M12aが透過撮影領域D2の基準位置E2に到達したときに撮影された透過画像K31が表されている。この場合、内容物を含む本体J21の画像は透過画像K31の端に近くなるが、荷物J2の全体が透過画像K31に含まれる。
 図22Bでは、荷物J2の重心M11aが透過撮影領域D2の基準位置E2に到達したときに撮影された透過画像K32が表されている。この場合、内容物を含む本体J21の画像は透過画像K32の中心に近くなるが、持ち手J22の一部が透過画像K32からはみ出している。通常は持ち手は危険ではないが、持ち手の一部が透過画像に映らないことが知られるとそこに危険物を仕込まれるおそれがある。
 なので、持ち込み禁止物を見逃さないという観点では、透過画像K31のように荷物J2の中心点M12aを用いた方がよい。しかし、そうすると、特定される第2到達時刻にカメラ330が撮影した外観画像も、透過画像K31のように外観画像の中心から離れたところに荷物J2の本体J21が映ることになる。外観画像が透過画像と同じ範囲を撮影するのであればそれでよいが、外観画像の撮影範囲の方が透過画像の撮影範囲よりも狭い場合、荷物J2の本体J21が外観画像からはみ出す可能性がある。
 そこで、透過画像では中心点を用いるが、外観画像では重心を用いるようにしてもよい。その場合、到達時刻特定部344は、透過画像K31における荷物J2の中央領域F12の透過画像K31の基準位置E2からのずれ量に応じて、可視光撮影領域D3に荷物J2が到達した時刻から透過撮影領域D2に荷物J2が到達した時刻までの時間を調整し、その調整した時間を用いて第2到達時刻を特定する。
 図22Aの例では、荷物J2の中心点M12aと中央領域F12の搬送方向A11の距離L21がずれ量となる。到達時刻特定部344は、例えば、現在の搬送速度でずれ量である距離L21を搬送するのに要する時間(以下「ずれ時間」と言う)を算出する。また、到達時刻特定部344は、第3実施例と同様に搬送時間(基準位置E3から基準位置E2まで荷物J2が搬送されるのに要する時間)を算出する。
 到達時刻特定部344は、算出した搬送時間から算出したずれ時間を減算する調整を行い、減算して求めた時間だけ第1到達時刻から遡った時刻を第2到達時刻として特定する。上記の調整を行うことで、透過画像に荷物の全体が映るようにしつつ、外観画像に荷物の要部が映りやすいようにすることができる。荷物の要部とは、荷物の主たる形状を表す部分のことであり、荷物J2であれば本体J21である。
[変形例2]
 上記の変形例では荷物J2の持ち手J22によるずれ量を考慮して到達時刻が特定されたが、このずれ量を少なくする機構が設けられていてもよい。
 図23A~図23D(以下、これらの図を図23と総称する)は本変形例の検査システム3bを表す。図23の例では、内容物を収めた本体J31と、本体J31に接続された柔らかく細長い持ち手J32とを有する荷物J3が表されている。
 検査システム3bは、可視光撮影領域D3より上流側において荷物J3の本体J31から外側に延伸している部分である持ち手J32を本体J31に近付ける接近機構350が設けられている。接近機構350は本発明の「機構」の一例である。接近機構350は、ゴム等の弾力性が高い素材で形成された板状の機構であり、一方の端に細長い棒状の部分が隙間なく並べられた接触部351を有する。
 接近機構350は、図23Aに表すように可視光撮影領域D3より上流側において、図23Bに表すように接触部351の下端が搬送装置310に接する高さに固定されている接触部351は、荷物J3が搬送されてくると、図23C及び図23Dに表すように、持ち手J32を搬送方向A11と反対方向に引きずって本体J31に近付かせつつ、弾力性があるので搬送方向A11にしなって本体J31を通過させる。
 接近機構350が持ち手J32を本体J31に近付けることで、接近機構350を備えていない場合に比べて、透過画像に荷物の全体が映るようにしつつ、外観画像に荷物の要部が映りやすいようにすることができる。
[変形例3]
 第4実施例では荷物を撮影する検査装置320及びカメラ330が用いられたが、これらに加えて、物体を検知するセンサが用いられてもよい。
 図24は本変形例の検査システム3cを表す。検査システム3cは、図24(a)に表すように可視光撮影領域D3より搬送方向A11の上流側に物体検知センサ360を備えている。
 物体検知センサ360は、発光部361と、受光部362とを有する。発光部361及び受光部362は、搬送装置310の幅方向A12の一方の端と他方の端に向かい合わせて設けられている。例えば、発光部361が発した光を受光部362が受け取っている間は物体が検知されず、受光部362が受け取る光の量が一定以上低下すると物体が検知される。物体検知センサ360は、可視光撮影領域D3において物体を検知する位置に設けられている。
 本変形例では、到達時刻特定部344は、可視光撮影領域D3に物体があることを検知する物体検知センサ360が物体を検知している期間(以下「検知期間」と言う)に基づいて、荷物が可視光撮影領域D3に到達した第1到達時刻を特定する。
 図25は物体の検知状況の一例を表す。図25の例では、物体検知センサ360が、時刻t1からt2までの検知期間T1に物体を検知している。
 到達時刻特定部344は、例えば、検知期間T1の真ん中の時刻(時刻t1から検知期間T1の半分の期間が経過した時刻)を第1到達時刻として特定する。例えば荷物が透明であったり鏡のように反射したりする場合、撮影された外観画像から荷物が認識しにくい場合がある。本変形例によれば、そのように外観画像から荷物が認識しにくい場合でも、物体検知センサ360による物体の検知ができていれば、可視光撮影領域D3に荷物が到達した時刻を特定することができる。
[変形例4]
 検査システム3が行う検査の種類は、第3実施例又は第4実施例で述べたものに限らない。例えば、X線ではなくミリ波又はテラヘルツ波により透過画像を撮影する検査が行われてもよい。また、手荷物に含まれる液体(爆発物が疑われるもの)を検出する検査や、トレースと呼ばれる爆発物の痕跡を検出する検査などが行われてもよい。いずれの場合も、入場検査システムは、各検査を行う検査装置を備え、それらの検査を行う。要するに、持ち込み禁止物を検出したり会場での危険を防止したりするための検査であれば、どのような検査が行われてもよい。
[変形例5]
 第3実施例又は第4実施例では、荷物の検査がイベント会場で行われる場合を説明したが、これ以外にも、例えば、空港、駅、港及びバスターミナル等の乗り物の入場口で行われてもよいし、コンサート会場、スポーツ競技場、スタジアム及び美術館等の施設の入場口で行われてもよい。要するに、入場口において安全のため入場者の荷物の中身を確認する必要があれば、どのような場所(入場口)で荷物の検査が行われてもよい。
 1…検査システム、2…検査システム、3…検査システム、10…第1搬送装置、20…第2搬送装置、21…コントローラ、22…検査装置、23…コンベヤ、24…カメラ、25…表示装置、26…カバー、27…カバー、28…ワイヤー、29…膜、30…検査装置、31…筐体、32…内部空間、33…開口部、40…フード、41…上面部、42…側面部、43…側面部、50…カメラ、60…制御装置、70…ディスプレイ、71…表示面、310…搬送装置、320…検査装置、330…カメラ、340…制御装置、341…搬送制御部、342…外観画像取得部、343…透過画像取得部、344…到達時刻特定部、345…画像対応付け部、346…画像表示部、350…接近機構、351…接触部、360…物体検知センサ、361…発光部、362…受光部、411…上面、412…裏上面。

Claims (17)

  1.  連続して稼働するベルトコンベヤにより搬送される荷物を、検査装置により検査する検査システムであって、
     前記検査装置の荷物の入口側の外観画像を撮影するカメラを備える
     検査システム。
  2.  前記カメラが、荷物の所持者が通過するレーン側から視覚的に遮蔽された位置に配置されている
     請求項1に記載の検査システム。
  3.  前記検査装置の入口側に配置された可視光を透過し且つ光の反射を低減する透明反射防止部材を備え、
     前記カメラは前記透明反射防止部材を通して荷物の外観画像を撮影する
     請求項1に記載の検査システム。
  4.  前記透明反射防止部材が、前記検査装置の入口側に配置された透明フードの2つの面の少なくとも一方に設けられている
     請求項3に記載の検査システム。
  5.  前記透明反射防止部材が、前記カメラの撮影方向に掛かる透明フードの2つの面の少なくとも一方に設けられている
     請求項3に記載の検査システム。
  6.  前記カメラが撮影した画像と前記検査装置の検査結果とを同時又は切り替えて表示装置に表示させる表示制御手段を備える
     請求項1に記載の検査システム。
  7.  前記表示制御手段は、前記検査装置の検査結果又は前記ベルトコンベヤに載置した荷物の載置状態に基づいて、前記表示装置に前記カメラが撮影した画像と前記検査装置の検査結果の表示の切り替えを行わせる
     請求項6に記載の検査システム。
  8.  前記検査装置の入口に配置されたカバーを備え、
     前記カメラは前記カバーの内側を撮影する
     請求項6又は7に記載の検査システム。
  9.  前記カバーは、外側から少なくとも内側の一部が視認可能である
     請求項8に記載の検査システム。
  10.  前記カバーは、荷物が接触する領域が前記カバーよりも摩擦の小さい部材で覆われている
     請求項8又は9に記載の検査システム。
  11.  前記検査装置の検査領域に荷物が到達した時刻に基づき当該荷物が前記カメラの撮影領域内の所定領域に到達した時刻を特定し、当該時刻に前記カメラが撮影した画像と前記検査装置の検査結果とを対応付ける対応付手段を備える
     請求項1に記載の検査システム。
  12.  前記対応付手段は、前記検査領域内の基準位置に荷物の中央領域が到達した時刻に基づき当該荷物が前記所定領域に到達した時刻を特定する
     請求項11に記載の検査システム。
  13.  前記検査装置は荷物の透過画像を撮影し、
     前記対応付手段は、前記検査装置が撮影した透過画像における荷物の中央領域の当該透過画像の基準位置からのずれ量に応じて、前記所定領域に当該荷物が到達した時刻から前記検査領域に当該荷物が到達した時刻までの時間を調整し、当該調整した時間を用いて当該荷物が前記所定領域に到達した時刻を特定する
     請求項12に記載の検査システム。
  14.  前記カメラの撮影領域内の所定領域に荷物が到達した時刻に基づき前記検査領域に当該荷物が到達する時刻を特定し、当該時刻に応じた前記検査装置の検査結果と前記所定領域に当該荷物が到達した時刻に前記カメラが撮影した画像とを対応付ける対応付手段を備える
     請求項1に記載の検査システム。
  15.  前記カメラは前記所定領域を繰り返し撮影し、
     前記対応付手段は、前記カメラが撮影した画像に対し認識処理を行い、当該画像の中央領域から荷物を認識した場合、当該画像の撮影時刻を、当該荷物が前記所定領域に到達した時刻として特定する
     請求項14に記載の検査システム。
  16.  前記対応付手段は、前記所定領域に物体があることを検知するセンサが物体を検知している期間に基づいて、荷物が前記所定領域に到達した時刻を特定する
     請求項14に記載の検査システム。
  17.  前記所定領域より荷物の搬送方向の上流側において荷物の本体から外側に延伸している部分を当該本体に近付ける機構を備える
     請求項14に記載の検査システム。
PCT/JP2020/040530 2019-10-29 2020-10-28 検査システム WO2021085512A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US17/772,543 US20220404294A1 (en) 2019-10-29 2020-10-28 Inspection system
CN202080075619.2A CN114829915A (zh) 2019-10-29 2020-10-28 检查系统

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2019-196618 2019-10-29
JP2019196618A JP7345357B2 (ja) 2019-10-29 2019-10-29 検査システム
JP2020179004A JP2022070006A (ja) 2020-10-26 2020-10-26 荷物検査装置
JP2020-179004 2020-10-26

Publications (1)

Publication Number Publication Date
WO2021085512A1 true WO2021085512A1 (ja) 2021-05-06

Family

ID=75716302

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/040530 WO2021085512A1 (ja) 2019-10-29 2020-10-28 検査システム

Country Status (4)

Country Link
US (1) US20220404294A1 (ja)
CN (1) CN114829915A (ja)
TW (1) TWI779377B (ja)
WO (1) WO2021085512A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004029040A (ja) * 2003-10-20 2004-01-29 Ishida Co Ltd X線異物検出装置
JP2006234422A (ja) * 2005-02-22 2006-09-07 Anritsu Sanki System Co Ltd X線検査装置および蓄積情報抽出システム
JP2018124084A (ja) * 2017-01-30 2018-08-09 日本信号株式会社 X線検査装置及び手荷物検査装置
JP2018524561A (ja) * 2015-12-29 2018-08-30 同方威視技▲術▼股▲分▼有限公司 安全検査の方法、システム及び機器
JP6568634B1 (ja) * 2018-10-26 2019-08-28 日本信号株式会社 検査システム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7856081B2 (en) * 2003-09-15 2010-12-21 Rapiscan Systems, Inc. Methods and systems for rapid detection of concealed objects using fluorescence
CN102804326B (zh) * 2010-01-19 2016-01-20 拉皮斯坎系统股份有限公司 多视图货物扫描器
CN109446875B (zh) * 2018-02-24 2022-04-22 北京首都机场航空安保有限公司 一种智能旅客安检系统
CN208569064U (zh) * 2018-04-11 2019-03-01 上海睿丰自动化系统有限公司 一种进港行李查验自动化系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004029040A (ja) * 2003-10-20 2004-01-29 Ishida Co Ltd X線異物検出装置
JP2006234422A (ja) * 2005-02-22 2006-09-07 Anritsu Sanki System Co Ltd X線検査装置および蓄積情報抽出システム
JP2018524561A (ja) * 2015-12-29 2018-08-30 同方威視技▲術▼股▲分▼有限公司 安全検査の方法、システム及び機器
JP2018124084A (ja) * 2017-01-30 2018-08-09 日本信号株式会社 X線検査装置及び手荷物検査装置
JP6568634B1 (ja) * 2018-10-26 2019-08-28 日本信号株式会社 検査システム

Also Published As

Publication number Publication date
TWI779377B (zh) 2022-10-01
TW202133049A (zh) 2021-09-01
CN114829915A (zh) 2022-07-29
US20220404294A1 (en) 2022-12-22

Similar Documents

Publication Publication Date Title
US9202112B1 (en) Monitoring device, monitoring system, and monitoring method
EP3045897B1 (en) Package inspection device
US20230262312A1 (en) Movable body
CN107444998B (zh) 输送设备控制系统和输送设备控制方法
US20230258793A1 (en) Processing system
JP6568634B1 (ja) 検査システム
JP2017091498A (ja) ゲート装置
US20210302529A1 (en) Determining Imperfections in an Imaging Camera for Determining the Orientation of Objects in Space
CN107222591A (zh) 影像传感器、相机模组和电子装置
WO2021085512A1 (ja) 検査システム
US20230375695A1 (en) Screening device and method for screening a person
JP7455611B2 (ja) 処理システム
JP2020067438A (ja) 検査システム
EP3408658B1 (en) Cased goods inspection system and method
JP7345357B2 (ja) 検査システム
JP7369593B2 (ja) 検査システム
JP7291059B2 (ja) 検査システム
JP2022070006A (ja) 荷物検査装置
CN115362473A (zh) 用于对长于视场的运动物体进行三维扫描的系统和方法
JP2017223912A (ja) 画像投影システム
JP2019191083A (ja) 検査システム
KR20190075283A (ko) 금속입자 검출 시스템 및 방법
JP2023055291A (ja) カメラシステム
JP7114859B2 (ja) 汚れ検知装置、端末装置、及び汚れ検知方法
JP2019152723A (ja) サイネージ装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20880462

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20880462

Country of ref document: EP

Kind code of ref document: A1