WO2021166291A1 - アラート出力装置、アラート出力方法、及び非一時的記録媒体 - Google Patents

アラート出力装置、アラート出力方法、及び非一時的記録媒体 Download PDF

Info

Publication number
WO2021166291A1
WO2021166291A1 PCT/JP2020/032740 JP2020032740W WO2021166291A1 WO 2021166291 A1 WO2021166291 A1 WO 2021166291A1 JP 2020032740 W JP2020032740 W JP 2020032740W WO 2021166291 A1 WO2021166291 A1 WO 2021166291A1
Authority
WO
WIPO (PCT)
Prior art keywords
alert
occurrence
output device
inspection objects
corresponds
Prior art date
Application number
PCT/JP2020/032740
Other languages
English (en)
French (fr)
Inventor
透 安村
昇 尾関
聡子 日野水
大輔 松原
浩 梶井
直人 秋良
木村　淳一
沖田　英樹
Original Assignee
株式会社日立製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立製作所 filed Critical 株式会社日立製作所
Priority to CN202080073381.XA priority Critical patent/CN114599966A/zh
Priority to US17/792,066 priority patent/US20230043386A1/en
Priority to EP20919666.6A priority patent/EP4109081A4/en
Publication of WO2021166291A1 publication Critical patent/WO2021166291A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/06—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and measuring the absorption
    • G01N23/10—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and measuring the absorption the material being confined in a container, e.g. in a luggage X-ray scanners
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/04—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and forming images of the material
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/06—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and measuring the absorption
    • G01N23/083—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and measuring the absorption the radiation being X-rays
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01V—GEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V5/00—Prospecting or detecting by the use of ionising radiation, e.g. of natural or induced radioactivity
    • G01V5/20—Detecting prohibited goods, e.g. weapons, explosives, hazardous substances, contraband or smuggled objects
    • G01V5/22—Active interrogation, i.e. by irradiating objects or goods using external radiation sources, e.g. using gamma rays or cosmic rays
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01V—GEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V5/00—Prospecting or detecting by the use of ionising radiation, e.g. of natural or induced radioactivity
    • G01V5/20—Detecting prohibited goods, e.g. weapons, explosives, hazardous substances, contraband or smuggled objects
    • G01V5/271—Detecting prohibited goods, e.g. weapons, explosives, hazardous substances, contraband or smuggled objects using a network, e.g. a remote expert, accessing remote data or the like
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00—Investigating materials by wave or particle radiation
    • G01N2223/10—Different kinds of radiation or particles
    • G01N2223/101—Different kinds of radiation or particles electromagnetic radiation
    • G01N2223/1016—X-ray
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00—Investigating materials by wave or particle radiation
    • G01N2223/40—Imaging
    • G01N2223/421—Imaging digitised image, analysed in real time (recognition algorithms)
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00—Investigating materials by wave or particle radiation
    • G01N2223/60—Specific applications or type of materials
    • G01N2223/639—Specific applications or type of materials material in a container
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00—Investigating materials by wave or particle radiation
    • G01N2223/60—Specific applications or type of materials
    • G01N2223/643—Specific applications or type of materials object on conveyor

Definitions

  • the present invention relates to an alert output device, an alert output method, and a non-temporary recording medium.
  • the need to use X-ray inspection equipment for baggage inspection is increasing.
  • baggage inspection using X-rays it is common for an inspector to check the presence or absence of contamination of a specific article by looking at an X-ray image.
  • Inspectors need to have at least a high degree of training and long-term work experience in order to accurately determine whether or not a specific article is mixed in an X-ray image. Therefore, an inspector with inexperienced inspection skills may overlook the contamination of a specific article in the inspection. Therefore, in order to reduce the risk of oversight by the inspector, the X-ray inspection device has a mechanism for displaying an alert at a place where the specific material density is high.
  • Patent Document 1 Japanese Patent Application Laid-Open No. 2009-042134
  • Patent Document 2 Japanese Patent Application Laid-Open No. 2009-042134
  • the X-ray detector 16 that detects the thickness x of the object to be inspected from the X-ray transmission image, and the atomic number Z and electron density ⁇ of the object to be inspected are calculated from the plurality of intensities, the intensity of the transmitted X-rays, and the thickness.
  • an arithmetic device 18 for identifying the material of the object to be inspected. At least one of the proportional constants A and B is approximated by using the linearity of the X-ray attenuation coefficient in a substance having an atomic number of 4 to 30. To solve. "(See summary).
  • the technique described in Patent Document 1 it is determined whether or not the inspection object is an alert object based on the material, density, and shape of the inspection object in the image. However, when a plurality of inspection objects overlap, the technique described in Patent Document 1 determines that the material density is higher than the original material density of each of the plurality of inspection objects, and there is a possibility that the alert object cannot be found. be. Further, when the feature of the alert object itself is difficult to appear in the image information, the technique described in Patent Document 1 may miss the alert object.
  • one aspect of the present invention is to determine that there is a possibility that the alert object may exist even if the alert object itself cannot be detected directly, and thus reduce the risk of oversight by the inspector.
  • An alert output device including a processor and a memory, which is connected to an output device, and the memory indicates image information indicating each of one or more inspection objects included in the subject of the determination target image and an alert object. It holds the alert object information and the co-occurrence information indicating the alert co-occurrence that is predetermined to be included in the image at the same time as the alert object, and the processor holds the alert object information.
  • the co-occurrence information it is determined whether at least one of the one or more inspection objects corresponds to at least one of the alert co-occurrencies, and at least one of the one or more inspection objects corresponds to the alert.
  • the object is applicable and the predetermined condition is satisfied, and at least one of the one or more inspection objects is the alert co-occurrence although none of the one or more inspection objects is the alert object.
  • An alert output device that outputs an alert to the output device when it is determined that it corresponds to at least one of the objects.
  • the alert object itself cannot be directly detected, it can be determined that the alert object may exist, and the risk of oversight by the inspector can be reduced.
  • FIG. 1 It is a block diagram which shows the structural example of the co-occurrence information determination system in Example 1.
  • FIG. It is a block diagram which shows the structural example of the image transmission terminal in Example 1.
  • FIG. It is a block diagram which shows the configuration example of the image determination server in Example 1.
  • FIG. This is an example of the prohibited object management DB in the first embodiment.
  • This is an example of the co-occurrence management DB in the first embodiment.
  • FIG. It is a flowchart which shows an example of the alert output determination processing in Example 1.
  • FIG. 1 is a block diagram showing a configuration example of a co-occurrence information determination system.
  • the co-occurrence information determination system includes, for example, one or more X-ray inspection devices 101, one or more image transmission terminals 102, an image determination server 103 (co-occurrence information determination device), and one or more inspector terminals 104.
  • Each device included in the co-occurrence information judgment system is connected via a network such as the Internet or an intranet or a display cable, and can communicate with each other.
  • the X-ray inspection device 101 is connected to the image transmission terminal 102
  • the image transmission terminal 102 is connected to the image determination server 103
  • the image determination server 103 is connected to the inspector terminal 104.
  • the communication method used by the co-occurrence information determination system may be any communication method as long as data transfer is possible.
  • the X-ray inspection device 101 is, for example, a device that irradiates a subject with X-rays and measures the amount of X-ray transmission, and can be used as a baggage inspection device or the like at an airport or the like.
  • the image transmission terminal 102 divides a series of X-ray images taken by the X-ray inspection device 101 into, for example, article units, and transmits them to the image determination server 103.
  • the image determination server 103 determines whether or not the subject (baggage) of the X-ray image received from the image transmission terminal 102 is safe.
  • the inspector terminal 104 is a terminal used by an inspector who confirms an X-ray image, and for example, displays an output result by the image determination server 103 and accepts input to the image determination server 103.
  • the required number of X-ray inspection devices 101 and image transmission terminals 102 are installed at the bases subject to baggage inspection (for example, they are installed at positions where images can be taken on the baggage inspection conveyor at the security checkpoint). .. Similarly, for example, the required number of image transmission terminals 102 are installed at the bases subject to the cargo inspection.
  • base A and base B are bases subject to baggage inspection.
  • the inspector visually confirms the X-ray image of the baggage taken by the X-ray inspection device 101 using the inspector terminal 104, and finally determines whether or not the baggage is safe.
  • the inspector terminal 104 feeds back to the inspector using the display device 704.
  • the feedback is not limited to the display by the display device 704, and any feedback mechanism (for example, a lamp) included in the X-ray inspection device 101 or a mechanism for stopping the belt conveyor that conveys the cargo may be used.
  • the inspector terminal 104 is, for example, a computer such as a PC (Personal Computer) or a tablet terminal.
  • two or more arbitrary devices may be integrated.
  • a computer for example, a PC attached to the X-ray inspection device 101 may be provided, and the computer may have the functions of the image determination server 103 and the inspector terminal 104.
  • FIG. 2 is a block diagram showing a configuration example of the image transmission terminal 102.
  • the image transmission terminal 102 includes, for example, a CPU (Control Processing Unit) 210, a memory 202, an input device 203, a display device 204, a communication device 205, and an auxiliary storage device 210, which are connected to each other by an internal communication line such as a bus. It is composed of a computer.
  • a CPU Control Processing Unit
  • the CPU 201 includes a processor and executes a program stored in the memory 202.
  • the memory 202 includes a ROM which is a non-volatile storage element and a RAM which is a volatile storage element.
  • the ROM stores an invariant program (for example, BIOS) and the like.
  • the RAM is a high-speed and volatile storage element such as a DRAM (Dynamic Random Access Memory), and temporarily stores a program executed by a processor and data used when the program is executed.
  • the auxiliary storage device 210 is, for example, a large-capacity and non-volatile storage device such as a magnetic storage device (HDD) or a flash memory (SSD), and executes a program and a program executed by the OS (Operating System) 211 or the CPU 201. Stores data that is sometimes used. That is, the program is read from the auxiliary storage device 210, loaded into the memory 202, and executed by the CPU 201.
  • a magnetic storage device HDD
  • SSD flash memory
  • OS Operating System
  • the image transmission terminal 102 may have an input interface and an output interface.
  • the input interface is an interface to which an input device 203 such as a keyboard or a mouse is connected and receives input from an operator.
  • the output interface is an interface to which a display device 204 such as a display device or a printer is connected and outputs a program execution result in a format that can be visually recognized by an operator.
  • the communication device 205 is a network interface device that controls communication with other devices according to a predetermined protocol.
  • the program executed by the CPU 201 is provided to the computer via removable media (CD-ROM, flash memory, etc.) or a network, and is stored in the non-volatile auxiliary storage device 210, which is a non-temporary storage medium. Therefore, the image transmission terminal 102 may have an interface for reading data from the removable media.
  • the CPU 201 includes, for example, an X-ray image cutout portion 212.
  • the X-ray image cutting unit 212 divides a series of X-ray images received from the X-ray inspection device 101 into articles and transmits them to the image determination server 103 according to, for example, a predetermined algorithm.
  • the CPU 201 functions as the X-ray image cutting unit 212 by operating according to the X-ray image cutting program loaded in the memory 202.
  • the information used by each device included in the automatic X-ray determination system may be represented by any data structure regardless of the data structure.
  • a properly selected data structure from a table, list, database or queue can store the information.
  • Each device included in the co-occurrence information determination system of the present embodiment is a computer system composed of physically one computer or a plurality of computers logically or physically configured. , It may run on the same computer in separate threads, or it may run on a virtual computer built on multiple physical computer resources.
  • FIG. 3 is a block diagram showing a configuration example of the image determination server 103.
  • the image determination server 103 is composed of, for example, a computer having a CPU 301, a memory 302, an input device 303, a display device 304, a communication device 305, and an auxiliary storage device 310.
  • the description of the CPU 301, the memory 302, the input device 303, the display device 304, the communication device 305, and the auxiliary storage device 310 as hardware is described in the CPU 201, the memory 202, the input device 203, the display device 204, the communication device 205, and the auxiliary storage. Since it is the same as the device 210, it is omitted.
  • the auxiliary storage device 210 holds the OS311.
  • the auxiliary storage device holds a prohibited object management DB (DataBase) 313, a co-occurrence substance management DB 314, a relevance DB 315, and an X-ray image DB 316.
  • the prohibited item management DB 313 defines a prohibited item and a misleading item which is a general item similar to the prohibited item.
  • prohibited items are items that are subject to alert output
  • general items are items that are not subject to alert output in principle.
  • the prohibited object management DB 313 not only the prohibited article but also the confused article is defined, and the existence of the confused article is output, so that the inspection accuracy of the inspector can be improved.
  • the co-occurrence management DB314 defines the co-occurrence and whether the co-occurrence is a prohibited co-occurrence or a general co-occurrence.
  • a co-occurrence object is an article that is likely to be included in the subject of the X-ray image at the same time when a predetermined article is included in the X-ray image.
  • Co-occurrence objects include articles that are common on their own, but are likely to be present in the X-ray image at the same time as other prohibited or confused articles.
  • the push nozzle itself is not a prohibited item, but the perfume bottle, which is a prohibited item, is likely to contain a push nozzle. Therefore, for example, even if the image determination server 103 determines that the push nozzle is included in the X-ray image but the perfume bottle is not included in the X-ray image, it is a co-occurrence substance. Since the push nozzle is defined as a co-occurrence in the management DB 314, the image determination server 103 can output an alert as if the perfume bottle, which is a prohibited substance, is likely to be included.
  • the X-ray image DB 316 holds, for example, an X-ray image received from the image transmission terminal 102, an image determination result for the X-ray image, and the like.
  • the image judgment result for the X-ray image is, for example, the name of the article contained in the X-ray image, whether or not the article contained in the X-ray image corresponds to a prohibited article, a confused article, or a co-occurrence object, or an X-ray. Includes judgment grounds for image judgment.
  • the CPU 301 includes an X-ray image recognition unit 312, a prohibited object determination unit 317, and an alert output unit 318.
  • the X-ray image recognition unit 312 identifies the type of the article from the material and shape of the inspection object from the image data received from the image transmission terminal 102.
  • the prohibited object determination unit 317 refers to the prohibited object management DB 313 and the co-occurrence object management DB 314 to determine whether or not the specified article corresponds to the prohibited object or the co-occurrence object (if it corresponds to the co-occurrence object, further. Whether it is a co-occurrence substance of a prohibited object or a co-occurrence object of a general object) is determined, and the determination result is transmitted to the alert output unit 318.
  • the alert output unit 318 outputs an alert based on the determination result by the prohibited object determination unit 317 to the inspector terminal 104.
  • FIG. 4 is an example of the prohibited object management DB 313.
  • the prohibited item management DB 313 includes, for example, a prohibited item ID column 3131, a prohibited item item column 3132, a classification column 3133, and a misleading item item column 3134.
  • the prohibited item ID column 3131 holds an ID for identifying the prohibited item.
  • the prohibited item item column 3132 holds the prohibited item.
  • the classification column 3133 holds the classification of prohibited items. In the example of FIG. 4, "misleading prohibited items" are stored in the classification column 3133 when there are confused articles of prohibited items, and "one-shot prohibited items” are stored in the classification column 3133 when there are no confused articles of prohibited items. Since it is stored, the classification column 3133 indicates whether or not there is a confused article of prohibited items.
  • the misleading item item column 3134 holds the misleading article item when there is a prohibited misleading article.
  • "N / A" (not applicable) is stored in the confused item item column 3134.
  • FIG. 5 is an example of the co-occurrence management DB 314.
  • the co-occurrence management DB 314 includes, for example, a co-occurrence ID column 3141, a co-occurrence item column 3142, and a determination column 3143.
  • the co-occurrence ID column 3141 holds an ID for identifying the co-occurrence.
  • the co-occurrence item column 3142 holds the co-occurrence item.
  • the determination column 3143 holds a value indicating whether the co-occurrence substance is included in the X-ray image at the same time as the prohibited object, or is included in the X-ray image at the same time as the general object (misleading article). ..
  • FIG. 6 is an example of the relevance DB315.
  • the relevance DB 315 holds, for example, a prohibited object ID column 3151 and a co-occurrence object ID column 3152.
  • the co-occurrence corresponding to the prohibited object is defined to be included in the X-ray image at the same time as the prohibited object or the distracted article of the prohibited object.
  • "N / A" (not applicable) is stored in the co-occurrence object ID column 3152.
  • FIG. 7 is a block diagram showing a configuration example of the inspector terminal 104.
  • the inspector terminal 104 is composed of, for example, a computer having a CPU 701, a memory 702, an input device 703, a display device 704, a communication device 705, and an auxiliary storage device 710.
  • the hardware description of the CPU 701, the memory 702, the input device 703, the display device 704, the communication device 705, and the auxiliary storage device 710 describes the CPU 201, the memory 202, the input device 203, the display device 204, the communication device 205, and the auxiliary storage. Since it is the same as the device 210, it is omitted.
  • the auxiliary storage device 710 holds the OS 711.
  • the CPU 701 includes an inspection screen output unit 712.
  • the inspection screen output unit 712 outputs an X-ray image or an alert to the display device 704 based on the output from the alert output unit 318 of the image determination server 103, for example.
  • FIG. 8 is a flowchart showing an example of the alert output determination process. Before the alert output determination process of FIG. 8 is executed, it is assumed that the values have been registered in the prohibited object management DB 313, the co-occurrence object management DB 314, and the relevance DB 315.
  • the X-ray inspection device 101 takes an X-ray image of the baggage and transmits the X-ray image to the image transmission terminal 102, and the X-ray image cutting unit 212 of the image transmission terminal 102 sets the received X-ray image as an article unit.
  • the X-ray image after the division is transmitted to the image determination server 103 (S802).
  • the X-ray image recognition unit 312 registers the X-ray image acquired in step S802 in the X-ray image DB 316.
  • the X-ray image recognition unit 312 identifies the item of the article included in the received X-ray image and calculates the probability of corresponding to the specified article (S802). Specifically, for example, the X-ray image recognition unit 312 is based on, for example, at least one of the material (organic substance, light metal, light inorganic substance, or metal), substance density, and shape of the article contained in the X-ray image. The item of the article is specified and the applicable probability is calculated, but the identification method is not limited to this.
  • the prohibited object determination unit 317 searches the prohibited object management DB 313 (S803). As a result of searching the prohibited item management DB 313, the prohibited item determination unit 317 determines whether or not at least one of the articles specified in step S802 is included in the prohibited item item of the prohibited item management DB 313 (S804).
  • the prohibited object determination unit 317 determines that at least one of the articles specified in step S802 is included in the prohibited articles of the prohibited object management DB 313 (S804: YES), it corresponds to the prohibited article calculated in step S802. It is determined whether or not the probability is high (for example, whether or not it is equal to or higher than a predetermined value) (S805).
  • step S802 When it is determined that at least one of the articles specified in step S802 is included in the prohibited articles of the prohibited object management DB 313 (S804: YES), the prohibited object determination unit 317 does not execute the process of step S805. The transition to step S806, which will be described later, may be performed.
  • step S805 it is determined whether or not there is a high probability of corresponding to the misleading article calculated in step S802 (for example, whether or not it is equal to or more than a predetermined value).
  • the alert output unit 318 When the prohibited object determination unit 317 determines that the probability of corresponding to the prohibited article calculated in step S802 is high (S805: YES), the alert output unit 318 outputs warning information to the inspector terminal 104. Then (S811), the alert output determination process is terminated.
  • the prohibited object determination unit 317 determines that the probability of corresponding to the prohibited article calculated in step S802 is not high (S805: NO)
  • the co-occurrence object management DB 314 is searched (S806).
  • the prohibited object determination unit 317 determines whether or not at least one of the articles specified in step S802 corresponds to at least one co-occurrence article of the co-occurrence management DB 314. (S807).
  • the prohibited object determination unit 317 determines that at least one of the articles specified in step S802 is included in the co-occurrence article item of the co-occurrence object management DB 314 (S807: YES)
  • the determination column 3143 of the co-occurrence object management DB 314 (S808), it is determined whether the co-occurrence product is a co-occurrence product of a prohibited product or a co-occurrence product of a general product (S808).
  • the process of step S807 may be omitted to transition to the process of step S808.
  • step S808 when the prohibited object determination unit 317 determines that the co-occurrence object is a prohibited object co-occurrence object, the prohibited object ID corresponding to the co-occurrence object is specified by referring to the relevance DB 315. Then, the prohibited item and the confused item corresponding to the prohibited item ID may be specified by referring to the prohibited item management DB 313.
  • the alert output unit 318 inspects information indicating a warning whose alert level is lower than the warning. Output to the terminal 104 (S812), and end the alert output determination process.
  • the prohibited object determination unit 317 determines that the co-occurrence object is a general object co-occurrence object (S808: NO)
  • the alert output unit 318 does not output (S813), and the alert output determination process is performed. finish.
  • the alert output unit 318 has an X co-occurrence object of the general object.
  • Information indicating that it is contained in the line image that is, information indicating that it is extremely unlikely that a prohibited object is contained and that it is safe
  • the transition to step S812 may be performed.
  • the alert output unit may be used.
  • the 318 may transmit to the inspector terminal 104 a warning information indicating that a prohibited object may be included in the X-ray image, although the probability is low.
  • the prohibited item determination unit 317 determines that the article specified in step S802 does not include the prohibited item of the prohibited item management DB 313 (S804: NO)
  • the co-occurrence object management DB 314 is searched (S809).
  • the prohibited object determination unit 317 determines whether or not at least one of the articles specified in step S802 is included in the co-occurrence article item of the co-occurrence object management DB 314 (S810).
  • the alert output unit 318 When the prohibited object determination unit 317 determines that the co-occurrence object is a prohibited object co-occurrence object (S810: YES), the alert output unit 318 outputs information indicating a warning to the inspector terminal 104. (S812), the alert output determination process is terminated.
  • the prohibited object determination unit 317 determines that the co-occurrence object is a general object co-occurrence object (S810: NO)
  • the alert output unit 318 does not output (S813), and the alert output determination process is performed. finish.
  • the alert output unit 318 in step S813 indicates that the general object co-occurrence object is X.
  • Information indicating that it is contained in the line image that is, information indicating that it is extremely unlikely that a prohibited object is contained and that it is safe may be transmitted to the inspector terminal 104.
  • the alert output unit 318 transmits the X-ray image received from the image transmission terminal 102 to the inspector terminal 104 regardless of any of the processes from step S811 to step S813. Further, the alert output unit 318 may output a specific determination result to the inspector terminal 104 regardless of any of the processes of steps S811 to S813. For example, whether or not a prohibited substance is included in the X-ray image and its probability, whether or not a confused article is included in the X-ray image, whether or not a co-occurrence substance is contained in the X-ray image, X-ray.
  • the co-occurrence object management DB 314 is further searched and X is displayed.
  • the alert output unit 318 indicates that the information indicating the warning in step S811 is the co-occurrence object item, and the co-occurrence object is the prohibited co-occurrence object. It may include information indicating whether it is a co-occurrence of general objects.
  • the prohibited object determination unit 317 determines in step S804 that the prohibited object is not included in the X-ray image but contains the confused article, the confused article is included in steps S811 to S813.
  • the indicated information may also be transmitted to the inspector terminal 104. As a result, it is possible to display on the inspector terminal 104 that the distracted article is included in the X-ray image, and the possibility that the inspector erroneously determines the distracted article as a prohibited article is reduced, and the inspection efficiency is improved. improves.
  • 9 to 12 are screen examples displayed on the display device 704 by the inspection screen output unit 712 based on the output from the image determination server 103.
  • the user (inspector) of the inspector terminal 104 performs a visual inspection based on the displayed co-occurrence information, and makes a final determination as to whether or not there is a prohibited item in the baggage to be inspected.
  • the inspector terminal 104 assists the inspector in visual confirmation by highlighting the X-ray image and the pixel area of the prohibited object and the co-occurrence object.
  • FIG. 9 is an example of a warning display screen displayed when the prohibited object determination unit 317 determines that the prohibited object (however, the probability is high) and the co-occurrence object of the prohibited object exist in the X-ray image. .. That is, the display screen 900 of FIG. 9 is an example of a case where the process of step S811 is performed via the process in step S805.
  • the display screen 900 of FIG. 9 determines that the prohibited object determination unit 317 has a high probability of corresponding to the prohibited article calculated in step S802 (S805: YES), and further searches the co-occurrence management DB 314. This is an example of the case.
  • the display screen 900 of FIGS. 9 to 12 includes, for example, an X-ray image display area 901, a message display area 902, an OK button 903, and an NG button 904.
  • An X-ray image is displayed in the X-ray image display area 901 received by the inspector terminal 104 from the image determination server 103.
  • the target pixel area of the prohibited objects or co-occurrence objects is cut out and enlarged in the X-ray image display area 901. May be good.
  • a message corresponding to an alert or the like received by the inspector terminal 104 from the alert output unit 318 is displayed.
  • the OK button 903 is a button selected when the inspector visually checks the X-ray image and determines that the X-ray image does not contain prohibited objects.
  • the NG button 904 is a button selected when the inspector visually checks the X-ray image and determines that the X-ray image contains prohibited objects.
  • Information indicating whether the inspector has selected either the OK button 903 or the NG button 904 for the X-ray image may be stored in the X-ray image DB316 in association with the X-ray information. ..
  • the X-ray image display area 901 since it is determined that the prohibited object (however, the probability is high) and the co-occurrence object exist in the X-ray image, the X-ray image display area 901 includes the X-ray image in addition to the X-ray image. The coordinate information of the prohibited object included in the image area and the coordinate information of the co-occurrence related to the prohibited object are displayed. Further, in the example of FIG. 9, since it is determined that the prohibited object (however, the probability is high) and the co-occurrence object exist in the X-ray image, a warning message is displayed in the message display area 902.
  • FIG. 10 is a warning display screen 900 displayed when the prohibited object determination unit 317 determines that the prohibited object (however, the probability is low) and the co-occurrence object of the prohibited object are present in the X-ray image.
  • the display screen 900 of FIG. 10 is an example in which the process of step S812 is performed via the processes of steps S805 to S808.
  • the X-ray image display area 901 is added to the X-ray image. Therefore, the coordinate information of the prohibited object included in the X-ray image area and the coordinate information of the co-occurrence object related to the prohibited object are displayed.
  • a warning message is displayed in the message display area 902.
  • the prohibited object determination unit 317 determines that the prohibited object exists in the X-ray image but its probability is low, but determines that the co-occurrence of the prohibited object exists in the X-ray image. Therefore, "Suspected prohibited object (probability: high)" is displayed in the warning message.
  • FIG. 11 is a warning display displayed when the prohibited object determination unit 317 determines that a prohibited object (however, the probability is low) exists in the X-ray image (however, there is no co-occurrence object).
  • a prohibited object here, the probability is low
  • the display screen 900 of FIG. 11 is an example in the case where it is determined in step S807 that there is no co-occurrence.
  • the prohibited object (however, the probability is low) exists in the X-ray image, it is determined that the co-occurrence does not exist in the X-ray image.
  • the coordinate information of the prohibited object included in the X-ray image area is displayed.
  • a warning message is displayed in the message display area 902.
  • the prohibited object determination unit 317 determines that the prohibited object exists in the X-ray image but its probability is low, and further determines that the co-occurrence object does not exist in the X-ray image.
  • "Suspected prohibited object (probability: low)" is displayed.
  • FIG. 12 is a display screen displayed when the prohibited object determination unit 317 determines that the prohibited object does not exist in the X-ray image, but determines that the co-occurrence of the prohibited object exists in the X-ray image.
  • This is an example of 900. That is, the display screen 900 of FIG. 12 is an example in the case where it is determined in step S804 that there is no prohibited object, but in step S810 it is determined that there is a co-occurrence object related to the prohibited object.
  • the prohibited object does not exist in the X-ray image
  • the coordinate information of the co-occurrence of the prohibited object included in the X-ray image area is displayed.
  • a warning message indicating that a co-occurrence substance exists in the X-ray image is displayed.
  • the articles determined to be co-occurrence objects are framed by double lines and the articles determined to be prohibited objects are framed by dotted lines for explanation.
  • the expression method does not matter, such as changing the color of the frame to a color different from the prohibited object or changing the color of the X-ray image itself determined to be a prohibited object or a co-occurrence object.
  • a display for assisting the inspector's reading such as displaying the names of prohibited objects, co-occurrence objects, and prohibited objects related to co-occurrence objects. May be done.
  • an alert expression such as a pop-up message displayed on the display screen 900 or an alert or alert using the lamp or speaker mechanism attached to the X-ray inspection device 101 or the like.
  • the method does not matter.
  • the probability of corresponding prohibited object may be displayed as a score on the display screen 900, and the display shape and color of the frame in the X-ray image display area 901, the emission color of the lamp, and the speaker may be displayed according to the score.
  • the output volume may be changed or emphasized.
  • the inspection screen is output.
  • the unit 712 may display the X-ray image on the display device 704 without displaying the alert.
  • the image determination server 103 of this embodiment determines the content of the alert based not only on whether or not a prohibited object exists in the pixel area of the X-ray image but also on whether or not a co-occurrence object exists.
  • the image determination server 103 can determine the existence of the prohibited object even by the co-occurrence object related to the prohibited object. Since the judgment system has been improved and alerts can be output more accurately, it is possible to reduce the risk of inspectors overlooking.
  • the display screen 900 displays prohibited objects and co-occurrence objects in a form that can be easily recognized by the inspector, the pixel area that the inspector can see can be narrowed down, and the quality of the visual inspection by the inspector is improved. do.
  • the present invention is not limited to the above-described embodiment, and includes various modifications.
  • the above-described embodiment has been described in detail in order to explain the present invention in an easy-to-understand manner, and is not necessarily limited to those having all the described configurations. It is also possible to replace a part of the configuration of one embodiment with the configuration of another embodiment, and it is also possible to add the configuration of another embodiment to the configuration of one embodiment. Further, it is possible to add / delete / replace a part of the configuration of each embodiment with another configuration.
  • an example of an inspection device that captures an X-ray image of a baggage is described, but the image is not limited to that obtained by X-ray irradiation and may be recognized as an image, and the device is based on the image. Includes those that can detect the composition, density, and shape of a specific material. Also, the subject is not limited to luggage. For example, the present embodiment can also be used for detecting a crime by an image taken by a security camera, finding a lesion by an image taken by an MRI (Magnetic Resonance Imaging) device, and the like.
  • MRI Magnetic Resonance Imaging
  • each of the above configurations, functions, processing units, processing means, etc. may be realized by hardware by designing a part or all of them by, for example, an integrated circuit. Further, each of the above configurations, functions, and the like may be realized by software by the processor interpreting and executing a program that realizes each function. Information such as programs, tables, and files that realize each function can be placed in a memory, a hard disk, a recording device such as an SSD (Solid State Drive), or a recording medium such as an IC card, an SD card, or a DVD.
  • SSD Solid State Drive
  • control lines and information lines indicate what is considered necessary for explanation, and not all control lines and information lines are necessarily shown on the product. In practice, it can be considered that almost all configurations are interconnected.

Landscapes

  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Biochemistry (AREA)
  • Analytical Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • High Energy & Nuclear Physics (AREA)
  • General Life Sciences & Earth Sciences (AREA)
  • Geophysics (AREA)
  • Toxicology (AREA)
  • Analysing Materials By The Use Of Radiation (AREA)

Abstract

アラート出力装置は、判定対象画像の被写体に含まれる１以上の検査対象物を示す画像情報と、アラート対象物を示すアラート対象物情報と、アラート対象物と同時に画像内に含まれる物であるアラート共起物を示す共起物情報と、を保持し、該１以上の検査対象物の少なくとも１つがアラート対象物に該当しかつ所定の条件を満たすと判定した場合、及び該１以上の検査対象物のいずれもアラート対象物に該当しないものの該１以上の検査対象物の少なくとも１つがアラート共起物の少なくとも１つに該当すると判定した場合に、アラートを出力する。

Description

アラート出力装置、アラート出力方法、及び非一時的記録媒体 参照による取り込み
　本出願は、2020年2月21日に出願された日本特許出願第2020-028448号の優先権を主張し、その内容を参照することにより、本出願に取り込む。
　本発明は、アラート出力装置、アラート出力方法、及び非一時的記録媒体に関する。
　テロのリスク増加に伴い、荷物検査においてＸ線検査装置を用いるニーズが高まっている。Ｘ線を用いた荷物検査においては、検査員がＸ線画像を見て特定物品の混入有無を確認することが一般的である。検査員は、Ｘ線画像に特定物品の混入があるか否かを高精度に判定するためには、少なくとも高度な訓練を受けたり、長期的な実務経験を得たりする必要がある。従って、検査スキルが未熟な検査員は、検査において特定物品の混入を見逃すおそれがある。そこで、検査員の見逃しリスクを低減するために、Ｘ線検査装置には特定材質密度が大きい箇所をアラート表示する仕組みがある。
　本技術分野の背景技術として、特開２００９－０４２１３４号公報（特許文献１）がある。この公報には、「被検査物５に２以上の異なる方向から複数の強度の入射Ｘ線７を照射するＸ線照射装置１４と、被検査物を透過した透過Ｘ線８の強度と複数のＸ線透過画像から被検査物の厚さｘを検出するＸ線検出装置１６と、複数の強度、透過Ｘ線の強度、および厚さから被検査物の原子番号Ｚと電子密度ρを算出し、これから被検査物の材質を識別する演算装置１８とを備える。比例定数Ａ，Ｂに少なくとも一方を、原子番号が４から３０の物質においてＸ線の減弱係数の線形性を利用して近似的に解く。」と記載されている（要約参照）。
特開２００９－０４２１３４号公報
　特許文献１に記載の技術では、画像内の検査対象物の材質、密度、及び形状に基づいて、検査対象物がアラート対象物であるか否かを判定している。しかし、複数の検査対象物が重なり合っている場合、特許文献１に記載の技術は、材質密度を当該複数の検査対象物それぞれの本来の材質密度より高く判定し、アラート対象物を発見できないおそれがある。また、アラート対象物そのものの特徴が画像情報に現れにくい場合には、特許文献１に記載の技術は、アラート対象物を見逃すことがある。
　そこで本発明の一態様は、アラート対象物そのものを直接的に検知できなくても、アラート対象物が存在するおそれがあると判定し、ひいては検査員による見逃しリスクを低減することを目的とする。
　上記課題を解決するために本発明の一態様は以下の構成を採用する。アラート出力装置であって、プロセッサとメモリとを含み、出力装置に接続され、前記メモリは、判定対象画像の被写体に含まれる１以上の検査対象物それぞれを示す画像情報と、アラート対象物を示すアラート対象物情報と、アラート対象物と同時に画像内に含まれる物であると予め定められたアラート共起物を示す共起物情報と、を保持し、前記プロセッサは、前記アラート対象物情報を参照して、前記１以上の検査対象物の少なくとも１つが前記アラート対象物に該当するかを判定し、前記１以上の検査対象物のいずれも前記アラート対象物に該当しないと判定した場合、前記共起物情報を参照して、前記１以上の検査対象物の少なくとも１つが前記アラート共起物の少なくとも１つに該当するかを判定し、前記１以上の検査対象物の少なくとも１つが前記アラート対象物に該当しかつ所定の条件を満たすと判定した場合、及び前記１以上の検査対象物のいずれも前記アラート対象物に該当しないものの前記１以上の検査対象物の少なくとも１つが前記アラート共起物の少なくとも１つに該当すると判定した場合に、アラートを前記出力装置に出力するアラート出力装置。
　本発明の一態様によれば、アラート対象物そのものを直接的に検知できなくても、アラート対象物が存在するおそれがあると判定し、ひいては検査員の見逃しリスクを低減することができる。
　上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。
実施例１における共起情報判定システムの構成例を示すブロック図である。 実施例１における画像送信端末の構成例を示すブロック図である。 実施例１における画像判定サーバの構成例を示すブロック図である。 実施例１における禁止物管理ＤＢの一例である。 実施例１における共起物管理ＤＢの一例である。 実施例１における関連性ＤＢの一例である。 実施例１における検査員端末の構成例を示すブロック図である。 実施例１におけるアラート出力判定処理の一例を示すフローチャートである。 実施例１における、禁止物（但し確率が高い）と禁止物の共起物とがＸ線画像内に存在すると判定された場合に表示される、警告の表示画面の一例である。 実施例１における、禁止物（但し確率が低い）と禁止物の共起物とがＸ線画像内に存在すると判定された場合に表示される、注意喚起の表示画面の一例である。 実施例１における、禁止物（但し確率が低い）がＸ線画像内に存在する（但し、共起物は存在しない）と判定された場合に表示される、注意喚起の表示画面の一例である。 実施例１における、禁止物がＸ線画像内に存在しないと判定されたものの、禁止物の共起物がＸ線画像内に存在すると判定された場合に表示される、表示画面の一例である。
　以下、本発明の実施形態を図面に基づいて詳細に説明する。本実施形態において、同一の構成には原則として同一の符号を付け、繰り返しの説明は省略する。なお、本実施形態は本発明を実現するための一例に過ぎず、本発明の技術的範囲を限定するものではないことに注意すべきである。
　図１は、共起情報判定システムの構成例を示すブロック図である。共起情報判定システムは、例えば、１以上のＸ線検査装置１０１、１以上の画像送信端末１０２、画像判定サーバ１０３（共起情報判定装置）、及び１以上の検査員端末１０４を有する。
　共起情報判定システムに含まれる各機器は、インターネットやイントラネットなどのネットワークやディスプレイケーブルを介して接続され、相互に通信可能である。特に、Ｘ線検査装置１０１は画像送信端末１０２に接続され、画像送信端末１０２は画像判定サーバ１０３に接続され、画像判定サーバ１０３は検査員端末１０４に接続されている。なお、共起情報判定システムが利用する通信方式は、データ転送が可能であればどのような通信方式であってもよい。
　Ｘ線検査装置１０１は、例えば、被写体にＸ線を照射しＸ線の透過量を計測する装置であり、空港等における荷物検査装置等として利用されることができる。画像送信端末１０２は、Ｘ線検査装置１０１により撮影された一連のＸ線画像を、例えば物品単位に分割し、画像判定サーバ１０３に送信する。
　画像判定サーバ１０３は、画像送信端末１０２から受信したＸ線画像の被写体（荷物）が安全であるか否かを判定する。検査員端末１０４は、Ｘ線画像を確認する検査員が利用する端末であり、例えば、画像判定サーバ１０３による出力結果を表示したり、画像判定サーバ１０３への入力を受け付けたりする。
　Ｘ線検査装置１０１及び画像送信端末１０２は、例えば、荷物検査の対象となる拠点に必要台数設置されている（例えば保安検査場の荷物検査用のコンベア上を撮影可能な位置に設置される）。同様に、例えば、画像送信端末１０２も、荷物検査の対象となる拠点に必要台数設置されている。
　図１の例において、拠点Ａと拠点Ｂとが荷物検査の対象の拠点である。検査員は、検査員端末１０４を利用して、Ｘ線検査装置１０１が撮影した荷物のＸ線画像を、目視で確認し、安全な荷物であるか否かを最終判定する。
　検査員端末１０４は、画像判定サーバ１０３がＸ線画像の被写体に禁止物や共起物が存在すると判定した場合、その旨を検査員に表示装置７０４を用いてフィードバックする。なお、このフィードバックは、表示装置７０４による表示に限らず、例えば、Ｘ線検査装置１０１が有するフィードバック機構（例えばランプ）や荷物を搬送するベルトコンベアを停止する機構など、任意のものを用いることができる。検査員端末１０４は、例えば、ＰＣ（Ｐｅｒｓｏｎａｌ　Ｃｏｍｐｕｔｅｒ）やタブレット端末等の計算機である。
　なお、Ｘ線検査装置１０１、画像送信端末１０２、画像判定サーバ１０３、及び検査員端末１０４のうち、２つ以上の任意の装置が一体化されていてもよい。特に、例えば、Ｘ線検査装置１０１に付属する計算機（例えばＰＣ）が設けられ、当該計算機が画像判定サーバ１０３及び検査員端末１０４の機能を有してもよい。
　図２は、画像送信端末１０２の構成例を示すブロック図である。画像送信端末１０２は、例えば、互いにバス等の内部通信線で接続された、ＣＰＵ（Ｃｏｎｔｒｏｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）２１０、メモリ２０２、入力装置２０３、表示装置２０４、通信装置２０５、及び補助記憶装置２１０を含む計算機によって構成される。
　ＣＰＵ２０１は、プロセッサを含み、メモリ２０２に格納されたプログラムを実行する。メモリ２０２は、不揮発性の記憶素子であるＲＯＭ及び揮発性の記憶素子であるＲＡＭを含む。ＲＯＭは、不変のプログラム（例えば、ＢＩＯＳ）などを格納する。ＲＡＭは、ＤＲＡＭ（Ｄｙｎａｍｉｃ　Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）のような高速かつ揮発性の記憶素子であり、プロセッサが実行するプログラム及びプログラムの実行時に使用されるデータを一時的に格納する。
　補助記憶装置２１０は、例えば、磁気記憶装置（ＨＤＤ）、フラッシュメモリ（ＳＳＤ）等の大容量かつ不揮発性の記憶装置であり、ＯＳ（Ｏｐｅｒａｔｉｎｇ　Ｓｙｓｔｅｍ）２１１や、ＣＰＵ２０１が実行するプログラム及びプログラムの実行時に使用されるデータを格納する。すなわち、プログラムは、補助記憶装置２１０から読み出されて、メモリ２０２にロードされて、ＣＰＵ２０１によって実行される。
　画像送信端末１０２は、入力インターフェース及び出力インターフェースを有してもよい。入力インターフェースは、キーボードやマウスなどの入力装置２０３が接続され、オペレータからの入力を受けるインターフェースである。出力インターフェースはディスプレイ装置やプリンタなどの表示装置２０４が接続され、プログラムの実行結果をオペレータが視認可能な形式で出力するインターフェースである。通信装置２０５は、所定のプロトコルに従って、他の装置との通信を制御するネットワークインターフェース装置である。
　ＣＰＵ２０１が実行するプログラムは、リムーバブルメディア（ＣＤ－ＲＯＭ、フラッシュメモリなど）又はネットワークを介して計算機に提供され、非一時的記憶媒体である不揮発性の補助記憶装置２１０に格納される。このため、画像送信端末１０２は、リムーバブルメディアからデータを読み込むインターフェースを有するとよい。
　ＣＰＵ２０１は、例えば、Ｘ線画像切出部２１２を含む。Ｘ線画像切出部２１２は、Ｘ線検査装置１０１から受信した一連のＸ線画像を、例えば、所定のアルゴリズムに従って、物品単位に分割して画像判定サーバ１０３に送信する。
　例えば、ＣＰＵ２０１は、メモリ２０２にロードされたＸ線画像切出プログラムに従って動作することでＸ線画像切出部２１２として機能する。共起情報判定システムに含まれる他の装置のＣＰＵに含まれる機能部とプログラムとの関係についても、同様である。
　なお、本実施形態において、Ｘ線自動判定システムに含まれる各装置が使用する情報は、データ構造に依存せずどのようなデータ構造で表現されていてもよい。例えば、テーブル、リスト、データベース又はキューから適切に選択したデータ構造体が、情報を格納することができる。
　なお、本実施形態の共起情報判定システムに含まれる各装置は、物理的に一つの計算機上で、又は、論理的又は物理的に構成された複数の計算機上で構成される計算機システムであり、同一の計算機上で別個のスレッドで動作してもよく、複数の物理的計算機資源上に構築された仮想計算機上で動作してもよい。
　図３は、画像判定サーバ１０３の構成例を示すブロック図である。画像判定サーバ１０３は、例えば、ＣＰＵ３０１、メモリ３０２、入力装置３０３、表示装置３０４、通信装置３０５、及び補助記憶装置３１０を有する計算機によって構成される。ＣＰＵ３０１、メモリ３０２、入力装置３０３、表示装置３０４、通信装置３０５、及び補助記憶装置３１０のハードウェアとしての説明は、ＣＰＵ２０１、メモリ２０２、入力装置２０３、表示装置２０４、通信装置２０５、及び補助記憶装置２１０と同様であるため、省略する。
　補助記憶装置２１０は、ＯＳ３１１を保持する。また、補助記憶装置は、禁止物管理ＤＢ（ＤａｔａＢａｓｅ）３１３、共起物管理ＤＢ３１４、関連性ＤＢ３１５、及びＸ線画像ＤＢ３１６を保持する。
　禁止物管理ＤＢ３１３は、禁止物と、禁止物と類似する一般物である紛らわし物品と、を定義する。禁止物は原則的にアラート出力対象の物品であり、一般物は原則的にアラート出力非対象の物品である。禁止物管理ＤＢ３１３において禁止物品だけでなく、紛らわし物品が定義され、紛らわし物品の存在が出力されることにより、検査員の検査精度を向上させることができる。
　共起物管理ＤＢ３１４は、共起物と、共起物が禁止物の共起物であるか一般物の共起物であるかと、を定義する。共起物とは、所定の物品がＸ線画像内に含まれている場合に、同時にＸ線画像の被写体に含まれる可能性が高い物品である。共起物は、単体では一般物であるものの、他の禁止物又は紛らわし物品と同時にＸ線画像内に存在する可能性が高い物品を含む。
　例えば、プッシュノズル自体は禁止物ではないが、禁止物である香水ビンはプッシュノズルを含んでいる可能性が高い。従って、例えば、画像判定サーバ１０３が、プッシュノズルがＸ線画像内に含まれていると判定したものの、香水ビンがＸ線画像内に含まれないと判定した場合であっても、共起物管理ＤＢ３１４にプッシュノズルが共起物として定義されていることにより、画像判定サーバ１０３は、禁止物である香水ビンが含まれている可能性が高いものとしてアラートを出力することができる。
　Ｘ線画像ＤＢ３１６は、例えば、画像送信端末１０２から受信したＸ線画像及びＸ線画像に対する画像判定結果等を保持する。Ｘ線画像に対する画像判定結果は、例えば、Ｘ線画像内に含まれる物品名、Ｘ線画像内に含まれる物品が禁止物、紛らわし物品、又は共起物に該当するか否か、又はＸ線画像判定の判定根拠等を含む。
　ＣＰＵ３０１は、Ｘ線画像認識部３１２、禁止物判定部３１７、及びアラート出力部３１８を含む。Ｘ線画像認識部３１２は、画像送信端末１０２から受信した画像データから、検査対象物の材質と形状から物品の種類を特定する。
　禁止物判定部３１７は、禁止物管理ＤＢ３１３及び共起物管理ＤＢ３１４を参照して、特定された物品が禁止物や共起物に該当するか否か（共起物に該当する場合は、さらに禁止物の共起物であるか、又は一般物の共起物に該当するか否か）を判定し、判定結果をアラート出力部３１８に送信する。アラート出力部３１８は、禁止物判定部３１７による判定結果に基づくアラートを、検査員端末１０４に出力する。
　図４は、禁止物管理ＤＢ３１３の一例である。禁止物管理ＤＢ３１３は、例えば、禁止物ＩＤ欄３１３１、禁止物品目欄３１３２、分類欄３１３３、及び紛らわし物品目欄３１３４を含む。
　禁止物ＩＤ欄３１３１は、禁止物を識別するためのＩＤを保持する。禁止物品目欄３１３２は、禁止物の品目を保持する。分類欄３１３３は、禁止物の分類を保持する。図４の例では、禁止物の紛らわし物品がある場合には分類欄３１３３に「紛らわしい禁止物」が格納され、禁止物の紛らわし物品がない場合には分類欄３１３３に「一発禁止物」が格納されているため、分類欄３１３３は禁止物の紛らわし物品があるか否かを示す。
　紛らわし物品目欄３１３４は、禁止物の紛らわし物品がある場合に、紛らわし物品の品目を保持する。禁止物の紛らわし物品がない場合には、例えば、「Ｎ／Ａ」（該当なし）が紛らわし物品目欄３１３４に格納されている。
　図５は、共起物管理ＤＢ３１４の一例である。共起物管理ＤＢ３１４は、例えば、共起物ＩＤ欄３１４１、共起物品目欄３１４２、及び判定欄３１４３を含む。共起物ＩＤ欄３１４１は、共起物を識別するＩＤを保持する。
　共起物品目欄３１４２は、共起物の品目を保持する。判定欄３１４３は、共起物が禁止物と同時にＸ線画像内に含まれるものであるのか、又は一般物（紛らわし物品）と同時にＸ線画像内に含まれるのであるのかを示す値を保持する。
　図６は、関連性ＤＢ３１５の一例である。関連性ＤＢ３１５は、例えば、禁止物ＩＤ欄３１５１と共起物ＩＤ欄３１５２とを保持する。関連性ＤＢ３１５において禁止物に対応する共起物は、当該禁止物又は当該禁止物の紛らわし物品と同時にＸ線画像内に含まれると定義されている。禁止物に対応する共起物がない場合には、例えば、「Ｎ／Ａ」（該当なし）が共起物ＩＤ欄３１５２に格納されている。
　図７は、検査員端末１０４の構成例を示すブロック図である。検査員端末１０４は、例えば、ＣＰＵ７０１、メモリ７０２、入力装置７０３、表示装置７０４、通信装置７０５、及び補助記憶装置７１０を有する計算機によって構成される。ＣＰＵ７０１、メモリ７０２、入力装置７０３、表示装置７０４、通信装置７０５、及び補助記憶装置７１０のハードウェアとしての説明は、ＣＰＵ２０１、メモリ２０２、入力装置２０３、表示装置２０４、通信装置２０５、及び補助記憶装置２１０と同様であるため、省略する。
　補助記憶装置７１０は、ＯＳ７１１を保持する。ＣＰＵ７０１は、検査画面出力部７１２を含む。検査画面出力部７１２は、例えば、画像判定サーバ１０３のアラート出力部３１８からの出力に基づいて、Ｘ線画像やアラートを表示装置７０４に出力する。
　図８は、アラート出力判定処理の一例を示すフローチャートである。図８のアラート出力判定処理が実行される前に、禁止物管理ＤＢ３１３、共起物管理ＤＢ３１４、及び関連性ＤＢ３１５には値が登録済みであるものとする。
　Ｘ線検査装置１０１は、荷物のＸ線画像を撮影して画像送信端末１０２にＸ線画像を送信し、画像送信端末１０２のＸ線画像切出部２１２は、受信したＸ線画像を物品単位に分割し、画像判定サーバ１０３に対して分割後のＸ線画像を送信する（Ｓ８０２）。なお、Ｘ線画像認識部３１２は、ステップＳ８０２で取得したＸ線画像をＸ線画像ＤＢ３１６に登録する。
　Ｘ線画像認識部３１２は、受信したＸ線画像内に含まれる物品の品目を特定し、当該特定した物品に該当する確率を算出する（Ｓ８０２）。具体的には、例えば、Ｘ線画像認識部３１２は、例えば、Ｘ線画像内に含まれる物品の材質（有機物、軽金属、軽い無機物、又は金属）、物質密度、形状の少なくとも１つに基づいて物品の品目を特定し、該当確率を算出するが、その特定方式はこれに限られない。
　禁止物判定部３１７は、禁止物管理ＤＢ３１３を検索する（Ｓ８０３）。禁止物判定部３１７は、禁止物管理ＤＢ３１３を検索した結果、ステップＳ８０２で特定された物品の少なくとも１つが禁止物管理ＤＢ３１３の禁止物品目に含まれるか否かを判定する（Ｓ８０４）。
　禁止物判定部３１７は、ステップＳ８０２で特定された物品の少なくとも１つが禁止物管理ＤＢ３１３の禁止物品目に含まれると判定した場合（Ｓ８０４：ＹＥＳ）、ステップＳ８０２で算出した当該禁止物品に該当する確率が高いか否か（例えば所定値以上であるか否か）を判定する（Ｓ８０５）。
　なお、禁止物判定部３１７は、ステップＳ８０２で特定された物品の少なくとも１つが禁止物管理ＤＢ３１３の禁止物品目に含まれると判定した場合に（Ｓ８０４：ＹＥＳ）、ステップＳ８０５の処理を実行せずに後述するステップＳ８０６に遷移してもよい。
　なお、禁止物判定部３１７は、ステップＳ８０４において、ステップＳ８０２で特定された物品の少なくとも１つが禁止物管理ＤＢ３１３の紛らわし物品目に含まれると判定した場合においても、ステップＳ８０５に遷移してもよく、この場合、ステップＳ８０５において、ステップＳ８０２で算出された当該紛らわし物品に該当する確率が高いか否か（例えば所定値以上であるか否か）を判定する。
　禁止物判定部３１７は、ステップＳ８０２で算出された当該禁止物品に該当する確率が高いと判定した場合（Ｓ８０５：ＹＥＳ）、アラート出力部３１８は警告を示す情報を検査員端末１０４に対して出力し（Ｓ８１１）、アラート出力判定処理を終了する。
　禁止物判定部３１７は、ステップＳ８０２で算出された当該禁止物品に該当する確率が高くないと判定した場合（Ｓ８０５：ＮＯ）、共起物管理ＤＢ３１４を検索する（Ｓ８０６）。禁止物判定部３１７は、共起物管理ＤＢ３１４を検索した結果、ステップＳ８０２で特定された物品の少なくとも１つが共起物管理ＤＢ３１４の少なくとも１つの共起物品目に該当するか否かを判定する（Ｓ８０７）。
　禁止物判定部３１７は、ステップＳ８０２で特定された物品の少なくとも１つ共起物管理ＤＢ３１４の共起物品目に含まれると判定した場合（Ｓ８０７：ＹＥＳ）、共起物管理ＤＢ３１４の判定欄３１４３を参照して、当該共起物が禁止物の共起物であるか、一般物の共起物であるかを判定する（Ｓ８０８）。なお、ステップＳ８０６の処理に続いて、ステップＳ８０７の処理を省略してステップＳ８０８の処理に遷移するようにしてもよい。
　なお、ステップＳ８０８において、禁止物判定部３１７は、共起物が禁止物の共起物であると判定した場合、関連性ＤＢ３１５を参照して、当該共起物に対応する禁止物ＩＤを特定し、禁止物管理ＤＢ３１３を参照して当該禁止物ＩＤに対応する禁止物品目及び紛らわし物品目を特定してもよい。
　禁止物判定部３１７が、当該共起物が禁止物の共起物であると判定した場合（Ｓ８０８：ＹＥＳ）、アラート出力部３１８は警告よりもアラートレベルが低い注意喚起を示す情報を検査員端末１０４に対して出力し（Ｓ８１２）、アラート出力判定処理を終了する。禁止物判定部３１７が、当該共起物が一般物の共起物であると判定した場合（Ｓ８０８：ＮＯ）、アラート出力部３１８からの出力は行われずに（Ｓ８１３）、アラート出力判定処理を終了する。
　なお、禁止物判定部３１７が、当該共起物が一般物の共起物であると判定した場合に（Ｓ８０８：ＮＯ）、ステップＳ８１２において、アラート出力部３１８は一般物の共起物がＸ線画像内に含まれることを示す情報（即ち禁止物が含まれている可能性が極めて低く安全であることを示す情報）を、検査員端末１０４に送信してもよい。
　なお、禁止物判定部３１７が、当該共起物が一般物の共起物であると判定した場合に（Ｓ８０８：ＮＯ）、ステップＳ８１２に遷移するようにしてもよく、この場合、アラート出力部３１８は、確率は低いものの禁止物がＸ線画像内に含まれているおそれがあることを示す注意喚起の情報を、検査員端末１０４に送信してもよい。
　禁止物判定部３１７は、ステップＳ８０２で特定された物品が禁止物管理ＤＢ３１３の禁止物品目を含まないと判定した場合（Ｓ８０４：ＮＯ）、共起物管理ＤＢ３１４を検索する（Ｓ８０９）。禁止物判定部３１７は、共起物管理ＤＢ３１４を検索した結果、ステップＳ８０２で特定された物品の少なくとも１つが共起物管理ＤＢ３１４の共起物品目に含まれるか否かを判定する（Ｓ８１０）
　禁止物判定部３１７が、当該共起物が禁止物の共起物であると判定した場合（Ｓ８１０：ＹＥＳ）、アラート出力部３１８は注意喚起を示す情報を検査員端末１０４に対して出力し（Ｓ８１２）、アラート出力判定処理を終了する。禁止物判定部３１７が、当該共起物が一般物の共起物であると判定した場合（Ｓ８１０：ＮＯ）、アラート出力部３１８からの出力は行われずに（Ｓ８１３）、アラート出力判定処理を終了する。
　なお、禁止物判定部３１７が、当該共起物が一般物の共起物であると判定した場合に（Ｓ８１０：ＮＯ）、ステップＳ８１３においてアラート出力部３１８は、一般物の共起物がＸ線画像内に含まれることを示す情報（即ち禁止物が含まれている可能性が極めて低く安全であることを示す情報）を、検査員端末１０４に送信してもよい。
　なお、アラート出力部３１８は、ステップＳ８１１～ステップＳ８１３のいずれの処理を行う場合であっても、画像送信端末１０２から受信したＸ線画像を検査員端末１０４に送信する。また、アラート出力部３１８は、ステップＳ８１１～ステップＳ８１３のいずれの処理を行う場合であっても、具体的な判定結果を検査員端末１０４に出力してもよい。例えば、Ｘ線画像内に禁止物が含まれるか否か及びその確率、Ｘ線画像内に紛らわし物品が含まれるか否か、Ｘ線画像内に共起物が含まれるか否か、Ｘ線画像内に共起物が含まれる場合に当該共起物は禁止物の共起物であるか一般物の共般物であるか、並びにＸ線画像内に禁止物や共起物が含まれる場合のこれらの物品の位置を示す座標情報等はいずれも、上記した具体的な判定結果の一例である。
　なお、禁止物判定部３１７が、ステップＳ８０２で算出された当該禁止物品に該当する確率が高いと判定した場合（Ｓ８０５：ＹＥＳ）であっても、さらに共起物管理ＤＢ３１４を検索して、Ｘ線画像内に共起物がさらに存在すると判定した場合には、アラート出力部３１８は、ステップＳ８１１における警告を示す情報に共起物の物品目、当該共起物が禁止物の共起物であるか、一般物の共起物であるかを示す情報を含めてもよい。
　なお、禁止物判定部３１７がステップＳ８０４においてＸ線画像内に禁止物が含まれないものの、紛らわし物品が含まれると判定した場合には、ステップＳ８１１～ステップＳ８１３において、紛らわし物品が含まれることを示す情報を併せて検査員端末１０４に送信してもよい。これにより、検査員端末１０４においてＸ線画像内に紛らわし物品が含まれることを表示することができ、検査員が紛らわし物品を禁止物品であると誤って判定する可能性が低くなり、検査効率が向上する。
　図９乃至図１２は、画像判定サーバ１０３からの出力に基づいて、検査画面出力部７１２が表示装置７０４に表示する画面例である。検査員端末１０４のユーザ（検査員）は、表示された共起情報をもとに目視検査を行い、検査対象の荷物内に禁止物があるか否かの最終判定を実施する。検査員端末１０４はこのとき、Ｘ線画像および禁止物と共起物の画素領域をハイライトするなどして、検査員による目視確認を補助する。
　図９は、禁止物判定部３１７が禁止物（但し確率が高い）と禁止物の共起物とがＸ線画像内に存在すると判定した場合に表示される、警告の表示画面の一例である。つまり、図９の表示画面９００は、ステップＳ８０５で処理を経由してステップＳ８１１の処理が行われた場合の一例である。
　特に、図９の表示画面９００は、禁止物判定部３１７が、ステップＳ８０２で算出された当該禁止物品に該当する確率が高いと判定した（Ｓ８０５：ＹＥＳ）、さらに共起物管理ＤＢ３１４の検索も行った場合の例である。
　図９乃至図１２の表示画面９００は、例えば、Ｘ線画像表示領域９０１、メッセージ表示領域９０２、ＯＫボタン９０３、及びＮＧボタン９０４を含む。検査員端末１０４が画像判定サーバ１０３から受信したＸ線画像表示領域９０１にはＸ線画像が表示される。なお、Ｘ線画像内に禁止物や共起物が含まれると判定された場合には、Ｘ線画像表示領域９０１において、禁止物や共起物の対象画素領域のみが切り出して拡大表示されてもよい。メッセージ表示領域９０２には、検査員端末１０４がアラート出力部３１８から受信したアラート等に応じたメッセージが表示される。
　ＯＫボタン９０３は、検査員が目視でＸ線画像を確認した結果、Ｘ線画像内に禁止物が含まれないと判断した場合に選択されるボタンである。ＮＧボタン９０４は、検査員が目視でＸ線画像を確認した結果、Ｘ線画像内に禁止物が含まれると判断した場合に選択されるボタンである。なお、検査員が、Ｘ線画像に対してＯＫボタン９０３又はＮＧボタン９０４のいずれかを選択したかを示す情報が、当該Ｘ線情報と紐づけられてＸ線画像ＤＢ３１６に格納されるとよい。
　図９の例では、禁止物（但し確率が高い）と共起物とがＸ線画像内に存在すると判定されているため、Ｘ線画像表示領域９０１にはＸ線画像に加えて、Ｘ線画像領域に含まれる禁止物の座標情報、及び禁止物に関連する共起物の座標情報が表示されている。また、図９の例では、禁止物（但し確率が高い）と共起物とがＸ線画像内に存在すると判定されているため、メッセージ表示領域９０２には、警告メッセージが表示されている。
　図１０は、禁止物判定部３１７が禁止物（但し確率が低い）と、禁止物の共起物と、がＸ線画像内に存在すると判定した場合に表示される、注意喚起の表示画面９００の一例である。つまり、図１０の表示画面９００は、ステップＳ８０５～ステップＳ８０８の処理を経由してステップＳ８１２の処理が行われた場合の例である。
　図１０の例では、禁止物（但し確率が低い）と、禁止物の共起物とがＸ線画像内に存在すると判定されているため、Ｘ線画像表示領域９０１にはＸ線画像に加えて、Ｘ線画像領域に含まれる禁止物の座標情報、及び禁止物に関連する共起物の座標情報が表示されている。
　また、図１０の例では、メッセージ表示領域９０２には、注意喚起メッセージが表示されている。図１０の例では、禁止物判定部３１７がＸ線画像内に禁止物が存在するもののその確率が低いと判定しているが、禁止物の共起物がＸ線画像内に存在すると判定しているため、注意喚起メッセージにおいて「禁止物の疑い（可能性：高い）」と表示されている。
　図１１は、禁止物判定部３１７が、禁止物（但し確率が低い）がＸ線画像内に存在する（但し、共起物は存在しない）と判定した場合に表示される、注意喚起の表示画面９００の一例である。つまり、図１１の表示画面９００は、ステップＳ８０７で共起物なしと判定された場合の例である。
　図１１の例では、禁止物（但し確率が低い）がＸ線画像内に存在するものの、共起物がＸ線画像内に存在しないと判定されているため、Ｘ線画像表示領域９０１にはＸ線画像に加えて、Ｘ線画像領域に含まれる禁止物の座標情報が表示されている。
　また、図１１の例では、メッセージ表示領域９０２には、注意喚起メッセージが表示されている。図１１の例では、禁止物判定部３１７がＸ線画像内に禁止物が存在するもののその確率が低いと判定し、さらに共起物がＸ線画像内に存在しないと判定しているため、注意喚起メッセージにおいて「禁止物の疑い（可能性：低い）」と表示されている。
　図１２は、禁止物判定部３１７が、禁止物がＸ線画像内に存在しないと判定したものの、禁止物の共起物がＸ線画像内に存在すると判定した場合に表示される、表示画面９００の一例である。つまり、図１２の表示画面９００は、ステップＳ８０４で禁止物がないと判定されたものの、ステップＳ８１０で禁止物に関連する共起物があると判定された場合の例である。
　図１２の例では、禁止物がＸ線画像内に存在しないものの、禁止物の共起物がＸ線画像内に存在すると判定されているため、Ｘ線画像表示領域９０１にはＸ線画像に加えて、Ｘ線画像領域に含まれる禁止物の共起物の座標情報が表示されている。また、図１１の例では、メッセージ表示領域９０２には、Ｘ線画像内に共起物が存在することを示す注意喚起メッセージが表示されている。
　なお、図９乃至図１２のＸ線画像表示領域９０１において、説明のために共起物と判定された物品を二重線によって、禁止物と判定された物品を点線で枠付け表示しているが、枠の色を禁止物と異なる色にすることや、禁止物や共起物と判定されたＸ線画像のそのものの色を変更して表現するなど、その表現方法は問わない。また、Ｘ線画像表示領域９０１又はメッセージ表示領域９０２において、禁止物、共起物、及び共起物に関連する禁止物の名称を併せて表示するなど、検査員の読み解きを支援するための表示が行われてもよい。
　また、図９乃至図１２において、表示画面９００にポップアップでメッセージが表示されたり、Ｘ線検査装置１０１等に付随するランプやスピーカの機構を用いてアラートや注意喚起がされたり等、アラートの表現方法は問わない。また、表示画面９００に禁止物の該当確率等がスコアとして表示されてもよいし、当該スコアに応じて、Ｘ線画像表示領域９０１における枠の表示形状及び色、ランプの発光色、並びにスピーカから出力される音量を変化させたり強調させたりしてもよい。
　なお、図示を省略したが、ステップＳ８１３で出力なしと判定された場合（即ちＸ線画像内に禁止物も、禁止物の共起物も存在しないと判定された場合）には、検査画面出力部７１２は、アラートを表示せずにＸ線画像を表示装置７０４に表示するとよい。
　本実施例の画像判定サーバ１０３は、Ｘ線画像の画素領域内に禁止物が存在するか否かだけでなく、共起物が存在するか否かにも基づき、アラートの内容を決定する。
　これにより、画像判定サーバ１０３は、禁止物そのものが存在することを正しく判定できなかった場合であっても、禁止物に関連する共起物によっても禁止物の存在を判定することができるため、判定制度が向上し、より正確にアラートを出力できるため、ひいては検査員の見逃しリスク低減を図ることができる。
　また、表示画面９００は禁止物と共起物とを検査員が容易に認識可能な形態で表示するため、検査員が目視する画素領域を絞り込むことができる、検査員による目視検査の質が向上する。
　なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることも可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
　例えば、上記した実施形態では、荷物のＸ線画像を撮影する検査装置の例を説明しているが、その画像はＸ線照射によるものに限らず画像として認識できればよく、また画像を基に装置によって、特定の材質の組成や密度、形状を検出できるものを含む。また、被写体は荷物に限られない。例えば、本実施形態は、防犯カメラによって撮影された画像による犯罪の検知や、ＭＲＩ（Ｍａｇｎｅｔｉｃ　Ｒｅｓｏｎａｎｃｅ　Ｉｍａｇｉｎｇ）装置によって撮影された画像による病巣の発見等に用いることもできる。
　また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ　Ｓｔａｔｅ　Ｄｒｉｖｅ）等の記録装置、又は、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に置くことができる。
　また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。

Claims (10)

  1. 　アラート出力装置であって、
    　プロセッサとメモリとを含み、
    　出力装置に接続され、
    　前記メモリは、
    　判定対象画像の被写体に含まれる１以上の検査対象物それぞれを示す画像情報と、
    　アラート対象物を示すアラート対象物情報と、
    　アラート対象物と同時に画像内に含まれる物であると予め定められたアラート共起物を示す共起物情報と、を保持し、
    　前記プロセッサは、
    　前記アラート対象物情報を参照して、前記１以上の検査対象物の少なくとも１つが前記アラート対象物に該当するかを判定し、
    　前記１以上の検査対象物のいずれも前記アラート対象物に該当しないと判定した場合、前記共起物情報を参照して、前記１以上の検査対象物の少なくとも１つが前記アラート共起物の少なくとも１つに該当するかを判定し、
    　前記１以上の検査対象物の少なくとも１つが前記アラート対象物に該当しかつ所定の条件を満たすと判定した場合、及び前記１以上の検査対象物のいずれも前記アラート対象物に該当しないものの前記１以上の検査対象物の少なくとも１つが前記アラート共起物の少なくとも１つに該当すると判定した場合に、アラートを前記出力装置に出力するアラート出力装置。
  2. 　請求項１に記載のアラート出力装置であって、
    　前記画像情報は、前記１以上の検査対象物それぞれが前記被写体に含まれる確率を示し、
    　前記所定の条件は、前記アラート対象物に該当する当該少なくとも１つの検査対象物が前記アラート対象物に該当する確率が所定値以上である、アラート出力装置。
  3. 　請求項２に記載のアラート出力装置であって、
    　前記プロセッサは、
    　前記アラート対象物に該当する当該少なくとも１つの検査対象物が前記アラート対象物に該当する確率が前記所定値以上であると判定した場合に第１アラートを前記出力装置に出力し、
    　前記１以上の検査対象物のいずれも前記アラート対象物に該当する確率が前記所定値未満であるものの、前記１以上の検査対象物の少なくとも１つが前記アラート共起物の少なくとも１つに該当すると判定した場合に、前記第１アラートよりもアラートレベルが低い第２アラートを前記出力装置に出力する、アラート出力装置。
  4. 　請求項２に記載のアラート出力装置であって、
    　前記プロセッサは、
    　前記１以上の検査対象物のいずれもが、前記アラート対象物及び前記アラート共起物のいずれにも該当しないと判定した場合に、前記アラートを前記出力装置に出力しない、アラート出力装置。
  5. 　請求項２に記載のアラート出力装置であって、
    　前記プロセッサは、
    　前記１以上の検査対象物のいずれも前記アラート対象物に該当する確率が前記所定値未満であり、かつ前記１以上の検査対象物のいずれも前記アラート共起物のいずれにも該当しないと判定した場合に、前記アラートを前記出力装置に出力しない、アラート出力装置。
  6. 　請求項２に記載のアラート出力装置であって、
    　前記共起物情報は、アラート対象物ではない物である一般物と同時に画像内に含まれる物であると予め定められた一般共起物を示し、
    　前記プロセッサは、
    　前記共起物情報を参照して、前記１以上の検査対象の少なくとも１つが前記一般共起物に該当するかを判定し、
    　前記１以上の検査対象物のいずれもが、前記アラート対象物及び前記アラート共起物のいずれにも該当しないものの、前記１以上の検査対象物の少なくとも１つが前記一般共起物に該当すると判定した場合に、前記１以上の検査対象物に前記紛らわし物が含まれることを示す情報を、前記出力装置に出力する、アラート出力装置。
  7. 　請求項６に記載のアラート出力装置であって、
    　前記アラート対象物に該当する当該少なくとも１つの検査対象物が前記アラート対象物に該当する確率が所定値以上であると判定した場合に第１アラートを前記出力装置に出力し、
    　前記１以上の検査対象物のいずれも前記アラート対象物に該当する確率が前記所定値未満であり、かつ前記１以上の検査対象物のいずれもが前記アラート共起物及び前記一般共起物のいずれにも該当しないと判定した場合に、前記第１アラートよりもアラートレベルが低い第３アラートを前記出力装置に出力する、アラート出力装置。
  8. 　請求項１に記載のアラート出力装置であって、
    　前記アラート対象物情報は、前記アラート対象物に類似する物であると予め定められた紛らわし物を示し、
    　前記プロセッサは、前記アラート対象物情報を参照して、前記１以上の検査対象物の少なくとも１つが前記紛らわし物に該当すると判定した場合、前記１以上の検査対象物に前記紛らわし物が含まれることを示す情報を、前記出力装置に出力する、アラート出力装置。
  9. 　アラート出力装置によるアラート出力方法であって、
    　前記アラート出力装置は、
    　プロセッサとメモリとを含み、
    　出力装置に接続され、
    　前記メモリは、
    　判定対象画像の被写体に含まれる１以上の検査対象物それぞれを示す画像情報と、
    　アラート対象物を示すアラート対象物情報と、
    　アラート対象物と同時に画像内に含まれる物であると予め定められたアラート共起物を示す共起物情報と、を保持し、
    　前記アラート出力方法は、
    　前記プロセッサが、前記アラート対象物情報を参照して、前記１以上の検査対象物の少なくとも１つが前記アラート対象物に該当するかを判定し、
    　前記プロセッサが、前記１以上の検査対象物のいずれも前記アラート対象物に該当しないと判定した場合、前記共起物情報を参照して、前記１以上の検査対象物の少なくとも１つが前記アラート共起物の少なくとも１つに該当するかを判定し、
    　前記プロセッサが、前記１以上の検査対象物の少なくとも１つが前記アラート対象物に該当しかつ所定の条件を満たすと判定した場合、及び前記１以上の検査対象物のいずれも前記アラート対象物に該当しないものの前記１以上の検査対象物の少なくとも１つが前記アラート共起物の少なくとも１つに該当すると判定した場合に、アラートを前記出力装置に出力するアラート出力方法。
  10. 　アラート出力装置にアラート出力を実行させるプログラムを保持する、コンピュータ読み取り可能な非一時的記録媒体であって、
    　前記アラート出力装置は、
    　プロセッサとメモリとを含み、
    　出力装置に接続され、
    　前記メモリは、
    　判定対象画像の被写体に含まれる１以上の検査対象物それぞれを示す画像情報と、
    　アラート対象物を示すアラート対象物情報と、
    　アラート対象物と同時に画像内に含まれる物であると予め定められたアラート共起物を示す共起物情報と、を保持し、
    　前記プログラムは、
    　前記アラート対象物情報を参照して、前記１以上の検査対象物の少なくとも１つが前記アラート対象物に該当するかを判定する処理と、
    　前記１以上の検査対象物のいずれも前記アラート対象物に該当しないと判定した場合、前記共起物情報を参照して、前記１以上の検査対象物の少なくとも１つが前記アラート共起物の少なくとも１つに該当するかを判定する処理と、
    　前記１以上の検査対象物の少なくとも１つが前記アラート対象物に該当しかつ所定の条件を満たすと判定した場合、及び前記１以上の検査対象物のいずれも前記アラート対象物に該当しないものの前記１以上の検査対象物の少なくとも１つが前記アラート共起物の少なくとも１つに該当すると判定した場合に、アラートを前記出力装置に出力する処理と、を前記プロセッサに実行させる、コンピュータ読み取り可能な非一時的記録媒体。
PCT/JP2020/032740 2020-02-21 2020-08-28 アラート出力装置、アラート出力方法、及び非一時的記録媒体 WO2021166291A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202080073381.XA CN114599966A (zh) 2020-02-21 2020-08-28 警报输出装置、警报输出方法及非暂态记录介质
US17/792,066 US20230043386A1 (en) 2020-02-21 2020-08-28 Alert output apparatus, alert output method, and non-transitory recording medium
EP20919666.6A EP4109081A4 (en) 2020-02-21 2020-08-28 ALARM ISSUE DEVICE, ALARM ISSUE METHOD AND NON-VOLATILE RECORDING MEDIUM

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020028448A JP7249300B2 (ja) 2020-02-21 2020-02-21 アラート出力装置、アラート出力方法、及びアラート出力プログラム
JP2020-028448 2020-02-21

Publications (1)

Publication Number Publication Date
WO2021166291A1 true WO2021166291A1 (ja) 2021-08-26

Family

ID=77390566

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/032740 WO2021166291A1 (ja) 2020-02-21 2020-08-28 アラート出力装置、アラート出力方法、及び非一時的記録媒体

Country Status (5)

Country Link
US (1) US20230043386A1 (ja)
EP (1) EP4109081A4 (ja)
JP (1) JP7249300B2 (ja)
CN (1) CN114599966A (ja)
WO (1) WO2021166291A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7254237B1 (ja) 2022-11-15 2023-04-07 株式会社日立パワーソリューションズ Ｘ線装置及びｘ線を用いた材質分類方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009042134A (ja) 2007-08-10 2009-02-26 Ihi Corp 高速材質識別検査装置および方法
JP2009122043A (ja) * 2007-11-16 2009-06-04 Ihi Corp 材質識別検査装置および方法
JP2012528397A (ja) * 2009-05-26 2012-11-12 ラピスカン システムズ、インコーポレイテッド 特定の対象物品の識別のためのｘ線断層撮影検査システム
US20140280141A1 (en) * 2013-03-14 2014-09-18 Morpho Detection, Inc. Method and system for grouping and classifying objects in computed tomography data
US20170242148A1 (en) * 2016-02-22 2017-08-24 Rapiscan Systems, Inc. Systems and Methods for Detecting Threats and Contraband in Cargo
JP2020013290A (ja) * 2018-07-18 2020-01-23 株式会社日立製作所 映像解析装置、人物検索システムおよび人物検索方法
JP2020028448A (ja) 2018-08-22 2020-02-27 株式会社三共 スロットマシン

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009194786A (ja) 2008-02-18 2009-08-27 Sanyo Electric Co Ltd 対象物検出装置及び撮像装置
US8600149B2 (en) * 2008-08-25 2013-12-03 Telesecurity Sciences, Inc. Method and system for electronic inspection of baggage and cargo
JP2011128992A (ja) 2009-12-18 2011-06-30 Canon Inc 情報処理装置およびその処理方法
DE102011112652A1 (de) * 2011-05-16 2012-11-22 Eads Deutschland Gmbh Bildanalyse für Kampfmittelbeseitigung und Sicherheitskontrollen
JP2018005432A (ja) 2016-06-30 2018-01-11 株式会社日立製作所 画像配信システム
JP6764709B2 (ja) 2016-06-30 2020-10-07 株式会社日立製作所 Ｘ線自動判定装置、ｘ線自動判定方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009042134A (ja) 2007-08-10 2009-02-26 Ihi Corp 高速材質識別検査装置および方法
JP2009122043A (ja) * 2007-11-16 2009-06-04 Ihi Corp 材質識別検査装置および方法
JP2012528397A (ja) * 2009-05-26 2012-11-12 ラピスカン システムズ、インコーポレイテッド 特定の対象物品の識別のためのｘ線断層撮影検査システム
US20140280141A1 (en) * 2013-03-14 2014-09-18 Morpho Detection, Inc. Method and system for grouping and classifying objects in computed tomography data
US20170242148A1 (en) * 2016-02-22 2017-08-24 Rapiscan Systems, Inc. Systems and Methods for Detecting Threats and Contraband in Cargo
JP2020013290A (ja) * 2018-07-18 2020-01-23 株式会社日立製作所 映像解析装置、人物検索システムおよび人物検索方法
JP2020028448A (ja) 2018-08-22 2020-02-27 株式会社三共 スロットマシン

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4109081A4

Also Published As

Publication number Publication date
JP7249300B2 (ja) 2023-03-30
CN114599966A (zh) 2022-06-07
EP4109081A1 (en) 2022-12-28
JP2021135043A (ja) 2021-09-13
US20230043386A1 (en) 2023-02-09
EP4109081A4 (en) 2024-03-06

Similar Documents

Publication Publication Date Title
Taresh et al. Transfer learning to detect COVID‐19 automatically from X‐Ray images using convolutional neural networks
JP7476194B2 (ja) 画像処理のためのシステムおよび方法
US9665798B2 (en) Device and method for detecting specified objects in images using metadata
Ghaderzadeh et al. X‐ray equipped with artificial intelligence: changing the COVID‐19 diagnostic paradigm during the pandemic
LAMPETER et al. Computerized search of chest radiographs for nodules
JP6764709B2 (ja) Ｘ線自動判定装置、ｘ線自動判定方法
EP3862749A1 (en) Training data generation device and training data generation program
WO2021166291A1 (ja) アラート出力装置、アラート出力方法、及び非一時的記録媒体
US20210239875A1 (en) Alert output timing control apparatus, alert output timing control method, and non-transitory computer readable storage medium
US11409888B2 (en) Security information processing device, information processing method, and recording medium
Li et al. The association of proton pump inhibitors and chronic kidney disease: cause or confounding?
Dabbagh et al. Harnessing machine learning in early COVID-19 detection and prognosis: a comprehensive systematic review
Abirami et al. P2P-COVID-GAN: Classification and segmentation of COVID-19 lung infections from CT images using GAN
US20240104240A1 (en) System and method for agentless detection of sensitive data in computing environments
WO2020008457A1 (en) System and method for automated visual inspection
Khaled et al. Multiclass classification for gvhd prognosis prior to allogeneic stem cell transplantation
US20070286338A1 (en) Method and system of inspecting baggage
de Margerie-Mellon et al. 2D or 3D measurements of pulmonary nodules: preliminary answers and more open questions
Fernández-Miranda et al. A retrospective study of deep learning generalization across two centers and multiple models of X-ray devices using COVID-19 chest-X rays
JPH05174060A (ja) 文書管理装置
Aoki et al. The exceptional performance of deep learning for capsule endoscopy: Will such quality be maintained in clinical scenarios?
Xuen et al. The classification of wafer defects: an evaluation of different feature-based ResNet transfer learning models with support vector machine
Leopold et al. Reporting Statistics in Abstracts inClinical Orthopaedics and Related Research®
Zulueta The need for standards for COVID-19 quantitative imaging analysis applications
Alkasab et al. Lessons learned from the front lines of artificial intelligence implementation

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20919666

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2020919666

Country of ref document: EP

Effective date: 20220921