JP6942779B2 - Inspection equipment and inspection program - Google Patents

Inspection equipment and inspection program Download PDF

Info

Publication number
JP6942779B2
JP6942779B2 JP2019222830A JP2019222830A JP6942779B2 JP 6942779 B2 JP6942779 B2 JP 6942779B2 JP 2019222830 A JP2019222830 A JP 2019222830A JP 2019222830 A JP2019222830 A JP 2019222830A JP 6942779 B2 JP6942779 B2 JP 6942779B2
Authority
JP
Japan
Prior art keywords
information
processor
baggage
ray image
inspection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019222830A
Other languages
Japanese (ja)
Other versions
JP2020042860A (en
Inventor
優香 渡辺
優香 渡辺
赤木 琢磨
琢磨 赤木
佐藤 正憲
正憲 佐藤
賢一 下山
賢一 下山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Toshiba Infrastructure Systems and Solutions Corp
Original Assignee
Toshiba Corp
Toshiba Infrastructure Systems and Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2018166854A external-priority patent/JP6632674B1/en
Application filed by Toshiba Corp, Toshiba Infrastructure Systems and Solutions Corp filed Critical Toshiba Corp
Priority to JP2019222830A priority Critical patent/JP6942779B2/en
Publication of JP2020042860A publication Critical patent/JP2020042860A/en
Priority to JP2021145597A priority patent/JP7204848B2/en
Application granted granted Critical
Publication of JP6942779B2 publication Critical patent/JP6942779B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本発明の実施形態は、検査装置及び検査プログラムに関する。 Embodiments of the present invention relate to inspection equipment and inspection programs.

税関を通過する荷物を検査する検査システムでは、ソータ(区分処理機構)に供給された荷物の外観の画像(外観画像)及びX線の画像(X線画像)をオペレータに視認させる。オペレータは、荷物を確認する必要があるか否か判断し、検査システムに操作を入力する。検査システムは、操作入力に基づいて、荷物を確認が必要な荷物と、確認が不要な荷物とに区分する。 In the inspection system for inspecting the luggage passing through customs, the operator is made to visually recognize the appearance image (appearance image) and the X-ray image (X-ray image) of the luggage supplied to the sorter (classification processing mechanism). The operator determines if the baggage needs to be checked and inputs the operation into the inspection system. The inspection system classifies the package into a package that requires confirmation and a package that does not require confirmation based on the operation input.

この方法は、オペレータが荷物の区分先を決定するため、荷物の区分先の決定に時間を要する、確認すべき荷物を見逃す、確認する必要のない荷物を確認用として区分してしまうなどの課題がある。 In this method, since the operator decides the sorting destination of the luggage, it takes time to decide the sorting destination of the luggage, the luggage to be confirmed is overlooked, and the luggage that does not need to be confirmed is classified for confirmation. There is.

特開2018−13939号公報Japanese Unexamined Patent Publication No. 2018-13939

本発明が解決しようとする課題は、効率的にオペレータが荷物の区分先を決定することが可能な検査装置及び検査プログラムを提供することである。 An object to be solved by the present invention is to provide an inspection device and an inspection program capable of efficiently determining a cargo sorting destination by an operator.

一実施形態に係わる検査装置は、通信インタフェースと、プロセッサとを具備する。通信インタフェースは、搬送されている荷物を撮像した画像から文字認識処理により取得した住所氏名情報及び前記荷物のX線画像を含む荷物情報と、オペレータによる操作に基づいて生成された操作信号と、を取得する。プロセッサは、前記操作信号に基づいて生成された前記荷物が規制品候補であるか否かを示す検査結果情報と前記住所氏名情報及び前記X線画像とが対応付けられた過去履歴から、新たに搬送された荷物から取得した前記住所氏名情報を含む前記荷物情報に対応する前記検査結果情報を抽出結果として抽出する。前記プロセッサは、前記操作信号に基づいて、オペレータが前記荷物を規制品候補であると判断した理由を示す区分理由を、前記検査結果情報に付加し、前記過去履歴から抽出された、予め設定された区分理由が付加された荷物の数に基づく情報を出力する。 The inspection device according to one embodiment includes a communication interface and a processor. The communication interface provides the address and name information acquired by character recognition processing from the image of the transported package, the package information including the X-ray image of the package, and the operation signal generated based on the operation by the operator. get. The processor newly uses the past history in which the inspection result information indicating whether or not the baggage generated based on the operation signal is a candidate for a regulated product is associated with the address / name information and the X-ray image. The inspection result information corresponding to the baggage information including the address and name information acquired from the transported baggage is extracted as an extraction result. Based on the operation signal, the processor adds a classification reason indicating the reason why the operator determines the baggage as a regulated product candidate to the inspection result information, and is set in advance extracted from the past history. Outputs information based on the number of packages to which the reason for classification is added.

図1は、一実施形態に係る検査システムの概略的な構成例について説明する為の説明図である。FIG. 1 is an explanatory diagram for explaining a schematic configuration example of an inspection system according to an embodiment. 図2は、一実施形態に係る検査システムの構成例について説明する為の説明図である。FIG. 2 is an explanatory diagram for explaining a configuration example of the inspection system according to the embodiment. 図3は、一実施形態に係る登録情報の例について説明する為の説明図である。FIG. 3 is an explanatory diagram for explaining an example of registration information according to one embodiment. 図4は、一実施形態に係る確認画面の例について説明する為の説明図である。FIG. 4 is an explanatory diagram for explaining an example of the confirmation screen according to the embodiment. 図5は、一実施形態に係る検査システムの動作の例について説明する為のフローチャートである。FIG. 5 is a flowchart for explaining an example of the operation of the inspection system according to the embodiment. 図6は、他の実施形態に係る確認画面の例について説明する為の説明図である。FIG. 6 is an explanatory diagram for explaining an example of a confirmation screen according to another embodiment. 図7は、他の実施形態に係る登録情報の例について説明する為の説明図である。FIG. 7 is an explanatory diagram for explaining an example of registration information according to another embodiment.

以下、実施形態について、図面を参照して説明する。
図1は、一実施形態に係る検査システム1の概略的な構成例について説明する為の説明図である。
Hereinafter, embodiments will be described with reference to the drawings.
FIG. 1 is an explanatory diagram for explaining a schematic configuration example of the inspection system 1 according to the embodiment.

検査システム1は、検査対象である荷物2を区分するシステムである。検査システム1は、税関などで、規制品の発見などに用いられる。規制品は、国内への輸入及び国外への輸出が規制されているものである。規制品は、例えば、武器、麻薬、動植物などである。 The inspection system 1 is a system for classifying the luggage 2 to be inspected. The inspection system 1 is used for finding regulated products at customs and the like. Controlled products are those whose domestic imports and exports to foreign countries are regulated. Controlled items include, for example, weapons, narcotics, animals and plants.

荷物2は、検査システム1によって検査されるものである。荷物2には、Electronic Advance Data(EAD)タグ3が張り付けられている。EADタグ3は、他国の税関での検査結果であるEAD情報に含まれる識別コード(EAD識別コード)が印刷されたものである。EAD識別コードは、例えばバーコードとして印刷される。EAD情報は、EAD識別コード、住所氏名情報、及び内容物の品名及び重量などを示す情報(内容物情報)などを含む情報である。住所氏名情報は、例えば、荷物2の受取人(宛先)を示す情報(受取人情報)、及び/または差出人を示す情報(差出人情報)である。 The luggage 2 is inspected by the inspection system 1. An Electrical Advance Data (EAD) tag 3 is attached to the luggage 2. The EAD tag 3 is printed with an identification code (EAD identification code) included in the EAD information which is the inspection result at the customs of another country. The EAD identification code is printed as, for example, a barcode. The EAD information is information including an EAD identification code, an address / name information, and information (content information) indicating the product name and weight of the content. The address and name information is, for example, information indicating the recipient (destination) of the package 2 (recipient information) and / or information indicating the sender (sender information).

また、荷物2には、帳票4が張り付けられている。帳票4は、受取人情報及び/または差出人情報を示す住所氏名情報、並びに内容物を示す情報(内容物情報)などが記載されたものである。 In addition, a form 4 is attached to the luggage 2. Form 4 contains information such as address and name information indicating recipient information and / or sender information, and information indicating contents (content information).

なお、図1に示されるように、荷物2には、EADタグ3と帳票4との両方が貼られているもの、帳票4が貼られEADタグ3が貼られていないものなどがある。 As shown in FIG. 1, the baggage 2 includes a baggage 2 to which both the EAD tag 3 and the form 4 are attached, and a baggage 2 to which the form 4 is attached and the EAD tag 3 is not attached.

検査システム1は、ソータ11、ソータ制御装置12、EADタグリーダ13、カメラ14、X線撮影装置15、帳票リーダ16、操作端末17、第1のストレージ装置18、第2のストレージ装置19、及び検査装置20を備える。ソータ11、ソータ制御装置12、EADタグリーダ13、カメラ14、X線撮影装置15、帳票リーダ16、操作端末17、第1のストレージ装置18、第2のストレージ装置19、及び検査装置20は、ネットワーク21を介して互いに通信可能に構成されている。 The inspection system 1 includes a sorter 11, a sorter control device 12, an EAD tag reader 13, a camera 14, an X-ray imaging device 15, a form reader 16, an operation terminal 17, a first storage device 18, a second storage device 19, and an inspection. The device 20 is provided. The sorter 11, the sorter control device 12, the EAD tag reader 13, the camera 14, the X-ray imaging device 15, the form reader 16, the operation terminal 17, the first storage device 18, the second storage device 19, and the inspection device 20 are networks. It is configured to be able to communicate with each other via 21.

ソータ11は、ソータ制御装置12の制御に基づいて、荷物2を区分する装置である。ソータ11は、例えば荷物2を第1の仕分先31と第2の仕分先32とに区分する。第1の仕分先31は、オペレータにより確認が行われない荷物2が搬送される仕分先である。第2の仕分先32は、オペレータにより確認が行われる荷物2が搬送される仕分先である。第2の仕分先32に搬送された荷物2は、例えばオペレータにより開封されて確認される。 The sorter 11 is a device that classifies the luggage 2 based on the control of the sorter control device 12. The sorter 11 classifies, for example, the baggage 2 into a first supplier 31 and a second supplier 32. The first supplier 31 is a supplier to which the luggage 2 that is not confirmed by the operator is transported. The second supplier 32 is a supplier to which the cargo 2 to be confirmed by the operator is transported. The package 2 transported to the second supplier 32 is opened and confirmed by, for example, an operator.

例えば、ソータ11は、第1のコンベア41、第2のコンベア42、及び区分機構43を備える。 For example, the sorter 11 includes a first conveyor 41, a second conveyor 42, and a sorting mechanism 43.

第1のコンベア41は、上流側から下流側に荷物2を搬送する。第1のコンベア41の上流側の端部に、ロボットアームなどによって荷物2が供給される。第1のコンベア41の下流側の端部に、第1の仕分先31が設けられている。即ち、第1のコンベア41は、上流側に供給された荷物2を、第1の仕分先31に搬送する。 The first conveyor 41 conveys the cargo 2 from the upstream side to the downstream side. The luggage 2 is supplied to the upstream end of the first conveyor 41 by a robot arm or the like. A first partition 31 is provided at the downstream end of the first conveyor 41. That is, the first conveyor 41 conveys the load 2 supplied to the upstream side to the first partition 31.

第2のコンベア42は、上流側から下流側に荷物2を搬送する。第2のコンベア42の上流側の端部は、第1のコンベア41に隣接するように設けられている。第2のコンベア42の下流側の端部に、第2の仕分先32が設けられている。即ち、第1のコンベア41は、上流側に供給された荷物2を、第2の仕分先32に搬送する。 The second conveyor 42 conveys the cargo 2 from the upstream side to the downstream side. The upstream end of the second conveyor 42 is provided so as to be adjacent to the first conveyor 41. A second partition 32 is provided at the downstream end of the second conveyor 42. That is, the first conveyor 41 conveys the load 2 supplied to the upstream side to the second partition 32.

区分機構43は、第1のコンベア41を搬送されている荷物2を、第2のコンベア42に供給する機構である。例えば、区分機構43は、回動することにより、第1のコンベア41を搬送されている荷物2に対して、水平方向から力を加え、荷物2を第2のコンベア42に移動させるアームを備える。 The sorting mechanism 43 is a mechanism for supplying the cargo 2 conveyed on the first conveyor 41 to the second conveyor 42. For example, the sorting mechanism 43 includes an arm that, by rotating, applies a force from the horizontal direction to the cargo 2 conveyed on the first conveyor 41 to move the cargo 2 to the second conveyor 42. ..

ソータ制御装置12は、検査装置20の制御に基づいて、ソータ11の第1のコンベア41及び第2のコンベア42の動作を制御し、荷物2を搬送させる。また、ソータ制御装置12は、区分機構43の動作を制御し、第1のコンベア41の下流の端部である第1の仕分先31と、第2のコンベア42の下流の端部である第2の仕分先32とで荷物2の仕分先を切り替える。 The sorter control device 12 controls the operations of the first conveyor 41 and the second conveyor 42 of the sorter 11 based on the control of the inspection device 20, and conveys the load 2. Further, the sorter control device 12 controls the operation of the sorting mechanism 43, and is a first partition 31 which is a downstream end of the first conveyor 41 and a second end which is a downstream end of the second conveyor 42. The supplier of baggage 2 is switched between the supplier 32 of 2 and the supplier 32 of 2.

EADタグリーダ13は、第1のコンベア41により搬送されている荷物2からEADタグ3を読み取る。EADタグリーダ13は、EADタグ3からEAD識別コードを読み取り、読み取ったEAD識別コードを検査装置20に供給する。例えば、EADタグ3にEAD識別コードがバーコードとして印刷されている場合、EADタグリーダ13は、例えばバーコードリーダとして構成される。 The EAD tag reader 13 reads the EAD tag 3 from the cargo 2 conveyed by the first conveyor 41. The EAD tag reader 13 reads the EAD identification code from the EAD tag 3 and supplies the read EAD identification code to the inspection device 20. For example, when the EAD identification code is printed as a barcode on the EAD tag 3, the EAD tag reader 13 is configured as, for example, a barcode reader.

カメラ14は、第1のコンベア41により搬送されている荷物2の外観の画像(外観画像)を取得する。カメラ14は、取得した荷物2の外観画像を検査装置20に供給する。例えば、カメラ14は、レンズと、レンズにより結像された光を画像に変換する撮像素子とが組み合わされて構成される。 The camera 14 acquires an image (appearance image) of the appearance of the cargo 2 being conveyed by the first conveyor 41. The camera 14 supplies the acquired external image of the luggage 2 to the inspection device 20. For example, the camera 14 is configured by combining a lens and an image pickup device that converts the light imaged by the lens into an image.

X線撮影装置15は、第1のコンベア41により搬送されている荷物2のX線画像を取得する。X線撮影装置15は、取得した荷物2のX線画像を検査装置20に供給する。例えば、X線撮影装置15は、X線を荷物2に照射するX線管と、荷物2を透過したX線を検出するX線検出器とが組み合わされて構成される。 The X-ray photographing apparatus 15 acquires an X-ray image of the cargo 2 conveyed by the first conveyor 41. The X-ray photographing apparatus 15 supplies the acquired X-ray image of the baggage 2 to the inspection apparatus 20. For example, the X-ray photographing apparatus 15 is configured by combining an X-ray tube that irradiates the luggage 2 with X-rays and an X-ray detector that detects the X-rays that have passed through the luggage 2.

帳票リーダ16は、第1のコンベア41により搬送されている荷物2に張り付けられた帳票4から、種々の情報を読み取る。例えば、帳票リーダ16は、帳票4から受取人情報、差出人情報、及び内容物情報を取得する。なお、以下帳票4から取得した受取人情報、差出人情報、及び内容物情報を帳票情報と称する。帳票リーダ16は、帳票情報を検査装置20に供給する。例えば、帳票リーダ16は、例えば光を画像に変換する画素がライン状に配列された撮像素子と、画素に光を結像させるレンズとを有し、帳票4の画像(帳票画像)を取得するラインイメージセンサを備える。また、帳票リーダ16は、ラインイメージセンサにより読み取った帳票画像から受取人情報、差出人情報、及び内容物情報などの帳票情報を認識する光学文字認識処理を行うプロセッサを備える。 The form reader 16 reads various information from the form 4 attached to the luggage 2 conveyed by the first conveyor 41. For example, the form reader 16 acquires recipient information, sender information, and content information from form 4. The recipient information, sender information, and content information obtained from Form 4 are hereinafter referred to as form information. The form reader 16 supplies the form information to the inspection device 20. For example, the form reader 16 has, for example, an image sensor in which pixels for converting light into an image are arranged in a line, and a lens for forming light on the pixels, and acquires an image (form image) of the form 4. It is equipped with a line image sensor. Further, the form reader 16 includes a processor that performs optical character recognition processing for recognizing form information such as recipient information, sender information, and content information from a form image read by a line image sensor.

次に操作端末17について説明する。
操作端末17は、操作入力に基づき信号(操作信号)を生成し、操作信号を検査装置20に供給する。また、操作端末17は、オペレータに種々の情報を提供する。
Next, the operation terminal 17 will be described.
The operation terminal 17 generates a signal (operation signal) based on the operation input, and supplies the operation signal to the inspection device 20. In addition, the operation terminal 17 provides various information to the operator.

図2は、操作端末17及び検査装置20の構成例を示す。操作端末17は、通信インタフェース51、制御部52、及びタッチパネル53を備える。 FIG. 2 shows a configuration example of the operation terminal 17 and the inspection device 20. The operation terminal 17 includes a communication interface 51, a control unit 52, and a touch panel 53.

通信インタフェース51は、操作端末17以外の他の機器と通信する為のインタフェースである。通信インタフェース51は、ネットワーク21を介して、検査装置20と通信する。 The communication interface 51 is an interface for communicating with a device other than the operation terminal 17. The communication interface 51 communicates with the inspection device 20 via the network 21.

制御部52は、種々の処理を実行する処理部である。制御部52は、プロセッサ54及びメモリ55を備える。 The control unit 52 is a processing unit that executes various processes. The control unit 52 includes a processor 54 and a memory 55.

プロセッサ54は、演算処理を実行する演算素子である。プロセッサ54は、例えばCPUとして構成される。プロセッサ54は、メモリ55に記憶されているプログラムに基づいて種々の処理を行う。 The processor 54 is an arithmetic element that executes arithmetic processing. The processor 54 is configured as, for example, a CPU. The processor 54 performs various processes based on the program stored in the memory 55.

メモリ55は、プログラム及びデータを記憶する記憶媒体である。メモリ55は、例えば、読み出し専用の不揮発性メモリであるROM、データを一時的に記憶するRAM、及びデータを記憶するストレージのいずれか、または複数を備える。 The memory 55 is a storage medium for storing programs and data. The memory 55 includes, for example, one or more of a ROM which is a read-only non-volatile memory, a RAM for temporarily storing data, and a storage for storing data.

タッチパネル53は、画面の表示と、操作に基づく操作信号の生成とを行う装置である。タッチパネル53は、一体に構成されたディスプレイ56及びタッチセンサ57を備える。操作端末17は、タッチパネル53の代わりに画面を表示するディスプレイと、操作に基づき操作信号を生成する操作部とを備える構成であってもよい。操作部は、マウス、トラックボール、キーボード、トラックパッドなど如何なるものであってもよい。 The touch panel 53 is a device that displays a screen and generates an operation signal based on the operation. The touch panel 53 includes an integrally configured display 56 and a touch sensor 57. The operation terminal 17 may be configured to include a display that displays a screen instead of the touch panel 53, and an operation unit that generates an operation signal based on the operation. The operation unit may be any mouse, trackball, keyboard, trackpad, or the like.

ディスプレイ56は、制御部52または図示されないグラフィックコントローラから供給される表示用のデータ(画面データ)に基づいて画面を表示する。 The display 56 displays a screen based on display data (screen data) supplied from the control unit 52 or a graphic controller (not shown).

タッチセンサ57は、ディスプレイ56に表示された画面上において操作端末17を操作するオペレータがタッチした位置を示す操作信号を生成する。 The touch sensor 57 generates an operation signal indicating the position touched by the operator who operates the operation terminal 17 on the screen displayed on the display 56.

第1のストレージ装置18は、検査装置20における処理の結果である登録情報を記憶する。図3は、登録情報の例について説明する為の説明図である。登録情報は、過去の荷物2に関する種々の情報と、検査結果とが対応付けられた過去履歴である。例えば、登録情報は、登録情報を登録した登録日時、オペレータ識別コード、荷物情報、及び検査結果情報を含む。オペレータ識別コードは、オペレータを識別するためのコードである。荷物情報は、ソータ11により搬送されている荷物2に関する情報である。荷物情報は、住所氏名情報及びX線画像の少なくとも一方を含む。例えば、荷物情報は、EAD情報、帳票情報、荷物の外観画像、及び荷物のX線画像を含む。検査結果情報は、オペレータにより入力された区分先情報及び規制品有無情報を含む。 The first storage device 18 stores registration information that is the result of processing in the inspection device 20. FIG. 3 is an explanatory diagram for explaining an example of registration information. The registration information is a past history in which various information regarding the past baggage 2 and inspection results are associated with each other. For example, the registration information includes the registration date and time when the registration information was registered, the operator identification code, the baggage information, and the inspection result information. The operator identification code is a code for identifying an operator. The cargo information is information about the cargo 2 being carried by the sorter 11. The baggage information includes at least one of the address / name information and the X-ray image. For example, the package information includes EAD information, form information, an external image of the package, and an X-ray image of the package. The inspection result information includes the classification destination information input by the operator and the presence / absence information of the regulated product.

区分先情報は、荷物2を第1の仕分先31と第2の仕分先32とのどちらに区分したかを示す情報である。オペレータは、荷物2の中身を確認する必要がないと判断した場合、荷物2を第1の仕分先31に区分するように、操作端末17を操作する。また、オペレータは、荷物2の中身を確認する必要がある、即ち、荷物2が規制品候補であると判断した場合、荷物2を第2の仕分先32に区分するように、操作端末17を操作する。言い換えると、区分先情報は、オペレータが荷物2を規制品候補であると判断したか否かを示す情報である。検査装置20は、オペレータが操作端末17を操作した結果、生成された操作信号に基づいて、荷物2毎に区分先情報を生成する。 The classification destination information is information indicating whether the package 2 is classified into the first supplier 31 or the second supplier 32. When the operator determines that it is not necessary to check the contents of the cargo 2, the operator operates the operation terminal 17 so as to classify the cargo 2 into the first supplier 31. Further, when the operator needs to confirm the contents of the luggage 2, that is, when the luggage 2 is determined to be a regulated product candidate, the operation terminal 17 is set so as to classify the luggage 2 into the second supplier 32. Manipulate. In other words, the classification destination information is information indicating whether or not the operator has determined that the luggage 2 is a regulated product candidate. The inspection device 20 generates classification destination information for each cargo 2 based on the operation signal generated as a result of the operator operating the operation terminal 17.

規制品有無情報は、荷物2に規制品が含まれていたか否かを示す情報である。オペレータは、第2の仕分先32に区分された荷物2を開封する。オペレータは、荷物2を開封した結果に基づいて、規制品が含まれていたか否かに応じて、操作端末17を操作する。この結果、検査装置20において、規制品有無情報が生成される。 The regulated product presence / absence information is information indicating whether or not the regulated product is included in the baggage 2. The operator opens the package 2 classified in the second supplier 32. The operator operates the operation terminal 17 based on the result of opening the baggage 2 depending on whether or not the regulated item is included. As a result, the inspection device 20 generates information on the presence or absence of regulated products.

第2のストレージ装置19は、第1のストレージ装置18に記憶されている登録情報に基づいて生成されたデータベースを記憶する。データベースは、例えば、EAD情報の差出人情報、EAD情報の受取人情報、帳票情報の差出人情報、または帳票情報の受取人情報などと、過去の検査結果情報とが対応付けられたものである。具体的には、データベースは、差出人情報毎または受取人情報毎に、過去に荷物の中身が確認された回数、及び荷物に規制品が含まれていた回数を抽出可能に構成されている。また、データベースは、差出人情報毎または受取人情報毎に、トラブルの有無などの情報をさらに有していてもよい。なお、第2のストレージ装置19は、第1のストレージ装置18と1つの記憶装置として構成されていてもよい。 The second storage device 19 stores a database generated based on the registration information stored in the first storage device 18. In the database, for example, sender information of EAD information, recipient information of EAD information, sender information of form information, recipient information of form information, and the like are associated with past inspection result information. Specifically, the database is configured to be able to extract the number of times the contents of the package have been confirmed in the past and the number of times the package contains regulated items for each sender information or recipient information. In addition, the database may further have information such as the presence or absence of trouble for each sender information or each recipient information. The second storage device 19 may be configured as one storage device with the first storage device 18.

次に、検査装置20について説明する。
図2に示されるように、検査装置20は、通信インタフェース61及び制御部62を備える。検査装置20は、オペレータに情報を提供し、オペレータによる操作入力に基づいて、確認が不要な荷物と、荷物の確認が必要な荷物とを判別する装置である。オペレータは、認証の為の情報(認証情報)を検査装置20に入力することにより、検査装置20にログインする。なお、検査装置20は、上記の登録情報を生成する場合、ログイン中のオペレータの識別情報(オペレータ識別コード)を登録情報に付加する。
Next, the inspection device 20 will be described.
As shown in FIG. 2, the inspection device 20 includes a communication interface 61 and a control unit 62. The inspection device 20 is a device that provides information to the operator and discriminates between a baggage that does not require confirmation and a baggage that requires confirmation of the baggage based on an operation input by the operator. The operator logs in to the inspection device 20 by inputting the information for authentication (authentication information) into the inspection device 20. When the inspection device 20 generates the above registration information, the inspection device 20 adds the identification information (operator identification code) of the logged-in operator to the registration information.

検査装置20は、パーソナルコンピュータ(PC)などの、データの処理及びデータの保存を行うことができる装置により構成される。検査装置20は、荷物の確認が不要な荷物2を第1の仕分先31に搬送し、荷物の確認が必要な荷物2を第2の仕分先32に搬送するように、ソータ制御装置12を制御する。検査装置20は、通信インタフェース61及び制御部62を備える。 The inspection device 20 is composed of a device such as a personal computer (PC) capable of processing data and storing data. The inspection device 20 sets the sorter control device 12 so as to transport the package 2 that does not require confirmation of the package to the first supplier 31 and the package 2 that requires confirmation of the package to the second supplier 32. Control. The inspection device 20 includes a communication interface 61 and a control unit 62.

通信インタフェース61は、他の機器と通信する為のインタフェースである。通信インタフェース61は、ネットワーク21を介して、EADタグリーダ13、カメラ14、X線撮影装置15、帳票リーダ16、操作端末17、第1のストレージ装置18、及び第2のストレージ装置19と通信する為の通信規格などに対応した端子及び回路を備える。 The communication interface 61 is an interface for communicating with other devices. The communication interface 61 communicates with the EAD tag reader 13, the camera 14, the X-ray imaging device 15, the form reader 16, the operation terminal 17, the first storage device 18, and the second storage device 19 via the network 21. It is equipped with terminals and circuits that correspond to the communication standards of.

制御部62は、種々の処理を実行する処理部である。制御部62は、プロセッサ63及びメモリ64を備える。 The control unit 62 is a processing unit that executes various processes. The control unit 62 includes a processor 63 and a memory 64.

プロセッサ63は、演算処理を実行する演算素子である。プロセッサ63は、例えばCPUとして構成される。プロセッサ63は、メモリ64に記憶されている検査プログラムに基づいて種々の処理を行う。 The processor 63 is an arithmetic element that executes arithmetic processing. The processor 63 is configured as, for example, a CPU. The processor 63 performs various processes based on the inspection program stored in the memory 64.

メモリ64は、プログラム及びデータを記憶する記憶媒体である。プログラムは、後述する荷物2を検査する処理をプロセッサ63に実行させるためのプログラム(検査プログラム)である。メモリ64は、例えば、読み出し専用の不揮発性メモリであるROM、及びデータを記憶するストレージの少なくとも1つ以上を備える。即ち、メモリ64は、検査プログラムを記録した非一時的記録媒体である。また、メモリ64は、データを一時的に記憶するRAMをさらに備えていてもよい。 The memory 64 is a storage medium for storing programs and data. The program is a program (inspection program) for causing the processor 63 to execute a process of inspecting the baggage 2 described later. The memory 64 includes, for example, a ROM which is a read-only non-volatile memory, and at least one or more storages for storing data. That is, the memory 64 is a non-temporary recording medium on which the inspection program is recorded. Further, the memory 64 may further include a RAM for temporarily storing data.

また、メモリ64は、複数のEAD情報を記憶している。例えば、メモリ64には、USBメモリなどの記憶媒体からインポートされたEAD情報が記憶される。また、メモリ64には、ネットワークを介して供給されたEAD情報が記憶されてもよい。 Further, the memory 64 stores a plurality of EAD information. For example, the memory 64 stores EAD information imported from a storage medium such as a USB memory. Further, the memory 64 may store the EAD information supplied via the network.

検査装置20の制御部62のプロセッサ63は、メモリ64に記憶されているプログラムを実行することにより、EADタグリーダ13、カメラ14、X線撮影装置15、及び帳票リーダ16の動作を制御する。これにより、プロセッサ63は、EADタグリーダ13からEAD識別コードを取得する。また、プロセッサ63は、カメラ14から荷物2の外観画像を取得する。また、プロセッサ63は、X線撮影装置15から荷物2のX線画像を取得する。また、プロセッサ63は、帳票リーダ16から、荷物2に張り付けられた帳票4に記載された帳票情報を取得する。 The processor 63 of the control unit 62 of the inspection device 20 controls the operations of the EAD tag reader 13, the camera 14, the X-ray imaging device 15, and the form reader 16 by executing the program stored in the memory 64. As a result, the processor 63 acquires the EAD identification code from the EAD tag reader 13. Further, the processor 63 acquires an external image of the luggage 2 from the camera 14. Further, the processor 63 acquires an X-ray image of the luggage 2 from the X-ray imaging device 15. Further, the processor 63 acquires the form information described in the form 4 attached to the baggage 2 from the form reader 16.

また、プロセッサ63は、EADタグリーダ13から取得したEAD識別コードに基づいて、メモリ64から、EAD情報を取得する。プロセッサ63は、EADタグリーダ13から取得したEAD識別コードを含むEAD情報をメモリ64から抽出する。これにより、プロセッサ63は、EAD情報を取得する。 Further, the processor 63 acquires EAD information from the memory 64 based on the EAD identification code acquired from the EAD tag reader 13. The processor 63 extracts the EAD information including the EAD identification code acquired from the EAD tag reader 13 from the memory 64. As a result, the processor 63 acquires the EAD information.

さらに、プロセッサ63は、新たに取得した荷物情報と、過去履歴と、に基づいて、住所氏名情報が一致する荷物の検査の履歴を抽出する。例えば、プロセッサ63は、荷物情報としての住所氏名情報に基づいて、第2のストレージ装置19に格納されているデータベースから、検査の履歴を抽出する。また、例えば、プロセッサ63は、荷物情報としての住所氏名情報に基づいて、第1のストレージ装置18に格納されている過去履歴から、検査の履歴を抽出する構成でもよい。なお、住所氏名情報に基づいて、第2のストレージ装置19のデータベースまたは第1のストレージ装置18の過去履歴から抽出された情報を、抽出情報と称する。 Further, the processor 63 extracts the inspection history of the baggage having the same address and name information based on the newly acquired baggage information and the past history. For example, the processor 63 extracts the inspection history from the database stored in the second storage device 19 based on the address and name information as the baggage information. Further, for example, the processor 63 may be configured to extract the inspection history from the past history stored in the first storage device 18 based on the address and name information as the baggage information. Information extracted from the database of the second storage device 19 or the past history of the first storage device 18 based on the address and name information is referred to as extracted information.

住所氏名情報は、EAD情報の差出人情報、EAD情報の受取人情報、帳票情報の差出人情報、及び帳票情報の受取人情報の少なくとも1つ以上の情報である。 The address and name information is at least one or more information of sender information of EAD information, recipient information of EAD information, sender information of form information, and recipient information of form information.

抽出情報は、規制品候補であると判断された荷物の数に基づいて、オペレータの注意を促すための情報である。例えば、抽出情報は、規制品候補であると判断された荷物の数に基づいて生成される情報である。また例えば、抽出情報は、規制品を実際に含んでいた荷物の数に基づいて生成される情報であってもよい。 The extracted information is information for calling the operator's attention based on the number of packages judged to be candidates for regulated products. For example, the extracted information is information generated based on the number of packages determined to be candidates for regulated products. Further, for example, the extracted information may be information generated based on the number of packages that actually include the regulated product.

具体的には、プロセッサ63は、差出人情報が一致し、且つ過去に荷物の中身が確認された回数、差出人情報が一致し、且つ過去に荷物に規制品が含まれていた回数をデータベースから抽出する。また、プロセッサ63は、受取人情報が一致し、且つ過去に荷物の中身が確認された回数、受取人情報が一致し、且つ過去に荷物に規制品が含まれていた回数をデータベースから抽出する。また、プロセッサ63は、差出人情報及び受取人情報の両方が一致し、且つ過去に荷物の中身が確認された回数、差出人情報及び受取人情報の両方が一致し、且つ過去に荷物に規制品が含まれていた回数をデータベースから抽出する構成であってもよい。 Specifically, the processor 63 extracts from the database the number of times the sender information matches and the contents of the baggage have been confirmed in the past, and the number of times the sender information matches and the baggage contains regulated items in the past. do. Further, the processor 63 extracts from the database the number of times the recipient information is matched and the contents of the package are confirmed in the past, the number of times the recipient information is matched and the package contains the regulated item in the past. .. Further, in the processor 63, both the sender information and the recipient information match, the number of times the contents of the package have been confirmed in the past, both the sender information and the recipient information match, and the package has a regulated item in the past. It may be configured to extract the number of times included from the database.

また、プロセッサ63は、過去履歴に基づいて、機械学習によって生成されたパラメータを用いて、X線画像から規制品の位置を推測する。例えば、プロセッサ63は、規制品の位置の推測結果をX線画像に重ね、候補画像を生成する。例えば、プロセッサ63は、規制品が存在する可能性に基づいて、X線画像上の所定の領域毎にスコアを算出する。プロセッサ63は、算出したスコアに応じて、各領域を異なる表示にすることにより、候補画像を生成する。例えば、プロセッサ63は、算出したスコアに応じて、各領域を異なる色で表示することにより、候補画像を生成する。 In addition, the processor 63 estimates the position of the regulated product from the X-ray image using the parameters generated by machine learning based on the past history. For example, the processor 63 superimposes the estimation result of the position of the regulated product on the X-ray image to generate a candidate image. For example, the processor 63 calculates a score for each predetermined region on the X-ray image based on the possibility that a regulated product exists. The processor 63 generates a candidate image by displaying each area differently according to the calculated score. For example, the processor 63 generates a candidate image by displaying each area in a different color according to the calculated score.

パラメータは、大量の学習用データに基づいて調整されたものである。学習用データは、問題と答えとを有するものである。学習用データの問題及び答えは、登録情報の任意のデータである。上記のように、X線画像から規制品の位置を推測する例では、X線画像が問題に相当し、X線画像中において規制品が存在する位置が答えに相当する。即ち、パラメータは、X線画像(問題)と、X線画像中における規制品の位置(答え)とを有する学習用データに基づいて、例えばセグメーテーション用のニューラルネットワークなどにより機械学習を行うことにより生成されたものである。 The parameters are adjusted based on a large amount of training data. The learning data has a question and an answer. The question and answer of the learning data is any data of the registration information. As described above, in the example of estimating the position of the regulated product from the X-ray image, the X-ray image corresponds to the problem, and the position where the regulated product exists in the X-ray image corresponds to the answer. That is, the parameters are machine-learned by, for example, a neural network for segmentation, based on learning data having an X-ray image (problem) and the position (answer) of the regulated product in the X-ray image. It was generated by.

プロセッサ63は、ソータ11により搬送されている荷物2に関する種々の情報を示す画面(確認画面)を生成し、操作端末17に送信し、表示させる。プロセッサ63は、EAD情報、帳票情報、外観画像、X線画像、候補画像、及びデータベースから抽出した抽出情報に基づいて、確認画面を生成する。 The processor 63 generates a screen (confirmation screen) showing various information about the cargo 2 transported by the sorter 11, transmits it to the operation terminal 17, and displays it. The processor 63 generates a confirmation screen based on the EAD information, the form information, the appearance image, the X-ray image, the candidate image, and the extracted information extracted from the database.

図4は、確認画面71の例について説明する為の説明図である。
確認画面71は、操作端末17のディスプレイ56に表示される画面である。確認画面71には、荷物2を開封確認する必要があるか否かをオペレータが判断する際に用いられる情報が表示される。即ち、確認画面71に表示される情報は、オペレータの判断の参考に用いられる参考情報である。確認画面71は、外観画像72、X線画像73、候補画像74、EAD情報75、帳票情報76、抽出情報77、配達ボタン78、及び確認ボタン79などの表示を有する。
FIG. 4 is an explanatory diagram for explaining an example of the confirmation screen 71.
The confirmation screen 71 is a screen displayed on the display 56 of the operation terminal 17. The confirmation screen 71 displays information used when the operator determines whether or not it is necessary to confirm that the package 2 has been opened. That is, the information displayed on the confirmation screen 71 is reference information used as a reference for the operator's judgment. The confirmation screen 71 has displays such as an external image 72, an X-ray image 73, a candidate image 74, EAD information 75, form information 76, extraction information 77, a delivery button 78, and a confirmation button 79.

外観画像72は、カメラ14により取得した荷物2の外観画像である。X線画像73は、X線撮影装置15により取得した荷物2のX線画像である。候補画像74は、プロセッサ63がX線画像と上記のパラメータとに基づいて生成した画像である。EAD情報75は、EADタグリーダ13により荷物2から取得したEAD識別コードに基づいて取得したEAD情報である。なお、EADタグ3が荷物2に貼られていない場合、EAD識別コード及びEAD情報を取得することができない為、確認画面71中のEAD情報75は空欄となる。帳票情報76は、帳票リーダ16により、荷物2の帳票4から読み取った帳票情報である。即ち、EAD情報75及び帳票情報76は、荷物情報としての住所氏名情報を含むものである。 The external image 72 is an external image of the luggage 2 acquired by the camera 14. The X-ray image 73 is an X-ray image of the luggage 2 acquired by the X-ray photographing apparatus 15. The candidate image 74 is an image generated by the processor 63 based on the X-ray image and the above parameters. The EAD information 75 is EAD information acquired based on the EAD identification code acquired from the baggage 2 by the EAD tag reader 13. If the EAD tag 3 is not attached to the baggage 2, the EAD identification code and the EAD information cannot be acquired, so that the EAD information 75 in the confirmation screen 71 is blank. The form information 76 is the form information read from the form 4 of the baggage 2 by the form reader 16. That is, the EAD information 75 and the form information 76 include address and name information as baggage information.

抽出情報77は、上記のように、プロセッサ63が、住所氏名情報に基づいて、過去履歴から抽出した情報である。例えば、抽出情報77は、ソータ11により搬送されている荷物2と受取人情報が一致する荷物の数「ZZ」のうち、規制品候補であると判断された荷物の数「YY」、規制品が含まれていた荷物の数「XX」などの情報を含む。また、抽出情報77は、ソータ11により搬送されている荷物2と受取人情報が一致する荷物の数「CC」のうち、規制品候補であると判断された荷物の数「BB」、規制品が含まれていた荷物の数「AA」などの情報を含む。またさらに、抽出情報77は、ソータ11により搬送されている荷物2の差出人または受取人の、過去のトラブルの有無を含んでいてもよい。 The extracted information 77 is information extracted from the past history by the processor 63 based on the address and name information as described above. For example, the extraction information 77 is the number of packages "YY" determined to be a regulated product candidate among the number of packages "ZZ" whose recipient information matches the package 2 transported by the sorter 11, and the regulated product. Includes information such as the number of packages that contained "XX". Further, the extraction information 77 is the number of packages "BB" determined to be a regulated product candidate among the number of packages "CC" whose recipient information matches the package 2 transported by the sorter 11, and the regulated product. Includes information such as the number of packages "AA" that contained. Furthermore, the extraction information 77 may include the presence or absence of past troubles of the sender or recipient of the cargo 2 carried by the sorter 11.

また、確認画面71は、アラーム表示80をさらに含んでいてもよい。図4では、アラーム表示80として「要確認」の文字列を確認画面71に表示させている。プロセッサ63は、例えば、抽出情報が所定の条件を満たす場合に、アラーム表示80を確認画面71に表示させる。例えば、プロセッサ63は、抽出情報における規制品の数が、予め設定された閾値以上である場合、アラーム表示80を確認画面71に表示させる。また、例えば、プロセッサ63は、抽出情報における規制品候補の数が、予め設定された閾値以上である場合、アラーム表示80を確認画面71に表示させる。上記の条件は、オペレータごとに設定されてもよい。 Further, the confirmation screen 71 may further include an alarm display 80. In FIG. 4, the character string “confirmation required” is displayed on the confirmation screen 71 as the alarm display 80. The processor 63 displays the alarm display 80 on the confirmation screen 71, for example, when the extracted information satisfies a predetermined condition. For example, the processor 63 causes the alarm display 80 to be displayed on the confirmation screen 71 when the number of regulated products in the extracted information is equal to or greater than a preset threshold value. Further, for example, when the number of regulated product candidates in the extracted information is equal to or greater than a preset threshold value, the processor 63 causes the alarm display 80 to be displayed on the confirmation screen 71. The above conditions may be set for each operator.

配達ボタン78及び確認ボタン79は、タッチセンサ57により選択可能なボタンである。オペレータは、確認画面71の参考情報を確認し、荷物2を開封確認する必要があるか否か判断する。即ち、オペレータは、確認画面71の、外観画像72、X線画像73、候補画像74、EAD情報75、帳票情報76、及び抽出情報77などを確認して、荷物2を開封する必要があるか否か判断し、配達ボタン78と確認ボタン79とのいずれかを選択する。 The delivery button 78 and the confirmation button 79 are buttons that can be selected by the touch sensor 57. The operator confirms the reference information on the confirmation screen 71 and determines whether or not it is necessary to confirm the opening of the package 2. That is, does the operator need to check the appearance image 72, the X-ray image 73, the candidate image 74, the EAD information 75, the form information 76, the extraction information 77, and the like on the confirmation screen 71 and open the package 2. It is determined whether or not, and either the delivery button 78 or the confirmation button 79 is selected.

オペレータにより配達ボタン78が選択された場合、検査装置20は、荷物2が規制品候補ではないと判断し、荷物2を第1の仕分先31に搬送するように、ソータ制御装置12を制御する。 When the delivery button 78 is selected by the operator, the inspection device 20 determines that the cargo 2 is not a regulated product candidate, and controls the sorter control device 12 so as to transport the cargo 2 to the first supplier 31. ..

オペレータにより確認ボタン79が選択された場合、検査装置20は、荷物2が規制品候補であると判断し、荷物2を第2の仕分先32に搬送するように、ソータ制御装置12を制御する。この後、オペレータは、第2の仕分先32に搬送された荷物2を開封し、規制品の有無を確認し、確認の結果を操作端末17に入力する。これにより、検査装置20は、図3に示されるような登録情報を生成する。検査装置20は、生成した登録情報を第1のストレージ装置18に保存する。これにより、過去履歴が第1のストレージ装置18に蓄積される。また、これにより、差出人情報及び受取人情報をインデックスとして、過去に規制品候補と判断された荷物の数、及び規制品が含まれていた荷物の数を抽出可能なデータベースを、第2のストレージ装置19に生成することができる。 When the confirmation button 79 is selected by the operator, the inspection device 20 determines that the cargo 2 is a regulated product candidate, and controls the sorter control device 12 so as to transport the cargo 2 to the second supplier 32. .. After that, the operator opens the baggage 2 transported to the second supplier 32, confirms the presence or absence of the regulated item, and inputs the confirmation result to the operation terminal 17. As a result, the inspection device 20 generates registration information as shown in FIG. The inspection device 20 stores the generated registration information in the first storage device 18. As a result, the past history is accumulated in the first storage device 18. In addition, as a result, a database capable of extracting the number of packages judged to be regulated product candidates in the past and the number of packages containing regulated products by using the sender information and the recipient information as an index is stored in the second storage. It can be generated in the device 19.

次に、検査システム1の動作について説明する。
図5は、検査システム1の動作について説明する為のフローチャートである。
Next, the operation of the inspection system 1 will be described.
FIG. 5 is a flowchart for explaining the operation of the inspection system 1.

検査システム1のEADタグリーダ13は、第1のコンベア41により搬送されている荷物2のEADタグ3から、EAD識別コードを読み取る(ステップS11)。EADタグリーダ13は、EAD識別コードを検査装置20に供給する。 The EAD tag reader 13 of the inspection system 1 reads the EAD identification code from the EAD tag 3 of the cargo 2 conveyed by the first conveyor 41 (step S11). The EAD tag reader 13 supplies the EAD identification code to the inspection device 20.

検査システム1のカメラ14は、第1のコンベア41により搬送されている荷物2の外観画像を取得する(ステップS12)。カメラ14は、外観画像を検査装置20に供給する。 The camera 14 of the inspection system 1 acquires an external image of the cargo 2 being conveyed by the first conveyor 41 (step S12). The camera 14 supplies an external image to the inspection device 20.

検査システム1のX線撮影装置15は、第1のコンベア41により搬送されている荷物2のX線画像を取得する(ステップS13)。カメラ14は、X線画像を検査装置20に供給する。 The X-ray imaging device 15 of the inspection system 1 acquires an X-ray image of the cargo 2 conveyed by the first conveyor 41 (step S13). The camera 14 supplies an X-ray image to the inspection device 20.

検査システム1の帳票リーダ16は、第1のコンベア41により搬送されている荷物2の帳票4から、帳票情報を取得する(ステップS14)。帳票リーダ16は、帳票情報を検査装置20に供給する。 The form reader 16 of the inspection system 1 acquires form information from the form 4 of the luggage 2 conveyed by the first conveyor 41 (step S14). The form reader 16 supplies the form information to the inspection device 20.

検査装置20の制御部62のプロセッサ63は、EADタグリーダ13によりEAD識別コードを取得したか否か判断する(ステップS15)。これにより、プロセッサ63は、EADタグリーダ13からEAD識別コードが供給されたか否か判断する。 The processor 63 of the control unit 62 of the inspection device 20 determines whether or not the EAD identification code has been acquired by the EAD tag reader 13 (step S15). As a result, the processor 63 determines whether or not the EAD identification code has been supplied from the EAD tag reader 13.

プロセッサ63は、EADタグリーダ13によりEAD識別コードを取得したと判断した場合(ステップS15、YES)、EAD識別コードに基づいてEAD情報を取得する(ステップS16)。上記の処理により、検査装置20は、荷物2に関する種々の情報である荷物情報を取得する。 When the processor 63 determines that the EAD identification code has been acquired by the EAD tag reader 13 (step S15, YES), the processor 63 acquires the EAD information based on the EAD identification code (step S16). Through the above processing, the inspection device 20 acquires baggage information which is various information about the baggage 2.

さらに、プロセッサ63は、EAD情報に基づいて、第2のストレージ装置19のデータベースから抽出情報を取得し(ステップS17)、後述するステップS19の処理に移行する。即ち、プロセッサ63は、EAD情報の差出人情報及び受取人情報に一致する過去の荷物の数、規制品候補と判断された荷物の数、規制品が含むと判断された荷物の数を、それぞれデータベースから取得する。 Further, the processor 63 acquires the extracted information from the database of the second storage device 19 based on the EAD information (step S17), and proceeds to the process of step S19 described later. That is, the processor 63 stores the number of past packages that match the sender information and recipient information of the EAD information, the number of packages determined to be regulated product candidates, and the number of packages determined to include the regulated product, respectively. Get from.

プロセッサ63は、EADタグリーダ13によりEAD識別コードを取得していないと判断した場合(ステップS15、NO)、帳票情報に基づいて、第2のストレージ装置19のデータベースから抽出情報を取得し(ステップS18)、後述するステップS19の処理に移行する。即ち、プロセッサ63は、帳票情報の差出人情報及び受取人情報に一致する過去の荷物の数、規制品候補と判断された荷物の数、規制品が含むと判断された荷物の数を、それぞれデータベースから取得する。 When the processor 63 determines that the EAD identification code has not been acquired by the EAD tag reader 13 (step S15, NO), the processor 63 acquires the extracted information from the database of the second storage device 19 based on the form information (step S18). ), The process proceeds to step S19, which will be described later. That is, the processor 63 stores the number of past packages that match the sender information and the recipient information of the form information, the number of packages determined to be regulated product candidates, and the number of packages determined to include the regulated product, respectively. Get from.

プロセッサ63は、機械学習によって生成されたパラメータを用いて、X線画像から規制品の位置を推測し、候補画像を生成する(ステップS19)。 The processor 63 uses the parameters generated by machine learning to estimate the position of the regulated product from the X-ray image and generate a candidate image (step S19).

プロセッサ63は、EAD情報、帳票情報、外観画像、X線画像、候補画像、及びデータベースから抽出した抽出情報に基づいて、図4に示す確認画面71を生成する(ステップS20)。プロセッサ63は、確認画面71を操作端末17に出力し、表示させる(ステップS21)。これにより、オペレータに確認画面71を視認させ、荷物2が規制品候補であるか否かを判断させる。オペレータは、荷物2が規制品候補であると判断した場合、確認画面71の確認ボタン79を選択する。オペレータは、荷物2が規制品候補ではないと判断した場合、確認画面71の配達ボタン78を選択する。操作端末17は、確認画面71の確認ボタン79及び配達ボタン78の選択結果に基づいて、操作信号を検査装置20に供給する。 The processor 63 generates the confirmation screen 71 shown in FIG. 4 based on the EAD information, the form information, the appearance image, the X-ray image, the candidate image, and the extracted information extracted from the database (step S20). The processor 63 outputs the confirmation screen 71 to the operation terminal 17 and displays it (step S21). As a result, the operator is made to visually recognize the confirmation screen 71 and determine whether or not the luggage 2 is a regulated product candidate. When the operator determines that the luggage 2 is a candidate for a regulated product, the operator selects the confirmation button 79 on the confirmation screen 71. When the operator determines that the package 2 is not a regulated product candidate, the operator selects the delivery button 78 on the confirmation screen 71. The operation terminal 17 supplies an operation signal to the inspection device 20 based on the selection results of the confirmation button 79 and the delivery button 78 on the confirmation screen 71.

検査装置20のプロセッサ63は、操作端末17からの操作信号に基づいて、荷物2が規制品候補であるか否か判断する(ステップS22)。例えば、プロセッサ63は、操作端末17から配達ボタン78が選択されたことを示す操作信号を受信した場合、荷物2が規制品候補ではないと判断する。また、例えば、プロセッサ63は、操作端末17から確認ボタン79が選択されたことを示す操作信号を受信した場合、荷物2が規制品候補であると判断する。 The processor 63 of the inspection device 20 determines whether or not the luggage 2 is a regulated product candidate based on the operation signal from the operation terminal 17 (step S22). For example, when the processor 63 receives an operation signal indicating that the delivery button 78 has been selected from the operation terminal 17, the processor 63 determines that the package 2 is not a regulated product candidate. Further, for example, when the processor 63 receives an operation signal indicating that the confirmation button 79 has been selected from the operation terminal 17, the processor 63 determines that the luggage 2 is a regulated product candidate.

プロセッサ63は、荷物2が規制品候補ではないと判断した場合(ステップS22、NO)、荷物2が第1の仕分先31に搬送されるように、ソータ制御装置12に制御信号を入力する(ステップS23)。また、プロセッサ63は、荷物2が規制品候補であると判断した場合(ステップS22、YES)、荷物2が第2の仕分先32に搬送されるように、ソータ制御装置12に制御信号を入力する(ステップS24)。 When the processor 63 determines that the cargo 2 is not a regulated product candidate (step S22, NO), the processor 63 inputs a control signal to the sorter control device 12 so that the cargo 2 is transported to the first supplier 31 (step S22, NO). Step S23). Further, when the processor 63 determines that the cargo 2 is a candidate for a regulated product (step S22, YES), the processor 63 inputs a control signal to the sorter control device 12 so that the cargo 2 is transported to the second supplier 32. (Step S24).

この後、オペレータは、第2の仕分先32に搬送された荷物2を開封し、規制品の有無を確認し、確認の結果を操作端末17に入力する。プロセッサ63は、上記の処理結果に基づいて、登録情報を生成し、登録情報を第1のストレージ装置18に記憶し(ステップS25)、処理を終了する。これにより、規制品が実際に荷物2に含まれていたか否かを示す規制品有無情報が登録情報に付加される。なお、第2の仕分先32に搬送された荷物2を開封するオペレータは、操作端末17を操作するオペレータとは別であってもよい。この場合、検査システム1は、第2の仕分先32に搬送された荷物2を開封し、規制品が含まれていたか否かを、オペレータが入力する為の装置をさらに備えていてもよい。即ち、検査システム1は、規制品が含まれていたか否かを示す情報を、オペレータの入力に基づいて、検査装置20に送信する装置をさらに備えていてもよい。 After that, the operator opens the baggage 2 transported to the second supplier 32, confirms the presence or absence of the regulated item, and inputs the confirmation result to the operation terminal 17. The processor 63 generates registration information based on the above processing result, stores the registration information in the first storage device 18 (step S25), and ends the processing. As a result, the presence / absence information of the regulated product indicating whether or not the regulated product is actually included in the baggage 2 is added to the registration information. The operator who opens the baggage 2 transported to the second partition 32 may be different from the operator who operates the operation terminal 17. In this case, the inspection system 1 may further include a device for the operator to open the package 2 transported to the second supplier 32 and input whether or not the regulated product is included. That is, the inspection system 1 may further include a device that transmits information indicating whether or not the regulated product is included to the inspection device 20 based on the input of the operator.

なお、登録情報には、規制品の有無の確認結果が含まれていなくてもよい。この場合、確認画面71の抽出情報77からも、規制品の数の項目が省略される。 The registration information does not have to include the confirmation result of the presence or absence of regulated products. In this case, the item of the number of regulated products is also omitted from the extraction information 77 on the confirmation screen 71.

上記したように、検査装置20のプロセッサ63は、通信インタフェース61により、ソータ11により搬送されている荷物2に関する荷物情報と、オペレータが操作端末17を操作することにより生成された操作信号とを取得する。プロセッサ63は、操作信号に基づいて、荷物2が規制品候補であるか否かを示す検査結果情報を生成する。プロセッサ63は、過去の荷物2の荷物情報と検査結果情報とが対応付けられた過去履歴と、新たに取得した荷物情報と、に基づいて、参考情報を出力する。これにより、検査装置20は、オペレータが荷物の区分先を判断する為に有用な情報を提供することができる。この結果、効率的にオペレータが荷物の区分先を決定することが可能な検査装置を提供することができる。 As described above, the processor 63 of the inspection device 20 acquires the cargo information regarding the cargo 2 carried by the sorter 11 and the operation signal generated by the operator operating the operation terminal 17 by the communication interface 61. do. The processor 63 generates inspection result information indicating whether or not the cargo 2 is a regulated product candidate based on the operation signal. The processor 63 outputs reference information based on the past history in which the baggage information of the past baggage 2 and the inspection result information are associated with each other and the newly acquired baggage information. As a result, the inspection device 20 can provide useful information for the operator to determine the sorting destination of the cargo. As a result, it is possible to provide an inspection device that allows the operator to efficiently determine the sorting destination of the cargo.

また、荷物情報は、荷物2に対応する住所氏名情報であり、プロセッサ63は、住所氏名情報が一致し、且つ規制品候補であると判断された荷物の数に基づいて、参考情報を生成する。これにより、検査装置20は、オペレータが荷物の区分先を判断する為に有用な情報を提供することができる。 Further, the baggage information is the address / name information corresponding to the baggage 2, and the processor 63 generates reference information based on the number of baggage in which the address / name information matches and is determined to be a regulated product candidate. .. As a result, the inspection device 20 can provide useful information for the operator to determine the sorting destination of the cargo.

また、プロセッサ63は、荷物2が規制品を含むことを示す操作信号を取得した場合、荷物2が規制品を含むことを示す情報を、検査結果情報に付加する。プロセッサ63は、住所氏名情報が一致し、且つ規制品を含んでいた荷物の数に基づいて、参考情報を生成する。これにより、検査装置20は、オペレータが荷物の区分先を判断する為に有用な情報を提供することができる。 Further, when the processor 63 acquires an operation signal indicating that the cargo 2 contains the regulated product, the processor 63 adds information indicating that the cargo 2 includes the regulated product to the inspection result information. The processor 63 generates reference information based on the number of packages whose address and name information match and which includes regulated items. As a result, the inspection device 20 can provide useful information for the operator to determine the sorting destination of the cargo.

また、プロセッサ63は、通信インタフェース61により、荷物2から読み取られたEAD識別コードと一致するEAD情報を取得する。プロセッサ63は、EAD情報に含まれている差出人情報及び受取人情報の少なくともいずれかを、住所氏名情報として用いる。これにより、検査装置20は、オペレータが荷物の区分先を判断する為に有用な情報を提供することができる。 Further, the processor 63 acquires the EAD information that matches the EAD identification code read from the package 2 by the communication interface 61. The processor 63 uses at least one of the sender information and the recipient information included in the EAD information as the address and name information. As a result, the inspection device 20 can provide useful information for the operator to determine the sorting destination of the cargo.

また、プロセッサ63は、通信インタフェース61により、荷物2に表示された差出人情報及び受取人情報を取得する。プロセッサ63は、差出人情報及び受取人情報の少なくともいずれかを、住所氏名情報として用いる。これにより、検査装置1は、荷物2にEADタグ3が貼られていない場合であっても、履歴を残すことができる。 Further, the processor 63 acquires the sender information and the recipient information displayed on the package 2 by the communication interface 61. The processor 63 uses at least one of the sender information and the recipient information as the address and name information. As a result, the inspection device 1 can leave a history even when the EAD tag 3 is not attached to the baggage 2.

検査装置20のプロセッサ63は、荷物2のX線画像をX線撮影装置15から取得する。プロセッサ63は、機械学習によって生成されたパラメータを用いて、X線画像から規制品の位置を推測する。プロセッサ63は、規制品の位置の推測結果をX線画像に重ね、候補画像を生成する。プロセッサ63は、候補画像を参考情報に付加し、出力する。これにより、オペレータの注意を促すことができる。 The processor 63 of the inspection device 20 acquires an X-ray image of the luggage 2 from the X-ray photographing device 15. The processor 63 estimates the position of the regulated product from the X-ray image using the parameters generated by machine learning. The processor 63 superimposes the estimation result of the position of the regulated product on the X-ray image to generate a candidate image. The processor 63 adds the candidate image to the reference information and outputs it. As a result, the operator's attention can be drawn.

なお、上記の実施形態では、確認画面71は、配達ボタン78と確認ボタン79とのいずれかをオペレータに選択させる画面であると説明したが、この構成に限定されない。確認ボタン79が複数の区分理由によって分かれていてもよい。また、X線画像上において、規制品が存在する位置をオペレータに指示させるように構成されていてもよい。 In the above embodiment, the confirmation screen 71 has been described as a screen that allows the operator to select either the delivery button 78 or the confirmation button 79, but the present invention is not limited to this configuration. The confirmation button 79 may be divided according to a plurality of classification reasons. Further, the operator may be configured to indicate the position where the regulated product exists on the X-ray image.

図6は、図4の確認画面71の他の例である確認画面71Aについて説明する為の説明図である。 FIG. 6 is an explanatory diagram for explaining the confirmation screen 71A, which is another example of the confirmation screen 71 of FIG.

プロセッサ63は、EAD情報、帳票情報、外観画像、X線画像、候補画像、及びデータベースから抽出した抽出情報に基づいて、確認画面71Aを生成する。 The processor 63 generates the confirmation screen 71A based on the EAD information, the form information, the appearance image, the X-ray image, the candidate image, and the extracted information extracted from the database.

確認画面71Aは、操作端末17のディスプレイ56に表示される画面である。確認画面71Aには、荷物2を開封確認する必要があるか否かをオペレータが判断する際に用いられる情報が表示される。即ち、確認画面71Aに表示される情報は、オペレータの判断の参考に用いられる参考情報である。確認画面71Aは、外観画像72、X線画像73A、候補画像74、EAD情報75、帳票情報76、抽出情報77、配達ボタン78、規制品ボタン81、危険物ボタン82、内容物不一致ボタン83、過去履歴ボタン84、及びその他ボタン85などの表示を有する。 The confirmation screen 71A is a screen displayed on the display 56 of the operation terminal 17. On the confirmation screen 71A, information used when the operator determines whether or not it is necessary to confirm the opening of the package 2 is displayed. That is, the information displayed on the confirmation screen 71A is reference information used as a reference for the operator's judgment. The confirmation screen 71A includes an external image 72, an X-ray image 73A, a candidate image 74, an EAD information 75, a form information 76, an extraction information 77, a delivery button 78, a regulated item button 81, a dangerous goods button 82, and a content mismatch button 83. It has a display of a past history button 84, another button 85, and the like.

オペレータは、確認画面71Aの参考情報を確認し、荷物2を開封確認する必要があるか否か判断し、配達ボタン78、規制品ボタン81、危険物ボタン82、内容物不一致ボタン83、過去履歴ボタン84、及びその他ボタン85のいずれかを選択する。規制品ボタン81、危険物ボタン82、内容物不一致ボタン83、過去履歴ボタン84、及びその他ボタン85は、確認画面71における確認ボタン79に相当する。即ち、規制品ボタン81、危険物ボタン82、内容物不一致ボタン83、過去履歴ボタン84、及びその他ボタン85のいずれかがオペレータにより選択された場合、検査装置20は、荷物2を第2の仕分先32に搬送するようにソータ制御装置12を制御する。 The operator confirms the reference information on the confirmation screen 71A, determines whether or not it is necessary to confirm the opening of the package 2, the delivery button 78, the regulated item button 81, the dangerous goods button 82, the content mismatch button 83, and the past history. Select either Button 84 or Other Button 85. The regulated item button 81, the dangerous goods button 82, the content mismatch button 83, the past history button 84, and the other button 85 correspond to the confirmation button 79 on the confirmation screen 71. That is, when any of the regulated item button 81, the dangerous goods button 82, the content mismatch button 83, the past history button 84, and the other button 85 is selected by the operator, the inspection device 20 sorts the luggage 2 into the second assortment. The sorter control device 12 is controlled so as to be conveyed to the destination 32.

規制品ボタン81は、オペレータが確認画面71Aを視認した結果、荷物2に規制品が含まれている可能性があると判断した場合に選択されるボタンである。 The regulated product button 81 is a button selected when the operator visually recognizes the confirmation screen 71A and determines that the luggage 2 may contain the regulated product.

危険物ボタン82は、オペレータが確認画面71Aを視認した結果、荷物2に規制品が含まれている可能性があると判断した場合に、選択されるボタンである。 The dangerous goods button 82 is a button selected when the operator visually recognizes the confirmation screen 71A and determines that the luggage 2 may contain a regulated item.

内容物不一致ボタン83は、オペレータが確認画面71Aを視認した結果、EAD情報75または帳票情報76に記載されている荷物2と一致しないものが荷物2に含まれている可能性があると判断した場合に、選択されるボタンである。 As a result of the operator visually recognizing the confirmation screen 71A, the content mismatch button 83 determines that the baggage 2 may contain items that do not match the baggage 2 described in the EAD information 75 or the form information 76. If the button is selected.

過去履歴ボタン84は、オペレータが確認画面71Aを視認した結果、抽出情報77から荷物2を開封して確認する必要があると判断した場合に、選択されるボタンである。 The past history button 84 is a button selected when the operator visually recognizes the confirmation screen 71A and determines from the extraction information 77 that it is necessary to open and confirm the baggage 2.

その他ボタン85は、上記の理由に該当しないものの、荷物2を開封して確認する必要があるとオペレータが判断した場合に、選択されるボタンである。 The other button 85 is a button that is selected when the operator determines that the baggage 2 needs to be opened and confirmed, although it does not correspond to the above reason.

X線画像73Aは、X線撮影装置15により取得した荷物2のX線画像である。さらに、X線画像73Aは、画像上の領域をタッチセンサ57により指示可能に構成されている。即ち、操作端末17は、オペレータがタッチセンサ57によりX線画像73A上の領域を選択(タップ、ドラッグなど)する操作を行った場合、オペレータが選択した領域を示す情報(X線画像領域情報)を生成する。 The X-ray image 73A is an X-ray image of the luggage 2 acquired by the X-ray photographing apparatus 15. Further, the X-ray image 73A is configured so that the area on the image can be indicated by the touch sensor 57. That is, when the operator performs an operation of selecting (tapping, dragging, etc.) an area on the X-ray image 73A by the touch sensor 57, the operation terminal 17 indicates information indicating the area selected by the operator (X-ray image area information). To generate.

例えば、オペレータは、X線画像73Aにおいて、規制品が存在することが推定される領域を選択する。即ち、X線画像領域情報は、X線画像73A中における規制品の位置を示す情報である。これにより、X線画像73Aが問題であり、オペレータによる領域の選択結果(X線画像領域情報)が答えである学習データを生成することができる。 For example, the operator selects a region in the X-ray image 73A where the regulated product is presumed to be present. That is, the X-ray image area information is information indicating the position of the regulated product in the X-ray image 73A. As a result, it is possible to generate learning data in which the X-ray image 73A is a problem and the result of region selection (X-ray image region information) by the operator is the answer.

上記の確認画面71Aにおけるボタンの操作結果に基づいて、操作端末17は、操作信号を検査装置20に供給する。 Based on the operation result of the button on the confirmation screen 71A, the operation terminal 17 supplies the operation signal to the inspection device 20.

検査装置20のプロセッサ63は、操作端末17から配達ボタン78が選択されたことを示す操作信号を受信した場合、荷物2が規制品候補ではないと判断する。この場合、プロセッサ63は、荷物2が第1の仕分先31に搬送されるように、ソータ制御装置12に制御信号を入力する。さらに、プロセッサ63は、登録情報を生成し、第1のストレージ装置18に保存する。 When the processor 63 of the inspection device 20 receives the operation signal indicating that the delivery button 78 has been selected from the operation terminal 17, the processor 63 determines that the package 2 is not a regulated product candidate. In this case, the processor 63 inputs a control signal to the sorter control device 12 so that the cargo 2 is conveyed to the first partition 31. Further, the processor 63 generates registration information and stores it in the first storage device 18.

また、プロセッサ63は、規制品ボタン81、危険物ボタン82、内容物不一致ボタン83、過去履歴ボタン84、及びその他ボタン85のいずれかが選択されたことを示す操作信号を操作端末17から受信した場合、荷物2の開封確認が必要であると判断する。この場合、プロセッサ63は、荷物2が第2の仕分先32に搬送されるように、ソータ制御装置12に制御信号を入力する。 Further, the processor 63 receives an operation signal from the operation terminal 17 indicating that any of the regulated item button 81, the dangerous goods button 82, the content mismatch button 83, the past history button 84, and the other button 85 has been selected. In that case, it is determined that the opening confirmation of the baggage 2 is necessary. In this case, the processor 63 inputs a control signal to the sorter control device 12 so that the cargo 2 is conveyed to the second partition 32.

この後、オペレータは、第2の仕分先32に搬送された荷物2を開封し、荷物2の中身を確認し、確認結果を操作端末17に入力する。プロセッサ63は、上記の処理結果に基づいて、登録情報を生成する。これにより、規制品が実際に荷物2に含まれていたか否かを示す規制品有無情報を検査結果情報に含む登録情報が生成される。 After that, the operator opens the package 2 transported to the second supplier 32, confirms the contents of the package 2, and inputs the confirmation result to the operation terminal 17. The processor 63 generates registration information based on the above processing result. As a result, registration information including the regulated product presence / absence information indicating whether or not the regulated product was actually included in the baggage 2 is generated in the inspection result information.

また、プロセッサ63は、規制品ボタン81、危険物ボタン82、内容物不一致ボタン83、過去履歴ボタン84、及びその他ボタン85などのボタンが選択されて、荷物2が第2の仕分先32に区分されたのかを示す情報(区分理由情報)を、登録情報に付加する。例えば、規制品ボタン81が選択された場合、プロセッサ63は、区分理由情報として「規制品」を登録情報に付加する。例えば、危険物ボタン82が選択された場合、プロセッサ63は、区分理由情報として「危険物」を登録情報に付加する。例えば、内容物不一致ボタン83が選択された場合、プロセッサ63は、区分理由情報として「内容物不一致」を登録情報に付加する。例えば、過去履歴ボタン84が選択された場合、プロセッサ63は、区分理由情報として「過去履歴」を登録情報に付加する。例えば、その他ボタン85が選択された場合、プロセッサ63は、区分理由情報として「その他」を登録情報に付加する。 Further, in the processor 63, buttons such as the regulated item button 81, the dangerous goods button 82, the content mismatch button 83, the past history button 84, and the other button 85 are selected, and the luggage 2 is classified into the second supplier 32. Information indicating whether or not the processing has been performed (classification reason information) is added to the registration information. For example, when the regulated product button 81 is selected, the processor 63 adds "regulated product" to the registration information as the classification reason information. For example, when the dangerous goods button 82 is selected, the processor 63 adds "dangerous goods" to the registration information as the classification reason information. For example, when the content mismatch button 83 is selected, the processor 63 adds "content mismatch" to the registration information as the classification reason information. For example, when the past history button 84 is selected, the processor 63 adds "past history" to the registration information as the classification reason information. For example, when the other button 85 is selected, the processor 63 adds "other" as the classification reason information to the registration information.

また、プロセッサ63は、X線画像73A上における規制品の位置を示すX線画像領域情報を登録情報に付加する。 Further, the processor 63 adds X-ray image area information indicating the position of the regulated product on the X-ray image 73A to the registration information.

これにより、図7に示される登録情報が生成される。図7の登録情報は、登録情報を登録した登録日時、オペレータ識別コード、荷物情報、及び検査結果情報を含む。荷物情報は、ソータ11により搬送されている荷物2に関する情報である。荷物情報は、住所氏名情報及びX線画像の少なくとも一方を含む。例えば、荷物情報は、EAD情報、帳票情報、荷物の外観画像、及び荷物のX線画像を含む。検査結果情報は、オペレータにより入力された区分先情報、区分理由情報、規制品有無情報、及びX線画像領域情報を含む。 As a result, the registration information shown in FIG. 7 is generated. The registration information of FIG. 7 includes the registration date and time when the registration information was registered, the operator identification code, the baggage information, and the inspection result information. The cargo information is information about the cargo 2 being carried by the sorter 11. The baggage information includes at least one of the address / name information and the X-ray image. For example, the package information includes EAD information, form information, an external image of the package, and an X-ray image of the package. The inspection result information includes classification destination information, classification reason information, restricted product presence / absence information, and X-ray image area information input by the operator.

プロセッサ63は、上記の処理により生成された登録情報を、第1のストレージ装置18に過去履歴として記憶する。プロセッサ63は、第1のストレージ装置18に保存された過去履歴に基づいて、データベースを生成し、第2のストレージ装置19に保存する。例えば、プロセッサ63は、住所氏名情報毎に、区分先情報、区分理由情報、及び規制品有無を対応付けて、データベースを生成する。これにより、プロセッサ63は、住所氏名情報に基づいて、区分理由毎に、規制品候補であると判断された過去の荷物の数、規制品を含んでいた過去の荷物の数をそれぞれ抽出可能なデータベースを生成することができる。 The processor 63 stores the registration information generated by the above process in the first storage device 18 as a past history. The processor 63 generates a database based on the past history stored in the first storage device 18, and stores the database in the second storage device 19. For example, the processor 63 generates a database by associating the classification destination information, the classification reason information, and the presence / absence of regulated products for each address / name information. As a result, the processor 63 can extract the number of past packages determined to be regulated product candidates and the number of past packages including regulated products for each classification reason based on the address and name information. A database can be generated.

このような構成によると、プロセッサ63は、過去履歴から抽出された、予め設定された区分理由が付加された荷物の数に基づいて、参考情報を生成することができる。即ち、プロセッサ63は、予め設定された区分理由の過去の荷物の数、予め設定された区分理由によって規制品候補であると判断された過去の荷物の数、予め設定された区分理由によって区分され且つ規制品を含んでいた荷物の数を、データベースより抽出することができる。さらに、プロセッサ63は、抽出した情報を、抽出情報77として確認画面71Aに付加することができる。 According to such a configuration, the processor 63 can generate reference information based on the number of packages to which a preset classification reason is added, which is extracted from the past history. That is, the processor 63 is classified according to the number of past packages for the preset classification reason, the number of past packages determined to be regulated product candidates by the preset classification reason, and the preset classification reason. Moreover, the number of packages containing regulated items can be extracted from the database. Further, the processor 63 can add the extracted information to the confirmation screen 71A as the extracted information 77.

また、上記の実施形態において、プロセッサ63は、住所氏名情報に基づいて、データベースから抽出情報を取得し、抽出情報にもとづいてアラーム表示を行うと説明したが、この構成に限定されない。プロセッサ63は、区分理由情報によってアラーム表示を行わないように構成されていてもよい。 Further, in the above embodiment, it has been described that the processor 63 acquires the extracted information from the database based on the address and name information and displays the alarm based on the extracted information, but the present invention is not limited to this configuration. The processor 63 may be configured not to display an alarm based on the classification reason information.

例えば、上記の実施形態では、プロセッサ63が、EAD情報または帳票情報に基づいて、第2のストレージ装置19から抽出情報を抽出する。さらに、プロセッサ63は、抽出情報における規制品候補の数が、予め設定された閾値以上である場合、アラーム表示80を確認画面71に表示させると説明した。しかし、区分理由が過去履歴である場合、1度荷物2が規制品候補であると判断されることにより、住所氏名情報が一致する荷物2に対して、アラーム表示が出され続けることになる。この為、プロセッサ63は、区分理由によって、規制品候補としてカウントしないように構成されていてもよい。これにより、プロセッサ63は、住所氏名情報が一致する抽出情報の規制品候補の数のうち、予め設定された区分理由により規制品候補として区分された荷物の数をカウントすることができる。 For example, in the above embodiment, the processor 63 extracts the extracted information from the second storage device 19 based on the EAD information or the form information. Further, it has been explained that the processor 63 displays the alarm display 80 on the confirmation screen 71 when the number of regulated product candidates in the extracted information is equal to or more than a preset threshold value. However, if the reason for classification is the past history, once it is determined that the baggage 2 is a candidate for a regulated item, the alarm display will continue to be displayed for the baggage 2 having the same address and name information. Therefore, the processor 63 may be configured not to be counted as a regulated product candidate due to the reason for classification. As a result, the processor 63 can count the number of packages classified as regulated product candidates for a preset classification reason among the number of regulated product candidates in the extracted information whose address and name information match.

また、上記したように、図7の登録情報は、X線画像(問題)と、X線画像上における規制品の位置を示すX線画像領域情報(答え)とを有する。即ち、登録情報から学習用データを生成することができる。検査装置20は、学習用データを用いて、例えばセグメーテーション用のニューラルネットワークなどにより機械学習を行うことにより、パラメータを更新することができる。即ち、オペレータが入力したX線画像領域情報に基づいて、パラメータを更新することができる。 Further, as described above, the registered information in FIG. 7 has an X-ray image (problem) and X-ray image area information (answer) indicating the position of the regulated product on the X-ray image. That is, learning data can be generated from the registered information. The inspection device 20 can update the parameters by performing machine learning using the learning data, for example, by using a neural network for segmentation or the like. That is, the parameters can be updated based on the X-ray image area information input by the operator.

さらに、検査装置20は、学習用データを用いた機械学習におけるパラメータの更新の重みを、オペレータごとに設定する構成であってもよい。重みは、パラメータの更新の度合、上限及び下限、または係数などを示す情報である。重みが大きいほど、1度の学習でパラメータが大きく変化する。例えば、プロセッサ63は、登録情報のオペレータ識別コードに基づいて、重みを取得する。例えば、プロセッサ63は、登録情報に付加されているオペレータ識別コードと重みとか対応付けられたテーブルを参照することにより、重みを取得する。プロセッサ63は、取得した重みと、学習用データとに基づいて、パラメータの更新を行う。これにより、X線画像中の規制品の検出精度が高いオペレータの登録情報に基づく学習用データを、パラメータの更新の際に重視させることができる。 Further, the inspection device 20 may have a configuration in which the weight of updating parameters in machine learning using learning data is set for each operator. The weight is information indicating the degree of parameter update, the upper and lower limits, the coefficient, and the like. The larger the weight, the larger the parameter changes in one learning. For example, the processor 63 acquires the weight based on the operator identification code of the registration information. For example, the processor 63 acquires the weight by referring to the operator identification code added to the registration information and the weight or a table associated with the weight. The processor 63 updates the parameters based on the acquired weights and the training data. As a result, the learning data based on the registered information of the operator having high detection accuracy of the regulated product in the X-ray image can be emphasized when updating the parameters.

またさらに、検査装置20は、図7の登録情報を用いたパラメータの更新の重みを、区分理由情報ごとに設定する構成であってもよい。これにより、区分理由が「その他」である場合、「内容物不一致」である場合、または「過去履歴」である登録情報に基づき生成された学習用データを、パラメータの更新の際に重視しないようにすることができる。 Further, the inspection device 20 may have a configuration in which the weight of updating the parameter using the registration information of FIG. 7 is set for each classification reason information. As a result, when the reason for classification is "Other", "Content mismatch", or "Past history", the learning data generated based on the registration information is not emphasized when updating the parameters. Can be.

またさらに、検査装置20は、実際に第2の仕分先32に区分された荷物2を確認した結果に基づいて、図7の登録情報をパラメータの更新に用いない構成であってもよい。例えば、実際に第2の仕分先32に区分された荷物2を確認した結果、規制品が含まれていなかった場合、登録情報のX線画像(問題)及びX線画像領域情報(答え)をパラメータの更新に用いることは、好ましくない。この為、例えば、検査装置20は、実際に第2の仕分先32に区分された荷物2を確認した結果、規制品が含まれていなかった登録情報を、パラメータの更新に用いないように構成されていてもよい。 Further, the inspection device 20 may have a configuration in which the registration information of FIG. 7 is not used for updating the parameters based on the result of actually checking the baggage 2 classified into the second supplier 32. For example, as a result of actually checking the baggage 2 classified into the second supplier 32, if the regulated item is not included, the X-ray image (problem) and the X-ray image area information (answer) of the registration information are displayed. It is not preferable to use it for updating parameters. Therefore, for example, the inspection device 20 is configured so that the registration information that does not include the regulated product is not used for updating the parameter as a result of actually checking the baggage 2 classified into the second supplier 32. It may have been done.

上記したように、プロセッサ63は、荷物情報として荷物2のX線画像を取得し、X線画像73を含む参考情報としての確認画面71Aを出力する。オペレータは、X線画像73を確認し、荷物2が規制品候補であるか否かを操作端末17に入力する。プロセッサ63は、操作信号に基づいて、オペレータが荷物2を規制品候補であると判断したか否かを示す検査結果情報を生成する。さらに、プロセッサ63は、X線画像を問題とし、検査結果情報を答えとした学習用データに基づいて、機械学習によりパラメータを生成する。このような構成によると、プロセッサ63は、新たに取得したX線画像と、パラメータとに基づいて、荷物2が規制品候補であるか否かを推定する。プロセッサ63は、荷物2が規制品候補であるか否かの推定結果を、参考情報としての確認画面71Aに付加することができる。これにより、検査装置20は、オペレータに注意を促すことができる。 As described above, the processor 63 acquires the X-ray image of the luggage 2 as the luggage information and outputs the confirmation screen 71A as the reference information including the X-ray image 73. The operator confirms the X-ray image 73, and inputs to the operation terminal 17 whether or not the luggage 2 is a regulated product candidate. The processor 63 generates inspection result information indicating whether or not the operator has determined that the cargo 2 is a regulated product candidate based on the operation signal. Further, the processor 63 uses the X-ray image as a problem and generates parameters by machine learning based on the learning data in which the inspection result information is the answer. According to such a configuration, the processor 63 estimates whether or not the luggage 2 is a regulated product candidate based on the newly acquired X-ray image and the parameters. The processor 63 can add the estimation result of whether or not the luggage 2 is a regulated product candidate to the confirmation screen 71A as reference information. As a result, the inspection device 20 can call attention to the operator.

また、プロセッサ63は、荷物情報として荷物2のX線画像を取得し、X線画像73を含む参考情報としての確認画面71Aを出力する。オペレータは、X線画像73を確認し、荷物2が規制品候補であるか否か判断する。オペレータは、荷物2が規制品候補であると判断した場合、荷物2が規制品候補であると推定される理由(すなわち区分理由)を、操作端末17に入力する。プロセッサ63は、操作信号に基づいて、オペレータが荷物2を規制品候補であると判断したか否かと、オペレータが荷物2を規制品候補であると判断した理由を示す区分理由と、を示す検査結果情報を生成する。さらに、プロセッサ63は、X線画像を問題とし、検査結果情報を答えとした学習用データに基づいて、機械学習によりパラメータを更新する。即ち、プロセッサ63は、X線画像を問題とし、オペレータが荷物2を規制品候補であると判断した理由を示す区分理由が分類先として設定されたパラメータを生成する。このような構成によると、プロセッサ63は、新たに取得したX線画像と、パラメータとに基づいて、荷物2が規制品候補であるか否かと、荷物2が規制品候補である理由と、を推定することができる。これにより、プロセッサ63は、荷物2が規制品候補であるか否かと、荷物2が規制品候補である理由と、の推定結果を、参考情報としての確認画面71Aに付加することができる。これにより、検査装置20は、オペレータに注意を促すことができる。 Further, the processor 63 acquires the X-ray image of the luggage 2 as the luggage information and outputs the confirmation screen 71A as the reference information including the X-ray image 73. The operator confirms the X-ray image 73 and determines whether or not the luggage 2 is a regulated product candidate. When the operator determines that the luggage 2 is a regulated product candidate, the operator inputs to the operation terminal 17 the reason why the luggage 2 is presumed to be the regulated product candidate (that is, the reason for classification). The processor 63 is an inspection indicating whether or not the operator has determined the cargo 2 as a regulated product candidate based on the operation signal, and a classification reason indicating the reason why the operator has determined the cargo 2 as a regulated product candidate. Generate result information. Further, the processor 63 updates the parameters by machine learning based on the learning data in which the X-ray image is a problem and the test result information is the answer. That is, the processor 63 has a problem with the X-ray image, and generates a parameter in which the classification reason indicating the reason why the operator determines that the cargo 2 is a regulated product candidate is set as the classification destination. According to such a configuration, the processor 63 determines whether or not the luggage 2 is a regulated product candidate and the reason why the luggage 2 is a regulated product candidate based on the newly acquired X-ray image and the parameters. Can be estimated. As a result, the processor 63 can add the estimation results of whether or not the luggage 2 is a regulated product candidate and the reason why the luggage 2 is a regulated product candidate to the confirmation screen 71A as reference information. As a result, the inspection device 20 can call attention to the operator.

また、プロセッサ63は、荷物情報として荷物2のX線画像を取得し、X線画像73を含む参考情報としての確認画面71Aを出力する。オペレータは、X線画像73を確認し、荷物2が規制品候補であるか否か判断する。オペレータは、荷物2が規制品候補であると判断した場合、荷物2が規制品候補であると推定される理由(すなわち区分理由)を、操作端末17に入力する。また、オペレータは、荷物2が規制品候補であると判断した場合、X線画像73A上で、規制品の位置を、操作端末17に入力する。プロセッサ63は、操作信号に基づいて、オペレータが荷物2を規制品候補であると判断したか否かと、オペレータが荷物2を規制品候補であると判断した理由を示す区分理由と、規制品の位置を示すX線画像領域情報と、を示す検査結果情報を生成する。さらに、プロセッサ63は、X線画像を問題とし、検査結果情報を答えとした学習用データに基づいて、機械学習によりパラメータを更新する。即ち、プロセッサ63は、X線画像を問題とし、オペレータが荷物2を規制品候補であると判断した理由を示す区分理由と、X線画像上において規制品が存在する位置と、を推定する為のパラメータを生成する。言い換えると、プロセッサ63は、X線画像73A上でのオペレータの操作に基づいて生成されたX線画像領域情報と、オペレータが荷物2を規制品候補であると判断した理由を示す区分理由とが答えである学習用データに基づいて、パラメータを生成する。このような構成によると、プロセッサ63は、新たに取得したX線画像と、パラメータとに基づいて、荷物2が規制品候補であるか否かと、荷物2が規制品候補である理由と、X線画像上の規制品が存在することが推定される領域と、を推定することができる。プロセッサ63は、パラメータと、新たに取得したX線画像とに基づいて、X線画像上の規制品が存在することが推定される領域と、区分理由とを示した候補画像を生成する。プロセッサ63は、生成した候補画像を、参考情報としての確認画面71Aに表示させる。これにより、検査装置20は、オペレータに注意を促すことができる。 Further, the processor 63 acquires the X-ray image of the luggage 2 as the luggage information and outputs the confirmation screen 71A as the reference information including the X-ray image 73. The operator confirms the X-ray image 73 and determines whether or not the luggage 2 is a regulated product candidate. When the operator determines that the luggage 2 is a regulated product candidate, the operator inputs to the operation terminal 17 the reason why the luggage 2 is presumed to be the regulated product candidate (that is, the reason for classification). Further, when the operator determines that the luggage 2 is a candidate for the regulated product, the operator inputs the position of the regulated product to the operation terminal 17 on the X-ray image 73A. Based on the operation signal, the processor 63 indicates whether or not the operator has determined that the luggage 2 is a regulated product candidate, the classification reason indicating the reason why the operator has determined that the luggage 2 is a regulated product candidate, and the regulated product. X-ray image area information indicating the position and inspection result information indicating the position are generated. Further, the processor 63 updates the parameters by machine learning based on the learning data in which the X-ray image is a problem and the test result information is the answer. That is, the processor 63 considers the X-ray image as a problem, and estimates the reason for classification indicating the reason why the operator determines that the luggage 2 is a candidate for the regulated product, and the position where the regulated product exists on the X-ray image. Generate parameters for. In other words, the processor 63 has X-ray image area information generated based on the operator's operation on the X-ray image 73A, and a classification reason indicating the reason why the operator determines that the luggage 2 is a regulated product candidate. Generate parameters based on the learning data that is the answer. According to such a configuration, the processor 63 determines whether or not the luggage 2 is a regulated product candidate, the reason why the luggage 2 is a regulated product candidate, and X based on the newly acquired X-ray image and the parameters. It is possible to estimate the region where the regulated product on the line image is estimated to exist. Based on the parameters and the newly acquired X-ray image, the processor 63 generates a candidate image showing the region where the regulated product on the X-ray image is presumed to exist and the reason for classification. The processor 63 displays the generated candidate image on the confirmation screen 71A as reference information. As a result, the inspection device 20 can call attention to the operator.

また、プロセッサ63は、X線画像が問題であり、X線画像上における規制品の位置を答えとした学習用データを用いて、機械学習によりパラメータの更新を行う場合、機械学習に用いるX線画像をクロップしてもよい。例えば、プロセッサ63は、X線画像領域情報に基づいて、X線画像をクロップし、クロップしたX線画像を学習用データの問題として用いる。即ち、プロセッサ63は、オペレータがX線画像上で選択した領域のX線画像を学習用データの問題として用いる。これにより、検査装置20は、学習用データの問題から余計な情報が除去される為、より規制品候補を検出しやすいパラメータを生成することができる。 Further, the processor 63 has a problem with an X-ray image, and when the parameters are updated by machine learning using the learning data obtained by answering the position of the regulated item on the X-ray image, the X-ray used for machine learning is used. You may crop the image. For example, the processor 63 crops an X-ray image based on the X-ray image area information, and uses the cropped X-ray image as a problem of training data. That is, the processor 63 uses the X-ray image of the region selected by the operator on the X-ray image as a problem of learning data. As a result, the inspection device 20 can generate parameters that make it easier to detect regulated product candidates because unnecessary information is removed from the problem of learning data.

また、上記の実施形態では、規制品ボタン81、危険物ボタン82、内容物不一致ボタン83、過去履歴ボタン84、及びその他ボタン85などのボタンの選択に基づいて、「規制品」、「危険物」、「内容物不一致」、「過去履歴」、及び「その他」などの区分理由情報を検査結果情報に付加すると説明したが、この構成に限定されない。「規制品」及び「危険物」は、それぞれさらに種々の項目に分かれていてもよい。例えば、「規制品」は、「特定の生体」、「指定薬物」、「銃及び銃部品」、及び「偽造物」などに分かれていてもよい。また、「危険物」は、「爆発物」、「火薬類」、及び「特定化学物質」などに分かれていてもよい。区分理由情報がこのように分かれていることにより、検査結果情報により詳細な区分理由情報が付加される。これにより、検査装置20は、より詳細な区分理由を参考情報に付加することができる。 Further, in the above embodiment, "regulated product" and "dangerous goods" and "dangerous goods" are selected based on the selection of buttons such as the regulated product button 81, the dangerous goods button 82, the content mismatch button 83, the past history button 84, and the other button 85. , "Content mismatch", "Past history", and "Other" are added to the inspection result information, but the configuration is not limited to this. The "regulated product" and the "dangerous goods" may be further divided into various items. For example, the "regulated product" may be divided into a "specific living body", a "designated drug", a "gun and gun parts", a "counterfeit product", and the like. Further, the "dangerous goods" may be divided into "explosives", "explosives", "specific chemical substances" and the like. Since the classification reason information is divided in this way, detailed classification reason information is added to the inspection result information. As a result, the inspection device 20 can add a more detailed reason for classification to the reference information.

また、上記の検査プログラムを実行するのは、検査装置20のプロセッサ63に限定されず、通信インタフェースと、プロセッサとを備える装置であれば如何なる装置であってもよい。即ち、検査プログラムは、通信インタフェースと、プロセッサとを備える装置のプロセッサにより実行される検査プログラムであって、プロセッサに、通信インタフェースにより、荷物を区分するソータにより搬送されている荷物に関する荷物情報と、オペレータによる操作に基づいて生成された操作信号とを取得することを実行させる。また、検査プログラムは、プロセッサに、操作信号に基づいて生成された荷物が規制品候補であるか否かを示す検査結果情報と荷物情報とが対応付けられた過去履歴と、新たに取得した荷物情報と、に基づいて、参考情報を出力することを実行させる。 Further, the execution of the above inspection program is not limited to the processor 63 of the inspection device 20, and any device may be used as long as it includes a communication interface and a processor. That is, the inspection program is an inspection program executed by the processor of the device including the communication interface and the processor, and the baggage information regarding the baggage carried by the sorter that sorts the baggage by the communication interface to the processor. It is executed to acquire the operation signal generated based on the operation by the operator. In addition, the inspection program has a past history in which the processor associates inspection result information indicating whether or not the package generated based on the operation signal is a regulated product candidate with the package information, and the newly acquired package. To execute the output of reference information based on the information.

また、上記したように、検査プログラムは、検査プログラムを実行するプロセッサを備える装置により読み出し可能な状態で、非一時的記録媒体に記録されていてもよい。 Further, as described above, the inspection program may be recorded on a non-temporary recording medium in a state of being readable by a device including a processor that executes the inspection program.

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
なお、以下に出願当初の特許請求の範囲を付記する。
[C1]
荷物を区分するソータにより搬送されている前記荷物に関する荷物情報と、オペレータによる操作に基づいて生成された操作信号とを取得する通信インタフェースと、
前記操作信号に基づいて生成された前記荷物が規制品候補であるか否かを示す検査結果情報と前記荷物情報とが対応付けられた過去履歴と、新たに取得した前記荷物情報と、に基づいて、参考情報を出力するプロセッサと、
を具備する検査装置。
[C2]
前記荷物情報は、前記荷物に対応する住所氏名情報であり、
前記プロセッサは、前記住所氏名情報が一致する前記過去履歴から抽出された規制品候補である荷物の数に基づいて、前記参考情報を生成するC1に記載の検査装置。
[C3]
前記荷物情報は、前記荷物に対応する住所氏名情報を含み、
前記プロセッサは、
前記荷物が規制品を含むことを示す前記操作信号を受信した場合、前記荷物が規制品を含むことを示す情報を前記検査結果情報に付加し、
前記住所氏名情報が一致する前記過去履歴から抽出された規制品を含む荷物の数に基づいて、前記参考情報を生成するC1に記載の検査装置。
[C4]
前記荷物情報は、前記荷物に対応する住所氏名情報を含み、
前記プロセッサは、
前記操作信号に基づいて、オペレータが前記荷物を規制品候補であると判断した理由を示す区分理由を、前記検査結果情報に付加し、
前記過去履歴から抽出された、予め設定された区分理由が付加された荷物の数に基づいて、前記参考情報を生成するC1に記載の検査装置。
[C5]
前記荷物情報は、前記荷物のX線画像を含み、
前記プロセッサは、
オペレータが前記X線画像を確認し、荷物が規制品候補であるか否かの入力に基づき生成された前記操作信号に基づいて、オペレータが前記荷物を規制品候補であると判断したか否かを示す前記検査結果情報を生成し、
前記X線画像を問題とし、前記検査結果情報を答えとした学習用データに基づいて生成されたパラメータと、新たに取得した前記X線画像とに基づいて、前記参考情報を生成するC1に記載の検査装置。
[C6]
前記プロセッサは、
前記操作信号に基づいて、オペレータが前記荷物を規制品候補であると判断した理由を示す区分理由を、前記検査結果情報に付加し、
前記パラメータと、前記X線画像とに基づいて、前記荷物が規制品候補であると推定される理由を、前記参考情報に付加するC5に記載の検査装置。
[C7]
前記プロセッサは、
前記X線画像を問題とし、前記X線画像上における規制品の位置を答えとした学習用データに基づいて生成された前記パラメータと、前記X線画像とに基づいて、前記X線画像上の規制品が存在することが推定される領域を示した候補画像を生成し、
前記候補画像を、前記参考情報に付加するC5に記載の検査装置。
[C8]
前記学習用データは、前記X線画像上でのオペレータの操作に基づいて、X線画像上の領域を示すX線画像領域情報が前記答えとして生成されたデータであるC7に記載の検査装置。
[C9]
前記学習用データは、前記X線画像上でのオペレータの操作に基づいて、X線画像上の領域を示すX線画像領域情報と、オペレータが前記荷物を規制品候補であると判断した理由を示す区分理由とが前記答えとして生成されたデータであるC7に記載の検査装置。
[C10]
前記プロセッサは、
前記パラメータと、前記X線画像とに基づいて、前記X線画像上の規制品が存在することが推定される領域と、前記区分理由とを示した前記候補画像を生成するC9に記載の検査装置。
[C11]
前記プロセッサは、前記学習用データに基づいて前記パラメータを更新するC5に記載の検査装置。
[C12]
前記プロセッサは、オペレータを識別するためのオペレータ識別コードを前記検査結果情報に付加し、
前記プロセッサは、前記学習用データを生成したオペレータごとに、異なる重みで前記パラメータの更新を行うC11に記載の検査装置。
[C13]
前記通信インタフェースは、前記荷物に表示された差出人情報及び受取人情報から住所氏名情報を取得し、
前記荷物情報は、前記住所氏名情報の前記差出人情報及び受取人情報の少なくともどちらかを含むC1に記載の検査装置。
[C14]
前記通信インタフェースは、差出人情報及び受取人情報を含むEAD情報が予め複数記憶された記憶媒体から、前記荷物から読み取られたEAD識別コードと一致するEAD情報を取得し、取得した前記EAD情報に含まれている住所氏名情報を取得し、
前記荷物情報は、前記住所氏名情報の前記差出人情報及び受取人情報の少なくともどちらかを含むC1に記載の検査装置。
[C15]
通信インタフェースと、プロセッサとを備える検査装置により実行される検査プログラムであって、
前記検査装置に、
前記通信インタフェースにより、荷物を区分するソータにより搬送されている前記荷物に関する荷物情報と、オペレータによる操作に基づいて生成された操作信号とを取得することを実行させ、
前記プロセッサにより、前記操作信号に基づいて生成された前記荷物が規制品候補であるか否かを示す検査結果情報と前記荷物情報とが対応付けられた過去履歴と、新たに取得した前記荷物情報と、に基づいて、参考情報を出力することを実行させる、
検査プログラム。
Although some embodiments of the present invention have been described, these embodiments are presented as examples and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other embodiments, and various omissions, replacements, and changes can be made without departing from the gist of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are also included in the scope of the invention described in the claims and the equivalent scope thereof.
The scope of claims at the time of filing is added below.
[C1]
A communication interface that acquires baggage information related to the baggage carried by the sorter that classifies the baggage and an operation signal generated based on an operation by the operator.
Based on the past history in which the inspection result information indicating whether or not the baggage generated based on the operation signal is a candidate for a regulated product and the baggage information are associated with each other, and the newly acquired baggage information. And a processor that outputs reference information
Inspection device equipped with.
[C2]
The baggage information is address and name information corresponding to the baggage.
The inspection device according to C1, wherein the processor generates the reference information based on the number of packages that are candidates for regulated products extracted from the past history in which the address and name information match.
[C3]
The baggage information includes address and name information corresponding to the baggage.
The processor
When the operation signal indicating that the baggage contains a regulated item is received, information indicating that the baggage contains a regulated item is added to the inspection result information.
The inspection device according to C1 that generates the reference information based on the number of packages including regulated products extracted from the past history with which the address and name information match.
[C4]
The baggage information includes address and name information corresponding to the baggage.
The processor
Based on the operation signal, a classification reason indicating the reason why the operator determines that the baggage is a regulated product candidate is added to the inspection result information.
The inspection device according to C1 that generates the reference information based on the number of packages to which a preset classification reason is added, which is extracted from the past history.
[C5]
The baggage information includes an X-ray image of the baggage.
The processor
Whether or not the operator has confirmed the X-ray image and determined that the luggage is a regulated product candidate based on the operation signal generated based on the input of whether or not the luggage is a regulated product candidate. Generates the above-mentioned inspection result information indicating
Described in C1 for generating the reference information based on the parameters generated based on the learning data in which the X-ray image is a problem and the test result information is the answer, and the newly acquired X-ray image. Inspection equipment.
[C6]
The processor
Based on the operation signal, a classification reason indicating the reason why the operator determines that the baggage is a regulated product candidate is added to the inspection result information.
The inspection device according to C5, which adds to the reference information the reason why the baggage is presumed to be a regulated product candidate based on the parameters and the X-ray image.
[C7]
The processor
The X-ray image is a problem, and the parameter generated based on the learning data obtained by answering the position of the regulated product on the X-ray image and the X-ray image on the X-ray image. Generate a candidate image showing the area where the regulated product is presumed to exist,
The inspection device according to C5, which adds the candidate image to the reference information.
[C8]
The inspection device according to C7, wherein the learning data is data in which X-ray image area information indicating an area on the X-ray image is generated as the answer based on an operation of the operator on the X-ray image.
[C9]
The learning data includes X-ray image area information indicating an area on the X-ray image based on the operator's operation on the X-ray image, and the reason why the operator determines that the baggage is a regulated product candidate. The inspection device according to C7, wherein the classification reason shown is the data generated as the answer.
[C10]
The processor
The inspection according to C9, which generates the candidate image showing the region where the regulated product on the X-ray image is presumed to exist based on the parameter and the X-ray image, and the reason for the classification. Device.
[C11]
The inspection device according to C5, wherein the processor updates the parameters based on the learning data.
[C12]
The processor adds an operator identification code for identifying the operator to the inspection result information.
The inspection device according to C11, wherein the processor updates the parameters with different weights for each operator who generated the learning data.
[C13]
The communication interface acquires address and name information from the sender information and the recipient information displayed on the baggage.
The inspection device according to C1, wherein the baggage information includes at least one of the sender information and the recipient information of the address and name information.
[C14]
The communication interface acquires EAD information matching the EAD identification code read from the baggage from a storage medium in which a plurality of EAD information including sender information and recipient information is stored in advance, and includes the acquired EAD information. Get the address and name information
The inspection device according to C1, wherein the baggage information includes at least one of the sender information and the recipient information of the address and name information.
[C15]
An inspection program executed by an inspection device including a communication interface and a processor.
In the inspection device
By the communication interface, it is executed to acquire the cargo information about the cargo carried by the sorter for classifying the cargo and the operation signal generated based on the operation by the operator.
The past history in which the inspection result information indicating whether or not the baggage generated based on the operation signal by the processor is a regulated product candidate and the baggage information are associated with the baggage information, and the newly acquired baggage information And, based on, to execute to output reference information,
Inspection program.

1…検査システム、2…荷物、3…EADタグ、4…帳票、11…ソータ、12…ソータ制御装置、13…EADタグリーダ、14…カメラ、15…X線撮影装置、16…帳票リーダ、17…操作端末、18…第1のストレージ装置、19…第2のストレージ装置、20…検査装置、21…ネットワーク、31…第1の仕分先、32…第2の仕分先、41…第1のコンベア、42…第2のコンベア、43…区分機構、51…通信インタフェース、52…制御部、53…タッチパネル、54…プロセッサ、55…メモリ、56…ディスプレイ、57…タッチセンサ、61…通信インタフェース、62…制御部、63…プロセッサ、64…メモリ。 1 ... Inspection system, 2 ... Luggage, 3 ... EAD tag, 4 ... Form, 11 ... Sorter, 12 ... Sorter control device, 13 ... EAD tag reader, 14 ... Camera, 15 ... X-ray imaging device, 16 ... Form reader, 17 ... operation terminal, 18 ... first storage device, 19 ... second storage device, 20 ... inspection device, 21 ... network, 31 ... first supplier, 32 ... second supplier, 41 ... first Conveyor, 42 ... second conveyor, 43 ... classification mechanism, 51 ... communication interface, 52 ... control unit, 53 ... touch panel, 54 ... processor, 55 ... memory, 56 ... display, 57 ... touch sensor, 61 ... communication interface, 62 ... Control unit, 63 ... Processor, 64 ... Memory.

Claims (15)

搬送されている荷物を撮像した画像から文字認識処理により取得した住所氏名情報及び前記荷物のX線画像を含む荷物情報と、オペレータによる操作に基づいて生成された操作信号と、を取得する通信インタフェースと、
前記操作信号に基づいて生成された前記荷物が規制品候補であるか否かを示す検査結果情報と前記荷物情報とが対応付けられた過去履歴から、新たに搬送された荷物から取得した前記住所氏名情報を含む前記荷物情報に対応する前記検査結果情報を抽出結果として抽出するプロセッサと、
を具備し、
前記プロセッサは、
前記操作信号に基づいて、オペレータが前記荷物を規制品候補であると判断した理由を示す区分理由を、前記検査結果情報に付加し、
前記過去履歴から抽出された、予め設定された区分理由が付加された荷物の数に基づく情報を出力する、
検査装置。
A communication interface that acquires address and name information acquired by character recognition processing from an image of a transported package, package information including an X-ray image of the package, and an operation signal generated based on an operation by an operator. When,
The address acquired from the newly transported baggage from the past history in which the inspection result information indicating whether or not the baggage generated based on the operation signal is a candidate for a regulated product and the baggage information are associated with each other. A processor that extracts the inspection result information corresponding to the baggage information including the name information as an extraction result, and
Equipped with
The processor
Based on the operation signal, a classification reason indicating the reason why the operator determines that the baggage is a regulated product candidate is added to the inspection result information.
Outputs information based on the number of packages to which a preset classification reason is added, which is extracted from the past history.
Inspection equipment.
前記プロセッサは、前記抽出結果に含まれる前記検査結果情報を確認画面に出力する請求項1に記載の検査装置。 The inspection device according to claim 1, wherein the processor outputs the inspection result information included in the extraction result to a confirmation screen. 前記プロセッサは、新たに搬送された前記荷物のX線画像を確認画面に出力する請求項1又は2に記載の検査装置。 The inspection device according to claim 1 or 2, wherein the processor outputs an X-ray image of the newly transported baggage to a confirmation screen. 前記プロセッサは、新たに搬送された前記荷物を撮像した画像を確認画面に出力する請求項1乃至3のいずれか一項に記載の検査装置。 The inspection device according to any one of claims 1 to 3, wherein the processor outputs an image of the newly transported package as an image to a confirmation screen. 前記プロセッサは、前記住所氏名情報が一致する前記過去履歴から抽出された規制品候補である荷物の数に基づく情報を出力する請求項1に記載の検査装置。 The inspection device according to claim 1, wherein the processor outputs information based on the number of packages that are candidates for regulated products extracted from the past history in which the address and name information match. 前記プロセッサは、
前記荷物が規制品を含むことを示す前記操作信号を受信した場合、前記荷物が規制品を含むことを示す情報を前記検査結果情報に付加し、
前記住所氏名情報が一致する前記過去履歴から抽出された規制品を含む荷物の数に基づく情報を出力する請求項1に記載の検査装置。
The processor
When the operation signal indicating that the baggage contains a regulated item is received, information indicating that the baggage contains a regulated item is added to the inspection result information.
The inspection device according to claim 1, which outputs information based on the number of packages including regulated items extracted from the past history in which the address and name information match.
前記プロセッサは、
前記X線画像を問題とし、前記X線画像上における規制品の位置を答えとした学習用データに基づいて生成されたパラメータと、前記X線画像とに基づいて、前記X線画像上の規制品が存在することが推定される領域を示した候補画像を生成し、
前記候補画像を出力する請求項1に記載の検査装置。
The processor
With the X-ray image as a problem, the regulation on the X-ray image is based on the parameters generated based on the learning data obtained by answering the position of the regulated product on the X-ray image and the X-ray image. Generate a candidate image showing the area where the product is presumed to exist,
The inspection device according to claim 1, which outputs the candidate image.
前記学習用データは、前記X線画像上でのオペレータの操作に基づいて、X線画像上の領域を示すX線画像領域情報が前記答えとして生成されたデータである請求項に記載の検査装置。 The inspection according to claim 7 , wherein the training data is data in which X-ray image area information indicating an area on the X-ray image is generated as the answer based on an operation of the operator on the X-ray image. Device. 前記学習用データは、前記X線画像上でのオペレータの操作に基づいて、X線画像上の領域を示すX線画像領域情報と、オペレータが前記荷物を規制品候補であると判断した理由を示す区分理由とが前記答えとして生成されたデータである請求項に記載の検査装置。 The learning data includes X-ray image area information indicating an area on the X-ray image based on the operator's operation on the X-ray image, and the reason why the operator determines that the baggage is a regulated product candidate. The inspection device according to claim 7 , wherein the classification reason shown is the data generated as the answer. 前記プロセッサは、
前記パラメータと、前記X線画像とに基づいて、前記X線画像上の規制品が存在することが推定される領域と、前記区分理由とを示した前記候補画像を生成する請求項に記載の検査装置。
The processor
The ninth aspect of claim 9 is to generate the candidate image showing the region where the regulated product on the X-ray image is presumed to exist and the reason for the classification based on the parameter and the X-ray image. Inspection equipment.
前記プロセッサは、前記学習用データに基づいて前記パラメータを更新する請求項に記載の検査装置。 The inspection device according to claim 7 , wherein the processor updates the parameters based on the learning data. 前記プロセッサは、オペレータを識別するためのオペレータ識別コードを前記検査結果情報に付加し、
前記プロセッサは、前記学習用データを生成したオペレータごとに、異なる重みで前記パラメータの更新を行う請求項11に記載の検査装置。
The processor adds an operator identification code for identifying the operator to the inspection result information.
The inspection device according to claim 11 , wherein the processor updates the parameters with different weights for each operator who generated the learning data.
前記通信インタフェースは、前記荷物に表示された差出人情報及び受取人情報を取得し、
前記荷物情報は、前記差出人情報及び受取人情報の少なくともどちらかを前記住所氏名情報として含む請求項1に記載の検査装置。
The communication interface acquires the sender information and the recipient information displayed on the baggage, and obtains the sender information and the recipient information.
The inspection device according to claim 1, wherein the baggage information includes at least one of the sender information and the recipient information as the address and name information.
前記通信インタフェースは、差出人情報及び受取人情報を含むEAD情報が予め複数記憶された記憶媒体から、前記荷物から読み取られたEAD識別コードと一致するEAD情報を取得し、
前記荷物情報は、前記差出人情報及び受取人情報の少なくともどちらかを前記住所氏名情報として含む請求項1に記載の検査装置。
The communication interface acquires EAD information that matches the EAD identification code read from the baggage from a storage medium in which a plurality of EAD information including sender information and recipient information is stored in advance.
The inspection device according to claim 1, wherein the baggage information includes at least one of the sender information and the recipient information as the address and name information.
通信インタフェースと、プロセッサとを備える検査装置により実行される検査プログラムであって、
前記検査装置に、
前記通信インタフェースにより、搬送されている荷物を撮像した画像から文字認識処理により取得した住所氏名情報及び前記荷物のX線画像を含む荷物情報と、オペレータによる操作に基づいて生成された操作信号と、を取得することを実行させ、
前記プロセッサにより、前記操作信号に基づいて生成された前記荷物が規制品候補であるか否かを示す検査結果情報と前記住所氏名情報及び前記X線画像とが対応付けられた過去履歴から、新たに搬送された荷物から取得した前記住所氏名情報を含む前記荷物情報に対応する前記検査結果情報を抽出結果として抽出することを実行させ、
前記操作信号に基づいて、オペレータが前記荷物を規制品候補であると判断した理由を示す区分理由を、前記検査結果情報に付加することを実行させ、
前記過去履歴から抽出された、予め設定された区分理由が付加された荷物の数に基づく情報を出力することを実行させる、
検査プログラム。
An inspection program executed by an inspection device including a communication interface and a processor.
In the inspection device
The address and name information acquired by character recognition processing from the image of the transported package by the communication interface, the package information including the X-ray image of the package, the operation signal generated based on the operation by the operator, and the operation signal. To get the execution done,
From the past history in which the inspection result information indicating whether or not the baggage generated based on the operation signal by the processor is a candidate for a regulated product, the address and name information, and the X-ray image are associated with each other. The inspection result information corresponding to the baggage information including the address and name information acquired from the baggage carried to is extracted as an extraction result .
Based on the operation signal, the operator is made to execute the addition of the classification reason indicating the reason for determining the baggage as a regulated product candidate to the inspection result information.
It is executed to output the information based on the number of packages to which the preset classification reason is added, which is extracted from the past history.
Inspection program.
JP2019222830A 2018-09-06 2019-12-10 Inspection equipment and inspection program Active JP6942779B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019222830A JP6942779B2 (en) 2018-09-06 2019-12-10 Inspection equipment and inspection program
JP2021145597A JP7204848B2 (en) 2019-12-10 2021-09-07 Inspection device and inspection program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018166854A JP6632674B1 (en) 2018-09-06 2018-09-06 Inspection device and inspection program
JP2019222830A JP6942779B2 (en) 2018-09-06 2019-12-10 Inspection equipment and inspection program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018166854A Division JP6632674B1 (en) 2018-09-06 2018-09-06 Inspection device and inspection program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021145597A Division JP7204848B2 (en) 2019-12-10 2021-09-07 Inspection device and inspection program

Publications (2)

Publication Number Publication Date
JP2020042860A JP2020042860A (en) 2020-03-19
JP6942779B2 true JP6942779B2 (en) 2021-09-29

Family

ID=69798516

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019222830A Active JP6942779B2 (en) 2018-09-06 2019-12-10 Inspection equipment and inspection program

Country Status (1)

Country Link
JP (1) JP6942779B2 (en)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001306659A (en) * 2000-04-20 2001-11-02 Hitachi Ltd Method and system for security management
US7337686B2 (en) * 2004-09-10 2008-03-04 Qylur Security Systems, Inc. Multi-threat detection system
JP6025849B2 (en) * 2011-09-07 2016-11-16 ラピスカン システムズ、インコーポレイテッド X-ray inspection system that integrates manifest data into imaging / detection processing
CA2981978C (en) * 2015-04-16 2021-02-09 United Parcel Service Of America, Inc. Enhanced multi-layer cargo screening system, computer program product, and method of using the same
JP2018013939A (en) * 2016-07-20 2018-01-25 株式会社東芝 Baggage inspection system and baggage inspection program

Also Published As

Publication number Publication date
JP2020042860A (en) 2020-03-19

Similar Documents

Publication Publication Date Title
CN103052343A (en) A Checkout Counter
EP3273394A1 (en) Package inspection system and package inspection program
JP6193897B2 (en) Information processing apparatus, store system, and program
WO2015115274A1 (en) Object assessment device, image sensor, and object assessment method
WO2017051278A1 (en) System and method for automatic identification of products
CN112346138A (en) X-ray image processing system, method thereof, and recording medium
US20220091296A1 (en) Inspection apparatus and inspection program
US8805011B2 (en) Method and apparatus for examining an item in which an automated evaluation unit undergoes a learning process
JP6942779B2 (en) Inspection equipment and inspection program
JP7219016B2 (en) Determination device, determination method, and object determination program
JP7219023B2 (en) Information processing device and object determination program
US20150070509A1 (en) Sensor information management device and sensor information management method
JP7204848B2 (en) Inspection device and inspection program
JP6632674B1 (en) Inspection device and inspection program
JP6875760B1 (en) Filtering processing system
CN113298453A (en) Data processing method and system and electronic equipment
KR102048948B1 (en) Image analysis apparatus and method
RU2776815C1 (en) Control apparatus and non-temporary recording storage medium storing a control programme
JP6699890B2 (en) Luggage inspection system
JP2015147653A (en) Conveyance order determination device, delivery assorting system, and conveyance order determination method
EP3662424B1 (en) Security system for transit facility
WO2020246255A1 (en) Information management device and information management program
JP6896910B2 (en) Inspection management device
WO2024116537A1 (en) Classification device and storage
US20240190656A1 (en) Article management apparatus, article management method, article management system, and computer-readable storage medium

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191225

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210119

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210316

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210525

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210713

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210810

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210908

R150 Certificate of patent or registration of utility model

Ref document number: 6942779

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150