JP2023021238A - Sorting management device and inspection system - Google Patents

Sorting management device and inspection system Download PDF

Info

Publication number
JP2023021238A
JP2023021238A JP2022194385A JP2022194385A JP2023021238A JP 2023021238 A JP2023021238 A JP 2023021238A JP 2022194385 A JP2022194385 A JP 2022194385A JP 2022194385 A JP2022194385 A JP 2022194385A JP 2023021238 A JP2023021238 A JP 2023021238A
Authority
JP
Japan
Prior art keywords
inspection
information
unit
package
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2022194385A
Other languages
Japanese (ja)
Other versions
JP7395704B2 (en
Inventor
佑介 宇佐美
Yusuke Usami
裕司 栗栖
Yuji Kurusu
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Toshiba Infrastructure Systems and Solutions Corp
Original Assignee
Toshiba Corp
Toshiba Infrastructure Systems and Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2020073672A external-priority patent/JP6896910B2/en
Application filed by Toshiba Corp, Toshiba Infrastructure Systems and Solutions Corp filed Critical Toshiba Corp
Priority to JP2022194385A priority Critical patent/JP7395704B2/en
Publication of JP2023021238A publication Critical patent/JP2023021238A/en
Application granted granted Critical
Publication of JP7395704B2 publication Critical patent/JP7395704B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Sorting Of Articles (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a baggage inspection system that can realize smoother processing.
SOLUTION: A baggage inspection system according to an embodiment has a data management unit, a determination unit, and an output control unit. The data management unit manages a data table in which baggage identification information is associated with baggage recognized information, based on baggage identification information that is a result of image recognition performed on a baggage image captured by an imaging unit, recognized information including at least a content of the baggage and baggage recognized information input by one or more terminal devices to which the baggage image captured by the imaging unit is sent. The determination unit determines whether or not predetermined information necessary for an inspection of the baggage is available among the recognized information, with reference to the data table managed by the data management unit, using the baggage identification information acquired by an acquisition unit provided in front of an inspection device that performs a transparency inspection on the baggage. The output control unit causes an output unit to output notification information when it is determined that the predetermined information is not available.
SELECTED DRAWING: Figure 1
COPYRIGHT: (C)2023,JPO&INPIT

Description

本発明の実施形態は、荷物検査システムに関する。 Embodiments of the present invention relate to package inspection systems.

物流現場や税関など、荷物が通過する施設において、荷物の内容が検査される場合がある。このような施設で用いられるシステムでは、まず、荷物をカメラなどで撮像し、帳票等に記載された情報(差出人、宛先、内容など)をOCR(Optical Character Recognition;光学文字認識)や人の目視などで取得する。そして、荷物に対して更に検査画像(例えばX線透過画像)を取得して、システム側から提供される帳票等に記載された情報と合致するか否かが判断される。このとき、検査画像が取得されるタイミングで帳票等に記載された情報が揃っていない場合、検査現場における処理が停滞する場合があった。 The contents of packages may be inspected at facilities through which packages pass, such as distribution sites and customs. In systems used in such facilities, packages are first imaged with a camera, etc., and the information (sender, destination, content, etc.) written on the form is processed using OCR (Optical Character Recognition) or visually. and so on. Then, an inspection image (for example, an X-ray transmission image) is further acquired for the package, and it is determined whether or not it matches the information described in the form or the like provided by the system. At this time, when the information described in the form or the like is not complete at the timing when the inspection image is acquired, the processing at the inspection site may be delayed.

特開2013-220362号公報JP 2013-220362 A 特開2014-39891号公報JP 2014-39891 A 特開平11-230918号公報JP-A-11-230918

本発明が解決しようとする課題は、より円滑な処理を実現することができる荷物検査システムを提供することである。 A problem to be solved by the present invention is to provide a luggage inspection system capable of realizing smoother processing.

実施形態の荷物検査システムは、データ管理部と、判定部と、出力制御部とを持つ。データ管理部は、撮像部により撮像された荷物の画像に対して行われた画像認識の結果である荷物の識別情報および荷物の内容を少なくとも含む被認識情報と、前記撮像部により撮像された前記荷物の画像が送られた一以上の端末装置において入力された荷物の被認識情報とに基づいて、前記荷物の識別情報に、前記荷物の被認識情報が対応付けられたデータテーブルを管理する。判定部は、前記荷物に対して透過検査を行う検査装置の手前に設けられた識別情報取得部により取得された荷物の識別情報を用いて前記データ管理部により管理されるデータテーブルを参照し、前記被認識情報のうち前記荷物の検査に必要な所定の情報が揃っているか否かを判定する。出力制御部は、前記判定部により前記所定の情報が揃っていないと判定された場合に、通知情報を出力部に出力させる。 The baggage inspection system of the embodiment has a data management section, a determination section, and an output control section. The data management unit stores information to be recognized including at least identification information of the package and the content of the package, which is the result of image recognition performed on the image of the package captured by the imaging unit, and the information captured by the imaging unit. A data table in which the identification information of the package is associated with the information to be recognized of the package is managed based on the information to be recognized of the package input at one or more terminal devices to which the image of the package is sent. The determination unit refers to the data table managed by the data management unit using the identification information of the package acquired by the identification information acquisition unit provided in front of the inspection device that performs the transmission inspection on the package, A determination is made as to whether or not predetermined information necessary for inspection of the package is present among the information to be recognized. The output control unit causes the output unit to output notification information when the determination unit determines that the predetermined information is not complete.

荷物検査システムを含む区分システム1の概要図。1 is a schematic diagram of a sorting system 1 including a luggage inspection system; FIG. 仕分管理装置100の機能構成を示す図。The figure which shows the functional structure of the sorting management apparatus 100. FIG. 荷物情報124として登録される情報の一例を示す図。4 is a diagram showing an example of information registered as package information 124; FIG. 検査管理装置150の機能構成を示す図。The figure which shows the functional structure of the test|inspection management apparatus 150. FIG. 荷物検査システムにより実行される処理を概念的に示す図。FIG. 2 is a diagram conceptually showing the processing executed by the baggage inspection system; 仕分管理装置100により実行される処理の流れを示すフローチャート。4 is a flowchart showing the flow of processing executed by the sorting management device 100; 検査管理装置150により実行される処理の流れを示すフローチャート。4 is a flowchart showing the flow of processing executed by the inspection management apparatus 150; 検査判定用端末装置200の表示部に表示された画像IMの一例を示す図。FIG. 4 is a diagram showing an example of an image IM displayed on the display section of the terminal device for examination determination 200; 開梱検査用端末装置22の表示部に表示された、統計部162の処理結果を示す画像の一例を示す図。FIG. 10 is a diagram showing an example of an image showing the processing result of the statistics section 162 displayed on the display section of the unpacking inspection terminal device 22; 荷物検査システムを含む区分システム1Aの構成図。1 is a configuration diagram of a sorting system 1A including a baggage inspection system; FIG. 第2の実施形態の仕分管理装置100により実行される処理の流れを示すフローチャート。6 is a flow chart showing the flow of processing executed by the sorting management device 100 of the second embodiment. 第3の実施形態の検査ユニット10Aの構成図。The block diagram of inspection unit 10A of 3rd Embodiment. 第3の実施形態の検査管理装置150Bの機能構成を示す図。The figure which shows the functional structure of the test|inspection management apparatus 150B of 3rd Embodiment. 第3の実施形態の検査管理装置150により実行される処理の流れを示すフローチャート。10 is a flow chart showing the flow of processing executed by the inspection management apparatus 150 of the third embodiment;

以下、実施形態の荷物検査システムを、図面を参照して説明する。荷物検査システムは、荷物を検査する際に、検査に従事する者(検査者やオペレータ等)を補助するシステムである。実施形態の荷物検査システムは、税関に設けられるものとして説明する。 A luggage inspection system according to an embodiment will be described below with reference to the drawings. A baggage inspection system is a system that assists a person engaged in inspection (inspector, operator, etc.) when inspecting baggage. The baggage inspection system of the embodiment will be described as being provided at a customs office.

(第1の実施形態)
図1は、荷物検査システムを含む区分システム1の概要図である。区分システムは、例えば、検査ユニット10と、仕分ユニット30と、二以上のカメラ50-1および50-2と、重量センサ60と、一以上のVCD70-1から70-k(「k」は、任意の自然数)と、仕分管理装置100と、検査管理装置150と、検査判定用端末装置200とを備える。仕分管理装置100と、検査管理装置150とを合わせたものは、荷物検査システムの一例である。以下、カメラ50-1と、50-2とを区別しない場合は、単にカメラ50と称する。また、VCD70-1からVCD70-kを他のVCDと区別しない場合は、単にVCD70と称する。検査判定用端末装置200は、「出力部」の一例である。
(First embodiment)
FIG. 1 is a schematic diagram of a sorting system 1 including a baggage inspection system. The sorting system includes, for example, an inspection unit 10, a sorting unit 30, two or more cameras 50-1 and 50-2, a weight sensor 60, and one or more VCDs 70-1 to 70-k (where "k" is an arbitrary natural number), a sorting management device 100, an inspection management device 150, and an inspection judgment terminal device 200. A combination of the sorting management device 100 and the inspection management device 150 is an example of a parcel inspection system. Hereinafter, the cameras 50-1 and 50-2 are simply referred to as the camera 50 when not distinguished from each other. VCD70-1 to VCD70-k are simply referred to as VCD70 when they are not distinguished from other VCDs. The test determination terminal device 200 is an example of an “output unit”.

検査ユニット10と、仕分ユニット30と、カメラ50と、重量センサ60と、VCD70と、仕分管理装置100と、検査管理装置150と、検査判定用端末装置200とは、LAN(Local Area Network)やWAN(Wide Area Network)、セルラー通信網、インターネット等のネットワークNWを介して通信する。 The inspection unit 10, the sorting unit 30, the camera 50, the weight sensor 60, the VCD 70, the sorting management device 100, the inspection management device 150, and the inspection judgment terminal device 200 are connected to a LAN (Local Area Network), Communication is performed via a network NW such as a WAN (Wide Area Network), a cellular communication network, or the Internet.

荷物は、カメラ50により撮像されると共に、重量センサ60で重量が測定された後に、検査ユニット10に搬入され、検査ユニット10において検査がなされる。次に、荷物Pは、仕分ユニット30に搬入されて、宛先に応じて区分される。 After being photographed by the camera 50 and having its weight measured by the weight sensor 60, the baggage is carried into the inspection unit 10 and inspected by the inspection unit 10. FIG. Next, the parcels P are brought into the sorting unit 30 and sorted according to their destinations.

まず、カメラ50、および重量センサ60について説明する。カメラ50は、荷物Pを撮像し、撮像した画像(第1画像)および撮像時刻を互いに対応付けて仕分管理装置100に送信する。図1では、二つのカメラ50を図示しているが、例えば6つのカメラ50を備え、荷物Pの各面が撮像された画像を取得してもよい。この場合、カメラ50は、荷物Pの底面を、荷物Pが載せられる台や機構の隙間から撮像する。 First, camera 50 and weight sensor 60 will be described. The camera 50 captures an image of the package P, associates the captured image (first image) with the image capturing time, and transmits the image to the sorting management device 100 . Although two cameras 50 are illustrated in FIG. 1, for example, six cameras 50 may be provided to obtain an image of each surface of the baggage P. FIG. In this case, the camera 50 captures an image of the bottom surface of the package P from the gap between the table on which the package P is placed and the mechanism.

重量センサ60は、荷物Pの重量を測定し、測定結果を仕分管理装置100に送信する。 The weight sensor 60 measures the weight of the package P and transmits the measurement result to the sorting management device 100 .

カメラ50および重量センサ60が、配置される場所については特段の制限はないが、カメラ50および重量センサ60は、例えば、同じ場所にある荷物Pを撮像および重量測定可能な位置に設けられる。オペレータが所定のボタンを操作すると、カメラ50が荷物Pを撮像すると共に、重量センサ60が荷物Pの重量を測定する。カメラ50により荷物Pの画像が撮像され、且つ重量センサ60により荷物Pの重量が測定されると、その荷物Pは、検査ユニット10に運ばれる。 Although there is no particular restriction on the locations where the camera 50 and the weight sensor 60 are arranged, the camera 50 and the weight sensor 60 are provided at positions where, for example, the baggage P in the same location can be imaged and weighed. When the operator operates a predetermined button, the camera 50 takes an image of the package P and the weight sensor 60 measures the weight of the package P. After the image of the package P is captured by the camera 50 and the weight of the package P is measured by the weight sensor 60 , the package P is transported to the inspection unit 10 .

検査ユニット10は、例えば、主搬送部12と、開梱検査用搬送部14と、コードリーダユニット16と、検査装置18と、分岐機構20と、開梱検査用端末装置22を備える。主搬送部12は、荷物を仕分ユニット30の投入部32付近に搬送する。主搬送部12は、例えば搬送ベルト、駆動プーリ、および駆動モータを含む。駆動プーリは、駆動モータの駆動により送信される駆動力により回転する。搬送ベルトは、駆動プーリの回転力により駆動されて荷物Pを搬送する。駆動モータは、検査管理装置150の制御に基づいて、搬送ベルトに作用させる搬送力を制御する。 The inspection unit 10 includes, for example, a main transport section 12 , an unpacking inspection transport section 14 , a code reader unit 16 , an inspection device 18 , a branching mechanism 20 , and an unpacking inspection terminal device 22 . The main transport section 12 transports packages to the vicinity of the loading section 32 of the sorting unit 30 . The main transport section 12 includes, for example, a transport belt, drive pulleys, and a drive motor. The drive pulley is rotated by the driving force transmitted by driving the drive motor. The conveyor belt conveys the load P by being driven by the rotational force of the drive pulley. The drive motor controls the conveying force acting on the conveying belt under the control of the inspection management device 150 .

主搬送部12には、荷物Pの流れに関して上流側から順に、コードリーダユニット16、検査装置18、および分岐機構20が設けられている。また、主搬送部12には、荷物Pを検知する複数の検知センサ(不図示)が、所定の間隔で設けている。検知センサは、例えば、赤外線センサや、光センサ等で実現される。コードリーダユニット16は、バーコードやQRコード(登録商標)を読み取るコード読み取り部、ユーザの入力操作を受け付ける操作部、情報を表示する表示部、ネットワークNWに接続するためのネットワーク通信部等を備える。 The main transport section 12 is provided with a code reader unit 16, an inspection device 18, and a branching mechanism 20 in order from the upstream side with respect to the flow of the packages P. As shown in FIG. In addition, a plurality of detection sensors (not shown) for detecting packages P are provided at predetermined intervals in the main transport section 12 . The detection sensor is implemented by, for example, an infrared sensor, an optical sensor, or the like. The code reader unit 16 includes a code reading unit that reads bar codes and QR codes (registered trademark), an operation unit that accepts user input operations, a display unit that displays information, a network communication unit for connecting to a network NW, and the like. .

コード読取部は、例えばバーコードやQRコードに対して光を照射し、照射した光の反射光を受光する。コード読取部は、受光結果を電子情報に変換する。操作部は、例えば、ボタン、キーボード、マウス、マイク、タッチパネル等のユーザインターフェースである。表示部は、例えば、LCD(Liquid Crystal Display)や有機EL(Electroluminescence)ディスプレイなどの表示装置を含む。 The code reading unit irradiates, for example, a bar code or a QR code with light and receives reflected light of the irradiated light. The code reader converts the received light result into electronic information. The operation unit is, for example, a user interface such as a button, keyboard, mouse, microphone, touch panel, or the like. The display unit includes, for example, a display device such as an LCD (Liquid Crystal Display) or an organic EL (Electroluminescence) display.

コードリーダユニット16は、表示部に代えて、または表示部に加えて、音声を出力するスピーカや、ライトの点灯や消灯により情報を示す情報出力部等を備えてもよい。表示部、スピーカ、またはライトは、「出力部」の他の一例である。なお、これらの出力部は、コードリーダユニット16とは別体であってもよい。コードリーダユニット16から、操作部、および表示部のうち、一方または双方は省略されてもよい。 The code reader unit 16 may include a speaker for outputting sound, an information output section for indicating information by turning on or off a light, or the like, instead of or in addition to the display section. A display, speaker, or light are other examples of an "output." Note that these output units may be separate from the code reader unit 16 . One or both of the operation section and the display section may be omitted from the code reader unit 16 .

開梱検査用搬送部14は、主搬送路12および分岐機構20と連結している。開梱検査用搬送部14は、検査管理装置150の制御に基づいて、検査が必要とされる荷物を所定の領域に搬送する。 The unpacking inspection transport section 14 is connected to the main transport path 12 and the branching mechanism 20 . Under the control of the inspection management device 150, the unpacking inspection transport unit 14 transports packages that require inspection to a predetermined area.

検査装置18は、透過検査を行う装置である。検査装置18は、例えば、検知部と、放射線照射部と、変換処理部とを備える。検知部は、例えば赤外線センサや、光センサなどで実現され、荷物Pが対象の位置にあることを検知する。対象の位置は、放射線照射部が放射線を照射する領域である。放射線照射部は、検査対象物(荷物P)に対して透過性の放射線(例えばX線)を照射する。変換処理部は、例えばイメージインテンシファイアーを含む。変換処理部は、検査対象物を透過したX線を検出し、検出したX線の強度を増幅させて、増幅させた像から可視光像を生成する。変換処理部は、生成した可視光像を含む透過画像(以下、第2画像)を、画像が生成した時刻に対応付けて検査管理装置150などに送信する。 The inspection device 18 is a device that performs transmission inspection. The inspection device 18 includes, for example, a detection unit, a radiation irradiation unit, and a conversion processing unit. The detection unit is implemented by, for example, an infrared sensor, an optical sensor, or the like, and detects that the package P is at the target position. The position of the target is the area where the radiation irradiating unit irradiates radiation. The radiation irradiator irradiates the object to be inspected (parcel P) with penetrating radiation (for example, X-rays). The transformation processor includes, for example, an image intensifier. The conversion processor detects X-rays that have passed through the inspection object, amplifies the intensity of the detected X-rays, and generates a visible light image from the amplified image. The conversion processing unit transmits a transmission image (hereinafter referred to as a second image) including the generated visible light image to the inspection management apparatus 150 or the like in association with the time when the image was generated.

分岐機構20は、主搬送部12と、開梱検査用搬送部14が連結される箇所に設けられる。分岐機構20は、検査装置18を通過した荷物Pであって、目視による検査が必要とされる荷物Pを開梱検査用搬送部14に向けて搬送する。開梱検査用搬送部14に搬入された荷物Pは、検査者によって開梱される。検査者は、開梱した荷物Pを検査して、例えば、検査結果を開梱検査用端末装置22の操作部に入力操作する。開梱検査用端末装置22は、入力操作された検査結果を、ネットワークNWを介して、仕分管理装置100などに送信する。開梱検査用端末装置22は、「出力部」の他の一例である。 The branching mechanism 20 is provided at a location where the main transport section 12 and the unpacking inspection transport section 14 are connected. The branching mechanism 20 conveys the packages P that have passed through the inspection device 18 and that require visual inspection toward the unpacking inspection transport section 14 . The package P carried into the unpacking inspection transport unit 14 is unpacked by an inspector. The inspector inspects the unpacked package P and, for example, inputs the inspection result into the operation unit of the unpacking inspection terminal device 22 . The terminal device for unpacking inspection 22 transmits the input-operated inspection result to the sorting management device 100 or the like via the network NW. The unpacking inspection terminal device 22 is another example of the “output unit”.

仕分ユニット30は、例えば、投入部32と、周回搬送部34と、複数のシュータ(区分部)36と、複数の分岐機構38と、コードリーダ40とを備える。投入部32は、周回搬送部34に連結されている。投入部32は、オペレータにより投入された荷物Pを周回搬送部34に搬出する。投入部32は、周回搬送部34の方向に駆動される搬送ベルトを備え、この搬送ベルトが駆動されることで、投入された荷物Pを周回搬送部34に搬出する。 The sorting unit 30 includes, for example, an input section 32 , a revolving transport section 34 , a plurality of chuters (sorting sections) 36 , a plurality of branching mechanisms 38 and a code reader 40 . The loading section 32 is connected to the revolving conveying section 34 . The loading unit 32 carries out the load P loaded by the operator to the circulating transport unit 34 . The loading unit 32 includes a conveyor belt that is driven in the direction of the revolving conveying unit 34 , and the loaded baggage P is carried out to the revolving conveying unit 34 by driving the conveying belt.

周回搬送部34は、周回(循環)する経路を形成し、荷物Pを経路上で搬送する。周回搬送部34は、例えば搬送ベルト、駆動プーリ、および駆動モータを含む。周回搬送部34の周回経路には、複数のシュータ36が連結されている。シュータ36は、周回搬送部34から荷物Pの集積箇所(不図示)に向けて荷物Pが滑り落ちる勾配を有している。周回搬送部34と、シュータ36とが連結される箇所には、分岐機構38が設けられる。分岐機構38は、仕分管理装置100の制御に基づいて、荷物Pをシュータ36に搬出する。なお、周回搬送部34において、荷物Pは、1つずつ台座に載せられて搬送され、台座に設けられたベルトがシュータ36の方向に回転することで、荷物Pはシュータ36に向けて搬送されてもよい。 The circulating transport unit 34 forms a circulating (circulating) route and transports the load P on the route. The revolving transport section 34 includes, for example, a transport belt, a drive pulley, and a drive motor. A plurality of chuters 36 are connected to the circulating path of the circulating transport section 34 . The chute 36 has a slope at which the packages P slide down from the circulating transport section 34 toward a stacking location (not shown) of the packages P. As shown in FIG. A branching mechanism 38 is provided at a location where the revolving transport section 34 and the shooter 36 are connected. The branching mechanism 38 carries out the packages P to the chute 36 under the control of the sorting management device 100 . In the revolving conveying section 34, the packages P are conveyed one by one on the pedestal, and the belt provided on the pedestal rotates in the direction of the shooter 36, whereby the packages P are conveyed toward the shooter 36. may

分岐機構38は、シュータ36の方向に駆動される搬送ベルトを備え、この搬送ベルトが駆動されることで、周回搬送部34に存在する荷物Pをシュータ36に搬出する。分岐機構38によりシュータ36に搬出された荷物Pは、シュータ36の勾配を滑り落ちて集積箇所に移動する。集積箇所には、シュータ36を滑り落ちた荷物Pが、一時的に置かれる。オペレータは、一時的に置かれた荷物Pを、荷物Pの搬送先に応じて運搬する。 The branching mechanism 38 includes a conveyor belt that is driven in the direction of the shooter 36 , and by driving the conveyor belt, the cargo P existing in the revolving conveyor section 34 is carried out to the shooter 36 . The cargo P carried out to the chute 36 by the branching mechanism 38 slides down the slope of the chute 36 and moves to the collection point. The baggage P that has slid down the chute 36 is temporarily placed at the accumulation location. The operator transports the temporarily placed package P according to the transport destination of the package P.

コードリーダ40は、投入部32と、投入部32から周回搬送部34に搬出された荷物Pが最初に到達する分岐機構38との間に設けられる。コードリーダ40は、バーコードやQRコードを読み取るコード読取部、ネットワークNWに接続するためのネットワーク通信部等を備える。コードリーダ40は、コード読取部により読み取られた情報を仕分管理装置100に送信する。 The code reader 40 is provided between the loading section 32 and the branching mechanism 38 where the cargo P carried out from the loading section 32 to the revolving transportation section 34 first reaches. The code reader 40 includes a code reading unit for reading bar codes and QR codes, a network communication unit for connecting to the network NW, and the like. The code reader 40 transmits information read by the code reading section to the sorting management device 100 .

図2は、仕分管理装置100の機能構成を示す図である。仕分管理装置100は、例えば、通信インターフェース102と、搬送制御部104と、位置特定部106と、画像認識部108と、住所特定部110と、データ管理部112と、記憶部120とを備える。
搬送制御部104、位置特定部106、画像認識部108、住所特定部110、およびデータ管理部112のうち一部または全部は、CPU(Central Processing Unit)等のプロセッサがプログラムを実行することにより実現されてよい。また、これらの機能部のうち、一部または全部は、LSI(Large Scale Integration)、ASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)等のハードウェアによって実現されてもよい。記憶部120は、例えば、RAM(Random Acces s Memory)やROM(Read Only Memory)、HDD(Hard Disk Drive)、フラッシュメモリ等の記憶装置により実現される。
FIG. 2 is a diagram showing the functional configuration of the sorting management device 100. As shown in FIG. The sorting management device 100 includes, for example, a communication interface 102, a transportation control section 104, a position identification section 106, an image recognition section 108, an address identification section 110, a data management section 112, and a storage section 120.
Some or all of the transport control unit 104, the position specifying unit 106, the image recognition unit 108, the address specifying unit 110, and the data management unit 112 are implemented by a processor such as a CPU (Central Processing Unit) executing a program. may be Some or all of these functional units may be realized by hardware such as LSI (Large Scale Integration), ASIC (Application Specific Integrated Circuit), FPGA (Field-Programmable Gate Array), and the like. The storage unit 120 is implemented by a storage device such as a RAM (Random Access Memory), ROM (Read Only Memory), HDD (Hard Disk Drive), flash memory, or the like.

通信インターフェース102は、ネットワークNWに接続され、ネットワークNWに接続された機器や装置等と通信する。 The communication interface 102 is connected to the network NW and communicates with devices, devices, etc. connected to the network NW.

搬送制御部104は、周回搬送部34に含まれる駆動モータおよび搬送ベルトを制御して、荷物Pが搬送される速度を調整する。搬送制御部104は、位置特定部106により特定された荷物Pの位置、および、コードリーダにより取得された荷物Pの識別情報、データ管理部112により取得された荷物Pの宛先情報に基づいて、宛先情報に対応するシュータ36に荷物Pを搬出するように、いずれかの分岐機構38を制御する。 The transport control unit 104 controls the drive motor and the transport belt included in the revolving transport unit 34 to adjust the speed at which the load P is transported. Based on the position of the package P specified by the position specifying unit 106, the identification information of the package P acquired by the code reader, and the destination information of the package P acquired by the data management unit 112, the transport control unit 104 Any branching mechanism 38 is controlled so that the parcel P is carried out to the chute 36 corresponding to the destination information.

位置特定部106は、例えば、周回搬送部34の搬送ベルトが荷物Pを搬送する速度と、コードリーダ40により荷物Pが検知された時刻とに基づいて、荷物Pの位置を特定する。 The position specifying unit 106 specifies the position of the package P based on, for example, the speed at which the carrier belt of the circulating transport unit 34 conveys the package P and the time when the package P is detected by the code reader 40 .

画像認識部108は、OCR処理を行う機能を有する。画像認識部108は、カメラ50により撮像された画像に基づいて、荷物Pに付与された住所情報や、各種情報(文字や、数字、記号等)を認識する。 The image recognition unit 108 has a function of performing OCR processing. The image recognition unit 108 recognizes the address information given to the package P and various information (characters, numbers, symbols, etc.) based on the image captured by the camera 50 .

住所特定部110は、画像認識部108により荷物Pに付与された住所情報の一部、または全部が認識された場合、認識された住所情報を用いて、記憶部120に記憶された住所データベース126を検索し、検索によって得られた情報に基づいて、荷物Pに付与された住所情報を特定する。 When part or all of the address information given to the package P is recognized by the image recognition unit 108, the address identification unit 110 uses the recognized address information to identify the address database 126 stored in the storage unit 120. is searched, and the address information given to the package P is specified based on the information obtained by the search.

住所特定部110は、例えば、住所データベース126に格納された住所情報と、画像認識部108により認識された住所情報とが所定の度合以上、合致しており、且つ、他に所定の度合以上、合致する住所情報が住所データベース126に格納されていない場合、認識した住所情報を荷物Pの住所情報であると特定する。また、住所特定部110は、例えば、画像認識部108により認識された情報と所定の度合以上、合致している住所データベース126に格納された住所情報が、複数存在している場合、複数の住所情報を住所候補として特定する。 The address identification unit 110, for example, matches the address information stored in the address database 126 with the address information recognized by the image recognition unit 108 to a predetermined degree or more, If no matching address information is stored in the address database 126, the recognized address information is identified as the address information of the package P. FIG. For example, if there are multiple pieces of address information stored in the address database 126 that match the information recognized by the image recognition unit 108 by a predetermined degree or more, the address identification unit 110 identifies multiple addresses. Identifies information as an address candidate.

データ管理部112は、カメラ50により撮像された荷物の画像に対して行われた画像認識の結果である荷物の識別情報および荷物Pの内容を少なくとも含む被認識情報(後述)と、カメラ50により撮像された荷物Pの画像が送られた一以上の端末装置VCD70において入力された荷物の被認識情報とに基づいて、荷物Pの識別情報に、荷物Pの被認識情報が対応付けられた荷物情報124を管理する。データ管理部112は、荷物に対する検査結果を記憶部120に格納する。 The data management unit 112 stores information to be recognized (described later) including at least the identification information of the package and the content of the package P, which is the result of image recognition performed on the image of the package captured by the camera 50, and the A package in which the identification information of the package P is associated with the information to be recognized of the package P based on the information to be recognized of the package input in one or more terminal devices VCD70 to which the captured image of the package P was sent. manage information 124; The data management unit 112 stores inspection results for the package in the storage unit 120 .

データ管理部112は、画像認識部108および住所特定部110により荷物Pの住所情報を含む必要な情報が特定されなかった場合、カメラ50により撮像された画像と、画像認識部108および住所特定部110により実行された処理結果とをVCD70に送信する。データ管理部112は、荷物Pの画像のみをVCD70に送信してもよい。 If the image recognition unit 108 and the address identification unit 110 do not identify the necessary information including the address information of the parcel P, the data management unit 112 stores the image captured by the camera 50, the image recognition unit 108 and the address identification unit 110 together. 110 to the VCD 70. Data management unit 112 may transmit only the image of parcel P to VCD 70 .

記憶部120には、第1画像データ122、荷物情報124、および住所データベース126が記憶される。第1画像データ122は、カメラ50により撮像された荷物Pの画像の集合である。この画像は、荷物Pの識別情報に対応付けられて記憶される。 Storage unit 120 stores first image data 122 , parcel information 124 , and address database 126 . The first image data 122 is a set of images of the package P captured by the camera 50 . This image is associated with the identification information of the package P and stored.

荷物情報124は、画像認識部108のOCRによって得られる情報、またはVCD70から送信された情報である。図3は、荷物情報124として登録される情報の一例を示す図である。荷物情報124は、荷物Pに付与された識別情報に対して、重量センサ60により測定された荷物Pの重量、以下に説明する被認識情報、検査装置18により取得された情報(第2画像および識別情報)や、検査判定用端末装置200から送信された情報、開梱検査用端末装置22から送信された情報等が対応付けられた情報である。 Package information 124 is information obtained by OCR of image recognition unit 108 or information transmitted from VCD 70 . FIG. 3 is a diagram showing an example of information registered as the package information 124. As shown in FIG. The package information 124 is the identification information given to the package P, the weight of the package P measured by the weight sensor 60, the information to be recognized described below, and the information acquired by the inspection device 18 (second image and identification information), information transmitted from the inspection determination terminal device 200, information transmitted from the unpacking inspection terminal device 22, etc. are associated with each other.

被認識情報は、少なくとも荷物Pの内容を示す内容情報を含み、その他、荷物Pの宛先住所や、宛先氏名、宛先の電話番号、差出人住所、差出人氏名、検査管理装置150から送信された情報等、荷物Pを検査する上で検査者が必要と考える任意の情報を含む。内容情報は、荷物Pに付与された帳票F等に記載された荷物Pの内容を示す情報であって、例えば、荷物Pの重量や、物品名、物品の金額、物品の数量等を含む。内容情報は、例えば荷物Pの差出人によって申告された情報である。検査判定用端末装置200から送信された情報は、例えば検査者が、検査判定用端末装置200の表示部に表された第2画像と、被認識情報(または内容情報)とを比較した結果を示す情報である。開梱検査用端末装置22から送信された情報は、例えば、検査者により荷物Pが開梱され、荷物Pが検査された結果(検査結果の一例)を示す情報である。 The information to be recognized includes at least content information indicating the contents of the package P, and also includes the destination address of the package P, the name of the destination, the telephone number of the destination, the address of the sender, the name of the sender, information transmitted from the inspection management device 150, and the like. , contains any information that the inspector deems necessary in inspecting the package P. The content information is information indicating the content of the package P described in the form F attached to the package P, and includes, for example, the weight of the package P, the name of the item, the price of the item, the quantity of the item, and the like. The content information is information declared by the sender of the package P, for example. The information transmitted from the test determination terminal device 200 is, for example, the result of the inspector comparing the second image displayed on the display unit of the test determination terminal device 200 with the information to be recognized (or content information). This is the information shown. The information transmitted from the unpacking inspection terminal device 22 is, for example, information indicating a result (an example of an inspection result) of an inspector unpacking the package P and inspecting the package P.

VCD70は、ネットワークNWを介して、仕分管理装置100と通信する。VCD70は、仕分管理装置100から送信された情報であって、荷物Pの画像を含むビデオコーディング用の情報(コーディングデータ)を受信する。仕分管理装置100から送信されるコーディングデータは、仕分管理装置100の画像認識部108によって被認識情報が取得することができなかった場合にVCD70に送信される。また、仕分管理装置100の画像認識部108によって荷物Pの画像から住所情報の一部や、その他の情報の一部等が認識された場合、コーディングデータには、それらの一部の情報が含まれてもよい。また、コーディングデータには、住所特定部110が複数の住所候補から住所を絞り込めなかった場合、その複数の住所候補の情報が含まれてよい。 The VCD 70 communicates with the sorting management device 100 via the network NW. The VCD 70 receives information (coding data) for video coding, which is information transmitted from the sorting management device 100 and includes an image of the parcel P. FIG. The coding data transmitted from the sorting management device 100 is transmitted to the VCD 70 when the image recognition unit 108 of the sorting management device 100 cannot acquire the recognition information. Further, when the image recognition unit 108 of the sorting management device 100 recognizes part of the address information or part of other information from the image of the parcel P, the coding data includes the part of the information. may be Moreover, when the address identification unit 110 cannot narrow down the address from a plurality of address candidates, the coding data may include information on the plurality of address candidates.

VCD70は、ビデオコーディング用の表示部と,オペレータが情報を入力操作する操作部と、各種処理を実行する処理部とを備える。オペレータは、表示部に表示された情報に基づいて、荷物Pに関する情報を操作部に入力操作する。VCD70の表示部には、例えば、荷物Pの画像、および仕分管理装置100によって認識された情報が互いに対応付けられて表示される。操作部は、ボタン、キーボード、マウス、マイク、タッチパネル等のユーザインターフェースである。 The VCD 70 includes a display section for video coding, an operation section for an operator to input information, and a processing section for executing various processes. Based on the information displayed on the display unit, the operator inputs information on the package P to the operation unit. For example, the image of the package P and the information recognized by the sorting management device 100 are displayed in association with each other on the display section of the VCD 70 . The operation unit is a user interface such as buttons, keyboard, mouse, microphone, and touch panel.

処理部は、操作部に入力操作された情報に基づいて、次に入力操作されると予測される情報の候補を導出し、導出した候補を表示部に表示させる。処理部は、予め設定された辞書や、過去に入力操作された情報等に基づいて、次に入力操作されると予測される情報の候補を導出する。オペレータは、カメラ50により撮像された画像を参照して、表示部には表示された複数の候補の中から、荷物Pに付与された情報を選択することで、入力操作を容易、且つ迅速に行うことができる。 The processing unit derives candidates for information predicted to be input next, based on the information input to the operation unit, and causes the display unit to display the derived candidates. The processing unit derives information candidates predicted to be input next, based on a preset dictionary, information on past input operations, and the like. The operator refers to the image captured by the camera 50 and selects the information given to the package P from among the plurality of candidates displayed on the display unit, thereby facilitating and speeding up the input operation. It can be carried out.

複数のVCD70には、例えば、それぞれ役割が定められてよい。例えば、VCD70-1のオペレータには、荷物Pの宛先住所を示す情報を入力する役割が与えられ、VCD70-2のオペレータには、荷物Pの宛先氏名を示す情報が入力する役割が与えられ、VCD70-3のオペレータには、荷物Pの内容を示す内容情報が入力する役割が与えられる。 A role may be defined for each of the plurality of VCDs 70, for example. For example, the operator of the VCD 70-1 is given the role of inputting information indicating the destination address of the package P, and the operator of the VCD 70-2 is given the role of inputting information indicating the destination name of the package P. The operator of the VCD 70-3 is given the role of inputting content information indicating the content of the parcel P. FIG.

図4は、検査管理装置150の機能構成を示す図である。検査管理装置150は、例えば、通信インターフェース152と、搬送制御部154と、位置特定部156と、管理部158と、判定部160と、統計部162と、出力制御部164と、記憶部170とを備える。搬送制御部154と、位置特定部156と、管理部158と、判定部160と、統計部162と、出力制御部164とのうち、一部または全部はCPU等のプロセッサがプログラムを実行することにより実現されてよい。また、これらの機能部のうち、一部または全部は、LSI、ASIC、FPGA等のハードウェアによって実現されてもよい。記憶部170は、例えば、RAMやROM、HDD、フラッシュメモリ等の記憶装置により実現される。仕分管理装置100と検査管理装置150は、統合された一つのコンピュータであってもよいし、更に分散化された複数のコンピュータにより実現されてもよい。 FIG. 4 is a diagram showing the functional configuration of the inspection management apparatus 150. As shown in FIG. The inspection management apparatus 150 includes, for example, a communication interface 152, a transport control unit 154, a position specifying unit 156, a management unit 158, a determination unit 160, a statistics unit 162, an output control unit 164, and a storage unit 170. Prepare. A processor such as a CPU executes a program for part or all of the transport control unit 154, the position specifying unit 156, the management unit 158, the determination unit 160, the statistics unit 162, and the output control unit 164. may be realized by Moreover, some or all of these functional units may be realized by hardware such as LSI, ASIC, and FPGA. The storage unit 170 is realized by a storage device such as RAM, ROM, HDD, flash memory, or the like. The sorting management device 100 and the inspection management device 150 may be one integrated computer, or may be realized by a plurality of distributed computers.

搬送制御部154は、主搬送部12および開梱検査用搬送部14に含まれる駆動モータおよび搬送ベルトを制御して、荷物Pが搬送される速度を調整する。また、搬送制御部154は、管理部158および検査装置18から取得した情報に基づいて、分岐機構20を制御する。搬送制御部154は、判定部160の判定の結果に基づいて、対象の荷物Pが分岐機構20に到達した場合に、分岐機構20を制御して、対象の荷物Pを開梱検査用搬送部14に搬出させる。 The transport control unit 154 controls the drive motors and transport belts included in the main transport unit 12 and the unpacking inspection transport unit 14 to adjust the speed at which the load P is transported. The transport control unit 154 also controls the branching mechanism 20 based on information acquired from the management unit 158 and the inspection device 18 . When the target package P reaches the branching mechanism 20 based on the determination result of the determining unit 160, the transport control unit 154 controls the branching mechanism 20 to transfer the target package P to the unpacking inspection transport unit. 14 to carry out.

位置特定部156は、例えば主搬送部12の搬送ベルトが荷物Pを搬送する速度と、検査装置18または主搬送路12に設けられた検知センサにより荷物Pが検知されたタイミングとに基づいて、荷物Pの位置を特定する。 The position specifying unit 156, for example, based on the speed at which the conveyor belt of the main transport unit 12 conveys the load P and the timing at which the load P is detected by the inspection device 18 or the detection sensor provided in the main transport path 12, Identify the position of the package P.

管理部158は、コードリーダユニット16から取得した情報(スキャン情報)、および検査装置18から取得した情報を記憶部170に記憶させたり、通信インターフェースを用いて、記憶部170に記憶された情報を送信したりする。 The management unit 158 causes the storage unit 170 to store information (scan information) acquired from the code reader unit 16 and information acquired from the inspection device 18, and uses a communication interface to store information stored in the storage unit 170. or send.

判定部160は、荷物Pに対して透過検査を行う検査装置18の手前に設けられたコードリーダユニット16により取得された荷物Pの識別情報を用いて仕分管理装置100のデータ管理部112により管理される荷物情報124を参照し、被認識情報のうち荷物の検査に必要な所定の情報が揃っているか否かを判定する。 The determination unit 160 manages the data management unit 112 of the sorting management device 100 using the identification information of the package P acquired by the code reader unit 16 provided in front of the inspection device 18 that performs the transparent inspection of the package P. With reference to the package information 124, it is determined whether or not predetermined information necessary for inspection of the package is included in the information to be recognized.

検査官の検査に必要な所定の情報は、差出人によって申告された情報であって、検査装置18により取得された画像から認識される情報と比較の対象となる情報である。検査官の検査に必要な所定の情報は、例えば、重量センサ60により測定された荷物Pの重量、差出人に申告された荷物Pの重量、荷物Pの物品名、荷物Pの金額、荷物Pの数量、荷物Pの宛先住所、宛先氏名、宛先の電話番号、差出人住所、差出人氏名のうち、一部または全部である。検査に必要な所定の情報は、少なくとも差出人に申告された荷物Pの重量、荷物Pの物品名、荷物Pの金額、荷物Pの数量のうち、一部が含まれていることが好ましい。検査に必要な所定の情報に、差出人に申告された荷物Pの重量が含まれる場合、重量センサ60により測定された荷物Pの重量が検査に必要な所定の情報が含まれる。 The predetermined information necessary for the inspection by the inspector is information declared by the sender, and is information to be compared with information recognized from the image acquired by the inspection device 18 . Predetermined information necessary for inspection by the inspector includes, for example, the weight of the package P measured by the weight sensor 60, the weight of the package P declared by the sender, the item name of the package P, the amount of the package P, the amount of the package P, and the weight of the package P. It is part or all of the quantity, the destination address of the package P, the name of the destination, the telephone number of the destination, the address of the sender, and the name of the sender. The predetermined information necessary for inspection preferably includes at least a part of the weight of the package P, the name of the item of the package P, the amount of the package P, and the quantity of the package P declared to the sender. If the predetermined information required for inspection includes the weight of the package P declared by the sender, the predetermined information required for inspection includes the weight of the package P measured by the weight sensor 60 .

統計部162は、荷物Pに対して透過検査を行う検査装置18による検査結果であって荷物Pの識別情報に対応付けられた検査結果を取得し、仕分管理装置100のデータ管理部112により管理される荷物情報124において識別情報に対応付けられた荷物Pの内容と検査結果とが合致しなかった差出人を抽出して抽出履歴を蓄積し、荷物Pの内容と検査結果とが合致しなかった回数または頻度が予め定められた閾値を超えた差出人に関する情報を導出する。差出人に関する情報は、荷物Pの内容と検査結果とが合致しなかった回数や、頻度、差出人の氏名、住所、差出人が過去に差し出した荷物の内容情報、開梱検査が行われた回数などの情報である。 The statistical unit 162 acquires the inspection result associated with the identification information of the package P, which is the inspection result of the inspection device 18 that performs a transparent inspection on the package P, and manages it by the data management unit 112 of the sorting management device 100. In the package information 124, the contents of the package P associated with the identification information and the inspection result do not match are extracted, the extraction history is accumulated, and the contents of the package P and the inspection result do not match. Deriving information about senders whose number or frequency exceeds a predetermined threshold. The information on the sender includes the number of times the contents of the parcel P did not match the inspection results, the frequency, the name and address of the sender, information on the contents of parcels sent by the sender in the past, and the number of times the unpacking inspection was performed. Information.

なお、閾値は任意に設定されてよい。例えば、閾値は、開梱検査用端末装置22に対して所定の入力操作がされることで変更される。閾値は、荷物Pの開梱検査が行われた回数、検査の結果において違反と判定された回数、荷物Pの発送地等をパラメータとして変更されてもよい。統計部162は、荷物Pの開梱検査が行われた回数、および検査の結果において違反と判定された回数のうち、一方または双方が多い傾向である場合、閾値を低い傾向に設定してもよい。また、統計部162は、荷物Pの発送地が所定の地域である場合、閾値を低い傾向に設定してもよい。 Note that the threshold may be set arbitrarily. For example, the threshold is changed by performing a predetermined input operation on the unpacking inspection terminal device 22 . The threshold may be changed using parameters such as the number of times the package P has been unpacked and inspected, the number of times the inspection results indicate violations, the shipping destination of the package P, and the like. If one or both of the number of unpacking inspections performed on the package P and the number of times the inspection results indicate violations tend to be high, the statistical unit 162 sets the threshold to a low tendency. good. In addition, the statistical unit 162 may set the threshold to a low tendency when the shipment place of the parcel P is in a predetermined area.

統計部162は、荷物Pの内容と検査結果とが合致しなかった回数または頻度を、荷物Pの内容と検査結果とが合致しなかった回数、または頻度が予め定められた閾値を超えた差出人に対応付けて導出する。 The statistical unit 162 calculates the number of times or frequency that the contents of the package P do not match the inspection results, or the number of times or frequency that the contents of the package P do not match the inspection results, or the number of times or frequency exceeds a predetermined threshold. is derived in association with .

出力制御部164は、判定部160により所定の情報が揃っていないと判定された場合に、通知情報を開梱検査用端末装置22や、検査判定用端末装置200等に出力させる。出力制御部164は、統計部162により導出された情報を開梱検査用端末装置22や、検査判定用端末装置200等に出力させる。出力制御部164は、荷物Pの内容と検査結果とが合致しなかった回数または頻度が予め定められた閾値を超えた差出人に関する情報を開梱検査用端末装置22や、検査判定用端末装置200等のネットワークNWに接続された装置に送信し、差出人に関する情報を送信先の装置に出力させる。統計部162および出力制御部164は、「注意喚起部」の一例である。 When the determination unit 160 determines that the predetermined information is not complete, the output control unit 164 outputs the notification information to the unpacking inspection terminal device 22, the inspection determination terminal device 200, and the like. The output control unit 164 outputs the information derived by the statistics unit 162 to the unpacking inspection terminal device 22, the inspection determination terminal device 200, and the like. The output control unit 164 controls the unpacking inspection terminal device 22 or the inspection determination terminal device 200 for information about the sender whose number or frequency of mismatches between the contents of the package P and the inspection result exceeds a predetermined threshold. , etc. to a device connected to the network NW, and causes the destination device to output the information on the sender. The statistics section 162 and the output control section 164 are examples of the "attention calling section".

記憶部170には、スキャン情報172、および第2画像データ174が記憶される。スキャン情報172は、コードリーダユニット16により読み取られた情報、およびコードリーダユニット16により情報が読み取られた時刻が互いに対応付けられた情報である。第2画像データ174は、検査装置18から取得した第2画像、および第2画像が生成された時刻が互いに対応付けられた情報の集合である。 The storage unit 170 stores scan information 172 and second image data 174 . The scan information 172 is information in which the information read by the code reader unit 16 and the time when the information was read by the code reader unit 16 are associated with each other. The second image data 174 is a set of information in which the second image acquired from the inspection device 18 and the time when the second image was generated are associated with each other.

管理部158は、例えばコードリーダユニット16により荷物Pの識別情報が読み取られた時刻、検査装置18によって第2画像が生成された時刻、および主搬送路12に設けられた検知センサによって特定される荷物Pの位置情報に基づいて、コードリーダユニット16により読み取られた荷物Pの識別情報と、検査装置18により生成された第2画像とを対応付ける。 The management unit 158 is specified by, for example, the time when the identification information of the package P is read by the code reader unit 16, the time when the second image is generated by the inspection device 18, and the detection sensor provided on the main transport path 12. Based on the position information of the package P, the identification information of the package P read by the code reader unit 16 and the second image generated by the inspection device 18 are associated.

図5は、荷物検査システムにより実行される処理を概念的に示す図である。仕分管理装置100の記憶部120には、カメラ50により撮像された画像が記憶される(1-1)。また、記憶部120には、重量センサ60により測定された荷物Pの測定結果が記憶される(1-2)。仕分管理装置100は、カメラ50により撮像された画像に対してOCR処理を実行し、検査官の検査に必要な所定の情報を取得することができなかった場合、その画像をVCD70に送信する(2)。VCD70は、オペレータにより入力された情報を仕分管理装置100に送信する。これにより仕分管理装置100の記憶部120には、検査官の検査に必要な所定の情報が記憶される(3-1から3-3)。 FIG. 5 is a diagram conceptually showing the processing executed by the baggage inspection system. An image captured by the camera 50 is stored in the storage unit 120 of the sorting management device 100 (1-1). Further, the storage unit 120 stores the measurement result of the baggage P measured by the weight sensor 60 (1-2). The sorting management device 100 performs OCR processing on the image captured by the camera 50, and if the predetermined information necessary for the inspection by the inspector cannot be acquired, the image is transmitted to the VCD 70 ( 2). The VCD 70 transmits the information input by the operator to the sorting management device 100 . Thus, the storage unit 120 of the sorting management device 100 stores predetermined information necessary for inspection by the inspector (3-1 to 3-3).

次に、検査管理装置150の記憶部170には、コードリーダユニット16により読み取られた識別情報、および識別情報が取得された時刻(スキャン時刻)が互いに対応付けられて記憶される(4)。検査管理装置150は、仕分管理装置100の記憶部120に記憶され、且つ上記の(4)で取得した識別情報と一致する識別情報に対応付けられた情報を参照し、検査に必要な所定の情報が取得されているか否かを判定する(5)。検査管理装置150は、肯定的な判定をした場合、検査装置18による検査を実行させることを促す情報をコードリーダユニット16の表示部に表示させ、否定的な判定をした場合、検査装置18による検査を実行させることを禁止する情報をコードリーダユニット16の表示部に表示させる。 Next, the identification information read by the code reader unit 16 and the time (scanning time) at which the identification information was acquired are associated with each other and stored in the storage unit 170 of the inspection management apparatus 150 (4). The inspection management device 150 refers to the information stored in the storage unit 120 of the sorting management device 100 and associated with the identification information that matches the identification information acquired in (4) above, and performs the predetermined inspection necessary for the inspection. It is determined whether information has been acquired (5). The inspection management device 150 causes the display section of the code reader unit 16 to display information prompting execution of an inspection by the inspection device 18 if the determination is affirmative, and if the determination is negative, the inspection management device 150 The display section of the code reader unit 16 is caused to display information for prohibiting execution of inspection.

オペレータは、表示部に検査装置18による検査を実行させることを禁止する情報が出力された場合、荷物Pを一時的に退避させる退避領域に、対象の荷物Pを移動させる。オペレータは、表示部に検査装置18による検査を実行させることを促す情報が出力された場合、対象の荷物Pを移動させずに、検査装置18が設けられた方向に対象の荷物Pが搬送されていることを確認する。これにより、荷物Pの第2画像が検査装置18に取得される。 When the information prohibiting the execution of inspection by the inspection device 18 is output to the display unit, the operator moves the target package P to the evacuation area where the package P is temporarily evacuated. When information prompting execution of inspection by the inspection device 18 is output to the display unit, the operator does not move the target package P, but conveys the target package P in the direction in which the inspection device 18 is provided. Make sure that Thereby, the second image of the package P is acquired by the inspection device 18 .

なお、検査管理装置150は、上記の(5)の判定を仕分管理装置100に依頼してもよい。この場合、仕分管理装置100は、判定する対象の識別情報を検査管理装置150から取得し、取得した識別情報と一致する識別情報に対応付けられた情報を参照し、必要な情報が取得されているか否かを判定する。そして、仕分管理装置100は、判定の結果を検査管理装置150に送信する。 Note that the inspection management device 150 may request the sorting management device 100 to make the determination of (5) above. In this case, the sorting management device 100 acquires the identification information to be determined from the inspection management device 150, refers to the information associated with the identification information that matches the acquired identification information, and obtains the necessary information. determine whether or not there is The sorting management device 100 then transmits the determination result to the inspection management device 150 .

検査装置18は、第2画像を取得し、取得した画像を検査管理装置150に送信する。検査管理装置150の記憶部170には、検査装置18により取得された第2画像が、コードリーダユニット16により読み取られた識別情報に対応付けられて記憶される(6)。 The inspection device 18 acquires the second image and transmits the acquired image to the inspection management device 150 . The second image acquired by the inspection device 18 is stored in the storage unit 170 of the inspection management device 150 in association with the identification information read by the code reader unit 16 (6).

次に、検査管理装置150は、第2画像および荷物Pの識別情報を互いに対応付けて、検査判定用端末装置200に送信し(7)、仕分管理装置100は、検査に必要な所定の情報および荷物Pの識別情報を互いに対応付けて、検査判定用端末装置200に送信する(8)。これにより、検査判定用端末装置200の表示部には、検査に必要な所定の情報と、第2画像とが対応付けられて表示される。 Next, the inspection management device 150 associates the second image and the identification information of the parcel P with each other and transmits them to the inspection judgment terminal device 200 (7). and the identification information of the parcel P are associated with each other and transmitted to the inspection determination terminal device 200 (8). As a result, the predetermined information necessary for the inspection and the second image are displayed in association with each other on the display unit of the inspection determination terminal device 200 .

検査者は、表示部に表示された第2画像と、検査に必要な所定の情報とを比較して、検査に必要な所定の情報に示される情報と、荷物Pの第2画像とに相違が存在するか否かを判定することができる。 The inspector compares the second image displayed on the display unit with the predetermined information necessary for the inspection, and finds a difference between the information indicated by the predetermined information necessary for the inspection and the second image of the package P. exists or not.

図6は、仕分管理装置100により実行される処理の流れを示すフローチャートである。まず、仕分管理装置100の通信インターフェース102は、重量センサ60により測定された荷物Pの重量、およびカメラ50により撮像された画像を取得する(ステップS100、ステップS102)。 FIG. 6 is a flow chart showing the flow of processing executed by the sorting management device 100. As shown in FIG. First, the communication interface 102 of the sorting management device 100 acquires the weight of the package P measured by the weight sensor 60 and the image captured by the camera 50 (steps S100 and S102).

次に、画像認識部108が、カメラ50により撮像された画像に対してOCR処理を実行する(ステップS104)。次に、データ管理部112が、OCR処理の結果により荷物Pに付与された識別情報が認識することができたか否かを判定する(ステップS106)。識別情報を認識することができなかった場合、所定の処理が実行される(ステップS108)。例えば、仕分管理装置100は、識別情報を認識することができなかったことを示す情報を仕分管理装置100が備える情報出力部に出力させる。この場合、例えば、オペレータが、荷物Pの識別情報を確認し、識別情報が付与されていない場合は、識別情報が表示されたシール等を荷物Pに貼付する。 Next, the image recognition unit 108 performs OCR processing on the image captured by the camera 50 (step S104). Next, the data management unit 112 determines whether or not the identification information given to the package P could be recognized as a result of the OCR processing (step S106). If the identification information cannot be recognized, a predetermined process is executed (step S108). For example, the sorting management device 100 causes the information output unit provided in the sorting management device 100 to output information indicating that the identification information could not be recognized. In this case, for example, the operator confirms the identification information of the package P, and if the identification information is not provided, attaches a sticker or the like on which the identification information is displayed to the package P.

なお、ここで認識される識別情報は、差出人により付与された識別情報であってもよい。例えば、荷物Pを差し出す回数が多い企業等が荷物Pに付与した識別情報が、荷物検査システムで利用される識別情報として援用されてもよい。例えば仕分管理装置100は、予め登録された数字や、記号、文字等の組み合わせを認識した場合、その組み合わせを含む情報は、荷物検査システムで利用することができる識別情報であると判定してもよい。 The identification information recognized here may be identification information given by the sender. For example, identification information given to packages P by a company or the like that presents packages P many times may be used as identification information used in the package inspection system. For example, when the sorting management device 100 recognizes a combination of pre-registered numbers, symbols, characters, etc., even if it determines that the information including the combination is identification information that can be used in the parcel inspection system. good.

識別情報を認識することができた場合、データ管理部112は、OCR処理の結果により荷物Pに付与された検査に必要な所定の情報を取得することができたか否かを判定する(ステップS110)。検査に必要な所定の情報が取得できた場合、本フローチャートの1ルーチンの処理は終了する。検査に必要な所定の情報が取得できなかった場合、データ管理部112は、カメラ50により撮像された画像、およびOCR処理の処理結果を互いに対応付けてVCD70に送信する(ステップS112)。 When the identification information can be recognized, the data management unit 112 determines whether or not the predetermined information necessary for inspection given to the package P has been acquired as a result of the OCR processing (step S110). ). If the predetermined information required for the inspection can be acquired, the processing of one routine of this flowchart ends. If the predetermined information necessary for the inspection cannot be acquired, the data management unit 112 associates the image captured by the camera 50 and the OCR processing result with each other and transmits them to the VCD 70 (step S112).

次に、データ管理部112は、VCD70から情報を取得するまで待機する(ステップS114)。VCD70から情報を取得することができた場合、データ管理部112は、VCD70から取得した情報を荷物情報124として登録する(ステップS116)。 Next, the data management unit 112 waits until information is acquired from the VCD 70 (step S114). If the information can be obtained from the VCD 70, the data management unit 112 registers the information obtained from the VCD 70 as the parcel information 124 (step S116).

次に、データ管理部112は、荷物情報124として検査に必要な所定の情報を登録したか否かを判定する(ステップS118)。荷物情報124として検査に必要な所定の情報を登録していない場合、ステップS114に戻る。荷物情報124として検査に必要な所定の情報を登録した場合、データ管理部112は、検査に必要な所定の情報を検査判定用端末装置200に送信する(ステップS120)。これにより本フローチャートの1ルーチンの処理は終了する。 Next, the data management unit 112 determines whether or not predetermined information necessary for inspection has been registered as the package information 124 (step S118). If the predetermined information required for inspection is not registered as the package information 124, the process returns to step S114. When predetermined information required for inspection is registered as package information 124, data management unit 112 transmits the predetermined information required for inspection to terminal device 200 for inspection determination (step S120). This completes the processing of one routine in this flow chart.

図7は、検査管理装置150により実行される処理の流れを示すフローチャートである。まず、検査管理装置150の通信インターフェース152は、コードリーダユニット16により取得された荷物Pの識別情報、および、その識別情報が取得された時刻が互いに対応付けられた情報を取得するまで待機する(ステップS200)。 FIG. 7 is a flow chart showing the flow of processing executed by the inspection management apparatus 150. As shown in FIG. First, the communication interface 152 of the inspection management device 150 waits until it acquires information in which the identification information of the package P acquired by the code reader unit 16 and the time at which the identification information was acquired are associated with each other ( step S200).

コードリーダユニット16により取得された荷物Pの識別情報、および、その識別情報が取得された時刻が互いに対応付けられた情報を取得すると、判定部160は、仕分管理装置100の記憶部120に記憶され、且つステップS200で取得した識別情報と一致する識別情報に対応付けられた情報を参照し、検査に必要な所定の情報が取得されているか否かを判定する(ステップS202)。 When the identification information of the package P obtained by the code reader unit 16 and the information in which the identification information is associated with each other are obtained, the determination unit 160 stores the information in the storage unit 120 of the sorting management device 100. Then, the information associated with the identification information that matches the identification information acquired in step S200 is referred to, and it is determined whether or not the predetermined information required for the inspection has been acquired (step S202).

検査に必要な所定の情報が取得されていない場合、出力制御部164は、コードリーダユニット16の表示部に検査に必要な所定の情報が揃っていないことを示す情報(通知情報)を表示させる(ステップS204)。第2画像の比較対象である検査に必要な所定の情報が存在せず、第2画像が取得されても、検査者が第2画像と情報とを比較する検査を行うことができず、円滑に処理を進めることができないためである。 If the predetermined information required for the inspection is not acquired, the output control unit 164 causes the display unit of the code reader unit 16 to display information (notification information) indicating that the predetermined information required for the inspection is not available. (Step S204). There is no predetermined information necessary for the inspection to which the second image is to be compared, and even if the second image is acquired, the inspector cannot perform the inspection by comparing the second image and the information. This is because the process cannot proceed to

検査に必要な所定の情報が取得されている場合、検査管理装置150は、検査装置18から第2画像を取得するまで待機する(ステップS206)。検査装置18から第2画像を取得すると、管理部158は、第2画像、および検査に必要な所定の情報を検査判定用端末装置200に送信する(ステップS208)。例えば、管理部158は、第2画像および識別情報を互いに対応付けて、検査判定用端末装置200に送信すると共に、検査に必要な所定の情報を検査判定用端末装置200に送信することを指示する指示情報を仕分管理装置100に送信する。この指示情報には、例えば対象の荷物Pの検査に必要な所定の情報に対応付けられている識別情報が含まれる。そして、仕分管理装置100は、送信された指示情報に含まれる識別情報、および、この識別情報に対応付けられた検査に必要な所定の情報を、検査判定用端末装置200に送信する。検査判定用端末装置200は、仕分管理装置100により送信された第2画像、および検査管理装置150により送信された被認識情報を対応付けて表示部に表示する。 If the predetermined information necessary for the inspection has been acquired, the inspection management device 150 waits until the second image is acquired from the inspection device 18 (step S206). After obtaining the second image from the inspection device 18, the management unit 158 transmits the second image and predetermined information necessary for the inspection to the inspection determination terminal device 200 (step S208). For example, the management unit 158 associates the second image and the identification information with each other, transmits them to the terminal device for inspection determination 200, and instructs to transmit predetermined information necessary for the inspection to the terminal device for inspection determination 200. It transmits the instruction information to the sorting management device 100 . This instruction information includes, for example, identification information associated with predetermined information necessary for inspection of the target package P. FIG. Then, the sorting management device 100 transmits the identification information included in the transmitted instruction information and the predetermined information necessary for the inspection associated with this identification information to the inspection determination terminal device 200 . The inspection determination terminal device 200 displays the second image transmitted by the sorting management device 100 and the information to be recognized transmitted by the inspection management device 150 in association with each other on the display unit.

図8は、検査判定用端末装置200の表示部に表示された画像IMの一例を示す図である。画像IMには、検査に必要な所定の情報が表示される領域A1、および第2画像が表示される領域A2が含まれる。また、画像IMには、開梱検査が必要であることを決定するためのボタンB1「開梱検査が必要」、および開梱検査が必要でないことを決定するためのボタンB2「開梱検査が不要」を含む。検査者は、例えば、検査に必要な所定の情報と、第2画像から認識することができる情報とが相違するかによって、開梱検査が必要であるか否かを判定する。開梱検査が必要であるか否かの判定結果は、検査結果の他の一例である。 FIG. 8 is a diagram showing an example of the image IM displayed on the display section of the inspection determination terminal device 200. As shown in FIG. The image IM includes an area A1 in which predetermined information necessary for examination is displayed and an area A2 in which a second image is displayed. The image IM also includes a button B1 "unpacking inspection required" for determining that an unpacking inspection is required, and a button B2 "unpacking inspection required" for determining that an unpacking inspection is not required. including "not required". The inspector determines whether or not the unpacking inspection is necessary, for example, depending on whether predetermined information necessary for inspection and information that can be recognized from the second image are different. The determination result as to whether or not the unpacking inspection is necessary is another example of the inspection result.

例えば、検査者は、重量センサ60により測定された荷物Pの重量と、検査に必要な所定の情報に含まれる荷物Pの重量とが、所定以上、相違したり、検査に必要な所定の情報に含まれる荷物Pの物品名と、第2画像から認識される荷物Pの物品名とが相違したりする場合、ボタンB1「開梱検査が必要」に対して入力操作する。検査判定用端末装置200は、入力操作された結果を検査管理装置150に送信する。荷物Pは、開梱検査用搬送部14に搬出され、検査者により開梱されて詳細な検査がされる。 For example, the inspector may notice that the weight of the package P measured by the weight sensor 60 and the weight of the package P included in the predetermined information necessary for inspection differ by a predetermined amount or more, or the predetermined information necessary for inspection is different from the name of the package P recognized from the second image, the button B1 "unpacking inspection required" is input. The test determination terminal device 200 transmits the result of the input operation to the test management device 150 . The package P is carried out to the unpacking inspection transport section 14, unpacked by an inspector, and subjected to a detailed inspection.

また、画像IMには、統計部162の処理結果である過去に差出人が差し出した荷物Pについて「開梱検査が必要」と判定された回数、または頻度を示す情報が表示されてもよい。また、過去に「開梱検査が必要」と判定された回数、または頻度が予め定められた閾値を超えている場合に、閾値を超えていることを示す情報や、「開梱検査が必要」と判定された回数、または頻度を示す情報が、画像IMに表示されてもよい。これにより、検査者は、差出人が申告する荷物Pの内容の信憑性を推認することができる。 The image IM may also display information indicating the number of times or frequency of determination that "unpacking inspection is required" for packages P that have been presented by the sender in the past, which is the result of processing by the statistical unit 162 . In addition, if the number of times or frequency that "unpacking inspection is required" was determined in the past exceeds a predetermined threshold, information indicating that the threshold has been exceeded and "unpacking inspection required" Information indicating the number of times or frequency of determination may be displayed in the image IM. This allows the inspector to infer the credibility of the contents of the parcel P declared by the sender.

次に、管理部158は、検査判定用端末装置200から情報を取得するまで待機する(ステップS210)。検査判定用端末装置200から情報を取得すると、管理部158は、取得した情報を荷物情報124として登録し(ステップS212)、荷物Pの開梱検査が必要であることを示す情報を取得したか否かを判定する(ステップS214)。 Next, the management unit 158 waits until information is acquired from the inspection determination terminal device 200 (step S210). When the information is acquired from the inspection determination terminal device 200, the management unit 158 registers the acquired information as the package information 124 (step S212), and whether the information indicating that the package P needs to be unpacked and inspected has been acquired. It is determined whether or not (step S214).

開梱検査が必要であることを示す情報を取得した場合、統計部162は、荷物Pの差出人について、荷物Pの検査履歴を統計的に処理する(ステップS216)。荷物Pの検査履歴は、処理対象の荷物Pの差出人が、本処理の前までに差し出した荷物Pの検査の結果を示す情報である。 When acquiring the information indicating that the unpacking inspection is required, the statistical unit 162 statistically processes the inspection history of the package P for the sender of the package P (step S216). The inspection history of the parcel P is information indicating the results of the inspection of the parcel P presented by the sender of the parcel P to be processed before this process.

統計部162の処理結果は、開梱検査用端末装置22の表示部に表示されてもよいし、検査管理装置150の表示部や、検査判定用端末装置200等に表示されてもよい。また、検査判定用端末装置200や、開梱検査用端末装置22等から所定のリクエスト信号を取得した場合、統計部162は、リクエスト信号を取得した後に、荷物Pの検査履歴を統計的に処理した結果を示す情報を検査判定用端末装置200や、開梱検査用端末装置22に送信してもよい。 The processing result of the statistical unit 162 may be displayed on the display unit of the unpacking inspection terminal device 22, or may be displayed on the display unit of the inspection management device 150, the inspection determination terminal device 200, or the like. Further, when a predetermined request signal is acquired from the inspection determination terminal device 200, the unpacking inspection terminal device 22, or the like, the statistics unit 162 statistically processes the inspection history of the package P after acquiring the request signal. Information indicating the result of the inspection may be transmitted to the inspection determination terminal device 200 or the unpacking inspection terminal device 22 .

図9は、開梱検査用端末装置22の表示部に表示された、統計部162の処理結果を示す画像の一例を示す図である。例えば、荷物Pの検査履歴を統計的に処理した結果は、ある期間において、荷物Pの差出人ごとに、荷物Pを開梱して検査が行われた回数(図8のボタンB1に対する入力操作が行われた回数)や、荷物Pを開梱して検査が行われ、且つ検査結果が違反であると判定された回数等が含まれる。開梱検査用端末装置22の表示部には、検査対象の荷物Pの差出人の荷物Pを開梱して検査が行われた回数や、荷物Pを開梱して検査が行われ、且つ検査結果が違反であると判定された回数等が表示されてもよい。 FIG. 9 is a diagram showing an example of an image showing the processing result of the statistics section 162 displayed on the display section of the unpacking inspection terminal device 22. As shown in FIG. For example, the result of statistically processing the inspection history of the package P is the number of times the package P has been unpacked and inspected for each sender of the package P in a certain period (the input operation to the button B1 in FIG. 8 is number of times the package P was unpacked and inspected, and the number of times the inspection result was determined to be a violation. The display unit of the unpacking inspection terminal device 22 displays the number of times the package P has been unpacked and inspected by the sender of the package P to be inspected, and the number of times the package P has been unpacked and inspected. The number of times the result was determined to be a violation, etc., may be displayed.

なお、操作者により所定の入力操作がされると、管理部158は、所定の入力操作に対する情報を開梱検査用端末装置22の表示部に表示させる。例えば、ある差出人の過去の違反の内容を示す情報を、表示部に表示させるための入力操作がされた場合、管理部158は、ある差出人の過去の違反の内容の詳細を示す情報を表示部に表示させる。 When the operator performs a predetermined input operation, the management unit 158 causes the display unit of the unpacking inspection terminal device 22 to display information on the predetermined input operation. For example, when an input operation is performed to display information indicating the content of past violations of a certain sender on the display unit, the management unit 158 displays information indicating the details of the content of past violations of a certain sender on the display unit. to display.

このように荷物Pの検査履歴を統計的に処理した結果が、表示部に表示されることにより、虚偽の情報を申告する回数が多い差出人を特定することができる。また、例えば、処理対象の荷物Pが、虚偽の情報を申告する回数が多い差出人から差し出された荷物であると、検査者は、荷物Pの処理中に、虚偽の情報を申告する回数が多い差出人の荷物Pであることを認識することができる。 By displaying the result of statistically processing the inspection history of the package P in this way on the display unit, it is possible to identify the sender who frequently declares false information. Further, for example, if the parcel P to be processed is a parcel sent by a sender who frequently declares false information, the inspector determines that the number of times the parcel P is declared false information is large. It can be recognized that the parcel P is from a large number of senders.

図7に戻り、搬送制御部154は、開梱検査用搬送部14に荷物Pを搬送する(ステップS218)。開梱検査用搬送部14に搬送された荷物Pは、検査者により開梱されて、荷物Pの中身が検査される。検査者は、検査結果を所定の開梱検査用端末装置22を操作して情報を入力操作する。入力された情報は、例えば、荷物Pの内容を示す情報や、差出人が申告した内容情報と、実際の荷物Pの内容との相違を示す情報等である。開梱検査用端末装置22は、入力された情報を検査の結果として検査管理装置150に送信する。管理部158は、検査の結果を取得するまで待機する(ステップS220)。検査の結果を取得すると、管理部158は、取得した検査の結果を仕分管理装置100の記憶部120(荷物情報124)に登録させる(ステップS222)。 Returning to FIG. 7, the transport control unit 154 transports the package P to the unpacking inspection transport unit 14 (step S218). The package P transported to the unpacking inspection transport unit 14 is unpacked by an inspector, and the contents of the package P are inspected. The inspector operates a predetermined unpacking inspection terminal device 22 to input information on the inspection result. The input information is, for example, information indicating the contents of the parcel P, information indicating the difference between the content information declared by the sender and the actual contents of the parcel P, or the like. The unpacking inspection terminal device 22 transmits the input information to the inspection management device 150 as an inspection result. The management unit 158 waits until the inspection result is obtained (step S220). After acquiring the inspection result, the management unit 158 registers the acquired inspection result in the storage unit 120 (parcel information 124) of the sorting management device 100 (step S222).

ステップS214で開梱検査が必要でないことを示す情報を取得した場合、仕分処理が行われる(ステップS224)。仕分処理は、オペレータによって荷物Pが仕分ユニット30の投入部32に投入され、仕分ユニットが、投入された荷物Pの宛先情報に基づいて、その荷物Pが所定のシュータ36に搬出される処理である。これにより本フローチャートの1ルーチンは終了する。 When the information indicating that the unpacking inspection is unnecessary is acquired in step S214, sorting processing is performed (step S224). The sorting process is a process in which an operator puts packages P into the loading unit 32 of the sorting unit 30, and the sorting unit discharges the packages P to a predetermined chute 36 based on the destination information of the thrown packages P. be. This completes one routine of this flow chart.

以上説明した第1の実施形態によれば、荷物検査システムは、カメラ50により撮像された荷物Pの画像に対して行われた画像認識の結果である荷物Pの識別情報および荷物Pの内容を少なくとも含む被認識情報と、カメラ50により撮像された荷物Pの画像が送られた一以上のVCD70において入力された荷物の被認識情報とに基づいて、荷物Pの識別情報に、荷物Pの被認識情報が対応付けられた荷物情報124を管理するデータ管理部112と、荷物Pに対して透過検査を行う検査装置18の手前に設けられたコードリーダユニット16により取得された荷物Pの識別情報を用いてデータ管理部112により管理される荷物情報124を参照し、被認識情報のうち荷物の検査に必要な所定の情報が揃っているか否かを判定する判定部160と、判定部160により検査に必要な所定の情報が揃っていないと判定された場合に、通知情報を出力部に出力させる出力制御部164とを持つことにより、より円滑な処理を実現することができる。 According to the first embodiment described above, the baggage inspection system recognizes the identification information of the baggage P, which is the result of image recognition performed on the image of the baggage P captured by the camera 50, and the content of the baggage P. The identification information of the package P is added to the identification information of the package P based on the information to be recognized including at least the information to be recognized and the information to be recognized of the package input in one or more VCDs 70 to which the image of the package P imaged by the camera 50 is sent. Identification information of the package P acquired by a data management unit 112 that manages package information 124 associated with recognition information and a code reader unit 16 that is provided in front of an inspection device 18 that performs a transparent inspection of the package P. is used to refer to package information 124 managed by data management unit 112, and determination unit 160 determines whether or not predetermined information necessary for inspection of the package is included in the information to be recognized, and determination unit 160 By providing the output control unit 164 that outputs the notification information to the output unit when it is determined that the predetermined information necessary for the inspection is not complete, smoother processing can be realized.

また、第1の実施形態の荷物検査システムは、コードリーダユニット16により荷物Pの識別情報が取得され、且つ検査に必要な所定の情報を取得することができないとき、通知情報を出力部に出力させるため、検査に必要な所定の情報を取得していない荷物Pを容易に検知することができる。この結果、荷物検査システムは、検査装置18に至る搬送経路を十分に長くして、検査に必要な所定の情報が取得されるまでの時間を稼ぐ必要性が低くなるため、主搬送路12の上流側の端部と、検査装置18との間の経路を短くすることができる。 When the code reader unit 16 acquires the identification information of the package P and the predetermined information necessary for inspection cannot be acquired, the package inspection system of the first embodiment outputs the notification information to the output unit. Therefore, it is possible to easily detect packages P for which predetermined information necessary for inspection has not been obtained. As a result, in the baggage inspection system, it is less necessary to sufficiently lengthen the transportation route to the inspection device 18 to gain time until the predetermined information necessary for inspection is acquired. The path between the upstream end and the inspection device 18 can be shortened.

また、第1の実施形態の荷物検査システムは、カメラ50により撮像された荷物Pの画像に対して行われた画像認識の結果である荷物Pの識別情報および荷物Pの差出人並びに内容を少なくとも含む被認識情報と、カメラ50により撮像された荷物Pの画像が送られた一以上のVCD70において入力された荷物の被認識情報とに基づいて、荷物Pの識別情報に、荷物Pの被認識情報が対応付けられた荷物情報124を管理するデータ管理部112であって、荷物Pに対する検査結果を記憶部120に格納するデータ管理部112と、データ管理部112により管理される記憶部120において識別情報に対応付けられた荷物Pの内容と検査結果とが合致しなかった差出人を抽出して抽出履歴を蓄積し、荷物Pの内容と検査結果とが合致しなかった回数、または頻度が予め定められた閾値を超えた差出人に関する情報を出力部に出力させる注意喚起部(162、164)とを持つことにより、申告内容が不適切な傾向にある差出人を抽出することができる。 In addition, the baggage inspection system of the first embodiment includes at least the identification information of the baggage P, the sender of the baggage P, and the content of the baggage P, which is the result of image recognition performed on the image of the baggage P captured by the camera 50. Based on the information to be recognized and the information to be recognized of the package input in one or more VCDs 70 to which the image of the package P imaged by the camera 50 was sent, the information to be recognized of the package P is added to the identification information of the package P. is a data management unit 112 that manages parcel information 124 associated with the identification The sender whose contents of the parcel P associated with the information did not match the inspection result is extracted, the extraction history is accumulated, and the number of times or frequency that the contents of the parcel P and the inspection result do not match is determined in advance. By having a warning unit (162, 164) that causes the output unit to output information about senders exceeding the set threshold value, it is possible to extract senders whose report contents tend to be inappropriate.

なお、仕分管理装置100の画像認識部108および住所特定110は、ネットワークNWに接続された他の装置に設けられ、仕分管理装置100は、OCR処理およびOCR処理の結果から住所を特定する処理を、画像認識部108および住所特定110が設けられた他の装置に依頼してもよい。この場合、仕分管理装置100は、ネットワークNWを介して、他の装置からOCR処理および住所を特定する処理の結果を取得する。 Image recognition unit 108 and address identification 110 of sorting management device 100 are provided in another device connected to network NW. , image recognition unit 108 and address identification 110 may be requested to other devices. In this case, the sorting management device 100 acquires the result of the OCR processing and the address specifying processing from the other device via the network NW.

(第2の実施形態)
以下、第2の実施形態の荷物検査システムについて説明する。第1の実施形態では、荷物Pは、検査ユニット10において処理がされた後、仕分ユニット30において処理がされるものとしたが、第2の実施形態では、荷物Pは、検査ユニット10において処理がされる前に、仕分ユニット30において処理がされる。また、第2の実施形態の荷物検査システムでは、仕分ユニット30の投入部32付近に、カメラ50、および重量センサ60-1から60-3が設けられる。以下では、係る相違点を中心に説明し、共通する部分についての説明は省略する。
(Second embodiment)
The baggage inspection system of the second embodiment will be described below. In the first embodiment, the packages P are processed in the inspection unit 10 and then processed in the sorting unit 30. In the second embodiment, the packages P are processed in the inspection unit 10. processed in the sorting unit 30 before being processed. Further, in the parcel inspection system of the second embodiment, a camera 50 and weight sensors 60-1 to 60-3 are provided near the loading section 32 of the sorting unit 30. FIG. The following description focuses on the differences, and omits the description of the common parts.

図10は、荷物検査システムを含む区分システム1Aの構成図である。カメラ50は、例えば、投入部32-1から32-3付近に設けられる。カメラ50は、投入部32に投入された荷物Pを撮像する。重量センサ60-1から60-3は、それぞれ投入部32-1から32-1の搬送ローラの下側に配置され、搬送ローラに載せられた荷物Pの重量を測定する。以下、投入部32-1から32-1を、他の投入部と区別しない場合は、単に投入部32と称し、重量センサ60-1から60-3を、他の重量センサと区別しない場合は、単に重量センサ60と称する。 FIG. 10 is a configuration diagram of a sorting system 1A including a baggage inspection system. The cameras 50 are provided, for example, in the vicinity of the input sections 32-1 to 32-3. The camera 50 captures an image of the package P that has been thrown into the throwing unit 32 . The weight sensors 60-1 to 60-3 are arranged below the conveying rollers of the loading units 32-1 to 32-1, respectively, and measure the weight of the cargo P placed on the conveying rollers. Hereinafter, the input units 32-1 to 32-1 are simply referred to as the input unit 32 when not distinguished from other input units, and the weight sensors 60-1 to 60-3 are referred to as weight sensors 60-1 to 60-3 when not distinguished from other weight sensors. , simply referred to as weight sensor 60 .

本実施形態において、荷物Pは、例えばオペレータによって投入部32に投入される。仕分管理装置100は、仕分ユニット30を制御して、投入部32の搬送ローラに荷物Pを搬送させる。重量センサ60が設けられた搬送ローラを含むコンベアは、このコンベアの前後のコンベアから分割されている。重量センサ60は、分割されたコンベアにより荷物が搬送されているとき、荷物Pの重量を測定する。なお、荷物Pが、分割されたコンベアの上に存在している状態で、後続の荷物Pが分割されたコンベアに進入しそうな場合、荷物Pが分割されたコンベアを通過するまで後続の荷物Pの搬送は一時中停止される。これにより、荷物Pは、下側に重量センサ60が設けられた搬送ローラの上で停止する。仕分管理装置100は、カメラ50を制御して、荷物Pを撮像すると共に、重量センサ60の測定結果を取得する。このように仕分管理装置100が、仕分ユニット30の各部を制御することで、投入部32に投入された荷物Pの画像、および重量を自動的に取得する。図10の点線は、仕分ユニット30で宛先情報ごとにシュータ36に区分された荷物Pが検査ユニット10に搬送される経路の一例を示している。 In this embodiment, the baggage P is thrown into the throwing unit 32 by an operator, for example. The sorting management device 100 controls the sorting unit 30 to cause the transport rollers of the loading unit 32 to transport the packages P. The conveyor containing the transport rollers provided with weight sensors 60 is split from the conveyors before and after it. The weight sensor 60 measures the weight of the load P while the load is being conveyed by the divided conveyor. In addition, in a state in which a package P exists on the divided conveyor, if the subsequent package P is about to enter the divided conveyor, the following package P is kept until the package P passes through the divided conveyor. transport is suspended. As a result, the load P stops on the transport rollers on which the weight sensor 60 is provided. The sorting management device 100 controls the camera 50 to capture an image of the package P and acquires the measurement result of the weight sensor 60 . By controlling each part of the sorting unit 30 in this manner, the sorting management device 100 automatically acquires the image and the weight of the package P thrown into the throwing unit 32 . A dotted line in FIG. 10 shows an example of a route along which the parcels P sorted by the sorting unit 30 into the chute 36 according to the destination information are transported to the inspection unit 10 .

図11は、第2の実施形態の仕分管理装置100により実行される処理の流れを示すフローチャートである。まず、仕分管理装置100の通信インターフェース102は、重量センサ60により測定された荷物Pの重量、およびカメラ50により撮像された画像を取得する(ステップS300、ステップS302)。 FIG. 11 is a flow chart showing the flow of processing executed by the sorting management device 100 of the second embodiment. First, the communication interface 102 of the sorting management device 100 acquires the weight of the package P measured by the weight sensor 60 and the image captured by the camera 50 (steps S300 and S302).

次に、画像認識部108が、カメラ50により撮像された画像に対してOCR処理を実行する(ステップS304)。次に、データ管理部112が、OCR処理の結果により荷物Pに付与された識別情報が認識することができたか否かを判定する(ステップS306)。識別情報を認識することができなかった場合、搬送制御部104は、エラー専用のシュータ36に荷物Pを搬送する(ステップS318)。 Next, the image recognition unit 108 performs OCR processing on the image captured by the camera 50 (step S304). Next, the data management unit 112 determines whether or not the identification information given to the parcel P could be recognized as a result of the OCR processing (step S306). If the identification information cannot be recognized, the transport control unit 104 transports the package P to the error-only chute 36 (step S318).

識別情報を認識することができた場合、データ管理部112は、OCR処理の結果により荷物Pに付与された宛先情報を取得することができたか否かを判定する(ステップS308)。宛先情報が取得できた場合、搬送制御部104は、取得した宛先情報に対応付けられたシュータ36に荷物Pを搬送する(ステップS310)。次に、データ管理部112は、識別情報、および宛先情報を荷物情報124として登録する(ステップS312)。 If the identification information can be recognized, the data management unit 112 determines whether or not the destination information given to the package P has been acquired as a result of the OCR processing (step S308). When the destination information can be acquired, the transport control unit 104 transports the parcel P to the chute 36 associated with the acquired destination information (step S310). Next, the data management unit 112 registers the identification information and the destination information as the parcel information 124 (step S312).

ステップS308で、宛先情報を取得することができなかった場合、データ管理部112は、カメラ50により撮像された画像、およびOCR処理の処理結果を互いに対応付けてVCD70に送信する(ステップS314)。データ管理部112は、所定時間以内に、VCD70から宛先情報を取得することができたか否かを判定する(ステップS316)。所定時間以内に、VCD70から宛先情報を取得することができなかった場合、ステップS318の処理に進む。宛先情報を取得することができていない間、荷物Pは、周回搬送部34を周回する。所定時間以内に、VCD70から宛先情報を取得することができた場合、ステップS310の処理に進む。 If destination information could not be acquired in step S308, data management unit 112 associates the image captured by camera 50 and the OCR processing result with each other and transmits them to VCD 70 (step S314). The data management unit 112 determines whether or not the destination information could be acquired from the VCD 70 within a predetermined time (step S316). If the destination information cannot be obtained from the VCD 70 within the predetermined time, the process proceeds to step S318. While the destination information cannot be acquired, the parcel P circulates around the circulating transport section 34 . If the destination information can be obtained from the VCD 70 within the predetermined time, the process proceeds to step S310.

次に、データ管理部112は、検査に必要な所定の情報を取得することができたか否かを判定する(ステップS320)。検査に必要な所定の情報が取得できた場合、本フローチャートの1ルーチンの処理は終了する。検査に必要な所定の情報が取得できなかった場合、データ管理部112は、カメラ50により撮像された画像、およびOCR処理の処理結果を互いに対応付けてVCD70に送信する(ステップS322)。 Next, the data management unit 112 determines whether or not the predetermined information necessary for the examination has been obtained (step S320). If the predetermined information required for the inspection can be acquired, the processing of one routine of this flowchart ends. If the predetermined information necessary for the inspection cannot be acquired, the data management unit 112 associates the image captured by the camera 50 and the OCR processing result with each other and transmits them to the VCD 70 (step S322).

次に、データ管理部112は、VCD70から検査に必要な所定の情報を取得するまで待機する(ステップS324)。VCD70から検査に必要な所定の情報を取得することができた場合、データ管理部112は、VCD70から取得した情報を荷物情報124として登録する(ステップS326)。 Next, the data management unit 112 waits until predetermined information necessary for inspection is acquired from the VCD 70 (step S324). When the predetermined information necessary for inspection can be obtained from the VCD 70, the data management section 112 registers the information obtained from the VCD 70 as the parcel information 124 (step S326).

次に、データ管理部112は、荷物情報124として検査に必要な所定の情報を登録したか否かを判定する(ステップS328)。荷物情報124として検査に必要な所定の情報を登録していない場合、ステップS324に戻る。荷物情報124として検査に必要な所定の情報を登録した場合、データ管理部112は、検査に必要な所定の情報を検査判定用端末装置200に送信する(ステップS330)。これにより本フローチャートの1ルーチンの処理は終了する。 Next, the data management unit 112 determines whether or not predetermined information required for inspection has been registered as the package information 124 (step S328). If the predetermined information necessary for inspection is not registered as the package information 124, the process returns to step S324. When predetermined information required for inspection is registered as package information 124, data management unit 112 transmits the predetermined information required for inspection to terminal device 200 for inspection determination (step S330). This completes the processing of one routine in this flow chart.

上述した処理により、荷物Pは、宛先情報ごとに、所定のシュータ36に区分される。そして、オペレータは、区分された荷物Pの集合を検査ユニット10に移動させる。検査ユニット10では、区分された区分ごとに荷物Pの検査が行われるため、検査後に荷物Pを区分ごとに処理することができる。また、仕分ユニット30における処理後に、検査ユニット10に荷物Pを移動させる間に、OCR処理により取得することができなかった検査に必要な所定の情報をVCD70から取得することができるため、検査ユニット10における処理を停滞させることなく行うことができる。 By the above-described processing, the package P is sorted into the predetermined shooters 36 according to the destination information. Then, the operator moves the group of sorted packages P to the inspection unit 10 . In the inspection unit 10, the baggage P is inspected for each divided section, so that the baggage P can be processed for each section after the inspection. Further, after processing in the sorting unit 30, while the packages P are being moved to the inspection unit 10, it is possible to acquire predetermined information necessary for inspection from the VCD 70, which could not be acquired by OCR processing. 10 can be performed without stalling.

以上説明した第2の実施形態によれば、仕分ユニット30において、宛先情報に基づいて、荷物Pがシュータ36に区分された後、荷物Pは検査ユニット10に運ばれ、検査ユニット10おいて検査が行われる。カメラ50により撮像された荷物Pの画像に対して行われた画像認識の結果と、VCD70において入力された情報とは、仕分ユニット30から検査ユニット10に運ばれる間に取得することができるため、より円滑に処理を行うことができる。 According to the second embodiment described above, in the sorting unit 30, after the packages P are sorted by the chute 36 based on the destination information, the packages P are transported to the inspection unit 10, where they are inspected. is done. Since the result of image recognition performed on the image of the package P captured by the camera 50 and the information input in the VCD 70 can be acquired while the package is transported from the sorting unit 30 to the inspection unit 10, Processing can be performed more smoothly.

(第3の実施形態)
以下、第3の実施形態における検査ユニット10Aについて説明する。第3の実施形態の検査ユニット10Aは、第1の実施形態の荷物検査システムに含まれる検査ユニット10と構成が異なる。以下では、係る相違点を中心に説明し、共通する部分についての説明は省略する。
(Third embodiment)
The inspection unit 10A in the third embodiment will be described below. The inspection unit 10A of the third embodiment differs in configuration from the inspection unit 10 included in the baggage inspection system of the first embodiment. The following description focuses on the differences, and omits the description of the common parts.

図12は、第3の実施形態の検査ユニット10Aの構成図である。検査ユニット10Aは、第1の実施形態の検査ユニット10の構成に加え、更に投入部11と、リジェクト搬送部13-1と、分岐機構13-2と、カメラ50と、重量センサ60とを備える。なお、コードリーダユニット16は、省略されてもよい。 FIG. 12 is a configuration diagram of an inspection unit 10A of the third embodiment. The inspection unit 10A further includes an input unit 11, a reject transport unit 13-1, a branching mechanism 13-2, a camera 50, and a weight sensor 60 in addition to the configuration of the inspection unit 10 of the first embodiment. . Note that the code reader unit 16 may be omitted.

投入部11の構成は、第2の実施形態で説明した投入部32の構成と同様であるため、説明を省略する。また、カメラ50は、例えば、投入部11付近に設けられる。カメラ50は、投入部11に投入された荷物Pを撮像する。重量センサ60は、それぞれ投入部11の搬送ローラの下側に配置され、搬送ローラに載せられた荷物Pの重量を測定する。 Since the configuration of the input unit 11 is the same as the configuration of the input unit 32 described in the second embodiment, description thereof is omitted. Also, the camera 50 is provided near the input unit 11, for example. The camera 50 takes an image of the package P that has been thrown into the throwing unit 11 . The weight sensors 60 are arranged below the conveying rollers of the loading section 11 and measure the weight of the package P placed on the conveying rollers.

主搬送路12において、検査装置18より上流側、且つ検査装置18の近傍には、リジェクト搬送部13-1が連結される。リジェクト搬送部13-1は、例えば搬送ベルト、駆動プーリ、および駆動モータを含む。分岐機構13-2は、主搬送部12と、リジェクト搬送部13-1が連結される箇所付近に設けられる。分岐機構13-2は、検査装置18を通過する前の荷物Pであって、検査に必要な所定の情報が取得されなかった荷物Pをリジェクト搬送部13-1に搬出する。また、第3の実施形態の検査装置18から、投入部11と主搬送部12との連結箇所付近までの主搬送部12の長さは、第1の実施形態の検査装置18から、上流側の端までの主搬送部12の長さに比して(例えば2倍以上、または3倍以上)長い。 A reject transport section 13-1 is connected to the upstream side of the inspection device 18 in the main transport path 12 and in the vicinity of the inspection device 18. As shown in FIG. The reject transport section 13-1 includes, for example, a transport belt, a drive pulley, and a drive motor. The branching mechanism 13-2 is provided near a location where the main transport section 12 and the reject transport section 13-1 are connected. The branching mechanism 13-2 carries out the packages P which have not yet passed through the inspection device 18 and for which the predetermined information required for inspection has not been obtained, to the reject transport section 13-1. In addition, the length of the main transport section 12 from the inspection device 18 of the third embodiment to the vicinity of the connection point between the loading section 11 and the main transport section 12 is the upstream side from the inspection device 18 of the first embodiment. (eg, twice or more, or three times or more) than the length of the main transport portion 12 to the end of the .

図13は、第3の実施形態の検査管理装置150Bの機能構成を示す図である。検査管理装置150Bは、第1の実施形態の検査管理装置150の機能構成に加え、更に画像認識部166、および住所特定部168を備える。画像認識部166、および住所特定部168の機能構成は、第1の実施形態の画像認識部108、および住所特定部110の機能構成と同様のため説明を省略する。通信インターフェース152は、リジェクト搬送部13-1や、分岐機構13-2、VCD70等と通信する。 FIG. 13 is a diagram showing the functional configuration of an inspection management device 150B of the third embodiment. The inspection management apparatus 150B further includes an image recognition section 166 and an address identification section 168 in addition to the functional configuration of the inspection management apparatus 150 of the first embodiment. The functional configurations of the image recognition unit 166 and the address identification unit 168 are the same as the functional configurations of the image recognition unit 108 and the address identification unit 110 of the first embodiment, so description thereof will be omitted. The communication interface 152 communicates with the reject conveying unit 13-1, the branching mechanism 13-2, the VCD 70, and the like.

記憶部170には、スキャン情報172、および第2画像データ174、に加え、更に第1画像データ176、荷物情報178、および住所データベース180が記憶される。第3の実施形態の第1画像データ176に記憶される情報、荷物情報178に記憶される情報、および住所データベース180に記憶される情報は、それぞれ第1の実施形態の第1画像データ122に記憶される情報、荷物情報124として記憶される情報、および住所データベース126に記憶される情報と同様のため説明を省略する。 In addition to scan information 172 and second image data 174 , storage unit 170 further stores first image data 176 , parcel information 178 and address database 180 . The information stored in the first image data 176 of the third embodiment, the information stored in the parcel information 178, and the information stored in the address database 180 are each stored in the first image data 122 of the first embodiment. Since it is the same as the stored information, the information stored as the package information 124, and the information stored in the address database 126, a description thereof will be omitted.

図14は、第3の実施形態の検査管理装置150により実行される処理の流れを示すフローチャートである。まず、検査管理装置150の通信インターフェース152は、重量センサ60により測定された荷物Pの重量、およびカメラ50により撮像された画像を取得する(ステップS400、ステップS402)。 FIG. 14 is a flow chart showing the flow of processing executed by the inspection management apparatus 150 of the third embodiment. First, the communication interface 152 of the inspection management device 150 acquires the weight of the package P measured by the weight sensor 60 and the image captured by the camera 50 (steps S400 and S402).

次に、画像認識部166が、カメラ50により撮像された画像に対してOCR処理を実行する(ステップS404)。次に、管理部158が、OCR処理の結果により荷物Pに付与された識別情報が認識することができたか否かを判定する(ステップS406)。識別情報を認識することができなかった場合、ステップS418の処理に進む。 Next, the image recognition unit 166 performs OCR processing on the image captured by the camera 50 (step S404). Next, the management unit 158 determines whether or not the identification information given to the package P could be recognized as a result of the OCR processing (step S406). If the identification information cannot be recognized, the process proceeds to step S418.

識別情報を認識することができた場合、管理部158は、OCR処理の結果により検査に必要な所定の情報を取得することができたか否かを判定する(ステップS408)。検査に必要な所定の情報が取得できた場合、図7のステップS206からステップS222の処理を実行する。 If the identification information can be recognized, the management unit 158 determines whether or not the predetermined information required for the inspection has been acquired from the result of the OCR processing (step S408). If the predetermined information required for the inspection can be acquired, the processing from step S206 to step S222 in FIG. 7 is executed.

検査に必要な所定の情報が取得できていない場合、管理部158は、カメラ50により撮像された画像、およびOCR処理の処理結果を互いに対応付けてVCD70に送信する(ステップS410)。管理部158は、VCD70から情報を取得することができたか否かを判定する(ステップS412)。VCD70から情報を取得することができた場合、管理部158は、VCD70から取得した情報を荷物情報178として登録する(ステップS414)。 If the predetermined information necessary for the inspection has not been obtained, the management unit 158 associates the image captured by the camera 50 and the OCR processing result with each other and transmits them to the VCD 70 (step S410). The management unit 158 determines whether information could be acquired from the VCD 70 (step S412). If the information can be obtained from the VCD 70, the management section 158 registers the information obtained from the VCD 70 as the package information 178 (step S414).

次に、管理部158は、検査に必要な所定の情報を取得することができたか否かを判定する(ステップS416)。検査に必要な所定の情報を取得できた場合、図7のステップS206からステップS224の処理を実行し、本フローチャートの1ルーチンの処理は終了する。検査に必要な所定の情報を取得できていない場合、ステップS412に戻る。 Next, the management unit 158 determines whether or not the predetermined information necessary for the examination has been acquired (step S416). If the predetermined information necessary for the inspection can be acquired, the processing from step S206 to step S224 in FIG. 7 is executed, and the processing of one routine of this flowchart ends. If the predetermined information required for the inspection has not been obtained, the process returns to step S412.

ステップS412で、VCD70から検査に必要な所定の情報を取得することができなかった場合、位置特定部156は、荷物Pが主搬送路12とリジェクト搬送部13-1とが連結された箇所(分岐機構13-2)付近に存在するか否かを判定する(ステップS418)。 In step S412, if the predetermined information necessary for the inspection cannot be acquired from the VCD 70, the position specifying unit 156 determines the position where the package P is connected to the main transport path 12 and the reject transport unit 13-1 ( It is determined whether or not it exists near the branch mechanism 13-2) (step S418).

荷物Pがリジェクト搬送部13-1(分岐機構13-2)付近に存在しない場合、ステップS412の処理に戻る。荷物Pがリジェクト搬送部13-1(分岐機構13-2)付近に存在する場合、搬送制御部154は、分岐機構13-2を制御して、荷物Pをリジェクト搬送部13-1に搬送する(ステップS420)。これにより本フローチャートの1ルーチンの処理は終了する。 If the parcel P does not exist near the reject transport section 13-1 (branching mechanism 13-2), the process returns to step S412. When the parcel P exists near the reject conveying section 13-1 (branching mechanism 13-2), the conveyance control section 154 controls the branching mechanism 13-2 to convey the parcel P to the reject conveying section 13-1. (Step S420). This completes the processing of one routine in this flow chart.

以上説明した第3の実施形態によれば、検査装置18により検査される前に、検査に必要な所定の情報が取得されていない荷物Pは、自動的にリジェクト搬送部13-1に搬出される。この結果、検査に必要な所定の情報が取得されていない荷物Pが検査装置18に搬送されることを防止することができる。 According to the third embodiment described above, a package P for which predetermined information necessary for inspection has not been acquired before being inspected by the inspection device 18 is automatically carried out to the reject transport section 13-1. be. As a result, it is possible to prevent the package P from being conveyed to the inspection device 18 for which the predetermined information required for inspection has not been acquired.

以上説明した少なくともひとつの実施形態によれば、撮像部により撮像された荷物の画像に対して行われた画像認識の結果である荷物の識別情報および荷物の内容を少なくとも含む被認識情報と、前記撮像部により撮像された前記荷物の画像が送られた一以上の端末装置において入力された荷物の被認識情報とに基づいて、前記荷物の識別情報に、前記荷物の被認識情報が対応付けられたデータテーブルを管理するデータ管理部と、前記荷物に対して透過検査を行う検査装置の手前に設けられた識別情報取得部により取得された荷物の識別情報を用いて前記データ管理部により管理されるデータテーブルを参照し、前記被認識情報のうち前記荷物の検査に必要な所定の情報が揃っているか否かを判定する判定部と、前記判定部により前記所定の情報が揃っていないと判定された場合に、通知情報を出力部に出力させる出力制御部とを持つことにより、より円滑な処理を実現することができる。 According to at least one embodiment described above, the information to be recognized including at least the identification information of the package and the content of the package, which is the result of image recognition performed on the image of the package captured by the imaging unit; The information to be recognized of the package is associated with the identification information of the package on the basis of the information to be recognized of the package input in one or more terminal devices to which the image of the package captured by the imaging unit was sent. and a data management unit that manages a data table obtained by using the identification information of a package acquired by an identification information acquisition unit that is provided in front of an inspection device that performs a transmission inspection on the package. a determination unit for determining whether or not predetermined information necessary for inspection of the package is complete from the information to be recognized by referring to the data table stored therein, and determining that the predetermined information is not complete by the determination unit. By having an output control unit that outputs the notification information to the output unit when the notification information is received, smoother processing can be realized.

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
以下、本願の原出願の分割直前の特許請求の範囲に記載された発明を付記する。
[C1]
撮像部により撮像された荷物の画像に対して行われた画像認識の結果である荷物の識別情報および荷物の内容を少なくとも含む被認識情報と、前記撮像部により撮像された前記荷物の画像が送られた一以上の端末装置において入力された荷物の被認識情報とに基づいて、前記荷物の識別情報に、前記荷物の被認識情報が対応付けられたデータテーブルを管理するデータ管理部と、
前記荷物に対して透過検査を行う検査装置の手前に設けられた識別情報取得部により取得された荷物の識別情報を用いて前記データ管理部により管理されるデータテーブルを参照し、前記被認識情報のうち前記荷物の検査に必要な所定の情報が揃っているか否かを判定する判定部と、
前記判定部により前記所定の情報が揃っていないと判定された場合に、通知情報を出力部に出力させる出力制御部と、
を備える荷物検査システム。
[C2]
前記荷物の被認識情報は、前記荷物の宛先情報を含み、
前記検査装置は、前記荷物の透過画像を取得する装置であり、
前記検査装置により前記透過画像が取得された前記荷物の宛先情報に基づいて、前記荷物を区分部に区分する区分機構を、更に備える、
[C1]記載の荷物検査システム。
[C3]
前記荷物の被認識情報は、前記荷物の宛先情報を含み、
前記荷物を搬送機構により搬送しながら、前記荷物の宛先情報が得られた場合に、前記得られた宛先情報に基づいて、前記搬送している前記荷物を前記宛先情報に応じて区分部に区分する区分機構を、更に備え、
前記判定部は、前記区分機構により区分された荷物に対して、前記荷物の検査に必要な所定の情報が揃っているか否かを判定する、
[C1]記載の荷物検査システム。
[C4]
前記データ管理部は、前記撮像部により撮像された一つの荷物の画像を二以上の端末装置に送信し、前記画像が送信された二以上の前記端末装置のそれぞれにおいて、前記一つの荷物の画像に対して入力された異なる種類の被認識情報を、前記端末装置のそれぞれから取得し、取得した前記異なる種類の被認識情報を統合して、前記荷物の識別情報に、前記荷物の被認識情報が対応付けられたデータテーブルを管理する、
[C1]から[C3]のうちいずれか1つに記載の荷物検査システム。
While several embodiments of the invention have been described, these embodiments have been presented by way of example and are not intended to limit the scope of the invention. These embodiments can be implemented in various other forms, and various omissions, replacements, and modifications can be made without departing from the scope of the invention. These embodiments and their modifications are included in the scope and spirit of the invention, as well as the scope of the invention described in the claims and equivalents thereof.
Hereinafter, the inventions described in the claims immediately before the division of the original application of the present application will be added.
[C1]
Recognized information including at least identification information of the package and contents of the package, which is the result of image recognition performed on the image of the package captured by the imaging unit, and the image of the package captured by the imaging unit are transmitted. a data management unit that manages a data table in which the identification information of the package is associated with the information to be recognized of the package, based on the information to be recognized of the package that is input at one or more terminal devices;
The data table managed by the data management unit is referred to using the identification information of the package acquired by the identification information acquisition unit provided in front of the inspection device that performs the transmission inspection on the package, and the information to be recognized is obtained. A determination unit that determines whether or not predetermined information necessary for inspection of the baggage is complete,
an output control unit that outputs notification information to an output unit when the determination unit determines that the predetermined information is not complete;
baggage inspection system.
[C2]
the information to be recognized of the package includes destination information of the package;
The inspection device is a device that acquires a transmission image of the baggage,
further comprising a sorting mechanism that sorts the package into sorting units based on the destination information of the package for which the transmission image has been acquired by the inspection device;
[C1] The luggage inspection system described.
[C3]
the information to be recognized of the package includes destination information of the package;
When the destination information of the cargo is obtained while the cargo is being transported by the transport mechanism, the cargo being transported is sorted into classification units according to the destination information based on the obtained destination information. further comprising a segmentation mechanism for
The determination unit determines whether or not predetermined information necessary for inspection of the baggage is complete with respect to the baggage sorted by the sorting mechanism.
[C1] The luggage inspection system described.
[C4]
The data management unit transmits the image of one package imaged by the imaging unit to two or more terminal devices, and the image of the one package is transmitted to each of the two or more terminal devices to which the image is transmitted. different types of information to be recognized that have been input to the terminal device, and integrate the different types of information to be recognized that have been acquired to obtain the identification information of the package into the information to be recognized of the package manages the data table associated with
The baggage inspection system according to any one of [C1] to [C3].

1…区分システム、10…検査ユニット、30…仕分ユニット、50…カメラ、70…VCD、100…仕分管理装置、102…通信インターフェース、108…画像認識部、110…住所特定部、112…データ管理部、120…記憶部、122…第1画像データ、124…荷物情報、150…検査管理装置、152…通信インターフェース、154…搬送制御部、156…位置特定部、158…管理部、160…判定部、162…統計部、164…出力制御部、170…記憶部、174…第2画像、200…検査判定用端末装置 DESCRIPTION OF SYMBOLS 1... Sorting system, 10... Inspection unit, 30... Sorting unit, 50... Camera, 70... VCD, 100... Sorting management device, 102... Communication interface, 108... Image recognition unit, 110... Address specifying unit, 112... Data management Unit 120 Storage unit 122 First image data 124 Parcel information 150 Inspection management device 152 Communication interface 154 Conveyance control unit 156 Position specifying unit 158 Management unit 160 Determination Unit 162 Statistical unit 164 Output control unit 170 Storage unit 174 Second image 200 Inspection determination terminal device

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
以下、本願の原出願の分割直前の記載である
[C1]
撮像部により撮像された荷物の画像に対して行われた画像認識の結果である荷物の識別情報および荷物の内容を少なくとも含む被認識情報と、前記撮像部により撮像された前記荷物の画像が送られた一以上の端末装置において入力された荷物の被認識情報とに基づいて、前記荷物の識別情報に、前記荷物の被認識情報が対応付けられたデータテーブルを管理するデータ管理部と、
前記荷物に対して透過検査を行う検査装置の手前に設けられた識別情報取得部により取得された荷物の識別情報を用いて前記データ管理部により管理されるデータテーブルを参照し、前記被認識情報のうち前記荷物の検査に必要な所定の情報が揃っているか否かを判定する判定部と、
前記判定部により前記所定の情報が揃っていないと判定された場合に、通知情報を出力部に出力させる出力制御部と、
を備える荷物検査システム。
[C2]
前記荷物の被認識情報は、前記荷物の宛先情報を含み、
前記検査装置は、前記荷物の透過画像を取得する装置であり、
前記検査装置により前記透過画像が取得された前記荷物の宛先情報に基づいて、前記荷物を区分部に区分する区分機構を、更に備える、
[C1]記載の荷物検査システム。
[C3]
前記荷物の被認識情報は、前記荷物の宛先情報を含み、
前記荷物を搬送機構により搬送しながら、前記荷物の宛先情報が得られた場合に、前記得られた宛先情報に基づいて、前記搬送している前記荷物を前記宛先情報に応じて区分部に区分する区分機構を、更に備え、
前記判定部は、前記区分機構により区分された荷物に対して、前記荷物の検査に必要な所定の情報が揃っているか否かを判定する、
[C1]記載の荷物検査システム。
[C4]
前記データ管理部は、前記撮像部により撮像された一つの荷物の画像を二以上の端末装置に送信し、前記画像が送信された二以上の前記端末装置のそれぞれにおいて、前記一つの荷物の画像に対して入力された異なる種類の被認識情報を、前記端末装置のそれぞれから取得し、取得した前記異なる種類の被認識情報を統合して、前記荷物の識別情報に、前記荷物の被認識情報が対応付けられたデータテーブルを管理する、
[C1]から[C3]のうちいずれか1つに記載の荷物検査システム。
While several embodiments of the invention have been described, these embodiments have been presented by way of example and are not intended to limit the scope of the invention. These embodiments can be implemented in various other forms, and various omissions, replacements, and modifications can be made without departing from the scope of the invention. These embodiments and their modifications are included in the scope and spirit of the invention, as well as the scope of the invention described in the claims and equivalents thereof.
The following is the description immediately before the division of the original application of the present application.
[C1]
Recognized information including at least identification information of the package and contents of the package, which is the result of image recognition performed on the image of the package captured by the imaging unit, and the image of the package captured by the imaging unit are transmitted. a data management unit that manages a data table in which the identification information of the package is associated with the information to be recognized of the package, based on the information to be recognized of the package that is input at one or more terminal devices;
The data table managed by the data management unit is referred to using the identification information of the package acquired by the identification information acquisition unit provided in front of the inspection device that performs the transmission inspection on the package, and the information to be recognized is obtained. A determination unit that determines whether or not predetermined information necessary for inspection of the baggage is complete,
an output control unit that outputs notification information to an output unit when the determination unit determines that the predetermined information is not complete;
baggage inspection system.
[C2]
the information to be recognized of the package includes destination information of the package;
The inspection device is a device that acquires a transmission image of the baggage,
further comprising a sorting mechanism that sorts the package into sorting units based on the destination information of the package for which the transmission image has been acquired by the inspection device;
[C1] The luggage inspection system described.
[C3]
the information to be recognized of the package includes destination information of the package;
When the destination information of the cargo is obtained while the cargo is being transported by the transport mechanism, the cargo being transported is sorted into classification units according to the destination information based on the obtained destination information. further comprising a segmentation mechanism for
The determination unit determines whether or not predetermined information necessary for inspection of the baggage is complete with respect to the baggage sorted by the sorting mechanism.
[C1] The luggage inspection system described.
[C4]
The data management unit transmits the image of one package imaged by the imaging unit to two or more terminal devices, and the image of the one package is transmitted to each of the two or more terminal devices to which the image is transmitted. different types of information to be recognized that have been input to the terminal device, and integrate the different types of information to be recognized that have been acquired to obtain the identification information of the package into the information to be recognized of the package manages the data table associated with
The baggage inspection system according to any one of [C1] to [C3].

Claims (3)

撮像部により撮像された荷物の画像に対して行われた画像認識の結果である荷物の識別情報および荷物の内容を少なくとも含む被認識情報に基づいて、前記荷物の識別情報に、前記荷物の被認識情報が対応付けられたデータテーブルを管理するデータ管理部と、前記荷物に対して透過検査を行う検査装置と通信する通信インターフェースと、
前記識別情報に対応付けられた前記検査装置の検査結果を前記通信インターフェースを介して取得し、前記検査結果と前記識別情報に対応付けられた前記被認識情報が合致しなかった差出人を抽出して抽出履歴を蓄積する統計部と、
前記統計部が導出する差出人に関する情報を出力部に出力させる出力制御部と、
を備える検査管理装置。
Based on the identification information of the package, which is the result of image recognition performed on the image of the package captured by the imaging unit, and the information to be recognized including at least the contents of the package, the identification information of the package is combined with the identification information of the package. a data management unit that manages a data table associated with recognition information; a communication interface that communicates with an inspection device that performs a penetration inspection on the package;
Acquiring the inspection result of the inspection device associated with the identification information through the communication interface, and extracting a sender whose inspection result and the recognized information associated with the identification information did not match. a statistics unit that accumulates extraction histories;
an output control unit that causes an output unit to output information about the sender derived by the statistics unit;
inspection management device.
前記統計部は、前記検査結果と前記識別情報に対応付けられた前記被認識情報が合致しなかった回数が予め定められた閾値を超えた差出人に関する情報を導出する、
請求項1に記載の検査管理装置。
The statistical unit derives information about senders whose number of times the inspection result and the information to be recognized associated with the identification information do not match exceeds a predetermined threshold.
The inspection management device according to claim 1.
前記閾値は、開梱検査が行われた回数、検査の結果において違反と判定された回数、前記荷物の発送地の少なくともいずれか一つをパラメータとする、
請求項2に記載の検査管理装置。
The threshold is at least one of the number of times an unpacking inspection was performed, the number of times the inspection result was determined to be a violation, and the shipping location of the package,
The inspection management device according to claim 2.
JP2022194385A 2020-04-16 2022-12-05 Sorting control device and inspection system Active JP7395704B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022194385A JP7395704B2 (en) 2020-04-16 2022-12-05 Sorting control device and inspection system

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020073672A JP6896910B2 (en) 2016-07-20 2020-04-16 Inspection management device
JP2021095935A JP7192037B2 (en) 2020-04-16 2021-06-08 Sorting control device and inspection system
JP2022194385A JP7395704B2 (en) 2020-04-16 2022-12-05 Sorting control device and inspection system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2021095935A Division JP7192037B2 (en) 2020-04-16 2021-06-08 Sorting control device and inspection system

Publications (2)

Publication Number Publication Date
JP2023021238A true JP2023021238A (en) 2023-02-10
JP7395704B2 JP7395704B2 (en) 2023-12-11

Family

ID=77887135

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2021095935A Active JP7192037B2 (en) 2020-04-16 2021-06-08 Sorting control device and inspection system
JP2022194385A Active JP7395704B2 (en) 2020-04-16 2022-12-05 Sorting control device and inspection system

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2021095935A Active JP7192037B2 (en) 2020-04-16 2021-06-08 Sorting control device and inspection system

Country Status (1)

Country Link
JP (2) JP7192037B2 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6241119A (en) * 1985-08-16 1987-02-23 Toshiba Corp Cargo sorting device
JP2007093511A (en) * 2005-09-30 2007-04-12 Ishida Co Ltd X-ray inspection device
JP2012229105A (en) * 2011-04-27 2012-11-22 Cinetic Sorting Kk Apparatus and method for handling recognition result, and article processing system
JP2013220362A (en) * 2012-04-12 2013-10-28 Toshiba Corp Package sorting system

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8489232B2 (en) * 2008-09-30 2013-07-16 Amazon Technologies, Inc. Systems and methods for receiving shipment parcels

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6241119A (en) * 1985-08-16 1987-02-23 Toshiba Corp Cargo sorting device
JP2007093511A (en) * 2005-09-30 2007-04-12 Ishida Co Ltd X-ray inspection device
JP2012229105A (en) * 2011-04-27 2012-11-22 Cinetic Sorting Kk Apparatus and method for handling recognition result, and article processing system
JP2013220362A (en) * 2012-04-12 2013-10-28 Toshiba Corp Package sorting system

Also Published As

Publication number Publication date
JP2021151925A (en) 2021-09-30
JP7395704B2 (en) 2023-12-11
JP7192037B2 (en) 2022-12-19

Similar Documents

Publication Publication Date Title
EP3273394A1 (en) Package inspection system and package inspection program
US9301626B2 (en) Checkout counter
WO2016095777A1 (en) Object security inspection method and system based on object identification tag
JP2006103813A (en) Article tracking information storing method and article tracking information storing system
CN112099104B (en) Security inspection method and device
CN111783915B (en) Security check system and baggage tracking system thereof
JP5971694B2 (en) Luggage sorting system
KR102283197B1 (en) A method and device for determining the type of product
CN111757783B (en) Identification of articles that cannot be transported
JP6699890B2 (en) Luggage inspection system
US20220091296A1 (en) Inspection apparatus and inspection program
JP7192037B2 (en) Sorting control device and inspection system
JP2016168558A (en) Delivery object processing apparatus and delivery object processing program
JP2023115304A (en) Counter, control method, and program
JP6896910B2 (en) Inspection management device
KR20130007125A (en) Informing system for prohibited item in luggage
JP2022140466A (en) Delivery processor, delivery processing method and delivery processing program
JP2015147653A (en) Conveyance order determination device, delivery assorting system, and conveyance order determination method
CN112101498A (en) Contraband locating method and device
WO2020246255A1 (en) Information management device and information management program
JP7399754B2 (en) Control equipment, programs and systems
JP2000262985A (en) Automatic baggage sorting method and system
JP6632674B1 (en) Inspection device and inspection program
CN116618319A (en) Contraband express sorting method
WO2019208059A1 (en) Inspection system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221222

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221222

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20230313

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230929

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231031

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231129

R150 Certificate of patent or registration of utility model

Ref document number: 7395704

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150