JP7196681B2 - 判定装置、判定方法及びプログラム - Google Patents

Description

本発明は、判定装置、判定方法及びプログラムに関する。

旅客機への搭乗者が手荷物検査場を通過してから旅客機へ搭乗するまでの間に、手荷物を搭乗口付近等に置き忘れてしまうことが有る。そこで、従来、空港営業時間の終了後に警備員等の巡回により、手荷物の置き忘れの有無が確認されている。また、既に目的地に到着した後で手荷物を忘れたことに気付いた所有者からの連絡により、出発元の空港の職員によって、当該手荷物の所在が確認されている。

特開２０１４－１８６６５０号公報 特開２０１７－１６３４４号公報 特開平１－２４５３９５号公報 特開２００６－１７８９４２号公報

上記のように、空港での忘れ物は、空港の職員等の手作業によって確認が行われており、空港運営者にとって大きな負担となっている。

そこで、一側面では、本発明は、空港での忘れ物の確認作業の負担を軽減することを目的とする。

一つの態様では、判定装置は、空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶する関連付け部と、前記空港の搭乗口において取得された搭乗券情報に関連付けられて前記記憶部に記憶されている前記第１の画像情報が示す手荷物が、当該搭乗口において撮像された第２の画像情報に含まれているか否かを判定する判定部と、を有する。

一側面として、空港での忘れ物の確認作業の負担を軽減することができる。

本発明の実施の形態における忘れ物検知システム１の構成例を示す図である。 本発明の実施の形態における忘れ物検知装置１０のハードウェア構成例を示す図である。 本発明の実施の形態における忘れ物検知装置１０の機能構成例を示す図である。 搭乗者が手荷物検査場を通過する際に忘れ物検知装置１０が実行する処理手順の一例を説明するためのフローチャートである。 搭乗券情報ＤＢ１２１の構成例を示す図である。 人物情報ＤＢ１２３の構成例を示す図である。 手荷物情報ＤＢ１２２の構成例を示す図である。 搭乗口における手荷物の置き忘れの検知処理の処理手順の一例を説明するためのフローチャートである。 表示装置３３へのアラームの出力例を示す図である。 待機エリアにおける手荷物の置き忘れの検知処理の処理手順の一例を説明するためのフローチャートである。 カメラ情報ＤＢ１２６の構成例を示す図である。 候補手荷物情報ＤＢ１２４の構成例を示す図である。 アラームリスト１２９の構成例を示す図である。 検出人物情報ＤＢ１２５の構成例を示す図である。 忘れ物リストの表示例を示す図である

以下、図面に基づいて本発明の実施の形態を説明する。図１は、本発明の実施の形態における忘れ物検知システム１の構成例を示す図である。図１に示されるように、忘れ物検知システム１は、或る空港（以下、「空港Ｘ」という。）の手荷物検査場の各列に備えられた、搭乗券読取機２１、カメラ２２及びカメラ２３等の機器と、各搭乗口に備えられた搭乗券読取機３１、カメラ３２及び表示装置３３と、各搭乗口周辺において搭乗者が搭乗待ちをする所定のエリア（以下、「待機エリア」という。）ごとに１台以上設置されるカメラ４０等の機器と、忘れ物検知装置１０と、１以上の警備員端末５０とを含む。これら各機器及び警備員端末５０と忘れ物検知装置１０とは、例えば、ＬＡＮ（Local Area Network）等のネットワーク（有線又は無線の別は問わない。）を介して接続される。

搭乗券読取機２１は、手荷物検査場において、搭乗者から提示される２次元コード又はＩＣカード等（以下、便宜上、「搭乗券」という。）から、搭乗券に関する情報（以下、「搭乗券情報」という。）を読み取る。カメラ２２は、例えば、手荷物検査場におけるＸ線検査機から出てきた手荷物の画像を撮像する。カメラ２３は、例えば、手荷物検査場において、金属探知機を通り抜けてきた人物（搭乗者）の画像を撮像する。

搭乗券読取機３１は、搭乗口において、搭乗者から提示される２次元コード又はＩＣカード等から搭乗券情報を読み取る。カメラ３２は、搭乗口を通過中の人物（搭乗者）の画像を撮像する。表示装置３３は、例えば、液晶ディスプレイ等である。

カメラ４０は、当該カメラ４０の設置先である待機エリア（搭乗口周辺）の画像を撮像する。

忘れ物検知装置１０は、各機器によって得られる情報に基づいて、搭乗者による手荷物の置き忘れを自動的に検知する１以上のコンピュータである。

警備員端末５０は、空港内を巡回する警備員が携帯する端末である。例えば、スマートフォン又はタブレット端末等が警備員端末５０として利用されてもよい。

図２は、本発明の実施の形態における忘れ物検知装置１０のハードウェア構成例を示す図である。図２の忘れ物検知装置１０は、それぞれバスＢで相互に接続されているドライブ装置１００、補助記憶装置１０２、メモリ装置１０３、ＣＰＵ１０４、及びインタフェース装置１０５等を有する。

忘れ物検知装置１０での処理を実現するプログラムは、記録媒体１０１によって提供される。プログラムを記録した記録媒体１０１がドライブ装置１００にセットされると、プログラムが記録媒体１０１からドライブ装置１００を介して補助記憶装置１０２にインストールされる。但し、プログラムのインストールは必ずしも記録媒体１０１より行う必要はなく、ネットワークを介して他のコンピュータよりダウンロードするようにしてもよい。補助記憶装置１０２は、インストールされたプログラムを格納すると共に、必要なファイルやデータ等を格納する。

メモリ装置１０３は、プログラムの起動指示があった場合に、補助記憶装置１０２からプログラムを読み出して格納する。ＣＰＵ１０４は、メモリ装置１０３に格納されたプログラムに従って忘れ物検知装置１０に係る機能を実行する。インタフェース装置１０５は、ネットワークに接続するためのインタフェースとして用いられる。

なお、記録媒体１０１の一例としては、ＣＤ－ＲＯＭ、ＤＶＤディスク、又はＵＳＢメモリ等の可搬型の記録媒体が挙げられる。また、補助記憶装置１０２の一例としては、ＨＤＤ（Hard Disk Drive）又はフラッシュメモリ等が挙げられる。記録媒体１０１及び補助記憶装置１０２のいずれについても、コンピュータ読み取り可能な記録媒体に相当する。

図３は、本発明の実施の形態における忘れ物検知装置１０の機能構成例を示す図である。図３において、忘れ物検知装置１０は、搭乗券登録部１１、手荷物登録部１２、人物登録部１３、搭乗券情報取得部１４、搭乗口画像取得部１５、搭乗口忘れ物検知部１６及び待機エリア忘れ物検知部１７等を有する。これら各部は、忘れ物検知装置１０にインストールされた１以上のプログラムが、ＣＰＵ１０４に実行させる処理により実現される。忘れ物検知装置１０は、また、搭乗券情報ＤＢ１２１、手荷物情報ＤＢ１２２、人物情報ＤＢ１２３、候補手荷物情報ＤＢ１２４、検出人物情報ＤＢ１２５、カメラ情報ＤＢ１２６、搭乗口ＤＢ１２７、運行情報ＤＢ１２８及びアラームリスト１２９等を利用する。これら各データベース（記憶部）は、例えば、補助記憶装置１０２、又は忘れ物検知装置１０にネットワークを介して接続可能な記憶装置等を用いて実現可能である。

以下、忘れ物検知装置１０が実行する処理手順について説明する。図４は、搭乗者が手荷物検査場を通過する際に忘れ物検知装置１０が実行する処理手順の一例を説明するためのフローチャートである。

或る搭乗者（以下「人物Ａ」という。）が搭乗券読取機２１に対して搭乗券を翳すと、搭乗券登録部１１は、搭乗券読取機２１によって当該搭乗券から読み取られた搭乗券情報を取得し、当該搭乗券情報を搭乗券情報ＤＢ１２１に登録する（Ｓ１０１）。

図５は、搭乗券情報ＤＢ１２１の構成例を示す図である。図５に示されるように、搭乗券情報ＤＢ１２１には搭乗券情報ごとにレコードが記憶される。搭乗券情報は、搭乗券ＩＤ、登録日時、搭乗者名、搭乗便名、出発時刻、搭乗口及び優先搭乗フラグ等を含む。

搭乗券ＩＤは、搭乗券情報ＤＢ１２１の各レコードの識別情報であり、搭乗券情報が搭乗券情報ＤＢ１２１に登録される際に搭乗券登録部１１によって生成される。登録日時は、搭乗券情報が搭乗券情報ＤＢ１２１に登録された日時である。搭乗者名は、搭乗券情報に係る搭乗者の氏名である。搭乗便名は、搭乗券情報に係る搭乗券の搭乗便の名前である。出発時刻は、当該搭乗便の出発時刻である。搭乗口ＩＤは、当該搭乗便の搭乗口の識別情報である。優先搭乗フラグは、当該搭乗者が優先搭乗の対象者であるか否かを示す情報である。「１」は、優先搭乗の対象者であることを示し、「０」は、優先搭乗の対象外であることを示す。

続いて、例えば、人物Ａが金属探知機を通過したタイミングでカメラ２３が人物Ａを撮像すると、人物登録部１３は、カメラ２３によって撮像された画像情報（画像データ）をカメラ２３から取得する（Ｓ１０２）。続いて、人物登録部１３は、例えば、公知の画像解析技術を用いて、当該画像情報から人物Ａの外見の特徴情報を抽出する（Ｓ１０３）。続いて、人物登録部１３は、当該画像情報及び当該特徴情報と、ステップＳ１０１において登録された搭乗券情報の搭乗券ＩＤとを含む人物情報を人物情報ＤＢ１２３に登録する（Ｓ１０４）。

図６は、人物情報ＤＢ１２３の構成例を示す図である。図６に示されるように、人物情報ＤＢ１２３には人物情報ごとにレコードが記憶される。人物情報は、人物ＩＤ、登録日時、特徴情報、画像情報及び搭乗フラグ等を含む。

人物ＩＤは、人物情報ＤＢ１２３の各レコードの識別情報であり、人物情報が人物情報ＤＢ１２３に登録される際に人物登録部１３によって生成される。登録日時は、人物情報が人物情報ＤＢ１２３に登録された日時である。特徴情報、画像情報及び搭乗券ＩＤは、上記した通りである。搭乗フラグは、搭乗済みであるか否かを示す情報である。「１」は、搭乗済みであることを示し、「０」は、未搭乗であることを示す。搭乗フラグの初期値は「０」である。

続いて、例えば、人物Ａの手荷物がＸ線検査機を通過したタイミングでカメラ２２が手荷物を撮像すると、手荷物登録部１２は、カメラ２２によって撮像された画像情報をカメラ２２から取得する（Ｓ１０５）。続いて、手荷物登録部１２は、例えば、公知の画像解析技術を用いて、当該画像情報から手荷物の外見の特徴情報を抽出する（Ｓ１０６）。続いて、手荷物登録部１２は、当該画像情報及び当該特徴情報と、ステップＳ１０１において登録された搭乗券情報の搭乗券ＩＤとを含む手荷物情報を手荷物情報ＤＢ１２２に登録する（Ｓ１０７）。

図７は、手荷物情報ＤＢ１２２の構成例を示す図である。図７に示されるように、手荷物情報ＤＢ１２２には手荷物情報ごとにレコードが記憶される。手荷物情報は、手荷物ＩＤ、登録日時、特徴情報、画像情報及び搭乗フラグ等を含む。

手荷物ＩＤは、手荷物情報ＤＢ１２２の各レコードの識別情報であり、手荷物情報が手荷物情報ＤＢ１２２に登録される際に手荷物登録部１２によって生成される。登録日時は、手荷物情報が手荷物情報ＤＢ１２２に登録された日時である。特徴情報、画像情報及び搭乗券ＩＤは、上記した通りである。搭乗フラグは、搭乗済みであるか否かを示す情報である。「１」は、搭乗済みであることを示し、「０」は、未搭乗であることを示す。

なお、一人の搭乗者が複数の手荷物を有している場合も有る。したがって、手荷物情報は、手荷物ごとに手荷物情報ＤＢ１２２に登録される。例えば、図７において、１番目から３番目までのレコードの搭乗券ＩＤは共通している。これは、これら３つのレコードの手荷物情報に係る手荷物が、一人の搭乗者の手荷物であることを示す。

このように、搭乗者が手荷物検査場を通過すると、当該搭乗者に関する１つの搭乗券情報、１つの人物情報、手荷物ごとの手荷物情報が、搭乗券情報ＤＢ１２１、人物情報ＤＢ１２３又は手荷物情報ＤＢ１２２に登録される。一人の搭乗者に係る搭乗券情報、人物情報及び手荷物情報は、搭乗券ＩＤによって関連付けられる。

続いて、搭乗者が搭乗口を通過しようとした際に、当該搭乗者による手荷物の置き忘れを検知する処理について説明する。図８は、搭乗口における手荷物の置き忘れの検知処理の処理手順の一例を説明するためのフローチャートである。

人物Ａが、自らが搭乗予定の便の搭乗口の搭乗券読取機３１に対して搭乗券を翳すと、搭乗券情報取得部１４は、搭乗券読取機３１によって当該搭乗券から読み取られた搭乗券情報を取得する（Ｓ２０１）。当該搭乗券情報は、搭乗券ＩＤが含まれていないことを除き、図５に示した搭乗券情報と同様の構成を有する。

続いて、例えば、人物Ａが搭乗口に搭乗券を翳したタイミングでカメラ３２が当該搭乗口を撮像すると、搭乗口画像取得部１５は、カメラ３２によって撮像された画像情報をカメラ３２から取得する（Ｓ２０２）。

続いて、搭乗口忘れ物検知部１６は、ステップＳ２０１において取得された搭乗券情報と搭乗者名及び搭乗便名が一致する搭乗券情報を搭乗券情報ＤＢ１２１から検索し、検索された搭乗券情報の搭乗券ＩＤ（以下、「対象搭乗券ＩＤ」という。）を取得する（Ｓ２０３）。続いて、搭乗口忘れ物検知部１６は、対象搭乗券ＩＤを含む手荷物情報を手荷物情報ＤＢ１２２から検索する（Ｓ２０４）。続いて、搭乗口忘れ物検知部１６は、検索された手荷物情報ごとに、当該手荷物情報の特徴情報と、ステップＳ２０２において取得された画像情報とに基づく公知の画像処理により、当該特徴情報が示す手荷物が当該画像情報に含まれているか否かを判定する（Ｓ２０６）。すなわち、手荷物検査場において人物Ａの手荷物として特定された全ての手荷物が、搭乗口において人物Ａによって携帯されているか否かが判定される。

いずれか１以上の手荷物情報（以下、「検知対象手荷物情報」という。）に係る手荷物が当該画像情報に含まれていない場合（Ｓ２０６でＹｅｓ）、搭乗口忘れ物検知部１６は、手荷物の置き忘れの可能性を通知するためのアラームを表示装置３３へ出力する（Ｓ２０７）。

図９は、表示装置３３へのアラームの出力例を示す図である。図９に示されるように、アラームには、忘れ物をしている可能性を示すメッセージが表示される。また、検知対象手荷物情報の画像情報が、アラームに含まれてもよい。そうすることで、いずれの手荷物が置き忘れの対象であることを明示することができる。

一方、全ての手荷物情報に係る手荷物が当該画像情報に含まれている場合（Ｓ２０６でＮｏ）、搭乗口忘れ物検知部１６は、人物情報ＤＢ１２３（図６）のレコードの中で、対象搭乗券ＩＤを含むレコードの搭乗フラグを「１」に更新する（Ｓ２０８）。続いて、搭乗口忘れ物検知部１６は、手荷物情報ＤＢ１２２（図７）のレコードの中で、対象搭乗券ＩＤを含むレコードの搭乗フラグを「１」に更新する（Ｓ２０９）。

図８の処理手順によれば、手荷物を置き忘れた搭乗者の搭乗時に当該手荷物の置き忘れを検知出来るため、当該搭乗者が手荷物を置き忘れたまま出発してしまう可能性を低減することができる。

図１０は、待機エリアにおける手荷物の置き忘れの検知処理の処理手順の一例を説明するためのフローチャートである。図１０の処理手順は、カメラ４０ごとに並列的に実行される。以下、説明の対象とするカメラ４０を「対象カメラ４０」という。

ステップＳ３０１において、待機エリア忘れ物検知部１７は、現在時刻が、対象カメラ４０の設置先の待機エリアの付近の搭乗口からの出発便の搭乗開始時刻から当該出発便の出発時刻の間の期間内であるか否かを判定する。現在時刻が当該期間内である場合（Ｓ３０１でＹｅｓ）、ステップＳ３０２以降が実行される。すなわち、ステップＳ３０２以降は、当該搭乗口からの出発便の搭乗開始時刻が到来するたびに実行される。対象カメラ４０に対応する搭乗口は、カメラ情報ＤＢ１２６を参照して特定可能である。

図１１は、カメラ情報ＤＢ１２６の構成例を示す図である。図１１に示されるように、カメラ情報ＤＢ１２６には、各待機エリアに設置されたカメラ４０ごとに、カメラＩＤ、無人時画像データ及び近接搭乗口ＩＤ等が記憶されている。カメラＩＤは、各カメラ４０の識別情報である。無人時画像データは、当該カメラ４０の撮像範囲に対応する待機エリアが無人状態である際に当該カメラ４０によって撮像された画像データである。なお、無人状態とは、人物が存在せず、かつ、手荷物も置かれていない状態をいう。近接搭乗口ＩＤは、当該カメラ４０に対応する待機エリア付近の搭乗口の識別情報である。２以上の搭乗口に係る待機エリアに対応するカメラ４０には、各搭乗口の搭乗口ＩＤがカンマ「，」で区切られて記憶されている。

また、各搭乗口の出発便の搭乗開始時刻及び出発時刻は、搭乗口ＩＤに関連付けられて搭乗口ＤＢ１２７に記憶されている。なお、優先搭乗者であるか否かによって搭乗開始時刻は異なる。したがって、搭乗口ＤＢ１２７には、出発便ごとに、優先搭乗者の搭乗開始時刻（以下、「優先搭乗開始時刻」という。）と、優先搭乗者以外の搭乗開始時刻（以下、「一般搭乗開始時刻」という。）とが記憶されていてもよい。

したがって、待機エリア忘れ物検知部１７は、対象カメラ４０に対応する搭乗口の搭乗口ＩＤをカメラ情報ＤＢ１２６を参照して特定しておき、当該搭乗口ＩＤに係る搭乗口（以下、「対象搭乗口」という。）の各搭乗開始時刻及び出発時刻を搭乗口ＤＢ１２７を参照して特定しておくことで、ステップＳ３０１の判定を行う。この際の判定に利用される出発便は、対象搭乗口において未だ出発していない出発便の中で出発時刻が最も早い出発便（以下、「対象出発便」という。）である。また、この際の判定に利用される搭乗開始時刻は、対象出発便に関して最も早い搭乗開始時刻である。具体的には、対象出発便に対して優先搭乗が行われる場合には、当該優先搭乗の搭乗開始時刻である。

ステップＳ３０２において、待機エリア忘れ物検知部１７は、対象カメラ４０によって現在撮像されている待機エリアの画像（以下、「現在画像」という。）を対象カメラ４０から取得する。続いて、待機エリア忘れ物検知部１７は、現在画像から人物及び手荷物を検出し、それぞれの特徴情報を公知の画像処理により取得する（Ｓ３０３）。なお、現在画像からの人物及び荷物の検出には、対象カメラ４０のカメラＩＤに関連付けられてカメラ情報ＤＢ１２６に記憶されている無人時画像データが利用されてもよい。具体的には、待機エリア忘れ物検知部１７は、当該無人時画像エリアと現在画像との差分領域を検出し、各差分領域について人物、手荷物又はその他に分類することで、人物及び手荷物を検出してもよい。

続いて、待機エリア忘れ物検知部１７は、現在画像から１以上の手荷物が検出されたか否かを判定する（Ｓ３０４）。手荷物が検出されていない場合（Ｓ３０４でＮｏ）、置き忘れられた手荷物は無いと考えられるため、待機エリア忘れ物検知部１７は、所定時間（例えば、１分等）待機後に（Ｓ３１７）、ステップＳ３０１に戻る。

現在画像から１以上の手荷物（以下、「検出手荷物」という。）が検出された場合（Ｓ３０４でＹｅｓ）、待機エリア忘れ物検知部１７は、当該各検出手荷物の特徴情報に基づいて、手荷物情報ＤＢ１２２（図７）から当該各検出手荷物に対応する各手荷物情報を検索する（Ｓ３０５）。例えば、当該特徴情報を、手荷物情報ＤＢ１２２の各レコードの特徴情報又は画像情報と比較することで、検出手荷物に対応する手荷物情報が検索されてもよい。この際、比較対象（検索範囲）とされる手荷物情報ＤＢ１２２レコードは、搭乗フラグが「０」であるレコードに限定されてもよい。更に、比較対象（検索範囲）とされるレコードは、対象搭乗口の搭乗口ＩＤを含む搭乗券情報（図５）の搭乗券ＩＤを含むレコードに限定されてもよい。すなわち、待機エリア忘れ物検知部１７は、これらの条件に該当するレコードを手荷物情報ＤＢ１２２から抽出し、抽出されたレコード群を比較対象としてもよい。そうすることで、ステップＳ３０５の処理負荷を軽減することができる。空港への入場者は多数であるため、手荷物情報ＤＢ１２２のレコード数は膨大になるからである。

続いて、待機エリア忘れ物検知部１７は、各検出手荷物の搭乗開始時刻を取得する（Ｓ３０６）。具体的には、待機エリア忘れ物検知部１７は、ステップＳ３０５において検索された各手荷物情報の搭乗券ＩＤに基づいて各搭乗券情報を搭乗券情報ＤＢ１２１（図５）から検索し、各搭乗券情報の搭乗便名に基づいて、搭乗開始時刻を取得することができる。なお、各搭乗便名の搭乗開始時刻（優先搭乗開始時刻及び一般搭乗開始時刻）は、運行情報ＤＢ１２８に記憶されている。ここで、優先搭乗フラグが「１」である搭乗券情報の搭乗券ＩＤを含む手荷物情報に係る検出手荷物については、優先搭乗開始時刻が取得される。

続いて、待機エリア忘れ物検知部１７は、各検出手荷物について、現時点において搭乗済み（搭乗中も含む。）の予定であるか（各検出手荷物がそれぞれの搭乗開始時刻以降であるか）否かを判定する（Ｓ３０７）。具体的には、ステップＳ３０６において取得された搭乗予定時刻が現時点以前である検出手荷物（以下、「候補手荷物」という。）の有無が判定される。候補手荷物が無い場合（Ｓ３０７でＮｏ）、待機エリア忘れ物検知部１７は、所定時間（例えば、１分等）待機後に（Ｓ３１７）、ステップＳ３０１に戻る。

１以上の候補手荷物が有る場合（Ｓ３０７でＹｅｓ）、待機エリア忘れ物検知部１７は、各候補手荷物に関する情報を候補手荷物情報ＤＢ１２４へ登録する（Ｓ３０８）。

図１２は、候補手荷物情報ＤＢ１２４の構成例を示す図である。図１２に示されるように、候補手荷物情報ＤＢ１２４には、候補手荷物ごとに、手荷物ＩＤ、撮像日時、カメラＩＤ、Ｘ座標、Ｙ座標、特徴情報、画像情報及び搭乗券ＩＤ等が記憶される。

手荷物ＩＤ及び搭乗券は、候補手荷物の手荷物情報に含まれている手荷物ＩＤ又は搭乗券ＩＤである。撮像日時は、現在画像の撮像日時である。カメラＩＤは、対象カメラ４０のカメラＩＤである。Ｘ座標及びＹ座標は、候補手荷物の位置を示す座標値である。これらの座標値は、例えば、現在画像における画素単位での値でもよいし、空港全体又は対象カメラ４０に対応する待機エリアの座標系に変換された値でもよい。特徴情報は、候補手荷物に関してステップＳ３０３において取得された特徴情報である。画像情報は、候補手荷物に関してステップＳ３０３において特定された領域の画像情報である。但し、特徴情報及び画像情報は、候補手荷物の手荷物情報に含まれている値が転記されてもよい。

なお、本実施の形態では、便宜上、候補手荷物情報ＤＢ１２４は、カメラ４０ごとに設けられることとする。

続いて、待機エリア忘れ物検知部１７は、ステップＳ３０３において、現在画像から１以上の人物が検出されているか否かを判定する（Ｓ３０９）。人物が検出されていない場合（Ｓ３０９でＮｏ）、搭乗口忘れ物検知部１６は、各候補手荷物の手荷物情報等をアラームリスト１２９へ登録する（Ｓ３１５）。この場合、各候補手荷物の付近には人物が居ないということになり、各候補手荷物は置き忘れられた可能性が高いと考えられるからである。

図１３は、アラームリスト１２９の構成例を示す図である。図１３に示されるように、アラームリスト１２９の各レコードは、手荷物ＩＤ、検出日時、通知フラグ、搭乗口ＩＤ、画像情報、搭乗券ＩＤ及び搭乗者名等を含む。手荷物ＩＤ、画像情報及び搭乗券ＩＤは、候補手荷物に関して候補手荷物情報ＤＢ１２４に記憶されている値が転記される。検出日時には、現在日時が記憶される。通知フラグは、当該候補手荷物を警備員に通知済みであるか否かを示す情報である。「０」は、未通知であることを示し、「１」は、通知済みであることを示す。通知フラグの初期値は「０」である。搭乗口ＩＤには、対象カメラ４０に対応する搭乗口ＩＤが登録される。搭乗者名には、搭乗券情報ＤＢ１２１から搭乗券ＩＤに対応付けられて記憶されている搭乗者名が転記される。

一方、現在画像から１以上の人物（以下、「検出人物」という。）が検出された場合（Ｓ３０９でＹｅｓ）、待機エリア忘れ物検知部１７は、当該各検出人物の特徴情報に基づいて、人物情報ＤＢ１２３（図６）から当該各検出人物に対応する各人物情報を検索し、検出人物に関する情報を検出人物情報ＤＢ１２５へ登録する（Ｓ３１０）。例えば、検出人物の特徴情報を、人物情報ＤＢ１２３の各レコードの特徴情報又は画像情報と比較することで、検出人物に対応する人物情報が検索されてもよい。この際、比較対象（検索範囲）とされるレコードは、搭乗フラグが「０」であるレコードに限定されてもよい。更に、比較対象（検索範囲）とされるレコードは、対象搭乗口の搭乗口ＩＤを含む搭乗券情報（図５）の搭乗券ＩＤを含むレコードに限定されてもよい。そうすることで、ステップＳ３１０の処理負荷を軽減することができる。ステップＳ３０５に関して述べたように、空港への入場者は多数であるため、人物情報ＤＢ１２３のレコード数は膨大になるからである。

図１４は、検出人物情報ＤＢ１２５の構成例を示す図である。図１４に示されるように、検出人物情報ＤＢ１２５には、検出人物ごとに、人物ＩＤ、撮像日時、カメラＩＤ、Ｘ座標、Ｙ座標、特徴情報、画像情報及び搭乗券ＩＤ等が記憶される。

手荷物ＩＤ及び搭乗券は、検出人物の人物情報に含まれている人物ＩＤ又は搭乗券ＩＤである。撮像日時は、現在画像の撮像日時である。カメラＩＤは、対象カメラ４０のカメラＩＤである。Ｘ座標及びＹ座標は、検出人物の位置を示す座標値である。これらの座標値は、例えば、現在画像における画素単位での値でもよいし、空港全体又は対象カメラ４０に対応する待機エリアの座標系に変換された値でもよい。特徴情報は、検出人物に関してステップＳ３０３において取得された特徴情報である。画像情報は、検出人物に関してステップＳ３０３において特定された領域の画像情報である。但し、特徴情報及び画像情報は、検出人物の人物情報に含まれている値が転記されてもよい。

なお、本実施の形態では、便宜上、検出人物情報ＤＢ１２５は、カメラ４０ごとに設けられることとする。

続いて、待機エリア忘れ物検知部１７は、候補手荷物情報ＤＢ１２４に記憶されている各候補手荷物のレコードと、検出人物情報ＤＢ１２５に記憶されている各検出人物のレコードとを搭乗券ＩＤに基づいてマッチングする（Ｓ３１１）。すなわち、各候補手荷物に対して、同じ搭乗券ＩＤに関連付いている検出人物を関連付ける。

マッチングに漏れた候補手荷物（すなわち、共通する搭乗券ＩＤに係る検出人物が居ない候補手荷物）が有る場合（Ｓ３１２でＹｅｓ）、待機エリア忘れ物検知部１７は、当該候補手荷物をアラームリスト１２９（図１３）へ登録する（Ｓ３１３）。

ステップＳ３１２でＮｏの場合、又はステップＳ３１３に続いて、待機エリア忘れ物検知部１７は、検出人物に関連付けられ候補手荷物の中で、関連付けられた検出人物（すなわち、候補手荷物の所有者）との距離が閾値以上である候補手荷物の有無を判定する（Ｓ３１４）。斯かる判定は、候補手荷物に関して候補手荷物情報ＤＢ１２４（図１２）に記憶されるＸ座標及びＹ座標と、当該候補手荷物に関連付けられた検出人物に関して検出人物情報ＤＢ１２５（図１４）に記憶されているＸ座標及びＹ座標とを比較することで行われてもよい。

該当する候補手荷物が有る場合（Ｓ３１４でＹｅｓ）、待機エリア忘れ物検知部１７は、当該候補手荷物をアラームリスト１２９（図１３）へ登録する（Ｓ３１５）。

ステップＳ３１４でＮｏの場合、又はステップＳ３１５に続いて、待機エリア忘れ物検知部１７は、アラームリスト１２９のうち、通知フラグが「０」であるレコード群を警備員端末５０へ送信する（Ｓ３１６）。待機エリア忘れ物検知部１７は、送信された各レコードの通知フラグを「１」に更新する。

当該レコード群を受信した警備員端末５０は、当該レコード群に基づいて忘れ物リストを表示する。

図１５は、忘れ物リストの表示例を示す図である。図１５に示されるように、忘れ物リストには、待機エリア忘れ物検知部１７によって送信されたレコードごとに、検出日時、搭乗口、画像情報及び搭乗者名等が含まれる。警備員は、忘れ物リストを参照して、いずれの搭乗口にどのような手荷物が置き忘れられているのかを確認することができる。

図１０の処理手順によれば、手荷物を置き忘れた搭乗者の搭乗前に当該手荷物の置き忘れを検知出来る可能性があるので、当該搭乗者が手荷物を置き忘れたまま出発してしまう可能性を低減することができる。

上述したように、本実施の形態によれば、忘れ物検知装置１０によって自動的に手荷物の置き忘れ（すなわち、忘れ物）を検知することができる。したがって、空港での忘れ物の確認作業の負担を軽減することができる。

なお、本実施の形態において、忘れ物検知装置１０は、判定装置の一例である。搭乗券登録部１１、手荷物登録部１２及び人物登録部１３は、関連付け部の一例である。搭乗口忘れ物検知部１６及び待機エリア忘れ物検知部１７は、判定部の一例である。

以上、本発明の実施の形態について詳述したが、本発明は斯かる特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。

以上の説明に関し、更に以下の項を開示する。
（付記１）
空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶する関連付け部と、
前記空港の搭乗口において取得された搭乗券情報に関連付けられて前記記憶部に記憶されている前記第１の画像情報が示す手荷物が、当該搭乗口において撮像された第２の画像情報に含まれているか否かを判定する判定部と、
を有することを特徴とする判定装置。
（付記２）
空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶する関連付け部と、
前記記憶部に記憶されている前記第１の画像情報が示す手荷物が前記空港の搭乗口からの所定のエリアにおいて撮像される第３の画像情報に含まれている場合に、当該手荷物から所定の範囲に人物が存在するか否かを前記第３の画像情報に基づいて判定する判定部と、
を有することを特徴とする判定装置。
（付記３）
前記判定部は、前記記憶部に記憶されている前記第１の画像情報のうち、前記搭乗口に係る搭乗券情報に関連付けられている前記第１の画像情報を抽出し、抽出した前記第１の画像情報が示す手荷物が前記所定のエリアにおいて撮像される第３の画像情報に含まれている場合に、当該手荷物から所定の範囲内に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
ことを特徴とする付記２記載の判定装置。
（付記４）
前記関連付け部は、前記搭乗券情報、前記第１の画像情報、及び前記手荷物検査場において撮像された搭乗者の第４の画像情報を関連付けて前記記憶部に記憶し、
前記判定部は、前記第１の画像情報が示す手荷物が前記第３の画像情報に含まれている場合に、当該第１の画像情報に関連付けられて前記記憶部に記憶されている前記第４の画像情報が示す前記搭乗者が、当該手荷物から所定の範囲内に存在するか否かを前記第３の画像情報に基づいて判定する、
ことを特徴とする付記２又は３記載の判定装置。
（付記５）
前記判定部は、前記搭乗券情報に係る搭乗開始時刻以降において、前記手荷物から所定の範囲内に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
ことを特徴とする付記２乃至４いずれか一項記載の判定装置。
（付記６）
空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶し、
前記空港の搭乗口において取得された搭乗券情報に関連付けられて前記記憶部に記憶されている前記第１の画像情報が示す手荷物が、当該搭乗口において撮像された第２の画像情報に含まれているか否かを判定する、
処理をコンピュータが実行することを特徴とする判定方法。
（付記７）
空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶し、
前記記憶部に記憶されている前記第１の画像情報が示す手荷物が前記空港の搭乗口からの所定のエリアにおいて撮像される第３の画像情報に含まれている場合に、当該手荷物から所定の範囲に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
処理をコンピュータが実行することを特徴とする判定方法。
（付記８）
前記判定する処理は、前記記憶部に記憶されている前記第１の画像情報のうち、前記搭乗口に係る搭乗券情報に関連付けられている前記第１の画像情報を抽出し、抽出した前記第１の画像情報が示す手荷物が前記所定のエリアにおいて撮像される第３の画像情報に含まれている場合に、当該手荷物から所定の範囲内に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
ことを特徴とする付記７記載の判定方法。
（付記９）
前記記憶する処理は、前記搭乗券情報、前記第１の画像情報、及び前記手荷物検査場において撮像された搭乗者の第４の画像情報を関連付けて前記記憶部に記憶し、
前記判定する処理は、前記第１の画像情報が示す手荷物が前記第３の画像情報に含まれている場合に、当該第１の画像情報に関連付けられて前記記憶部に記憶されている前記第４の画像情報が示す前記搭乗者が、当該手荷物から所定の範囲内に存在するか否かを前記第３の画像情報に基づいて判定する、
ことを特徴とする付記７又は８記載の判定方法。
（付記１０）
前記判定する処理は、前記搭乗券情報に係る搭乗開始時刻以降において、前記手荷物から所定の範囲内に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
ことを特徴とする付記７乃至９いずれか一項記載の判定方法。
（付記１１）
空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶し、
前記空港の搭乗口において取得された搭乗券情報に関連付けられて前記記憶部に記憶されている前記第１の画像情報が示す手荷物が、当該搭乗口において撮像された第２の画像情報に含まれているか否かを判定する、
処理をコンピュータに実行させることを特徴とするプログラム。
（付記１２）
空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶し、
前記記憶部に記憶されている前記第１の画像情報が示す手荷物が前記空港の搭乗口からの所定のエリアにおいて撮像される第３の画像情報に含まれている場合に、当該手荷物から所定の範囲に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
処理をコンピュータが実行することを特徴とするプログラム。
（付記１３）
前記判定する処理は、前記記憶部に記憶されている前記第１の画像情報のうち、前記搭乗口に係る搭乗券情報に関連付けられている前記第１の画像情報を抽出し、抽出した前記第１の画像情報が示す手荷物が前記所定のエリアにおいて撮像される第３の画像情報に含まれている場合に、当該手荷物から所定の範囲内に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
ことを特徴とする付記１２記載のプログラム。
（付記１４）
前記記憶する処理は、前記搭乗券情報、前記第１の画像情報、及び前記手荷物検査場において撮像された搭乗者の第４の画像情報を関連付けて前記記憶部に記憶し、
前記判定する処理は、前記第１の画像情報が示す手荷物が前記第３の画像情報に含まれている場合に、当該第１の画像情報に関連付けられて前記記憶部に記憶されている前記第４の画像情報が示す前記搭乗者が、当該手荷物から所定の範囲内に存在するか否かを前記第３の画像情報に基づいて判定する、
ことを特徴とする付記１２又は１３記載のプログラム。
（付記１５）
前記判定する処理は、前記搭乗券情報に係る搭乗開始時刻以降において、前記手荷物から所定の範囲内に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
ことを特徴とする付記１２乃至１４いずれか一項記載のプログラム。

１ 忘れ物検知システム
１０ 忘れ物検知装置
１１ 搭乗券登録部
１２ 手荷物登録部
１３ 人物登録部
１４ 搭乗券情報取得部
１５ 搭乗口画像取得部
１６ 搭乗口忘れ物検知部
１７ 待機エリア忘れ物検知部
２１ 搭乗券読取機
２２ カメラ
２３ カメラ
３１ 搭乗券読取機
３２ カメラ
３３ 表示装置
４０ カメラ
５０ 警備員端末
１００ ドライブ装置
１０１ 記録媒体
１０２ 補助記憶装置
１０３ メモリ装置
１０４ ＣＰＵ
１０５ インタフェース装置
１２１ 搭乗券情報ＤＢ
１２２ 手荷物情報ＤＢ
１２３ 人物情報ＤＢ
１２４ 候補手荷物情報ＤＢ
１２５ 検出人物情報ＤＢ
１２６ カメラ情報ＤＢ
１２７ 搭乗口ＤＢ
１２８ 運行情報ＤＢ
１２９ アラームリスト
Ｂ バス

Claims (9)

1. 空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶する関連付け部と、
   前記空港の搭乗口において取得された搭乗券情報に関連付けられて前記記憶部に記憶されている前記第１の画像情報が示す手荷物が、当該搭乗口において撮像された第２の画像情報に含まれているか否かを判定する判定部と、
   を有することを特徴とする判定装置。
2. 空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶する関連付け部と、
   前記記憶部に記憶されている前記第１の画像情報が示す手荷物が前記空港の搭乗口からの所定のエリアにおいて撮像される第３の画像情報に含まれている場合に、当該手荷物から所定の範囲に人物が存在するか否かを前記第３の画像情報に基づいて判定する判定部と、
   を有することを特徴とする判定装置。
3. 前記判定部は、前記記憶部に記憶されている前記第１の画像情報のうち、前記搭乗口に係る搭乗券情報に関連付けられている前記第１の画像情報を抽出し、抽出した前記第１の画像情報が示す手荷物が前記所定のエリアにおいて撮像される第３の画像情報に含まれている場合に、当該手荷物から所定の範囲内に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
   ことを特徴とする請求項２記載の判定装置。
4. 前記関連付け部は、前記搭乗券情報、前記第１の画像情報、及び前記手荷物検査場において撮像された搭乗者の第４の画像情報を関連付けて前記記憶部に記憶し、
   前記判定部は、前記第１の画像情報が示す手荷物が前記第３の画像情報に含まれている場合に、当該第１の画像情報に関連付けられて前記記憶部に記憶されている前記第４の画像情報が示す前記搭乗者が、当該手荷物から所定の範囲内に存在するか否かを前記第３の画像情報に基づいて判定する、
   ことを特徴とする請求項２又は３記載の判定装置。
5. 前記判定部は、前記搭乗券情報に係る搭乗開始時刻以降において、前記手荷物から所定の範囲内に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
   ことを特徴とする請求項２乃至４いずれか一項記載の判定装置。
6. 空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶し、
   前記空港の搭乗口において取得された搭乗券情報に関連付けられて前記記憶部に記憶されている前記第１の画像情報が示す手荷物が、当該搭乗口において撮像された第２の画像情報に含まれているか否かを判定する、
   処理をコンピュータが実行することを特徴とする判定方法。
7. 空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶し、
   前記記憶部に記憶されている前記第１の画像情報が示す手荷物が前記空港の搭乗口からの所定のエリアにおいて撮像される第３の画像情報に含まれている場合に、当該手荷物から所定の範囲に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
   処理をコンピュータが実行することを特徴とする判定方法。
8. 空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶し、
   前記空港の搭乗口において取得された搭乗券情報に関連付けられて前記記憶部に記憶されている前記第１の画像情報が示す手荷物が、当該搭乗口において撮像された第２の画像情報に含まれているか否かを判定する、
   処理をコンピュータに実行させることを特徴とするプログラム。
9. 空港の手荷物検査場において取得された搭乗券情報及び前記手荷物検査場において撮像された手荷物の第１の画像情報を関連付けて記憶部に記憶し、
   前記記憶部に記憶されている前記第１の画像情報が示す手荷物が前記空港の搭乗口からの所定のエリアにおいて撮像される第３の画像情報に含まれている場合に、当該手荷物から所定の範囲に人物が存在するか否かを前記第３の画像情報に基づいて判定する、
   処理をコンピュータが実行することを特徴とするプログラム。

Images