JP2002329201A - 物検索装置、物検索方法、およびコンピュータにおいてその装置を実現するプログラム - Google Patents

Abstract

(57)【要約】 【課題】 対象物に機能を付加することなく人が置き忘
れた対象物を認知する。 【解決手段】 紛失物検索装置は、人の視覚領域を撮像
するカメラ部２００と、テンプレートを記憶する画像記
憶部１２４と、カメラ部２００により撮像された画像デ
ータの中に画像記憶部１２４に記憶されたテンプレート
があるか否かを逐次検知する制御回路１１０と、画像デ
ータを出力するモニタ１０８とを含む。制御回路１１０
はさらに、画像データの中にテンプレートが検知されな
くなると、検知されなくなる直前の画像データを、検知
されなくなったテンプレートに対応付けて画像記憶部１
２４に記憶する回路と、入力回路１０６からテンプレー
トの選択が入力されると、選択されたテンプレートに対
応付けて画像記憶部１２４に記憶された画像データをモ
ニタ１０８に表示させる回路とを含む。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、置き忘れた物を検
知する技術に関し、特に、記録された撮像画像に基づい
て置き忘れた物の存在場所を人に認知させる技術に関す
る。

【０００２】

【従来の技術】日々の生活の中で、ある物の所在がわか
らなくなった場合、人は記憶をたどって、その物がどこ
にあるのかを思い出そうとする。しかし、所在がわから
なくなった物を最後に手に取ったのが遠い過去である場
合、所在がわからなくなった物を無意識にどこかへ格納
した場合、加齢に伴い記憶能力が減退した人である場合
には、記憶をたどってもその所在を明らかにすることが
できないことが多い。

【０００３】紛失物を検索する技術として、特開２００
０−１８８７０１号公報に開示される迷子リモコン探知
システムがある。この公報に開示された迷子リモコン探
知システムは、紛失したテレビ受像機用のリモコンを探
すためのシステムであって、テレビ受像機側に設けら
れ、そのテレビ受像機のリモコンに向けて信号を発信す
るための発信手段と、リモコンに設けられ、発信手段か
らの信号を受信するための受信手段および受信手段によ
り受信した信号に基づいて警報を出力するための出力手
段とを含む。

【０００４】この公報に開示された迷子リモコン探知シ
ステムによると、テレビ受像機用のリモコンを紛失する
と、テレビ受像機側に設けられた発信手段を用いて探知
信号を発信する。探知信号の受信範囲内にリモコンがあ
ると、リモコン側に設けられた受信手段が探知信号を受
信して、出力手段が受信した探知信号に基づいて警報を
出力する。人は、出力手段から出力された警報により、
リモコンの所在を認知することができる。これにより、
リモコンを紛失しても、容易に探し出すことができる。

【０００５】

【発明が解決しようとする課題】しかしながら、前述の
公報に開示された迷子リモコン探知システムにおいて
は、探査対象となるリモコンに受信手段と出力手段とを
設けなければならない。所在がわからなくなる可能性の
ある、身の周りの全ての物にこのような受信手段と出力
手段とを設けることは不可能である。

【０００６】本発明は、上述の課題を解決するためにな
されたものであって、所在のわからなくなる可能性のあ
る物に特別な機能を付加することなく、人が置き忘れた
物を認知することができる物検索装置、物検索方法およ
びその装置をコンピュータに実現させるプログラムを提
供することである。

【０００７】

【課題を解決するための手段】第１の発明に係る物検索
装置は、画像データを受取るための受取手段と、特定の
物を表わすデータを記憶するための第１の記憶手段と、
受取手段と第１の記憶手段とに接続され、画像データと
特定の物を表わすデータとに基づいて、画像データの中
に特定の物があるか否かを逐次検知するための検知手段
と、受取手段と検知手段とに接続され、検知手段により
検知されていた特定の物が検知されなくなると、検知さ
れなくなる直前の画像データを、検知されていた特定の
物に関連付けて記憶するための第２の記憶手段と、第１
の記憶手段に接続され、第１の記憶手段に記憶されたデ
ータの中から任意の物を表わすデータを、人が選択する
ための選択手段と、選択手段と第２の記憶手段とに接続
され、選択手段により任意の物が選択されたことに応答
して、選択手段により選択された任意の物に関連付けて
第２の記憶手段に記憶された画像データを出力するため
の出力手段とを含む。

【０００８】第１の発明によると、検知手段は、画像デ
ータと特定の物を表わすデータとに基づいて、画像デー
タの中に特定の物があるか否かを逐次検知する。第２の
記憶手段は、検知手段により検知されていた特定の物が
検知されなくなると、検知されなくなる直前の画像デー
タを、検知されていた特定の物に関連付けて記憶する。
選択手段を用いて、人は、第１の記憶手段に記憶された
データの中から任意の物を表わすデータを選択する。出
力手段は、選択手段により任意の物が選択されたことに
応答して、選択された任意の物に関連付けて第２の記憶
手段に記憶された画像データを出力する。これにより、
所在のわからなくなる可能性のある物を含む身の回りの
物を、第１の記憶手段に記憶させる。検知手段は、人の
視覚領域に検知されていた特定の物が検知されなくなる
と、検知されなくなる直前の画像データをその物に関連
付けて記憶する。身の回りの物をどこかに置き忘れたこ
とに人が気付いて、その物を選択する入力をすると、そ
の物が検知されなくなる直前の画像が出力される。出力
された画像を見た人は、その物の所在を容易に思い出す
ことができる。その結果、所在のわからなくなる可能性
のある物に特別な機能を付加することなく、人が置き忘
れた物を認知することができる物検索装置を提供でき
る。

【０００９】第２の発明に係る物検索装置は、第１の発
明の構成に加えて、検知手段は、画像データと特定の物
を表わすデータとを逐次比較することにより、画像デー
タの中に特定の物があるか否かを検知するための手段を
含む。

【００１０】第２の発明によると、検知手段は、画像デ
ータと特定の物を表わすデータとを逐次比較して、画像
データの中に特定の物があるか否かを検知する。たとえ
ば、特定の物をテンプレートとして記憶しておき、テン
プレートマッチング処理により、テンプレートを検知し
て、特定の物があるか否かを検知することができる。

【００１１】第３の発明に係る物検索装置は、第１の発
明の構成に加えて、検知手段は、画像データと特定の物
を表わすテンプレートデータとに基づくマッチング処理
により、画像データの中にテンプレートデータにより表
わされる特定の物があるか否かを検知するための手段を
含む。

【００１２】第３の発明によると、検知手段は、特定の
物をテンプレートとして記憶しておき、テンプレートマ
ッチング処理により、テンプレートを検知して、特定の
物があるか否かを検知することができる。

【００１３】第４の発明に係る物検索装置は、第１の発
明の構成に加えて、受取手段に接続され、画像データに
基づいて、人が把持した物を抽出するための抽出手段を
さらに含み、第１の記憶手段は、抽出手段により抽出さ
れた物を表わすデータを、特定の物を表わすデータとし
て記憶するための手段を含む。

【００１４】第４の発明によると、抽出手段は、画像デ
ータに基づいて、人が把持した物を抽出する。第１の記
憶手段は、抽出手段により抽出された物を表わすデータ
を、特定の物を表わすデータとして記憶する。これによ
り、一旦人が物を把持すると、把持したものが紛失する
おそれのある物として第１の記憶手段に記憶される。そ
の結果、所在のわからなくなる可能性のある物を特別な
登録することなく、人が置き忘れた物を認知することが
できる物検索装置を提供できる。

【００１５】第５の発明に係る物検索装置は、第１の発
明の構成に加えて、画像を撮像するための撮像手段と、
撮像手段に接続され、撮像手段により撮像された画像デ
ータを無線にて送信するための送信手段とをさらに含
み、受取手段は、送信手段により無線にて送信された画
像データを受信するための手段を含む。

【００１６】第５の発明によると、撮像手段により撮像
された画像データは、送信手段により無線にて送信され
る。受取手段は、送信手段により無線にて送信された画
像データを受信する。これにより、カメラと送信回路と
を本体の処理装置から切り離して人に装着することがで
きる。

【００１７】第６の発明に係る物検索装置においては、
第５の発明の構成に加えて、撮像手段は、人に装着され
るものである。

【００１８】第６の発明によると、撮像手段は、人の頭
部または胸部などに装着され、人の視覚領域を撮像する
ことができる。

【００１９】第７の発明に係る物検索方法は、画像デー
タを受取る受取ステップと、特定の物を表わすデータを
予め準備する準備ステップと、画像データと特定の物を
表わすデータとに基づいて、画像データの中に特定の物
があるか否かを逐次検知する検知ステップと、検知ステ
ップにて検知されていた特定の物が検知されなくなる
と、検知されなくなる直前の画像データを、検知されて
いた特定の物に関連付けて記憶する記憶ステップと、準
備ステップにて準備されたデータの中から任意の物を表
わすデータを、人が選択する選択ステップと、選択ステ
ップにて任意の物が選択されたことに応答して、選択さ
れた任意の物に関連付けて記憶ステップにて記憶された
画像データを出力する出力ステップとを含む。

【００２０】第７の発明によると、検知ステップにて、
画像データと特定の物を表わすデータとに基づいて、画
像データの中に特定の物があるか否かが逐次検知され
る。記憶ステップにて、検知ステップにて検知されてい
た特定の物が検知されなくなると、検知されなくなる直
前の画像データを、検知されていた特定の物に関連付け
て記憶される。選択ステップにて、準備されたデータの
中から任意の物を表わすデータを、人が選択する。出力
ステップにて、選択ステップにて任意の物が選択された
ことに応答して、選択された任意の物に関連付けて記憶
ステップにて記憶された画像データが出力される。これ
により、所在のわからなくなる可能性のある物を含む身
の回りの物を、準備ステップにて準備する。検知ステッ
プにて人の視覚領域に検知されていた特定の物が検知さ
れなくなると、検知されなくなる直前の画像データをそ
の物に関連付けて記憶される。身の回りの物をどこかに
置き忘れたことに人が気付いて、その物を選択する入力
をすると、その物が検知されなくなる直前の画像が出力
される。出力された画像を見た人は、その物の所在を容
易に思い出すことができる。その結果、所在のわからな
くなる可能性のある物に特別な機能を付加することな
く、人が置き忘れた物を認知することができる物検索方
法を提供できる。

【００２１】第８の発明に係る物検索方法は、第７の発
明の構成に加えて、検知ステップは、画像データと特定
の物を表わすデータとを逐次比較することにより、画像
データの中に特定の物があるか否かを検知するステップ
を含む。

【００２２】第８の発明によると、検知ステップは、画
像データと特定の物を表わすデータとを逐次比較して、
画像データの中に特定の物があるか否かを検知する。た
とえば、特定の物をテンプレートとして記憶しておき、
テンプレートマッチング処理により、テンプレートを検
知して、特定の物があるか否かを検知することができ
る。

【００２３】第９の発明に係る物検索方法は、第７の発
明の構成に加えて、検知ステップは、画像データと特定
の物を表わすテンプレートデータとに基づくマッチング
処理により、画像データの中にテンプレートデータによ
り表わされる特定の物があるか否かを検知するステップ
を含む。

【００２４】第９の発明によると、検知ステップは、特
定の物をテンプレートとして記憶しておき、テンプレー
トマッチング処理により、テンプレートを検知して、特
定の物があるか否かを検知することができる。

【００２５】第１０の発明に係る物検索方法は、第７の
発明の構成に加えて、画像データに基づいて、人が把持
した物を抽出する抽出ステップをさらに含み、準備ステ
ップは、抽出ステップにて抽出された物を表わすデータ
を、特定の物を表わすデータとして準備するステップを
含む。

【００２６】第１０の発明によると、抽出ステップに
て、画像データに基づいて、人が把持した物を抽出す
る。準備ステップは、抽出ステップにて抽出された物を
表わすデータを、特定の物を表わすデータとして準備す
る。これにより、一旦人が物を把持すると、把持したも
のが紛失するおそれのある物として準備ステップにて準
備される。その結果、所在のわからなくなる可能性のあ
る物を特別な登録することなく、人が置き忘れた物を認
知することができる物検索方法を提供できる。

【００２７】第１１の発明に係る物検索方法は、第７の
発明の構成に加えて、画像を撮像するステップと、撮像
ステップにて撮像された画像データを無線にて送信する
送信ステップとをさらに含み、受取ステップは、送信ス
テップにて無線にて送信された画像データを受信するス
テップを含む。

【００２８】第１１の発明によると、撮像ステップに
て、人の視覚領域を撮像して、撮像された画像データ
は、送信ステップにて無線にて送信される。受取ステッ
プにて、送信ステップにて無線にて送信された画像デー
タを受信する。これにより、カメラを本体の処理装置か
ら切り離して人に装着することができる。

【００２９】第１２の発明に係るプログラムは、画像デ
ータを受取るための受取手段と、記憶手段と、出力手段
とを含むコンピュータを、特定の物を表わすデータを記
憶手段に記憶するための手段と、受取手段により受取っ
た画像データと記憶手段に記憶された特定の物を表わす
データとに基づいて、画像データの中に特定の物がある
か否かを逐次検知するための検知手段と、検知手段によ
り検知されていた特定の物が検知されなくなると、検知
されなくなる直前の画像データを、検知されていた特定
の物に関連付けて記憶手段に記憶するための手段と、記
憶手段に記憶されたデータの中から任意の物を表わすデ
ータを、人が選択するための選択手段と、選択手段によ
り任意の物が選択されたことに応答して、選択された任
意の物に関連付けて記憶手段に記憶された画像データを
出力するように出力手段を制御するための手段として機
能させる。

【００３０】第１２の発明によると、コンピュータは、
画像データと特定の物を表わすデータとに基づいて、画
像データの中に特定の物があるか否かを逐次検知する。
コンピュータは、検知手段により検知されていた特定の
物が検知されなくなると、検知されなくなる直前の画像
データを、検知されていた特定の物に関連付けて記憶手
段に記憶する。選択手段を用いて、人が、記憶手段に記
憶されたデータの中から任意の物を表わすデータを選択
すると、コンピュータは、任意の物が選択されたことに
応答して、選択された任意の物に関連付けて記憶手段に
記憶された画像データを出力する。これにより、所在の
わからなくなる可能性のある物を含む身の回りの物を、
記憶手段に記憶させる。コンピュータは、人の視覚領域
に検知されていた特定の物が検知されなくなると、検知
されなくなる直前の画像データをその物に関連付けて記
憶する。身の回りの物をどこかに置き忘れたことに人が
気付いて、その物を選択する入力をすると、その物が検
知されなくなる直前の画像が出力される。出力された画
像を見た人は、その物の所在を容易に思い出すことがで
きる。その結果、所在のわからなくなる可能性のある物
に特別な機能を付加することなく、人が置き忘れた物を
認知することができる物検索装置をコンピュータにて実
現することができるプログラムを提供できる。

【００３１】第１３の発明に係るプログラムは、第１２
の発明の構成に加えて、検知手段は、画像データと特定
の物を表わすデータとを逐次比較することにより、画像
データの中に特定の物があるか否かを検知するための手
段を含む。

【００３２】第１３の発明によると、検知手段は、画像
データと特定の物を表わすデータとを逐次比較して、画
像データの中に特定の物があるか否かを検知する。たと
えば、特定の物をテンプレートとして記憶しておき、テ
ンプレートマッチング処理により、テンプレートを検知
して、特定の物があるか否かを検知することができる。

【００３３】第１４の発明に係るプログラムは、第１２
の発明の構成に加えて、検知手段は、画像データと特定
の物を表わすテンプレートデータとに基づくマッチング
処理により、画像データの中にテンプレートデータによ
り表わされる特定の物があるか否かを検知するための手
段を含む。

【００３４】第１４の発明によると、検知手段は、特定
の物をテンプレートとして記憶しておき、テンプレート
マッチング処理により、テンプレートを検知して、特定
の物があるか否かを検知することができる。

【００３５】第１５の発明に係るプログラムは、第１２
の発明の構成に加えて、コンピュータを、画像データに
基づいて、人が把持した物を抽出するための抽出手段と
して機能させるためのプログラムをさらに含み、特定の
物を表わすデータを記憶手段に記憶するための手段は、
抽出手段により抽出された物を表わすデータを、特定の
物を表わすデータとして記憶手段に記憶するための手段
を含む。

【００３６】第１５の発明によると、抽出手段は、画像
データに基づいて、人が把持した物を抽出する。コンピ
ュータは、抽出手段により抽出された物を表わすデータ
を、特定の物を表わすデータとして記憶手段に記憶す
る。これにより、一旦人が物を把持すると、把持したも
のが紛失するおそれのある物として記憶手段に記憶され
る。その結果、所在のわからなくなる可能性のある物を
特別な登録することなく、人が置き忘れた物を認知する
ことができる物検索装置をコンピュータにて実現するこ
とができるプログラムを提供できる。

【００３７】

【発明の実施の形態】以下、図面を参照しつつ、本発明
の実施の形態について説明する。以下の説明では、同一
の部品には同一の符号を付してある。それらの名称およ
び機能も同じである。したがってそれらについての詳細
な説明は繰返さない。

【００３８】図１を参照して、本実施の形態に係る紛失
物検索装置１００は、カメラ部２００と、カメラ部２０
０から送信される画像データを受信する送受信回路１０
２と、人がテンプレートの登録要求を入力したりテンプ
レートの名前を入力したりする入力回路１０６と、メニ
ュー画面を表示したり、入力回路１０６からの要求に応
答して画像を表示したりするモニタ１０８と、この紛失
物検索装置１００の全体を制御する制御回路１１０と、
制御回路１１０で実行されるプログラムおよびそのプロ
グラムの中間データを記憶する記憶回路１２０とを含
む。

【００３９】制御回路１１０は、ＣＰＵ（Central Proc
essing Unit）を含む。ＣＰＵは、入力回路１０６から
入力されたテンプレート登録要求に応答してテンプレー
トを登録したり、登録されたテンプレートと、送受信回
路１０２を介してカメラ部２００から受信した画像デー
タとの間でテンプレートマッチングを行なったり、テン
プレートマッチングの結果によってカメラ部２００から
受信した画像データを記憶回路１２０に記憶したりす
る。

【００４０】記憶回路１２０は、制御回路１１０のＣＰ
Ｕで実行されるプログラムを記憶するプログラム記憶部
１２２と、テンプレート画像、テンプレートマッチング
の結果によりカメラ部２００から入力された画像データ
を記憶する画像記憶部１２４とを含む。

【００４１】カメラ部２００は、撮像カメラ２０２と、
撮像カメラ２０２に接続された画像メモリ２０４と、画
像メモリ２００に接続された送受信回路２０６とを含
む。撮像カメラ２０２は、人の視覚領域を撮像できるよ
うに人の頭部または胸部に装着される。送受信回路２０
６は、撮像カメラ２０２により撮像された画像データ
を、前述の送受信回路１０２へ無線にて送信する。

【００４２】本実施の形態に係る紛失物検索装置１００
は、ＰＤＡ（Personal Digital Assistant）、携帯電話
またはパーソナルコンピュータなどのコンピュータにお
いて、ＣＰＵにより所定のプログラムを実行することに
より実現される。

【００４３】図１に示した紛失物検索装置１００が前述
のコンピュータにより実現される場合、図１に示した制
御ブロックに加えて、メモリカード、ＦＤ（Flexible D
isk)およびＣＤ−ＲＯＭ（Compact Disc−Read Only Me
mory）などの記録媒体の読取装置をさらに含む。これら
の記録媒体には、所定のプログラムが記録されている。
このようなプログラムは、一般的に、メモリカード、Ｆ
ＤおよびＣＤ−ＲＯＭなどの記録媒体に格納されて流通
し、記録媒体の読取装置などにより記録媒体から読取ら
れてプログラム記憶部１２２に一旦格納される。さらに
プログラム記憶部１２２から制御回路１１０内のメモリ
に読出されて、制御回路１１０のＣＰＵにより実行され
る。また、このような記録媒体を介さない場合には、紛
失物検索装置１００は、図１に示した制御ブロックに加
えて、ネットワークに接続され、ネットワークに接続さ
れた他のコンピュータから所定のプログラムを受信する
通信回路をさらに含む。この場合、他のコンピュータに
記録されたプログラムは、ネットワークを介して通信回
路により受信されて、プログラム記憶部１２２に一旦格
納される。さらにプログラム記憶部１２２から制御回路
１１０内のメモリに読出されて、制御回路１１０のＣＰ
Ｕにより実行される。

【００４４】これらのコンピュータのハードウェア自体
は、ＰＤＡ、携帯電話およびパーソナルコンピュータ自
体などのように一般的なものである。コンピュータは、
ＣＰＵを含む制御回路、記憶回路、入力回路、出力回路
およびＯＳ（Operating System）を含み、プログラムを
実行する環境を備えたものである。本発明のプログラム
は、このようなＰＤＡ、携帯電話およびパーソナルコン
ピュータなどのコンピュータを、紛失物検索装置として
機能させるプログラムである。したがって本発明の最も
本質的な部分は、ＦＤ、ＣＤ−ＲＯＭ、メモリカード、
固定ディスクなどの記録媒体に記録されたプログラムお
よびサーバから通信回線を介して送信されるプログラム
である。

【００４５】図２を参照して、記憶回路１２０の画像記
憶部１２０に記憶されるデータについて説明する。図２
に示すように、画像記憶部１２４に記憶されるデータ
は、データを識別する番号ごとに、テンプレートの名前
を表わす名前と、テンプレートデータＩＤ（Identifica
tion）と、最新テンプレートデータＩＤと、画像データ
ＩＤとを含む。テンプレートデータＩＤは、テンプレー
トの名前を表わすデータに対応して、登録されたテンプ
レートを一意に特定するためのデータである。最新テン
プレートデータＩＤは、後述するテンプレートマッチン
グ処理の結果、最も類似度の高い最新のテンプレートデ
ータを特定するためのデータである。画像データＩＤ
は、テンプレートマッチング処理の結果、視覚領域内に
検知されていたテンプレートデータが検知されなくなっ
たときに画像記憶部１２４に記憶された画像データを特
定するためのデータである。

【００４６】画像記憶部１２４は、図２に示すデータを
記憶する記憶部に加えて、少なくとも２フレーム分の画
像データを記憶するバッファを含む。このバッファは、
カメラ部２００から受信した画像データの中の最新の２
フレーム分を先入れ先出し方式で記憶する画像メモリに
より実現される。

【００４７】図３を参照して、テンプレートデータにつ
いて説明する。図３に示すように、テンプレートデータ
は、図２に示すテンプレートデータＩＤに対応して画像
記憶部１２４に記憶された画像を表わすデータである。

【００４８】図４を参照して、最新テンプレートデータ
について説明する。図４に示すように、最新テンプレー
トデータは、テンプレートマッチング処理の結果、カメ
ラ部２００から受信した最新の画像データの中で、図２
に示すテンプレートデータＩＤにより特定されるテンプ
レートと最も類似度がテンプレートを表わすデータであ
る。たとえば、図２に示すように、テンプレートデータ
ＩＤが「１００３」はテンプレートの名前が「鉛筆」で
ある。この「鉛筆」を表わすテンプレートデータとし
て、図３に示すデータが初期のテンプレートデータとし
て記憶される。この初期のテンプレートデータを用いて
テンプレートマッチング処理された結果、この「鉛筆」
を表わすテンプレートデータとして、図４に示すデータ
が最新テンプレートデータとして記憶される。これは、
図３に示す「１００３」の画像が表わすデータと、図４
に示す「１００３」の画像が表わすデータとは、同じ対
象物である「鉛筆」を表わすテンプレートデータである
が、図４は、人の動きにより視覚領域が変動したため、
「鉛筆」を見る角度が異なり、テンプレート図形の形態
が変更されたことを示す。このようにして、図３に示す
テンプレートデータを初期データとして、テンプレート
マッチング処理が行なわれる度に最新のテンプレートデ
ータが図４に示すように記憶される。この最新のテンプ
レートデータを用いて、テンプレートマッチング処理を
行なうことにより、マッチング処理の正確さを向上させ
ることができる。

【００４９】図５を参照して、紛失物検索装置１００で
実行されるプログラムは、テンプレート手動登録処理に
関し、以下のような制御構造を有する。

【００５０】ステップ（以下ステップをＳと略す。）１
００にて、制御回路１１０は、撮像カメラ２０２を作動
させる。Ｓ１０２にて、制御回路１１０は、モニタ１０
８にメニュー画面を表示させる。Ｓ１０４にて制御回路
１１０は、入力回路１０６から登録要求が入力されたこ
とを検知したか否かを判断する。登録要求が入力された
ことを検知すると（Ｓ１０４にてＹＥＳ）、処理はＳ１
０６へ移される。一方、登録要求の入力を検知しないと
（Ｓ１０４にてＮＯ）、処理はＳ１０４へ戻され、登録
要求の入力を検知するまで待つ。

【００５１】Ｓ１０６にて、制御回路１１０は、撮像カ
メラ２０２で撮像され、送受信回路２０６および送受信
回路１０２を介して受信した撮像画像からテンプレート
手動登録となる対象物を検出する。このとき、図３に示
すような画像データが撮像カメラ２０２により撮像され
ているものとする。

【００５２】Ｓ１０８にて、制御回路１１０は、対象物
の名前の入力を行なう。Ｓ１１０にて、制御回路１１０
は、登録要求されたテンプレートが既に登録済みである
か否かを判断する。この判断は、たとえばＳ１０６にて
検出した対象物を表わす画像データまたはＳ１０８にて
入力された対象物の名前に基づいて行なわれる。具体的
には、画像データまたは名前を表わすデータと、画像記
憶部１２４に記憶されたデータ（図２）とを、比較する
ことにより行なわれる。テンプレートデータが登録済み
である場合には（Ｓ１１０にてＹＥＳ）、処理はＳ１１
４へ移される。一方、テンプレートデータが登録済みで
ない場合には（Ｓ１１０にてＮＯ）、処理はＳ１１２に
移される。

【００５３】Ｓ１１２にて、制御回路１１０は、Ｓ１０
６にて検出された対象物およびＳ１０８にて入力された
名前を画像記憶部１２４に登録する。Ｓ１１４にて、制
御回路１１０は、処理を終了するか否かを判断する。こ
の判断は、たとえば、入力回路１０６から、所定のキー
が押されたことにより行なわれる。処理を終了する場合
には（Ｓ１１４にてＹＥＳ）、このテンプレート手動登
録処理を終了する。一方、処理を終了しない場合には
（Ｓ１１４にてＮＯ）、処理はＳ１０２へ戻され、制御
回路１１０は、モニタ１０８にメニュー画面を表示させ
る。

【００５４】図６を参照して、紛失物検索装置１００で
実行されるプログラムは、テンプレート自動登録処理に
関し、以下のような制御構造を有する。以下の説明にお
いて、前述の図５と同じ処理については同じステップ番
号を付してある。したがって、ここでのそれらの詳細な
説明は繰返さない。

【００５５】Ｓ１２０にて、制御回路１１０は、撮像カ
メラ２０２を作動させた後、送受信回路２０６および送
受信回路１０２を介して撮像カメラ２０２により撮像さ
れた画像データを、カメラ部２００から受信したか否か
を判断する。撮像された画像データを受信すると（Ｓ１
２０にてＹＥＳ）、処理はＳ１２２へ移される。一方、
撮像された画像データを受信しないと（Ｓ１２０にてＮ
Ｏ）、処理はＳ１２０へ戻され、カメラ部２００からの
画像データの受信を待つ。

【００５６】Ｓ１２２にて、制御回路１１０は、Ｓ１２
０にて受信した撮像画像データから、人の手を表わすデ
ータを抽出する。Ｓ１２４にて、制御回路１１０は、Ｓ
１２２にて抽出した手を表わすデータに基づいて、手に
よる把持物があるか否かを判断する。手による把持物が
ある場合には（Ｓ１２４にてＹＥＳ）、処理はＳ１２６
へ移される。一方、手による把持物がない場合には（Ｓ
１２４にてＮＯ）、処理はＳ１１４へ移される。

【００５７】Ｓ１２６にて、制御回路１１０は、Ｓ１２
４にて判断された把持物をテンプレートとして検出す
る。Ｓ１０８にて、制御回路１１０は、Ｓ１２６にて検
出した対象物の名前を入力する。

【００５８】Ｓ１１０にて、制御回路１１０は、Ｓ１２
６にて検出されＳ１０８にて名前が入力されたテンプレ
ートデータが既に登録済みであるか否かを判断する。登
録済みである場合には（Ｓ１１０にてＹＥＳ）、処理は
Ｓ１１４へ移される。一方、登録済みでない場合には
（Ｓ１１０にてＮＯ）、処理はＳ１１２へ移される。

【００５９】Ｓ１１２にて、制御回路１１０は、Ｓ１２
６にて検出された対象物およびＳ１０８にて入力された
名前を画像記憶部１２４に登録する。

【００６０】図７を参照して、紛失物検索装置１００で
実行されるプログラムは、画像データ記憶処理に対し、
以下のような制御構造を有する。以下の説明において、
図７の処理の中で、前述の図５および図６と同じ処理に
ついては同じステップ番号を付してある。したがって、
ここでのそれらの詳細な説明は繰返さない。

【００６１】Ｓ１４０にて、制御回路１１０は、Ｓ１２
０にて受信したと判断した画像データをバッファの画像
メモリに記憶する。前述の説明の通り、この画像メモリ
には、最新の２フレーム分の画像データが先入れ先出し
方式で記憶されるＳ１４２にて、制御回路１１０は、バ
ッファに記憶された撮像された最新の画像データと、図
４に示すように画像記憶部１２４に記憶された最新テン
プレートとに基づいて、テンプレートマッチング処理を
行なう。テンプレートマッチング処理は、図４に示す最
新テンプレートデータと、カメラ部２００から受信した
撮像された画像データの切出し枠との間で類似計算を行
ない、最も類似度の高い切出し枠を探索する。この処理
により、図４に示す登録されたテンプレートデータによ
り表わされる物が、撮像された画像データの中にあるか
否かが判断される。

【００６２】Ｓ１４４にて、制御回路１１０は、Ｓ１４
２におけるテンプレートマッチングの結果、対象物を検
知できなくなったか否かを判断する。この判断は、最新
の１つ前のフレームにおいては、テンプレートに基づい
て対象物が検出されていた状態から、最新のフレームに
おいては対象物が検知できなくなったか否かにより行な
われる。対象物が検知できなくなると（Ｓ１４４にてＹ
ＥＳ）、処理はＳ１４８へ移される。一方、対象物が検
知できていると（Ｓ１４４にてＮＯ）、処理はＳ１４６
へ移される。

【００６３】Ｓ１４６にて、制御回路１１０は、Ｓ１４
４にて検知していると判断された画像を、最新テンプレ
ートとして図４に示すように画像記憶部１２４に記憶す
る。

【００６４】Ｓ１４８にて、制御回路１１０は、Ｓ１４
４にて対象物が検知できなくなったと判断された場合、
バッファの画像メモリに記憶された最新の１つ前の画像
データを、テンプレートデータＩＤに関連付けて、図２
に示すように画像記憶部１２４に記憶する。

【００６５】Ｓ１５０にて、制御回路１１０は、登録さ
れたすべてのテンプレートについてテンプレートマッチ
ング処理が完了したか否かを判断する。登録されたすべ
てのテンプレートについてのテンプレートマッチング処
理が完了すると（Ｓ１５０にてＹＥＳ）、処理はＳ１１
４へ移される。一方、登録されたすべてのテンプレート
についてのテンプレートマッチング処理が完了するまで
は（Ｓ１５０にてＮＯ）、処理はＳ１５２へ移される。

【００６６】Ｓ１５２にて、制御回路１１０は、検知対
象を次のテンプレートに変更する。Ｓ１５２における処
理の後、処理は、Ｓ１４２へ戻され、次のテンプレート
を検知対象としたテンプレートマッチング処理が行なわ
れる。

【００６７】このようにして、処理終了になるまで、図
２に示すように画像記憶部１２４に登録されたテンプレ
ートが、カメラ部２００にて撮像された画像データの中
に存在するか否かが１フレームずつ検知される。検知さ
れなくなると、検知されなくなる１つ前の画像データ
を、検知されなくなったテンプレートに関連付けて記憶
される。

【００６８】図８を参照して、紛失物検索装置１００で
実行されるプログラムは、画像データ出力処理に関し、
以下のような制御構造を有する。以下の説明において、
図８の処理の中で、前述の図５と同じ処理については同
じステップ番号を付してある。したがって、ここでのそ
れらの詳細な説明は繰返さない。

【００６９】Ｓ１６０にて、制御回路１１０は、入力回
路１０６を介して探索要求の入力を検知したか否かを判
断する。探索要求の入力を検知すると（Ｓ１６０にてＹ
ＥＳ）、処理はＳ１６２へ移される。一方、探索要求を
検知しないと（Ｓ１６０にてＮＯ）、処理はＳ１６０へ
戻され、入力回路１０６を介した探索要求の入力を待
つ。

【００７０】Ｓ１６２にて、制御回路１１０は、図２に
示すように画像記憶部１２４に登録されたテンプレート
一覧（画像または名前）をモニタ１０８に表示させる。
Ｓ１６４にて、制御回路１１０は、入力回路１０６を介
してテンプレートの選択の入力を検知したか否かを判断
する。テンプレートの選択の入力を検知すると（Ｓ１６
４にてＹＥＳ）、処理はＳ１６６へ移される。一方、テ
ンプレートの選択の入力を検知しないと（Ｓ１６４にて
ＮＯ）、処理はＳ１１４へ移される。

【００７１】Ｓ１６６にて、制御回路１１０は、Ｓ１６
４にて入力を検知した選択されたテンプレートに関連付
けて記憶された画像をモニタ１０８に表示させる。この
とき、表示される画像データを特定する情報は、図２に
示すように、画像データＩＤにより特定される。画像デ
ータＩＤは、画像データＩＤに対応するテンプレートデ
ータにより表わされる物が検知されなくなる直前の画像
を表示する。すなわち、テンプレートデータにより表わ
される物が最後に撮像されている画像が表示される。

【００７２】以上のような構造およびフローチャートに
基づく、紛失物検索装置１００の動作について説明す
る。

【００７３】［テンプレート手動登録動作］人が入力回
路１０６から撮像カメラ２０２の作動を指示すると、撮
像カメラが動作を開始する（Ｓ１００）。人は、頭部ま
たは胸部に装着された撮像カメラ２０２に写るように、
テンプレートに登録したい対象物を見る。モニタ１０８
に表示されたメニュー画面に従って（Ｓ１０２）、人が
入力回路１０６から登録要求を入力すると（Ｓ１０４に
てＹＥＳ）、撮像カメラ２０２にて撮像された画像から
テンプレート手動登録の対象となる対象物が検出される
（Ｓ１０６）。

【００７４】人が入力回路１０６から対象物の名前を入
力する（Ｓ１０８）。テンプレートを表わす画像データ
および名前に基づいて、検出された対象物が画像記憶部
１２４に登録済みでない場合には（Ｓ１１０にてＮ
Ｏ）、検出された対象物および名前が画像記憶部１２４
に登録される。

【００７５】［テンプレート自動登録動作］撮像カメラ
２０２を作動させている状態において（Ｓ１００）、図
９に示すように、人の手３１０が印鑑３０８を把持した
状態が撮像されると、撮像された画像から手が抽出され
る（Ｓ１２２）。手による把持物が判断され（Ｓ１２４
にてＹＥＳ）、把持物である印鑑がテンプレートの対象
物として検出される（Ｓ１２６）。

【００７６】人が入力回路１０６から対象物の名前を入
力する（Ｓ１０８）。テンプレートを表わす画像データ
および名前に基づいて、検出された対象物が画像記憶部
１２４に登録済みでない場合には（Ｓ１１０にてＮ
Ｏ）、検出された対象物および名前が画像記憶部１２０
に登録される。

【００７７】このようにして、テンプレート自動登録動
作の場合には、前述のテンプレート手動登録動作と異な
り、人が手に物を持つ度に、手による把持物が対象物と
して検出され、登録済みでない場合には把持されたもの
がテンプレート図形として登録される。

【００７８】［画像データ記憶動作］撮像カメラ２０２
を作動状態にして（Ｓ１００）、紛失物検索装置１００
に画像データ記憶動作状態にすると、撮像画像データを
受信して（Ｓ１２０にてＹＥＳ）、撮像された画像デー
タがバッファの画像メモリに記憶される（Ｓ１４０）。
このとき、バッファの画像メモリには、２フレーム分の
画像データが記憶される。すなわち、現在撮像カメラ２
０２から受信した画像データとその１フレーム前の画像
データとである。

【００７９】受信した撮像画像と最新テンプレートとに
基づくテンプレートマッチング処理が行なわれる（Ｓ１
４２）。１つ前のフレームにおいてテンプレートマッチ
ング処理により検出されていた対象物が、最新のフレー
ムでは検出できなくなった場合（Ｓ１４４にてＹＥ
Ｓ）、バッファに記憶された１つ前の画像データをテン
プレートデータＩＤに関連付けて、図２に示すように画
像記憶部１２４に記憶する。

【００８０】このような動作が、図２に示す登録された
すべてのテンプレートについて行なわれる。撮像カメラ
２０２から、たとえば、１秒ごとに１フレーム分の画像
データが送信され、すべてのテンプレートについてのテ
ンプレートマッチング処理が１秒以内で行なわれるよう
にする。１秒間隔で、受信した画像データに対して、図
２に示すように登録された複数のテンプレートのそれぞ
れについて、テンプレートマッチングが行なわれる。そ
れぞれのテンプレートマッチングの結果、対象物が検知
できなくなった場合には、バッファの画像メモリに記憶
された１フレーム前の画像データがテンプレートデータ
ＩＤに関連付けて画像記憶部１２４に記憶される。

【００８１】このとき、テンプレートマッチング処理
は、図１０に示すように、撮像カメラ２０２から受信し
た画像データの中の切出し枠４００を走査して、切出し
枠４００に含まれる画像データと、最新テンプレートデ
ータＩＤにより特定されるテンプレートデータとの類似
度を計算する。最も類似度の高い切出し部のデータが抽
出され、その画像データが最新テンプレートデータとし
て記憶される。なお、一定値以上の類似度を有する切出
し部が存在しない場合には、そのテンプレート図形が存
在しないものとして判断される。

【００８２】［画像データ出力動作］人が紛失物検索装
置１００を装着している生活している場合において、印
鑑の所在がわからなくなった場合について説明する。

【００８３】図１０に示すように、印鑑３０８が撮像さ
れた画像データを撮像カメラ２０２から受信している場
合には、印鑑を表わす最新のテンプレートデータに基づ
いて印鑑が検知される。この状態から、図１１に示すよ
うに、印鑑を人が筆箱３０２などに格納した場合には、
印鑑３０８をテンプレートマッチングにより検知するこ
とができなくなる。そのとき、図１０に示す印鑑３０８
が検知されなくなる直前の画像データが画像記憶部１２
４に、印鑑を表わすテンプレートデータＩＤまたは名前
に対応付けて記憶される。この場合、図１０に示す画像
データが画像記憶部１２４に記憶される。

【００８４】このようにして画像記憶部１２４に画像デ
ータが記憶されている場合において、人が印鑑３０８の
所在がわからなくなったことに気付くと、人は入力回路
１０６から探索要求を入力する（Ｓ１０６にてＹＥ
Ｓ）。画像記憶部１２４に記憶されたテンプレートの一
覧（画像または名前）が表示され（Ｓ１６２）、印鑑を
表わすテンプレートの選択を入力する（１６４にてＹＥ
Ｓ）。選択された印鑑を表わすテンプレートに関連付け
て記憶された図１０に示す画像がモニタ１０８に表示さ
れる。

【００８５】図１０に示す画像がモニタ１０８に表示さ
れると、人は、印鑑３０８が最後に検知された画像に基
づいて、印鑑の所在を認知することができる。たとえば
この場合、筆箱３０２の中に格納されたことなどを思い
出す。

【００８６】以上のようにして、本実施の形態に係る紛
失物検索装置は、紛失するおそれのある対象物に新たな
機能を設けることなく、人の視覚領域を撮像した画像デ
ータに基づいて、予めテンプレートデータを登録してお
き、テンプレートデータと視覚領域を撮像した画像デー
タとの間でテンプレートマッチングを行なう。撮像され
た画像データの中にテンプレート図形が存在しなくなる
と、その直前の画像データをテンプレート図形に対応付
けて記憶しておく。人が検索したいテンプレートを入力
すると、その入力されたテンプレートに対応付けて記憶
された画像データがモニタに表示される。その結果、人
はその画像データを見ることにより、所在がわからなく
なったものが最後に撮像された画像データに基づいて、
その物の所在を思い出すことができる。

【００８７】なお、図６のＳ１０８の処理を行なわない
形態も考えられる。すなわち、自動登録処理においてテ
ンプレートの名前を入力しないものである。このように
すると、テンプレートの名前を人が入力する必要がなく
なり、完全に自動でテンプレートの登録ができる。

【００８８】今回開示された実施の形態はすべての点で
例示であって制限的なものではないと考えられるべきで
ある。本発明の範囲は上記した説明ではなくて特許請求
の範囲によって示され、特許請求の範囲と均等の意味お
よび範囲内でのすべての変更が含まれることが意図され
る。

【図面の簡単な説明】

【図１】 本発明の実施の形態に係る紛失物検索装置の
全体構成図である。

【図２】 図１の画像記憶部に記憶されるデータを表わ
す図である。

【図３】 図１の画像記憶部に記憶されるテンプレート
データを表わす図である。

【図４】 図１の画像記憶部に記憶される最新テンプレ
ートデータを表わす図である。

【図５】 本発明の実施の形態に係るテンプレート手動
登録処理の手順を示すフローチャートである。

【図６】 本発明の実施の形態に係るテンプレート自動
登録処理の手順を示すフローチャートである。

【図７】 本発明の実施の形態に係る画像データ記憶処
理の手順を示すフローチャートである。

【図８】 本発明の実施の形態に係る画像データ出力処
理の手順を示すフローチャートである。

【図９】 図１の撮像カメラによる撮像画像の例（その
１）である。

【図１０】 図１の撮像カメラによる撮像画像の例（そ
の２）である。

【図１１】 図１の撮像カメラによる撮像画像の例（そ
の３）である。

【符号の説明】

１００ 紛失物検索装置、１０２ 送受信回路、１０６
入力回路、１０８モニタ、１１０ 制御回路、１２０
記憶回路、１２２ プログラム記憶部、１２４ 画像
記憶部、２００ カメラ部、２０２ 撮像カメラ、２０
４ 画像メモリ、２０６ 送受信回路

Claims (15)

【特許請求の範囲】
1. 【請求項１】 画像データを受取るための受取手段と、 特定の物を表わすデータを記憶するための第１の記憶手
   段と、 前記受取手段と前記第１の記憶手段とに接続され、前記
   画像データと前記特定の物を表わすデータとに基づい
   て、前記画像データの中に前記特定の物があるか否かを
   逐次検知するための検知手段と、 前記受取手段と前記検知手段とに接続され、前記検知手
   段により検知されていた前記特定の物が検知されなくな
   ると、前記検知されなくなる直前の画像データを、前記
   検知されていた特定の物に関連付けて記憶するための第
   ２の記憶手段と、 前記第１の記憶手段に接続され、前記第１の記憶手段に
   記憶されたデータの中から任意の物を表わすデータを、
   人が選択するための選択手段と、 前記選択手段と前記第２の記憶手段とに接続され、前記
   選択手段により前記任意の物が選択されたことに応答し
   て、前記選択手段により選択された任意の物に関連付け
   て前記第２の記憶手段に記憶された画像データを出力す
   るための出力手段とを含む、物検索装置。
2. 【請求項２】 前記検知手段は、前記画像データと前記
   特定の物を表わすデータとを逐次比較することにより、
   前記画像データの中に前記特定の物があるか否かを検知
   するための手段を含む、請求項１に記載の物検索装置。
3. 【請求項３】 前記検知手段は、前記画像データと前記
   特定の物を表わすテンプレートデータとに基づくマッチ
   ング処理により、前記画像データの中に前記テンプレー
   トデータにより表わされる特定の物があるか否かを検知
   するための手段を含む、請求項１に記載の物検索装置。
4. 【請求項４】 前記物検索装置は、前記受取手段に接続
   され、前記画像データに基づいて、人が把持した物を抽
   出するための抽出手段をさらに含み、 前記第１の記憶手段は、前記抽出手段により抽出された
   物を表わすデータを、前記特定の物を表わすデータとし
   て記憶するための手段を含む、請求項１に記載の物検索
   装置。
5. 【請求項５】 前記物検索装置は、 画像を撮像するための撮像手段と、 前記撮像手段に接続され、前記撮像手段により撮像され
   た画像データを無線にて送信するための送信手段とをさ
   らに含み、 前記受取手段は、前記送信手段により無線にて送信され
   た前記画像データを受信するための手段を含む、請求項
   １に記載の物検索装置。
6. 【請求項６】 前記撮像手段は、人に装着される、請求
   項５に記載の物検索装置。
7. 【請求項７】 画像データを受取る受取ステップと、 特定の物を表わすデータを予め準備する準備ステップ
   と、 前記画像データと前記特定の物を表わすデータとに基づ
   いて、前記画像データの中に前記特定の物があるか否か
   を逐次検知する検知ステップと、 前記検知ステップにて検知されていた前記特定の物が検
   知されなくなると、前記検知されなくなる直前の画像デ
   ータを、前記検知されていた特定の物に関連付けて記憶
   する記憶ステップと、 前記準備ステップにて準備されたデータの中から任意の
   物を表わすデータを、人が選択する選択ステップと、 前記選択ステップにて前記任意の物が選択されたことに
   応答して、前記選択された任意の物に関連付けて前記記
   憶ステップにて記憶された画像データを出力する出力ス
   テップとを含む、物検索方法。
8. 【請求項８】 前記検知ステップは、前記画像データと
   前記特定の物を表わすデータとを逐次比較することによ
   り、前記画像データの中に前記特定の物があるか否かを
   検知するステップを含む、請求項７に記載の物検索方
   法。
9. 【請求項９】 前記検知ステップは、前記画像データと
   前記特定の物を表わすテンプレートデータとに基づくマ
   ッチング処理により、前記画像データの中に前記テンプ
   レートデータにより表わされる特定の物があるか否かを
   検知するステップを含む、請求項７に記載の物検索方
   法。
10. 【請求項１０】 前記物検索方法は、前記画像データに
    基づいて、人が把持した物を抽出する抽出ステップをさ
    らに含み、 前記準備ステップは、前記抽出ステップにて抽出された
    物を表わすデータを、前記特定の物を表わすデータとし
    て準備するステップを含む、請求項７に記載の物検索方
    法。
11. 【請求項１１】 前記物検索方法は、 画像を撮像するステップと、 前記撮像ステップにて撮像された画像データを無線にて
    送信する送信ステップとをさらに含み、 前記受取ステップは、前記送信ステップにおいて無線に
    て送信された前記画像データを受信するステップを含
    む、請求項７に記載の物検索方法。
12. 【請求項１２】 画像データを受取るための受取手段
    と、記憶手段と、出力手段とを含むコンピュータを、 特定の物を表わすデータを前記記憶手段に記憶するため
    の手段と、 前記受取手段により受取った画像データと前記記憶手段
    に記憶された特定の物を表わすデータとに基づいて、前
    記画像データの中に前記特定の物があるか否かを逐次検
    知するための検知手段と、 前記検知手段により検知されていた前記特定の物が検知
    されなくなると、前記検知されなくなる直前の画像デー
    タを、前記検知されていた特定の物に関連付けて前記記
    憶手段に記憶するための手段と、 前記記憶手段に記憶されたデータの中から任意の物を表
    わすデータを、人が選択するための選択手段と、 前記選択手段により任意の物が選択されたことに応答し
    て、選択された任意の物に関連付けて前記記憶手段に記
    憶された画像データを出力するように前記出力手段を制
    御するための手段として機能させるためのプログラム。
13. 【請求項１３】 前記検知手段は、前記画像データと前
    記特定の物を表わすデータとを逐次比較することによ
    り、前記画像データの中に前記特定の物があるか否かを
    検知するための手段を含む、請求項１２に記載のプログ
    ラム。
14. 【請求項１４】 前記検知手段は、前記画像データと前
    記特定の物を表わすテンプレートデータとに基づくマッ
    チング処理により、前記画像データの中に前記テンプレ
    ートデータにより表わされる特定の物があるか否かを検
    知するための手段を含む、請求項１２に記載のプログラ
    ム。
15. 【請求項１５】 前記プログラムは、前記コンピュータ
    を、前記画像データに基づいて、人が把持した物を抽出
    するための抽出手段として機能させるためのプログラム
    をさらに含み、 特定の物を表わすデータを前記記憶手段に記憶するため
    の手段は、前記抽出手段により抽出された物を表わすデ
    ータを、前記特定の物を表わすデータとして前記記憶手
    段に記憶するための手段を含む、請求項１２に記載のプ
    ログラム。