JP5550293B2

JP5550293B2 - 画像照合システム、撮像装置、送信装置、及びプログラム

Info

Publication number: JP5550293B2
Application number: JP2009217331A
Authority: JP
Inventors: 幹伊藤
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2009-09-18
Filing date: 2009-09-18
Publication date: 2014-07-16
Anticipated expiration: 2029-09-18
Also published as: US20110069863A1; JP2011066797A; US9160913B2

Description

本発明はカメラによって撮像された画像と、予め登録された照合情報との照合を行う画像照合システムに関する。

従来、カメラで撮像した画像と、予め登録された照合情報との照合を行う画像照合システムにおいて、照合情報を蓄積する蓄積サーバーを有し、カメラは蓄積サーバーからネットワークを介して照合情報を受信し、カメラで照合を行う照合システムが知られている。

この照合システムは、カメラで撮像した人物の画像と照合情報とをカメラで照合して人物認証を行う認証システムや、照合情報と一致する人物をカメラで検出してコンピュータに送信する監視カメラ等として用いられている。

従来技術として、コンピュータからネットワークを介してカメラに顔データを送信し、カメラは送信された顔データとカメラが撮像した顔画像との顔認証を行い、照合された場合、顔画像、カメラ番号、及び撮影時刻をコンピュータに送信する照合システムが知られている（特許文献１）。

また、窓口端末から顔認証サーバーへ顧客番号等が送信されると、顔認証サーバーにおいて顔データの検索を行い、顧客番号に対応した顔データを窓口端末に送信する。そして、窓口端末はカメラが撮影した顔画像と顔認証サーバーから送信された顔データとによって顔認証を行う照合システムが知られている（特許文献２）。

特開２００７−１５８４２１号公報特開２００５−３０１５３９号公報

カメラに照合情報を記憶してカメラで照合を行う場合、カメラに搭載できるメモリの量が限られるため、撮像した画像と照合できる画像の数が限られてしまうという課題がある。また、照合対象を照合するたびに操作者が照合対象に一致する照合情報をカメラに送信するよう要求を行うと操作者に負担がかかるという課題がある。

本発明はカメラ内の限られた量のメモリに記憶された画像と撮像した画像とを照合する場合に、照合一致する確率を向上させることを課題とする。また、照合のたびに照合情報を要求することを必要とせず、操作者の負担を軽減することを課題とする。

上記課題を鑑みて、本発明にかかる画像照合システムは、撮像装置と、前記撮像装置とネットワークで接続される蓄積手段と、前記撮像装置に記憶された照合情報と対応する被写体又は前記撮像装置に記憶された前記照合情報と対応しない被写体を、前記撮像装置が撮像した撮像画像において特定する照合手段と、前記蓄積手段に蓄積された照合情報が前記照合手段による被写体の特定に用いられる時間帯を示す時間情報を記憶する記憶手段と、前記撮像装置に記憶された照合情報であって、該照合情報と対応する被写体又は該照合情報と対応しない被写体を前記撮像画像において特定するための照合情報を、前記蓄積手段に蓄積された照合情報のうち計時手段の計時に対応する前記時間情報が対応付けられた照合情報で更新する更新手段とを有することを特徴とする。

また、本発明にかかる送信装置は、撮像手段と、照合情報を記憶する記憶手段と、前記記憶手段に記憶された前記照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手段とを有する撮像装置にネットワークを介して照合情報を送信する送信装置であって、蓄積手段に蓄積された照合情報が前記照合手段による被写体の特定に用いられる時間帯を示す時間情報を記憶する記憶手段と、前記蓄積手段に蓄積された照合情報のうち計時手段の計時に対応する時間情報が対応付けられた照合情報を、前記照合手段が照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報として、前記撮像装置に送信する送信手段とを有することを特徴とする。

さらに、本発明にかかる撮像装置は、撮像手段と、照合情報を記憶する記憶手段と、前記記憶手段に記憶された照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手段と、計時手段の計時に対応する時間情報が対応付けられた照合情報を蓄積手段からネットワークを介して選択する選択手段と、前記照合手段が照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報であって前記選択手段が選択した照合情報で前記記憶手段に記憶された照合情報を更新する更新手段とを有することを特徴とする。

以上の構成からなる本発明によれば、照合情報に対応付けられた情報に基づいて照合情報を蓄積装置から選択して、カメラ内に保持された照合情報を更新することができる。

本発明にかかる実施形態の撮像装置の構成を示すブロック図である。本発明にかかる実施形態のサーバー装置の構成を示すブロック図である。本発明にかかるネットワークカメラシステム構成を示す図である。第１の実施形態における撮像装置の動作を示すフローチャート図である。第１の実施形態におけるサーバー装置の動作を示すフローチャート図である。第１の実施形態における照合情報を示す図である。第２の実施形態における撮像装置の動作を示すフローチャート図である。第２の実施形態における照合情報作成時のサーバー装置の動作を示すフローチャート図である。第２の実施形態におけるネットワークカメラシステム運用時のサーバー装置の動作を示すフローチャート図である。

以下、添付の図面を参照して、本発明をその好適な実施形態に基づいて詳細に説明する。なお、以下の実施形態において示す構成は一例に過ぎず、本発明は以下に示す構成に限定されるものではない。

［第１の実施形態］
図３は、画像照合システムであるネットワークカメラシステムの動作環境を示したネットワーク接続構成図である。撮像装置１００、サーバー装置２００、蓄積装置３００、蓄積装置３００に蓄積された映像を閲覧する表示端末装置４００がネットワーク回線であるＬＡＮ５００によって接続されている。

撮像装置１００はＭＪＰＥＧ（Ｍｏｔｉｏｎ−ＪＰＥＧ）、ＭＰＥＧ４（ＭｏｖｉｎｇＰｉｃｔｕｒｅＥｘｐｅｒｔｓＧｒｏｕｐｐｈａｓｅ４）、Ｈ．２６４等の符号化方式で符号化された映像ストリーム、及び、付属のマイクから録音された音声ストリームを、ＬＡＮ５００を介してサーバー装置２００に送信する。

サーバー装置２００は撮像装置１００から送信された映像ストリーム及び音声ストリームを受信する。また、サーバー装置２００は照合情報を蓄積する。ここで、照合情報とは、撮像装置１００により撮影された映像との照合に用いる情報である。例えば照合情報とは、図６の６００に示すように各々の人物の顔画像などを指す。人物の顔画像そのものだけではなく、その人物が特定できる特徴量だけで作成されることも可能である。あるいは、人物画像に限られず、任意の被写体やその一部の画像であってもよい。サーバー装置２００はさらに、様々なフォーマットによって符号化された各メディアストリームを外部の蓄積装置３００へ転送する。加えて、サーバー装置２００は表示端末装置４００からのリクエストにより蓄積装置３００に蓄積されたメディアストリームを読み出して、表示端末装置４００へ配信する機能も持つ。サーバー装置２００は、照合情報を撮像装置１００に送信する送信装置である。

蓄積装置３００は、ハードディスク装置や記録メディア装置などから成り、サーバー装置２００から転送されたメディアストリームの蓄積を行う。

表示端末装置４００はサーバー装置２００にリクエストを行うことによりサーバー装置２００から配信された各メディアストリームを受信する。表示端末装置４００は各メディアストリームを受信した後、様々なフォーマットによって符号化された各メディアを復号化してディスプレイなどへ出力する。

これら、撮像装置１００、サーバー装置２００、蓄積装置３００、表示端末装置４００の数は、図３で示したような本実施形態のように限定されるものではなく、アドレスなどで識別できれば多数存在してもよい。ＬＡＮ５００は、パケットデータを通すのに十分な帯域があるインターネットやイントラネットなどのネットワークであればよい。ＬＡＮ５００への物理的な接続形態としては、有線だけでなく無線により接続するものであっても良い。また、サーバー装置２００、蓄積装置３００、表示端末装置４００は同一の装置で実現してもよい。

このネットワーク接続構成において、本発明のネットワークカメラシステムの動作の詳細を説明する。

図１は、本発明が適用される撮像装置１００を示したブロック構成図である。図１において、１００は撮像装置の本体を示す。

カメラ部１０１は被写体の撮像を行う。カメラ部１０１はＣＭＯＳなどの撮像素子によって撮像された画像信号に信号処理などを施すことによってＹＵＶなどのフォーマットによるデジタル映像信号を出力する。マイク部１０２は集音した音声に対してＰＣＭ（ＰｕｌｓｅＣｏｄｅＭｏｄｕｌａｔｉｏｎ）などのフォーマットによるデジタル音声信号を出力する。

照合部１０３はカメラ部１０１から出力されるデジタル映像に撮影されている映像と、記憶部１０８に記憶されている照合情報とを照合する。照合部１０３は照合した結果に応じて、カメラ部１０１からのデジタル映像信号とマイク部１０２からのデジタル音声信号を各々、ビデオ符号化部１０４とオーディオ符号化部１０５に出力するスイッチングの機能も持つ。

ビデオ符号化部１０４は照合部１０３からのデジタル映像信号を圧縮し符号化する。ビデオ符号化部１０４は配信用にデジタル映像信号の圧縮、フレームレート設定などを施す。ここでの配信用の圧縮方式は、所定の例えば、ＭＰＥＧ４、Ｈ．２６４、ＭＪＰＥＧまたはＪＰＥＧなどの規格に基づく。

オーディオ符号化部１０５は照合部１０３からのデジタル音声信号を圧縮し符号化する。オーディオ符号化部１０５は配信用にデジタル音声信号の圧縮、フレームレート設定などを施される。ここでの配信用の圧縮方式は、所定の例えば、ＡＡＣ（ＡｄｖａｎｃｅｄＡｕｄｉｏＣｏｄｉｎｇ）、Ｇ．７１１、Ｇ．７２２またはＡＭＲ（ＡｄａｐｔｉｖｅＭｕｌｔｉ−Ｒａｔｅ）などの規格に基づく。

ビデオ・オーディオコーデック部１１０は、１０４、１０５の機能を包含し、ＤＳＰ（ＤｉｇｉｔａｌＳｉｇｎａｌＰｒｏｃｅｓｓｏｒ）などで実現される。

パケット化制御部１０６は符号化された映像情報および音声情報をビデオパケット、オーディオパケットにパケット化処理を行う。さらにパケット化制御部１０６は所定のフォーマットに従い、送信されるビデオ、オーディオおよび制御ストリームをＬＡＮＩ／Ｆ部１０７に出力するために、所定の形式に従って配置してパケットの多重化処理も行う。所定の形式とは例えば、ＨＴＴＰ（ＨｙｐｅｒｔｅｘｔＴｒａｎｓｆｅｒＰｒｏｔｏｃｏｌ）、ＲＴＰ（Ｒｅａｌ−ｔｉｍｅＴｒａｎｓｐｏｒｔＰｒｏｔｏｃｏｌ）などの形式を用いることができる。

ＬＡＮＩ／Ｆ部１０７はサーバー装置２００内の記憶部２０５に蓄積された照合情報を受信する。ＬＡＮＩ／Ｆ部１０７では、また、撮像装置１００により撮像、集音したビデオ、オーディオストリームをＬＡＮ５００へ送信する。さらに、ＬＡＮＩ／Ｆ部１０７は通信ネットワーク網と端末間に必要な適応化を図る。

記憶部１０８はＬＡＮＩ／Ｆ部１０７によって受信された照合情報を記憶する。記憶部１０８は不揮発性のメモリなどで構成され、サーバー装置２００に蓄積された照合情報を動的に入れ替え可能となっている。

システム制御部１０９は、適切な操作のためのシグナリングを提供する。システム制御部１０９によって提供される機能は、呼制御、能力情報交換、命令と通知のシグナリング、および論理チャネルの開設などである。例えば、ＨＴＴＰ、ＲＴＳＰ（ＲｅａｌＴｉｍｅＳｔｒｅａｍｉｎｇＰｒｏｔｏｃｏｌ）などの規格に基づく動作を行う。さらにシステム制御部１０９は撮像装置１００を構成する各部の制御をも行う。システム制御部１０９はサーバー装置２００から受信した照合情報で、記憶部１０８に記憶された照合情報を更新する制御も行う。

図２は、本発明が適用されるサーバー装置２００を示したブロック構成図である。図２において、２００はサーバー装置の本体を示す。

ＬＡＮＩ／Ｆ部２０１は記憶部２０５に蓄積された照合情報をＬＡＮ５００へ送信する。また、ＬＡＮＩ／Ｆ部２０１は撮像装置１００から送信されたビデオ及びオーディオストリームを受信する。

デパケット化分離部２０２はＬＡＮＩ／Ｆ部２０１から受信したメディアパケットをビデオ、オーディオおよび制御の各メディアに分離し、ビデオパケット、オーディオパケットをデパケット化し、符号化映像および符号化音声を構成させる。

ビデオ復号化部２０３はデパケット化分離部２０２から受信した符号化映像を復号化してデジタル映像信号とし、復号されたデジタル映像信号を規定情報対応付け部２０４に出力する。

規定情報対応付け部２０４（以下、対応付け部２０４）は、ビデオ復号化部２０３から入力された照合情報に規定情報を対応付けた状態で記憶する。ここで、規定情報とは、サーバー装置２００から撮像装置１００へ送信する照合情報を選択する順序を規定するための情報のことをいう。

例えば、規定情報とは図６（ａ）及び図６（ｂ）に示すように、照合情報６００が撮像装置１００内の記憶部１０８に記憶され照合に用いられる時間帯を示す時間帯情報である。対応付け部２０４において、照合情報が記憶部１０８に記憶される時間帯の情報を照合情報に対応付け、時間の経過に応じて記憶部１０８に記憶される照合情報を切替えてゆくことにより、撮像装置１００へ送信される照合情報を選択する順序が規定される。また、例えば、規定情報とは図６（ｃ）に示すように、撮像装置１００へ送信される照合情報を選択する順序を示す順序情報であってもよい。あるいは、規定情報とは照合情報が照合に用いられた回数や最後に照合に用いられてから経過した時間等であっても良い。利用回数の多い順番、あるいは、最後に照合に用いられてから経過時間の短い順番に選択する順序を決定することができる。この場合、切替えのタイミングは一定時間経過ごとであっても良いし、あるいは利用回数、経過時間の値に基づいて切替えのタイミングを決めてもよく、その他の方法によるものであっても良い。

対応付け部２０４は規定情報が対応付けられた照合情報を記憶部２０５に出力する。照合情報と規定情報との対応付けは、図６（ａ）（ｂ）（ｃ）に示したように直接照合情報に規定情報を付与するものの他に、照合情報と規定情報との対応表を設ける等して対応付けても良い。図６（ａ）（ｂ）（ｃ）の詳細については、後述する。

記憶部２０５は照合情報を蓄積する。図２ではサーバー装置２００の内部に記憶部２０５を設ける構成としているが、記憶部２０５はサーバー装置２００の外部に設けられてもよい。

本実施例では、照合情報と規定情報の対応付けを管理する対応付け部２０４と照合情報を蓄積する記憶部２０５を独立した構成として示しているが、対応付けおよび照合情報の蓄積を一つの記憶装置において行う構成としても良い。

システム制御部２０６はサーバー装置２００のシステム全体を制御する。システム制御部２０６は、対応付け部２０４を参照して照合情報に対応付けられた規定情報に基づいて規定される順序で照合情報を記憶部２０５から選択し、記憶部２０５からＬＡＮＩ／Ｆ部２０１を介して撮像装置１００へ照合情報を転送する制御を行う。

蓄積装置Ｉ／Ｆ部２０７は、ＬＡＮＩ／Ｆ部２０１を介して撮像装置１００から送信されたビデオおよびオーディオストリームをそのまま、蓄積装置３００へ転送する。また蓄積装置Ｉ／Ｆ部２０７は、蓄積装置３００に蓄積されているビデオおよびオーディオストリームを表示端末装置４００へ送信するためにＬＡＮＩ／Ｆ部２０１への転送も行う。

３００は撮像装置１００から送信されたビデオおよびオーディオストリームを蓄積させる、例えばハードディスク装置や記録メディア装置などからなる蓄積装置である。

上記の構成で、本発明にかかるネットワークカメラシステムの画像照合動作を説明する。図４に撮像装置１００の動作を表すフローチャート図、図５に、サーバー装置２００の動作を表すフローチャート図を示す。サーバー装置２００の操作は、ワイヤレスリモコンなどの操作の他に、装置に操作端末を設けなくとも、図３で示した表示端末装置４００からＬＡＮ５００経由でＷｅｂサーバーなどの機能を設け、リモートコントロールで行うことも可能である。

はじめに、ネットワークカメラシステムを運用する前に、サーバー装置２００は、撮像装置１００によって撮像された映像と照合するための照合情報を、対応付け部２０４を介して記憶部２０５に蓄積する（図５のＳ２００）。対応付け部２０４において、記憶部２０５に蓄積される照合情報と規定情報との対応関係が管理される。記憶部２０５に蓄積する照合情報の入力については、例えば、手入力で行う他、マンションなどの居住区域に設置する場合であったら、住民登録データなど予め保存してあるデータベースや宅配業者からのデータ提供などによるマッチングで自動的に作成する等、様々な方法がある。

次にネットワークカメラシステムの運用開始時に、所定の照合情報を記憶部２０５からＬＡＮＩ／Ｆ部２０１を介して撮像装置１００へ送信する（Ｓ２０１）。撮像装置１００は、サーバー装置２００からＬＡＮＩ／Ｆ部１０７を介して受信した照合情報を撮像装置１００の記憶部１０８に記憶する（Ｓ１００）。すなわち、ＬＡＮＩ／Ｆ部１０７は、被写体の画像を撮像するカメラ部１０１により撮像された画像と照合される照合情報を、サーバー装置２００からＬＡＮ５００を介して受信する。記憶部１０８は、ＬＡＮＩ／Ｆ部１０７により受信された照合情報を記憶する。

続いて、サーバー装置２００は撮像装置１００に対して、撮影映像の送信の要求を行う（Ｓ２０２）。サーバー装置２００から撮影映像の送信の要求を受け取った撮像装置１００はカメラ部１０１より撮影を開始する（Ｓ１０１）。

撮影開始後、サーバー装置２００から撮像装置１００に新たな照合情報が送信された場合、撮像装置１００はシステム制御部１０９の制御により、送られた照合情報で記憶部１０８に記憶した照合情報を更新する。サーバー装置２００に蓄積された照合情報に対応付けられた規定情報に基づいて規定される順序に従ってシステム制御部２０６が選択した照合情報で、記憶部１０８に記憶された照合情報を更新する。また、撮像装置１００はサーバー装置２００から撮影終了信号を受信した場合には撮影終了信号を設定する（Ｓ１０２）。

撮像装置１００はカメラ部１０１で撮影された映像から人物映像を検出し（Ｓ１０３）、その人物映像をＳ１００あるいはＳ１０２で記憶部１０８に記憶した照合情報と照合する（Ｓ１０４）。すなわち、照合部１０３は、記憶部１０８に記憶された照合情報とカメラ部１０１で撮像された画像とを照合する。照合の結果、カメラ部１０１で撮影された人物映像と、記憶部１０８に記憶されている照合情報の人物とが一致しない場合に、照合部１０３は人物映像をビデオ・オーディオコーデック部１１０へ転送し、ビデオ符号化部１０４で映像の符号化を行う（Ｓ１０５）。

照合の結果、記憶部１０８に記憶されている照合情報の人物と一致する場合には、照合部１０３は映像をビデオ・オーディオコーデック部１１０へ転送しないようにする。

または、照合部１０３は、撮影した人物映像が記憶部１０８内の照合情報の人物と一致しない場合は人物映像をビデオ・オーディオコーデック部１１０へ転送せず、照合一致の場合に人物映像をビデオ・オーディオコーデック部１１０へ転送してもよい。ビデオ・オーディオコーデック部１１０へ転送された人物映像はビデオ符号化部１０４で符号化される。

パケット化制御部１０６はビデオ符号化部１０４で符号化された映像データを例えばＨＴＴＰの形式にパケット化する。そして、ＬＡＮＩ／Ｆ部１０７はパケット化した映像ストリームを、ＬＡＮ５００を介してサーバー装置２００へ送信する（Ｓ１０６）。照合一致の場合、人物映像の代わりに、一致した人物の識別情報をサーバー装置２００へ送信してもよい。人物映像に代えて人物映像よりもデータサイズの小さい識別情報を送信することにより、ネットワークの負荷を軽減することができる。

サーバー装置２００は、撮像装置１００から送信された映像ストリームをＬＡＮＩ／Ｆ部２０１から受信して（Ｓ２０３）、パケット化された映像ストリームのまま、蓄積装置Ｉ／Ｆ部２０７を介して蓄積装置３００へ転送する（Ｓ２０４）。

このようにして、記憶部１０８に記憶された照合情報と一致しない人物映像のみ蓄積装置３００に蓄積することにより、記憶部１０８に記憶されていない人物を不審人物として、その映像を蓄積することができる。または、記憶部１０８に記憶された照合情報を一致する人物映像のみ蓄積装置３００に蓄積することにより、記憶部１０８に記憶された特定人物の映像のみを蓄積することができる。

続いて送信装置であるサーバー装置２００は、記憶部１０８に記憶された照合情報を更新するか判断を行う（Ｓ２０５）。更新を行う場合、システム制御部２０６は対応付け部２０４を参照して、照合情報に対応付けられた規定情報に基づき規定される順序で照合情報を記憶部２０５から選択し、記憶部２０５からＬＡＮＩ／Ｆ部２０１、ＬＡＮ５００を介して撮像装置１００へ照合情報を送信する（Ｓ２０６）。

このように、システム制御部２０６は、記憶部１０８に記憶された照合情報を更新するための照合情報を、規定情報に基づいて規定された順序に従って、記憶部２０５に蓄積された照合情報から選択する。そして、選択した照合情報をＬＡＮＩ／Ｆ部２０１から撮像装置１００に送信して、記憶部１０８に記憶された照合情報を更新する。なお、照合情報を選択する順序を規定するための規定情報は、記憶部２０５に蓄積される照合情報に対応付け部２０４により対応付けて記憶される。

最後に、ネットワークカメラシステムの運用を停止する際には、サーバー装置２００は撮像装置１００に対して撮影を終了し撮影映像の送信を停止する要求を行い（Ｓ２０５）、撮影映像送信停止の要求を受信した撮像装置１００は撮影を終了させる（Ｓ１０７）。

以下、記憶部１０８に記憶された照合情報の更新について詳細に説明する。

まず、記憶部２０５に記憶される照合情報に対し、システム制御部２０６が記憶部２０５からいずれの照合情報を選択するかを規定するために用いる規定情報が対応付けられる。規定情報はユーザーの手入力によって設定することができる。或いは、サーバー装置２００または撮像装置１００によって自動的に規定情報が設定されてもよい。そして、設定に基づいて、対応付け部２０４は記憶部２０５に蓄積する照合情報に規定情報を対応付けた状態で記憶する。

例えば、照合情報が照合に用いられるために撮像装置１００内の記憶部１０８に記憶される時間帯、日、曜日等の情報が規定情報として各照合情報に対応付けて対応付け部２０４に記憶される。

図６（ａ）に、対応付け部２０４で記憶される照合情報のデータベースの例を示す。対応付け部２０４は、Ｓ２００で入力された各照合情報を照合情報が照合に用いられる時間帯ごとにデータベース化して、作成したデータベースに照合に用いられる時間帯の情報を規定情報として対応付けて記憶する。

照合情報は図６に示すように各々の人物を示すものとして人物の顔画像そのものだけではなく、その人物が特定できる特徴量だけで作成されることも可能である。顔画像よりもデータサイズの小さい特徴量で照合情報を作成することにより、顔画像を照合情報として記憶する場合に比べ、カメラ内の限られた量のメモリにより多くの照合情報を記憶することができる。

ネットワークシステムの運用が開始されると、システム制御部２０６により、不図示の計時部の計時結果に基づきネットワークカメラシステムの運用時刻、日、曜日等に対応したデータベース（照合情報）が記憶部２０５から選択される。そして、システム制御部２０６により選択されたデータベースは記憶部２０５からＬＡＮＩ／Ｆ部２０１、ＬＡＮ５００を介して撮像装置１００へ送信される。撮像装置１００はデータベースを受信すると、記憶部１０８に蓄積されているデータベースをサーバー装置２００から送信されたデータベースで更新する。このようにして、サーバー装置２００から撮像装置１００へ送信する照合情報を選択する順序が規定され、記憶部１０８に記憶された照合情報が更新される。

ネットワークカメラシステムの運用時刻、日、曜日等を計測する計時部はＮＴＰ（ＮｅｔｗｏｒｋＴｉｍｅＰｒｏｔｏｃｏｌ）等を用いて実現することができる。計時部はサーバー装置２００内に設けたが、撮像装置１００に設け、撮像装置１００からサーバー装置２００に照合情報の更新を要求しても良い。或いは、計時部を撮像装置、サーバー装置の外部に設けられても良い。

図６（ａ）では対応付け部２０４は一定の時間帯に用いられる照合情報ごとのデータベースを作成する例を示したが、個別の照合情報ごとに異なる時間帯の規定情報を対応付けるようにしても良い。例えば、対応付け部２０４は図６（ｂ）のように個人ごとのスケジュールに応じて、個別の照合情報に個別の時間帯の規定情報を対応付けた状態で記憶しても良い。

本実施形態による照合システムは、時間帯に応じて記憶部１０８に蓄積される照合情報の更新を行う。従って、限られた量のメモリに記憶された照合情報と撮像した映像とを照合する際に、カメラ内のメモリに記憶された照合情報の更新を行わない照合システムに比べて、それぞれの時間帯において、高い確率で照合一致の結果を得ることができる。それにより、カメラ内のメモリ量を制限した認証システムであっても、従来技術に比べて、一定期間中に認証可能な被写体の数を増やすことができる。また、カメラ内のメモリ量を制限した照合システムであっても、従来技術に比べて、照合情報と一致あるいは不一致の被写体を検出する精度を高めることができる。さらに、本発明によれば、照合のたびに操作者が照合情報を要求することを必要とせず、操作者の負担を軽減することができる。

また、規定情報は時間帯の情報に限られず、単に選択される順序についての情報であっても良い。図６（ｃ）を用いて例を示す。対応付け部２０４では、記憶部２０５に蓄積される照合情報に規定情報として番号が対応付けられた状態で記憶される。記憶部２０５に蓄積された照合情報は規定情報として振られた番号の順に記憶部２０５から記憶部１０８へ送信され、送信された照合情報で記憶部１０８に記憶された照合情報を更新する。

図６（ｃ）の例では、まず、記憶部１０８に１〜２０の規定情報が対応付けられた照合情報が記憶されている。そして、照合部１０３での照合により、例えば、１の規定情報が対応付けされた照合情報と撮影された画像とが照合一致した場合、サーバー装置２００は記憶部２０５から２１の規定情報が対応付けられた照合情報を撮像装置１００に送信する。そして、システム制御部１０９は１の規定情報が対応付けられた照合情報を２１の規定情報が対応付けられた照合情報で更新する。

照合情報に優先順位をつけて、優先順位に従って記憶部１０８に記憶される照合情報を更新してゆくことにより、既に照合が済んだ照合情報を、記憶部２０５に蓄積されている。

照合情報のうち照合一致の確率のより高い照合情報で更新して照合することができる。

また、照合一致時に照合情報を切替える構成でなく、照合不一致の場合に、記憶部１０８に蓄積され１〜２０の規定情報が対応付けられた照合情報を記憶部２０５に蓄積され２１〜４０の規定情報が対応付けられた照合情報で更新してもよい。

あるいは、計時手段の計時に基づき、一定時間ごとに記憶部１０８に記憶された照合情報の更新を行っても良い。例えば、まず、記憶部１０８に１〜２０の規定情報が対応付けられた照合情報が記憶されている場合、一定時間経過後に、２１〜４０の規定情報が対応付けられた照合情報をサーバー装置２００から撮像装置１００へ送信する。そして、システム制御部１０９は１〜２０の規定情報が対応付けられた照合情報を２１〜４０の規定情報が対応付けられた照合情報で更新することができる。あるいは、まず、記憶部１０８に１〜２０の規定情報が対応付けられた照合情報が記憶されている場合、一定時間経過後に、２１の規定情報が対応付けられた照合情報をサーバー装置２００から撮像装置１００へ送信する。そして、システム制御部１０９は１の規定情報が対応付けられた照合情報を２１の照合情報で更新することができる。

照合情報に優先順位をつけて、優先順位に従って記憶部１０８に蓄積される照合情報の更新をしてゆくことにより、限られた量のメモリに記憶された照合情報と撮像した映像とを照合する場合に、照合確率の高い照合情報の順に照合を行うことができる。さらに、本発明によれば、照合のたびに操作者が照合情報を要求することを必要とせず、操作者の負担を軽減することができる。

以上、記憶部１０８に蓄積する照合情報の更新について説明したが、本発明は上記の更新の態様に限られず、規定情報に基づいて記憶部２０５から選択した照合情報で記憶部１０８に蓄積する照合情報を更新するものであればよい。本実施形態では人物照合について説明を行ったが、照合を行う対象は人物以外でも良く、例えば車両や車両のナンバープレート等であっても良い。

また、本実施形態では、対応付け部２０４がサーバー装置２００内に設けられる場合について説明したが、対応付け部２０４は撮像装置１００内に設けられても本発明の趣旨を逸脱するものではない。さらに、本実施形態ではサーバー装置２００から撮像装置１００へ送信すべき照合情報をシステム制御部２０６で選択する構成としたが、撮像装置１００側のシステム制御部１０９が規定情報に基づいて規定される順序に従って照合情報を選択してもよい。システム制御部１０９は照合情報を選択した後、選択した照合情報を撮像装置１００へ送信するようサーバー装置２００に要求を行う。

以上の構成からなる本発明によれば、計時手段の計時に対応する時間情報が対応付けられた照合情報を蓄積装置から選択して、カメラ内に保持された照合情報を更新する。あるいは、一定時間ごとに、または照合一致若しくは不一致のタイミングで前記順序情報に基づいて決定される順序で前記蓄積手段から照合情報を選択して、カメラ内に保持された照合情報を更新する。従って、カメラ内の限られた量のメモリに記憶された画像と撮像した画像とを照合する照合システムを運用する場合に、照合一致する確率を向上させることができる。それにより、カメラ内の限られた量のメモリに記憶された画像と撮像した画像とを照合する場合に、より多く照合一致の結果を得られるようにすることができる。従って、カメラ内のメモリ量を制限した認証システムであっても、従来技術に比べて、一定期間中に認証可能な被写体の数を増やすことができる。また、カメラ内のメモリ量が制限されていても、照合情報と一致あるいは不一致の被写体を検出する精度を高めることができる。さらに、本発明によれば、照合のたびに操作者が照合情報を要求することを必要とせず、操作者の負担を軽減することができる。

［第２の実施形態］
第２の実施形態ではネットワークカメラシステム自身が、撮影した画像から照合情報を作成する実施形態について説明する。構成は第１の実施形態と異なる点のみ説明する。撮像装置１００内の照合部１０３はスイッチを有し、カメラ部で撮影した映像と記憶部１０８に蓄積された照合情報との照合を行うか否かを切替えることができる。

また、サーバー装置２００内の対応付け部２０４は顔検出機能を持ち、システム制御部２０６からの制御によりビデオ復号化部２０３から出力されたデジタル映像信号から顔画像を抽出し、照合情報を作成する。検出機能は顔検出に限られず、任意の被写体、或いはその一部を検出対象とするものであってもよい。

他の構成は第１の実施形態と同一であるので、説明を省略し、続いて第２の実施形態にかかるネットワークカメラシステムの動作について説明する。

第２の実施形態にかかるネットワークカメラシステムは、システムを運用する上で必要となる照合情報を作成するモードと、作成された照合情報を用いて監視を行うモードと、２つのモードで動作を行う。

まず、照合情報を作成するモードをサーバー装置２００の動作で説明する。図７に撮像装置１００の動作を表すフローチャート図、図８に、照合情報を作成するサーバー装置２００の動作を表すフローチャート図を示す。図４及び図５において説明したステップと同一の処理を行うステップについては、図４及び図５と同一のステップ名を付す。

照合情報の作成開始（Ｓ４００）とともに、まず、サーバー装置２００は撮像装置１００に、照合部１０３のスイッチをＯＦＦにする信号を送信し（Ｓ４０１）、信号を受信した撮像装置１００は、照合部１０３に対してスイッチＯＦＦを設定する（Ｓ３００）。続いて、サーバー装置２００は撮像装置１００に対して、撮影映像の送信の要求を行う（Ｓ４０２）。

要求を受け取った撮像装置１００はカメラ部１０１より映像の撮影を開始し（Ｓ３０１）、撮影した映像から人物映像を検出する（Ｓ１０３）。

人物映像が検出された場合、照合部１０３では照合部スイッチがＯＦＦであるから（Ｓ３０３）、映像をビデオ・オーディオコーデック部１１０へ転送する。そして、ビデオ符号化部１０４で映像の符号化を行う（Ｓ１０５）。この場合の符号化方式はＨ．２６４、ＭＪＰＥＧなど、照合情報を作成する上で必要な人物の特徴量を計測できるだけの画質であればよい。パケット化制御部１０６は符号化された映像データに例えばＨＴＴＰの形式のパケット化を行い、ＬＡＮＩ／Ｆ部１０７はＬＡＮ５００を介してサーバー装置２００へ映像ストリームを送信する（Ｓ１０６）。

サーバー装置２００は撮像装置１００から送信された映像ストリームをＬＡＮＩ／Ｆ部２０１から受信する（Ｓ４０３）。受信された映像ストリームはデパケット化分離部２０２によってデパケット化されてビデオ復号化部２０３へ転送される。ここで符号化された映像データに対しデコード処理を施されて対応付け部２０４へ転送される（Ｓ４０４）。

対応付け部２０４では、撮像されている人物の画像に基づいて照合情報を作成する。対応付け部２０４はビデオ復号化部２０３から出力されたデジタル映像信号から顔画像を抽出し、照合情報を作成する（Ｓ４０５）。

続いて、対応付け部２０４は作成された照合情報に規定情報を対応付ける（Ｓ４０６）。

例えば、対応付け部２０４は図６（ａ）に示したように、６：００〜８：００などの一定時間帯ごと、または曜日ごと等の画像データベースを作成する。そして、対応付け部２０４では一定期間撮像された人物画像を、それぞれの人物画像が撮影された時間帯に該当する時間帯の画像データベースにそれぞれ登録する。同一の人物画像が異なる時間帯に撮影された場合、最後に撮影された時間帯あるいは撮影された回数の多い時間帯の画像データベースに登録してもよい。

または、対応付け部２０４は、図６（ｂ）のように特定の人物画像に、その人物画像が多く撮影されている時間帯の情報を規定情報として対応付けしてもよい。あるいは、対応付け部２０４は、撮影頻度に応じて照合に用いる優先順位を決め、図６（ｃ）に示したように、それぞれの照合情報にその優先順位を規定情報として対応付けしても良い。

対応付け部２０４はこのようにして作成された照合情報を記憶部２０５に転送し、蓄積させておく（Ｓ４０７）。本実施形態では、規定情報対応付け部がサーバー装置２００内に設けられる場合について説明したが、規定情報対応付け部は撮像装置１００内に設けられても本発明の趣旨を逸脱するものではない。

一定期間撮影された人物画像を記憶部２０５に登録できたら（Ｓ４０８）、撮像装置１００に対して撮影を終了し撮影映像の送信を停止する要求を行い（Ｓ４０９）、画像データベース作成を終了する（Ｓ４１０）。

次に、作成された照合情報を使用して、ネットワークカメラシステムを運用させたときの動作を説明する。図７に撮像装置１００の動作を表すフローチャート図、図９にネットワークカメラシステムのサーバー装置２００における動作を表すフローチャート図を示す。

まず、サーバー装置２００は、撮像装置１００へ照合部１０３のスイッチをＯＮにする信号と、ネットワークカメラシステムの運用開始時に対応する照合情報を記憶部２０５から撮像装置１００へ送信する（Ｓ５０１）。サーバー装置２００から照合部１０３のスイッチをＯＮにする信号と照合情報を受信した撮像装置１００は、照合部１０３に対してＯＮを設定し、さらに照合情報を撮像装置１００の記憶部１０８に記憶する（Ｓ３００）。

続いて、サーバー装置２００は撮像装置１００に対して、撮影映像の送信の要求を行う（Ｓ２０２）。要求を受け取った撮像装置１００はカメラ部１０１より映像の撮影を開始する（Ｓ３０１）。そして、撮像装置１００はカメラ部１０１で撮影された映像から人物検出を行う（Ｓ１０３）。

続いて、照合部スイッチがＯＮであるので（Ｓ３０３）、撮像装置１００は人物が検出されている間、その映像を記憶部１０８に登録設定されている照合情報と照合を行う（Ｓ１０４）。

以降の、照合結果に応じた映像ストリームの送信、照合情報の更新、及び撮影の終了についての実施形態は第１の実施形態で説明したものと重複するので説明を省略する。

第２の実施形態にかかるネットワークシステムは、ネットワークカメラシステム自身が、撮影した画像から自動的に照合情報を作成し、作成された照合情報に規定情報を対応付けする。従って、限られた量のメモリに記憶された照合情報と撮像した映像とを照合して、高い確率で一致した結果を得ることができるネットワークカメラシステムをより自律的に運用できる。さらに、本発明によれば、照合のたびに操作者が照合情報を要求することを必要とせず、操作者の負担を軽減することができる。

［第３の実施形態］
第３の実施形態では、記憶部２０５に蓄積された照合情報に対応付けられた規定情報をネットワークカメラシステムが自動的に更新する実施形態について説明する。

構成は第１の実施形態と異なる点のみ説明する。第３の実施形態におけるサーバー装置２００は撮像装置１００から受信した映像と記憶部２０５に蓄積された照合情報との照合を行うことができる。対応付け部２０４に照合機能を持たせてもよく、あるいは、サーバー装置２００内に照合部を設けても良い。その他の構成は第１の実施形態または第２の実施形態と同一であるので、説明を省略する。以下、第３の実施形態にかかるネットワークカメラシステムの動作について説明する。

まず、第３の実施形態にかかるネットワークカメラシステムは第１の実施形態または第２の実施形態と同様にして、照合情報の蓄積、規定情報の対応付けを行う。そして、ネットワークカメラシステムの運用が開始されると、撮像装置１００はカメラ部１０１で撮影された映像から人物を検出し、その人物映像を記憶部１０８に蓄積された照合情報と照合する。

照合の結果、撮影された人物が記憶部１０８に記憶されている照合情報の人物と一致しない場合に、映像をビデオ・オーディオコーデック部１１０へ転送し、ビデオ符号化部１０４で撮影された人物映像の符号化を行う。照合の結果、撮影された人物が記憶部１０８に記憶されている照合情報の人物と一致する場合には、映像をビデオ・オーディオコーデック部１１０への転送を行わないようにする。

サーバー装置２００は、撮像装置１００から送信された映像ストリームをＬＡＮＩ／Ｆ部２０１から受信して、受信した映像ストリームをデパケット化分離部２０２によってデパケット化しビデオ復号化部２０３へ転送する。ビデオ復号化部２０３は符号化された映像データにデコード処理を施して対応付け部２０４へ転送する。対応付け部２０４はビデオ復号化部２０３から出力されたデジタル映像信号から顔画像を抽出し、抽出した顔画像が記憶部２０５に蓄積された照合情報と一致するか否かを判断する。撮像装置１００から送信された画像と記憶部２０５に蓄積された照合情報との照合は、対応付け部２０４で行うのではなく、サーバー装置２００内に独立して照合部を設けて行ってもよい。

照合の結果、抽出された顔画像と記憶部２０５に蓄積された照合情報とが一致した場合には、その照合情報に対応付けされた規定情報を更新し、その照合情報と一致した画像が撮影された時刻、時間帯、日付、または曜日に対応した規定情報を対応付けする。あるいは、撮像装置１００から送信された映像から抽出された顔画像が記憶部２０５に蓄積された特定の照合情報と一致する頻度が一定以上の場合にのみ、その照合情報に対応付けされた規定情報を更新してもよい。

以降の、照合情報の更新、及び撮影の終了についての実施形態は第１の実施形態で説明したものと重複するので説明を省略する。

第３の実施形態にかかるネットワークカメラシステムは、ネットワークカメラシステムが照合情報に対応付けされる規定情報を自動的に更新する。すなわち、記憶部２０５に蓄積された規定情報により規定される順序に従って選択された照合情報と撮像された画像が一致しない場合、規定情報を更新することにより、この更新以降に行う照合で、照合情報と撮像された画像が一致する確率を上げることができる。従って、限られた量のメモリに記憶された照合情報と撮像した映像とを照合し、従来の照合システムに比べて高い確率で一致した結果を得ることができる。さらに、本発明によれば、照合のたびに操作者が照合情報を要求することを必要とせず、操作者の負担を軽減することができる。

［他の実施形態］
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

Claims

撮像装置と、
前記撮像装置とネットワークで接続される蓄積手段と、
前記撮像装置に記憶された照合情報と対応する被写体又は前記撮像装置に記憶された前記照合情報と対応しない被写体を、前記撮像装置が撮像した撮像画像において特定する照合手段と、
前記蓄積手段に蓄積された照合情報が前記照合手段による被写体の特定に用いられる時間帯を示す時間情報を記憶する記憶手段と、
前記撮像装置に記憶された照合情報であって、該照合情報と対応する被写体又は該照合情報と対応しない被写体を前記撮像画像において特定するための照合情報を、前記蓄積手段に蓄積された照合情報のうち計時手段の計時に対応する前記時間情報が対応付けられた照合情報で更新する更新手段とを有することを特徴とする画像照合システム。
撮像装置と、
前記撮像装置とネットワークで接続される蓄積手段と、
前記撮像装置に記憶された照合情報と対応する被写体又は前記撮像装置に記憶された前記照合情報と対応しない被写体を、前記撮像装置が撮像した撮像画像において特定する照合手段と、
前記蓄積手段に蓄積された照合情報が前記照合手段による被写体の特定に用いられる順序を示す順序情報を記憶する記憶手段と、
前記撮像装置に記憶された照合情報であって、該照合情報と対応する被写体又は該照合情報と対応しない被写体を前記撮像画像において特定するための照合情報を前記順序情報に基づいて決定される順序で前記蓄積手段から選択した照合情報で更新する更新手段とを有することを特徴とする画像照合システム。
前記蓄積手段は、前記撮像画像中の被写体の画像を前記照合情報として蓄積し、前記記憶手段は、該照合情報に対応する被写体が撮像された時間の情報を前記時間情報として記憶することを特徴とする請求項１に記載の画像照合システム。
前記撮像画像中の被写体が前記撮像装置に記憶された前記照合情報と対応しない場合、該撮像画像を前記ネットワークに送信する送信手段を有することを特徴とする請求項１又は請求項２に記載の画像照合システム。
前記撮像画像中の被写体が前記撮像装置に記憶された前記照合情報と対応しない場合、該撮像画像を前記ネットワークに送信する送信手段と、
前記送信手段によって送信された画像と前記蓄積手段に蓄積された照合情報との照合を行う第二の照合手段とを有し、
前記記憶手段は、前記送信手段によって送信された画像と前記蓄積手段に蓄積された照合情報とが対応すると前記第二の照合手段により判断された場合は、前記送信手段によって送信された前記撮像画像が撮影された時間を前記時間情報として記憶することを特徴とする請求項１に記載の画像照合システム。
撮像手段と、
照合情報を記憶する記憶手段と、
前記記憶手段に記憶された前記照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手段とを有する撮像装置にネットワークを介して照合情報を送信する送信装置であって、
蓄積手段に蓄積された照合情報が前記照合手段による被写体の特定に用いられる時間帯を示す時間情報を記憶する記憶手段と、
前記蓄積手段に蓄積された照合情報のうち計時手段の計時に対応する時間情報が対応付けられた照合情報を、前記照合手段が照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報として、前記撮像装置に送信する送信手段とを有することを特徴とする送信装置。
撮像手段と、
照合情報を記憶する記憶手段と、
前記記憶手段に記憶された前記照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手段とを有する撮像装置にネットワークを介して照合情報を送信する送信装置であって、
蓄積手段に蓄積された照合情報が前記照合手段による被写体の特定に用いられる順序を示す順序情報を記憶する記憶手段と、
前記蓄積手段に蓄積された照合情報を、前記照合手段が照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報として前記順序情報に基づいて決定される順序で前記撮像装置に送信する送信手段とを有することを特徴とする送信装置。
前記蓄積手段は、前記撮像画像中の被写体の画像を前記照合情報として蓄積し、前記記憶手段は、該照合情報に対応する被写体が撮像された時間の情報を前記時間情報として記憶することを特徴とする請求項６に記載の送信装置。
撮像手段と、
照合情報を記憶する記憶手段と、
前記記憶手段に記憶された照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手段と、
計時手段の計時に対応する時間情報が対応付けられた照合情報を蓄積手段からネットワークを介して選択する選択手段と、
前記照合手段が照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報であって前記選択手段が選択した照合情報で前記記憶手段に記憶された照合情報を更新する更新手段とを有することを特徴とする撮像装置。
撮像手段と、
照合情報を記憶する記憶手段と、
前記記憶手段に記憶された照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手段と、
前記照合情報が前記照合手段による被写体の特定に用いられる順序を示す順序情報に基づいて決定される順序で蓄積手段からネットワークを介して照合情報を選択する選択手段と、
前記照合手段が照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報であって前記選択手段が選択した照合情報で前記記憶手段に記憶された照合情報を更新する更新手段とを有することを特徴とする撮像装置。
前記撮像画像から所定の被写体の画像を検出する検出手段を有し、
前記照合手段は、前記検出手段が検出した前記所定の被写体の画像と前記照合情報とを照合して、前記撮像装置に記憶された照合情報と対応する被写体又は前記撮像装置に記憶された前記照合情報と対応しない被写体を、前記撮像画像において特定することを特徴とする請求項９又は請求項１０に記載の撮像装置。
撮像手段と、
照合情報を記憶する記憶手段と、
前記記憶手段に記憶された前記照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手段とを有する撮像装置にネットワークを介して照合情報を送信する送信方法であって、
記憶手段が、蓄積手段に蓄積された照合情報が前記照合手段による被写体の特定に用いられる時間帯を示す時間情報を記憶する記憶ステップと、
送信手段が、前記蓄積手段に蓄積された照合情報のうち計時手段の計時に対応する時間情報が対応付けられた照合情報を、前記照合手段が照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報として、前記撮像装置に送信する送信ステップとを有することを特徴とする送信方法。
撮像手段と、
照合情報を記憶する記憶手段とを有する撮像装置の制御方法であって、照合手段が、前記記憶手段に記憶された照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合ステップと、
選択手段が、計時手段の計時に対応する時間情報が対応付けられた照合情報を蓄積手段からネットワークを介して選択する選択ステップと、
更新手段が、前記照合ステップにおいて照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報であって前記選択ステップにおいて選択した照合情報で前記記憶手段に記憶された照合情報を更新する更新ステップとを有することを特徴とする制御方法。
撮像手段と、
照合情報を記憶する記憶手段と、
前記記憶手段に記憶された前記照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手段とを有する撮像装置にネットワークを介して照合情報を送信するコンピュータに、
蓄積手段に蓄積された照合情報が前記照合手段による被写体の特定に用いられる時間帯を示す時間情報を記憶する記憶手順と、
前記蓄積手段に蓄積された照合情報のうち、計時手段の計時に対応する時間情報が対応付けられた照合情報を、前記照合手段が照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報として、前記撮像装置に送信する送信手順とを実行させるためのプログラム。
撮像手段と、
照合情報を記憶する記憶手段と、
前記記憶手段に記憶された前記照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手段とを有する撮像装置にネットワークを介して照合情報を送信するコンピュータに、
蓄積手段に蓄積された照合情報が前記照合手段による被写体の特定に用いられる順序を示す順序情報を記憶する記憶手順と、
前記蓄積手段に蓄積された照合情報を、前記照合手段が照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報として前記順序情報に基づいて決定される順序で前記撮像装置に送信する送信手順とを実行させるためのプログラム。
前記蓄積手段は、前記撮像画像中の被写体の画像を前記照合情報として蓄積し、前記記憶手順において、該照合情報に対応する被写体が撮像された時間の情報を前記時間情報として記憶する処理を前記コンピュータに実行させるための請求項１４に記載のプログラム。
撮像手段に接続され、
照合情報を記憶する記憶手段を有するコンピュータに、
前記記憶手段に記憶された照合情報と対応する被写体又は前記記憶手段に記憶された照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手順と、
計時手段の計時に対応する時間情報が対応付けられた照合情報を蓄積手段からネットワークを介して選択する選択手順と、
前記照合手順において照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報であって前記選択手順において選択した照合情報で前記記憶手段に記憶された照合情報を更新する更新手順とを実行させるためのプログラム。
撮像手段に接続され、
照合情報を記憶する記憶手段を有するコンピュータに、
前記記憶手段に記憶された照合情報と対応する被写体又は前記記憶手段に記憶された照合情報と対応しない被写体を、前記撮像手段が撮像した撮像画像において特定する照合手順と、
前記照合情報が前記照合手順における被写体の特定に用いられる順序を示す順序情報に基づいて決定される順序で蓄積手段からネットワークを介して照合情報を選択する選択手順と、
前記照合手順において照合情報と対応する被写体又は照合情報と対応しない被写体を前記撮像画像において特定するための照合情報であって前記選択手順において選択した照合情報で記憶手段に記憶された照合情報を更新する更新手順とを実行させるためのプログラム。
前記コンピュータに、
前記撮像画像から所定の被写体の画像を検出する検出手順を実行させ、
前記照合手順において、前記検出手順において検出した前記所定の被写体の画像と前記照合情報とを照合して、前記記憶手段に記憶された照合情報と対応する被写体又は前記記憶手段に記憶された前記照合情報と対応しない被写体を、前記撮像画像において特定する処理を実行させるための請求項１７又は請求項１８に記載のプログラム。