JP2010087898A - 撮像装置及びネットワークカメラシステム - Google Patents

Abstract

【課題】被写体となる一人以上の人物にとって、満足度が高い写真を撮影できるようにする。
【解決手段】本撮影の前に得られたスルー画像として生成された撮像データに対して、顔検出を行う顔認識部１１５２と、顔認識部１１５２により検出された顔の個人識別を行う個人識別部１１５３と、個人識別部１１５３の識別結果に基にして撮像データの切り出し処理を行う画像処理部１１００と、画像処理部１１００により切り出された撮像データをネットワーク上に送出する通信部１３００とを設ける。
【選択図】 図１

Description

本発明は撮像装置及びネットワークカメラシステムに関し、特に、動画像データをネットワーク上に送出するために用いて好適な技術に関する。

近年、インターネットが普及し、ＷＷＷ（World Wide Web）等による情報発信が一般的に行なわれるようになってきた。その様な中で、撮影した画像に写っている人物を自動的に認識し、その認識された人物の所有する端末へその画像を転送する技術が提案されている。

例えば、サーバが、ユーザが人物画像の配信を希望する人物の顔画像と、この人物の送信先の電子メールアドレスとをデータベースに記憶しておく。一人以上の人物が被写体となった画像がユーザの端末からアップロードされると、サーバが受信した画像の被写体である人物の顔画像と、データベースに登録された認識対象の顔画像とを比較して、配信先の人物を特定する。そしてサーバは、特定した人物に対応する電子メールアドレスをデータベースから取得する。サーバは、この電子メールアドレスを宛先にして、この人物が被写体となった画像を添付した電子メール、あるいは、人物画像をダウンロードするためのＵＲＬを添付した電子メールを配信する（例えば、特許文献１を参照）。

特開２００４−３２６２８１号公報

しかしながら、前述の特許文献１に開示された構成では、被写体となった人物に自動的に画像を送信することができるが、自分自身がどのように撮影されたのかを被写体が知ることができるのは、あくまで撮影を終えた後であった。つまり、例えばその被写体の襟が折れていたり、ネクタイが曲っていたりしたとしても、誰かが指摘しなければ撮影前に被写体がそれに気付くことは難しく、撮影を終えた後にしか被写体がそれを確認することができなかった。

本発明は前述の問題点に鑑み、特に人物の写真を撮る場合において、被写体となる一人以上の人物にとって、満足度が高い写真を撮影することが可能な撮像装置を提供できるようにすることを目的としている。

本発明の撮像装置は、被写体を撮像して撮像データを生成する撮像手段と、前記撮像手段により生成された撮像データから顔検出を行う顔検出手段と、前記顔検出手段により検出された顔の個人識別を行い、認証する個人識別手段と、前記個人識別手段の認証結果に基づき、前記撮像データの一部の切り出し処理を行う画像処理手段と、前記画像処理手段により処理された撮像データをネットワーク上に送出するネットワーク通信手段と、本撮影を指示する撮影指示手段と、前記撮影指示手段にて本撮影が指示されたことに応じて行われた本撮影で生成された撮像データを記録する記録手段とを有し、前記撮影指示手段によって本撮影が指示されるよりも前に前記撮像手段により生成され、かつ、前記記録手段に記録されない動画像の撮像データに対して、前記顔検出手段、前記個人識別手段、前記画像処理手段、および、前記ネットワーク通信手段が各々の処理を行うことを特徴とする。

本発明のネットワークカメラシステムは、前記に記載の撮像装置と、前記撮像装置より送信された動画像を表示装置に表示する表示端末を有し、前記表示端末は、前記表示装置に表示された画像がユーザの意図にそぐわない場合は、前記撮像装置に対して再撮影の要求を行う通信手段を有することを特徴とする。

本発明によれば、本撮影前に、被写体に自分がどのように撮られるかを事前に画像で確認させることが可能となる。

（第１の実施形態）
図１に、本発明の撮像装置を用いたネットワークカメラシステムの概略構成を説明するブロック図を示す。
本実施形態の撮像装置１５００には画像処理部１１００、撮像部１２００、及び通信部１３００の大きく分けて３つの構成要素が存在する。撮像部１２００は、映像が入射されるレンズ１２１０、レンズ１２１０で集められた光を電気信号に変換するセンサー１２２０、センサー１２２０から得られる信号を現像する現像処理部１２３０からなる。このような構成により、被写体を撮像して撮像データを生成する。

現像された信号は画像データとして画像処理部１１００に与えられ、そこで符号化などの処理を経た後、通信部１３００に符号化データとして与えられる。通信部１３００は、ネットワーク通信部として機能して、入力された符号化データを送出するネットワークの形態に応じてパケット化するなどの処理をネットワーク制御部１３１０が行い、ネットワークインターフェース１３２０に対して送信用データとして出力する。

ネットワークインターフェース１３２０は、ネットワーク制御部１３１０から入力された送信用データを、ネットワーク網１４００に対してそのネットワークの形態に応じた形で送出する。ネットワーク網１４００は、Ethernet（登録商標）等の有線ＬＡＮ、ＩＥＥＥ８０２．１１ｂ等に代表される形式の無線ＬＡＮ、もしくはＩＳＤＮ等の公衆回線網などを代表的なものとして想定することができる。

画像処理部１１００で処理された画像は、メディアドライブ１６００を介して、メモリーカード１７００に保存される。また、メモリーカード１７００は着脱可能であり、メモリーカード１７００に保存された画像データを、メディアドライブ１６００を介して読み出し、画像処理部１１００で再び処理することも可能である。

なお、本実施形態では図１において画像処理部１１００、撮像部１２００、通信部１３００はそれぞれ別のブロックとして記述しているが、本実施形態を実ハードウェアで構成する際には、これらのブロックをそれぞれ別のＩＣとして実現することができる。もしくは、各部のいくつかの部分（例えば現像処理部１２３０と画像処理部１１００とネットワーク制御部１３１０）をまとめて１チップ上に実現するなどの様々な実現形態が可能であり、その形態は本実施形態において制限されるものではない。また、ここで述べる表示端末とは、通信機能と画像の表示機能を有したものであり、携帯電話などが好例となる。

図２は、画像処理部１１００の詳細な構成を示すブロック図である。
図２において、画像処理部１１００にはフレームバッファ１１１０、画像データＤＭＡＣ（ダイレクトメモリアクセス・コントローラ）１１２０、ラスタ／ブロック変換用メモリ１１４０、コーデック処理部１１５０、符号化データＤＭＡＣ１１６０を有している。また、制御用シーケンサ１１７０、画像処理用メモリ１１２１、データバッファ１１１２も有している。

制御用シーケンサ１１７０は、この画像処理部１１００の中の画像データＤＭＡＣ１１２０、ラスタ／ブロック変換用メモリ１１４０、コーデック処理部１１５０、符号化データＤＭＡＣ１１６０とそれぞれ制御用信号線で接続されている。そして、これらの各ユニットの制御を実施する。

更に、現像処理部１２３０とは、フレームデータ転送完了割込み信号線、通信部１３００とは画像−通信部間制御信号１１７１で接続され、相互に信号をやり取りして動きを制御する。また、コーデック処理部１１５０は、画像処理用メモリ１１２１と接続され、このメモリを利用して各種画像処理を実施する。

更に、コーデック処理部１１５０は内部にパラメータレジスタ１１５１を持っており、このパラメータレジスタに対して制御用シーケンサ１１７０が書き込んだ値に従って、各種画像処理を実施するものとする。

更に、コーデック処理部１１５０は内部に顔認識部１１５２と個人識別部１１５３とを有し、撮影された画像より、人物の顔検出及び個人識別を行う。なお、フレームバッファ１１１０、画像処理用メモリ１１２１、データバッファ１１１２のそれぞれは画像処理部１１００のそれ以外の構成要素が１つのＩＣの中で実現される場合に、それらと同一のＩＣ上のオンチップメモリとして構成することが可能である。また、ＩＣの外部でそのＩＣと接続されるメモリデバイス（例えばＳＤＲ（Single Data Rate）またはＤＤＲ（Double Data Rate）のＳＤＲＡＭ（シンクロナスＤＲＡＭ）など）として実現することが可能である。また、そのメモリもそれぞれを別のメモリデバイス上に配することや１つの同じメモリデバイス上に配置するなど、様々な構成をとることが可能である。

以下、撮像装置１５００の基本動作等について図１、２を用いて詳細に説明する。
図１において、まず、撮像部１２００のレンズ１２１０によって集められた光の画像情報がセンサー１２２０によって電気信号として取り込まれる。このセンサー１２２０はＣＣＤイメージセンサー、またはＣＭＯＳイメージセンサーなどを利用することが可能である。本実施形態においては、正方画素のプログレッシブ形式のＣＣＤであるとする。

また、その有効画素数は６４０×４８０のいわゆるＶＧＡサイズであり、１／３０秒毎に１フレームのＶＧＡ画像を出力することができるものとする。すなわち、本実施形態での１映像期間（１画面分の画像データの更新間隔）は１／３０秒（およそ３３．３ｍＳ）であるとする。センサー１２２０で光電変換されて電気信号として取り込まれた画像データは、順次読み出され現像処理部１２３０に渡される。現像処理部１２３０では、センサー１２２０から得られた画像データを信号処理して、輝度信号と色差信号を作り出し、後段で処理しやすい形式にして出力する。仮にここでは、ＹＵＶ４２２形式で出力されるものとする。

以下に、本実施形態の撮像装置１５００の動作を図３のフローチャートを参照しながら説明する。
電源投入後、まず、ステップＳ１００１において撮像部１２００の駆動を開始する。次に、ステップＳ１００２において、スルー画像の撮影を行い、スルー画像取り込みを開始する。ここで述べるスルー画像とは、撮像部１２００で特定のフレームレートにより逐次撮影される画像のことであり、メモリーカード１７００への記録を目的とするものではなく、被写体の様子をリアルタイムにユーザに認識させるための動画を指す。

本撮影の前にこのスルー画像を撮像装置１５００の図示されていないディスプレイに表示することによって、本撮影前に現在の撮像部１２００で撮像できる画角や被写体をユーザに認識させる。

次に、ステップＳ１００３において、メディアドライブ１６００からメモリーカード（記憶装置）１７００に保存されている、人物の顔写真（顔画像）を読み出す。メモリーカード１７００に保存されている人物の画像は、各端末を持つユーザに予め用意させてもよいし、本撮影の準備前に、撮像装置１５００を使用して取得してもよい。

このとき、スルー画像に含まれる人物の抽出（ステップＳ１００４）、個人識別、および、各端末との関連付けを画像処理部１１００の中に含まれる、顔認識部１１５２、個人識別部１１５３で行う。

また、人物の切り出し動画像の出力先となる各端末との関連づけを容易にするため、１画像につき一人の人物を写しておき、ファイル名と端末名とを予め関連付けしておくとよい。スルー画像からの、人物の顔の抜き出し方について、ここではその詳細を述べないが、具体的な技術として、特開平１１-１７３６３２号公報等に記載されている技術を用いることができる。

次に、ステップＳ１００５において、撮像部１２００より取り込まれたスルー画像から人物の顔を抜き出し、前述した各表示端末１４００ａ〜１４００ｈから受信した画像より抜き出された人物の顔との比較を行い個人の識別をする。個人の識別の詳細については、具体的な技術として、特開２００４−０４６６９７号公報に記載の技術を用いることができる。

次に、ステップＳ１００６において、スルー画像中に、メモリーカード１７００から読み出した画像と同一の人物がいると判断された場合は、前記人物の顔を抜き出したスルー画像の現像を行う。現像の際は、被写体の人物の顔が、切り出しによって欠けることなく、またディスプレイ付き端末１４００ａのディスプレイ１４０１ａで表情まで確認できるようなサイズと解像度で切り出す。あるいは、周囲との立ち位置の関係や、その人物がどの程度他の人物の影になっているかを確認できるように、被写体の人物の全身がディスプレイ１４０１ａに収まるサイズで切り出しても構わない。また、ディスプレイ１４０１ａの解像度については、処理性能判断部１３１１が予めデータとして記憶しても、処理性能判断部１３１１がディスプレイ付き端末１４００ａから通信によって解像度情報を得るようにしても構わない。

さらに、ステップＳ１００７では、リアルタイムに各表示端末１４００ａ〜１４００ｈで抜き出した顔のスルー画像の表示を行えるよう、通信部１３００より出力する。また、これと同時に、顔を抜き出す前のスルー画像を撮像装置１５００のディスプレイに表示する。このとき、撮像装置１５００のディスプレイには撮影画角の全体像がリアルタイムで表示され、その中に個人の識別に成功した被写体が含まれていれば、その被写体の所有する表示端末にその被写体の顔を中心として切り出された画像がリアルタイムで表示される。

次に、ステップＳ１００８で、撮像装置１５００の駆動を終了するか否かの判断を行う。これは、ユーザによって撮影を終了するための操作が行われたか否かを判断することによって行う。この判断の結果、引き続き撮影を行う場合は、ステップＳ１００９に進み、前述した各表示端末１４００ａ〜１４００ｈで、本撮影の準備完了ボタンが押されたか否かを確認する。このときの各表示端末１４００ａ〜１４００ｈでの動作については図４を用いて後述する。この確認の結果、通信部１３００が撮影許可を認識した場合、ステップＳ１０１０で撮影指示がなされ、本撮影の駆動に移る。ここで言う本撮影とは、図示されていないが、レンズ１２１０内に含まれるメカシャッターを使用する撮像モードであり、センサー１２２０内で画素加算などを行わない、高精細な静止画等を指す。

本撮影終了後には、ステップＳ１０１１で画像処理部１１００において、識別された各人物の顔とその周辺を切り出した静止画を作成し、通信部１３００より各表示端末１４００ａ〜１４００ｈ宛に、人物の顔と対応する、前記切り出した静止画を送信する。また、切り出しを行う前の静止画を、メディアドライブ１６００を介してメモリーカード１７００に保存する。

次に、ステップＳ１０１２において、各表示端末１４００ａ〜１４００ｈからの再撮影の要求を通信部１３００において受け付ける。その後、ステップＳ１０１３において、再撮影の要求の有無を確認する。この確認の結果要求がなかった場合には、そのまま終了となる。一方、再撮影の要求がなされた場合には、ステップＳ１０１４で各表示端末１４００ａ〜１４００ｈ宛に、通信部１３００より再撮影を行う旨を送信し、ステップＳ１００６に戻る。

次に、図４のフローチャートを参照しながら画像表示機能付きの表示端末１４００ａ〜１４００ｈの駆動を説明する。
まず、ステップＳ２００１で撮像装置１５００の撮像部１２００で取得された画像から、各表示端末１４００ａ〜１４００ｈを持つユーザの顔とその周囲を切り出しされたスルー画像を受信する。

次に、ステップＳ２００２に進み、切り出しされたスルー画像は、各表示端末１４００ａ〜１４００ｈのディスプレイ１４０１ａ〜１４０１ｈに表示され、ユーザが撮像装置１５００でどのように撮影されているかリアルタイムで確認できる。

次に、ステップＳ２００３において、撮影準備が完了したか判断が行われる。各表示端末１４００ａ〜１４００ｈは、切り出しされたスルー画像を見ているユーザに対して、本撮影への移行についての可否を問合せる表示を行い、移行を許可するのであれば、所定の操作をするようユーザに指示する。例えば、本撮影の準備が完了したのであれば、ユーザに各表示端末１４００ａ〜１４００ｈの準備完了ボタンを押下させればよい。この判断の結果、本撮影（撮像装置１５００によるメカシャッターを使用した静止画の撮影）を行う準備ができた際には、ステップＳ２００４へ進み、準備ができていない場合には、ステップＳ２００１に戻る。

次に、ステップＳ２００４で撮像装置１５００に本撮影の準備が完了した旨を送信する。全ての表示端末１４００ａ〜１４００ｈから本撮影の準備が完了した旨が撮像装置１５００に送られると、撮像装置１５００は本撮影を行う。そして、本撮影が行われた後に、撮影された静止画から、各端末のユーザの顔が写っている部分を切り出した静止画を各表示端末１４００ａ〜１４００ｈは受信する（ステップＳ２００５）。

各表示端末１４００ａ〜１４００ｈは、受信した静止画をステップＳ２００６で各ディスプレイ１４０１ａ〜１４０１ｈに表示し、ユーザに確認を促す。
次に、ステップＳ２００７に進み、本撮影された画像について、ユーザが気に入らなくて再撮影の要求が有るか否かを判断する。この判断の結果、再撮影の要求が有る場合にはステップＳ２００８に進み、ユーザにより再撮影ボタンが押下されるのを待機する。そして、ユーザにより再撮影ボタンが押下された場合にはステップＳ２００９に進んで撮像装置１５００へ再撮影の要求を出す。一方、ステップＳ２００７の判断の結果、再撮影の要求がなかった場合には処理を終了する。

このように、撮影中の動画像とメモリーカード１７００に記録されている画像の中から人物を抽出し、個人識別の認証を行う。そして、認証結果に応じて、人物ごとにそれぞれのディスプレイ付き端末に個別のスルー画像を切り出して出力する。こうすることにより、各ユーザが本撮影前の自分の姿を見ることができる。

以上により、被写体となる各ユーザ自身が撮像装置１５００でどのような表情で撮影されているか、逐次確認することができる。例えば、襟が折れていたり、ネクタイが曲っていたりすれば、このディスプレイ付き端末に表示されたスルー画像をみることで、撮影前にそれを認識して直すことが可能となる。これにより、被写体となるユーザにとって満足度の高い静止画像の撮影を行うことができる。

さらに、本撮影後に静止画の自分の移っている部分を確認することにより、目つぶりや被写体となる人物の望まないような表情で撮影された場合に、素早く再撮影を行うことができる。
なお、本撮影に静止画を撮影する例をあげて説明を行ったが、本撮影は動画であっても構わない。動画撮影前に、スルー画像を認証結果に応じてディスプレイ付き端末に出力することで、静止画のときと同様に、動画撮影開始時に自分がどのような状態になるのかを予め確認することができる。

（第２の実施形態）
本実施形態では、画像表示機能を持つ端末に撮像部１２００をさらに設けた場合で説明を行う。
以下に、図５のフローチャートを参照しながら撮像装置の駆動を説明する。
電源投入後、まずステップＳ３００１において撮像部１２００の駆動を開始し、ステップＳ３００２においてスルー画像の取り込みを行う。

次に、ステップＳ３００３において、通信部１３００から各表示端末１４００ａ〜１４００ｈの図示していないカメラで撮影された、人物の顔写真（顔画像）を受信する。受信した画像は、メディアドライブ１６００を介してメモリーカード１７００に一時的に記憶してもよい。次に、ステップＳ３００４において、各表示端末１４００ａ〜１４００ｈから受信した画像より、人物の顔を検出する。

次に、ステップＳ３００５において、撮像部１２００より取り込まれたスルー画像から人物の顔を抜き出し、各表示端末１４００ａ〜１４００ｈから受信した画像より抜き出された人物の顔とを比較して個人の識別を行い、同一人物の顔を検索して同定する。

次に、ステップＳ３００６において、スルー画像中に、各表示端末１４００ａ〜１４００ｈから受信した画像と同一の人物がいると判断された場合は、その顔を抜き出したスルー画像の現像を行い、スルー画像を作成する。

次に、ステップＳ３００７に進み、リアルタイムに各表示端末１４００ａ〜１４００ｈで抜き出した顔のスルー画像の表示を行えるよう、通信部１３００より、対応する送信先の端末に送信する。また、これと同時に、顔を抜き出す前のスルー画像を撮像装置１５００のディスプレイに表示する。

次に、ステップＳ３００８で、撮像装置１５００の駆動を終了するか否かの判断を行う。この判断の結果、引き続き撮影を行う場合は、ステップＳ３００９に進み、各表示端末１４００ａ〜１４００ｈで、本撮影の準備完了ボタンが押されたことを確認する。各表示端末１４００ａ〜１４００ｈでの動作については図６を用いて後で説明する。この確認の結果、各表示端末１４００ａ〜１４００ｈで本撮影の準備完了ボタンが押されたことを通信部１３００が認識した場合、ステップＳ３０１０で本撮影の駆動に移る。

本撮影終了後には、ステップＳ３０１１に進み、画像処理部１１００において、識別された各人物の顔とその周辺を切り出した静止画を作成し、通信部１３００より各表示端末１４００ａ〜１４００ｈ宛に、人物の顔と対応する、前記切り出した静止画を送信する。また、切り出しを行う前の静止画を、メディアドライブ１６００を介してメモリーカード１７００に保存する。
次に、ステップＳ３０１２において、各表示端末１４００ａ〜１４００ｈからの再撮影の要求を通信部１３００において受け付ける。

次に、ステップＳ３０１３において、再撮影の要求の有無を判断する。この判断の結果、再撮影の要求がなかった場合には、そのまま終了となる。また、再撮影の要求がなされた場合にはステップＳ３０１４に進み、各表示端末１４００ａ〜１４００ｈ宛に、通信部１３００より再撮影を行う旨を送信し、その後、ステップＳ３００６に戻る。

次に、図６のフローチャートを参照しながら画像表示機能付きの各表示端末１４００ａ〜１４００ｈの駆動を説明する。この例では、画像表示機能付きの端末にさらに図示されていないカメラが内蔵されていることとする。

まず、ステップＳ４００１で撮像部１２００の駆動を行う。
次に、ステップＳ４００２で撮影モードか否かの判断を行う。この判断の結果、撮影モードである場合はステップＳ４００３に進み、スルー画像の撮影を開始する。次に、ステップＳ４００４において、シャッタボタンが押下されるまで待機する。そして、シャッタボタンが押下された場合にはステップＳ４００５に進み、ユーザの顔を写した静止画の撮影を行う。

次に、ステップＳ４００６に進み、ステップＳ４００５の撮影によって取得された静止画像を撮像装置１５００に送信する。このとき、撮影された画像を基にして、撮像装置１５００は画像処理部１１００において個人の認証を行う。ステップＳ４００６の処理を終ったらステップＳ４００２に戻る。撮影された画像が気に入らない場合は、ステップＳ４００２において撮影モードを再度選択し、ユーザの顔を写した静止画の再撮影を行う。

ユーザの顔の撮影が終わった場合は、ステップＳ４００２の判断の結果が撮影モードではなくなり、ステップＳ４００２からステップＳ４００７に移行する。ステップＳ４００７では、撮像装置１５００の撮像部１２００で取得された画像から、各表示端末１４００ａ〜１４００ｈを持つユーザの顔とその周囲を切り出しされたスルー画像を受信する。

次に、ステップＳ４００８に進み、切り出しされたスルー画像を各表示端末１４００ａ〜１４００ｈのディスプレイ１４０１ａ〜１４０１ｈに表示する。これにより、ユーザは撮像装置１５００でどのように撮影されているかリアルタイムで確認することができる。

次に、ステップＳ４００９において、本撮影（撮像装置１５００によるメカシャッターを使用した静止画の撮影）を行う準備が完了したか否かを判断する。各表示端末１４００ａ〜１４００ｈは、切り出しされたスルー画像を見ているユーザに対して、本撮影に移行してよいか否かを問合せる表示を行い、移行を許可するのであれば、所定の操作をするようユーザに指示する。この判断の結果、完了していない場合にはステップＳ４００７に戻る。また、完了した場合には、ステップＳ４０１０へ進む。

ステップＳ４０１０においては、各表示端末１４００ａ〜１４００ｈから撮像装置１５００に本撮影の準備が完了した旨が送信される。

全ての端末から本撮影の準備が完了した旨が撮像装置１５００に送られると、撮像装置１５００は本撮影を行う。そして、本撮影後に、撮影された静止画から、各端末のユーザの顔が写っている部分を切り出した静止画を各表示端末１４００ａ〜１４００ｈは受信する（ステップＳ４０１１）。
次に、ステップＳ４０１２において、各表示端末１４００ａ〜１４００ｈは、受信した静止画を各ディスプレイに表示し、ユーザに確認を促す。

次に、ステップＳ４０１３において、再撮影の要求の有無を判断する。このステップにおいては、本撮影された画像について、ユーザが意図にそぐわなくて気に入らなかった場合、ユーザは再撮影要求を行う。再撮影を行う場合にはステップＳ４０１４に進む。ステップＳ４０１４において再撮影ボタンが押下されると、撮像装置１５００へ再撮影の要求を出す（ステップＳ４０１５）。ステップＳ４０１５の処理を終了するとステップＳ４００７に戻り、前述した処理を繰り返し行う。また、ステップＳ４０１３の判断の結果、再撮影の要求ではない場合にはエンドとなる。

本実施形態のように、カメラ付きの端末で各人物の顔の画像を用意することにより、撮影前に被写体の画像を予め用意する必要がないなど、第１の実施形態に比べ、本撮影前の準備の手間を大幅に削減することができる。

さらに、撮影中の動画像と各ディスプレイとカメラ付き端末から送られた画像の中から人物を抽出し、個人識別を行い、認証された人物ごとにそれぞれの端末に個別の動画像を出力することにより、各ユーザが望む、最適な動画像を提供することができる。

（本発明に係る他の実施形態）
前述した本発明の実施形態における撮像装置を構成する各手段は、コンピュータのＲＡＭやＲＯＭなどに記憶されたプログラムが動作することによって実現できる。このプログラム及び前記プログラムを記録したコンピュータ読み取り可能な記録媒体は本発明に含まれる。

また、本発明は、例えば、システム、装置、方法、プログラムもしくは記憶媒体等としての実施形態も可能であり、具体的には、複数の機器から構成されるシステムに適用してもよいし、また、一つの機器からなる装置に適用してもよい。

なお、本発明は、前述した撮像方法における各工程を実行するソフトウェアのプログラム（実施形態では図３〜図６に示すフローチャートに対応したプログラム）を、システムあるいは装置に直接、あるいは遠隔から供給する。そして、そのシステムあるいは装置のコンピュータが前記供給されたプログラムコードを読み出して実行することによっても達成される場合を含む。

したがって、本発明の機能処理をコンピュータで実現するために、前記コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。

その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等の形態であってもよい。

プログラムを供給するための記録媒体としては種々の記録媒体を使用することができる。例えば、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリーカード１７００、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などがある。

その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続する。そして、前記ホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。

また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明に含まれるものである。

また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせる。そして、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。

また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される他、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行うことによっても前述した実施形態の機能が実現され得る。

さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によっても前述した実施形態の機能が実現される。

本発明の第１の実施形態における、画像処理部の構成例を説明するブロック図である。 本発明の第１の実施形態における、撮像装置の詳細を説明する図である。 本発明の第１の実施形態における、撮像装置の駆動フローチャートである。 本発明の第１の実施形態における、撮像装置の動作に対応する動画像表示端末の駆動フローチャートである。 本発明の第２の実施形態における、撮像装置の駆動フローチャートである。 本発明の第２の実施形態における、撮像装置の動作に対応する動画像表示端末の駆動フローチャートである。

符号の説明

１１００ 画像処理部
１１１０ フレームバッファ
１１１２ データバッファ
１１２０ 画像データＤＭＡＣ
１１２１ 画像処理用メモリ
１１４０ ラスタ/ブロック変換用メモリ
１１５０ コーデック処理部
１１５１ パラメータレジスタ
１１５２ 顔認識部
１１５３ 個人識別部
１１６０ 符号化データＤＭＡＣ
１１７０ 制御用シーケンサ
１１７１ 画像-通信部間制御信号
１２００ 撮像部
１２１０ レンズ
１２２０ センサー
１２３０ 現像処理部
１３００ 通信部
１３１０ ネットワーク制御部
１３２０ ネットワークインターフェース
１３１１ 処理性能判断部
１４００ ネットワーク網
１４００ａ〜ｈ ディスプレイ付き端末
１４０１ａ〜ｈ ディスプレイ
１５００ 撮像装置
１６００ メディアドライブ
１７００ メモリーカード

Claims (6)

1. 被写体を撮像して撮像データを生成する撮像手段と、
   前記撮像手段により生成された撮像データから顔検出を行う顔検出手段と、
   前記顔検出手段により検出された顔の個人識別を行い、認証する個人識別手段と、
   前記個人識別手段の認証結果に基づき、前記撮像データの一部の切り出し処理を行う画像処理手段と、
   前記画像処理手段により処理された撮像データをネットワーク上に送出するネットワーク通信手段と、
   本撮影を指示する撮影指示手段と、
   前記撮影指示手段にて本撮影が指示されたことに応じて行われた本撮影で生成された撮像データを記録する記憶手段とを有し、
   前記撮影指示手段によって本撮影が指示されるよりも前に前記撮像手段により生成され、かつ、前記記憶手段に記録されない動画像の撮像データに対して、前記顔検出手段、前記個人識別手段、前記画像処理手段、および、前記ネットワーク通信手段が各々の処理を行うことを特徴とする撮像装置。
2. 前記記憶手段は予め人物の顔の撮像データを記憶しており、
   前記個人識別手段は、前記記憶手段に保存されている人物の顔と、前記撮像装置で撮影された画像に含まれる人物の顔とを比較することにより、個人を識別することを特徴とする請求項１に記載の撮像装置。
3. 前記個人識別手段は、前記ネットワーク上の端末から送信された画像に含まれる人物の顔と、前記撮像装置で撮影された画像に含まれる人物の顔を比較することにより、個人を識別することを特徴とする請求項１に記載の撮像装置。
4. 前記画像処理手段は、前記個人識別手段により行われた個人識別の結果に基づき、前記撮像手段から得られた撮像データより、前記個人識別手段により認証された人物を切り出した画像を現像し、前記個人識別手段による個人識別の結果に基づき、前記ネットワーク通信手段に出力する際の送信先を制御することを特徴とする請求項１〜３の何れか１項に記載の撮像装置。
5. 前記ネットワーク通信手段は、前記画像処理手段にて制御された送信先へ前記処理された撮像データを送出した後に、前記送信先から撮影の可否についての指示を受信することを特徴とする請求項４に記載の撮像装置。
6. 請求項１〜５の何れか１項に記載の撮像装置と、前記撮像装置より送信された動画像を表示装置に表示する表示端末とを有し、
   前記表示端末は、前記表示装置に表示された画像がユーザの意図にそぐわない場合は、前記撮像装置に対して再撮影の要求を行う通信手段を有することを特徴とするネットワークカメラシステム。

Images