JP2011191839A

JP2011191839A - 端末装置、認証システム及びプログラム

Info

Publication number: JP2011191839A
Application number: JP2010055311A
Authority: JP
Inventors: Go Fukumura; 剛福村
Original assignee: NEC Casio Mobile Communications Ltd
Current assignee: NEC Casio Mobile Communications Ltd
Priority date: 2010-03-12
Filing date: 2010-03-12
Publication date: 2011-09-29
Anticipated expiration: 2030-03-12
Also published as: JP5500639B2

Abstract

【課題】撮像された本人の承認を得ずにその本人が写っている画像を無断でコピーしたり外部へ送信してしまうことを防止する。
【解決手段】認証装置３の認証データベース３５には、個人の顔画像情報や指紋情報などが登録されている。携帯電話装置１で撮像が行われ撮影画像にその個人の顔画像が写っていた場合には、その個人に認証入力部２１から指紋情報を入力してもらい、顔画像情報及び指紋情報を認証装置３に送って同一情報が既に登録されていることの認証を受けて始めてその撮影画像のコピーや外部送信が可能となっている。
【選択図】図１

Description

本発明は、端末装置、この端末装置を用いた認証システム及びプログラムに関する。

現在、デジタルカメラやカメラ機能付携帯電話などが広く一般的に普及しており、そのため盗撮などの犯罪行為が行われ、あるいは盗撮ではなくても本人が他人によって被写体として撮影され、その撮像画像がいつの間にかネットワーク等に流布してしまうという危険が高まっている。このような状況を防止するために、カメラ機能を備えた電子機器の使用を予め特定の人だけが出来るようにすることが考えられている。

即ち、電子機器内部にその電子機器を使用できる人の顔画像を予め記憶させておき、その電子機器を使用する場合にはカメラで使用者の顔画像を撮像して予め記憶されている顔画像と一致する場合のみ電子機器を使用可能な状態にするものである（（例えば、特許文献１参照）。従って、このような技術をデジタルカメラやカメラ機能付携帯電話に採用すればデジタルカメラやカメラ機能付携帯電話の所有者以外の人が撮像されている画像を勝手にコピー（複写）したり、ネットワーク等に送信したりすることを防止できる。

特開２００６−０８１１４７号公報

しかしながら、上記特許文献１に記載されている様な、電子機器の使用に当たって使用者の顔を撮影し予め登録されている顔画像と一致する場合に使用を許可するといった方法では、本人が他人のデジタルカメラなどによって撮影された場合、その撮像画像がデジタルカメラの使用者によって勝手にコピーされ、外部のパーソナルコンピュータやネットワーク等に転送されてしまうといったことを防止することはできなかった。

本発明は上記の課題を解決するためになされたもので、撮像された本人の承認を得ずに無断でコピーや外部への送信がなされてしまうことを防止し得る端末装置、認証システム及びプログラムを提供するものである。

上記の課題を解決するために、本発明の請求項１に記載の端末装置は、人物を撮像可能な撮像手段と、この撮像手段により撮影された撮影画像を表示する表示手段と、人物を識別する人物識別情報と前記人物の画像情報を対応付けて記憶する人物情報記憶手段と、前記撮像手段により撮影され前記表示手段に表示された撮影画像に撮影されている人物の画像と前記人物情報記憶手段に記憶されている人物の画像情報との類似を判別して撮影された人物を特定する人物特定手段と、認証情報を入力する認証情報入力手段と、この認証情報入力手段によって入力された認証情報が前記人物特定手段により特定された人物の認証情報と一致するか否かの判別結果を取得する判別結果取得手段と、この判別結果取得手段により取得した判別結果に基づいて前記撮影画像のコピー或いは外部送信を許可あるいは不許可とする制御を行う制御手段とを備えることを特徴とする。

請求項２の発明は、前記撮影画像に複数の人物が撮影されている場合は撮影されている全ての人物に対して前記人物特定手段、前記認証情報入力手段及び判別結果取得手段による処理を実行し、前記制御手段は、撮影されている全ての人物に対しての判別が許可であった場合のみ前記撮影画像のコピー或いは外部送信を許可することを特徴とする。

請求項３の発明は、前記判別結果取得手段は、前記人物特定手段により前記撮影画像から特定された人物に対応付けて前記人物情報記憶手段に記憶されている人物識別情報及び前記認証情報入力手段により入力された認証情報を外部の認証装置に送信する送信手段と、前記外部の認証装置により送られてくる前記認証情報入力手段によって入力された認証情報が前記人物特定手段により特定された人物の認証情報と一致するか否かを認証した判別結果を受信する受信手段とを備えることを特徴とする。

請求項４の発明は、前記人物情報記憶手段には、前記人物識別情報に対応させて問い合わせ先電子機器との送受信を可能とする問い合わせ先情報を更に記憶しており、前記判別結果取得手段は、前記認証情報入力手段により入力された認証情報を前記人物特定手段により前記撮影画像から特定された人物に対応付けて前記人物情報記憶手段に記憶されている問い合わせ先情報を用いて問い合わせ先電子機器に送信する送信手段と、前記問い合わせ先電子機器より送られてくる前記認証情報入力手段によって入力された認証情報が前記人物特定手段により特定された人物の認証情報と一致するか否かの判別結果を受信する受信手段とを備えることを特徴とする。

請求項５の発明は、前記人物情報記憶手段は、前記人物の識別情報に対応させて認証情報を更に記憶しており、前記判別結果取得手段は、前記認証情報入力手段により入力された認証情報が、前記人物特定手段により特定された人物の識別情報に対応付けて前記人物情報記憶手段に記憶されている認証情報と一致するか否かに応じて認証するか否かを判別することにより判別結果を取得することを特徴とする。

請求項６の発明は、更に、前記判別結果取得手段により取得した判別結果が前記撮影画像のコピー或いは外部送信を許可するか否かのいずれであるかを示す判別情報を前記撮像画像に対応させて保存する保存手段と、この保存手段に保存された撮影画像が再生された際に再生された撮影画像のコピー或いは外部送信を対応して保存されている判別情報に従って許可或いは不許可とする再生制御手段とを備えることを特徴とする。

また、請求項７に記載の端末装置の発明は、人物が被写体となっている被写体画像を表示する表示手段と、人物を識別する人物識別情報と前記人物の画像情報を対応付けて記憶する人物情報記憶手段と、前記表示手段に表示された被写体画像の被写体となっている人物の画像と前記人物情報記憶手段に記憶されている人物の画像情報との類似を判別して被写体となっている人物を特定する人物特定手段と、認証情報を入力する認証情報入力手段と、この認証情報入力手段によって入力された認証情報が前記人物特定手段により特定された人物の認証情報と一致するか否かの判別結果を取得する判別結果取得手段と、この判別結果取得手段により取得した判別結果に基づいて前記被写体画像のコピー或いは外部送信を許可あるいは不許可とする制御を行う制御手段とを備えることを特徴とする。

更に、請求項８に記載の認証システムの発明は、端末装置と、この端末装置から送信されてきた認証情報が登録されている認証情報に一致するか否かを認証する認証装置とからなる認証システムであって、前記認証装置は、人物の識別情報と該人物の認証情報を対応付けて記憶している認証記憶手段と、前記端末装置から送信された人物を特定する情報と認証情報とを受信する認証受信手段と、前記認証記憶手段に記憶されている認証情報と前記認証受信手段により受信された認証情報から対応する人物の識別情報が一致するか否かに応じて認証するか否かを判別する認証判別手段と、この認証判別手段による判別結果を前記端末装置に送信する認証送信手段とを備え、前記端末装置は、人物を撮像可能な撮像手段と、この撮像手段により撮影された撮影画像を表示する表示手段と、人物を識別する人物識別情報と前記人物の画像情報を対応付けて記憶する人物情報記憶手段と、前記撮像手段により撮影され前記表示手段に表示された撮影画像に撮影されている人物の画像と前記人物情報記憶手段に記憶されている人物の画像情報との類似を判別して撮影された人物を特定する人物特定手段と、認証情報を入力する認証情報入力手段と、この認証情報入力手段によって入力された認証情報が前記人物特定手段により特定された人物の認証情報とを前記認証装置に送信する端末送信手段と、前記認証装置から送られてくる人物の識別情報が一致したか否かの前記判別結果を受信する端末受信手段と、この端末受信手段で受信した判別結果に基づいて前記撮影画像のコピー或いは外部送信を許可あるいは不許可とする制御を行う制御手段とを備えることを特徴とする。

また、請求項９のプログラム発明は、コンピュータに、人物を撮像可能な撮像機能、この撮像機能により撮影された撮影画像を表示する表示機能、人物情報記憶手段に人物を識別する人物識別情報と前記人物の画像情報を対応付けて記憶させる人物情報記憶制御機能、前記撮像機能により撮影され前記表示機能で表示された撮影画像に撮影されている人物の画像と前記人物情報記憶手段に記憶されている人物の画像情報との類似を判別して撮影された人物を特定する人物特定機能、認証情報を入力する認証情報入力手段によって入力された認証情報が前記人物特定機能により特定された人物の認証情報と一致するか否かの判別結果を取得する判別結果取得機能、この判別結果取得機能により取得した判別結果に基づいて前記撮影画像のコピー或いは外部送信を許可あるいは不許可とする制御を行う制御機能を実現させることを特徴とする。

また、請求項１０のプログラム発明は、コンピュータに、人物が被写体となっている被写体画像を表示する表示機能、人物情報記憶手段に人物を識別する人物識別情報と前記人物の画像情報を対応付けて記憶させる人物情報記憶制御機能、前記表示機能に表示された被写体画像の被写体となっている人物の画像と前記人物情報記憶手段に記憶されている人物の画像情報との類似を判別して被写体となっている人物を特定する人物特定機能、認証情報を入力する認証情報入力手段によって入力された認証情報が前記人物特定機能により特定された人物の認証情報と一致するか否かの判別結果を取得する判別結果取得機能、この判別結果取得機能により取得した判別結果に基づいて前記被写体画像のコピー或いは外部送信を許可あるいは不許可とする制御を行う制御機能、を実現させることを特徴とする。

本発明によれば、撮像された本人の承認を得ずに無断でコピーや外部への送信がなされてしまうことを防止することが出来る。

本発明の端末装置である携帯電話装置１及び認証装置３を用いた認証システムのシステム構成図。図１のアドレス帳記憶部２５の記憶領域及び記憶内容を示す図。図１の認証データベース３５の記憶領域及び記憶内容を示す図。図１の携帯電話装置１の動作フローチャート図。同じく携帯電話装置１の動作フローチャート図。図４のステップＳ９の人物特定処理の詳細なフローチャート図。図４のステップＳ１２の認証判別処理の詳細なフローチャート図。図１の認証装置３の動作フローチャート図。本発明の第２の実施の形態における携帯電話装置１及び他の携帯電話装置４を用いた認証システムのシステム構成図。図９の認証情報記憶部５０の記憶領域及び記憶内容を示す図。第２の実施の形態における人物特定処理の詳細なフローチャート図。第２の実施の形態における認証判別処理の詳細なフローチャート図。図９の携帯電話装置４の動作フローチャート図。本発明の第３の実施の形態における携帯電話装置５のブロック図。図１４のアドレス帳記憶部５２の記憶領域及び記憶内容を示す図。第３の実施の形態における認証判別処理の詳細なフローチャート図。

以下、本発明の実施形態を、図面を参照して詳細に説明する。

（第１の実施の形態）
図１は、本発明による端末装置を用いた認証システムのシステム構成図であり、端末装置としての携帯電話装置１と、無線電話回路網やインターネットなどのネットワークから構成される無線通信網２と、この無線通信網２と接続された認証装置３とから構成されている。

携帯電話装置１の制御部（ＣＰＵ）１２には、各種のプログラムが記憶されている図示しないＲＯＭ（リード・オンリ・メモリ）が設けられており、制御部１２は、上記ＲＯＭに記憶されているプログラムを動作させることにより携帯電話装置１の全体の動作を制御する。

即ち、ＲＯＭには、後述する各種フローチャートを実行させるためのプログラムや通話機能、電子メール機能、インターネット接続機能、カメラ機能、アドレス帳機能、スケジュール機能等、各種の機能のアプリケーションを実行させるためのアプリケーションプログラムが記憶されており、制御部１２は、上記ＲＯＭに記憶されたプログラムに基づいてこの携帯電話装置１の全体の動作を制御する。

表示部１３は、例えば、ドットマトリクスタイプの液晶表示装置あるいはＥＬ表示装置等から構成され、電話機能として必要な情報（相手方の電話番号、電波受信状態、電池残量等の情報）を表示するとともに、電子メールやＷｅｂサイトの内容表示を行う。また、アドレス帳機能においてはアドレス帳情報を表示し、カメラ機能においてはスルー画像表示や撮像しかつ記憶させた画像の再生画像を表示する。

操作部１４は、この携帯電話装置１に設けられた操作キーであり、詳細は図示していないが、電源のオン・オフを行う電源ＯＮキー、電源ＯＦＦキー、数値情報及び文字情報を入力する数値文字入力キー、各種機能（アプリケーション）の起動及び終了を選択する各種のアプリケーションキー、通話のオンフック及びオフフックキー、カメラ機能におけるシャッターキー等各機能を動作させるためのキーを備えている。

電源部１５は、図示していない充電可能な二次電池と、この二次電池の電池電圧が低下した際に各回路部にバックアップ電圧を供給するバックアップ電池とからなり、各回路部に駆動電圧を供給するものである。

電話部１６は、電話機能の動作時には図示しない基地局からの音声の無線信号をアンテナ１７及び無線通信部１８を介して取り込み、取り込んだ音声の無線信号を受信ベースバンド信号に復調した後に、図示しない音声信号処理部を介して受話スピーカ１９から音声出力させる。また、送話マイク２０から入力された音声信号を音声信号処理部で処理させた後に無線通信部１８に送り、無線通信部１８では音声信号を送信ベースバンド信号に符号化したのちにアンテナ１７から送信出力させる。

尚、電子メール機能、インターネット接続機能等の動作時には、アンテナ１７及び無線通信部１８を介して電子メールの送受信およびＷｅｂサイトの閲覧あるいは上述した認証装置３との接続が可能であり、電子メールの送受信情報、Ｗｅｂサイトの閲覧情報、認証装置３から送られてくる情報は表示部１３に送られて表示出力される。

認証入力部２１は図示しない指紋センサを備えており、この指紋センサでの検出に基づく指紋情報を、個人を認証する認証情報として出力する。

撮像部２２は詳細を示していないがカメラ機能として動作させるための各種構成を備えている。即ち、この撮像部２２は、レンズなどの光学系を介して被写体像を撮像素子に写し込み、撮像素子に写し込まれている被写体像を表示部１３に表示させると共に、操作部１４のシャッターキーが操作されると、その時に写し込まれていた被写体画像を後述する記憶部２３の保存画像記憶部２４に記憶させるものである。

記憶部２３は、各種情報を記憶する記憶領域を備えているもので、各種情報の演算や各種情報の一時記憶などのための図示しないワークエリアを有するほか、上述した保存画像記憶部２４及びアドレス帳記憶部２５を有している。

保存画像記憶部２４には、上述した如く撮像部２２で撮像された撮影画像が記憶されるが、保存される撮影画像には夫々コピー或いは外部への転送を許可或いは不許可とする許可フラグも対応して記憶される様になっている。この点については詳細を後述する。

図２は、上記アドレス帳記憶部２５の詳細な構成を示すもので、アドレス帳記憶部２５は、個人の氏名情報を記憶する氏名情報記憶領域２５Ａ、この氏名情報記憶領域２５Ａに記憶された氏名情報に対応して設けられ上記氏名の人のメールアドレス情報を記憶するメールアドレス情報記憶領域２５Ｂ、上記氏名の人の電話番号情報を記憶する電話番号情報記憶領域２５Ｃ、上記氏名の人を特定（識別）する特定ＩＤ番号及び上記氏名の人の顔画像情報を記憶した画像情報記憶領域２５Ｄから構成されている。

画像情報記憶領域２５Ｄに記憶されている氏名個人を特定する特定ＩＤ番号及び顔画像情報は、事前に、その氏名の人から特定ＩＤ番号及び顔画像情報を受信して記憶させたものである。

図１に戻り、認証装置３には、制御部３１と、無線通信網２と通信接続を行う通信部３２と、操作部３３、記憶部３４が設けられており、記憶部３４には、認証データベース３５が設けられている。

図３は、認証データベース３５の詳細な構成を示すもので、この認証データベース３５には、各個人の識別番号であって各個人を特定する特定ＩＤ番号を記憶するＩＤ番号記憶領域３５Ａ、このＩＤ番号記憶領域３５Ａに記憶されたＩＤ番号に対応して識別認証情報記憶領域３５Ｂ及び画像情報記憶領域３５Ｃが設けられている。

識別認証情報記憶領域３５Ｂには、ＩＤ番号記憶領域３５Ａに記憶されたＩＤ番号で示される個人を識別する認証情報として、その個人の指紋情報などが記憶され、画像情報記憶領域３５Ｃにはその個人の顔画像が記憶されているものである。

しかして、上記の本システムにおいては、認証装置３には、各個人が、自己の特定ＩＤ番号、指紋情報及び顔画像情報を事前に登録させておく様になっており、また、上述した携帯電話装置１には、この認証装置３に登録させておいた特定ＩＤ番号及び顔画像情報と同じ情報を送ってアドレス帳記憶部２５の画像情報記憶領域２５Ｄに記憶させておく様になっている。

次に、上記のごとく構成された本システムの携帯電話装置１及び認証装置３の動作につき、図４乃至図８のフローチャートを参照して説明する。

図４は、携帯電話装置１の動作フローチャートであり、操作部１４の電源ＯＮキーが操作されたことが検出されると、ステップＳ１で待ち受け状態処理が設定されてステップＳ2に進む。ステップＳ２では電話の通話機能の着信の有無が判断され、着信があった場合にはステップＳ３に進んで着信報知処理がなされると共にオフフックキーが操作されたか否かが判断される。

所定時間経過してもオフフックキーの操作がなされなかった場合にはステップＳ２に戻るが、オフフックキーの操作がなされた場合にはステップＳ４に進んで通話処理が実行され発呼者との通話が可能となる。通話処理は次のステップＳ５でオンフックキーの操作が検出されるまで継続され、オンフックキーの操作が検出されるとステップＳ６に進んで終話処理がなされてステップＳ２に戻る。

ステップＳ２において着信が検出されなかった場合にはステップＳ７に進む。このステップＳ７では、撮像部２２を用いて被写体を撮像する撮像操作、即ち、カメラ機能においてシャッターキーの操作がなされたか否かを検出するもので、撮像操作がなされた場合には、撮像された被写体画像を保存画像記憶部２４に記憶させると共に、次のステップＳ８において記憶された被写体画像を読み出して表示部１３に表示させる。

ステップＳ８の処理によって被写体画像が表示されるとステップＳ９に進んで人物特定処理が実行される。

図６は、上記ステップＳ９の人物特定処理の詳細なフローチャートを示すもので、先ずステップＳ９Ａでは、表示部１３に表示された被写体画像に中で被写体画像に写し込まれている人物をユーザ操作によって指定する処理が行われる。

即ち、ステップＳ９Ａでは、先ず、表示部１３に表示された被写体画像に顔画像が存在するか否か判別し、顔画像が存在する場合には、その顔画像を例えばフレーム枠で囲む等の表示を行わせる。

この場合、顔画像が極めて小さく見ただけでは人物が特定出来ない顔画像或いは焦点が合っておらず所謂ぼけていて人物が特定出来ない顔画像は、その対象から外す。

このようにして、フレーム枠で囲まれた顔画像のうちの一つをユーザが指定する。この指定は、例えば、カーソルを指定する人物の顔画像のフレーム枠内に合わせて決定キーを操作する方法や、表示部１３を、表示装置とその前面に配置した透明のタッチスイッチで構成し、表示されている顔画像のフレーム枠位置をタッチする方法を採用することにより、その位置情報が制御部１２に送られ、制御部１２において被写体画面中のどの人物が指定されたかが判別される。

次のステップ９Ｂ及び９Ｃでは、アドレス帳記憶部２５を参照して、指定された人物の顔画像をアドレス帳記憶部２５の画像情報記憶領域２５Ｄに記憶されている顔画像と照合する処理を行い、ステップ９Ｄでは指定された人物の顔画像と類似もしくは同一の顔画像があったか否かを判断する。

類似もしくは同一の顔画像がなかった場合にはそのまま図６の特定人物処理を抜けて図４のステップＳ１０に進むが、あった場合にはステップＳ９Ｅでその人物のＩＤ番号を特定してから図４のステップＳ１０に進む。

図４のステップＳ１０では、ステップＳ９ＥによるＩＤ番号の特定がなされたか否かを判断し、なされた場合にはステップＳ１１に進んでユーザ操作による認証情報入力処理を行う。

このステップＳ１１の認証情報入力処理は、被写体画像に写し込まれ且つ図６のステップＳ９Ａで指定された人物が、後述する如く、上記被写体画像のコピー或いは外部への転送を許可する為に、その人物の指紋などの認証情報を入力する処理である。従って、上記ステップＳ９Ａでの人物指定は、撮像を行ったユーザでも、被写体画像として写し込まれた人物でも、或いは第三者でもかまわないが、ステップＳ１１の認証情報入力は、ステップＳ９Ａで指定された人物自身（撮影画像に写っている人自身）が認証入力部２１から自分の指紋を入力する必要がある。

しかして、ステップＳ１１での認証情報入力が行われた後はステップＳ１２に進んで認証判別処理が実行される。

図７は、上記ステップＳ１２の認証判別処理の詳細なフローチャートである。

先ずステップＳ１２Ａでは、図６のステップＳ９Ｄ及び９Ｅで類似もしくは同一画像有りと判断され且つ特定された人物のアドレス帳記憶部２５の画像情報記憶領域２５Ｄに記憶されているＩＤ番号及び顔画像情報を、ステップＳ１１で入力された入力認証情報と共に認証装置３に送信する。

認証装置３には、図３で示した様に情報データベース３５に個人のＩＤ番号、顔画像情報及び認証情報が対応させて登録記憶されており、携帯電話装置１から送られてきたＩＤ番号、顔画像情報及び入力認証情報と認証データベース３５に記憶されているＩＤ番号、顔画像情報及び認証情報とが一致すると認証ＯＫか否かの判別結果データを携帯電話装置１に送り返すものである。

図８は、上記認証装置３の動作のフローチャートである。

ステップＳ３１において待ち受け状態に設定されるとステップＳ３２に進み、ＩＤ番号、顔画像情報及び認証情報の受信があるか否かが判断される。受信があった場合にはステップＳ３３で認証データベース３５を参照（サーチ）し、ステップＳ３４で送られてきた認証情報と認証情報記憶領域２５Ｂに記憶されている認証情報との照合処理を行い、ステップＳ３５で一致する認証情報が存在するか否かを判別する。

一致する認証情報が存在しなかった場合にはステップＳ３６で認証ＮＧ（不可）のデータを作成してステップＳ３７で送信元に送る。

一方、ステップＳ３５で一致する認証情報が存在した場合にはステップＳ３８に進み、一致した認証情報に対応するＩＤ番号記憶領域３５ＡのＩＤ番号を読み出し、次のステップＳ３９で、読み出したＩＤ番号が受信したＩＤ番号と一致するか否かを判断する。

ＩＤ番号が一致しなかった場合にはステップＳ３６に進むが、一致した場合にはステップＳ４０に進み、ＩＤ番号記憶領域３５ＡのＩＤ番号に対応する画像情報記憶領域３５Ｃの顔画像を読み出し、ステップＳ４１で受信した顔画像と一致するか否かを判断する。

一致しなかった場合にはステップＳ３６に進むが一致した場合にはステップＳ４２に進み、認証ＯＫのデータを作成してステップＳ３７でそのデータを送信する。

このように、認証装置３では、携帯電話装置１から送られてきたＩＤ番号、顔画像情報及び入力認証情報夫々が認証データベース３５に登録されているＩＤ番号、顔画像情報及び認証情報夫々と一致するか否かを判別し、全てが一致したときに認証ＯＫの判別結果データを携帯電話装置１に送り返し、一つでも一致しなかった場合には認証ＮＧの判別結果を送り返す。

従って、携帯電話装置１は図７のステップ１２ＡでＩＤ番号、顔画像情報及び入力認証情報を送信した後は次のステップＳ１２Ｂで認証装置３から判別結果を受け取り、図４のステップＳ１３に進む。

ステップＳ１３では、認証装置３から送られてきた認証の判別結果がＯＫか否かを判別し、OKである場合にはステップS１４に進む。ステップS１４では、フレーム枠で囲まれている顔画像のうち、上記ステップ１３でＯＫとなった顔画像のフレーム枠表示を消去すると共に、表示されている被写体画像の顔画像の中でまだフレーム枠が表示されている顔画像が存在するかを判断する。

即ち、顔画像としてまだ認証未処理の人物が存在するか否かが判断され、認証未処理の人物が写し込まれている場合にはステップS９に戻って、上述したステップS９乃至S１４の処理を繰り返す。

この場合、ステップ９Ａにおいては、ステップＳ１３でＯＫとなった顔画像に対してフレーム枠は表示させず、残りの顔画像に対してのみフレーム枠を表示させてユーザに人物特定を行わせる。

このようにステップS９乃至S１４の処理を繰り返す理由は、被写体画像の中に複数の人物が写し込まれている場合、写し込まれている人物全員の同意を得て始めてその画像のコピー及び転送などを可能にする為のものである。但し、写っている人物の顔画像等が小さかったり焦点が合っていなかったりして誰なのか判別できないような場合は同意を不要としている。

そして、いずれかの人物の認証動作において、ステップＳ１３で認証結果がＯＫでなかった場合、即ち、認証装置３での認証が得られなかった場合にはステップＳ１３からステップＳ１５に進み、その撮影された被写体画像に許可フラグ「０」の対応付けを行い、次のステップＳ１６においてその画像の保存操作がなされるとステップＳ１７で、撮影された被写体画像と許可フラグとを対応付けて保存画像記憶領域２４に記憶させる処理を実行するものである。

一方、ステップＳ１４で、被写体画像として写し込まれている人物全員の認証が得られた場合にはその撮影された被写体画像に許可フラグ「１」の対応付けを行い、次のステップＳ１６においてその画像の保存操作がなされるとステップＳ１７で撮影された被写体画像と許可フラグとを対応付けて保存画像記憶領域２４に記憶させる処理を実行するものである。

ステップＳ１６において、保存操作でない場合にはステップＳ１８に進み、コピー操作或いはネットワーク上や外部機器への送信操作がなされたか否かが判断される。

コピーもしくは送信の操作がなされた場合には、ステップＳ１９においてその被写体画像に許可フラグ「１」が附されているか否かを判断し、許可フラグ「１」が付されている場合にはステップＳ２０に進んでコピーもしくは送信動作を実行する。

許可フラグ「１」が付されておらず、許可フラグが「０」であった場合にはステップＳ２１に進んで、コピーもしくは送信不許可であるとしてその旨を表示部に１３に表示させる。

ステップＳ７において、カメラの撮影操作でない場合には図５のステップ２２に進む。このステップＳ２２では、図４のステップＳ１７で保存記憶された画像を再生して閲覧する保存画像閲覧開始操作であるか否かが判断される。

閲覧開始操作がなされた場合には、ステップＳ２３に進み、ユーザによる表示切替操作によって保存されている画像を順次表示部１３に切換表示させる処理を実行する。

その後、ステップＳ２４でコピー操作或いは送信操作等がなされたか否かが判断され、これらの操作が行われず、例えば終了キーの操作などがなされた場合には図４のステップＳ２に戻るが、コピー操作或いは送信操作がなされた場合にはステップＳ２５乃至Ｓ２７に進む。

ステップＳ２５乃至Ｓ２７は、図４のステップＳ１９乃至Ｓ２１の処理と同一の処理であり、即ち、閲覧中の画像に対応して記憶されている許可フラグが「１」の時にはコピーもしくは送信を実行し、許可フラグが「０」の時にはコピーもしくは送信を不許可とするものである。

ステップＳ２２において、保存画像の閲覧開始操作でない場合にはステップＳ２８に進み、上述した以外の他の機能の操作が検出される。例えば、メール機能においてはメール文作成操作やメースの送信操作、インターネット機能においてはＷｅｂ閲覧操作などが検出される。

また、図４のステップＳ７では、撮像時のシャッターキーの操作を検出するが、それ以前のカメラ機能を起動させる操作、ズーム調整や露出調整等の操作などはこのステップＳ２８で検出され、次のステップＳ２９で検出された操作に応じた処理が実行されるものである。

以上説明した様に、上記の実施の形態によれば、撮影された被写体画像の中から人物を選択し、その人物が自己のアドレス帳に記憶されている人であるか否か、及び、その人物が認証情報を入力してくれたかどうか、更には、その認証情報が外部の認証装置に登録されているか否か等の条件をクリアした場合のみその撮影された被写体画像のコピーや外部への転送を許可する様に構成されているため、撮影された人物の意図に反して撮影画像が本人の知らない状態で流布してしまうことを防止できる。

また、撮影された被写体画像に複数の人物が撮影されている場合は、撮影されている全ての人物を認証して許可を受ける様にしてあるため、撮影された人物全員の許可がない限りは意図に反して撮影画像が流布してしまうことを防止できる。

更に、入力された認証情報を、人物の識別情報と該人物の認証情報を対応付けて記憶している外部の認証装置に送信し、外部の認証装置により該外部の認証装置に記憶されている認証情報と送信された認証情報から対応する人物の識別情報が一致するか否かに応じて認証するか否かの判別結果を受信し、判別結果を受信することにより判別結果を取得するようにしたことで、認証情報が外部の認証装置にのみ記憶されるため、認証情報の流出や悪用を防止できる。

更にまた、外部の認証装置は人物を識別する情報に該人物の顔画像を更に対応付けて記憶し、撮影画像から特定された人物の顔画像を外部の認証装置に更に送信し、外部の認証装置により該外部の認証装置に記憶されている画像と送信された画像から対応する人物の識別情報が更に一致するか否かに応じて認証するか否か判別された判別結果を受信するようにしたことで、他人が認証情報を不正に入手して登録するなりすましを防止できる。

（第２の実施の形態）
図９乃至図１３は、本発明の第２の実施の形態を示している。この第２の実施の形態において、第１の実施の形態と同一構成部には第１の実施の形態と同一番号を付しその詳細な説明は省略する。

図９は、第２の実施の形態のシステム構成図である。図において、図１に示したシステム構成と異なる点は、図１の認証を受ける認証装置３の代わりに、被写体画像に写し込まれた人物がコントロールし得る端末装置、例えば、その人物の携帯電話装置４を認証結果を問い合わせる、問い合わせ先の電子機器として用いられている点である。

また、携帯電話装置１のアドレス帳記憶部２５には、図示していないが、各氏名情報に対応して各氏名が所有している端末装置、例えば携帯電話装置への接続情報が問い合わせ先番号として記憶されている。

携帯電話装置４には、制御部４０、表示部４１、操作部４２、電源部４３、電話部４４、アンテナ４５、無線通信部４６、受話スピーカ４７、マイク４８が設けられており、これらは携帯電話装置１の制御部１２、表示部１３、操作部１４、電源部１５、電話部１６、アンテナ１７、無線通信部１８、受話スピーカ１９、マイク２０と同一構成であるのでその詳細な説明は省略する。

携帯電話装置４の記憶部４９には、認証情報記憶部５０が設けられており、この認証情報記憶部５０には、図１０に示す様に、この携帯電話装置４の所有者の認証情報、例えば指紋情報が登録記憶されている。

しかして、上記の構成において、携帯電話装置１は、図４に示した動作フローチャートと同様の動作処理を行うが、ステップＳ９における人物特定処理及びステップＳ１２における認証判定処理が、夫々図１１に示す人物特定処理及び図１２に示す認証判定処理を実行する点で第１の実施の形態とは異なる。

即ち、ステップＳ９の詳細なフローチャートである図１１においては、ステップ９Ａ乃至９Ｄは、図６のステップ９Ａ乃至９Ｄと同じ処理であるが、ステップ９Ｄの後はステップ９Ｆに進んで、指定された人物の問い合わせ先情報をアドレス帳記憶部２５から取得する。

これにより、ステップS１２の認証判定処理では、図１２のステップS１２Cに示す様に入力された認証情報を問い合わせ先に送信する。この場合、被写体画像の中で指定された人物が携帯電話装置４の所有者であれば、携帯電話装置４に認証情報が送信される。

携帯電話装置４においては、図１３に示すフローチャートが実行される。即ち、ステップS５１で待ち受け状態が設定されると、次のステップＳ５２では、認証情報の受信があるか否かが判別され、受信があった場合にはステップＳ５３に進み、受信した認証情報と記憶部４９の認証情報記憶部５０に記憶されている認証情報との照合処理がなされる。

ステップＳ５４で照合の結果が一致する場合には、ステップＳ５５に進み、認証ＯＫのデータを作成して次のステップＳ５６で携帯電話装置１に送り返す。

一方、照合の結果が一致しなかった場合には、ステップＳ５７に進み、認証ＮＧのデータを作成して次のステップＳ５６で携帯電話装置１に送り返す。

その結果、携帯電話装置１では、図１２のステップＳ１２Ｄでその認証判別結果を受信し、図４のステップＳ１３以下で、その結果に基づいてコピーや転送の許可或いは不許可を制御するものである、

このように、上記第２の実施の形態では、人物を識別する情報に問合先を更に対応付けて記憶し、判別結果取得手段は、撮影画像から特定された人物を識別する情報に対応付けて記憶されている問合先の装置に入力された認証情報を送信し、問合先の装置により該問合先の装置に記憶されている認証情報と送信された認証情報から対応する人物の識別情報が一致するか否かに応じて認証するか否かの判別結果を受信し、判別結果を受信することにより判別結果を取得するようにしたことで、認証情報は問合先の装置にのみ記憶されるため、認証情報の流出や悪用を防止できる。

（第３の実施の形態）
図１４乃至図１６は、本発明の第３の実施の形態を示している。この第３の実施の形態においては、端末装置、例えば、携帯電話装置のみで、被写体人物の承認がない場合には被写体画像のコピー或いは転送などを防止出来る様にしたものである。

図１４は、第３の実施の形態における本発明の携帯電話装置５のブロック図である。図において、第１図に示した携帯電話装置１と同一構成部分に関しては同一番号を付してその詳細な説明は省略する。

しかして、携帯電話装置５は、記憶部５１のアドレス帳記憶部５２の構成及び後述するフローチャートの一部の説明箇所を除くと図１の構成と同一である。

図１５は、上記携帯電話装置４のアドレス帳記憶部５２の構成を示している。このアドレス帳記憶部５２には、氏名情報記憶領域５２Ａ、メールアドレス情報記憶領域５２Ｂ、電話番号情報記憶領域５２Ｃ、画像情報記憶領域５２Ｄが設けられており、これらは夫々図２に示したアドレス帳記憶部２５の氏名情報記憶領域２５Ａ、メールアドレス情報記憶領域２５Ｂ、電話番号情報記憶領域２５Ｃ、画像情報記憶領域２５Ｄと同一である。

そして、アドレス帳記憶部５２には、氏名情報記憶領域５２Ａに記憶されている氏名夫々に対応させてその氏名の人の指紋情報を認証情報として登録記憶しておく認証情報記憶領域５２Ｅが設けられている。

上記認証情報記憶領域５２Ｅには、その氏名の人に認証入力部２１から指紋情報を入力してもらい事前に指紋情報を登録しておく。

このような構成において、図４以下に示したフローチャートと同様の処理を実行するが、ステップＳ１２の認証判別処理のみ、図１６に示すフローチャートを実行する。

先ずステップＳ６１では、アドレス帳記憶部５２の認証情報記憶領域５２Ｅを参照し、ステップＳ６２では、顔画像が類似もしくは同一とされた人のＩＤ番号に基づきその人の認証情報を認証情報記憶領域５２Ｅから読み出して入力された認証情報と照合する。

次のステップ６３で一致することが検出された場合にはステップＳ６４で認証ＯＫとし、一致しなかった場合にはステップＳ６５で認証ＮＧとして図４のステップＳ１３に進む。図４のステップＳ１３以下では、その結果に基づいてコピーや転送の許可或いは不許可を制御する。

このように、第３の実施の形態では、人物を識別する情報に認証情報を更に対応付けて記憶し、入力された認証情報が、特定された人物の識別情報に対応付けて記憶されている認証情報と一致するか否かに応じて認証するか否かを判別することにより判別結果を取得するようにしたことで、自端末装置内のみで認証の処理を行うことができる。

また、いずれの実施の形態においても、撮影画像を、取得された認証するか否か判別結果に応じて該撮影画像のコピー或いは送信を許可するか否かを示す情報と対応付けて保存し、保存された撮影画像を、対応付けて保存された許可するか否かを示す情報に応じて、コピー或いは送信するか否かの制御を行うようにしたことで、保存画像でも撮影された人物の意図に反して撮影画像が流布してしまうことを防止できる。

尚、上記の実施の形態では、認証入力部２１から入力する認証情報として指紋情報を用いたが、指紋情報に限られることなく、他の生体情報、例えば静脈情報や虹彩情報などであってもよく、或いは、生体情報に限らず、文字や記号などからなるパスワードをキー入力した情報であってもよい。

また、上記の実施の形態では、撮像部２２で撮像した画像についてコピーや外部送信等の許可を得る様にしたが、例えば、デジタルカメラやパーソナルコンピュータなどの外部装置から人物が写っている画像を受信し、その画像につき、写っている人物を特定し認証情報などを入力してもらい、その画像のコピーや外部送信等を行うことの許可を得る様にしてもよい。

また、撮像部２２で撮像すると、直ちにその撮影された画像につきコピーや外部送信等を行うことの許可を得る認証動作を行わせる様にしたが、撮像時にはこれを行わずに撮影画像の保存だけを行い、再生モード設定して保存した画像を再生した際にコピーや外部送信等を行うことの許可を得る認証動作を行わせる様にしてもよい。

更に、上記の実施の形態では、メールアドレスや電話番号を記憶するアドレス帳記憶部２５に特定ＩＤ番号や顔画像情報を記憶させたが、アドレス帳記憶部に記憶させるのではなく、専用の記憶部を設けてそこに記憶させてもよい。

また、コピーや外部送信等を行うことの許可を得た画像は、許可フラグと共に記憶させておくことによって後日であってもコピーや外部送信等を行うことが出来る様にしたが、許可を得てからの日数などの期間を計時する計時手段や、日数を演算する演算手段を設け、予め定められた日数が経過すると許可を取り消す様にしてもよい。

更に、上述した実施の形態では、端末装置として携帯電話装置を用いた例について述べたが、他の端末装置、例えば、デジタルカメラ、ビデオカメラ、パーソナルコンピュータ、ＰＤＡ、音楽プレーヤ等にも適用可能である。

１携帯電話装置
３認証装置
４携帯電話装置
５携帯電話装置
１２制御部
１３表示部
１４操作部
１６電話部
１７アンテナ
１８無線通信部
２３記憶部
２４保存画像記憶部
２５アドレス帳記憶部
２５Ｄ画像情報記憶領域
３４記憶部
３５認証データベース
４０制御部
４１表示部
４２操作部
４４電話部
４５アンテナ
４６無線通信部
４９記憶部
５０認証情報記憶部
５２アドレス帳記憶部
５２Ｄ画像情報記憶領域
５２Ｅ認証情報記憶領域

Claims

人物を撮像可能な撮像手段と、
この撮像手段により撮影された撮影画像を表示する表示手段と、
人物を識別する人物識別情報と前記人物の画像情報を対応付けて記憶する人物情報記憶手段と、
前記撮像手段により撮影され前記表示手段に表示された撮影画像に撮影されている人物の画像と前記人物情報記憶手段に記憶されている人物の画像情報との類似を判別して撮影された人物を特定する人物特定手段と、
認証情報を入力する認証情報入力手段と、
この認証情報入力手段によって入力された認証情報が前記人物特定手段により特定された人物の認証情報と一致するか否かの判別結果を取得する判別結果取得手段と、
この判別結果取得手段により取得した判別結果に基づいて前記撮影画像のコピー或いは外部送信を許可あるいは不許可とする制御を行う制御手段と、
を備えることを特徴とする端末装置。
前記撮影画像に複数の人物が撮影されている場合は撮影されている全ての人物に対して前記人物特定手段、前記認証情報入力手段及び判別結果取得手段による処理を実行し、前記制御手段は、撮影されている全ての人物に対しての判別が許可であった場合のみ前記撮影画像のコピー或いは外部送信を許可することを特徴とする請求項１に記載の端末装置。
前記判別結果取得手段は、
前記人物特定手段により前記撮影画像から特定された人物に対応付けて前記人物情報記憶手段に記憶されている人物識別情報及び前記認証情報入力手段により入力された認証情報を外部の認証装置に送信する送信手段と、
前記外部の認証装置により送られてくる前記認証情報入力手段によって入力された認証情報が前記人物特定手段により特定された人物の認証情報と一致するか否かを認証した判別結果を受信する受信手段と、
を備えることを特徴とする請求項１又は２に記載の端末装置。
前記人物情報記憶手段には、前記人物識別情報に対応させて問い合わせ先電子機器との送受信を可能とする問い合わせ先情報を更に記憶しており、
前記判別結果取得手段は、前記認証情報入力手段により入力された認証情報を前記人物特定手段により前記撮影画像から特定された人物に対応付けて前記人物情報記憶手段に記憶されている問い合わせ先情報を用いて問い合わせ先電子機器に送信する送信手段と、
前記問い合わせ先電子機器より送られてくる前記認証情報入力手段によって入力された認証情報が前記人物特定手段により特定された人物の認証情報と一致するか否かの判別結果を受信する受信手段と、
を備えることを特徴とする請求項１又は２に記載の端末装置。
前記人物情報記憶手段は、前記人物の識別情報に対応させて認証情報を更に記憶しており、
前記判別結果取得手段は、前記認証情報入力手段により入力された認証情報が、前記人物特定手段により特定された人物の識別情報に対応付けて前記人物情報記憶手段に記憶されている認証情報と一致するか否かに応じて認証するか否かを判別することにより判別結果を取得することを特徴とする請求項１又は２に記載の端末装置。
更に、前記判別結果取得手段により取得した判別結果が前記撮影画像のコピー或いは外部送信を許可するか否かのいずれであるかを示す判別情報を前記撮像画像に対応させて保存する保存手段と、
この保存手段に保存された撮影画像が再生された際に再生された撮影画像のコピー或いは外部送信を対応して保存されている判別情報に従って許可或いは不許可とする再生制御手段と、
を備えることを特徴とする請求項１乃至５のいずれかに記載の端末装置。
人物が被写体となっている被写体画像を表示する表示手段と、
人物を識別する人物識別情報と前記人物の画像情報を対応付けて記憶する人物情報記憶手段と、
前記表示手段に表示された被写体画像の被写体となっている人物の画像と前記人物情報記憶手段に記憶されている人物の画像情報との類似を判別して被写体となっている人物を特定する人物特定手段と、
認証情報を入力する認証情報入力手段と、
この認証情報入力手段によって入力された認証情報が前記人物特定手段により特定された人物の認証情報と一致するか否かの判別結果を取得する判別結果取得手段と、
この判別結果取得手段により取得した判別結果に基づいて前記被写体画像のコピー或いは外部送信を許可あるいは不許可とする制御を行う制御手段と、
を備えることを特徴とする端末装置。
端末装置と、この端末装置から送信されてきた認証情報が登録されている認証情報に一致するか否かを認証する認証装置とからなる認証システムであって、
前記認証装置は、
人物の識別情報と該人物の認証情報を対応付けて記憶している認証記憶手段と、
前記端末装置から送信された人物を特定する情報と認証情報とを受信する認証受信手段と、
前記認証記憶手段に記憶されている認証情報と前記認証受信手段により受信された認証情報から対応する人物の識別情報が一致するか否かに応じて認証するか否かを判別する認証判別手段と、
この認証判別手段による判別結果を前記端末装置に送信する認証送信手段と、
を備え、
前記端末装置は、
人物を撮像可能な撮像手段と、
この撮像手段により撮影された撮影画像を表示する表示手段と、
人物を識別する人物識別情報と前記人物の画像情報を対応付けて記憶する人物情報記憶手段と、
前記撮像手段により撮影され前記表示手段に表示された撮影画像に撮影されている人物の画像と前記人物情報記憶手段に記憶されている人物の画像情報との類似を判別して撮影された人物を特定する人物特定手段と、
認証情報を入力する認証情報入力手段と、
この認証情報入力手段によって入力された認証情報が前記人物特定手段により特定された人物の認証情報とを前記認証装置に送信する端末送信手段と、
前記認証装置から送られてくる人物の識別情報が一致したか否かの前記判別結果を受信する端末受信手段と、
この端末受信手段で受信した判別結果に基づいて前記撮影画像のコピー或いは外部送信を許可あるいは不許可とする制御を行う制御手段と、
を備えることを特徴とする認証システム。
コンピュータに、
人物を撮像可能な撮像機能、
この撮像機能により撮影された撮影画像を表示する表示機能、
人物情報記憶手段に人物を識別する人物識別情報と前記人物の画像情報を対応付けて記憶させる人物情報記憶制御機能、
前記撮像機能により撮影され前記表示機能で表示された撮影画像に撮影されている人物の画像と前記人物情報記憶手段に記憶されている人物の画像情報との類似を判別して撮影された人物を特定する人物特定機能、
認証情報を入力する認証情報入力手段によって入力された認証情報が前記人物特定機能により特定された人物の認証情報と一致するか否かの判別結果を取得する判別結果取得機能、
この判別結果取得機能により取得した判別結果に基づいて前記撮影画像のコピー或いは外部送信を許可あるいは不許可とする制御を行う制御機能、
を実現させるためのプログラム。
コンピュータに、
人物が被写体となっている被写体画像を表示する表示機能、
人物情報記憶手段に人物を識別する人物識別情報と前記人物の画像情報を対応付けて記憶させる人物情報記憶制御機能、
前記表示機能に表示された被写体画像の被写体となっている人物の画像と前記人物情報記憶手段に記憶されている人物の画像情報との類似を判別して被写体となっている人物を特定する人物特定機能、
認証情報を入力する認証情報入力手段によって入力された認証情報が前記人物特定機能により特定された人物の認証情報と一致するか否かの判別結果を取得する判別結果取得機能、
この判別結果取得機能により取得した判別結果に基づいて前記被写体画像のコピー或いは外部送信を許可あるいは不許可とする制御を行う制御機能、
を実現させるためのプログラム。