JP5526620B2 - デジタルカメラ - Google Patents

Description

本発明は、画像データにサブデータを付加する機能を有するデジタルカメラに関する。

撮影された画像データに、その画像情報などをサブデータとして関連付ける機能を有するデジタルカメラが知られている。この種のデジタルカメラにおいては、再生された撮影画像に対して音声データやテキストデータなどのサブデータを付加して、撮影画像にサブデータを関連付けてメモリに保存することができる。

しかしながら、上述したデジタルカメラは一枚の撮影画像に対してそれに関連するサブデータを入力するものであるので、そのサブデータがその撮影画像の何に関連するのか、例えば、撮影画像中の被写体人物に関連するのか、それとも撮影画像の撮影地や撮影時期に関連するのかが分かり難いと言った問題がある。
特に、撮影画像中に被写体人物が存在する場合に、その被写体人物に関するサブデータを入力したい時も、従来のデジタルカメラはそれに対して利便性の良いものではなかった。

請求項１の発明に係るデジタルカメラは、被写体像を撮像して、撮影画像データを生成する撮像手段と、前記撮影画像データを記憶する記録媒体手段と、表示装置と、前記記録媒体手段に記録された前記撮影画像データを読み出して、前記撮影画像データの被写体画像を前記表示装置に表示する読み出し手段と、前記読み出し手段によって読み出された前記撮影画像データに基づき前記被写体画像の人物顔を検出する顔検出手段と、前記顔検出手段の検出出力に基づき、前記表示装置に表示された前記被写体画像の人物顔にマークを付与するマーク付与手段と、前記表示装置に表示された前記マークを選択して、前記選択されたマークが付与された前記被写体画像に関する前記撮影画像データに関して、音声データのみのサブデータ、非音声データのみのサブデータ、または音声データと非音声データとを含むサブデータを入力するサブデータ入力手段と、前記入力されたサブデータを前記撮影画像データに関連付けて前記記録媒体手段に記録する記録手段と、前記読み出し手段によって読み出され、前記表示装置に表示された前記撮影画像データが前記サブデータ入力済みのものであった場合に、前記表示装置に表示されている前記被写体画像の人物顔に、サブデータ入力済みを表す入力済みマークを付与する入力済みマーク付与手段と、前記表示装置に表示された前記被写体画像の人物顔に付与された前記入力済みマークを選択して、前記入力済みのサブデータを再生するサブデータ再生手段と、を備え、前記入力済みマーク付与手段は、前記人物顔を取り囲む枠形状であって前記記録されるサブデータの種類に応じて枠の色または太さが異なるマークを前記入力済みマークとして付与し、前記サブデータ再生手段は、前記音声データと非音声データとを含むサブデータの入力済みマークが選択されると、先ず前記音声データを再生してその後に前記非音声データを再生することを特徴とする。

本発明のデジタルカメラによれば、被写体画像中の人物の顔を検出すると、その顔部分にマークを付与するので、そのマークを選択し人物の顔を認識してサブデータを入力することができる。

本発明の実施の形態に係るデジタルカメラの構成を示すブロック図である。 デジタルカメラのディスプレイ３６の第１の画面内容を模式的に示す図である。 デジタルカメラのディスプレイ３６の第２の画面内容を模式的に示す図である。 デジタルカメラのディスプレイ３６の第３の画面内容を模式的に示す図である。

＜デジタルカメラの構成＞
本発明の実施の形態によるデジタルカメラは、メインデータである画像データにサブデータを付加する機能を有するものであり、図１〜４を参照しながら詳細に説明する。
図１は、本発明の実施の形態によるデジタルカメラの構成を示すブロック図である。
図１に示されるように、デジタルカメラは、撮影レンズ１１、絞り１２、撮像素子１３、バッファメモリ１４、画像処理部１５を備える。また、デジタルカメラは、画像記録部１６、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１７、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１８、バス１９、画像読出し部２０、サブデータ入力部３０、再生制御部３５、ディスプレイ３６、スピーカー３７およびサブデータ再生部３８を備える。

画像処理部１５、画像記録部１６、ＣＰＵ１７、ＲＯＭ１８、画像読出し部２０、サブデータ入力部３０、再生制御部３５およびサブデータ再生部３８は、バス１９を介して互いに接続されている。

ＣＰＵ１７は、顔検出部２１、マーク付与部２３および入力済みマーク付与部２５として機能する。また、ＣＰＵ１７は、撮影手段である撮影レンズ１１、絞り１２、撮像素子１３を制御する。
ＲＯＭ１８は、顔データ記憶部２２、マークデータ記憶部２４および入力済みマーク記憶部２６として機能する。

撮影レンズ１１は、ズームレンズやフォーカスレンズを含む複数のレンズで構成され、被写体像を撮像素子１３上に結像する。図１では簡単のため、撮影レンズ１１は１枚のレンズで示されている。撮像素子１３は、撮影レンズ１１からの被写体光Ｌ１を光電変換することにより画像信号を生成する。

撮像素子１３から出力される画像信号は、バッファメモリ１４を介して画像処理部１５に送られ、ここで所定の種々の画像処理が施される。撮影開始前の段階では、撮像素子１３からの画像信号は、バッファメモリ１４、画像処理部１５を介してディスプレイ３６に送られ、スルー画像として表示される。撮影段階では、撮像素子１３からの画像信号は、バッファメモリ１４、画像処理部１５を介して画像記録部１６にて記録される。

画像記録部１６は、撮影画像データとその画像に関する属性情報とを関連付けて不揮発性のメモリ１６ａに記録する。撮影画像データには、被写体を撮影レンズ１１、絞り１２、撮像素子１３によって撮影した被写体画像データや、外部機器から画像記録部１６に入力された撮影画像データが含まれる。

画像読出し部２０は、画像記録部１６のメモリ１６ａに記録されている画像データの検索や読出しを行う操作部であり、読み出された画像データは、ディスプレイ３６に再生表示される。

顔検出部２１は、画像読出し部２０によって読み出された被写体画像データを、顔データ記憶部２２に予め記憶されている顔データと比較することにより、画像中の被写体人物の顔を検出する。被写体人物が複数人の場合は各人の顔を検出する。顔検出部２１は、被写体人物の顔を検出すると、検出信号を出力する。
顔データ記憶部２２は、例えば、眉、眼、鼻、唇の形状に関する特徴点のデータを記憶している。

顔検出には、例えば、特開２００１−１６５７３号公報に開示されている検出手法を用いることができる。この検出手法は、入力画像中から特徴点を抽出して被写体の顔領域、顔の大きさ等を検出するものである。特徴点としては、眉、眼、鼻、唇の各端点、および顔の輪郭点、例えば頭頂点や顎の下端点が挙げられる。

他の顔検出としては、例えば、特開２００５−１５７６７９号公報に開示されている検出手法を用いることができる。この検出手法は、先ず、入力画像中の２画素間の輝度差を特徴量として学習しておき、その特徴量に基づいて入力画像中の所定領域に顔が存在するか否かを示す推定値を算出し、推定値が１以上のときにその所定領域に顔が存在すると判別するものである。

マーク付与部２３は、顔検出部２１が検出信号を出力すると、被写体画像データに基づいてディスプレイ３６に表示された再生画像中の被写体人物の顔部分にマークを付与する。したがって、マークが表示されている場合は、人物の顔を検出済みであることを示している。
マークデータ記憶部２４は、マーク付与部２３が付与するマークについて複数種類のデータを保存している。マークの種類としては、例えば枠形状であれば、その枠の模様、太さ、色などが異なる数種類の組合せがある。

入力済みマーク付与部２５は、被写体画像データにサブデータが入力済みである場合に、被写体画像データに基づいてディスプレイ３６に表示された再生画像中の被写体人物の顔部分に入力済みマークを付与する。入力済みマーク付与部２５が付与する入力済みマークは、マーク付与部２３が付与するマークと区別するため、例えば枠形状であれば、その枠の模様、太さ、色などがマーク付与部２３が付与するマークと異なっている。

入力済みマークデータ記憶部２６は、入力済みマーク付与部２５が付与するマークについて複数種類のデータを保存している。マークの種類としては、例えば枠形状であれば、その枠の模様、太さ、色などが異なる数種類の組合せがある。

サブデータ入力部３０は、被写体人物の顔部分にマークが付された被写体画像データにサブデータを入力するための操作部である。
入力されたサブデータは、メインデータである被写体画像データに関連付けられて（リンク付けられて）メモリ１６ａに記録される。
なお、サブデータとメインデータとは、関連付けられていれば、別々の記憶媒体に保存されていてもよい。

サブデータ入力部３０として、関連画像データ入力部３１、音声データ入力部３２、手書きデータ入力部３３などが用いられる。
関連画像データ入力部３１は、サブデータとして既存の関連画像データを入力するが、既存の関連画像データとして、本デジタルカメラで撮影した被写体画像データを用いる場合は、メモリ１６ａに保存されている撮影画像データを選択するだけでよい。また、既存の画像データとして、デジタルカメラやレコーダなどの外部機器の画像データを用いる場合は、関連画像データ入力部３１は、外部機器の出力部から無線あるいは有線で画像データを入力する。

音声データ入力部３２は、サブデータとして音声データを入力する。音声データ入力部３２は、マイクロホンを有し、楽曲、人間の声、自然の音（例えば、動物の鳴き声、水流や風の音）などの様々な音を入力するとともに、無線または有線の通信により外部から楽曲データ等も入力する。

手書きデータ入力部３３は、サブデータとして手書きの文字や記号を入力する。手書きデータ入力部３３は、タッチパネルとタッチペンとから構成され、ユーザーは、タッチペンを使ってタッチパネル面上に手書きすることによって文字や記号を入力する。
本実施の形態では、ディスプレイ３６は、タッチパネル式ディスプレイが使用されており、ユーザーは、このタッチパネル式ディスプレイ３６を用いて手書き入力することができる。

再生制御部３５は、メモリ１６ａに保存されている被写体画像データや上述したサブデータなどを再生してディスプレイ３６に表示させたり、ディスプレイ３６の画面の表示態様を制御する。
また、再生制御部３５は、スピーカー３７の音声出力状態を制御する。スピーカー３７は、音声データ入力部３２によって入力された音声データに基づいて音声を出力する。

サブデータ再生部３８は、画像記録部１６のメモリ１６ａに記録されたサブデータの再生を行う操作部である。サブデータの再生は、ディスプレイ３６に表示された被写体画像の人物の顔部分に付された入力済みマークを選択することによって実行する。

＜デジタルカメラの動作＞
以上のように構成されたデジタルカメラの動作を、図２〜４も参照しながら説明する。
先ず、画像読出し部２０によって、画像記録部１６のメモリ１６ａに記録されている被写体画像データ（メインデータ）が読み出される。読み出された被写体画像データに基づく画像はディスプレイ３６に再生表示される。

図２に示されるように、ディスプレイ３６に再生表示された被写体画像には、被写体人物１００と被写体人物２００が存在する。顔検出部２１は、読み出された被写体画像データを、顔データ記憶部２２に予め記憶されている顔データと比較することにより、画像中の被写体人物１００及び２００の顔１００Ａ、２００Ａを検出し、検出する毎に検出信号を出力する。

マーク付与部２３は、顔検出部２１が検出信号を出力すると、図３に示されるように、再生画像中の被写体人物１００の顔部分１００Ａにマーク１０１を付与し、被写体人物２００の顔部分２００Ａにマーク２０１を付与する。マーク１０１、２０１は、顔部分を囲む４つのＬ型から成る四角の枠形状であり、比較的細い線が用いられている。

被写体人物１００に対してサブデータを入力する場合は、先ず、表示されている被写体人物１００のマーク１０１を指でタッチして選択し、サブデータ入力部３０によって関連画像データ、音声データ、手書きデータの中から所望のサブデータを入力する。画像記録部１６は、入力されたサブデータを被写体画像データに関連付けてメモリ１６ａに記録させる。被写体人物２００に対しても同様に、入力されたサブデータは、被写体画像データに関連付けられてメモリ１６ａに記録される。その結果、メインデータである被写体画像データに、被写体人物１００に関するサブデータと被写体人物２００に関するサブデータとがメモリ１６ａに記録される。

サブデータには、関連画像データ、音声データ、手書きデータがあり、被写体人物１００に関するサブデータと被写体人物２００に関するサブデータとは、同種のデータでもよいし、異種のデータでもよい。例えば、被写体人物１００に関するサブデータは既存の画像データであり、被写体人物２００に関するサブデータは音声データであるというように、一つの被写体画像データ（メインデータ）に、異種のサブデータが付加されていてもよい。

上述のようにして、サブデータが入力された被写体画像データを画像読出し部２０がメモリ１６ａから再度読み出すと、入力済みマーク付与部２５は、図４に示されるように、ディスプレイ３６に再生表示された被写体画像中の被写体人物１００、２００の顔部分１００Ａ、２００Ａに入力済みマーク１０２、２０２をそれぞれ付与する。

入力済みマーク１０２、２０２は、図３のマーク１０１、２０１と同様の顔部分を囲む４つのＬ型から成る四角の枠形状であるが、比較的太い線が用いられている。そのため、入力済みマーク１０２、２０２は、マーク１０１、２０１とは明確に区別が付くので、サブデータが未入力か入力済みかが簡単に判別できる。なお、入力済みマーク１０２、２０２とマーク１０１、２０１とは、互いに異なる色で表すことにより区別してもよい。

これらの入力済みマーク１０２、２０２を指でタッチして選択すると、サブデータ再生部３８は、選択された被写体人物に関するサブデータをメモリ１６ａから読み出して再生する。例えば、被写体人物１００に関するサブデータが既存の画像データである場合は、ディスプレイ３６にその既存の画像データが表示される。また、被写体人物２００に関するサブデータが音声データである場合は、スピーカー３７からその音声データに基づく音声が出力される。

本実施の形態によるデジタルカメラによれば、以下の作用効果を奏する。
（１）被写体画像中の人物の顔を検出すると、その顔部分にマークを付与するので、そのマークを選択し人物の顔を認識してサブデータを入力することができる。
（２）１枚の被写体画像中に複数の被写体人物が存在していても、人物毎にサブデータを入力することができるので、多様なサブデータの記録が可能である。
（３）被写体画像中の人物の顔部分に入力済みマークを付与することにより、被写体画像データにサブデータが付加されていることが一目で分かる。

以下、上述の実施の形態の変形例を述べる。
（１）入力済みマーク付与部２５は、サブデータ入力後に直ちに、ディスプレイ３６画面上の被写体人物１００、２００の顔部分１００Ａ、２００Ａに入力済みマーク１０２、２０２をそれぞれ付与してもよい。例えば、被写体人物１００についてサブデータの入力が終了した時に、顔部分１００Ａに入力済みマーク１０２を付与し、その後に被写体人物２００についてサブデータの入力が終了した時に、顔部分２００Ａに入力済みマーク２０２を付与する。
（２）１枚の被写体画像にサブデータとして音声データと非音声データとが付加されている場合、サブデータ再生部３８によるサブデータの再生時に、先に音声データを再生してその後に非音声データを再生するようにしてもよい。すなわち、先に音声データを再生してその後に既存の画像データまたは手書きデータを表示する。
（３）入力済みマークは、サブデータの種類に応じて形状、模様、線の太さ、色などを変えてもよい。例えば、サブデータとして既存の画像データが入力されていれば、入力済みマークを赤い線で表し、音声データであれば青い線で表す。

また、上述の実施の形態は、本発明をデジタルカメラに適用したものであったが、本発明は、それに限らず、パソコンやその他の画像処理装置に適用することができる。例えば、図１において一点鎖線で囲んだ構成を有さない画像処理装置、すなわち、撮影手段である撮影レンズ１１、絞り１２、撮像素子１３やバッファメモリ１４、画像処理部１５を有さない画像処理装置に適用することができる。
本発明は、その特徴を損なわない限り、以上説明した実施の形態に何ら限定されない。

１６：画像記録部 １６ａ：メモリ
１７：ＣＰＵ １８：ＲＯＭ
１９：バス ２０：画像読出し部
２１：顔検出部 ２２：顔データ記憶部
２３：マーク付与部 ２４：マークデータ記憶部
２５：入力済みマーク付与部 ２６：入力済みマークデータ記憶部
３０：サブデータ入力部 ３１：関連画像データ入力部
３２：音声データ入力部 ３３：手書きデータ入力部
３６：ディスプレイ ３８：サブデータ再生部

Claims (6)

1. 被写体像を撮像して、撮影画像データを生成する撮像手段と、
   前記撮影画像データを記憶する記録媒体手段と、
   表示装置と、
   前記記録媒体手段に記録された前記撮影画像データを読み出して、前記撮影画像データの被写体画像を前記表示装置に表示する読み出し手段と、
   前記読み出し手段によって読み出された前記撮影画像データに基づき前記被写体画像の人物顔を検出する顔検出手段と、
   前記顔検出手段の検出出力に基づき、前記表示装置に表示された前記被写体画像の人物顔にマークを付与するマーク付与手段と、
   前記表示装置に表示された前記マークを選択して、前記選択されたマークが付与された前記被写体画像に関する前記撮影画像データに関して、音声データのみのサブデータ、非音声データのみのサブデータ、または音声データと非音声データとを含むサブデータを入力するサブデータ入力手段と、
   前記入力されたサブデータを前記撮影画像データに関連付けて前記記録媒体手段に記録する記録手段と、
   前記読み出し手段によって読み出され、前記表示装置に表示された前記撮影画像データが前記サブデータ入力済みのものであった場合に、前記表示装置に表示されている前記被写体画像の人物顔に、サブデータ入力済みを表す入力済みマークを付与する入力済みマーク付与手段と、
   前記表示装置に表示された前記被写体画像の人物顔に付与された前記入力済みマークを選択して、前記入力済みのサブデータを再生するサブデータ再生手段と、を備え、
   前記入力済みマーク付与手段は、前記人物顔を取り囲む枠形状であって前記記録されるサブデータの種類に応じて枠の色または太さが異なるマークを前記入力済みマークとして付与し、
   前記サブデータ再生手段は、前記音声データと非音声データとを含むサブデータの入力済みマークが選択されると、先ず前記音声データを再生してその後に前記非音声データを再生することを特徴とするデジタルカメラ。
2. 請求項１に記載のデジタルカメラにおいて、
   前記顔検出手段は、前記撮影画像データ中に複数の被写体人物が存在した場合に、前記複数の被写体人物の顔をそれぞれ検出し、
   前記マーク付与手段は、前記顔検出手段によって検出された前記複数の被写体人物の顔部分にそれぞれマークを付与し、
   前記サブデータ入力手段は、前記マーク付与手段によって付与された複数のマークの１つを選択する毎に、前記サブデータを入力可能であることを特徴とするデジタルカメラ。
3. 請求項１に記載のデジタルカメラにおいて、
   前記表示装置は、タッチパネル式の表示装置であり、
   前記サブデータ入力手段は、前記表示装置に表示された前記マークを直接タッチすることによって、当該マークを選択することを特徴とするデジタルカメラ。
4. 請求項３に記載のデジタルカメラにおいて、
   前記サブデータ入力手段は、タッチペンを有し、前記タッチペンによって前記タッチパネル式の表示装置に手書きすることによってサブデータを入力することを特徴とするデジタルカメラ。
5. 請求項１に記載のデジタルカメラにおいて、
   前記入力済みマーク付与手段が付与する前記入力済みマークと前記マーク付与手段が付与する前記マークは、ほぼ同形の枠形状であり、互いにその色が異なることを特徴とするデジタルカメラ。
6. 請求項５に記載のデジタルカメラにおいて、
   前記入力済みマーク付与手段が付与する前記入力済みマークと前記マーク付与手段が付与する前記マークは、ほぼ同形の枠形状であり、互いにその枠の太さが異なることを特徴とするデジタルカメラ。
   
   

Images