JP2007324856A - 撮像装置、撮像制御方法 - Google Patents
撮像装置、撮像制御方法 Download PDFInfo
- Publication number
- JP2007324856A JP2007324856A JP2006151890A JP2006151890A JP2007324856A JP 2007324856 A JP2007324856 A JP 2007324856A JP 2006151890 A JP2006151890 A JP 2006151890A JP 2006151890 A JP2006151890 A JP 2006151890A JP 2007324856 A JP2007324856 A JP 2007324856A
- Authority
- JP
- Japan
- Prior art keywords
- image
- face image
- image signal
- unit
- control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Studio Devices (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
【解決手段】ビデオカメラ装置により撮像して得られた画像(撮像画像)のフレーム画像データの輝度信号成分を対象として、輝度分布パターンを利用して顔画像の位置する顔画像領域を検出する。そして、検出された顔画像領域の情報量を求める。この求められた情報量に基づいて、顔画像領域ごとの圧縮符号化率の可変設定、フォーカス制御、露出制御、ホワイトバランス制御などを実行する。
【選択図】図5
Description
このような撮像装置により撮像を行うときには、しばしば人物の顔が主たる被写体となるのであるが、このようなことを前提とすると、人物の顔ができるだけ良好に撮影されるようにすることが、撮像装置の価値、性能を高めるうえで重要視される1つの要素になる。
そこで、例えば特許文献1などに示すようにして、撮像により得られた信号(撮影映像信号)に基づいて主被写体が人物の顔であるか否かを判定することとして、主被写体が人物の顔であると判定したときには、人物の顔の撮影に適したとされる露出制御が行われるようにしたものが知られている。なお、特許文献1に記載されている技術としては、主被写体が人物の顔であるか否かを判定するのにあたり、撮影映像信号中における肌色を示す色度情報を利用することとしている。
つまり、撮像により画像信号を取得する撮像部と、撮像部にて取得された画像信号について、所定の利用目的に応じた処理を施す画像信号処理部と、撮像部又は画像信号処理部に備えられ、上記画像信号に基づいて、この画像信号を再生表示させて得られるとされる画像において特定種類の被写体が存在する画像領域部分である、特定被写体画像領域を検出する検出手段と、この検出手段により検出される特定被写体画像領域を表示させたとする場合の画像品位を評価する評価手段と、この評価手段により、一定以上に良好な画質品位が得られたとされる評価結果が得られるようにするための制御を行うもので、少なくとも、画像信号処理部における所定の信号処理動作についての制御を行う制御手段とを備えて撮像装置を構成することとした。
そのうえで、撮像部又は画像信号処理部において、上記画像信号から特定種類の被写体が存在する画像領域部分である特定被写体画像領域を検出したうえで、この検出された特定被写体画像領域について良好な画質品位が得られるようにして少なくとも、上記画像信号処理部における所定の信号処理動作についての制御を行うようにされる。つまり、本願発明としては、撮像により得られた画像信号における特定被写体画像領域を検出して、この検出された特定被写体画像領域の画質が一定以上の品質となるようにして制御するのにあたり、撮像部を制御するのではなく、画像信号処理部における信号処理についての制御を行うようにされる。
例えば、これまでの撮像装置においても、撮像により得られた画像信号から、本願における特定被写体の1つに相当し得る人物の顔などを判定したことに応じて良好な撮像画像を得るための制御を実行するという構成が採られてはいるが、その制御は、露出制御など、撮像部位に関する動作についての制御とされていた。これに対して、本願発明では、撮像部の後段において、画像信号を処理する部位における動作を制御することとしている。
本実施の形態のビデオカメラ装置は、カメラ部1(撮像部)により撮像を行うことで撮像光として得られる画像を信号化した画像信号を得るようにされる。そして、この撮像部1により得られた画像信号を、後段の画像信号処理部2により所定の信号処理を施したうえで、例えばその画像信号を記憶媒体に記録し、また表示部35により画像として表示させることができるようになっている。
フォーカスレンズ11bも、光学系部11において光軸方向に沿って移動可能に設けられる。フォーカスレンズ11b位置が移動されることにより、光学系部11により得られる撮像光の焦点状態が調整され、例えば被写体像についての合焦状態を得ることができる。
絞り11cは、光学系部11にて得られる撮像光の光量を調整するための機構部位とされる。
例えば光学系駆動部16におけるズームレンズ11aを駆動するための機構としては、モータや各種ギアなどにより形成され、カメラ制御部17から出力されるズームレンズ駆動用の信号により上記モータが回転駆動される。このモータの回転に応じて、ズームレンズ11aは光軸方向に沿って移動するようにされる。
また、フォーカスレンズ11bを駆動するための部位も、例えばモータ、各種ギアなどを有して形成され、同じくカメラ制御部17から出力されるフォーカスレンズ移動用の駆動信号によりモータが回転駆動されることで、フォーカスレンズ11bを移動させるように動作する。
また、絞り11cを駆動するための部位も同様にして、モータ、各種ギアなどから成り、カメラ制御部17の制御に応じて絞り11cの状態を可変するように動作する。
カメラ信号処理部14では、A/Dコンバータ13から入力される信号について所定の処理を施して、最終的には、後段の画像信号処理部2における信号処理に適合した所定形式のデジタル画像信号(映像信号)を生成して出力するようにされる。
AF検知部15aは、オートフォーカス制御(AF)のための制御値の元となる情報を得る。オートフォーカス制御とは、手動のレンズ操作によらず、自動的に合焦状態が得られるように制御することである。例えばオートフォーカス制御方式としては、コントラスト方式と測距方式とが知られている。一例としてコントラスト方式を採用することとすれば、AF検知部15aは、カメラ信号処理部14から画像信号を取り込み、この画像信号を画像として表示させた場合の所定領域に対応する信号部分の輝度レベル差(コントラスト)を検出してカメラ制御部17に出力する。カメラ制御部17は、例えば入力される輝度レベル差の値に基づいて、オートフォーカス制御のための制御値を生成し、光学系駆動部16に出力するようにされる。光学系駆動部16では、入力された制御値に応じて、前述のようにしてフォーカスレンズ11bを移動させるようにして駆動する。このようにしてオートフォーカス制御が実行される。なお、測距方式の場合には、例えばAF検知部15aによる輝度レベル差の検出に代えて、測距センサなどにより取得した被写体までの距離の情報を、オートフォーカス制御のための情報としてカメラ制御部17に対して入力させるようにする。
なお、カメラ部1における上記オートフォーカス制御、自動露出制御、及び自動ホワイトバランス制御などのカメラ制御のための構成はあくまでも一例であり、他の手法、構成が採られても良いものである。
加速度センサ18によっては、実施の形態のビデオカメラ装置本体についての重力方向を基準とした傾き、姿勢状態の変化が検出される。手振れ検出部19では、加速度センサ18の検出出力を利用して、検出された姿勢状態の変化に応じて生じるとされる撮像画像の揺れを示す情報ととして、例えば撮像画像についての水平及び垂直方向の移動量を求め、カメラ信号処理部14に出力するようにされる。カメラ信号処理部14は、入力された情報に基づいて、画像信号として得られる撮像画像についての水平及び垂直方向の振れをキャンセルするための所要の処理を実行する。例えばカメラ信号処理部14の内部のフレームメモリにおいて保持しているとされるフレーム画像分のデータについての水平方向及び垂直方向の読み出し位置(あるいは書込位置)を変更するようにされる。このようにして、フレームメモリに対する読み出し又は書き込みが行われたフレーム画像分の画像信号データを後段の画像信号処理部2に出力することで、記憶媒体に記憶される画像信号の画像、あるいは、表示部35に表示される画像などとしては、いわゆる手振れ補正が行われた状態のものを得ることができる。また、このような手振れ補正のための構成も、上記しているものに限定されるものではなく、例えば物理的にレンズの光軸を変更するような制御方式を採ることも可能とされる。
本実施の形態のビデオカメラ装置により撮像画像を記録するのにあたっては、例えばユーザ操作などに応じて、記録される画像の解像度を変更設定することが可能とされている。画サイズ変換処理部43は、例えば上記したユーザ操作による画サイズ設定に基づいたシステム制御部33の制御に応じて、入力された画像信号としての画サイズ(解像度)を変換するための処理を実行し、顔画像検出処理部44に出力する。
なお、顔画像検出部44により、どのようにして顔画像検出を行うのかについては後述する。
画像加工部45では、入力された画像信号のデータを対象として、撮像画像についての加工編集のための所要の各種信号処理を実行するようにされる。この画像加工部45において実行可能な撮像画像の加工編集処理としては、例えば、本来はフルカラーにより撮像された画像をモノクロームやセピア色に変換する処理であるとか、モザイクやぼかしなどを施す処理などを挙げることができる。このような加工編集は、例えばユーザにより行われた加工編集のための操作に応じて、システム制御部33が画像加工部45に対する制御を実行することで得られるものである。従って、例えば特に加工編集の指示操作が行われていない場合には、画像加工部45は、入力された画像信号データについて処理を施すことなく、そのまま出力するようにされる。
この場合においては、上記合成処理部46から出力される画像信号データが、画像加工処理部21からの出力となる。
画像加工処理部21から出力された画像信号データは、画像圧縮処理部22、及び圧縮制御処理部23により、圧縮符号化される。
圧縮制御処理部23は、例えば画像圧縮処理部22に対してデータレート(圧縮率)などをはじめとした、所定のパラメータを設定する。画像圧縮処理部22は、設定されたパラメータぬ従って所定の方式に従って圧縮符号化のための信号処理を実行する。
なお、ここでの圧縮符号化の方式については特に限定されるものではなく、例えば現状であれば、MPEG方式によるものの他、H.264などを挙げることができる。
メディアドライブ31は、所定の記憶媒体に対応してデータの書き込み、読み出しが可能に構成されたドライブとされ、上記のようにして画像圧縮処理部22から転送されてくる画像データを、ドライブ制御部32の制御に応じて記憶媒体に対して書き込んで記憶させる。このようにして記憶された画像データは、例えばドライブ制御部32が備えるファイルシステム機能により、ファイル単位により管理されるようになっている。
また、ここではその構成を図示してはいないが、本実施の形態のビデオカメラ装置では、記憶媒体に記憶されている画像データをメディアドライブ31により読み出して、例えばシステム制御部33の制御によって、表示部35にて画像として表示されるように再生出力させることができる。
先に本出願人は、画像信号における輝度信号成分を利用した顔画像検出のための構成を提案しており、本実施の形態の画像加工処理部21としても、この輝度信号に基づいた顔画像検出の手法を採用する。なお、以降において、本実施の形態が採用するこの顔画像検出については、「輝度信号対象顔画像検出」ともいうことにする。
従って、輝度信号対象顔画像検出としては、例えば画像信号に基づいて得られる画像を対象として、人物の顔に対応した特徴の輝度分布パターンが存在するか否かを検出すればよい、ということになる。
図3は、実施の形態のビデオカメラ装置により撮像して得られたフレーム画像内容の例として、人物A、人物Bの二人が撮像されたものが示されている。ここでは、人物Aの顔が画像中央において比較的大きな面積を占める状態となっているのに対して、人物Bは、撮像位置に対して人物Aよりも後方に居たことで、画像内においては、例えば左隅において相応に小さく存在する状態となっている。また、この場合においては、人物A,Bともに、ほぼ正面を向いた状態で撮影されている。
このフレーム画像を対象として輝度信号対象顔画像検出を行ったとする。つまり、このフレーム画像から、人物の顔に該当するとされる輝度分布パターンを検出する処理を行ったとすると、人物Aと人物Bのそれぞれの顔の部分が、上記「人物の顔に該当するとされる輝度分布パターン」を持つ画像部分領域であるとして検出されることになる。つまり、顔画像としての画像領域部分が検出される。すると、本実施の形態としては、この顔画像としての領域部分を含んで、水平/垂直方向に沿った四辺により形成される正方形の画像領域部分を設定し、これを顔画像領域として扱うようにされる。図3の場合であれば、図示しているように、人物Aの顔画像部分を含む顔画像領域AR1と、人物Bの顔画像部分を含む顔画像領域AR2とが得られることになる。
なお、座標情報としては、顔画像領域における或る所定の一点が設定されればよく、上記のように左上の頂角の位置に限定されるものではない。例えば、他の頂角の位置とされてもよいし、あるいは顔画像領域としての方形の対角線の交点、所定の一辺の中点など、他にも考えられるものである。サイズ情報(size)も同様であり、これが直接的に示す値は、上記正方形の一辺の長さの他に、対角線の長さなどとされてもよい。
さらに、顔画像領域としては、例えば縦長、横長の長方形や、円形、楕円形など、正方形以外の形状が設定されてもよい。このようにして正方形以外の形状であっても、或る所定の座標位置と、所要数のサイズ情報などにより、その位置・サイズを特定できる。
画像加工処理部21内の顔画像検出部44は、この図に示す手順を実行するように構成されることになる。また、顔画像検出部44は、顔画像検出のために、画サイズ変換処理部43から入力される画像信号データを、輝度信号成分のみから成るフレーム画像データ(輝度フレーム画像データ)に変換して逐次保持するようにされる。そして、図4に示される手順としては、1つの輝度フレーム画像データから、1つの顔画像領域を検出するためのものとなる。つまり、図4の手順は、フレームごとに、顔画像領域とされる画像領域部分の数に応じた回数分実行されるものとなる。
また、顔画像検出部44は、顔画像パターンテーブルを記憶保持しているものとされる。顔画像パターンテーブルとは、人物の顔が表現される画像領域部分の二次元的な輝度の分布パターンのデータ(顔画像パターンデータ)として、異なるパターンを有するものを所定数保持するようにしたものである。これら複数の顔画像パターンデータは、例えば顔の個人差、撮影時の露出等の撮影条件をはじめとして生じる顔画像の輝度分布パターンのバリエーションをできるだけ網羅しようとするものである。従って、これらの顔画像パターンデータとフレーム画像内の輝度分布パターンとを比較することにより、顔画像検出結果として、より高い信頼性が得られることになる。
つまり、先ずは、輝度フレーム画像データの輝度分布と、顔画像パターンテーブルに登録されている顔画像パターンデータとを比較していき、顔画像パターンデータの輝度分布パターンに対して一定以上の近似率を有するとされる輝度フレーム画像データ内の画像領域を検出する。そして、このような画像領域が検出されたのであれば、その検出された画像領域を含む正方形の領域を、顔画像領域として設定する。
なお、輝度フレーム画像データの内容によっては、顔画像領域が全く検出されない場合がある。また、フレーム画像内に顔画像領域が存在しているとしても、図4の手順を繰り返し実行しているうちに、最終的にはそのフレーム画像内の顔画像領域は全て検出が完了して、未検出となっている顔画像領域が無くなることになる。ステップS101の結果として、このような状態となって、顔画像領域が検出されなくなった場合には、図4に示される以降のステップS102〜105の手順を実行することなく、次のフレームのタイミングで、ステップS101の手順を実行するようにされる。
先ず1つには、人の皮膚の色(顔の肌の色)は、例えば人種や日焼けの度合いなどに応じて必ずしも肌色として定めた色範囲には収まらない場合があり、この点で、肌色検出に基づいた顔画像検出では、検出漏れが生じる可能性がある。これに対して、人物の顔の輝度分布パターンについてみれば、人種等に応じた肌の色の違いに関わらず、ほぼ共通となる。したがって、本実施の形態におけるような輝度分布パターンに基づく顔画像検出は、肌の色の相違にかかわらず、高い精度で顔画像を検出することができることになる。
また、単純な肌色検出では、肌色として定めた色範囲の画像領域については特に区別することなく顔画像であると認識することになる。つまり、顔以外であっても、肌色としての色範囲に該当するものは顔画像として検出してしまう。これに対して輝度分布パターンに基づく顔画像検出であれば、色に関する検出は行わないので、このような誤検出の可能性は排除される。
また、例えば或る程度のサイズの人物の顔であっても、正面を向いておらず、横顔で撮影されたようなものについては、重要性のある被写体としては扱わないようにするという設定も考えられる。このような場合、肌色検出では、正面、横顔であるにかかわらず、顔画像として検出されることになってしまう。これに対して、輝度分布パターンに基づく顔画像検出であれば、正面と横顔の輝度分布パターンは、明確に相違してくることから、的確に正面と横顔を区別して顔画像検出が行えることにもなる。もちろん、輝度分布パターンに基づく顔画像検出として、横顔も顔画像として検出したければ、人の顔の横顔に対応する顔画像パターンデータを用意して、例えばステップS101としての処理を実行すればよい。
先の説明からも理解されるように、顔画像検出情報は、対応する顔画像領域の位置・サイズを特定する座標情報[P(x、y)]、サイズ情報(size)の情報を有している。そこで、ステップS204としては、例えば先ず、顔画像検出情報1が示す座標情報[P(x、y)]、サイズ情報(size)により特定されるフレーム画像内の画像領域(顔画像領域)の情報量1を得るようにされる。ここでの「情報量」とは、例えば顔画像検出情報により指定される顔画像領域を形成するマクロブロックの集合単位についての、圧縮符号化処理後のデータ量に相当する。
このような顔画像領域の情報量を得るためには、例えば、図1の構成のもとであれば、画像加工処理部21における所定の処理段階を経た画像信号データ(フレーム画像データ)をシステム制御部33が取り込み、顔画像検出情報が示す座標情報[P(x、y)]、サイズ情報(size)により指定される顔画像領域としての画像部分についての、高域成分量(アクティビティ)を求めるようにされる。このアクティビティ量は、圧縮符号化処理後のデータ量と相関関係を持っており、アクティビティ量が増加するのに応じて、圧縮符号化処理後のデータ量も所定の関数にしたがった増加を示す。したがって、取得した圧縮符号化処理前の信号のアクティビティ量を利用して所定の関数を用いた演算を行うことで、圧縮符号化処理後のデータ量、すなわち「情報量」が求められることになる。ステップS204は、このような処理を顔画像検出情報1〜nごとに実行し、顔画像検出情報1〜nのそれぞれに対応する情報量A1〜Anを取得するようにされる。
ここで、ステップS205にて得られた評価値に基づいて、画像補正の要/不要の判定が可能となることについての根拠は、例えば下記のようになる。
評価値の元となる情報量は、先にも述べたように、圧縮符号化処理前における画像信号の高域成分であるアクティビティ量に対応するが、アクティビティ量が多い画像状態としては、例えばそれだけ、コントラストがはっきりしていてぼけが少ないということがいえる。また、露出オーバーによる白飛び、あるいは逆光、露出アンダーなどにより画像が黒くつぶれる傾向が少なくなっている、ということがいえる。つまり、アクティビティ量が多いほど、画質(画像品位)としては良好であるという考え方をとることができる。したがって、アクティビティ量を基として生成されるものとしてみることのできる評価値は、対応するフレーム画像における顔画像部分の画質の程度を示している、ということになる。そこで、例えば画質の良好性に基づいて設定した水準値と評価値とを比較することで、画像補正の必要性の判定が行えることになるものである。つまり、例えば評価値が水準値を上回れば、画質は良好として判断して良く、画像補正は必要ない、ということになる。一方、評価値が水準値を下回れば、画質は良好ではないと判断できるので、画像補正が必要である、ということになる。
これに対して、ステップS206における評価値判定の結果として、画像補正が必要であるとの判断結果が得られた場合には、ステップS207以降の画像補正のための手順を実行することになる。
なお、このステップS207以降の手順により行われる画像補正の手順はあくまでも一例であり、ほかにも考えることができるものである。
そして、ステップS207においては、先のステップS203により取り込んで取得した顔画像検出情報1〜nのサイズ情報(size)を利用して、領域サイズが最も大きな顔画像領域に対応する顔画像検出情報を選択する。この顔画像検出情報が示す顔画像領域における顔のサイズは、同じフレーム画像内にあるとされる他の顔画像領域の顔のサイズよりも大きいということになる。ここでは、フレーム画像内における顔のサイズが大きいほど主要な被写体であるという考え方をとることとして、ステップS207により選択された顔画像検出情報については、最も主要な被写体(顔画像領域)に対応した「主顔画像検出情報」として扱うようにされる。
この指示に応じた自動露出制御として、カメラ制御部17は、例えば画像全体の輝度情報とともに、主顔画像検出情報が示す顔画像領域の輝度情報をカメラ信号処理部14から取得して、これらの輝度情報を利用して、画像全体としてだけではなく、顔画像領域についても良好とされる露出状態が得られるようにして露出制御を実行する。このとき、例えば撮影モードが通常モードであるような場合には、画像全体の輝度情報と、主顔画像検出情報が示す顔画像領域の輝度情報とを同等に評価して最適とされる輝度が得られるように露出制御を行うようにされる。これに対して、例えばいわゆるポートレートモードなどといわれるように、人物を被写体として想定するような撮影モードであれば、画像全体の輝度情報に対して、主顔画像検出情報が示す顔画像領域の輝度情報を優先させる(例えば優先度に応じた重み付け係数を与える)ようにして、露出制御を行うようにする。また、例えば、主顔画像検出情報が示す顔画像領域のサイズ、位置などに応じて、重み付け係数を変化させるようにすることも考えられる。
ホワイトバランスについても、例えば、上記自動露出制御の補正と同様にして、画像全体としての色バランスの情報とともに、主顔画像検出情報が示す顔画像領域の色バランスの情報をカメラ信号処理部14から取得したうえで、これらの色バランスの情報を利用して、画像全体としてだけはなく、顔画像領域についても良好とされるホワイトバランスが得られるようにして制御を実行する。
先ず、ステップS210においては、顔画像検出情報の番号を示す変数m(1≦m≦n)に対して、初期値として1を代入しておくようにされる。そして、次のステップS211により、少なくとも顔画像検出情報mに対応する画像領域の情報量Amに基づいて、顔画像検出情報mが示す顔画像領域についての圧縮符号化処理を制御する。ここでの圧縮符号化処理についての制御としては、システム制御部33がQスケールといわれる制御値を設定し、この設定したQスケールにより顔画像検出情報mが示す顔画像領域の圧縮符号化が行われるようにして、圧縮制御処理部23に指示を行うようにされる。なお、Qスケールは、周知のようにして、MPEG方式などでも知られているように、圧縮率を決定する値である。画質と圧縮率との関係であるが、画質は、圧縮率が高くなるのに応じて劣化し、低くなるのに応じて向上する。従って、ステップS211においては、例えば顔画像検出情報mに対応する画像領域の情報量Amから、その画像領域の画質を推定したうえで、この画質が一定以上の水準に向上されるまでに圧縮率が低くなるようにしてQスケールを可変設定するようにされる。
そこで、1回のステップS211の手順を終了させた後は、ステップS212により、変数mについて、m=nが成立しているか否かについて判別する。変数nは、ステップS203により示したように、取り込みを行った顔画像検出情報の数を示す。従って、m=nが成立していない場合には、顔画像検出情報が示す顔画像領域のうちで、未だ、圧縮処理制御(Qスケール設定)を行っていない顔画像領域が残っている、ということになる。この場合には、ステップS213により変数mについて1インクリメントしたうえで、ステップS211の手順を行う。つまり、未処理の顔画像領域における1つの顔画像領域についての圧縮処理制御(Qスケール設定)を実行する。
そして、ステップS211を、顔画像検出情報1〜nに対応する顔画像領域の数だけ実行したとされると、ステップS212において肯定の判別結果が得られることとなって、ステップS204に戻るようにされる。
ここでステップS204に戻り、ステップS206に至ることで、これまでのステップS207〜S213までの画像補正により、撮像画像の画質が水準以上にまで向上されたか否かが判定されることになる。そして、ステップS206により画像補正が不要である(撮像画像の画質が水準以上にまで向上した)と判定された場合には、この処理ルーチンを抜けたうえでステップS201に戻るようにされるが、画像補正が必要である(撮像画像の画質が水準以上にまで向上していない)と判定された場合には、再度、ステップS207からの画像補正を行うようにされる。なお、例えば撮像条件などにより、元々の撮像画像の質が良好でなく、ステップS207からの画像補正を行っても、画質の向上が見込めないような場合もあると考えられるので、例えばこの図では示していないが、ステップS207以降の画像補正の繰り返し回数を制限して、制限回数まで画像補正を繰り返した場合には、この処理を抜けるようにすることが好ましい。
これにより、例えばカメラ部1の動作のみに限定して制御を行う場合よりも、より良好な画像補正の結果を得ることが可能になる。
また、これとともに、本実施の形態では、顔画像検出についても、カメラ部1側ではなく、画像信号処理部2側において実行させるようにしている。これにより、画像信号処理部2において顔画像検出に応じた画像補正のための信号処理を実行させるのにあたり、その設計などが容易化されるなどの効果も期待できる。
例えば、実施の形態としては、ビデオカメラ装置により動画としての画像を撮影、記録などしている場合を前提に説明しているが、写真に相当する静止画としての撮像画像を記録するような場合にも適用できるものである。
また、例えば図5による説明では、撮像により得られる画像(顔画像領域)の品位を向上させるための制御(撮像制御)として、フォーカス制御、露出補正、ホワイトバランス補正、及び圧縮符号化にあたっての圧縮率変更を挙げているが、まず、これら全ての動作を実行させる必要はなく、例えば、本願発明に基づいては、画像信号処理部2側にて実行される圧縮率変更のみがおこなわれればよく、そのうえで、任意の補正のための制御項目を、任意の組み合わせにより行えるように構成すればよい。また、画像補正のための動作としても、図5により挙げたもの以外に考えられるものである。
また、実施の形態では、画像補正の対象を人物の顔の画像としたことに応じて、顔画像を検出することとしているが、例えば画像補正の対象となる被写体は、例えば、何らかの画像的な特徴に基づいて撮像画像から検出可能なのであれば、人物の顔以外の特定のものとされてもよい。さらに、顔画像検出の手法としては、輝度分布パターンに基づくものに限定されることなく、他のこれまでに知られている手法、将来的に実現可能となる手法などが採用されてよいものである。
Claims (5)
- 撮像により画像信号を取得する撮像部と、
上記撮像部にて取得された画像信号について、所定の利用目的に応じた処理を施す画像信号処理部と、
上記撮像部又は上記画像信号処理部に備えられ、上記画像信号に基づいて、この画像信号を再生表示させて得られるとされる画像において特定種類の被写体が存在する画像領域部分である、特定被写体画像領域を検出する検出手段と、
上記検出手段により検出される特定被写体画像領域を表示させたとする場合の画像品位を評価する評価手段と、
上記評価手段により、一定以上に良好な画質品位が得られたとされる評価結果が得られるようにするための制御を行うもので、少なくとも、上記画像信号処理部における所定の信号処理動作についての制御を行う制御手段と、
を備えることを特徴とする撮像装置。 - 上記検出手段は、上記特定種類の被写体として人の顔が存在する特定被写体画像領域を検出するようにされ、このために、人の顔が画像として表示されるときに得られるとされる画像内の輝度の分布パターンを検出するようにされている、
ことを特徴とする請求項1に記載の撮像装置。 - 上記制御手段は、
上記画像信号処理部における所定の信号処理動作についての制御として、上記画像信号を圧縮符号化するときの、上記特定被写体画像領域に対応する画像信号についての圧縮率を可変するようにされている、
ことを特徴とする請求項1に記載の撮像装置。 - 上記制御手段は、
上記評価手段により、所定以上に良好な画質品位が得られたとされる評価結果が得られるようにして、上記撮像部における所定の制御対象も制御するようにされている、
ことを特徴とする請求項1に記載の撮像装置。 - 撮像により画像信号を取得する撮像部と、この撮像部にて取得された画像信号について、所定の利用目的に応じた処理を施す画像信号処理部とを有して成る撮像装置における撮像制御方法において、
上記撮像部にて得られる画像信号、又は上記画像信号処理部における所定の処理段階において得られる画像信号に基づいて、この画像信号を再生表示させて得られるとされる画像において特定種類の被写体が存在する画像領域部分である、特定被写体画像領域を検出する検出手順と、
上記検出手順により検出される特定被写体画像領域を表示させたとする場合の画像品位を評価する評価手順と、
上記評価手順により、一定以上に良好な画質品位が得られたとされる評価結果が得られるようにするための制御を行う手順であり、少なくとも、上記画像信号処理部における所定の信号処理動作についての制御を行う制御手順と、
を実行することを特徴とする撮像制御方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006151890A JP2007324856A (ja) | 2006-05-31 | 2006-05-31 | 撮像装置、撮像制御方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006151890A JP2007324856A (ja) | 2006-05-31 | 2006-05-31 | 撮像装置、撮像制御方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2007324856A true JP2007324856A (ja) | 2007-12-13 |
Family
ID=38857273
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006151890A Pending JP2007324856A (ja) | 2006-05-31 | 2006-05-31 | 撮像装置、撮像制御方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2007324856A (ja) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009284270A (ja) * | 2008-05-22 | 2009-12-03 | Sony Corp | 画像処理装置、撮像装置、画像処理方法、およびプログラム |
JP2009290822A (ja) * | 2008-06-02 | 2009-12-10 | Ricoh Co Ltd | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
JP2010045457A (ja) * | 2008-08-08 | 2010-02-25 | Canon Inc | 画像処理装置および画像処理方法 |
JP2010183461A (ja) * | 2009-02-06 | 2010-08-19 | Canon Inc | 撮像装置およびその制御方法 |
JP2010183460A (ja) * | 2009-02-06 | 2010-08-19 | Canon Inc | 撮像装置およびその制御方法 |
US20110304746A1 (en) * | 2009-03-02 | 2011-12-15 | Panasonic Corporation | Image capturing device, operator monitoring device, method for measuring distance to face, and program |
JP2014187722A (ja) * | 2014-07-11 | 2014-10-02 | Canon Inc | 撮像装置およびその制御方法 |
JP5674670B2 (ja) * | 2010-03-18 | 2015-02-25 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | データ処理装置およびデータ処理方法 |
US9007486B2 (en) | 2009-02-06 | 2015-04-14 | Canon Kabushiki Kaisha | Image capturing apparatus and control method thereof |
US9077905B2 (en) | 2009-02-06 | 2015-07-07 | Canon Kabushiki Kaisha | Image capturing apparatus and control method thereof |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000137788A (ja) * | 1998-10-29 | 2000-05-16 | Fuji Photo Film Co Ltd | 画像処理方法、画像処理装置及び記録媒体 |
JP2000232638A (ja) * | 1999-02-09 | 2000-08-22 | Toshiba Corp | 画像情報を評価する人物監視システム |
JP2001145101A (ja) * | 1999-11-12 | 2001-05-25 | Mega Chips Corp | 人物画像圧縮装置 |
JP2001264621A (ja) * | 2000-03-15 | 2001-09-26 | Olympus Optical Co Ltd | 測距装置 |
JP2005318554A (ja) * | 2004-04-01 | 2005-11-10 | Canon Inc | 撮影装置及びその制御方法及びプログラム及び記憶媒体 |
-
2006
- 2006-05-31 JP JP2006151890A patent/JP2007324856A/ja active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000137788A (ja) * | 1998-10-29 | 2000-05-16 | Fuji Photo Film Co Ltd | 画像処理方法、画像処理装置及び記録媒体 |
JP2000232638A (ja) * | 1999-02-09 | 2000-08-22 | Toshiba Corp | 画像情報を評価する人物監視システム |
JP2001145101A (ja) * | 1999-11-12 | 2001-05-25 | Mega Chips Corp | 人物画像圧縮装置 |
JP2001264621A (ja) * | 2000-03-15 | 2001-09-26 | Olympus Optical Co Ltd | 測距装置 |
JP2005318554A (ja) * | 2004-04-01 | 2005-11-10 | Canon Inc | 撮影装置及びその制御方法及びプログラム及び記憶媒体 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009284270A (ja) * | 2008-05-22 | 2009-12-03 | Sony Corp | 画像処理装置、撮像装置、画像処理方法、およびプログラム |
JP2009290822A (ja) * | 2008-06-02 | 2009-12-10 | Ricoh Co Ltd | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
JP2010045457A (ja) * | 2008-08-08 | 2010-02-25 | Canon Inc | 画像処理装置および画像処理方法 |
JP2010183461A (ja) * | 2009-02-06 | 2010-08-19 | Canon Inc | 撮像装置およびその制御方法 |
JP2010183460A (ja) * | 2009-02-06 | 2010-08-19 | Canon Inc | 撮像装置およびその制御方法 |
US9007486B2 (en) | 2009-02-06 | 2015-04-14 | Canon Kabushiki Kaisha | Image capturing apparatus and control method thereof |
US9077905B2 (en) | 2009-02-06 | 2015-07-07 | Canon Kabushiki Kaisha | Image capturing apparatus and control method thereof |
US20110304746A1 (en) * | 2009-03-02 | 2011-12-15 | Panasonic Corporation | Image capturing device, operator monitoring device, method for measuring distance to face, and program |
JP5674670B2 (ja) * | 2010-03-18 | 2015-02-25 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | データ処理装置およびデータ処理方法 |
US9113173B2 (en) | 2010-03-18 | 2015-08-18 | Panasonic Intellectual Property Corporation Of America | Data processing device and data processing method which compresses image data |
JP2014187722A (ja) * | 2014-07-11 | 2014-10-02 | Canon Inc | 撮像装置およびその制御方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102293443B1 (ko) | 듀얼 카메라를 이용한 이미지 처리 방법 및 이동 단말기 | |
JP6935587B2 (ja) | 画像処理のための方法および装置 | |
US9800772B2 (en) | Focus adjustment device and focus adjustment method that detects spatial frequency of a captured image | |
RU2562918C2 (ru) | Устройство для съемки изображения, система для съемки изображения и способ управления устройством для съемки изображения | |
US20080112644A1 (en) | Imaging device | |
JP2007324856A (ja) | 撮像装置、撮像制御方法 | |
JP5347707B2 (ja) | 撮像装置および撮像方法 | |
JP6460653B2 (ja) | 画像処理装置、それを備えた撮像装置、画像処理方法、及び画像処理プログラム | |
EP2549763A2 (en) | Dual image capture processing | |
JP5643563B2 (ja) | 画像処理装置及びその制御方法 | |
JP2007124398A (ja) | 撮影装置 | |
JP2000341577A (ja) | 手振れ補正装置およびその補正方法 | |
JP2010147786A (ja) | 撮像装置及び画像処理方法 | |
US20130329088A1 (en) | Image enhancements through multi-image processing | |
JP2006245999A (ja) | 撮像装置、およびプログラム | |
JP4761048B2 (ja) | 撮像装置及びそのプログラム | |
KR20120071972A (ko) | 사용자가 원하는 시점의 정지 영상을 획득할 수 있는 디지털 영상 신호 처리 장치 및 이의 제어 방법 | |
US8040429B2 (en) | Electronic apparatus having autofocus camera function | |
JP2008108024A (ja) | 画像処理装置および撮像装置 | |
JP2011239267A (ja) | 撮像装置及び画像処理装置 | |
KR101630307B1 (ko) | 디지털 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 저장매체 | |
JP4888829B2 (ja) | 動画処理装置、動画撮影装置および動画撮影プログラム | |
JP5179859B2 (ja) | 撮像装置及び撮像方法 | |
JP4969349B2 (ja) | 撮像装置及び撮像方法 | |
JP2015080157A (ja) | 画像処理装置、画像処理方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090408 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20101110 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110107 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110308 |