JP2006201531A - Imaging device - Google Patents
Imaging device Download PDFInfo
- Publication number
- JP2006201531A JP2006201531A JP2005013583A JP2005013583A JP2006201531A JP 2006201531 A JP2006201531 A JP 2006201531A JP 2005013583 A JP2005013583 A JP 2005013583A JP 2005013583 A JP2005013583 A JP 2005013583A JP 2006201531 A JP2006201531 A JP 2006201531A
- Authority
- JP
- Japan
- Prior art keywords
- image
- person
- state
- condition
- digital camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、撮影待機状態において被写体の状態を示す画像を表示する撮像装置に関する。 The present invention relates to an imaging apparatus that displays an image indicating the state of a subject in a shooting standby state.
ユーザからの撮影指示前の撮影待機状態において、被写体の状態を示す画像を表示するライブビュー表示可能な撮像装置においては、ライブビュー表示を行う表示手段が構図（画像として取得される領域）の決定に利用される。このため、このような撮像装置を利用する撮影者は、表示手段の画面を参照しつつ撮影指示を行うことが一般的となっている。 In an imaging apparatus capable of live view display that displays an image indicating the state of a subject in a shooting standby state before a shooting instruction from a user, the display unit that performs live view display determines the composition (area acquired as an image). Used for For this reason, it is common for a photographer who uses such an imaging apparatus to give a shooting instruction while referring to the screen of the display means.
ところで、集合写真などの複数の人物の撮影を行う際には、被写体となる複数の人物の全員の視線が、撮影時点において撮像装置に向いていることが望ましい。したがって、撮影者は、複数の人物の視線の状態を把握しつつ撮影を行う必要があるが、通常、このような視線の把握は困難かつ煩雑である。特に、表示手段を構図の決定に利用する場合においては、撮像装置が備えるような表示手段の比較的小さな画面では、構図内に存在する人物の視線の状態を把握することは非常に困難である。 By the way, when shooting a plurality of persons such as a group photo, it is desirable that the lines of sight of all of the plurality of persons serving as subjects are directed to the imaging device at the time of shooting. Therefore, the photographer needs to take an image while grasping the line-of-sight states of a plurality of persons. Usually, such line-of-sight is difficult and complicated. In particular, when the display means is used for determining the composition, it is very difficult to grasp the state of the line of sight of the person existing in the composition on the relatively small screen of the display means provided in the imaging apparatus. .
このため、近年、撮影待機状態において予備的に撮影して得られる画像に基づいて、構図内の人物の視線の向きを自動判別し、構図内の全員の視線が撮像装置に向いているときのみ撮影を実行する撮像装置などが提案されている（例えば、特許文献１参照。）。 For this reason, in recent years, the direction of the line of sight of the person in the composition is automatically determined based on an image obtained by preliminary shooting in the shooting standby state, and only when the line of sight of all the members in the composition is directed to the imaging device. An imaging device that performs imaging has been proposed (see, for example, Patent Document 1).
なお、本発明に関連する技術を開示する先行技術文献として、下記の文献がある。 As prior art documents disclosing techniques related to the present invention, there are the following documents.
ところで、撮影者が被写体として意図した人物以外の他の人物が構図内に入り込むような状況などにおいては、構図内に存在する複数の人物のうちの特定の人物（この場合は、撮影者が被写体として意図した人物）のみについての視線の状態を明確に把握したい場面が生じる。しかしながら、上記特許文献１に示すような撮像装置を用いたとしても、構図内に存在する複数の人物のうち、いずれの人物の視線が撮像装置に向いており、いずれの人物の視線が撮像装置に向いていないかを撮影者が把握することはできない。
By the way, in a situation where a person other than the person intended by the photographer enters the composition, a specific person (in this case, the photographer is the object of the plurality of persons existing in the composition). There is a situation in which it is desired to clearly grasp the state of the line of sight of only the person who is intended to be. However, even if an imaging apparatus as shown in
本発明は、上記課題に鑑みてなされたものであり、構図内に存在する複数の人物のうちのいずれの人物が所定の状態となっているかを、表示手段の表示により容易に把握できる撮像装置を提供することを目的とする。 The present invention has been made in view of the above problems, and an imaging apparatus that can easily grasp which one of a plurality of persons existing in a composition is in a predetermined state by displaying the display means The purpose is to provide.
上記課題を解決するため、請求項１の発明は、ユーザからの撮影指示の前の撮影待機状態において被写体の状態を示すライブ画像を表示し、前記撮影指示の後に記録用画像を取得する撮像装置であって、前記ライブ画像を取得する撮像手段と、前記ライブ画像に含まれる人物像を抽出する抽出手段と、前記人物像が所定の状態条件を満足するか否かを判定する判定手段と、前記撮影待機状態において、前記状態条件を満足すると判定された人物像を明示しつつ、前記ライブ画像を表示する表示手段と、を備えている。
In order to solve the above-mentioned problem, the invention of
また、請求項２の発明は、請求項１に記載の撮像装置において、前記抽出手段は、前記ライブ画像の一部の対象領域のみから、前記人物像を抽出する。 According to a second aspect of the present invention, in the imaging apparatus according to the first aspect, the extraction means extracts the person image from only a part of the target area of the live image.
また、請求項３の発明は、請求項２に記載の撮像装置において、少なくとも一つの前記対象領域の指定をユーザから受け付ける手段、をさらに備えている。 According to a third aspect of the present invention, the imaging apparatus according to the second aspect further comprises means for receiving designation of at least one target area from a user.
また、請求項４の発明は、請求項１ないし３のいずれかに記載の撮像装置において、前記状態条件の候補となる複数の条件のうちから少なくとも一つを、前記状態条件としてユーザから受け付ける条件受付手段、をさらに備えている。 According to a fourth aspect of the present invention, in the imaging apparatus according to any one of the first to third aspects, a condition for receiving at least one of a plurality of conditions as candidates for the state condition from the user as the state condition Receiving means.
また、請求項５の発明は、請求項４に記載の撮像装置において、前記条件受付手段が、前記状態条件として複数の条件を受け付けたとき、前記判定手段は、前記人物像が前記複数の条件のそれぞれを満足するか否かを判定し、前記表示手段は、前記状態条件に満足すると判定された人物像を、当該人物像が満足する条件に応じた態様で明示する。
Further, the invention of claim 5 is the imaging device according to
また、請求項６の発明は、請求項１ないし５のいずれかに記載の撮像装置において、前記表示手段は、前記状態条件を満足すると判定された人物像を明示する際に、当該人物像の顔領域の周囲を囲む指標を表示する。
The invention according to claim 6 is the imaging apparatus according to any one of
また、請求項７の発明は、請求項１ないし６のいずれかに記載の撮像装置において、前記判定手段による判定結果に基づいて、前記撮影指示を無効化する手段、を備えている。 According to a seventh aspect of the invention, there is provided the imaging apparatus according to any one of the first to sixth aspects, further comprising means for invalidating the photographing instruction based on a determination result by the determination means.
請求項１ないし５の発明によれば、撮影待機状態において、状態条件を満足すると判定された人物像を明示する表示手段の表示により、構図内に存在する人物のうちのいずれの人物が所定の状態となっているかを容易に把握できる。 According to the first to fifth aspects of the present invention, in the photographing standby state, any one of the persons existing in the composition is determined by the display on the display unit that clearly indicates the person image determined to satisfy the state condition. You can easily grasp whether it is in a state.
また、特に請求項２の発明によれば、ライブ画像の一部の対象領域のみが処理対象となるため、処理すべきデータ量を低減できる。 In particular, according to the invention of claim 2, since only a part of the target area of the live image is a processing target, the amount of data to be processed can be reduced.
また、特に請求項３の発明によれば、ユーザが所望する人物像のみに関して判定を行うことができる。 In particular, according to the third aspect of the present invention, it is possible to make a determination only on the person image desired by the user.
また、特に請求項４の発明によれば、ユーザが所望の状態条件を設定できる。
In particular, according to the invention of
また、特に請求項５の発明によれば、いずれの人物像がいずれの条件を満足するかを容易に把握できる。 In particular, according to the invention of claim 5, it is possible to easily grasp which person image satisfies which condition.
また、特に請求項６の発明によれば、状態条件を満足する人物像を明示する際においても、人物像の顔領域の状態を把握できる。 According to the invention of claim 6 in particular, the state of the face area of the person image can be grasped even when the person image satisfying the state condition is clearly indicated.
また、特に請求項７の発明によれば、人物像が所定の状態となるまで、ユーザからの撮影指示を受け付けないようにすることができる。 In particular, according to the seventh aspect of the present invention, it is possible to prevent a user from receiving a photographing instruction until the person image is in a predetermined state.
以下では、本発明の実施の形態に係る撮像装置の一としてデジタルカメラについて説明する。 Hereinafter, a digital camera will be described as an example of the imaging apparatus according to the embodiment of the present invention.
＜１．外観構成＞
図１はデジタルカメラ１を示す斜視図であり、図２はデジタルカメラ１の背面側の構成を示す図である。このデジタルカメラ１は、主に静止画像を取得するデジタルスチルカメラとして構成されている。
<1. Appearance configuration>
FIG. 1 is a perspective view showing the
図１に示すように、デジタルカメラ１の前面側には、フラッシュ３１及び光学ファインダ３２の対物窓、並びに、複数のレンズ群を有する撮影レンズ３が設けられる。また、この撮影レンズ３の後方位置となるデジタルカメラ１の内部の適所には、ＣＣＤなどの撮像センサ２が設けられている。撮像センサ２は、撮影レンズ３に入射して結像される被写体からの反射光を露光（受光）することにより、被写体の画像を取得する。本実施の形態において「撮影」とは、「撮像センサ２による被写体からの反射光の１回の継続的な露光」の意に相当する。
As shown in FIG. 1, on the front side of the
デジタルカメラ１の上面側には、ユーザから撮影指示を受け付けるシャッタボタン３４、及び、電源のオンオフを切り替えるためのメインスイッチ３３が配置されている。デジタルカメラ１の側面部には、記録媒体であるメモリカード９を着脱可能なカードスロット３５が形成される。デジタルカメラ１において取得された画像は、このメモリカード９に記録される。
On the upper surface side of the
また、図２に示すように、デジタルカメラ１の背面側には、光学ファインダ３２の接眼窓、動作モードを切り替えるためのモード切替レバー３６、各種表示を行う液晶モニタ４、並びに、ユーザ操作を受け付けるための十字キー３７、確定ボタン３８及びファンクションボタン群３９（３９ａ〜３９ｄ）が設けられている。
Further, as shown in FIG. 2, on the back side of the
液晶モニタ４は、メモリカード９に記録された画像の表示、及び、各種設定を行うための設定メニューの表示など各種表示を行なう。また、ユーザから撮影指示がなされる前の撮影待機状態においては、液晶モニタ４は、構図内に存在する被写体の状態をほぼリアルタイムに示すライブビュー表示を行う。なお、本実施の形態において「構図」とは、「画像として取得される領域」の意である。これにより液晶モニタ４は、構図の決定（フレーミング）にも利用される。
The
十字キー３７、確定ボタン３８及びファンクションボタン群３９には、デジタルカメラ１の動作モードや動作状態に応じて機能が動的に割り当てられる。十字キー３７は、上下左右の各方向を示す４つのボタンが一体構成されたものであり、主として項目の移動や表示対象とする画像の選択などに利用される。また、確定ボタン３８は、各種の確定指示に利用される。
Functions are dynamically assigned to the
デジタルカメラ１は、「通常撮影モード」と「被写体判定モード」と「再生モード」との３つの動作モードを備えている。これらの動作モードは、モード切替レバー３６をスライドさせることより切り替えられる。このうち「通常撮影モード」及び「被写体判定モード」は、被写体を撮影して記録用画像を取得し、記録用画像をメモリカード９に記録する動作モードである。一方、「再生モード」は、メモリカード９に記録された記録用画像を液晶モニタ４に表示する動作モードである。
The
「通常撮影モード」は、一般的なデジタルカメラの撮影動作を行う動作モードである。デジタルカメラ１は、「通常撮影モード」ではまず、液晶モニタ４においてライブビュー表示を行う撮影待機状態となる。この撮影待機状態において、ユーザによりライブビュー表示が参照されつつ構図が決定される。そして、ユーザから撮影指示がなされると、これに応答して、撮像センサ２により被写体の撮影が行われて記録用画像が取得され、メモリカード９に記録されることになる。
The “normal shooting mode” is an operation mode for performing a shooting operation of a general digital camera. In the “normal shooting mode”, the
一方、「被写体判定モード」は、集合写真などの複数の人物を被写体とする場合を対象とした動作モードである。この「被写体判定モード」においても、上記の「通常撮影モード」と同様にして、まず、ライブビュー表示がなされる撮影待機状態となり、ユーザから撮影指示がなされると記録用画像が取得されてメモリカード９に記録されることになる。ただし、「被写体判定モード」の撮影待機状態においては、ライブビュー表示を行う際に、液晶モニタ４に表示される人物の像（人物像）のうち、視線がデジタルカメラ１に向いていない状態の人物像が画面上で明示されるようになっている。これにより、構図内に被写体として存在する人物のうち、いずれの人物の視線がデジタルカメラ１に向いており、いずれの人物の視線がデジタルカメラ１に向いていないかを、撮影待機状態においてユーザ（撮影者）が把握できるようになっている。
On the other hand, the “subject determination mode” is an operation mode for a case where a plurality of persons such as a group photo are subjects. Also in the “subject determination mode”, in the same way as the “normal shooting mode” described above, first, the camera enters a shooting standby state where live view display is performed. It is recorded on the card 9. However, in the shooting standby state of the “subject determination mode”, the line of sight of the person image (person image) displayed on the liquid crystal monitor 4 when the live view display is performed does not face the
＜２．内部構成＞
図３はデジタルカメラ１の主たる内部構成を示すブロック図である。図に示すように、デジタルカメラ１は、その内部に装置全体を統括的に制御する全体制御部６を備えている。全体制御部６は、マイクロコンピュータを備えて構成され、各種の演算処理を行うＣＰＵ６１、演算の作業領域などに利用されるＲＡＭ６２、制御プログラムやデータ等が記憶されるＲＯＭ６３、及び、計時回路であるタイマ６４を備えている。デジタルカメラ１の各処理部は、この全体制御部６に対して電気的に接続され、全体制御部６の制御下において動作する。
<2. Internal configuration>
FIG. 3 is a block diagram showing the main internal configuration of the
撮影レンズ３を介して撮像センサ２で取得された画像は、デジタルカメラ１の内部の処理部に出力され、所定の処理が施される。デジタルカメラ１は、この画像を取り扱うハードウェアの処理部として、信号処理回路５３、画像メモリ５４及び画像処理部５５を備えている。
An image acquired by the imaging sensor 2 via the photographing
信号処理回路５３は、撮像センサ２から出力されたアナログの電荷信号としての画像に対して信号処理を行うものである。信号処理回路５３は、ＣＤＳ（相関二重サンプリング）回路、ＡＧＣ（オートゲインコントロール）回路、及び、Ａ／Ｄ変換器を有している。撮像センサ２から出力されたアナログの電荷信号は、このような信号処理回路５３の各構成により、ノイズの低減及びレベル調整がなされるともに、デジタル信号へ変換される。デジタル信号へ変換された画像は、信号処理回路５３から出力され、画像を記憶するＤＲＡＭなどの画像メモリ５４に格納される。
The
画像処理部５５は、画像メモリ５４に格納された画像に対して、色補間処理、γ補正処理、解像度変換処理及び圧縮処理等の各種の画像処理を施すものである。このような画像処理部５５の画像処理により、液晶モニタ４への表示に適した形式の画像や、メモリカード９への記録に適した圧縮形式の画像などが生成される。
The
「通常撮影モード」及び「被写体判定モード」の撮影待機状態においてライブビュー表示を行う際には、撮像センサ２において例えば１／３０秒ごとに被写体の撮影がなされ、その時点の構図内の被写体の状態を示す画像（以下、「ライブ画像」という。）が繰り返し取得される。取得されたライブ画像は、信号処理回路５３及び画像処理部５５にて所定の処理が施されて、液晶モニタ４への表示に適した形式とされた後、液晶モニタ４に表示される。この処理は、ライブ画像が取得されるごとになされる。したがって、液晶モニタ４においては、被写体の状態を示すライブ画像が１／３０秒ごとに更新されつつ表示される。これにより、液晶モニタ４においては、構図内の被写体の状態がほぼリアルタイムに表示されることになる。
When performing live view display in the shooting standby state of the “normal shooting mode” and the “subject determination mode”, the imaging sensor 2 captures a subject, for example, every 1/30 seconds, and the subject in the composition at that time is captured. An image indicating the state (hereinafter referred to as “live image”) is repeatedly acquired. The acquired live image is subjected to predetermined processing by the
一方、「通常撮影モード」及び「被写体判定モード」においてユーザから撮影指示がなされたときには、これに応答して、撮像センサ２において撮影がなされて一の記録用画像が取得される。取得された記録用画像は、信号処理回路５３及び画像処理部５５にて所定の処理が施されて、メモリカード９への記録に適した圧縮形式とされた後、メモリカード９に記録されることになる。
On the other hand, when the user gives a shooting instruction in the “normal shooting mode” and the “subject determination mode”, in response to this, shooting is performed by the imaging sensor 2 and one recording image is acquired. The acquired recording image is subjected to predetermined processing by the
カードＩ／Ｆ５６は、カードスロット３５に装着されるメモリカード９への画像の記録や、メモリカード９からの画像の読み出し等を行う。このカードＩ／Ｆ５６は全体制御部６に電気的に接続され、全体制御部６からの信号に基づいて画像の記録や読み出しを行う。また、液晶モニタ４も全体制御部６に電気的に接続され、全体制御部６の制御下において画像の表示や動画像の再生表示などの各種の表示を行う。
The card I /
操作入力部３０は、上述したシャッタボタン３４、モード切替レバー３６、十字キー３７、確定ボタン３８及びファンクションボタン群３９等を含む操作部材をひとつの機能ブロックとして示している。ユーザにより操作入力部３０が操作されると、当該操作に係る処理や制御を示す信号が発生して全体制御部６に入力される。例えば、シャッタボタン３４が押下されると、撮影指示を示す信号が全体制御部６に入力され、これにより、全体制御部６はユーザからの撮影指示を認識する。
The
全体制御部６は、デジタルカメラ１の制御に係る各種の機能を有している。このような機能は、ＲＯＭ６３に記憶される制御プログラムに従ってＣＰＵ６１が演算処理を行うことにより（すなわち、ソフトウェア的に）実現される。制御プログラムは、ＲＯＭ６３内に予め記憶されるものであるが、メモリカード９から読み出すなどにより、新たな制御プログラムをＲＯＭ６３に格納することも可能とされている。図３において、撮像制御部７１、表示制御部７２、人物抽出部７３、及び、人物判定部７４は、このようなソフトウェア的に実現される全体制御部６の機能の一部を模式的に示している。
The overall control unit 6 has various functions related to the control of the
撮像制御部７１は、「通常撮影モード」及び「被写体判定モード」における画像の取得に係る制御を行なう。例えば、撮影待機状態において撮像制御部７１は、ライブビュー表示のために、１／３０秒ごとにライブ画像を取得するように撮像センサ２に指示信号を送出する。 The imaging control unit 71 performs control related to image acquisition in the “normal shooting mode” and the “subject determination mode”. For example, in the shooting standby state, the imaging control unit 71 sends an instruction signal to the imaging sensor 2 so as to acquire a live image every 1/30 seconds for live view display.
また、表示制御部７２は、液晶モニタ４の表示に係る制御を行う。例えば、「通常撮影モード」及び「被写体判定モード」におけるライブビュー表示や、「再生モード」における記録用画像の表示などを液晶モニタ４に行わせる。また、「被写体判定モード」においてライブビュー表示を行う際には、ライブ画像に含まれる人物像のうちで、視線がデジタルカメラ１に向いていない状態の人物像を明示する制御も行う。
Further, the
また、人物抽出部７３は、ライブ画像に含まれる人物像を抽出する機能である。さらに、人物判定部７４は、抽出された人物像が示す人物の視線の向きを判定する機能である。これらの機能の詳細は後述する。
The
＜３．被写体判定モードの基本動作＞
次に、「被写体判定モード」におけるデジタルカメラ１の動作について説明する。図４は、デジタルカメラ１の「被写体判定モード」における基本的な動作の流れを示す図である。
<3. Basic operation of subject determination mode>
Next, the operation of the
前述のように、デジタルカメラ１は「被写体判定モード」に設定されると、まず、ユーザからの撮影指示（シャッタボタン３４の押下）を待機する撮影待機状態となる（ステップＳ２にてＮｏの間）。この撮影待機状態においては、液晶モニタ４において、ライブ画像に含まれる人物像のうちで視線がデジタルカメラ１に向いていない状態の人物像を明示しつつライブビュー表示を行う処理である被写体判定処理がなされる（ステップＳ１）。
As described above, when the
撮影待機状態においてユーザ（撮影者）は、このようなライブビュー表示を利用して、構図、及び、撮影指示を行うタイミングを決定することになる。「被写体判定モード」は集合写真などの複数の人物を被写体とする場合を対象とした動作モードであるため、通常、被写体とすべき複数の人物が含まれるように構図がユーザにより決定される。なお、被写体判定処理の処理結果を有効に利用するためには、構図を決定した後は、三脚などを用いてデジタルカメラ１を固定配置することが望ましい。
In the shooting standby state, the user (photographer) uses such a live view display to determine the composition and timing for giving a shooting instruction. Since the “subject determination mode” is an operation mode for a case where a plurality of persons such as a group photo are subjects, the composition is usually determined by the user so that a plurality of persons to be the subjects are included. In order to effectively use the processing result of the subject determination process, it is desirable that the
そして、ユーザから撮影指示がなされると（ステップＳ２にてＹｅｓ）、これに応答して、撮像制御部７１の制御により、被写体となる複数の人物の撮影が行われ、記録用画像が取得される（ステップＳ３）。取得された記録用画像は圧縮形式とされた後、メモリカード９に記録される（ステップＳ４）。その後、デジタルカメラ１は再び撮影待機状態（ステップＳ１，Ｓ２）に戻ることになる。
Then, when a shooting instruction is issued from the user (Yes in step S2), in response to this, shooting of a plurality of persons as subjects is performed under the control of the imaging control unit 71, and a recording image is acquired. (Step S3). The acquired recording image is converted into a compression format and then recorded on the memory card 9 (step S4). Thereafter, the
＜４．被写体判定処理＞
次に、被写体判定処理（ステップＳ１）について詳細に説明する。前述したように、被写体判定処理は、ライブ画像に含まれる人物像のうちで、視線がデジタルカメラ１に向いていない状態の人物像を、液晶モニタ４において明示する処理となる。
<4. Subject determination processing>
Next, the subject determination process (step S1) will be described in detail. As described above, the subject determination process is a process of clearly showing, on the
例えば、図５に示すライブ画像を処理対象とする場合について想定する。図５に示すライブ画像Ｌｖは、構図内に３名の人物が存在した状態で得られたものであり、３つの人物像Ａｆ，Ｂｆ，Ｃｆが含まれている。図に示すように、これらの人物像Ａｆ，Ｂｆ，Ｃｆのうちで、人物像Ａｆ，Ｂｆの視線はデジタルカメラ１に向いているが、人物像Ｃｆの視線はデジタルカメラ１に向いていない。したがって、図５に示すライブ画像Ｌｖを処理対象として被写体判定処理がなされると、図６に示すように、液晶モニタ４の画面において、人物像ＣｆにフレームＦｒが重畳して表示され、他の人物像Ａｆ，Ｂｆと区別できるように明示されるわけである。以下、この処理の詳細について説明する。
For example, assume that the live image shown in FIG. The live image Lv shown in FIG. 5 is obtained in a state where there are three persons in the composition, and includes three person images Af, Bf, and Cf. As shown in the figure, among these human images Af, Bf, and Cf, the line of sight of the human images Af and Bf is directed to the
図７は、被写体判定処理の詳細な流れを示す図である。まず、撮像センサ２により、その時点の構図内の被写体に係る一のライブ画像が取得され、画像メモリ５４に格納される。この画像メモリ５４に格納されたライブ画像が、被写体判定処理の処理対象となる（ステップＳ１１）。
FIG. 7 is a diagram showing a detailed flow of subject determination processing. First, one live image related to the subject in the composition at that time is acquired by the imaging sensor 2 and stored in the
次に、ライブ画像から人物の顔に相当する顔領域が、人物像（正確には、人物像の一部）として人物抽出部７３により抽出される。例えば、図５に示すライブ画像Ｌｖが処理対象である場合は、３つの人物像Ａｆ，Ｂｆ，Ｃｆ（正確には、その顔領域）が抽出される。人物像の抽出結果は、ライブ画像中における所定の座標系の座標情報として表現される。顔領域を抽出する手法としては、例えば特許文献２に開示されているように、ライブ画像の各画素が示す色相や彩度に基づいて、人物の肌色に近似する領域を顔領域として抽出する手法などが利用できる（ステップＳ１２）。
Next, a face area corresponding to the face of a person is extracted from the live image by the
この処理により人物像が抽出されなかった場合（ステップＳ１３にてＮｏ）は、人物像へのフレームＦｒの重畳表示は不要である。このため、処理対象となったライブ画像が液晶モニタ４にそのまま表示され（ステップＳ１４）、被写体判定処理が終了する。 If a person image is not extracted by this process (No in step S13), it is not necessary to superimpose the frame Fr on the person image. For this reason, the live image to be processed is displayed on the liquid crystal monitor 4 as it is (step S14), and the subject determination process ends.
一方、人物像が抽出された場合（ステップＳ１３にてＹｅｓ）は、次に、抽出された人物像のうちから一の人物像が、その時点において処理対象とすべき人物像（以下、「注目人物像」という。）として決定される（ステップＳ１５）。 On the other hand, if a person image is extracted (Yes in step S13), then one of the extracted person images is a person image to be processed at that time (hereinafter referred to as “attention” It is determined as “person image”) (step S15).
そして、注目人物像の視線（正確には、注目人物像が示す人物の視線）がデジタルカメラ１に向いていないか否かが、人物判定部７４により判定される。換言すれば、注目人物像に関して「視線がデジタルカメラ１に向いていない状態である」という「状態条件」を満足するか否かの判定がなされることになる。このような画像中の人物像の視線の向きの判定には、例えば特許文献２に開示されているように、顔領域から眼領域及び瞳領域をさらに求め、瞳が眼の中のどの位置にあるかに基づいて判定する手法などが利用できる（ステップＳ１６）。
Then, the
このようにして一の注目人物像に関して状態条件を満足するか否かの判定が完了すると、その判定結果がＲＡＭ６２に記憶される。続いて、抽出された人物像のうち、状態条件の判定がなされていない人物像がある場合は（ステップＳ１７にてＹｅｓ）、処理はステップＳ１５に戻り、次の人物像が注目人物像とされて上記と同様にして状態条件を満足するかの判定が行われる。そして、同様の処理が抽出された人物像ごとに繰り返され、最終的に、状態条件を満足するか否かの判定結果が全ての人物像について得られ、その判定結果がＲＡＭ６２に記憶されることになる。
When the determination as to whether or not the state condition is satisfied with respect to one attention person image is completed in this way, the determination result is stored in the
例えば、図５に示すライブ画像Ｌｖが処理対象である場合は、３つの人物像Ａｆ，Ｂｆ，Ｃｆのうち、人物像Ａｆ及び人物像Ｂｆについては状態条件を満足しないという判定結果が得られ、人物像Ｃｆについては状態条件を満足するという判定結果が得られることになる。 For example, when the live image Lv shown in FIG. 5 is a processing target, a determination result that the state condition is not satisfied for the person image Af and the person image Bf among the three person images Af, Bf, and Cf is obtained. For the person image Cf, a determination result that the state condition is satisfied is obtained.
全ての人物像の判定結果が得られると、次に、表示制御部７２の制御により、処理対象となったライブ画像が液晶モニタ４に表示される（ステップＳ１８）。そして、状態条件を満足する人物像が存在した場合には（ステップＳ１９にてＹｅｓ）、表示制御部７２の制御により、図６に示すように、液晶モニタ４の画面において、ライブ画像に含まれる状態条件を満足した人物像に重畳してフレームＦｒが、表示される。
When the determination results of all the human images are obtained, next, the live image to be processed is displayed on the liquid crystal monitor 4 under the control of the display control unit 72 (step S18). If a person image satisfying the state condition exists (Yes in step S19), the
フレームＦｒは、状態条件を満足した人物像の顔領域の周囲を囲むように（顔領域を少なくとも含む領域の外縁に沿って）表示される。このフレームＦｒのサイズ（縦横の幅）及び座標位置は、周囲を囲むべき顔領域のサイズ及び座標位置に基づいて決定される。このように、フレームＦｒが顔領域の周囲を囲むように表示されることで、状態条件を満足した人物像を明示した場合においても、ユーザが当該人物像の顔領域の状態を把握でき、人物像の状態に関してユーザが独自の判断を行うことも可能となる。フレームＦｒとしては、人物像の顔領域の周囲を囲む指標であれば、図６に示す矩形の他、円形、楕円形及び多角形等の形状であってもよく、また、その外縁となる線が繋がってなくてもよい（ステップＳ２０）。 The frame Fr is displayed so as to surround the periphery of the face area of the person image satisfying the state condition (along the outer edge of the area including at least the face area). The size (vertical and horizontal width) and coordinate position of the frame Fr are determined based on the size and coordinate position of the face region to be surrounded. As described above, since the frame Fr is displayed so as to surround the face area, even when a person image satisfying the state condition is clearly indicated, the user can grasp the state of the face area of the person image, and the person It is also possible for the user to make his own judgment regarding the state of the image. As long as the frame Fr is an index surrounding the face area of a human figure, the frame Fr may have a shape such as a circle, an ellipse, or a polygon in addition to the rectangle shown in FIG. May not be connected (step S20).
このようにして、状態条件を満足すると判定された人物像を明示しつつライブ画像が表示されると、一の被写体判定処理が終了する。 In this way, when the live image is displayed while clearly showing the person image determined to satisfy the state condition, one subject determination process is completed.
以上説明した被写体判定処理は、前述のように、撮影待機状態において１／３０秒ごとに繰り返してなされることになる（図４のステップＳ１，Ｓ２）。したがって、液晶モニタ４におけるフレームＦｒの表示状態は、構図内に存在する実際の人物の視線の状態に合わせて刻一刻と変化する。ユーザはこのような液晶モニタ４におけるフレームＦｒの表示を参照することで、その時点において、構図内に存在する人物のうちの、いずれの人物の視線がデジタルカメラ１に向いており、いずれの人物の視線がデジタルカメラ１に向いていないかを容易に把握することができることになる。
The subject determination process described above is repeated every 1/30 seconds in the shooting standby state as described above (steps S1 and S2 in FIG. 4). Therefore, the display state of the frame Fr on the liquid crystal monitor 4 changes every moment according to the state of the line of sight of an actual person existing in the composition. The user refers to the display of the frame Fr on the
例えば、ライブ画像Ｌｖ中の全ての人物像Ａｆ，Ｂｆ，Ｃｆの視線がデジタルカメラ１に向いた状態となる図８に示すようなライブ画像Ｌｖが処理対象とされた場合には、フレームＦｒの表示を伴わずにライブ画像のみが液晶モニタ４に表示される。ユーザは、このようなフレームＦｒの表示がない液晶モニタ４の画面を確認することで、構図内に存在する全ての人物の視線がデジタルカメラ１に向いていることを把握できる。そして、その時点でユーザから撮影指示がなされたとすると、全ての人物像Ａｆ，Ｂｆ，Ｃｆの視線がデジタルカメラ１に向いた状態となる記録用画像が取得される。つまり、ユーザは、液晶モニタ４においてフレームＦｒの表示がないことを確認して撮影指示を行うのみで、全ての人物像の視線がデジタルカメラ１に向いた状態の好ましい記録用画像を容易に取得できることになる。
For example, when a live image Lv as shown in FIG. 8 in which the line of sight of all the human images Af, Bf, and Cf in the live image Lv is directed to the
また、例えば、ユーザが被写体として意図する人物以外の他の人物が構図内に入り込んだ場合について想定する。図９に示すライブ画像Ｌｖには、ユーザが被写体として意図する３名の人物に係る人物像Ａｆ，Ｂｆ，Ｃｆの他に、被写体として意図しない１名の人物に係る人物像Ｄｆが含まれている。 Further, for example, a case is assumed where a person other than the person intended by the user as a subject enters the composition. The live image Lv shown in FIG. 9 includes a person image Df related to one person who is not intended as a subject, in addition to person images Af, Bf, and Cf related to three persons intended by the user as a subject. Yes.
本実施の形態の被写体判定処理では、このような意図しない人物像Ｄｆに関しても同様に状態条件を満足するかの判定がなされる。このため、図９に示すように、意図しない人物像Ｄｆの視線がデジタルカメラ１に向いていない場合は、当該人物像Ｄｆに重畳してフレームＦｒが表示されることになる。
In the subject determination process of the present embodiment, it is also determined whether or not the unintended person image Df satisfies the state condition. For this reason, as shown in FIG. 9, when the line of sight of the unintended person image Df does not face the
しかしながら、本実施の形態の被写体判定処理の結果においては、構図内に存在する人物のうちの、いずれの人物の視線がデジタルカメラ１に向いており、いずれの人物の視線がデジタルカメラ１に向いていないかを明確に把握できる。すなわち、図９に示すような液晶モニタ４の表示により、被写体として意図する人物像Ａｆ，Ｂｆ，Ｃｆに関しては視線がデジタルカメラ１に向いていることをユーザは明瞭に把握できる。また、撮影指示のタイミングはユーザにより任意に決定可能であることから、ユーザは、被写体として意図する人物像のみに注目し、それらにフレームＦｒの表示がないことを確認して撮影指示を行うようにすれば、被写体として意図しない人物の状態に影響されることなく、被写体として意図する人物像については全て好ましい状態となる記録用画像を取得できることになる。
However, in the result of the subject determination process according to the present embodiment, among the persons existing in the composition, any person's line of sight faces the
以上のようにデジタルカメラ１では、撮影待機状態においてライブ画像が取得され、取得されたライブ画像に含まれる人物像が抽出され、抽出された人物像のそれぞれに関して視線がデジタルカメラ１に向いていないか否かが判定される。そして、液晶モニタ４においてライブ画像を表示する際には、状態条件を満足すると判定された人物像には、フレームＦｒが重畳され、状態条件を満足しない他の人物像と明示的に区別される。したがって、ユーザは、このような液晶モニタ４の表示により、構図内に存在する人物のうちのいずれの人物の視線がデジタルカメラ１に向いていない状態となっているかを容易に把握できることになる。
As described above, in the
＜５．他の実施の形態＞
以上、本発明の実施の形態について説明してきたが、この発明は上記実施の形態（以下、「第１形態」という。）に限定されるものではなく様々な変形が可能である。以下では、このような他の実施の形態について説明する。
<5. Other embodiments>
Although the embodiment of the present invention has been described above, the present invention is not limited to the above-described embodiment (hereinafter referred to as “first embodiment”), and various modifications are possible. Hereinafter, such other embodiments will be described.
＜５−１．第２形態：対象領域の指定＞
第１形態では、ライブ画像の領域全体を処理対象として被写体判定処理がなされていたが、ライブ画像の一部の領域のみを処理対象とするようにしてもよい。この場合においては、被写体判定処理の処理対象とする領域（以下、「判定対象領域」という。）の指定をユーザから受け付けることになる。
<5-1. Second form: designation of target area>
In the first embodiment, the subject determination process is performed on the entire area of the live image as a processing target. However, only a part of the area of the live image may be the processing target. In this case, designation of a region to be subject to subject determination processing (hereinafter referred to as “determination target region”) is received from the user.
図１０は、判定対象領域の指定をユーザから受け付ける際の液晶モニタ４の画面の例を示す図である。この画面は、撮影待機状態において所定の操作を行うことで液晶モニタ４に表示されるものであり、図に示すように、画面中にはライブ画像Ｌｖとともに領域を選択するためのカーソルＣが表示される。 FIG. 10 is a diagram illustrating an example of the screen of the liquid crystal monitor 4 when receiving the designation of the determination target region from the user. This screen is displayed on the liquid crystal monitor 4 by performing a predetermined operation in the shooting standby state, and as shown in the figure, a cursor C for selecting an area is displayed together with the live image Lv. Is done.
ユーザは、このような液晶モニタ４の画面を参照しつつ、十字キー３７を操作することにより判定対象領域の左上及び右下とすべき位置までカーソルＣを移動させ、それぞれの位置で確定ボタン３８を押下する。これにより、指定された２点で規定されるライブ画像中の矩形の領域が、判定対象領域ＴａとしてＣＰＵ６１に受け付けられる。
The user moves the cursor C to the upper left and lower right positions of the determination target area by operating the cross key 37 while referring to the screen of the
このようにして判定対象領域Ｔａが指定されると、以降の被写体判定処理においては、判定対象領域Ｔａのみが処理対象とされる。すなわち、判定対象領域Ｔａのみから人物像が抽出され（図７：ステップＳ１２）、判定対象領域Ｔａから抽出された人物像のみに関して状態条件を満足するか否かの判定がなされることになる（図７：ステップＳ１６）。 When the determination target area Ta is designated in this manner, only the determination target area Ta is set as a processing target in the subsequent subject determination processing. That is, a person image is extracted only from the determination target area Ta (FIG. 7: Step S12), and it is determined whether or not the state condition is satisfied only for the person image extracted from the determination target area Ta ( FIG. 7: Step S16).
例えば、図１０中に示すように判定対象領域Ｔａが指定された場合において、同図に示すライブ画像Ｌｖについて被写体判定処理がなされた場合を想定する。このライブ画像Ｌｖには、４つの人物像Ａｆ、Ｂｆ、Ｃｆ及びＤｆが含まれ、このうち３つの人物像Ａｆ、Ｂｆ、Ｃｆのみが判定対象領域Ｔａに含まれている。このため、これら３つの人物像Ａｆ、Ｂｆ、Ｃｆのみが抽出され、これら３つの人物像Ａｆ、Ｂｆ、Ｃｆのみに関して状態条件を満足するか否かの判定がなされる。 For example, assume that the subject determination process is performed on the live image Lv shown in FIG. 10 when the determination target region Ta is specified as shown in FIG. The live image Lv includes four person images Af, Bf, Cf, and Df, and only three person images Af, Bf, and Cf are included in the determination target region Ta. Therefore, only these three person images Af, Bf, and Cf are extracted, and it is determined whether or not the state condition is satisfied with respect to only these three person images Af, Bf, and Cf.
したがって、図１０のライブ画像Ｌｖ中には、視線がデジタルカメラ１に向いていない２つの人物像Ｃｆ及びＤｆが含まれているが、図１１に示すように、このうち判定対象領域Ｔａに含まれる人物像Ｃｆのみに関してフレームＦｒが表示されることになる。
Therefore, the live image Lv in FIG. 10 includes two person images Cf and Df whose line of sight is not directed to the
このように第２形態では、ライブ画像の一部の判定対象領域のみから人物像を抽出するため、処理すべきデータ量を低減できる。また、人物像を抽出する判定対象領域の指定をユーザから受け付けるため、ユーザが所望する人物像のみに関して状態条件に係る判定を行うことができる。したがって例えば、ユーザが被写体として意図する人物以外の他の人物が構図内に入り込んだ場合であっても、被写体として意図する人物に係る人物像のみを判定対象領域Ｔａに含まれるように判定対象領域Ｔａを指定することで、当該人物像のみに関して状態条件を満足するか否かの判定を行わせることが可能となる。つまり、被写体として意図しない人物の状態に影響されないフレーム表示を行うことが可能となる。 As described above, in the second embodiment, since the person image is extracted from only a part of the determination target area of the live image, the amount of data to be processed can be reduced. In addition, since the designation of the determination target region from which the person image is extracted is received from the user, it is possible to perform the determination relating to the state condition only for the person image desired by the user. Therefore, for example, even when a person other than the person intended by the user enters the composition, the determination target area Ta includes only the person image related to the person intended as the subject in the determination target area Ta. By specifying Ta, it is possible to determine whether or not the state condition is satisfied only for the person image. That is, it is possible to perform frame display that is not affected by the state of an unintended person as a subject.
なお、この第２形態では、ライブ画像中の任意の領域をユーザが判定対象領域として指定できる態様であるが、判定対象領域の候補として予め定められた複数の領域のうちから選択する態様であってもよい。また、ライブ画像中の一部の領域が固定的に判定対象領域とされる態様であってもよい。 In the second mode, the user can specify an arbitrary region in the live image as the determination target region. However, the second mode is a mode in which the user can select from a plurality of regions predetermined as determination target region candidates. May be. Moreover, the aspect by which a one part area | region in a live image is made into a determination object area | region fixedly may be sufficient.
また、ライブ画像中において判定対象領域として指定される領域は一つに限定されず、図１２に示すように、複数の領域が判定対象領域Ｔａとして指定可能となっていてもよい。この場合は、判定対象領域Ｔａとされた複数の領域のそれぞれから人物像が抽出されることになる。 Further, the area specified as the determination target area in the live image is not limited to one, and a plurality of areas may be specified as the determination target area Ta as shown in FIG. In this case, a person image is extracted from each of the plurality of areas that are set as the determination target area Ta.
＜５−２．第３形態：状態条件の選択＞
第１形態では、図７のステップＳ１６において、各人物像に関して「視線がデジタルカメラ１に向いている状態である」という「状態条件」を満足するか否かの判定がなされていたが、この状態条件は、その候補となる複数の条件のうちからユーザが所望のものを選択できるようになっていてもよい。この場合は、撮影待機状態における所定の操作により液晶モニタ４に表示される設定メニューにおいて状態条件をユーザから受け付けることになる。
<5-2. Third Form: Selection of State Conditions>
In the first embodiment, in step S16 of FIG. 7, it is determined whether or not the “state condition” that “the line of sight is facing the
図１３は、状態条件を受け付けるための設定メニューの例を示す図である。図に示すように、液晶モニタ４の画面には、「視線の向き」「顔の向き」「顔の部品」「眼の開閉」「表情」の５つの項目が表示されている。これらの項目は、それぞれ状態条件の候補となる条件に対応している。ユーザは、このような液晶モニタ４の画面を参照しつつ、十字キー３７を操作することによりカーソルＣｒをいずれかの項目に移動させ、確定ボタン３８を押下する。これにより、カーソルＣｒにて選択された項目に対応する条件が、図７のステップＳ１６の判定に用いるべき「状態条件」としてＣＰＵ６１に受け付けられる。
FIG. 13 is a diagram illustrating an example of a setting menu for accepting state conditions. As shown in the figure, on the screen of the
ここで、「視線の向き」の項目は「視線がデジタルカメラ１に向いていない状態である」という条件に対応している。この条件は、上記第１形態における状態条件と同一である。
Here, the item of “direction of line of sight” corresponds to the condition “the line of sight is not facing the
また、「顔の向き」の項目は「顔全体の向きがデジタルカメラ１に向いていない状態である」という条件に対応している。すなわち、この項目が選択された場合は、人物像の顔全体の向きがデジタルカメラ１に向いていないか否かが判定される。この判定には、例えば特許文献２に開示された手法などが利用できる。
Further, the item “face orientation” corresponds to the condition that “the orientation of the entire face is not facing the
また、「顔の部品」の項目は「顔の部品の一部が見えていない状態である」という条件に対応している。すなわち、この項目が選択された場合は、人物像の顔領域において眼、鼻、口などの顔の部品のうちの一部が存在していないか否かが判定される。この判定には、例えば特許文献２に開示された手法などが利用できる。 The item “Face Parts” corresponds to the condition “a part of the face parts is not visible”. That is, when this item is selected, it is determined whether or not some of facial parts such as eyes, nose and mouth are not present in the face area of the human image. For this determination, for example, the technique disclosed in Patent Document 2 can be used.
また、「眼の開閉」の項目は「眼が開いていない状態である」という条件に対応している。すなわち、この項目が選択された場合は、人物像の眼が閉じているか否かが判定される。この判定には、例えば特許文献３に開示された手法などが利用できる。
Further, the item “open / close eye” corresponds to the condition “the eye is not open”. That is, when this item is selected, it is determined whether the eyes of the person image are closed. For this determination, for example, the technique disclosed in
また、「表情」の項目は「表情が笑顔以外の状態である」という条件に対応している。すなわち、この項目が選択された場合は、人物像の表情が笑顔でないか否かが判定される。この判定には、例えば特許文献４ないし６に開示された手法などが利用できる。
The item “expression” corresponds to the condition “expression is in a state other than a smile”. That is, when this item is selected, it is determined whether the facial expression of the person image is not a smile. For this determination, for example, methods disclosed in
これによれば、ユーザが所望の状態条件を設定できるため、ユーザは、構図内に存在する複数の人物のうちのいずれの人物が所望の状態となっているかを容易に把握できる。 According to this, since the user can set a desired state condition, the user can easily grasp which of a plurality of persons existing in the composition is in a desired state.
例えば、図１４中に示すライブ画像Ｌｖが処理対象とされた場合を想定する。図１４のライブ画像Ｌｖには、３つの人物像Ａｆ、Ｂｆ、Ｃｆが含まれており、このうち人物像Ｂｆの顔の向きはデジタルカメラ１に向いておらず、また、人物像Ｃｆの視線はデジタルカメラ１に向いていない。この場合において、図１３の画面において「顔の向き」の項目が選択されたときには、図１４に示すように、顔の向きがデジタルカメラ１に向いていない人物像Ｂｆに関してフレームＦｒが表示される。また一方で、図１３の画面において「視線の向き」が選択されたときには、人物像Ｃｆに関してフレームＦｒが表示されることになる。
For example, it is assumed that the live image Lv shown in FIG. The live image Lv in FIG. 14 includes three person images Af, Bf, and Cf. Of these, the face of the person image Bf does not face the
＜５−３．第４形態：状態条件の複数選択＞
第３形態では、状態条件の候補となる複数の条件のうちから一の条件のみをユーザから受け付けていたが、複数の条件をユーザから受け付け可能となっていてもよい。
<5-3. Fourth Mode: Multiple Selection of State Conditions>
In the third embodiment, only one condition is received from the user among a plurality of conditions that are candidates for state conditions, but a plurality of conditions may be received from the user.
図１５は、この場合における状態条件を受け付けるための設定メニューの例を示す図である。図に示すように、この場合においても、液晶モニタ４の画面には、状態条件の候補となる条件に対応する項目として「視線の向き」「顔の向き」「顔の部品」「眼の開閉」「表情」の５つの項目が表示されるが、それぞれの項目の左側にはチェックボックスが表示される。またさらに、条件とは無関係な「選択終了」の項目も表示される。 FIG. 15 is a diagram illustrating an example of a setting menu for accepting the state condition in this case. As shown in the figure, in this case as well, items on the screen of the liquid crystal monitor 4 corresponding to conditions that are candidates for the state condition are “direction of gaze”, “face orientation”, “face components”, “opening / closing of eyes” "Expression" is displayed in five items, and a check box is displayed on the left side of each item. Furthermore, an item “end selection” unrelated to the condition is also displayed.
このような画面において、カーソルＣｒをいずれかの項目に移動させ確定ボタン３８を押下すると、指定された旨を示すチェックマークＣＭがチェックボックスに表示される。このチェックマークが入れられた項目に対応する条件が、状態条件として指定されることになる。ユーザは、このような画面を利用して、所望の項目のチェックボックスにチェックマークＣＭを入れていくことで、複数の条件を状態条件として指定することができる。
In such a screen, when the cursor Cr is moved to any item and the
そして、少なくとも一つの項目のチェックボックスにチェックマークＣＭを入れた後、「選択終了」の項目を選択して確定ボタン３８を押下すると、チェックボックスにチェックマークＣＭが入れられた項目に対応する条件が、図７のステップＳ１６の判定に用いるべき「状態条件」としてＣＰＵ６１に受け付けられる。
Then, after putting a check mark CM in the check box of at least one item, selecting the “selection end” item and pressing the
複数の条件が「状態条件」とされたときは、図７のステップＳ１６の判定においては、抽出された人物像が、「状態条件」とされた複数の条件のそれぞれを満足するか否かの判定がなされる。そして、「状態条件」とされた複数の条件のうちの一つでも満足した人物像に関してフレームＦｒが表示されることになる。 When the plurality of conditions are “state conditions”, whether or not the extracted person image satisfies each of the plurality of conditions set as “state conditions” is determined in step S16 of FIG. Judgment is made. Then, the frame Fr is displayed for the person image that satisfies even one of the plurality of conditions set as the “state condition”.
例えば、図１５に示す画面において、「視線の向き」及び「顔の向き」の２つの項目が選択された場合に、前述した図１４と同一のライブ画像Ｌｖが処理対象とされた場合を想定する。この場合においては、人物像Ｂｆの顔の向きはデジタルカメラ１に向いておらず、また、人物像Ｃｆの視線はデジタルカメラ１に向いていないことから、図１６に示すように、人物像Ｂｆ及び人物像Ｃｆの双方に関してフレームＦｒが表示されることになる。
For example, in the screen shown in FIG. 15, it is assumed that the same live image Lv as in FIG. 14 described above is set as a processing target when two items of “Gaze direction” and “Face direction” are selected. To do. In this case, the face of the person image Bf is not directed to the
なお、このように複数の条件を受け付けたときには、人物像がいずれの条件に満足するのかを把握することができるように、状態条件に満足すると判定された人物像を、当該人物像が満足する条件に応じた態様で明示するようにしてもよい。つまり、人物像が満足する条件ごとに、表示するフレームの色相、明度、彩度、及び、形状などの態様を異ならせるようにしてもよい。 In addition, when a plurality of conditions are received in this way, the person image satisfies the person image determined to satisfy the state condition so that it can be understood which condition the person image satisfies. You may make it express in the aspect according to conditions. That is, aspects such as the hue, brightness, saturation, and shape of the frame to be displayed may be varied for each condition that the person image satisfies.
例えば、図１７の例においては、表示するフレームの色相を対応する条件に応じて異ならせるようにしている。すなわち、「視線がデジタルカメラ１に向いていない状態である」という条件を満足する人物像Ｃｆについては赤色のフレームＦｒ１を表示し、「顔全体の向きがデジタルカメラ１に向いていない状態である」という条件を満足する人物像Ｂｆについては黄色のフレームＦｒ２を表示している。この際、図１７に示すように、いずれの色相がいずれの項目に対応するのかを説明する凡例Ｌｅの表示を行ってもよい。このようにすることで、ユーザは、構図内のいずれの人物が、「状態条件」とされた複数の条件のうちのいずれに満足するのかを一目で把握することができることになる。
For example, in the example of FIG. 17, the hue of the frame to be displayed is varied according to the corresponding condition. That is, for the person image Cf that satisfies the condition that “the line of sight is not directed to the
＜５−４．第５形態：撮影指示の無効化＞
また、第１形態のデジタルカメラ１では、フレームＦｒの表示がないタイミングにおいて撮影指示がなされると、好ましい状態の人物像のみを含む記録用画像が取得されるようになっていた。逆に言えば、フレームＦｒの表示のあるタイミング、つまり、いずれかの人物像が状態条件を満足している場面において撮影指示がなされると、好ましくない状態の人物像を含む記録用画像が取得されることになっていた。このため、いずれかの人物像が状態条件を満足している場面においてユーザから撮影指示がなされたときには、その撮影指示を無効化するようにしてもよい。
<5-4. Fifth form: Invalidation of shooting instruction>
Further, in the
図１８は、この場合におけるデジタルカメラ１の「被写体判定モード」の基本的な動作の流れを示す図である。図４と同様に、デジタルカメラ１は、まず、ユーザからの撮影指示を待機する撮影待機状態となり（ステップＳ３２にてＮｏの間）、この状態においては、状態条件を満足する人物像を明示しつつライブビュー表示を行う被写体判定処理がなされる（ステップＳ３１）。
FIG. 18 is a diagram showing a basic operation flow of the “subject determination mode” of the
そして、ユーザから撮影指示がなされると（ステップＳ３２にてＹｅｓ）、記録用画像の取得の前に、まず、ＲＡＭ６２に記憶された直近の被写体判定処理における人物像の判定結果が参照される（ステップＳ３３）。そして、状態条件を満足する人物像がひとつでも存在した場合は（ステップＳ３３にてＹｅｓ）、当該撮影指示は無効とされて、処理はステップＳ３１に戻る。
When the user gives a shooting instruction (Yes in step S32), the person image determination result in the most recent subject determination process stored in the
一方、状態条件を満足する人物像が存在しない場合は（ステップＳ３３にてＮｏ）、当該撮影指示は有効とされて、被写体となる複数の人物の撮影が行われ、記録用画像が取得される（ステップＳ３４）。取得された記録用画像は圧縮形式とされた後、メモリカード９に記録される（ステップＳ３５）。その後、デジタルカメラ１は再び撮影待機状態（ステップＳ３１，Ｓ３２）に戻ることになる。
On the other hand, if there is no person image that satisfies the state condition (No in step S33), the shooting instruction is validated, a plurality of persons as subjects are shot, and a recording image is acquired. (Step S34). The acquired recording image is converted into a compression format and then recorded on the memory card 9 (step S35). Thereafter, the
このように、第５形態のデジタルカメラ１では、被写体判定処理における人物像の判定結果に基づき、いずれかの人物像が状態条件を満足した場合は、撮影指示が無効化される。つまり、全ての人物像が好ましい状態となるまでユーザからの撮影指示が受け付けられず、好ましくない状態の人物像を含む記録用画像の取得が防止されることになる。
As described above, in the
なお、この第５形態のデジタルカメラでは、被写体として意図する人物以外の他の人物が構図内に入り込んだ場合には、当該他の人物の状態に影響されて撮影指示が実行できない場面も想定される。このため第５形態のデジタルカメラ１では、被写体として意図する人物像のみを状態条件の判定対象にできるように、第２形態と同様に判定対象領域の指定をユーザから受付可能であることが好ましい。
In the digital camera of the fifth embodiment, when a person other than the intended person as a subject enters the composition, it is assumed that the shooting instruction cannot be executed due to the influence of the state of the other person. The For this reason, in the
なお、このような撮影指示を無効化する機能を有するデジタルカメラ１においては、当該機能を能動化（有効化）するか否かを、設定メニューにおいてユーザが所望に選択可能となっていてもよい。
Note that in the
＜５−５．その他の変形例＞
上記実施の形態では、「視線がデジタルカメラ１に向いていない状態である」など、撮影において”好ましくない”状態に係る条件が状態条件に設定されていたが、「視線がデジタルカメラ１に向いている状態である」など、撮影において”好ましい”状態に係る条件が状態条件に設定されていてもよい。例えば、状態条件が「視線がデジタルカメラ１に向いている状態である」という条件である場合において、図５と同一のライブ画像Ｌｖを処理対象としたときには、図１９に示すように、液晶モニタ４の画面において、視線がデジタルカメラ１に向いている人物像Ａｆ、Ｂｆに関してフレームＦｒが表示されることになる。
<5-5. Other variations>
In the above-described embodiment, the condition related to the “unfavorable” state is set as the state condition such as “the line of sight is not suitable for the
また、この場合においては、第５形態のように被写体判定処理における人物像の判定結果に応じて撮影指示を無効化する制御を行うときには、第５形態とは逆に、いずれかの人物像が状態条件を満足しない場合に、撮影指示を無効化することになる。 In this case, when performing a control to invalidate the shooting instruction according to the determination result of the human image in the subject determination process as in the fifth embodiment, one of the human images is contrary to the fifth embodiment. If the state condition is not satisfied, the shooting instruction is invalidated.
また、状態条件として”好ましい”状態に係る条件と”好ましくない”状態に係る条件とのいずれかを、ユーザが所望に選択可能となっていてもよい。 In addition, the user may be able to select any one of a condition relating to the “preferred” state and a condition relating to the “not preferable” state as the state condition.
また、上記実施の形態では、プログラムに従ったＣＰＵの演算処理によってソフトウェア的に各種の機能が実現されると説明したが、これら機能のうちの一部は電気的なハードウェア回路により実現されてもよい。また逆に、ハードウェア回路によって実現されるとした機能のうちの一部は、ソフトウェア的に実現されてもよい。 Further, in the above-described embodiment, it has been described that various functions are realized in software by the arithmetic processing of the CPU according to the program. However, some of these functions are realized by an electrical hardware circuit. Also good. Conversely, some of the functions realized by the hardware circuit may be realized by software.
１ デジタルカメラ
２ 撮像センサ
４ 液晶モニタ
６ 全体制御部
３４ シャッタボタン
Ｃ カーソル
Ｆｒ フレーム
Ｌｖ ライブ画像
Ｔａ 判定対象領域
DESCRIPTION OF
Claims (7)
前記ライブ画像を取得する撮像手段と、
前記ライブ画像に含まれる人物像を抽出する抽出手段と、
前記人物像が所定の状態条件を満足するか否かを判定する判定手段と、
前記撮影待機状態において、前記状態条件を満足すると判定された人物像を明示しつつ、前記ライブ画像を表示する表示手段と、
を備えることを特徴とする撮像装置。 An imaging apparatus that displays a live image indicating a state of a subject in a shooting standby state before a shooting instruction from a user and acquires a recording image after the shooting instruction,
Imaging means for acquiring the live image;
Extracting means for extracting a person image included in the live image;
Determining means for determining whether or not the person image satisfies a predetermined state condition;
Display means for displaying the live image while clearly showing a person image determined to satisfy the state condition in the shooting standby state;
An imaging apparatus comprising:
前記抽出手段は、前記ライブ画像の一部の対象領域のみから、前記人物像を抽出することを特徴とする撮像装置。 The imaging device according to claim 1,
The image pickup apparatus, wherein the extraction unit extracts the person image from only a part of a target area of the live image.
少なくとも一つの前記対象領域の指定をユーザから受け付ける手段、
をさらに備えることを特徴とする撮像装置。 The imaging device according to claim 2,
Means for accepting designation of at least one target area from a user;
An image pickup apparatus further comprising:
前記状態条件の候補となる複数の条件のうちから少なくとも一つを、前記状態条件としてユーザから受け付ける条件受付手段、
をさらに備えることを特徴とする撮像装置。 In the imaging device according to any one of claims 1 to 3,
Condition accepting means for accepting at least one of a plurality of conditions as candidates for the state condition from the user as the state condition;
An image pickup apparatus further comprising:
前記条件受付手段が、前記状態条件として複数の条件を受け付けたとき、
前記判定手段は、前記人物像が前記複数の条件のそれぞれを満足するか否かを判定し、
前記表示手段は、前記状態条件に満足すると判定された人物像を、当該人物像が満足する条件に応じた態様で明示することを特徴とする撮像装置。 The imaging apparatus according to claim 4,
When the condition accepting unit accepts a plurality of conditions as the state condition,
The determination means determines whether the person image satisfies each of the plurality of conditions,
The image display apparatus characterized in that the display means clearly shows a person image determined to satisfy the state condition in a mode according to a condition that the person image satisfies.
前記表示手段は、前記状態条件を満足すると判定された人物像を明示する際に、当該人物像の顔領域の周囲を囲む指標を表示することを特徴とする撮像装置。 In the imaging device according to any one of claims 1 to 5,
The display device displays an index surrounding the periphery of the face area of the person image when the person image determined to satisfy the state condition is clearly indicated.
前記判定手段による判定結果に基づいて、前記撮影指示を無効化する手段、
を備えることを特徴とする撮像装置。
The imaging apparatus according to any one of claims 1 to 6,
Means for invalidating the photographing instruction based on a determination result by the determination means;
An imaging apparatus comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005013583A JP2006201531A (en) | 2005-01-21 | 2005-01-21 | Imaging device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005013583A JP2006201531A (en) | 2005-01-21 | 2005-01-21 | Imaging device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2006201531A true JP2006201531A (en) | 2006-08-03 |
Family
ID=36959575
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005013583A Pending JP2006201531A (en) | 2005-01-21 | 2005-01-21 | Imaging device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2006201531A (en) |
Cited By (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006254358A (en) * | 2005-03-14 | 2006-09-21 | Omron Corp | Imaging apparatus and method of timer photographing |
| JP2008131405A (en) * | 2006-11-21 | 2008-06-05 | Sony Corp | Imaging unit, image processing unit, image processing methods for the units, and program making computer execute the method |
| JP2008259024A (en) * | 2007-04-06 | 2008-10-23 | Nikon Corp | Electronic camera |
| JP2009239347A (en) * | 2008-03-25 | 2009-10-15 | Olympus Corp | Image processor and image processing program |
| JP2009246832A (en) * | 2008-03-31 | 2009-10-22 | Casio Comput Co Ltd | Imaging apparatus, imaging method and program |
| JP2010016878A (en) * | 2009-09-29 | 2010-01-21 | Sony Corp | Image processing apparatus and image processing method, and computer program |
| JP2010044506A (en) * | 2008-08-11 | 2010-02-25 | Olympus Corp | Image processor and image processing program |
| US8045013B2 (en) | 2007-06-13 | 2011-10-25 | Sony Corporation | Imaging device, imaging method and computer program |
| US8107771B2 (en) | 2007-03-19 | 2012-01-31 | Sony Corporation | Image processing apparatus and image processing method |
| US8363910B2 (en) | 2007-03-08 | 2013-01-29 | Sony Corporation | Image processing device, image processing method, and program |
| US8456536B2 (en) | 2007-03-26 | 2013-06-04 | Sony Corporation | Image processing apparatus, image processing method and program with sightline detection |
| US8482651B2 (en) | 2007-02-15 | 2013-07-09 | Sony Corporation | Image processing device and image processing method |
| US8542885B2 (en) | 2007-06-13 | 2013-09-24 | Sony Corporation | Imaging device, imaging method and computer program |
| CN103347117A (en) * | 2013-05-31 | 2013-10-09 | 东莞宇龙通信科技有限公司 | Communication terminal shooting method and communication terminal |
| US8872929B2 (en) | 2007-06-25 | 2014-10-28 | Sony Corporation | Picture imaging apparatus and imaging control method |
| JP2015159550A (en) * | 2015-03-19 | 2015-09-03 | オリンパス株式会社 | Imaging apparatus, imaging method, and program |
| JP2019205172A (en) * | 2019-06-19 | 2019-11-28 | 株式会社ニコン | Image processing apparatus, imaging apparatus, and image processing program |
-
2005
- 2005-01-21 JP JP2005013583A patent/JP2006201531A/en active Pending
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006254358A (en) * | 2005-03-14 | 2006-09-21 | Omron Corp | Imaging apparatus and method of timer photographing |
| JP4639869B2 (en) * | 2005-03-14 | 2011-02-23 | オムロン株式会社 | Imaging apparatus and timer photographing method |
| JP2008131405A (en) * | 2006-11-21 | 2008-06-05 | Sony Corp | Imaging unit, image processing unit, image processing methods for the units, and program making computer execute the method |
| US8482651B2 (en) | 2007-02-15 | 2013-07-09 | Sony Corporation | Image processing device and image processing method |
| US8363910B2 (en) | 2007-03-08 | 2013-01-29 | Sony Corporation | Image processing device, image processing method, and program |
| US8107771B2 (en) | 2007-03-19 | 2012-01-31 | Sony Corporation | Image processing apparatus and image processing method |
| US8456536B2 (en) | 2007-03-26 | 2013-06-04 | Sony Corporation | Image processing apparatus, image processing method and program with sightline detection |
| JP2008259024A (en) * | 2007-04-06 | 2008-10-23 | Nikon Corp | Electronic camera |
| US8045013B2 (en) | 2007-06-13 | 2011-10-25 | Sony Corporation | Imaging device, imaging method and computer program |
| US8542885B2 (en) | 2007-06-13 | 2013-09-24 | Sony Corporation | Imaging device, imaging method and computer program |
| US8872929B2 (en) | 2007-06-25 | 2014-10-28 | Sony Corporation | Picture imaging apparatus and imaging control method |
| JP2009239347A (en) * | 2008-03-25 | 2009-10-15 | Olympus Corp | Image processor and image processing program |
| JP2009246832A (en) * | 2008-03-31 | 2009-10-22 | Casio Comput Co Ltd | Imaging apparatus, imaging method and program |
| JP2010044506A (en) * | 2008-08-11 | 2010-02-25 | Olympus Corp | Image processor and image processing program |
| JP2010016878A (en) * | 2009-09-29 | 2010-01-21 | Sony Corp | Image processing apparatus and image processing method, and computer program |
| CN103347117A (en) * | 2013-05-31 | 2013-10-09 | 东莞宇龙通信科技有限公司 | Communication terminal shooting method and communication terminal |
| JP2015159550A (en) * | 2015-03-19 | 2015-09-03 | オリンパス株式会社 | Imaging apparatus, imaging method, and program |
| JP2019205172A (en) * | 2019-06-19 | 2019-11-28 | 株式会社ニコン | Image processing apparatus, imaging apparatus, and image processing program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2006201531A (en) | Imaging device | |
| JP2006203600A (en) | Imaging apparatus, image processor, image processing system, and image processing method and program | |
| JP5281878B2 (en) | IMAGING DEVICE, LIGHTING PROCESSING DEVICE, LIGHTING PROCESSING METHOD, AND LIGHTING PROCESSING PROGRAM | |
| JP4577275B2 (en) | Imaging apparatus, image recording method, and program | |
| JP4945722B2 (en) | Imaging device | |
| JP5293206B2 (en) | Image search apparatus, image search method and program | |
| CN101753822A (en) | Imaging apparatus and image processing method used in imaging device | |
| US8502883B2 (en) | Photographing apparatus and photographing control method | |
| JP2010183187A (en) | Imaging apparatus and control method of the same, program | |
| JP3971240B2 (en) | Camera with advice function | |
| KR101046041B1 (en) | Imaging device | |
| JP2005020446A (en) | Device and program for photographing image | |
| JP4577445B2 (en) | Imaging apparatus, image recording method, and program | |
| JP2011061703A (en) | Image capturing apparatus and method of manufacturing the same | |
| JP5959217B2 (en) | Imaging apparatus, image quality adjustment method, and image quality adjustment program | |
| JP2008245093A (en) | Digital camera, and control method and control program of digital camera | |
| JP2007049631A (en) | Imaging apparatus | |
| JP2011135527A (en) | Digital camera | |
| JP2014017665A (en) | Display control unit, control method for display control unit, program, and recording medium | |
| JP6033006B2 (en) | Image processing apparatus, control method thereof, control program, and imaging apparatus | |
| JP2008054031A (en) | Digital camera and display control method | |
| JP4765909B2 (en) | Imaging apparatus, group member determination method and program | |
| JP2001045355A (en) | Photographing device and group photographic image forming method | |
| KR20110090093A (en) | Apparatus for processing digital image and thereof method | |
| JP2008172732A (en) | Imaging apparatus, control method thereof, and program |