JP2017139591A - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- JP2017139591A JP2017139591A JP2016018486A JP2016018486A JP2017139591A JP 2017139591 A JP2017139591 A JP 2017139591A JP 2016018486 A JP2016018486 A JP 2016018486A JP 2016018486 A JP2016018486 A JP 2016018486A JP 2017139591 A JP2017139591 A JP 2017139591A
- Authority
- JP
- Japan
- Prior art keywords
- image
- live
- main subject
- shooting
- live view
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Indication In Cameras, And Counting Of Exposures (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
Abstract
【課題】被写体撮影後のブラックアウト状態からのライブビュー復帰時における、ライブビュー画像の主被写体追従性を向上させた撮像装置を提供する。【解決手段】静止画撮影後のブラックアウト状態からのライブビュー復帰時に、ライブビュー画像を元に主被写体を検出する主被写体検出処理を優先的に実行しS311,S312、ライブビュー復帰後に撮像素子からの露光データを元に主被写体を検出する静止画撮影用主被写体検出を後追いで実行するS317。【選択図】図3
Description
本発明は、画像処理装置に関し、撮影復帰時の主被写体検出制御に関する。
近年、被写体を撮影して画像データを生成し、この画像データを画像コンテンツとして記録するデジタルスチルカメラやデジタルビデオカメラ(例えば、カメラ一体型レコーダ)等の撮像装置が普及している。また、撮影対象となる主被写体を検出する手段を持つことにより主被写体の条件に合わせた撮影制御が可能な撮像装置が提案されている。
ライブビュー表示用の露光データ、または撮影時の露光データに対して主被写体検出を行うことで、被写体の動きに合わせて被写体枠を描画したり、オートフォーカス(自動ピント調整)や自動露出調整を行うことが可能となる。
被写体情報を用いる文献は既にいくつか提案されており、被写体検出情報を活用することでオートフォーカススキャンに要する時間を短縮する特許文献1や、撮影前の状態から実際に静止画撮影されるまでの間に被写体に急激な変化があったか否かをユーザに伝える手段を備える特許文献2がある。
しかしながら、特許文献1、2に提案されたデジタルスチルカメラにおいて、撮影後の主被写体検出(ライブ用/静止画撮影用)開始処理やライブビュー表示タイミングについての記載がない。
もし被写体撮影後のライブビュー復帰時に、主被写体検出処理を待ち合わせた上でライブビューを表示すると、ライブ表示までのブラックアウト時間が延びてしまう。また、ライブ表示までのブラックアウト時間を短縮するには主被写体検出開始処理と並行してライブビュー表示を実施することが考えられるが、ライブビュー表示開始までに主被写体検出処理が完了していない場合、被写体に合わせた枠追従(表示)や、オートフォーカス、自動露出調整が出来ないライブビューが暫く表示される問題があった。
上記の課題を解決するために、本発明に係る画像処理装置は、
撮像素子と、
画像を撮影する撮影制御部と、
画像を表示する表示部と、
前記撮像素子がとらえたデータから表示部で確認できる程度の画質のライブビュー画像をリアルタイムに生成するライブビュー画像生成部と、
前記ライブビュー画像を元に主被写体を検出するライブ用主被写体検出部と、
前記撮像素子の露光データを元に主被写体を検出する静止画撮影用主被写体検出部と、を有し、
静止画撮影後のライブビュー復帰時に、ライブビュー表示画像に対する主被写体検出処理を優先的に実行し、ライブビュー復帰後に静止画撮影用主被写体検出を後追いで実行することを特徴とする。
撮像素子と、
画像を撮影する撮影制御部と、
画像を表示する表示部と、
前記撮像素子がとらえたデータから表示部で確認できる程度の画質のライブビュー画像をリアルタイムに生成するライブビュー画像生成部と、
前記ライブビュー画像を元に主被写体を検出するライブ用主被写体検出部と、
前記撮像素子の露光データを元に主被写体を検出する静止画撮影用主被写体検出部と、を有し、
静止画撮影後のライブビュー復帰時に、ライブビュー表示画像に対する主被写体検出処理を優先的に実行し、ライブビュー復帰後に静止画撮影用主被写体検出を後追いで実行することを特徴とする。
本発明に係る画像処理装置によれば、撮影復帰直後のライブ復帰地点から、主被写体の移動に追従可能なライブ画像が出力できる。
以下、図面を参照して本発明の実施例を説明する。本発明をデジタルカメラを例に用いて説明をおこなう。
図1は本発明の実施例の構成を示す図である。
図1において、100は画像処理装置である。10は撮影レンズ、11は絞り機能を備える機械式シャッター、12は光学像を電気信号に変換する撮像素子、13は撮像素子12のアナログ信号出力をディジタル信号に変換するA/D変換器である。
14は画像処理部であり、 A/D変換器13からのデータ或いはメモリ制御部15からのデータに対して所定の画素補間処理や色変換処理を行う。また14の画像処理部によって画像の切り出し、変倍処理を行うことで電子ズーム機能が実現される。また、画像処理部14においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御部22が露光制御手段23、測距制御手段24に対して制御を行う、TTL方式のAF処理、AE処理、EF処理を行っている。さらに、画像処理部14においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてTTL方式のAWB(オートホワイトバランス)処理も行っている。
15はメモリ制御回路であり、A/D変換器13、画像処理部14、メモリ17、圧縮・伸長回路26を制御する。A/D変換器13のデータが画像処理部14、メモリ制御部15を介して、或いはA/D変換器13のデータが直接メモリ制御部15を介して、メモリ17に書き込まれる。
16はTFT LCD等から成る画像表示部であり、メモリ17に書き込まれた表示用の画像データはメモリ制御回路15を介して画像表示部16により表示される。画像表示部16を用いて撮像した画像データを逐次表示すれば、電子ファインダー機能を実現することが可能である。また、画像表示部16は、システム制御回路22の指示により任意に表示をON/OFFすることが可能であり、表示をOFFにした場合には画像処理装置100の電力消費を大幅に低減することが出来る。
17は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。これにより、複数枚の静止画像を連続して撮影する連写撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ17に対して行うことが可能となる。また、メモリ17はシステム制御回路22の作業領域としても使用することが可能である。
18はFlashROM等で構成された不揮発性メモリである。システム制御回路22が実行するプログラムコードは不揮発性メモリ18に書き込まれ、逐次読み出しながらプログラムコードを実行する。また、不揮発性メモリ内にはシステム情報を記憶する領域や、ユーザー設定情報を記憶する領域を設け、さまざまな情報や設定を次回起動時に読み出して、復元することを実現している。
19はメモリカードやハードディスク等の記録媒体とのインタフェース、200はメモリカードやハードディスク等の記録媒体である。
20は、システム制御回路22の各種の動作指示を入力するための操作手段であり、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。また、シャッタースイッチの部材に関しては、半押し状態と全押し状態の二つの状態に遷移することが出来る。本発明においては、半押し状態にする操作指示をSW1、全押し(撮影開始)状態にする操作指示をSW2と表現することとする。
21はアルカリ電池やリチウム電池等の一次電池やNiCd電池やNiMH電池、Li電池等の二次電池、ACアダプター等からなる電源制御部である。
22は画像処理装置100全体を制御するシステム制御回路である。
23は絞り機能を備えるシャッター11を制御する露光制御手段であり、24は撮影レンズ10のフォーカシングを制御する測距制御手段である。露光制御手段23、測距制御手段24はTTL方式を用いて制御されており、撮像した画像データを画像処理回路14によって演算した演算結果に基づき、システム制御回路22が露光制御手段23、測距制御手段24に対して制御を行う。
25は撮像部12からの画像信号に基づいて主被写体領域を検出する被写体検出部である。
26は適応離散コサイン変換(ADCT)等により画像データを圧縮伸長する圧縮・伸長回路であり、メモリ17に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ17に書き込む。
次に、本発明の実施形態について説明する。
近年、被写体を撮影して画像データを生成し、この画像データを画像コンテンツとして記録するデジタルスチルカメラやデジタルビデオカメラ(例えば、カメラ一体型レコーダ)等の撮像装置が普及している。また、撮影対象となる主被写体を検出する手段を持つことにより主被写体の条件に合わせた撮影制御が可能な撮像装置が提案されている。
ライブビュー表示用の露光データ、または撮影時の露光データに対して主被写体検出を行うことで、被写体の動きに合わせて被写体枠を描画したり、オートフォーカス(自動ピント調整)や自動露出調整を行うことが可能となる。
しかしながら、被写体撮影後のライブビュー復帰時に、主被写体検出処理を待ち合わせた上でライブビューを表示すると、ライブ表示までのブラックアウト時間が延びてしまう。ライブ表示までのブラックアウト時間を短縮するには、主被写体検出開始処理と並行してライブビュー表示を実施することが考えられるが、ライブビュー表示開始までに主被写体検出処理が完了しない場合、被写体に合わせた枠追従(表示)や、オートフォーカス、自動露出調整が出来ないライブビューが暫く表示される問題があった。
上記の問題を解決するため本発明では、静止画撮影後のライブビュー復帰時に、ライブビュー表示画像に対する主被写体検出処理を優先的に実行し、ライブビュー復帰後に静止画撮影用主被写体検出を後追いで実行する。
本発明により静止画撮影後のライブビュー復帰地点から、主被写体に追従可能なライブ画像が出力できる。
次に図を使って、この発明に係る画像処理装置の処理の流れを詳細に説明する。
[第1の実施形態]
第1の実施形態では、本発明の処理の流れについて説明する。
第1の実施形態では、本発明の処理の流れについて説明する。
まず図2を用い本発明を実施しない場合の処理の流れについて説明する。図2は本発明を実施しない場合の概要図である。
S201は撮影制御に関わる操作部20の状態を表し、操作部20のSW1が押された状態、およびSW1・SW2が両方押された状態変化を表現している。
S202は画像表示部16の表示状態を表している。撮影制御中に現れる状態は4つで、「ライブビューが表示され、かつ表示するライブビュー画像に対し被写体検出結果が反映されている状態」(S203)、「ライブビューが表示されているが、(主被写体検出が完了していないため)ライブビュー画像に対し被写体検出結果が反映されていない状態」(S205)、「ブラックアウト状態」(S204)、「(連写時)撮影コマ間の撮影画像のレビュー表示がされている状態」である。
CPUがSW1・SW2両方押されたと判断したら、CPUは露光読み出し処理S210を行い、露光読み出し処理が完了したら撮影露光データから主被写体情報を検出する静止画用検出処理S211を実行する。CPUは静止画用検出処理S211が完了したら、次にライブビュー表示用に露光した露光データからライブ用検出処理を行う。ライブ用検出処理は、ライブビューを表示する期間(最新の被写体情報に更新し続ける必要があるので)毎フレームレート実施する必要がある(S212〜S215)。S212〜S215、およびS216〜S218の枠内に記載している数字はフレームレートのコマ数を表現したものである。
CPUはライブ用検出処理が完了したら、ライブ用検出結果を元にライブ用のAF(オートフォーカス)/AE(自動露出調整)処理を行う。なお、図には表現していないが、その他ライブ用検出結果を用いた制御を加えてもよい。例えば、被写体検出で得た情報から被写体の場所が分かるので、被写体の範囲に表示枠を書くような処理を実行してもよい。
S216で、1コマ目のライブ画に対して被写体検出結果に合わせたアルゴリズム制御が動ける状態になる(S216以降で被写体検出結果が反映されたライブビュー表示が出来る)。そのため、S216までの期間にライブビューを表示した場合(S205の期間)は被写体検出結果が反映されていないライブ画が表示されることとなる。
反映されていないライブ画が表示されることの弊害について例を出すと、S205の期間中のライブ画像はAF処理ができないため、焦点距離が変動したことによりピントが追従できずぼけた画が表示されてしまう。またAE処理もできないため、急に暗い場所に移動した場合、明るさの変化に追従できない。また被写体の範囲に表示枠を書く処理を加えた場合、被写体の移動に合わせて表示枠を動かすことができないといった問題が発生する。
次に図3を用いて本発明を実施した場合の処理の流れについて説明する。
図3は本発明を実施した場合の概要図である。
CPUがSW1・SW2両方押されたと判断したら、CPUは露光読み出し処理S310を行う。CPUは露光読み出し処理S310が完了したら露光読み出しの画像信号データはメモリ17に置き、(静止画用検出処理より優先的に)ライブビュー表示用に露光した露光データからライブ用検出処理S311を行う。
CPUはライブ用検出処理S311が完了したら、ライブ用検出結果を元にライブ用のAF/AE処理S317を行う。S317の処理に合わせて表示部16にライブビューを表示することで、ライブ表示の1コマ目から主被写体検出結果が反映されたライブビューを表示できる。
引き続きライブビュー表示の被写体追従性を落とさないように、CPUはライブ用被写体検出処理およびライブ用AF/AE処理(S311、S317/S312、S318)を優先的に実施しながら、メモリ17に置いた静止画撮影用に露光した露光データから静止画用検出処理(S317)を細かく分割し実施する。静止画用検出処理はメモリ17から撮影用の露光データが削除されない限り処理できる。
本実施形態では細かく分割して処理すると記載したが、一度にまとめて静止画用検出処理を実施してもよい。静止画用検出処理を実施している期間(S305)は、ライブ用検出処理、およびライブ用AF/AE処理は実行できないため、前回のコマで取得した検出結果を用いてライブビュー表示を行うことになる。
このように、静止画撮影後のライブビュー復帰時に、ライブビュー表示画像に対する主被写体検出処理を優先的に実行し、ライブビュー復帰後に静止画撮影用主被写体検出を後追いで実行することで、静止画撮影後のライブビュー復帰地点から、主被写体に追従可能なライブ画像が出力できる。
[第2の実施形態]
続いて第2の実施形態では、図4、図5を用いて連続撮影設定にて本発明を実施する場合の処理の流れについて説明する。
続いて第2の実施形態では、図4、図5を用いて連続撮影設定にて本発明を実施する場合の処理の流れについて説明する。
まず図4を用い連続撮影設定にて本発明を実施する際の処理の流れについて説明する。
CPUがSW1・SW2両方押されたと判断したら、CPUは露光読み出し処理S410を実行する。露光読み出し処理実行中に連続撮影判定を行い、連続撮影設定がされているか/SW2が押され続けているかを確認する。CPUが連続撮影でないと判定した場合は第1の実施形態で説明した単写設定時の処理の流れとなる。CPUが連続撮影と判断している期間(SW2が離されるまで)は、ライブ用検出処理、およびライブ用AF/AE処理は実行せず、静止画用検出処理のみ実行する。連続撮影期間はライブビュー表示ではなく、静止画撮影画像を表示部16に表示する。
次に図5を用いサーボAF設定かつ連続撮影設定にて本発明を実施する際の処理の流れについて説明する。
サーボAF設定かつ連続撮影設定を行う場合、撮影コマ間のライブ用露光データの検出結果を元にAFスキャンを実施する必要がある。2つの検出処理を両立させつつライブビューに被写体検出結果を反映させるための実施形態を説明する。
CPUがSW1・SW2両方押されたと判断したら、CPUは露光読み出し処理S510を行う。
CPUは露光読み出し処理S510が完了したら露光読み出しの画像信号データはメモリ17に置き、(静止画用検出処理より優先的に)ライブビュー表示用に露光した1枚目の露光データからライブ用検出処理S511を行う。
CPUはライブ用検出処理S511が完了したら、ライブ用検出結果を元にライブ用のAF/AE処理S513を行うとともに、静止画用検出処理S519を実行する。
S513の処理に合わせて表示部16にライブビュー表示を実施することで、主被写体検出結果が反映されたライブビュー表示を行うことができる。本実施例においては静止画検出処理をまとめて実施する記載としたが、第1の実施形態同様細かく分割し静止画検出処理を実施してもよい。
第1の実施形態同様に、静止画用検出処理を実施している期間(S504/S508)は、ライブ用検出処理、およびライブ用AF/AE処理は実行できないため、前回のコマで取得した検出結果を用いてライブビュー表示を行うことになる。
このように、連続撮影設定においては撮影間はライブ用検出処理を実施せず静止画撮影用主被写体検出を実施する。また、サーボAF設定かつ連続撮影設定においては、ライブビュー用に1コマ目の露光データのみ優先的にライブ用主被写体検出処理を実行する。
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(又はCPUやMPU等)がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。
100 画像処理装置、10 撮影レンズ、11 機械式シャッター、12 撮像素子、
13 A/D変換器、14 画像処理部、15 メモリ制御部
13 A/D変換器、14 画像処理部、15 メモリ制御部
Claims (3)
- 画撮像素子と、
画像を撮影する撮影制御部と、
前記撮像素子がとらえたデータから表示部で確認できる程度の画質のライブ画像をリアルタイムに生成するライブ画像生成部と、
前記ライブ画像を元に主被写体を検出するライブ用主被写体検出部と、
前記撮像素子の露光データを元に主被写体を検出する静止画用主被写体検出部と、を有し、
撮影復帰時にライブ用主被写体検出処理を優先的に実行し、ライブ復帰後に静止画用主被写体検出処理を後追いで実行することを特徴とする撮像装置。 - 連続撮影設定時は撮影コマ間のライブ用主被写体検出を実施しないことを特徴とする請求項1に記載の画像処理装置。
- 連続撮影設定かつサーボAF設定時はライブビュー用に1コマ目の露光データのみ優先的にライブ用主被写体検出処理を実行することを特徴とする請求項1に記載の画像処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016018486A JP2017139591A (ja) | 2016-02-03 | 2016-02-03 | 画像処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016018486A JP2017139591A (ja) | 2016-02-03 | 2016-02-03 | 画像処理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2017139591A true JP2017139591A (ja) | 2017-08-10 |
Family
ID=59566457
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016018486A Pending JP2017139591A (ja) | 2016-02-03 | 2016-02-03 | 画像処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2017139591A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019101327A (ja) * | 2017-12-06 | 2019-06-24 | キヤノン株式会社 | 撮像制御装置およびその制御方法 |
JP2022091920A (ja) * | 2018-05-10 | 2022-06-21 | キヤノン株式会社 | 撮像装置及びその制御方法 |
-
2016
- 2016-02-03 JP JP2016018486A patent/JP2017139591A/ja active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019101327A (ja) * | 2017-12-06 | 2019-06-24 | キヤノン株式会社 | 撮像制御装置およびその制御方法 |
JP2022091920A (ja) * | 2018-05-10 | 2022-06-21 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP7282227B2 (ja) | 2018-05-10 | 2023-05-26 | キヤノン株式会社 | 撮像装置及びその制御方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4193804B2 (ja) | 撮像装置、画像記憶装置、撮像方法、記憶方法及びプログラム | |
JP4214926B2 (ja) | 電子スチルカメラ | |
JP6238756B2 (ja) | 撮像装置、制御方法及びプログラム | |
JP2007081465A (ja) | 遠隔装置及び撮像装置 | |
JP2017126915A (ja) | 撮像装置 | |
JP2017139591A (ja) | 画像処理装置 | |
JP2007134754A (ja) | 撮影装置及びプログラム | |
JP6559014B2 (ja) | 撮像装置、その制御方法及びプログラム | |
JP2016019161A (ja) | 撮像装置 | |
JP2012090041A (ja) | 画像処理装置及び方法、並びにプログラム | |
JP5414412B2 (ja) | 撮像装置およびその制御方法 | |
JP5414411B2 (ja) | 撮像装置およびその制御方法 | |
JP2006060409A (ja) | 撮像装置及びその制御方法 | |
JP2011193539A (ja) | 撮影装置、撮影条件設定方法及びプログラム | |
JP2018006888A (ja) | 撮像装置、その制御方法、および制御プログラム | |
JP2014164206A (ja) | 撮像装置およびその制御方法、プログラム、記憶媒体 | |
JP2017038300A (ja) | 画像処理装置及び方法 | |
JP6335064B2 (ja) | 撮像装置、撮像装置の制御方法およびコンピュータプログラム | |
KR101825147B1 (ko) | 디지털 촬영이미지의 흔들림 보정 촬영방법 | |
JP6278688B2 (ja) | 撮像装置、撮像装置の制御方法及びプログラム | |
JP2014216886A (ja) | 撮像装置 | |
JP5274223B2 (ja) | 撮像装置およびその制御方法 | |
JP2022170552A (ja) | 撮像装置、その制御方法とプログラム | |
JP2019201399A (ja) | 制御装置、撮像装置、制御方法、および、プログラム | |
JP2015171113A (ja) | 画像処理装置及びその制御方法 |