JP7014222B2 - 撮像装置、および画像処理方法、並びにプログラム - Google Patents
撮像装置、および画像処理方法、並びにプログラム Download PDFInfo
- Publication number
- JP7014222B2 JP7014222B2 JP2019508609A JP2019508609A JP7014222B2 JP 7014222 B2 JP7014222 B2 JP 7014222B2 JP 2019508609 A JP2019508609 A JP 2019508609A JP 2019508609 A JP2019508609 A JP 2019508609A JP 7014222 B2 JP7014222 B2 JP 7014222B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- frame memory
- exposure
- recording
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/18—Signals indicating condition of a camera member or suitability of light
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/53—Control of the integration time
- H04N25/531—Control of the integration time by controlling rolling shutters in CMOS SSIS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
Description
例えば、ユーザ(撮影者)は、この表示部に表示される画像を観察して、撮影タイミングを決定して、レリーズボタン(シャッターボタン)を押下することができる。
また、ユーザ(撮影者)は、撮影した画像を表示部に表示して、撮影画像の確認を行うことができる。
また、レリーズボタンの押下に伴い発生する表示部のブラックアウトが影響して、ユーザは、違和感や、操作ミスを行ったと勘違いする等の問題が発生する恐れがある。
撮像素子と、
前記撮像素子が取得する表示用画像を格納するフレームメモリと、
前記フレームメモリが格納する前記表示用画像を表示する表示部と、
撮像操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う制御部と、
を備える撮像装置にある。
撮像装置において実行する画像処理方法であり、
前記撮像装置は、
撮像素子と、
前記撮像素子による取得画像を格納するフレームメモリと、
前記フレームメモリの格納画像を表示する表示部と、
撮像装置において実行する処理の制御を行う制御部を有し、
前記制御部が、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの表示用画像を前記表示部に表示させる表示制御を行う画像処理方法にある。
撮像装置において画像処理を実行させるプログラムであり、
前記撮像装置は、
撮像素子と、
前記撮像素子による取得画像を格納するフレームメモリと、
前記フレームメモリの格納画像を表示する表示部と、
撮像装置において実行する処理の制御を行う制御部を有し、
前記プログラムは、前記制御部に、
撮像操作の入力検出に応じて、記録用画像の露光準備処理を開始させ、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行わせるプログラムにある。
具体的には、例えば、撮像素子と、フレームメモリと、表示部と、制御部を有し、制御部は、撮像装置に対する撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、露光準備処理の完了後に撮像素子における記録用画像の露光処理と、記録用画像のフレームメモリへの格納処理を実行する。さらに、制御部は、露光準備処理の開始に伴い、撮像素子の表示用画像の露光を停止させ、記録用画像が表示可能となるまで、表示部に表示用画像を表示してブラックアウトを回避する。
これらの処理により、記録用画像の撮影時に、表示部のブラックアウトを回避する表示制御を行う装置、方法が実現される。
なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
1.撮像装置における画像の撮影、および表示処理の概要について
2.本開示の撮像装置の構成例について
3.表示部のブラックアウトを防止した撮像装置の実施例について
3-1.(実施例1)表示用画像の露光完了後に露光準備処理を開始することで表示部のブラックアウトを防止した実施例
3-2.(実施例2)表示用画像の露光完了後、レリーズタイムラグを一定とするための待機時間経過後に露光準備処理を開始することで表示部のブラックアウトを防止した実施例
3-3.(実施例3)露光未完了画像の表示予約をキャンセルして、表示部の表示画像の継続表示を行うことで、表示部のブラックアウトを防止した実施例
3-4.(実施例4)フレームメモリ格納済み最新画像のフレームメモリ間コピーを行うことで、メモリ切り換え後も同一画像を表示部に継続表示させて、表示部のブラックアウトを防止した実施例
4.(実施例5)記録用画像(CAP画像)の露光期間が規定時間以上であるか否かを判定し、判定結果に応じた表示制御を実行する実施例
5.撮像装置の実行する処理のシーケンスについて
6.その他の実施例について
7.本開示の構成のまとめ
まず、図1以下を参照して、撮像装置(カメラ)における画像の撮影、および表示処理の概要について説明する。
図1には、撮像装置における以下の処理例を示している。
(1)撮影処理非実行時(ライブビュー画像(LV)表示処理実行時)のデータ処理例
(2)撮影処理実行時(キャプチャ画像(CAP)記録処理実行時)のデータ処理例
一方、キャプチャ画像(CAP)とは、ユーザ(撮影者)が、撮像装置のレリーズボタン(シャッターボタン)を操作することで撮影される画像である。キャプチャ画像(CAP)は、撮像措置の記録部(メディア)に記録される。
すなわち、ライブビュー画像(LV)は、キャプチャ画像(CAP)より低画素の画像となる。
光学レンズ11を介して入射される光は撮像部、例えばCMOSイメージセンサなどによって構成される撮像素子12に入射し、光電変換による画像データを出力する。なお、この場合の出力画像は、表示部21に表示するための表示用画像(LV画像)である。
撮影処理が実行された場合には、高画素数の記録用画像を生成する必要があるため、撮像素子のほぼ全画素データの出力を行う。
AD変換部13は、入力信号のA/D変換、すなわちアナログ信号をデジタル信号に変換する処理を実行して、変換後のデジタル値を、フレームメモリ14に格納する。
すなわち、フレームメモリ14は、同時に2つの連続撮影された画像フレームを格納する。
すなわち、第1フレームメモリ(FM1)と、第2フレームメモリ(FM2)から、交互に撮影順に従って、順次、信号処理部(信号処理LSI)15に出力される。
表示部21は、例えばLCDやEVF等によって構成され、撮影者が確認することができる。
撮影者が、レリーズボタン(シャッターボタン)を操作(押下)すると、この(2)の処理が行われることになる。
レリーズラグは、カメラによって多少の差はあるが、多くのカメラにおいて、約15msec~30msecの時間となる。
図1では、(1)に示すLV画像の矢印を細く、(2)に示すCAP画像の矢印を太く示し、画素数の高低を矢印の太さで示している。
フレームメモリ14に格納された画像は、先行格納フレームから、順次、信号処理部(信号処理LSI)15に出力される。
すなわち、第1フレームメモリ(FM1)と、第2フレームメモリ(FM2)から、交互に撮影順に従って、順次、信号処理部(信号処理LSI)15に出力される。
この場合、信号処理部15は、記録部22に格納するための高画素の記録用画像(CAP画像)を生成するとともに、さらに、表示部21に表示するための表示用画像(LV画像)も併せて生成してメモリ16に格納する。表示用画像(LV画像)は、例えば、高画素画像である記録用画像(CAP画像)の間引き処理によって生成される低画素画像である。
一方、表示部21は、メモリ16に格納された低画素の表示用画像(LV画像)を表示する。
以上が、撮像装置における撮影実行時と非実行時の処理の概要である。
図2は、ユーザ(撮影者)による撮影処理、すなわちレリーズボタン(シャッターボタン)の押下処理が行われていない期間における処理、すなわち、撮像装置の表示部に表示用画像(LV画像)が表示される場合の処理シーケンスを説明するタイミングチャートである。
左から右に時間が経過する。
(a)撮像素子入力同期信号
(b)撮像素子の露光処理とフレームメモリに対する出力
(c1)第1フレームメモリ(FM1)の格納画像
(c2)第2フレームメモリ(FM2)の格納画像
(d)撮影操作(レリーズ(シャッター)操作)
(e)制御部の処理
(f)表示部入力同期信号
(g)表示部表示画像
撮像素子12は、この同期信号の入力に応じて、様々な処理の開始や、処理の切り換え等の実行する処理の更新を行う。
図に示すLV1、LV2、LV3・・は、表示部21に表示する表示用画像(LV画像)の露光処理を示している。
これらの各画像の露光処理は、16.7msecごとの同期信号ごとに実行される。
(c2)第2フレームメモリ(FM2)の格納画像
これらは、フレームメモリ14の2つのメモリ部である第1フレームメモリ(FM1)と、第2フレームメモリ(FM2)の格納画像のシーケンスを示している。
図に示す例では、まず、最初の表示用画像(LV1)が、第1フレームメモリ(FM1)に格納され、次の表示用画像(LV2)が、第2フレームメモリ(FM2)に格納される。
その後、表示用画像(LV3,LV4,LV5・・・)が、第1フレームメモリ(FM1)と、第2フレームメモリ(FM2)に交互に格納される。
図2は、ユーザ(撮影者)による撮影操作が行われていない場合の処理シーケンスであるので、撮影操作タイミングは図示していない。
なお、撮影処理が実行された場合の処理については、図3を参照して後段で説明する。
図には、(e)制御部の処理のシーケンスとしてFM1,FM2,FM1,FM2,・・・の矩形ボックスを示している。
FM2は、第2フレームメモリ(FM2)に格納される最新画像の表示予約処理と、第2フレームメモリ(FM2)に格納された最新画像を表示部21に表示する表示処理の制御を意味する。
(1)第1フレームメモリ(FM1)に対する表示予約と、第1フレームメモリ(FM1)の格納画像の表示処理、
(2)第2フレームメモリ(FM2)に対する表示予約と、第2フレームメモリ(FM2)の格納画像の表示処理、
この(1),(2)の処理を交互に実行する。
この制御処理により、表示部21には、フレームメモリ14の第1フレームメモリ(FM1)と第2フレームメモリ(FM2)の格納画像が交互に表示されることになる。
(g)表示部表示画像は、表示部21に表示される画像を示したものである。
左から右に時間が経過する。
(a)撮像素子入力同期信号
(b)撮像素子の露光処理とフレームメモリに対する出力
(c1)第1フレームメモリ(FM1)の格納画像
(c2)第2フレームメモリ(FM2)の格納画像
(d)撮影操作(レリーズ(シャッター)操作)
(e)制御部の処理
(f)表示部入力同期信号
(g)表示部表示画像
この露光準備処理は、例えば制御部から、撮像素子や信号処理部に対する制御信号の出力処理や、撮像素子や信号処理部における制御信号に基づく設定処理等の処理である。
撮像素子12は、表示部21に表示するための表示用画像(LV画像)を出力する際は、撮像素子の全画素データの出力を行うことなく、一部を間引いた低画素数の画像出力を行う。
しかし、撮影処理が実行された場合には、高画素数の記録用画像を生成する必要があるため、撮像素子のほぼ全画素データの出力を行う。
撮像素子12は、出力データを変更するためのモード切り換え処理を開始すると、表示用画像(LV画像)の露光処理、メモリ出力処理を停止せざる得なくなる。
なお、露光準備処理は、カメラによって多少の差はあるが、多くのカメラにおいて、約15msec~30msecの時間となる。
図に示す例では、表示用画像(LV5)の露光途中で、露光処理が停止されている。
これは、撮像素子12による表示用画像(LV画像)の露光処理停止により、フレームメモリ14から、次の表示予定の表示用画像(LV画像)の取得ができなくなるためである。
図に示す例では、表示用画像(LV4)の表示中に表示画像の停止、すなわちブラックアウト処理の要求が表示部に出力され、表示部21は画面をブラックアウト(黒画出力)に切り換えられる。
ステップS06において、撮像素子12は、記録用画像(CAP画像)の露光処理を開始する。
露光期間は、例えばユーザの設定した期間、すなわちシャッタースピードに対応して設定される。
これは、制御部の実行する表示予約シーケンスが、FM1,FM2,FM1.FM2・・と交互に実行され、記録用画像(CAP画像)の撮影開始前の最新の表示予約が第1フレームメモリ(FM1)に対して発行されており、次の表示予約は第2フレームメモリ(FM2)に対して発行されることに対応させたものである。
なお、この表示処理に際しては、第2フレームメモリ(FM2)に格納された記録用画像(CAP画像)に対して、表示部21の表示画素数に応じた間引き処理を行って表示する処理を行う。
その後、記録用画像(CAP画像)の露光処理、フレームメモリ14への格納処理が終了して、記録用画像(CAP画像)が表示可能となるまで、表示部21は、ブラックアウト(黒画出力)状態が継続してしまうことになる。
以下、このような表示部のブラックアウトの発生を防止した構成を有する本開示の実施例について説明する。
まず、図4を参照して本開示の撮像装置100の構成例について説明する。
図4に示す撮像装置100は、光学レンズ101、撮像素子102、AD変換部103、フレームメモリ104、信号処理部(信号処理LSI)105、メモリ106、表示部(LCD/EVF)107、記録部108、操作部109、制御部110を有する。
フレームメモリ104には、第1フレームメモリ(FM1)121、第2フレームメモリ(FM2)122が構成され、2つの画像フレームを格納可能な構成となっている。
なお、表示部107をタッチパネル形式としてユーザ操作部として利用することも可能である。
例えば、撮像素子102の処理タイミングを規定する同期信号の出力制御や、表示部107の表示画像の切り換えタイミングを規定する同期信号の出力制御等を実行する。
制御部110は、具体的には、図示しない記憶部に格納されたプログラムに従った処理を実行するCPU等によって構成される。
プログラムは、例えば、画像撮影、画像記録、画像表示処理の制御プログラム、同期信号出力制御プログラム等によって構成される。
AD変換部103は、入力信号のA/D変換、すなわちアナログ信号をデジタル信号に変換する処理を実行して、変換後のデジタル値を、フレームメモリ104に格納する。
すなわち、フレームメモリ14は、同時に2つの連続撮影された画像フレームを格納する。
すなわち、第1フレームメモリ(FM1)と、第2フレームメモリ(FM2)から、交互に撮影順に従って、順次、信号処理部(信号処理LSI)105に出力される。
なお、図4に示す例は、フレームメモリを2つ持つ構成であるが、1つのフレームメモリに順次、撮影画像を格納する構成としてもよい。
表示部107は、例えばLCDやEVF等によって構成され、撮影者が確認することができる。
また、記録部108は、メモリ106に格納された記録用画像(CAP画像)を格納する。
次に、表示部のブラックアウトを防止した撮像装置の実施例について説明する。
以下の各実施例について、順次、説明する。
(実施例1)表示用画像の露光完了後に露光準備処理を開始することで表示部のブラックアウトを防止した実施例
(実施例2)表示用画像の露光完了後、レリーズタイムラグを一定とするための待機時間経過後に露光準備処理を開始することで表示部のブラックアウトを防止した実施例
(実施例3)露光未完了画像の表示予約をキャンセルして、表示部の表示画像の継続表示を行うことで、表示部のブラックアウトを防止した実施例
(実施例4)フレームメモリ格納済み最新画像のフレームメモリ間コピーを行うことで、メモリ切り換え後も同一画像を表示部に継続表示させて、表示部のブラックアウトを防止した実施例
まず、実施例1として、表示用画像の露光完了後に露光準備処理を開始することで表示部のブラックアウトを防止した実施例について説明する。
図5は、先に説明した図3と同様、撮像装置の表示部に表示用画像(LV画像)を表示し、その間に、ユーザ(撮影者)による撮影処理、すなわちレリーズボタン(シャッターボタン)の押下処理が行われた場合の処理シーケンスを示している。
左から右に時間が経過する。
(a)撮像素子入力同期信号
(b)撮像素子の露光処理とフレームメモリに対する出力
(c1)第1フレームメモリ(FM1)の格納画像
(c2)第2フレームメモリ(FM2)の格納画像
(d)撮影操作(レリーズ(シャッター)操作)
(e)制御部の処理
(f)表示部入力同期信号
(g)表示部表示画像
(ステップS11)
まず、ステップS11において、図5の(d)撮影操作(レリーズ(シャッター)操作)のラインの中央付近に示すように、ユーザによる撮影操作、すなわち、レリーズボタン(シャッターボタン)の押下処理が行われる。
ステップS11において、ユーザによる撮影操作、すなわち、レリーズボタン(シャッターボタン)の押下処理が行われると、制御部110は、ステップS12において、撮像素子102で実行中の表示用画像(LV画像)の露光処理と露光データのフレームメモリ104に対する出力処理の完了まで待機する。
なお、この待機時間には、露光データのフレームメモリ104に対する格納時間、すなわち撮像素子102からの露光データ読み出し時間も含まれる。
制御部110は、ステップS12の待機処理の完了後に、ステップS13において、露光準備処理を開始する。
この露光準備処理は、例えば制御部110から、撮像素子102や信号処理部105に対する制御信号の出力処理や、撮像素子や信号処理部における制御信号に基づく設定処理等に要する時間である。
この露光準備処理には、例えば撮像素子102のモード切り換え処理が含まれる。
しかし、撮影処理が実行された場合には、高画素数の記録用画像を生成する必要があるため、撮像素子102のほぼ全画素データの出力を行う。
露光準備処理には、この撮像素子102の出力データを変更するためのモード切り換え処理等が含まれる。
制御部110は、ステップS13において露光準備処理を開始すると、さらに、ステップS14において、撮像素子102に対して露光停止処理、および記録用画像(CAP画像)露光処理の準備要求を行う。
撮像素子102は、記録用画像(CAP画像)露光処理の準備、例えば、高画素の出力データに変更するためのモード切り換え処理を開始する。この処理を開始すると、撮像素子102は、表示用画像(LV画像)の露光処理、メモリ出力処理を停止する。
制御部110は、ステップS14の露光準備処理開始前に実行済みの第1フレームメモリ(FM1)に対する表示予約に従って、ステップS15において、第1フレームメモリ(FM1)に格納されている最新画像、すなわち表示用画像(LV5)を読み出して、表示部107に表示する。
この表示画像は、上述したステップS12の待機処理の間に、第1フレームメモリ(FM1)に格納された表示用画像(LV5)である。
その後、露光準備処理が完了すると、制御部110は、ステップS16において、撮像素子102に露光準備処理が完了したことを通知し、記録用画像(CAP画像)の露光処理を開始させる。
ステップS17において、撮像素子102は、記録用画像(CAP画像)の露光処理を開始する。
露光期間は、例えばユーザの設定した期間、すなわちシャッタースピードに対応して設定される。
制御部110は、さらに、ステップS18において、記録用画像(CAP画像)の表示予約を実行し、ステップS19において記録用画像(CAP画像)の表示処理を実行する。
これは、制御部の実行する表示予約シーケンスが、FM1,FM2,FM1.FM2・・と交互に実行され、記録用画像(CAP画像)の撮影開始前の最新の表示予約が第1フレームメモリ(FM1)に対して発行されており、次の表示予約は第2フレームメモリ(FM2)に対して発行されることに対応する。
なお、この表示処理に際しては、第2フレームメモリ(FM2)に格納された記録用画像(CAP画像)に対して、表示部107の表示画素数に応じた間引き処理を行って表示する処理を行う。
この待機処理によって、レリーズボタン(シャッターボタン)の押下タイミングで露光中の表示用画像(LV5)をフレームメモリに格納することが可能となり、表示部107に表示用画像(LV5)を表示することができる。
記録用画像(CAP画像)がフレームメモリ104に格納され、表示可能となると、ステップS18~S19において、記録用画像(CAP画像)がフレームメモリ104から読み出されて、表示部107に表示される。
表示され、さらに、この表示用画像(LV5)の表示処理に継続して、記録用画像(CAP画像)が表示される。
すなわち、ブラックアウトを発生させることなく、表示部107に対する画像表示が継続して実行されることになる。
なお、本実施例について、フレームメモリを2つ持つ構成における処理例として説明したが、本実施例は、1つのフレームメモリに順次、撮影画像を格納する構成においても、同様の効果を奏することができる。
次に、実施例2として、表示用画像の露光完了後、レリーズタイムラグを一定とするための待機時間経過後に露光準備処理を開始することで表示部のブラックアウトを防止した実施例について説明する。
先に図5を参照して説明したように、実施例1では、撮影操作実行時点で実行中の表示用画像(LV画像)の露光の完了まで待機して、この待機時間経過後に、記録用画像(CAP画像)の露光準備処理を開始することで表示部のブラックアウトを防止する構成としていた。
レリーズボタン(シャッターボタン)を押下して、実際にカメラの撮像素子の露光処理が開始されるまでには、一定のタイムラグ(時間遅れ)がある。
このタイムラグは、レリーズタイムラグ、あるいはレリーズラグと呼ばれる。
レリーズタイムラグは、カメラによって多少の差はあるが、多くのカメラにおいて、レリーズラグは、約15msec~30msecの時間範囲にある。
1つのカメラでは一定時間、例えば20msec等の時間となる。
しかし、例えば、高速で移動する被写体を撮影する場合、レリーズボタン(シャッターボタン)を押下したタイミングの被写体と、レリーズタイムラグ経過後の被写体は、大きく異なる場合がある。このような場合には、撮影者が意図した被写体画像と異なる画像がカメラのメモリに記録されることになる。
レリーズタイムラグの時間が、レリーズボタン押下タイミングによって異なってしまうと、レリーズタイムラグを考慮した高度な撮影ができなくなり、撮影者の意図した画像の撮影が困難になる。
このように、撮影者の意図した画像を撮影するためにはレリーズタイムラグを一定にすることが要求される。
この問題について、図6を参照して説明する。
(1)表示用画像(LV5)の露光終了直前に撮影操作が実行された場合
(2)表示用画像(LV5)の露光開始時点で撮影操作が実行された場合
この場合のレリーズタイムラグは、待機時間(t11~t12)に、露光準備処理期間(t12~t13)を加えた時間(t11~t13)の時間となる。
図6(1)のケースでは、露光準備処理期間(t12~t13)が、この20msecであり、レリーズタイムラグ(t11~ta3)は、この20msecにに待機時間(t11~t12)を加えた時間となる。
この場合のレリーズタイムラグは、待機時間(t21~t22)に、露光準備処理期間(t22~t23)を加えた時間(t21~t23)の時間となる。
しかし、ケース(1)の待機時間(t11~t12)は、表示用画像(LV5)の露光終了直前の撮影操作開始時点(t11)から、表示用画像(LV5)の露光が終了してメモリに格納された時点(t12)までの時間であり、図から理解されるように図6(2)のケースより短く設定されている。
このように、図5を参照して説明した実施例1を適用した場合、ユーザ(撮影者)の撮影操作のタイミングによってレリーズタイムラグに差が生じるという問題が発生する。
具体的には、待機時間を想定される最長時間、すなわち、図6(2)に示すケースと同様、撮影操作が表示用画像(LV画像)の露光開始時点で実行されたものと想定して待機時間を設定する。このような待機時間の設定を行うことでレリーズタイムラグを一定にすることを可能とした。
図7は、本実施例2の処理シーケンスを説明するタイミングチャートである。
具体的には、撮像装置の表示部に表示用画像(LV画像)が表示されている期間に、ユーザ(撮影者)による撮影処理が実行され、撮影された記録用画像(CAP画)を表示部に表示する場合の処理シーケンスを示している。
左から右に時間が経過する。
(a)撮像素子入力同期信号
(b)撮像素子の露光処理とフレームメモリに対する出力
(c1)第1フレームメモリ(FM1)の格納画像
(c2)第2フレームメモリ(FM2)の格納画像
(d)撮影操作(レリーズ(シャッター)操作)
(e)制御部の処理
(f)表示部入力同期信号
(g)表示部表示画像
(ステップS21)
まず、ステップS21において、図7の(d)撮影操作(レリーズ(シャッター)操作)のラインの中央付近に示すように、ユーザによる撮影操作、すなわち、レリーズボタン(シャッターボタン)の押下処理が行われる。
ステップS21において、ユーザによる撮影操作、すなわち、レリーズボタン(シャッターボタン)の押下処理が行われると、制御部110は、ステップS22において、予め規定した待機時間が経過するまで、待機する。
この待機時間には、露光データのフレームメモリ104に対する格納時間、すなわち撮像素子102からの露光データ読み出し時間も含まれ、さらに、本実施例2においては、先に説明した実施例1とは異なり、露光途中の露光が完了した場合であっても、1フレームの露光にかかる露光時間を待ってから記録用画像の露光準備処理を開始する設定としている。
すなわち、本実施例2の待機時間は、撮影操作のタイミングにかかわらず一定となる。
制御部110は、ステップS22の待機処理の完了後に、ステップS23において、露光準備処理を開始する。
この露光準備処理は、例えば制御部110から、撮像素子102や信号処理部105に対する制御信号の出力処理や、撮像素子や信号処理部における制御信号に基づく設定処理等に要する時間である。
この露光準備処理には、例えば撮像素子102のモード切り換え処理が含まれる。
しかし、撮影処理が実行された場合には、高画素数の記録用画像を生成する必要があるため、撮像素子102のほぼ全画素データの出力を行う。
露光準備処理には、この撮像素子102の出力データを変更するためのモード切り換え処理等が含まれる。
制御部110は、ステップS23において露光準備処理を開始すると、さらに、ステップS24において、撮像素子102に対して露光停止処理、および記録用画像(CAP画像)露光処理の準備要求を行う。
撮像素子102は、記録用画像(CAP画像)露光処理の準備、例えば、高画素の出力データに変更するためのモード切り換え処理を開始する。この処理を開始すると、撮像素子102は、表示用画像(LV画像)の露光処理、メモリ出力処理を停止する。
制御部110は、ステップS24の露光準備処理開始前に実行済みの第1フレームメモリ(FM1)に対する表示予約に従って、ステップS25において、第1フレームメモリ(FM1)に格納されている最新画像、すなわち表示用画像(LV5)を読み出して、表示部107に表示する。
この表示画像は、上述したステップS22の待機処理の間に、第1フレームメモリ(FM1)に格納された表示用画像(LV5)である。
その後、露光準備処理が完了すると、制御部110は、ステップS26において、撮像素子102に露光準備処理が完了したことを通知し、記録用画像(CAP画像)の露光処理を開始させる。
ステップS27において、撮像素子102は、記録用画像(CAP画像)の露光処理を開始する。
露光期間は、例えばユーザの設定した期間、すなわちシャッタースピードに対応して設定される。
制御部110は、さらに、ステップS28において、記録用画像(CAP画像)の表示予約を実行し、ステップS29において記録用画像(CAP画像)の表示処理を実行する。
すなわち、1つの表示用画像(LV画像)の露光処理と、フレームメモリ104に対する出力処理(格納処理)に要する時間に相当する一定の待機時間の待機を行う。
この処理により、レリーズタイムラグ、すなわち、撮影操作から、撮影操作に対応する記録用画像(CAP画像)の露光開始までの時間は、(一定の待機時間)+(一定の露光準備処理時間)となり、常に一定となる。
記録用画像(CAP画像)がフレームメモリ104に格納され、表示可能となると、ステップS28~S29において、記録用画像(CAP画像)がフレームメモリ104から読み出されて、表示部107に表示される。
なお、この表示処理に際しては、第2フレームメモリ(FM2)に格納された記録用画像(CAP画像)に対して、表示部107の表示画素数に応じた間引き処理を行って表示する処理を行う。
表示され、さらにこの表示用画像(LV5)の表示処理に継続して、記録用画像(CAP画像)が表示される。
すなわち、ブラックアウトを発生させることなく、表示部107に画像表示が継続して実行されることになる。
なお、本実施例について、フレームメモリを2つ持つ構成における処理例として説明したが、本実施例は、1つのフレームメモリに順次、撮影画像を格納する構成においても、同様の効果を奏することができる。
つぎに、実施例3として、露光未完了画像の表示予約をキャンセルして、表示部の表示画像の継続表示を行うことで、表示部のブラックアウトを防止した実施例について説明する。
図8は、先に説明した図5と同様、撮像装置の表示部に表示用画像(LV画像)を表示し、その間に、ユーザ(撮影者)による撮影処理、すなわちレリーズボタン(シャッターボタン)の押下処理が行われた場合の処理を示している。
すなわち、撮像装置の表示部に表示用画像(LV画像)が表示されている期間に、ユーザ(撮影者)による撮影処理が実行され、撮影された記録用画像(CAP画)を表示部に表示する場合の処理シーケンスを示している。
左から右に時間が経過する。
(a)撮像素子入力同期信号
(b)撮像素子の露光処理とフレームメモリに対する出力
(c1)第1フレームメモリ(FM1)の格納画像
(c2)第2フレームメモリ(FM2)の格納画像
(d)撮影操作(レリーズ(シャッター)操作)
(e)制御部の処理
(f)表示部入力同期信号
(g)表示部表示画像
(ステップS31)
まず、ステップS31において、図8の(d)撮影操作(レリーズ(シャッター)操作)のラインの中央付近に示すように、ユーザによる撮影操作、すなわち、レリーズボタン(シャッターボタン)の押下処理が行われる。
ステップS31において、ユーザによる撮影操作、すなわち、レリーズボタン(シャッターボタン)の押下処理が行われると、制御部110は、ステップS32において、露光準備処理を開始する。
この露光準備処理は、先に説明した実施例1,2と同様の処理である。例えば制御部110から、撮像素子102や信号処理部105に対する制御信号の出力処理や、撮像素子や信号処理部における制御信号に基づく設定処理等に要する時間である。
この露光準備処理には、例えば撮像素子102のモード切り換え処理が含まれる。
制御部110は、ステップS32において露光準備処理を開始すると、さらに、ステップS33において、撮像素子102に対して露光停止処理、および記録用画像(CAP画像)露光処理の準備要求を行う。
撮像素子102は、記録用画像(CAP画像)露光処理の準備、例えば、高画素の出力データに変更するためのモード切り換え処理を開始する。この処理を開始すると、撮像素子102は、表示用画像(LV画像)の露光処理、メモリ出力処理を停止する。
本実施例3では、制御部110は、ステップS34において、露光処理が途中で停止され、フレームメモリに格納されていない表示用画像(LV5)の表示予約をキャンセルする処理を行う。
このキャンセル対象となる表示予約は、ステップS31の撮影操作の直前に実行された表示予約である。図8に示す撮像素子同期信号(ta5)の時点で行われた表示予約である。
この表示予約は、第1フレームメモリに格納予定の表示用画像(LV5)に対する表示予約である。
その後、露光準備処理が完了すると、制御部110は、ステップS35において、撮像素子102に露光準備処理が完了したことを通知し、記録用画像(CAP画像)の露光処理を開始させる。
ステップS36において、撮像素子102は、記録用画像(CAP画像)の露光処理を開始する。
露光期間は、例えばユーザの設定した期間、すなわちシャッタースピードに対応して設定される。
制御部110は、さらに、ステップS37において、記録用画像(CAP画像)の表示予約を実行し、ステップS38において記録用画像(CAP画像)の表示処理を実行する。
記録用画像(CAP画像)がフレームメモリ104に格納され、表示可能となると、ステップS37~S38において、記録用画像(CAP画像)がフレームメモリ104から読み出されて、表示部107に表示される。
なお、この表示処理に際しては、第2フレームメモリ(FM2)に格納された記録用画像(CAP画像)に対して、表示部107の表示画素数に応じた間引き処理を行って表示する処理を行う。
すなわち、ブラックアウトを発生させることなく、表示部107に画像表示が継続して実行されることになる。
なお、本実施例について、フレームメモリを2つ持つ構成における処理例として説明したが、本実施例は、1つのフレームメモリに順次、撮影画像を格納する構成においても、同様の効果を奏することができる。
次に、実施例4として、フレームメモリ格納済み最新画像のフレームメモリ間コピーを行うことで、メモリ切り換え後も同一画像を表示部に継続表示させて、表示部のブラックアウトを防止した実施例について説明する。
図9は、先に説明した図5と同様、撮像装置の表示部に表示用画像(LV画像)を表示し、その間に、ユーザ(撮影者)による撮影処理、すなわちレリーズボタン(シャッターボタン)の押下処理が行われた場合の処理シーケンスである。
すなわち、撮像装置の表示部に表示用画像(LV画像)が表示されている期間に、ユーザ(撮影者)による撮影処理が実行され、撮影された記録用画像(CAP画)を表示部に表示する場合の処理シーケンスを示している。
左から右に時間が経過する。
(a)撮像素子入力同期信号
(b)撮像素子の露光処理とフレームメモリに対する出力
(c1)第1フレームメモリ(FM1)の格納画像
(c2)第2フレームメモリ(FM2)の格納画像
(d)撮影操作(レリーズ(シャッター)操作)
(e)制御部の処理
(f)表示部入力同期信号
(g)表示部表示画像
(ステップS41)
まず、ステップS41において、図9の(d)撮影操作(レリーズ(シャッター)操作)のラインの中央付近に示すように、ユーザによる撮影操作、すなわち、レリーズボタン(シャッターボタン)の押下処理が行われる。
ステップS41において、ユーザによる撮影操作、すなわち、レリーズボタン(シャッターボタン)の押下処理が行われると、制御部110は、ステップS42において、露光準備処理を開始する。
この露光準備処理は、先に説明した実施例と同様の処理である。例えば制御部110から、撮像素子102や信号処理部105に対する制御信号の出力処理や、撮像素子や信号処理部における制御信号に基づく設定処理等に要する時間である。
この露光準備処理には、例えば撮像素子102のモード切り換え処理が含まれる。
制御部110は、ステップS42において露光準備処理を開始すると、さらに、ステップS43において、撮像素子102に対して露光停止処理、および記録用画像(CAP画像)露光処理の準備要求を行う。
撮像素子102は、記録用画像(CAP画像)露光処理の準備、例えば、高画素の出力データに変更するためのモード切り換え処理を開始する。この処理を開始すると、撮像素子102は、表示用画像(LV画像)の露光処理、メモリ出力処理を停止する。
本実施例4では、制御部110が、ステップS44において、第2フレームメモリ(FM2)に格納されている最新の表示用画像(LV4)を第1フレームメモリ(FM1)にコピーする処理を実行する。
図9に示す例では、第2フレームメモリ(FM2)に格納されている表示用画像(LV4)となる。
この最新の表示用画像(LV4)をもう1つのフレームメモリである第1フレームメモリ(FM1)にコピーする処理を実行する。
このように、表示用画像(LV4)は、2つのフレームメモリ(FM1,FM2)から順次、読み出されて表示部に継続して表示されることになる。
その後、露光準備処理が完了すると、制御部110は、ステップS46において、撮像素子102に露光準備処理が完了したことを通知し、記録用画像(CAP画像)の露光処理を開始させる。
ステップS47において、撮像素子102は、記録用画像(CAP画像)の露光処理を開始する。
露光期間は、例えばユーザの設定した期間、すなわちシャッタースピードに対応して設定される。
制御部110は、さらに、ステップS48において、記録用画像(CAP画像)の表示予約を実行し、ステップS49において記録用画像(CAP画像)の表示処理を実行する。
記録用画像(CAP画像)がフレームメモリ104に格納され、表示可能となると、ステップS48~S49において、記録用画像(CAP画像)がフレームメモリ104から読み出されて、表示部107に表示される。
なお、この表示処理に際しては、第2フレームメモリ(FM2)に格納された記録用画像(CAP画像)に対して、表示部107の表示画素数に応じた間引き処理を行って表示する処理を行う。
すなわち、ブラックアウトを発生させることなく、表示部107に画像表示が継続して実行されることになる。
次に、実施例5として、記録用画像(CAP画像)の露光期間が規定時間以上であるか否かを判定し、判定結果に応じた表示制御を実行する実施例について説明する。
一方、記録用画像(CAP画像)の露光期間が規定時間以上でない場合は、先に説明した実施例1~4のいずれかの処理を実行して、ブラックアウトのない表示処理を実行する。
しかし、その以前に、本来、動画像として表示されているべき表示用画像(LV4)、または表示用画像(LV5)が長い時間、継続して表示されると、この静止画が撮影画像であると誤認する可能性がある。
このような誤認処理を発生させないため、本実施例5では、記録用画像(CAP画像)の露光期間が規定時間以上である場合は、表示部107にブラックアウトを発生させ、記録用画像(CAP画像)の露光が完了し、フレームメモリに格納された後、ブラックアウト状態から記録用画像(CAP画像)表示に遷移させる。
図10は、先に説明した図5と同様、撮像装置の表示部に表示用画像(LV画像)を表示し、その間に、ユーザ(撮影者)による撮影処理、すなわちレリーズボタン(シャッターボタン)の押下処理が行われた場合の処理シーケンスを示している。
すなわち、撮像装置の表示部に表示用画像(LV画像)が表示されている期間に、ユーザ(撮影者)による撮影処理が実行され、撮影された記録用画像(CAP画)を表示部に表示する場合の処理シーケンスを示している。
左から右に時間が経過する。
(a)撮像素子入力同期信号
(b)撮像素子の露光処理とフレームメモリに対する出力
(c1)第1フレームメモリ(FM1)の格納画像
(c2)第2フレームメモリ(FM2)の格納画像
(d)撮影操作(レリーズ(シャッター)操作)
(e)制御部の処理
(f)表示部入力同期信号
(g)表示部表示画像
(ステップS51)
まず、ステップS51において、図10の(d)撮影操作(レリーズ(シャッター)操作)のラインの中央付近に示すように、ユーザによる撮影操作、すなわち、レリーズボタン(シャッターボタン)の押下処理が行われる。
ステップS51において、ユーザによる撮影操作、すなわち、レリーズボタン(シャッターボタン)の押下処理が行われると、制御部110は、ステップS52において、露光準備処理を開始する。
この露光準備処理は、先に説明した実施例と同様の処理である。例えば制御部110から、撮像素子102や信号処理部105に対する制御信号の出力処理や、撮像素子や信号処理部における制御信号に基づく設定処理等に要する時間である。
この露光準備処理には、例えば撮像素子102のモード切り換え処理が含まれる。
制御部110は、ステップS52において露光準備処理を開始すると、さらに、ステップS53において、撮像素子102に対して露光停止処理、および記録用画像(CAP画像)露光処理の準備要求を行う。
撮像素子102は、記録用画像(CAP画像)露光処理の準備、例えば、高画素の出力データに変更するためのモード切り換え処理を開始する。この処理を開始すると、撮像素子102は、表示用画像(LV画像)の露光処理、メモリ出力処理を停止する。
本実施例5では、制御部110は、ステップS54において、記録用画像(CAP画像)の露光期間が規定時間以上であるか否かを判定し、規定時間以上であると判定した場合は、表示部107に対してブラックアウト処理要求を行う。
その後、露光準備処理が完了すると、制御部110は、ステップS55において、撮像素子102に露光準備処理が完了したことを通知し、記録用画像(CAP画像)の露光処理を開始させる。
ステップS56において、撮像素子102は、記録用画像(CAP画像)の露光処理を開始する。
露光期間は、例えばユーザの設定した期間、すなわちシャッタースピードに対応して設定される。
制御部110は、さらに、ステップS57において、記録用画像(CAP画像)の表示予約を実行し、ステップS58において記録用画像(CAP画像)の表示処理を実行する。
なお、この表示処理に際しては、第2フレームメモリ(FM2)に格納された記録用画像(CAP画像)に対して、表示部107の表示画素数に応じた間引き処理を行って表示する処理を行う。
記録用画像(CAP画像)の露光期間が規定時間以上でないと判定した場合は、表示部107に対するブラックアウト処理要求は行わず、先に説明した実施例1~4のいずれかの処理を実行する。
この処理により、記録用画像(CAP画像)の露光期間が規定時間以上である場合に表示用画像(LV画像)が長期間静止画として表示され、ユーザ(撮影者)が撮影画像と勘違いするといった誤認処理を回避することができる。
なお、本実施例について、フレームメモリを2つ持つ構成における処理例として説明したが、本実施例は、1つのフレームメモリに順次、撮影画像を格納する構成においても、同様の効果を奏することができる。
次に、図11に示すフローチャートを参照して、撮像装置の制御部において実行する画像表示制御シーケンスについて説明する。
すなわち、記録用画像(CAP画像)の露光期間が規定時間以上であると判定した場合にブラックアウト処理を行い、記録用画像(CAP画像)の露光期間が規定時間以上でない場合は、ブラックアウトを行わず、先に説明した実施例1~4のいずれかの処理を実行する設定とした場合の画像表示制御シーケンスを説明するフローである。
以下、順次、各ステップの処理について説明する。
まず、ステップS101において、撮像装置100の制御部110は、撮影処理が実行されたか、すなわちユーザ(撮影者)によってレリーズボタンが押下されたか否かを判定する。これは、制御部110における操作部109からの入力検出処理として行われる。
まず、ステップS101において、撮影処理(レリーズボタン押下)が実行されていないと判定された場合の処理について説明する。
ステップS101において、撮影処理(レリーズボタン押下)が実行されていないと判定された場合、ステップS111に進み、制御部110は、予め規定された間隔で、表示画像フレームの切り換えを行って、表示用画像(LV画像)の表示処理を行う。
ステップS101において、撮影処理(レリーズボタン押下)が実行されたと判定した場合、ステップS102に進み、ステップS102において、制御部110は、ステップS101において検出された撮影操作に対応する記録用画像(CAP画像)の露光期間がしきい値(規定時間)以上であるか否かを判定する。
ステップS102において、露光期間がしきい値(規定時間)以上でないと判定した場合は、ステップS103に進む。
この場合、制御部110は、表示部107のブラックアウトを回避した処理、具体的には、先に説明した実施例1~4のいずれかの処理を実行し、露光準備処理を実行し、露光準備処理完了後に、撮影画像(記録用画像(CAP画像))の露光を開始する。
以下の各実施例について、順次、説明する。
(実施例1)表示用画像の露光完了後に露光準備処理を開始することで表示部のブラックアウトを防止した実施例
(実施例2)表示用画像の露光完了後、レリーズタイムラグを一定とするための待機時間経過後に露光準備処理を開始することで表示部のブラックアウトを防止した実施例
(実施例3)露光未完了画像の表示予約をキャンセルして、表示部の表示画像の継続表示を行うことで、表示部のブラックアウトを防止した実施例
(実施例4)フレームメモリ格納済み最新画像のフレームメモリ間コピーを行うことで、メモリ切り換え後も同一画像を表示部に継続表示させて、表示部のブラックアウトを防止した実施例
ステップS103において、露光準備処理が完了して撮影画像(記録用画像(CAP画像))の露光が開始されると、次にステップS104において、撮影画像(記録用画像(CAP画像))の露光処理とフレームメモリ104への格納処理が完了したか子中を判定する。
完了したと判定した場合に、ステップS107に進む。
ステップS107では、フレームメモリ104に格納された撮影画像(記録用画像(CAP画像))を読み出して表示部107に表示する。
次に、ステップS102において、露光期間がしきい値(規定時間)以上であると判定した場合のステップS105以下の処理について説明する。
この場合、制御部110は、ステップS105において、表示部107のブラックアウト処理を実行するとともに露光準備処理を開始し、露光準備処理完了後に、撮影画像(記録用画像(CAP画像))の露光を開始する。
このブラックアウトを行う理由の一つは、撮影画像(記録用画像(CAP画像))の露光期間が長い場合に実施例1~4の処理を行うと、表示用画像(LV画像)が長期間、静止画として表示されてしまい、ユーザ(撮影者)が撮影画像と勘違いするといった誤認処理が起こる可能性があり、これを回避するためである。
ステップS105において、露光準備処理が完了して撮影画像(記録用画像(CAP画像))の露光が開始されると、次にステップS106において、撮影画像(記録用画像(CAP画像))の露光処理とフレームメモリ104への格納処理が完了したか子中を判定する。
完了したと判定した場合に、ステップS107に進む。
ステップS107では、フレームメモリ104に格納された撮影画像(記録用画像(CAP画像))を読み出して表示部107に表示する。
次に、その他の実施例について説明する。
先に図4を参照して本開示の処理を実行する撮像装置の一例について説明した。
本開示の処理は、図4に示す撮像装置100の構成と異なる構成を有する撮像装置においても適用可能である。
図12に示す撮像装置200は、光学レンズ101、撮像素子デバイス210、信号処理部(信号処理LSI)105、メモリ106、表示部(LCD/EVF)107、記録部108、操作部109、制御部110を有する。
撮像素子デバイス210以外の構成は、先に図4を参照して説明した構成と同様である。
光学レンズ101を介して入射される光は撮像素子デバイス210の撮像素子211、例えばCMOSイメージセンサなどによって構成される撮像素子211に入射し、撮像素子211は、光電変換による画像データを同じ撮像デバイス210内に構成されたAD変換部212に出力する。
これらの2つのフレームメモリから、撮影順に画像データが信号処理部(信号処理LSI)105に出力される。
以下の処理は、先に図4を参照して説明した撮像装置100の処理と同様の処理となる。
この撮像デバイス210には、制御部110から制御信号、同期信号が入力され、同期信号に基づいて処理の開始、変更、終了等、更新処理が行われる。
以上、特定の実施例を参照しながら、本開示の実施例について詳解してきた。しかしながら、本開示の要旨を逸脱しない範囲で当業者が実施例の修正や代用を成し得ることは自明である。すなわち、例示という形態で本発明を開示してきたのであり、限定的に解釈されるべきではない。本開示の要旨を判断するためには、特許請求の範囲の欄を参酌すべきである。
(1) 撮像素子と、
前記撮像素子が取得する表示用画像を格納するフレームメモリと、
前記フレームメモリが格納する前記表示用画像を表示する表示部と、
撮像操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う制御部と、
を備える撮像装置。
前記記録用画像の露光処理、および前記記録用画像の前記フレームメモリへの格納処理の終了後、前記表示部の表示画像を前記表示用画像から前記記録用画像の表示に切り換える(2)に記載の撮像装置。
前記撮影操作の入力検出時に前記記録用画像の露光準備処理を開始するとともに、前記撮像素子における前記表示用画像の露光処理を停止させる(1)~(3)いずれかに記載の撮像装置。
前記撮影操作の入力検出時に前記撮像素子において露光中の前記表示用画像の露光完了に要する時間を待機する待機処理を実行し、待機完了後に前記記録用画像の露光準備処理を開始するとともに、
前記記録用画像の表示が可能となるまで、前記待機処理の間に露光され、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う(1)~(4)いずれかに記載の撮像装置。
前記撮影操作の入力検出時から、1枚の表示用画像フレームの露光処理の完了に要する時間を待機する待機処理を実行し、待機処理後に前記記録用画像の露光準備処理を開始するとともに、
前記記録用画像の表示が可能となるまで、前記待機処理の間に露光され、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う(1)~(5)いずれかに記載の撮像装置。
前記撮影操作の入力検出に応じて、前記撮影操作の入力前に実行済みの最新の表示予約処理をキャンセルする処理を行い、
キャンセル対象の表示予約処理以前の表示予約処理に対応して実行される前記表示部に対する表示用画像の表示処理を、前記記録用画像が表示可能となるまで継続することで前記表示部のブラックアウトを回避する表示制御を行う(1)~(6)いずれかに記載の撮像装置。
前記制御部は、
前記撮影操作の入力検出に応じて、前記2つのフレームメモリのいずれか一方のフレームメモリに格納された最新の表示用画像を、他方のフレームメモリにコピーして格納する処理を実行し、
前記記録用画像が表示可能となるまで、同一の表示用画像を前記2つのフレームメモリから交互に読み出して、前記表示部に表示することで前記表示部のブラックアウトを回避する表示制御を行う(1)~(7)いずれかに記載の撮像装置。
前記撮影操作に応じて前記撮像素子において実行される露光期間が、予め設定したしきい値以上であるか否かを判定し、
しきい値以上でないと判定した場合に、前記表示部のブラックアウトを回避する表示制御を行う(1)~(8)いずれかに記載の撮像装置。
前記撮影操作に応じて前記撮像素子において実行される露光期間が、予め設定したしきい値以上であるか否かを判定し、
しきい値以上であると判定した場合は、前記表示部に、ブラックアウトを回避することなく、ブラックアウトを発生させる表示制御を行う(1)~(9)いずれかに記載の撮像装置。
前記記録用画像の露光処理およびフレームメモリ格納処理の終了後、前記表示部をブラックアウト状態から前記記録用画像の表示に切り換える(10)に記載の撮像装置。
前記撮像素子の出力信号に対するAD変換処理を実行するAD変換部と、
前記AD変換部の生成したデジタル信号を格納するフレームメモリを構成要素とする撮像デバイス内に構成されている(1)~(11)いずれかに記載の撮像装置。
前記撮像装置は、
撮像素子と、
前記撮像素子による取得画像を格納するフレームメモリと、
前記フレームメモリの格納画像を表示する表示部と、
撮像装置において実行する処理の制御を行う制御部を有し、
前記制御部が、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの表示用画像を前記表示部に表示させる表示制御を行う画像処理方法。
前記撮像装置は、
撮像素子と、
前記撮像素子による取得画像を格納するフレームメモリと、
前記フレームメモリの格納画像を表示する表示部と、
撮像装置において実行する処理の制御を行う制御部を有し、
前記プログラムは、前記制御部に、
撮像操作の入力検出に応じて、記録用画像の露光準備処理を開始させ、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行わせるプログラム。
具体的には、例えば、撮像素子と、フレームメモリと、表示部と、制御部を有し、制御部は、撮像装置に対する撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、露光準備処理の完了後に撮像素子における記録用画像の露光処理と、記録用画像のフレームメモリへの格納処理を実行する。さらに、制御部は、露光準備処理の開始に伴い、撮像素子の表示用画像の露光を停止させ、記録用画像が表示可能となるまで、表示部に表示用画像を表示してブラックアウトを回避する。
これらの処理により、記録用画像の撮影時に、表示部のブラックアウトを回避する表示制御を行う装置、方法が実現される。
12 撮像素子
13 AD変換部
14 フレームメモリ
15 信号処理部
16 メモリ
21 表示部
22 記録部
101 光学レンズ
102 撮像素子
103 AD変換部
104 フレームメモリ
105 信号処理部
106 メモリ
107 表示部
108 記録部
109 操作部
110 制御部
121 第1フレームメモリ(FM1)
122 第2フレームメモリ(FM2)
200 撮像装置
210 撮像デバイス
211 撮像素子
212 AD変換部
213 フレームメモリ
251 第1フレームメモリ(FM1)
252 第2フレームメモリ(FM2)
Claims (14)
- 撮像素子と、
前記撮像素子が取得する表示用画像を格納するフレームメモリと、
前記フレームメモリが格納する前記表示用画像を表示する表示部と、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う制御部を有し、
前記制御部は、
前記撮影操作の入力検出時に前記記録用画像の露光準備処理を開始するとともに、前記撮像素子における前記表示用画像の露光処理を停止させる撮像装置。 - 撮像素子と、
前記撮像素子が取得する表示用画像を格納するフレームメモリと、
前記フレームメモリが格納する前記表示用画像を表示する表示部と、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う制御部を有し、
前記制御部は、
前記撮影操作の入力検出時に前記撮像素子において露光中の前記表示用画像の露光完了に要する時間を待機する待機処理を実行し、待機完了後に前記記録用画像の露光準備処理を開始するとともに、
前記記録用画像の表示が可能となるまで、前記待機処理の間に露光され、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う撮像装置。 - 撮像素子と、
前記撮像素子が取得する表示用画像を格納するフレームメモリと、
前記フレームメモリが格納する前記表示用画像を表示する表示部と、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う制御部を有し、
前記制御部は、
前記撮影操作の入力検出時から、1枚の表示用画像フレームの露光処理の完了に要する時間を待機する待機処理を実行し、待機処理後に前記記録用画像の露光準備処理を開始するとともに、
前記記録用画像の表示が可能となるまで、前記待機処理の間に露光され、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う撮像装置。 - 撮像素子と、
前記撮像素子が取得する表示用画像を格納するフレームメモリと、
前記フレームメモリが格納する前記表示用画像を表示する表示部と、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う制御部を有し、
前記制御部は、
前記撮影操作の入力検出に応じて、前記撮影操作の入力前に実行済みの最新の表示予約処理をキャンセルする処理を行い、
キャンセル対象の表示予約処理以前の表示予約処理に対応して実行される前記表示部に対する表示用画像の表示処理を、前記記録用画像が表示可能となるまで継続することで前記表示部のブラックアウトを回避する表示制御を行う撮像装置。 - 撮像素子と、
前記撮像素子が取得する表示用画像を格納するフレームメモリと、
前記フレームメモリが格納する前記表示用画像を表示する表示部と、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う制御部を有し、
前記フレームメモリは、2つの画像フレームを格納可能な2つのフレームメモリを有する構成であり、
前記制御部は、
前記撮影操作の入力検出に応じて、前記2つのフレームメモリのいずれか一方のフレームメモリに格納された最新の表示用画像を、他方のフレームメモリにコピーして格納する処理を実行し、
前記記録用画像が表示可能となるまで、同一の表示用画像を前記2つのフレームメモリから交互に読み出して、前記表示部に表示することで前記表示部のブラックアウトを回避する表示制御を行う撮像装置。 - 前記制御部は、前記記録用画像の露光準備処理の完了後に、前記撮像素子における前記記録用画像の露光処理と、該露光処理によって取得した前記記録用画像の前記フレームメモリへの格納処理を実行する請求項1~5いずれかに記載の撮像装置。
- 前記制御部は、
前記記録用画像の露光処理、および前記記録用画像の前記フレームメモリへの格納処理の終了後、前記表示部の表示画像を前記表示用画像から前記記録用画像の表示に切り換える請求項6に記載の撮像装置。 - 撮像素子と、
前記撮像素子が取得する表示用画像を格納するフレームメモリと、
前記フレームメモリが格納する前記表示用画像を表示する表示部と、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う制御部を有し、
前記制御部は、
前記撮影操作に応じて前記撮像素子において実行される露光期間が、予め設定したしきい値以上であるか否かを判定し、
しきい値以上でないと判定した場合に、前記表示部のブラックアウトを回避する表示制御を行う撮像装置。 - 前記制御部は、
前記撮影操作に応じて前記撮像素子において実行される露光期間が、予め設定したしきい値以上であるか否かを判定し、
しきい値以上であると判定した場合は、前記表示部に、ブラックアウトを発生させる表示制御を行う請求項8に記載の撮像装置。 - 前記制御部は、
前記記録用画像の露光処理およびフレームメモリ格納処理の終了後、前記表示部をブラックアウト状態から前記記録用画像の表示に切り換える請求項9に記載の撮像装置。 - 前記撮像素子は、
前記撮像素子の出力信号に対するAD変換処理を実行するAD変換部と、
前記AD変換部の生成したデジタル信号を格納するフレームメモリを構成要素とする撮像デバイス内に構成されている請求項1~10いずれかに記載の撮像装置。 - 撮像装置において実行する画像処理方法であり、
前記撮像装置は、
撮像素子と、
前記撮像素子による取得画像を格納するフレームメモリと、
前記フレームメモリの格納画像を表示する表示部と、
撮像装置において実行する処理の制御を行う制御部を有し、
前記制御部が、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの表示用画像を前記表示部に表示させる表示制御を行うとともに、
前記撮影操作の入力検出時に前記記録用画像の露光準備処理を開始するとともに、前記撮像素子における前記表示用画像の露光処理を停止させる表示制御を行う画像処理方法。 - 撮像装置において実行する画像処理方法であり、
前記撮像装置は、
撮像素子と、
前記撮像素子による取得画像を格納するフレームメモリと、
前記フレームメモリの格納画像を表示する表示部と、
撮像装置において実行する処理の制御を行う制御部を有し、
前記制御部が、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始し、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの表示用画像を前記表示部に表示させる表示制御を行うとともに、
前記撮影操作の入力検出時に前記撮像素子において露光中の前記表示用画像の露光完了に要する時間を待機する待機処理を実行し、待機完了後に前記記録用画像の露光準備処理を開始するとともに、
前記記録用画像の表示が可能となるまで、前記待機処理の間に露光され、前記フレームメモリに格納済みの前記表示用画像を前記表示部に表示させる表示制御を行う画像処理方法。 - 撮像装置において画像処理を実行させるプログラムであり、
前記撮像装置は、
撮像素子と、
前記撮像素子による取得画像を格納するフレームメモリと、
前記フレームメモリの格納画像を表示する表示部と、
撮像装置において実行する処理の制御を行う制御部を有し、
前記プログラムは、前記制御部に、
撮影操作の入力検出に応じて、記録用画像の露光準備処理を開始させ、前記記録用画像の表示が可能となるまで、前記フレームメモリに格納済みの表示用画像を前記表示部に表示させる表示制御を行わせるとともに、
前記撮影操作の入力検出時に前記記録用画像の露光準備処理を開始するとともに、前記撮像素子における前記表示用画像の露光処理を停止させる表示制御を行わせるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017067662 | 2017-03-30 | ||
JP2017067662 | 2017-03-30 | ||
PCT/JP2018/001784 WO2018179711A1 (ja) | 2017-03-30 | 2018-01-22 | 撮像装置、および画像処理方法、並びにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018179711A1 JPWO2018179711A1 (ja) | 2020-02-06 |
JP7014222B2 true JP7014222B2 (ja) | 2022-02-01 |
Family
ID=63674779
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019508609A Active JP7014222B2 (ja) | 2017-03-30 | 2018-01-22 | 撮像装置、および画像処理方法、並びにプログラム |
Country Status (4)
Country | Link |
---|---|
US (2) | US10951828B2 (ja) |
JP (1) | JP7014222B2 (ja) |
CN (2) | CN110431837B (ja) |
WO (1) | WO2018179711A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10951828B2 (en) * | 2017-03-30 | 2021-03-16 | Sony Corporation | Imaging apparatus and image processing method |
JPWO2021014999A1 (ja) | 2019-07-24 | 2021-01-28 | ||
JP7377048B2 (ja) | 2019-09-30 | 2023-11-09 | キヤノン株式会社 | 画像処理装置及び方法、及び撮像装置 |
US20240121503A1 (en) * | 2021-02-25 | 2024-04-11 | Sony Group Corporation | Image processing apparatus and method, and program |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010273182A (ja) | 2009-05-22 | 2010-12-02 | Nikon Corp | 撮像装置 |
WO2013190762A1 (ja) | 2012-06-21 | 2013-12-27 | ソニー株式会社 | 撮像装置および画像表示方法 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3469463B2 (ja) * | 1998-06-05 | 2003-11-25 | 富士写真フイルム株式会社 | 画像処理装置 |
JP4565504B2 (ja) * | 2005-08-08 | 2010-10-20 | カシオ計算機株式会社 | 画像合成装置 |
JP4742242B2 (ja) * | 2005-09-30 | 2011-08-10 | カシオ計算機株式会社 | 撮像装置及びそのプログラム |
JP4687451B2 (ja) * | 2005-12-27 | 2011-05-25 | カシオ計算機株式会社 | 撮像装置、及びスルー画像表示方法 |
JP2008017238A (ja) * | 2006-07-07 | 2008-01-24 | Casio Comput Co Ltd | 撮像装置、スルー画像表示制御方法、及びスルー画像表示制御プログラム |
JP5273998B2 (ja) * | 2007-12-07 | 2013-08-28 | キヤノン株式会社 | 撮像装置、その制御方法及びプログラム |
JP4544332B2 (ja) * | 2008-04-07 | 2010-09-15 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム |
JP5240213B2 (ja) * | 2010-02-09 | 2013-07-17 | 株式会社リコー | 撮像装置および撮像装置の制御方法 |
JP6765820B2 (ja) * | 2016-02-10 | 2020-10-07 | オリンパス株式会社 | カメラ |
US10951828B2 (en) * | 2017-03-30 | 2021-03-16 | Sony Corporation | Imaging apparatus and image processing method |
-
2018
- 2018-01-22 US US16/495,258 patent/US10951828B2/en active Active
- 2018-01-22 WO PCT/JP2018/001784 patent/WO2018179711A1/ja active Application Filing
- 2018-01-22 CN CN201880020140.1A patent/CN110431837B/zh active Active
- 2018-01-22 CN CN202110810344.9A patent/CN113542650B/zh active Active
- 2018-01-22 JP JP2019508609A patent/JP7014222B2/ja active Active
-
2021
- 2021-02-17 US US17/177,803 patent/US11272110B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010273182A (ja) | 2009-05-22 | 2010-12-02 | Nikon Corp | 撮像装置 |
WO2013190762A1 (ja) | 2012-06-21 | 2013-12-27 | ソニー株式会社 | 撮像装置および画像表示方法 |
Also Published As
Publication number | Publication date |
---|---|
US10951828B2 (en) | 2021-03-16 |
CN113542650B (zh) | 2024-04-16 |
US20200021739A1 (en) | 2020-01-16 |
CN110431837A (zh) | 2019-11-08 |
WO2018179711A1 (ja) | 2018-10-04 |
US20210168291A1 (en) | 2021-06-03 |
JPWO2018179711A1 (ja) | 2020-02-06 |
US11272110B2 (en) | 2022-03-08 |
CN110431837B (zh) | 2021-08-17 |
CN113542650A (zh) | 2021-10-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11024342B2 (en) | Digital image processing apparatus and method of controlling the same | |
JP7014222B2 (ja) | 撮像装置、および画像処理方法、並びにプログラム | |
JP2001111934A (ja) | 電子カメラ装置 | |
JP5644882B2 (ja) | 撮像装置、画角補正方法、及びプログラム | |
US20130286254A1 (en) | Image capturing apparatus, control method, and recording medium | |
WO2017090233A1 (ja) | 撮像装置 | |
US10839497B2 (en) | Image processing apparatus and method | |
TW200904184A (en) | Imaging device, method of processing captured image signal and computer program | |
JP5661351B2 (ja) | 撮像装置 | |
JP2009089037A (ja) | 撮影制御装置、撮影制御方法、撮影制御プログラム、および撮影装置 | |
JP2018148512A (ja) | 撮像装置と撮像装置の制御方法、及びプログラム | |
JP7014221B2 (ja) | 撮像装置、および画像撮影制御方法、並びにプログラム | |
US11153516B2 (en) | Image capture apparatus and control method therefor | |
JP2016005250A (ja) | 撮像装置及びその制御方法、プログラム、記憶媒体 | |
JP7176518B2 (ja) | 撮像装置、および画像処理方法、並びにプログラム | |
JP6997544B2 (ja) | 撮像装置及びその制御方法、プログラム、記憶媒体 | |
JP5321108B2 (ja) | カメラ、レンズ収差補正プログラム、およびレンズ収差補正プログラムを記録したコンピュータ読み取り可能な記録媒体 | |
JP2006203707A (ja) | 撮像装置および撮像装置の制御方法 | |
JP2021131443A (ja) | 電子機器 | |
JP2018011222A (ja) | 撮像装置及び撮像装置の制御方法 | |
JP2017022542A (ja) | 撮像装置、撮像装置の制御方法 | |
JP2015220592A (ja) | 撮像装置、撮像方法、及び撮像プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201215 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211012 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211201 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211221 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220103 |