JP6210062B2 - 撮像制御装置、撮像制御方法およびプログラム - Google Patents

撮像制御装置、撮像制御方法およびプログラム Download PDF

Info

Publication number
JP6210062B2
JP6210062B2 JP2014520981A JP2014520981A JP6210062B2 JP 6210062 B2 JP6210062 B2 JP 6210062B2 JP 2014520981 A JP2014520981 A JP 2014520981A JP 2014520981 A JP2014520981 A JP 2014520981A JP 6210062 B2 JP6210062 B2 JP 6210062B2
Authority
JP
Japan
Prior art keywords
zoom
continuous shooting
imaging
image
subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014520981A
Other languages
English (en)
Other versions
JPWO2013190880A1 (ja
Inventor
広志 池田
広志 池田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2014520981A priority Critical patent/JP6210062B2/ja
Publication of JPWO2013190880A1 publication Critical patent/JPWO2013190880A1/ja
Application granted granted Critical
Publication of JP6210062B2 publication Critical patent/JP6210062B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
    • G02B7/04—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification
    • G02B7/10—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification by relative axial movement of several lenses, e.g. of varifocal objective lens
    • G02B7/102—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification by relative axial movement of several lenses, e.g. of varifocal objective lens controlled by a microcomputer
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/08—Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/743—Bracketing, i.e. taking a series of images with varying exposure conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/144—Movement detection
    • H04N5/145—Movement estimation
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
    • G03B2205/0046—Movement of one or more optical elements for zooming

Description

本技術は、撮像制御装置に関し、特に、ズーム連写を制御する撮像制御装置および撮像制御方法ならびに当該方法をコンピュータに実行させるプログラムに関する。
近年、人物等の被写体を撮像して撮像画像を生成し、この生成された撮像画像を記録するデジタルスチルカメラ等の撮像装置が普及している。なお、このような撮像装置では、ユーザーの利便性を高めるため、様々な撮像方法が提案されている。
例えば、撮像とズームとを繰り返して連写を行い、ズーム倍率が異なる複数の画像を取得する撮像方法（ズーム連写）を行う撮像装置が提案されている（例えば、特許文献１参照。）。
特開２００５−３０１２６９号公報
上述の従来技術では、容易にズーム連写を行うことができる。しかしながら、上述の従来技術では、ズーム連写を開始すると、所定のズーム位置までズームと撮像とを繰り返すのみであるため、ユーザーが目的とする画像の取得が難しい場合がある。
すなわち、ユーザーの意図や被写体の状態を適切に反映しながらズーム連写を行うことが重要である。
本技術はこのような状況に鑑みて生み出されたものであり、ズーム連写を適切に実行させることを目的とする。
本技術は、上述の問題点を解消するためになされたものであり、その第１の側面は、ズーム動作と撮像動作とを繰り返して連写を行うズーム連写を開始するよりも前に生成された画像に基づいて上記ズーム連写の被写体を解析し、当該解析結果に基づいて決定されたズーム倍率の遷移条件を用いて上記ズーム連写を実行させる制御を行う制御部を具備する撮像制御装置、撮像制御方法およびプログラムである。これにより、ズーム連写を開始するよりも前の撮像動作により生成された画像に基づいてズーム連写の被写体を解析し、この解析結果に基づいて決定されたズーム倍率の遷移条件を用いてズーム連写を実行させる制御を行わせるという作用をもたらす。
また、この第１の側面において、上記制御部は、上記被写体に含まれている動体の移動速度に応じて上記ズーム倍率の遷移条件を決定するようにしてもよい。これにより、被写体に含まれている動体の移動速度に応じてズーム倍率の遷移条件が決定されるという作用をもたらす。
また、この第１の側面において、上記制御部は、ユーザーにより指定された注目被写体の移動速度に応じて上記ズーム倍率の遷移条件を決定するようにしてもよい。これにより、ユーザーにより指定された注目被写体の移動速度に応じてズーム倍率の遷移条件が決定されるという作用をもたらす。
また、この第１の側面において、前記ズーム動作の際におけるズームレンズの移動距離を前記ズーム倍率の遷移条件として決定するようにしてもよい。これにより、ズーム動作の際におけるズームレンズの移動距離が決定されるという作用をもたらす。
また、この第１の側面において、上記制御部は、上記ズーム連写を行っている間に実行される画像処理の処理内容を変更させて上記ズーム倍率の遷移条件を決定するようにしてもよい。これにより、ズーム連写を行っている間に実行される画像処理の処理内容の変更によりズーム倍率の遷移条件が決定されるという作用をもたらす。
また、この第１の側面において、上記制御部は、上記ズーム連写により生成されたＲＡＷ画像を圧縮符号化した画像を生成するまでの過程で行われる画像処理の負荷を、上記被写体に含まれている動体の移動速度の増加に応じて軽減させて上記ズーム倍率の遷移条件を決定するようにしてもよい。これにより、ＲＡＷ画像を圧縮符号化した画像を生成するまでの過程で行われる画像処理の負荷が、被写体に含まれている動体の移動速度の増加に応じて軽減されてズーム連写が行われるという作用をもたらす。
また、この第１の側面において、上記制御部は、ユーザーによる撮像指示が入力されている撮像指示入力期間において上記ズーム連写を実行させる制御を行うようにしてもよい。これにより、ユーザーによる撮像指示が入力されている期間においてズーム連写を実行させるという作用をもたらす。
また、この第１の側面において、上記制御部は、シャッターボタンが押下されている期間を上記撮像指示入力期間として上記制御を行うようにしてもよい。これにより、シャッターボタンが押下されている期間においてズーム連写を実行させるという作用をもたらす。
また、この第１の側面において、上記制御部は、上記ズーム連写により駆動されたズームレンズが、上記ズームレンズの駆動範囲の端部に達した場合には、上記シャッターボタンの押下にかかわらずに上記ズーム連写を終了させるようにしてもよい。これにより、ズーム連写により駆動されたズームレンズが、ズームレンズの駆動範囲の端部に達した場合にズーム連写を終了させるという作用をもたらす。
本技術によれば、ズーム連写を適切に実行させることができるという優れた効果を奏し得る。
本技術の第１の実施の形態における撮像装置１００の機能構成の一例を示すブロック図である。 本技術の第１の実施の形態においてズーム連写により撮像が行われる際の撮像装置１００の動作の遷移と、撮像画像の遷移との関係を模式的に示す図である。 本技術の第１の実施の形態の撮像装置１００によるズーム連写と、他の撮像装置によるズーム連写とを模式的に示す図である。 本技術の第１の実施の形態の撮像装置１００のズーム連写モードにおいて撮像する際の撮像処理手順例を示すフローチャートである。 本技術の第２の実施の形態における撮像装置（撮像装置３００）の機能構成の一例を示すブロック図である。 本技術の第２の実施の形態の撮像装置３００において、動体の移動速度に応じて設定されるズーム間隔の一例を示す図である。 本技術の第２の実施の形態の撮像装置３００により動体に応じてズーム間隔が設定される場合のズーム連写と、動体に応じてズーム間隔が設定されない場合のズーム連写とを比較するための図である。 本技術の第２の実施の形態の撮像装置３００において動体に応じてズーム連写する際の撮像処理手順例を示すフローチャートである。 本技術の第３の実施の形態において、ユーザーが注目被写体を指定する際に表示部１７２に表示される表示画面の一例を示す図である。 本技術の第３の実施の形態の撮像装置において、ユーザーが指定した注目被写体に応じてズーム連写する際の撮像処理手順例を示すフローチャートである。 本技術の第４の実施の形態の撮像装置（撮像装置３００）によって動体をズーム連写する際に、画像処理の内容を変更してズーム倍率の上昇速度を速くする例を示す図である。
以下、本技術を実施するための形態（以下、実施の形態と称する）について説明する。説明は以下の順序により行う。
１．第１の実施の形態（撮像制御：ズーム連写で違和感の少ない一連の画像を取得する例）
２．第２の実施の形態（撮像制御：被写体に含まれる動体に応じてズーム連写のズーム間隔を決定する例）
３．第３の実施の形態（撮像制御：ユーザーにより指定された注目被写体の動きに応じてズーム連写のズーム間隔を決定する例）
４．第４の実施の形態（撮像制御：画像処理の処理時間がズームレンズの移動時間より長い場合に、画像処理を軽くしてズーム連写を行う例）
＜１．第１の実施の形態＞
［撮像装置の機能構成例］
図１は、本技術の第１の実施の形態における撮像装置１００の機能構成の一例を示すブロック図である。
撮像装置１００は、被写体を撮像して画像データ（デジタルデータ）を生成し、この生成した画像データを画像コンテンツ（静止画コンテンツまたは動画コンテンツ）として記録するもの（例えば、コンパクトデジタルカメラ）である。なお、図１では、撮像装置１００の機能構成のうち、ズームしながら所定間隔で撮像を行って、ズーム倍率が異なる複数の撮像画像を取得するモード（ズーム連写モード）において画像を撮像する際にあまり使用しない機能の構成については省略する。
撮像装置１００は、レンズ部１１０と、シャッタ１２５と、撮像素子１２０と、操作受付部１３０と、制御部１４０と、信号処理部１５０と、記録制御部１６１と、記録部１６２と、表示制御部１７１と、表示部１７２とを備える。また、撮像装置１００は、ズーム連写設定部２２０と、駆動部１８０と、レンズ位置検出部１８５と、露光制御部１９０とを備える。
レンズ部１１０は、被写体からの光（被写体光）を集光するためのものである。このレンズ部１１０は、ズームレンズ１１１と、絞り１１２と、フォーカスレンズ１１３とを備える。
ズームレンズ１１１は、駆動部１８０の駆動により光軸方向に移動することにより焦点距離を変動させて、撮像画像に含まれる被写体の倍率を調整するものである。このズームレンズ１１１は、鏡胴における現在位置がレンズ位置検出部１８５により検出される。なお、この検出された現在位置は、例えば、現在のズーム倍率の算出などに用いられる。
絞り１１２は、撮像装置１００に入射する被写体からの入射光の光量を調整するための遮蔽物である。
フォーカスレンズ１１３は、光軸方向に移動することによりフォーカスを調整するものである。このフォーカスレンズ１１３は、鏡胴における現在位置がレンズ位置検出部１８５により検出される。なお、この検出された現在位置は、例えば、フォーカス制御におけるレンズの移動先の算出などに用いられる。
シャッタ１２５は、上下方向に移動する幕体により撮像素子１２０の露光時間を制御するものである。
撮像素子１２０は、被写体からの入射光を電気信号に光電変換するものであり、被写体からの入射光を受光して電気信号を生成する。また、撮像素子１２０は、例えば、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサおよびＣＣＤ（Charge Coupled Device）センサにより実現される。
操作受付部１３０は、ユーザーの操作を受け付けるものである。この操作受付部１３０は、例えば、ズーム連写を設定する選択操作を受け付けた場合には、その選択操作を知らせる信号を制御部１４０に供給する。また、操作受付部１３０は、シャッターボタン（図示せず）が押下された場合には、その押下を知らせる信号を制御部１４０に供給する。
制御部１４０は、撮像装置１００における各部動作を制御するものである。なお、図１では、主要な信号線のみを示し、他は省略する。例えば、この制御部１４０は、ズーム連写を行うためのモード（ズーム連写モード）で撮像装置１００が動作している状態において、シャッターボタンが押下された場合には、ズーム連写を開始する。この制御部１４０は、ズーム連写を開始する場合には、まず、ズーム連写の際の撮像条件を決定するための画像（設定用画像）を取得させる。そして、制御部１４０は、この画像に基づいて、ズーム連写で撮像する際の撮像条件（フォーカス位置、露出（Exposure）、ホワイトバランス（ＷＢ：White Balance））をズーム連写設定部２２０に決定させる。その後、制御部１４０は、シャッターボタンが押下されている間において決定された条件に基づいてズーム連写が行われるように各部を制御して、複数の画像を撮像させる。なお、ズーム連写は、ズームレンズがテレ端（最望遠）に達するか、シャッターボタンの押下が終了するまで継続される。なお、ズーム連写については、図２を参照して説明するため、ここでの説明を省略する。
信号処理部１５０は、撮像素子１２０から供給された電気信号に所定の信号処理を施して画像信号を補正するものである。この信号処理部１５０は、例えば、撮像素子１２０から供給された電気信号をデジタルの電気信号（画素値）に変換した後に、黒レベル補正、欠陥補正、シェーディング補正、混色補正、ホワイトバランス補正、γ補正、デモザイク処理等の信号処理を行う。信号処理部１５０は、これらの補正処理を施した撮像画像の信号（画像信号）のうち、記録部１６２において記録する画像信号（例えば、ズーム連写により撮像された撮像画像の信号）を、記録制御部１６１に供給する。また、信号処理部１５０は、これらの補正処理を施した撮像画像のうち、表示部１７２に表示する画像信号（例えば、ライブビュー画像の信号）を、表示制御部１７１に供給する。また、信号処理部１５０は、ズーム連写を開始する際には、設定用画像を、ズーム連写設定部２２０に供給する。
記録制御部１６１は、記録部１６２における画像コンテンツ（画像ファイル）の記録の制御を行うものである。例えば、この記録制御部１６１は、ズーム連写により撮像された撮像画像の画像信号が信号処理部１５０から供給された場合には、この画像信号に圧縮処理（例えば、ＪＰＥＧ（Joint Photographic Experts Group）方式）を施す。そして、記録制御部１６１は、この圧縮処理を施したデータ（記録画像データ）を記録部１６２に供給し、記録部１６２に記録させる。
記録部１６２は、記録制御部１６１から供給される記録画像データを画像コンテンツとして記録するものである。例えば、この記録部１６２として、記録用ディスクメディア（ＤＶＤ（Digital Versatile Disk）等）や、半導体メモリ（メモリカード等）のリムーバブルな記録媒体（１または複数の記録媒体）を用いることができる。また、これらの記録媒体は、撮像装置１００に内蔵するようにしてもよく、撮像装置１００から着脱可能とするようにしてもよい。
表示制御部１７１は、表示部１７２における表示を制御するものである。この表示制御部１７１は、信号処理部１５０から画像信号が供給された場合には、この画像信号に基づいて表示する画像を生成し、この生成した画像のデータ（表示画像データ）を表示部１７２に供給して表示画像を表示させる。
表示部１７２は、表示制御部１７１から供給される表示画像データに基づいて、各種画像を表示するものである。この表示部１７２は、例えば、カラー液晶パネルにより実現され、撮像した画像や、各種の設定画面などを表示する。
ズーム連写設定部２２０は、ズーム連写を行う場合において、ズーム連写で複数の画像を取得するように撮像装置１００の各部を設定するものである。例えば、ズーム連写設定部２２０は、ズーム連写モードにおいて、シャッターボタンが押下された場合には、最初に、設定用画像に基づいてズーム連写の撮像条件（露光、ホワイトバランス等）を決定する。また、ズーム連写設定部２２０は、ズーム連写におけるズーム倍率の遷移条件（ズーム倍率の変化の度合い）を決定する。ズーム連写設定部２２０は、ズーム倍率の変化の度合いとして、ズーム連写の際のズーム間隔を決定し、駆動部１８０に供給する。なお、本技術の第１の実施の形態では、所定のズーム間隔（予め設定されているズーム間隔）でズーム連写が行われる例を説明する。被写体に応じてズーム間隔が設定される例については、本技術の第２および第３の実施の形態において説明する。
ズーム連写設定部２２０は、その決定した撮像条件に関する情報を、信号処理部１５０、駆動部１８０、および、露光制御部１９０に供給し、決定した条件でズーム連写が行われるように各部を設定する。なお、ズーム連写設定部２２０および制御部１４０は、請求の範囲に記載の制御部の一例である。
駆動部１８０は、レンズ部１１０におけるレンズを駆動するものである。この駆動部１８０は、例えば、ズーム連写における露光と露光との間において、ズーム連写設定部２２０から供給されるズーム間隔ほどズームレンズ１１１を駆動させる。
レンズ位置検出部１８５は、ズームレンズ１１１およびフォーカスレンズ１１３の鏡胴における位置を検出するものである。このレンズ位置検出部１８５は、検出したフォーカスレンズ１１３の位置およびズームレンズ１１１の位置に関する情報を、駆動部１８０に供給する。また、レンズ位置検出部１８５は、ズームレンズ１１１の位置に関する情報を、制御部１４０に供給する。
露光制御部１９０は、シャッタ１２５の開閉するタイミングを制御することにより、撮像素子１２０の露光時間を制御するものである。この露光制御部１９０は、撮像素子１２０から供給された画像データに基づいて、適切な光量を算出（自動露光（ＡＥ：Automatic Exposure））する。そして、露光制御部１９０は、算出した光量に基づいて、撮像素子１２０の露光時間を算出し、この算出した露光時間に基づいてシャッタ１２５を開閉して露光時間を制御する。また、露光制御部１９０は、ズーム連写により撮像する場合には、ズーム連写設定部２２０から供給されるズーム連写の撮像条件の露光時間に関する情報に基づいてシャッタ１２５を開閉し、ズーム連写における各撮像の露光時間を制御する。
次に、撮像装置１００が行うズーム連写について、図２を参照して説明する。
［撮像装置が行うズーム連写を行う際の動作の遷移例］
図２は、本技術の第１の実施の形態においてズーム連写により撮像が行われる際の撮像装置１００の動作の遷移と、撮像画像の遷移との関係を模式的に示す図である。
この図２では、共通の時間軸の上に、ユーザーによるシャッターボタンの操作状態と、撮像装置１００の動作状態とが示されている。なお、各動作状態として示す期間の長さは模式的なものであり、各期間の時間長の割合を示すものではない。
また、図２では、ズーム連写により撮像される複数の画像における構図を示すための複数の画像（画像２２１乃至２２３）が示されている。
図２に示すように、シャッターボタンが押下されるまで、撮像装置１００はライブビュー画像（撮像素子が受光している被写体の像のリアルタイム画像）が表示画面（表示部１７２）に表示される動作状態（ライブビュー動作）である。そして、シャッターボタンが押下されると、撮像装置１００はズーム連写の動作を開始する。
シャッターボタンが押下されると、撮像装置１００は、被写体を撮像してズーム連写の設定を決定するための画像（設定用画像）を取得する。図２では、この設定用画像を生成する期間が、設定用画像準備期間Ｐ１として示されている。なお、図２では、説明の便宜上、ライブビュー動作後に新たな画像を取得して設定用画像として用いる例について説明するが、ライブビュー動作において取得した最新の画像を設定用画像として用いるようにしてもよい。
そして、この取得した設定用画像に基づいて、ズーム連写を行う際の撮像条件（露出、ホワイトバランス）がズーム連写設定部２２０により決定される（図２の条件算出期間Ｐ２）。なお、設定用画像に基づいて決定される撮像条件は、このズーム連写が終わるまで使用される。
その後、撮像条件の決定が終了すると、撮像装置１００は、１枚目の記録用の画像を生成するための露光を行う（図２の露光期間Ｐ３）。これにより、決定された撮像条件に基づいて被写体が撮像される。
そして、露光が終了すると、撮像装置１００は、予め設定されたズーム間隔ほどズームレンズを望遠側（テレ側）に移動させる（図２のズーム期間Ｐ４）。このズームレンズの移動が終了すると、撮像装置１００は、２枚目の記録用の画像を撮像するための露光を、条件算出期間Ｐ２で決定した露出やホワイトバランスに基づいて行う（図２の露光期間Ｐ５）。
その後、２枚目の画像の露光が終わると、予め設定されたズーム間隔ほどズームレンズを望遠側に移動させる（図２のズーム期間Ｐ６）。撮像装置１００は、このような露光期間とズーム期間との繰り返しを、ズームレンズがテレ端（最望遠）に達するか、シャッターボタンの押下が終了するまで継続する。図２では、４枚の記録用画像を撮像してシャッターボタンの押下を終了した例が示されている。
なお、撮像装置１００は、２枚目以降の記録用の画像を撮像する際にも、設定用画像に基づいて決定した撮像条件を用いて撮像する。図２には、４回目の撮像が行われた直後にシャッターボタンの押下が終了した例が示されている。
このようにズーム連写を行うことにより、画像２２１乃至２２３に示すように、ズーム倍率が異なる複数の画像を取得することができる。また、この複数の画像を撮像する際の撮像条件には全て同じ撮像条件（設定用画像から決定された撮像条件）を用いているため、色合いが同じになり、違和感の少ない一連の画像を取得することができる。
また、ユーザーがシャッターボタンを押下したタイミングにおけるズーム倍率からズーム連写を開始し、シャッターボタンの押下を終了したタイミングでズーム連写を終了とすることで、ユーザーが必要としない画像を生成するムダな撮像の回数を減らすことができる。また、シャッターボタンを押下したタイミングにおけるズーム倍率からズーム連写を開始することで、ユーザーの構図の意図が反映された画像を少なくとも１枚は取得することができる。
［効果例］
図３は、本技術の第１の実施の形態の撮像装置１００によるズーム連写と、他の撮像装置によるズーム連写とを模式的に示す図である。
図３のａには、他の撮像装置によるズーム連写において撮像される画像（画像２５１および２５２）が、ズームレンズの位置を示す軸とともに示されている。なお、画像２５１は、ズーム連写の開始時に撮像された画像を示し、画像２５２は、ズーム連写の終了時に撮像された画像を示している。他の撮像装置では、ズーム連写において撮像される複数の画像ごとに撮像条件が設定される。すなわち、露出やホワイトバランスが画像ごとに異なる。このため、画像２５１および２５２に示すように、画像の色合いが画像ごとに異なってしまう場合がある。
また、他の撮像装置では、予め設定されているズーム倍率になるまでズーム連写が行われるため、ムダな撮像が多くなる。
図３のｂには、撮像装置１００によるズーム連写において撮像される画像（画像２５３および２５４）が、ズームレンズの位置を示す軸とともに示されている。なお、画像２５３は、図３のａの画像２５１と同じ倍率の際の撮像画像であり、画像２５４は、図３のａの画像２５２と同じ倍率の際の撮像画像である。図２において示したように、撮像装置１００によるズーム連写では、設定用画像を用いて決定された撮像条件を用いて複数の画像が撮像される。このため、ズーム連写において撮像された一連の画像における色合いが同じになり、違和感の少ない一連の画像を取得することができる。
［撮像装置の動作例］
次に、本技術の第１の実施の形態における撮像装置１００の動作について図面を参照して説明する。
図４は、本技術の第１の実施の形態の撮像装置１００のズーム連写モードにおいて撮像する際の撮像処理手順例を示すフローチャートである。
まず、シャッターボタンが押下されたか否かが、制御部１４０により判断される（ステップＳ９０１）。そして、シャッターボタンが押下されていないと判断された場合には（ステップＳ９０１）、シャッターボタンが押下されるまで待機する。
一方、シャッターボタンが押下されたと判断された場合には（ステップＳ９０１）、被写体が撮像され、ズーム連写の撮像条件を決定するための画像（設定用画像）が生成され、被写体が解析される（ステップＳ９０２）。そして、この解析結果に基づいて、ズーム連写の撮像条件が、ズーム連写設定部２２０により決定される（ステップＳ９０３）。その後、この決定された撮像条件に基づいて露光が行われ、記録用の画像が撮像される（ステップＳ９０４）。
続いて、予め設定されているズーム間隔ほどズームレンズ１１１が望遠側に駆動されるズーム処理が行われる（ステップＳ９０５）。その後、シャッターボタンの押下が継続しているか否かが、制御部１４０により判断される（ステップＳ９０６）。そして、シャッターボタンの押下が継続していないと判断された場合には（ステップＳ９０６）、撮像処理手順は終了する。
一方、シャッターボタンの押下が継続していると判断された場合には（ステップＳ９０６）、ズームレンズ１１１がテレ端（望遠端）に達したか否かが、制御部１４０により判断される（ステップＳ９０７）。そして、ズームレンズ１１１がテレ端に達したと判断された場合には（ステップＳ９０７）、撮像処理手順は終了する。
なお、ズームレンズがテレ端に達していないと判断された場合には（ステップＳ９０７）、ステップＳ９０４に戻り、次の記録用の画像の生成が行われる。
このように、本技術の第１の実施の形態によれば、ズーム連写を開始する直前に決定した撮像条件（露光時間、ホワイトバランス）に基づいてズーム連写における複数の撮像画像を生成することにより、同じ条件でズーム連写における複数の画像を取得することができる。これにより、一連の画像の色合いが同じになり、違和感の少ない一連の画像を取得することができる。また、シャッターボタンの押下を終了したタイミングでズーム連写を終了とすることで、ユーザーが必要としない画像を生成するムダな撮像の回数を減らすことができる。すなわち、本技術の第１の実施の形態によれば、ズーム連写を適切に実行させることができる。
なお、本技術の第１の実施の形態では、ズーム連写の際にズームレンズをテレ端側に移動させる場合（ズームイン）について説明したが、ズーム方向を逆（ズームアウト）にしてズーム連写を行う場合についても同様に実施することができる。
また、本技術の第１の実施の形態では、シャッターボタンを押し込むと（全押しすると）ズーム連写が開始される例について説明した。シャッターボタンの半押しでフォーカスを調整し、全押しで連写を開始する撮像装置の場合には、半押しの状態で撮像されるライブビュー画像からズーム連写の撮像条件を決定し、全押しで記録用の撮像の撮像が開始されるようにしても良い。すなわち、図４のフローチャートのステップＳ９０２およびステップＳ９０３がシャッターボタンの半押しで行われ、シャッターボタンが全押しされるとステップＳ９０４以降が行われるようにしても良い。
＜２．第２の実施の形態＞
本技術の第１の実施の形態では、ズーム連写における撮像条件として、露光およびホワイトバランスをズーム連写設定部２２０が決定する例について説明した。すなわち、本技術の第１の実施の形態では、シャッターボタンの押下を開始したタイミングにおける被写体に応じて、ズーム連写における複数の画像の露光およびホワイトバランスが決定される。
なお、本技術の第１の実施の形態では、予め決定されているズーム間隔に基づいてズームレンズが駆動される。このズーム間隔についても、シャッターボタンの押下を開始したタイミングにおける被写体に応じて適切な間隔が設定されるようにすると、ユーザーが求める画像がズーム連写により複数枚取得できる確率がより高まる。
そこで、本技術の第２の実施の形態では、被写体に含まれている動体の移動速度に応じてズーム間隔が設定される例について、図５乃至図９を参照して説明する。
［撮像装置の機能構成例］
図５は、本技術の第２の実施の形態における撮像装置（撮像装置３００）の機能構成の一例を示すブロック図である。
なお、図５において示す撮像装置３００は、図１において示した撮像装置１００の変形例であり、被写体解析部３１０をさらに備えている点のみが異なる。そこで、撮像装置１００と同一の構成については同じ符号を付して説明を省略し、ここでは、被写体解析部３１０に着目して説明する。
被写体解析部３１０は、信号処理部１５０から供給された撮像画像を解析して、被写体に含まれる物体を解析するものである。この被写体解析部３１０は、例えば、設定用画像と、設定用画像の１つ前に取得された画像（例えば、ライブビュー画像）とを比較して、被写体の位置の遷移（ズレ）を検出し、被写体に動体が含まれているか否かを解析する。なお、この動体の解析方法は種々の方法が考えられるが、例えば、ブロックマッチング法などを用いて検出した動きベクトルを用いて行うことができる。
なお、動体の動きの方向としては、光軸方向（撮像装置３００へ向かってくるか離れていく方向）と、光軸の直交方向（撮像画像上の上下左右方向）とがあるが、本技術の第２の実施の形態では、光軸の直交方向へ動く動体を想定して説明する。
そして、被写体解析部３１０は、動体が含まれていると解析した場合には、その動体の移動速度を解析する。被写体解析部３１０は、解析結果をズーム連写設定部２２０に供給する。
なお、この図５で示す撮像装置３００において、ズーム連写設定部２２０は、被写体解析部３１０から動体の移動速度が供給された場合には、この移動速度に基づいて、ズーム連写の際のズーム動作における移動距離（ズーム間隔）を決定する。すなわち、ズーム連写設定部２２０は、この移動速度に基づいて、ズーム連写におけるズーム倍率の遷移条件を決定する。なお、このズーム間隔の決定は、例えば、動体の移動速度とズーム間隔との関係を示す情報をズーム連写設定部２２０が予め保持し、この情報に基づいてズーム間隔を決定することにより行われる。
次に、動体が被写体に含まれていると被写体解析部３１０が解析した場合に設定されるズーム間隔の一例について、図６を参照して説明する。
［動体の移動速度とズーム間隔との関係例］
図６は、本技術の第２の実施の形態の撮像装置３００において、動体の移動速度に応じて設定されるズーム間隔の一例を示す図である。
図６のａには、横軸を動体の移動速度を示す軸とし、縦軸をズーム間隔を示す軸として、動体の移動速度の増加に応じてズーム間隔が段階的に大きくなる例を示すグラフが示されている。また、図６のｂには、図６のａと別の例として、横軸を動体の移動速度を示す軸とし、縦軸をズーム間隔を示す軸として、動体の移動速度の増加に応じてズーム間隔が除去に大きくなる例を示すグラフが示されている。
図６のａに示すようにズーム間隔を決定する場合には、移動速度の範囲（上限の速度を示す閾値と下限の速度を示す閾値との間）と、ズーム間隔とが関連付けられた情報をズーム連写設定部２２０に保持させ、この情報に基づいてズーム間隔が決定される。
また、図６のｂに示すようにズーム間隔を決定する場合には、動体の移動速度からズーム間隔を導き出す数式をズーム連写設定部２２０に保持させて、この数式に基づいてズーム間隔が決定される。
図６のａおよび図６のｂに示すように、動体の移動速度の増加に応じてズーム間隔を広げると、動体が光軸の直交方向に大きく動く前にズームアップすることができ、動体の動きに起因する画像間の差異を低減することができる。
すなわち、動体の移動速度の増加に応じてズーム間隔を調整することにより、動体に対しても適切な設定でズーム連写を行うことができる。
［効果例］
図７は、本技術の第２の実施の形態の撮像装置３００により動体に応じてズーム間隔が設定される場合のズーム連写と、動体に応じてズーム間隔が設定されない場合のズーム連写とを比較するための図である。
図７のａには、動体に応じてズーム間隔が設定されない場合のズーム連写が示され、図７のｂには、動体に応じてズーム間隔が設定される場合のズーム連写が示されている。
なお、図７では、図７のａの画像３３１および図７のｂの画像３５１に示すように、画像の中央の人物と、画像の左端付近の建物と、画像の右上付近の太陽とが被写体として撮像される状態において、人物が左方向へ移動していることを想定して説明する。また、図７では、ズーム期間の終了でズームレンズの移動が終了することを想定する。ズーム期間の途中でズームレンズの移動が終了する場合については、本技術の第４の実施の形態として図１１を参照して説明するため、ここでの説明を省略する。
図７のａでは、ズーム連写の開始時の露光（露光期間Ｐ３１）において撮像された画像として画像３３１が示され、７回目のズームの後の露光（露光期間Ｐ３２）において撮像された画像として画像３３２が示されている。また、図７のａでは、１２回目のズームの後の露光（露光期間Ｐ３３）において撮像された画像として画像３３３が示されている。画像３３２は、人物が画像の中央付近に撮像されているものの、画像３３１と人物のサイズがそれほど変わらない。一方、画像３３３は、画像３３１より人物のサイズがかなり大きいものの、画像の左端付近に人物が撮像されている。
図７のａに示すような動体に応じてズーム間隔が設定されない撮像装置では、動体の有無にかかわらずにズーム間隔が設定される。動体が無い場合や移動速度が遅い場合には問題は生じないが、動体が高速に動く場合においてズーム倍率が上昇するのに時間がかかると、ユーザーが求めるズーム倍率になったタイミングでは、撮像に適した位置から動体が既に離れている可能性がある。
すなわち、被写体に動体が含まれている場合には、ズーム連写において、広角側で撮像した画像と望遠側で撮像した画像との間でズレが発生し、被写体が大きくずれたり、動体が枠外に出てしまったりする。このため、同じ位置を撮像しているにもかかわらず、ユーザーが欲しい構図の画像が得られない可能性がある。
これに対し、撮像装置３００では、動体の移動速度に応じてズーム間隔が設定され、図７のｂに示すように、動体の位置ずれが少ないとともに倍率の変化が大きい一連の画像を取得することができる。
図７のｂでは、ズーム連写の開始時の露光（露光期間Ｐ４１）において撮像された画像として画像３５１が示され、４回目のズームの後の露光（露光期間Ｐ４２）において撮像された画像として画像３５２が示されている。なお、図７のｂの場合では、１回のズーム動作（ズーム期間Ｐ４５）では、図７のａの３回分のズームと同じ距離ほどズームレンズを移動させることとする。すなわち、画像３５２を撮像する際のズームレンズの光軸方向の位置と、図７のａの画像３３３を撮像する際のズームレンズの光軸方向の位置とは同じ位置（ズーム倍率）となる。
図７のｂに示すように、動体の移動速度が速いほど大きいズーム間隔を設定すると、露光の回数が減少する分、ズーム倍率の変化が速くなる。これにより、動体が大きく移動してしまう前にズーム倍率を上げることができ、動体の位置ずれが少ないとともに倍率の変化が大きい一連の画像を取得することができる。
［撮像装置の動作例］
次に、本技術の第２の実施の形態における撮像装置３００の動作について図面を参照して説明する。
図８は、本技術の第２の実施の形態の撮像装置３００において動体に応じてズーム連写する際の撮像処理手順例を示すフローチャートである。
なお、図８において示すフローチャートは、図４において示したフローチャートの変形例であり、被写体を解析して動体を検出し、この動体の移動速度に応じてズーム間隔が設定される手順が加わる点のみが異なる。そこで、図８のフローチャートでは、図４のフローチャートと同一の手順には図４と同一の符号を付してここでの説明を省略する。
ステップＳ９０３において、ズーム連写設定部２２０によりズーム連写の撮像条件が決定されると、次に、被写体の解析処理が被写体解析部３１０により行われる（ステップＳ９２１）。続いて、被写体に動体が含まれている否かが、被写体解析部３１０により判断される（ステップＳ９２２）。
そして、動体が含まれていないと判断された場合には（ステップＳ９２２）、基準のズーム間隔（最も小さいズーム間隔）がズーム連写のズーム間隔に設定され（ステップＳ９２３）、ステップＳ９０４に進む。
一方、動体が含まれていると判断された場合には（ステップＳ９２２）、動体の移動速度に応じたズーム間隔がズーム連写設定部２２０により設定され（ステップＳ９２４）、ステップＳ９０４に進む。なお、ステップＳ９２１乃至ステップＳ９２４は、請求の範囲に記載の制御手順の一例である。
また、ステップＳ９０４において記録用の画像が撮像された後に、設定されたズーム間隔に基づいてズーム処理が行われ（ステップＳ９２５）、ステップＳ９０６に進む。
このように、本技術の第２の実施の形態によれば、被写体に含まれる動体の移動速度に応じてズーム間隔を設定することにより、動体の位置ずれが少ないとともに倍率の変化が大きい一連の画像を取得することができる。すなわち、本技術の第２の実施の形態によれば、動体を含む被写体をズーム連写する際にユーザーが決定した構図が崩れないように撮像することができ、ズーム連写を適切に実行させることができる。
なお、本技術の第２の実施の形態では、光軸の直交方向に動体が動いていることを想定したが、光軸方向に動いている場合も同様であり、動体の光軸の移動速度に応じてズーム間隔を設定することにより、ズーム連写を適切に実行させることができる。例えば、撮像装置へ向かう方向に動く動体の場合には、ズームによる動体のサイズの変化が大きくなる（大きくなるのが速くなる）ため、ズーム間隔を小さく設定する。また、撮像装置から離れる方向に動く動体の場合には、ズームによる動体のサイズの変化が小さくなる（大きくなるのが遅くなる）ため、ズーム間隔を大きく設定する。すなわち、動体の移動方向および移動速度に適切なズーム間隔を設定することにより、ズーム連写を適切に実行させることができる。
＜３．第３の実施の形態＞
本技術の第２の実施の形態では、被写体に動体が含まれている場合にズーム間隔を調整する例について説明した。これにより、ユーザーが決定した構図とズーム連写による撮像画像とのズレを低減しつつ、ズーム倍率の変化が大きいズーム連写を行うことができる。しかしながら、場合によっては、被写体に含まれる特定の物体（注目被写体）にのみ注目してズーム連写を行いたい場合がある。このような場合において、注目被写体が動体でないにもかかわらずに注目被写体以外の動体に合わせてズーム間隔を設定すると、注目被写体のサイズが異なる画像を多く撮像したいにもかかわらずに、広いズーム間隔で少数の撮像画像を取得するズーム連写が行われる可能性がある。
そこで、本技術の第３の実施の形態では、ユーザーが指定した注目被写体に応じてズーム連写の撮像条件が決定される例について、図９および図１０を参照して説明する。
なお、本技術の第３の実施の形態の撮像装置の機能構成は、図５において示した撮像装置３００の機能構成と同様のものであるため、本技術の第３の実施の形態では、図５の撮像装置３００の機能構成を参照して説明する。
［注目被写体の設定画面の表示例］
図９は、本技術の第３の実施の形態において、ユーザーが注目被写体を指定する際に表示部１７２に表示される表示画面の一例を示す図である。
なお、注目被写体の指定方法として、図９のａでは、被写体解析部３１０が識別可能な複数の物体の種類（タイプ）のうちから注目被写体としたい物体をユーザーが予め選択する例を説明する。また、図９のｂでは、ズーム連写の開始前のライブビュー動作中に、表示画面（表示部１７２）に表示されたライブビュー画像において表示されている物体のうちから注目被写体としたい物体をユーザーが指定する例を説明する。
図９のａには、注目被写体のタイプを指定するための設定画面の一例を示す表示画面が示されている。
例えば、撮像装置の設定のメニュー画面において、ズーム連写に関する設定項目のうちの注目被写体のタイプ指定の項目を選択すると、図９のａに示すような表示画面（画面４１０）が表示される。この表示画面では、被写体解析部３１０の識別可能な物体が注目被写体とする物体のタイプの選択肢として表示され、ユーザーが選択することにより注目被写体とする物体のタイプが決定される。図９のａの画面４１０では、選択肢の一例として、犬と、車と、人物と、電車とが示されている。
なお、被写体解析部３１０による物体認識は、例えば、各物体の特徴を示す情報を予め保持し、その保持する特徴を備える被写体を検出することにより行われる。例えば、被写体解析部３１０は、物体の特徴を示す画像（テンプレート画像）と、撮像画像とのマッチングにより被写体に含まれている物体を識別する。
この画面４１０が表示部１７２に表示されている状態において、注目したい物体をユーザーが選択して決定する（ＯＫボタンを押す）と、決定後に行われるズーム連写の撮像条件の設定の際に、被写体にその選択した物体が含まれているか否かが解析される。そして、選択した物体が含まれていると解析された場合には、その物体の移動速度に応じてズーム間隔が決定される。なお、被写体にその選択した物体が含まれているが静止している場合や、被写体に含まれる動体が他の種類の物体である場合には、基準のズーム間隔（最も小さいズーム間隔）が設定される。
図９のｂには、ライブビュー画像に表示されている物体のうちからユーザーが注目被写体を指定する場合に表示される表示画面（画面４２０）の一例が示されている。
ここでは、撮像装置３００には、タッチパネル機能付の液晶パネルが設けられていることとする。ユーザーは、ライブビュー画像において表示されている物体のうちから、注目被写体に指定したい物体をタッチする。そうすると、注目被写体を示す枠（枠４２１）が表示されるとともに、その枠内の物体が注目被写体として決定される。図９のｂの画面４２０には、木々、車、人、犬、および、家により構成される被写体が表示されているライブビュー画像において、ユーザーが人の顔をタッチし、人の顔が注目被写体に設定された例が示されている。
注目被写体を指定した後のシャッターボタンの押下により行われるズーム連写の撮像条件の設定では、タッチにより指定された注目被写体の移動速度に応じてズーム間隔が決定され、この決定されたズーム間隔を用いてズーム連写が行われる。
なお、図９のｂでは、説明の便宜上、タッチパネル機能付の液晶パネルが撮像装置３００に設けられている場合を想定して説明したが、タッチパネルが設けられていない撮像装置の場合にも同様に実施することができる。この場合には、十字キーでカーソルを移動させて物体を選択して決定ボタンを押すことにより、タッチパネルと同様に注目被写体を設定することができる。
［撮像装置の動作例］
次に、本技術の第３の実施の形態における撮像装置の動作について図面を参照して説明する。
図１０は、本技術の第３の実施の形態の撮像装置において、ユーザーが指定した注目被写体に応じてズーム連写する際の撮像処理手順例を示すフローチャートである。
なお、図１０において示すフローチャートは、図８において示したフローチャートの変形例であり、注目被写体を指定する手順が加わる点のみが異なる。そこで、図１０のフローチャートでは、図８のフローチャートと同一の手順には図８と同一の符号を付してここでの説明を省略する。
まず、注目被写体の設定操作があるか否かが、制御部１４０により判断される（ステップＳ９３１）。そして、注目被写体の設定操作がないと判断された場合には、ステップＳ９０１へ進む。
一方、注目被写体の設定操作があると判断された場合には、注目被写体が設定され（ステップＳ９３２）、その後、ステップＳ９０１に進む。例えば、図９のａに示すように注目被写体とする物体の種類を設定する場合には、図９のａの画面４１０に示すような表示画面を介したユーザーの選択により、注目被写体とする物体の種類が決定される。また、図９のｂに示すようにライブビュー画像の被写体に含まれている物体を注目被写体として設定する場合には、ユーザーにより指定された物体が注目被写体として決定される。
また、ステップＳ９２１において、被写体の解析処理が被写体解析部３１０により行われると、注目被写体の設定があるか否かが、ズーム連写設定部２２０により判断される（ステップＳ９３３）。すなわち、ステップＳ９３２において注目被写体が設定されている場合には、注目被写体の設定がありと判断される。そして、注目被写体の設定がないと判断された場合には（ステップＳ９３３）、ステップＳ９２３に進む。
一方、注目被写体の設定がありと判断された場合には（ステップＳ９３３）、注目被写体が動体であるか否かが判断される（ステップＳ９３４）。そして、注目被写体が動体でないと判断された場合には（ステップＳ９３４）、ステップＳ９２３に進む。なお、このステップＳ９３４において、注目被写体とする物体の種類をステップＳ９３２において選択したもののその種類の物体が被写体に含まれていない場合にも、ステップＳ９２３に進む。
また、注目被写体が動体であると判断された場合には（ステップＳ９３４）、注目被写体の移動速度に基づいて、ズーム間隔がズーム連写設定部２２０により設定される（ステップＳ９３５）。
このように、本技術の第３の実施の形態によれば、ユーザーが指定した注目被写体に応じてズーム連写が行われることにより、ズーム連写を適切に実行させることができる。
＜４．第４の実施の形態＞
本技術の第２および第３の実施の形態では、動体の移動速度に応じてズーム間隔を設定する例について説明した。なお、本技術の第１乃至第３の実施の形態では、ズーム連写を行っている最中に撮像された画像の処理状態を特に考慮せずに説明した。撮像された画像は、撮像装置に設けられているメモリ（例えば、ＤＲＡＭ（Dynamic Random Access Memory））に一端貯められて、順次画像処理された後に保存される。ここで、ズーム連写の最中にメモリが一杯になった場合には、メモリに空きができるまで撮像が停止する。これにより、撮像間隔が広がってズーム倍率の上昇速度が遅くなる場合がある。ズーム倍率の上昇速度が遅くなっても、被写体が静止体の場合には、特に問題は発生しない。しかしながら、動体を撮像している場合には、動体が動いているために、撮像が停止している最中にユーザーが欲する画像の撮像を逃す可能性がある。このため、動体を撮像する場合には、撮像が停止している状態が可能な限り発生しないことが望ましい。
そこで、本技術の第４の実施の形態では、動体の速度に応じて画像処理の処理内容を軽くしてズーム倍率の上昇速度を制御する例を説明する。これにより、メモリの空き容量不足が原因で撮像が停止するのを防止し、ズーム倍率の上昇が遅くなるのを軽減させることができる。なお、機能構成図は、図５において示したものと同様のものであるため、図５を参照してここでの説明を省略する。
［動作の比較例］
図１１は、本技術の第４の実施の形態の撮像装置（撮像装置３００）によって動体をズーム連写する際に、画像処理の内容を変更してズーム倍率の上昇速度を速くする例を示す図である。
図１１のａには、画像処理の負荷が重いため、メモリにおける空き容量の増加が遅い場合のズーム連写の一例が示されている。
図１１のａでは、共通の時間軸の上に、ズーム連写における動作遷移（露光期間、ズーム期間、待ち期間）と、何枚目の画像を画像処理しているのかを示す画像処理動作と、画像が一時的に保持されるメモリに保持された画像の枚数（メモリの画像保持量）とが示されている。なお、動作遷移では、ズームレンズの駆動および撮像素子の露光のいずれもが行われない期間を待ち期間とする。また、メモリの画像保持量には、画像処理される前の生の画像であるＲＡＷ画像の枚数と、画像処理によりＲＡＷ画像がＪＰＥＧ圧縮されて生成されたＪＰＥＧ画像の枚数とが示されている。
なお、画像が一時的に保持されるメモリの容量のサイズは、説明の便宜上、ＲＡＷ画像が５枚まで入ることとする。また、ＪＰＥＧ画像は、ＲＡＷ画像の約１／４のサイズになることを想定する。すなわち、ＪＰＥＧ画像のみがメモリに保持される場合には、２０枚までが保持可能である。
また、図１１のａでは、ＪＰＥＧ画像の生成には、３回の露光期間と、４回のズーム期間とを足し合わせた時間長が必要であることを想定する。なお、この時間長は、４回の露光期間と３回のズーム期間とを足し合わせた期間でもある。
ここで、画像処理が重い場合における撮像動作とメモリの画像保持量との関係について説明する。１回目の露光期間（露光期間Ｐ５１）が終わると、この露光により生成されたＲＡＷ画像がメモリに保持される。また、このＲＡＷ画像の圧縮処理も開始される。そして、１枚目のＲＡＷ画像の圧縮が終了するまでは、生成されたＲＡＷ画像が次々とメモリに保持される。一方、圧縮が完了するまでは、ＪＰＥＧ画像は増加しない。
図１１のａのタイミングチャートでは、５回目の露光（露光期間Ｐ５２）が開始される前に１枚目のＲＡＷ画像の圧縮が終了する。これにより、露光期間Ｐ５２のタイミングでは、３枚のＲＡＷ画像と、１枚のＪＰＥＧ画像とがメモリに保持される。また、この露光期間Ｐ５２の開始時に、次の圧縮処理（２枚目の画像のＪＰＥＧ画像の生成）が開始される。
露光期間Ｐ５２が終了すると、メモリには、４枚のＲＡＷ画像と、１枚のＪＰＥＧ画像とが保持されている状態となる。メモリには、最大で５枚のＲＡＷ画像しか入らないため、２枚目のＲＡＷ画像のＪＰＥＧ画像への変換が終了するまでは、新たに生成されるＲＡＷ画像を保持できない。そこで、２枚目のＲＡＷ画像がＪＰＥＧ画像に圧縮されるまで、露光を行わずに待機する（待ち期間Ｐ５３）。そして、２枚目のＲＡＷ画像のＪＰＥＧ画像への圧縮が完了すると、３枚のＲＡＷ画像（３、４、５枚目）と２枚のＪＰＥＧ画像（１、２枚目）とがメモリに保持された状態となり、新たなＲＡＷ画像が１枚入るようになる。新たなＲＡＷ画像が１枚入るようになると、次（６回目）の露光が行われる（露光期間Ｐ５４）。これ以降についても、新たなＲＡＷ画像が１枚入るまで、露光が待たされるようになる。
このように、メモリが一杯になってしまった場合には、メモリが空くまで撮像（露光）が待たされることになる。この待ち時間を少なくすることにより、露光とズームレンズの移動との繰り返しの速度が速くなり、ズーム倍率の上昇速度を速くすることができる。
図１１のｂには、撮像装置３００のズーム連写設定部２２０が画像処理を軽い画像処理に変更したことにより、画像の圧縮速度（ＪＰＥＧ画像の生成速度）が速くなった例が示されている。図１１のｂでは、図１１のａと同様に、共通の時間軸の上に、ズーム連写における動作遷移と、画像処理動作と、メモリの画像保持量とが示されている。
なお、メモリの容量のサイズや画像の大きさは図１１のａと同様であることとする。また、図１１のｂでは、ＪＰＥＧ画像の生成にかかる時間が図１１のａより短く、ＪＰＥＧ画像の生成には、２回の露光期間と１回のズーム期間とを合わせた期間が必要であることとする。なお、この時間長は、１回の露光期間と２回のズーム期間とを足し合わせた期間でもある。
図１１のｂで示す各期間は、時間長が異なる以外は図１１のａと同じであるため、ここでは、画像処理の変更に着目して説明する。ズーム連写設定部２２０は、動体の移動速度を解析し、画像処理の負荷を軽くする必要があると判断すると、ＲＡＷ画像をＪＰＥＧ画像に変換するまでに行われる画像処理のモードを、処理が重い通常の画像処理のモード（高画質モード）から処理が軽い高速な画像処理のモード（低画質モード）に変更する。これにより、補正（例えば、欠陥補正、ホワイトバランス補正、シェーディング補正）の精度などが下がって画質が低下するものの、画像処理の速度が速くなる。
例えば、図１１のｂの場合には、７回目の露光（露光期間Ｐ６５）を行うまでには、待ち期間は発生しない。一方、図１１のａの場合には、７回目の露光（図１１のａの露光期間Ｐ５５）が行われるまでに、２回の待ち期間が発生している。このように、画像処理の負荷を軽くすることにより、待ち時間の発生を防止し、ズーム倍率の上昇速度を速くすることができる。
このように、本技術の第４の実施の形態によれば、動体の移動速度に応じて画像処理の重さ（モード）を決定することにより、動体に適切なズーム倍率の上昇速度を設定することができる。すなわち、本技術の第４の実施の形態によれば、ズーム連写を適切に実行させることができる。
なお、本技術の第４の実施の形態では、説明の便宜上、データ量が圧縮されたＲＡＷ画像（圧縮ＲＡＷ画像）の生成は考慮しないで説明したが、圧縮ＲＡＷ画像をメモリに保持させる場合についても同様である。すなわち、動体の移動速度が速い場合に撮像が止まることがないように画像処理を軽くすることにより、短い時間で多く撮像され、その結果、ズーム倍率の上昇速度を速くすることができる。
なお、本技術の第４の実施の形態は、非常に大きな容量のメモリを備える撮像装置においては効果が小さいものの、コストや電力消費を抑えるために小さな容量のメモリを備える撮像装置（例えば、低価格なコンパクトデジタルカメラ）においては、特に効果的である。
なお、本技術の実施の形態では、動体に応じたズーム間隔の設定（第２乃至第３）と、動体に応じた画像処理の処理内容の設定（第４）とを別々の実施例として説明したが、これに限定されるものではなく、両方を同時に行っても良い。
このように、本技術の実施の形態によれば、ズーム連写を適切に実行させることができる。
なお、本技術の第２および第３の実施の形態では、動体の移動速度に応じてズーム間隔を調整する例について説明したが、これに限定されるものではない。例えば、撮像装置の感度設定（例えば、ＩＳＯ感度）を高感度にして露光時間を短くすることにより、ズーム連写における露光の時間を短くし、短い時間でズーム倍率を大きく変化させるようにしてもよい。また、他にも、本技術の実施の形態では、動体の移動速度に応じて決定された一定のズーム間隔で繰り返す場合を想定して説明したが、次第にズーム間隔を広げたりする場合においても、動体の移動速度に応じて広げる幅を調整することにより、ズーム連写を適切に実行させることができる。このように、動体の移動速度に応じてズーム倍率の遷移条件を適切に設定することにより、ズーム連写を適切に実行させることができる。
なお、上述の実施の形態は本技術を具現化するための一例を示したものであり、実施の形態における事項と、請求の範囲における発明特定事項とはそれぞれ対応関係を有する。同様に、請求の範囲における発明特定事項と、これと同一名称を付した本技術の実施の形態における事項とはそれぞれ対応関係を有する。ただし、本技術は実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において実施の形態に種々の変形を施すことにより具現化することができる。
また、上述の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。この記録媒体として、例えば、ハードディスク、ＣＤ（Compact Disc）、ＭＤ（MiniDisc）、ＤＶＤ（Digital Versatile Disc）、メモリカード、ブルーレイディスク（Blu-ray（登録商標） Disc）等を用いることができる。
なお、本技術は以下のような構成もとることができる。
（１） ズーム動作と撮像動作とを繰り返して連写を行うズーム連写を開始するよりも前に生成された画像に基づいて前記ズーム連写の被写体を解析し、当該解析結果に基づいて決定されたズーム倍率の遷移条件を用いて前記ズーム連写を実行させる制御を行う制御部を具備する撮像制御装置。
（２） 前記制御部は、前記被写体に含まれている動体の移動速度に応じて前記ズーム倍率の遷移条件を決定する前記（１）に記載の撮像制御装置。
（３） 前記制御部は、ユーザーにより指定された注目被写体の移動速度に応じて前記ズーム倍率の遷移条件を決定する前記（１）に記載の撮像制御装置。
（４） 前記制御部は、前記ズーム動作の際におけるズームレンズの移動距離を前記ズーム倍率の遷移条件として決定する前記（１）から（３）のいずれかに記載の撮像制御装置。
（５） 前記制御部は、前記ズーム連写を行っている間に実行される画像処理の処理内容を変更させて前記ズーム倍率の遷移条件を決定する前記（１）から（４）のいずれかに記載の撮像制御装置。
（６） 前記制御部は、前記ズーム連写により生成されたＲＡＷ画像を圧縮符号化した画像を生成するまでの過程で行われる画像処理の負荷を、前記被写体に含まれている動体の移動速度の増加に応じて軽減させて前記ズーム倍率の遷移条件を決定する前記（５）に記載の撮像制御装置。
（７） 前記制御部は、ユーザーによる撮像指示が入力されている撮像指示入力期間において前記ズーム連写を実行させる制御を行う前記（１）から（６）のいずれかに記載の撮像制御装置。
（８） 前記制御部は、シャッターボタンが押下されている期間を前記撮像指示入力期間として前記制御を行う前記（７）に記載の撮像制御装置。
（９） 前記制御部は、前記ズーム連写により駆動されたズームレンズが、前記ズームレンズの駆動範囲の端部に達した場合には、前記シャッターボタンの押下にかかわらずに前記ズーム連写を終了させる前記（８）に記載の撮像制御装置。
（１０） ズーム動作と撮像動作とを繰り返して連写を行うズーム連写を開始するよりも前に生成された画像に基づいて前記ズーム連写の被写体を解析し、当該解析結果に基づいて決定されたズーム倍率の遷移条件を用いて前記ズーム連写を実行させる制御を行う制御手順を具備する撮像制御方法。
（１１） ズーム動作と撮像動作とを繰り返して連写を行うズーム連写を開始するよりも前に生成された画像に基づいて前記ズーム連写の被写体を解析し、当該解析結果に基づいて決定されたズーム倍率の遷移条件を用いて前記ズーム連写を実行させる制御を行う制御手順をコンピュータに実行させるプログラム。
さらに、本技術は以下のような構成もとることができる。
（１２） ズーム動作と撮像動作とを繰り返して連写を行うズーム連写を開始するよりも前に前記ズーム連写の撮像条件を決定し、ユーザーによる撮像指示が入力されている期間において前記決定された撮像条件を用いて前記ズーム連写を行う制御部を具備する撮像制御装置。
１００、３００ 撮像装置
１１０ レンズ部
１１１ ズームレンズ
１１２ 絞り
１１３ フォーカスレンズ
１２０ 撮像素子
１２５ シャッタ
１３０ 操作受付部
１４０ 制御部
１５０ 信号処理部
１６１ 記録制御部
１６２ 記録部
１７１ 表示制御部
１７２ 表示部
１８０ 駆動部
１８５ レンズ位置検出部
１９０ 露光制御部
２２０ ズーム連写設定部
３１０ 被写体解析部

Claims (11)

  1. ズーム動作と撮像動作とを繰り返して連写を行うズーム連写を開始するよりも前に生成された画像に基づいて前記ズーム連写の被写体の移動速度を解析し、当該解析結果に基づいて決定されたズーム倍率の遷移条件を用いて前記ズーム連写を実行させる制御を行う制御部を具備する撮像制御装置。
  2. 前記制御部は、前記移動速度に応じて前記ズーム倍率の遷移条件を決定する請求項１記載の撮像制御装置。
  3. 前記制御部は、前記被写体のうちユーザーにより指定された注目被写体の前記移動速度に応じて前記ズーム倍率の遷移条件を決定する請求項１記載の撮像制御装置。
  4. 前記制御部は、前記ズーム動作の際におけるズームレンズの移動距離を前記ズーム倍率の遷移条件として決定する請求項１乃至３の何れかに記載の撮像制御装置。
  5. 前記制御部は、前記ズーム連写を行っている間に実行される画像処理の処理内容を変更させて前記ズーム倍率の遷移条件を決定する請求項１乃至４の何れかに記載の撮像制御装置。
  6. 前記制御部は、前記ズーム連写により生成されたＲＡＷ画像を圧縮符号化した画像を生成するまでの過程で行われる画像処理の負荷を、前記移動速度の増加に応じて軽減させて前記ズーム倍率の遷移条件を決定する請求項５記載の撮像制御装置。
  7. 前記制御部は、ユーザーによる撮像指示が入力されている撮像指示入力期間において前記ズーム連写を実行させる制御を行う請求項１乃至６の何れかに記載の撮像制御装置。
  8. 前記制御部は、シャッターボタンが押下されている期間を前記撮像指示入力期間として前記制御を行う請求項７記載の撮像制御装置。
  9. 前記制御部は、前記ズーム連写により駆動されたズームレンズが、前記ズームレンズの駆動範囲の端部に達した場合には、前記シャッターボタンの押下にかかわらずに前記ズーム連写を終了させる請求項８記載の撮像制御装置。
  10. ズーム動作と撮像動作とを繰り返して連写を行うズーム連写を開始するよりも前に生成された画像に基づいて前記ズーム連写の被写体の移動速度を解析し、当該解析結果に基づいて決定されたズーム倍率の遷移条件を用いて前記ズーム連写を実行させる制御を行う制御手順を具備する撮像制御方法。
  11. ズーム動作と撮像動作とを繰り返して連写を行うズーム連写を開始するよりも前に生成された画像に基づいて前記ズーム連写の被写体の移動速度を解析し、当該解析結果に基づいて決定されたズーム倍率の遷移条件を用いて前記ズーム連写を実行させる制御を行う制御手順をコンピュータに実行させるプログラム。
JP2014520981A 2012-06-21 2013-04-02 撮像制御装置、撮像制御方法およびプログラム Active JP6210062B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014520981A JP6210062B2 (ja) 2012-06-21 2013-04-02 撮像制御装置、撮像制御方法およびプログラム

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2012139789 2012-06-21
JP2012139789 2012-06-21
PCT/JP2013/060068 WO2013190880A1 (ja) 2012-06-21 2013-04-02 撮像制御装置、撮像制御方法およびプログラム
JP2014520981A JP6210062B2 (ja) 2012-06-21 2013-04-02 撮像制御装置、撮像制御方法およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2013190880A1 JPWO2013190880A1 (ja) 2016-02-08
JP6210062B2 true JP6210062B2 (ja) 2017-10-11

Family

ID=49768488

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014520981A Active JP6210062B2 (ja) 2012-06-21 2013-04-02 撮像制御装置、撮像制御方法およびプログラム

Country Status (4)

Country Link
US (1) US9456143B2 (ja)
EP (1) EP2866433A4 (ja)
JP (1) JP6210062B2 (ja)
WO (1) WO2013190880A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2527524A (en) * 2014-06-24 2015-12-30 Nokia Technologies Oy A method and technical equipment for image capturing and viewing
JP2016092609A (ja) * 2014-11-05 2016-05-23 オリンパス株式会社 撮像装置および撮像装置の制御方法
KR102618495B1 (ko) * 2015-01-18 2023-12-29 삼성전자주식회사 영상 처리 장치 및 방법
US10771712B2 (en) 2017-09-25 2020-09-08 Gopro, Inc. Optimized exposure temporal smoothing for time-lapse mode
JP7039254B2 (ja) * 2017-10-31 2022-03-22 キヤノン株式会社 レンズ制御装置、該レンズ制御装置を備える撮像装置、及びレンズ制御方法
CN110913139B (zh) * 2019-11-28 2022-03-25 维沃移动通信有限公司 拍照方法及电子设备
CN110944114B (zh) * 2019-11-28 2021-06-08 维沃移动通信有限公司 拍照方法及电子设备

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0327028A (ja) * 1989-06-23 1991-02-05 Minolta Camera Co Ltd プログラムズームカメラ
US5398095A (en) * 1990-04-09 1995-03-14 Minolta Camera Kabushiki Kaisha Automatic zooming device
JP3695119B2 (ja) * 1998-03-05 2005-09-14 株式会社日立製作所 画像合成装置、及び画像合成方法を実現するプログラムを記録した記録媒体
WO2002092246A1 (de) * 2001-05-16 2002-11-21 Siemens Aktiengesellschaft de0201736NG ZUR BILDAUFNAHME
KR20050033949A (ko) * 2003-10-07 2005-04-14 삼성전자주식회사 휴대용 단말기의 오토줌임 제어방법
US7920180B2 (en) 2004-04-06 2011-04-05 Hewlett-Packard Development Company, L.P. Imaging device with burst zoom mode
JP2006217249A (ja) * 2005-02-03 2006-08-17 Nikon Corp 電子カメラ、電子カメラシステムおよびプログラム
JP4564445B2 (ja) * 2005-11-22 2010-10-20 オリンパスイメージング株式会社 電子カメラおよびブラケット撮影方法
JP4804398B2 (ja) * 2007-03-30 2011-11-02 三洋電機株式会社 撮像装置及び撮影方法
KR101006368B1 (ko) * 2008-07-22 2011-01-10 삼성전자주식회사 휴대 단말기의 카메라 조절 방법 및 장치
JP5627256B2 (ja) * 2010-03-16 2014-11-19 キヤノン株式会社 画像処理装置、撮像装置および画像処理プログラム
US9661232B2 (en) * 2010-08-12 2017-05-23 John G. Posa Apparatus and method providing auto zoom in response to relative movement of target subject matter

Also Published As

Publication number Publication date
EP2866433A1 (en) 2015-04-29
WO2013190880A1 (ja) 2013-12-27
JPWO2013190880A1 (ja) 2016-02-08
US20150163413A1 (en) 2015-06-11
EP2866433A4 (en) 2016-04-13
US9456143B2 (en) 2016-09-27

Similar Documents

Publication Publication Date Title
JP6210062B2 (ja) 撮像制御装置、撮像制御方法およびプログラム
JP4623193B2 (ja) 撮像装置、撮像方法、及びプログラム
JP5683851B2 (ja) 撮像装置及び画像処理装置
JP5623915B2 (ja) 撮像装置
CN101682691B (zh) 图像处理装置及图像处理方法
US8571378B2 (en) Image capturing apparatus and recording method
WO2013001928A1 (ja) 情報処理装置、情報処理方法およびプログラム
JP2008129554A (ja) 撮像装置及びオートフォーカス制御方法
JP2011166442A (ja) 撮像装置
US8965192B2 (en) Automatic focusing apparatus
JP2010252236A (ja) 撮像装置及び画像ファイルのデータ構造
JP4839908B2 (ja) 撮像装置、自動焦点調整方法、およびプログラム
JP2012160864A (ja) 撮像装置
JP2016177069A (ja) 自動焦点調節装置およびその制御方法
US8681235B2 (en) Apparatus for processing digital image signal that obtains still image at desired point in time and method of controlling the apparatus
JP5367129B2 (ja) 撮像装置、制御装置及びそれらの制御方法
JP5181841B2 (ja) 撮影装置、撮影制御プログラム、並びに画像再生装置、画像再生プログラム
JP5266701B2 (ja) 撮像装置、被写体分離方法、およびプログラム
JP2011128643A (ja) 撮像装置、自動焦点調整方法、およびプログラム
JP2009081530A (ja) 撮像装置、及び撮影方法
JP2009290318A (ja) 撮像装置およびズーム調整方法
JP2010263270A (ja) 撮像装置
JP2019032370A (ja) 撮像装置、及びその制御方法
JP6427859B2 (ja) 画像処理装置、画像処理方法及びプログラム
US8073319B2 (en) Photographing method and photographing apparatus based on face detection and photography conditions

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160309

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160309

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170307

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170407

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170815

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170828

R151 Written notification of patent or utility model registration

Ref document number: 6210062

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250