JP6727989B2

JP6727989B2 - 画像処理装置およびその制御方法

Info

Publication number: JP6727989B2
Application number: JP2016169620A
Authority: JP
Inventors: 考司大垣
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2016-08-31
Filing date: 2016-08-31
Publication date: 2020-07-22
Anticipated expiration: 2036-08-31
Also published as: US20180063445A1; JP2018037859A; US10110821B2

Description

本発明は、画像を記録するとともに、記録画像の周辺の状況を表示可能であり、かつ、その画像の一部分をリサイズして表示する機能を備えた画像処理装置およびその制御方法に関するものである。

従来、撮像装置において、画像として記録される領域の周辺の映像（周辺映像）を表示する機能（サラウンド表示）が知られている。記録される映像領域の周囲の状況をカメラのビューファインダーや外部出力で確認可能となる事で、意図しない被写体が写り込む事を未然に防止する事が出来るようになる等、撮影時の撮影範囲の調整がより容易になるというメリットがある。特許文献１には、サラウンド表示と記録映像のみの表示を切り替え可能なビューファインダーについて提案されている。

一方、アナモフィックレンズと呼ばれる、映像を光学的に横方向に縮小（スクイーズ）する事で同じ大きさのセンサーに対してより広い範囲を撮影可能なレンズがある。アナモフィックレンズは、例えば映画に多く用いられる２．３９：１の横長のアスペクト比（シネマスコープ）の映像を、通常の１６：９や４：３のアスペクト比を持つセンサーを搭載したカメラで撮影する際に用いられる。アナモフィックレンズで撮影された映像は、映像をレンズが行った圧縮（１方向への縮小）と逆方向に拡大して表示する必要がある。特許文献２には、記録される映像信号中の画像の形態に関する情報（アナモフィックレンズの使用の有無）をコード信号化して映像信号と共に記録し、この映像信号を再生して映出する際の拡大等の制御を自動的に行うことが提案されている。これによって、アナモフィックレンズを使用して撮像された画像を再生する際に、圧縮の復元された（デスクイーズされた）再生画像の映出を行うことができる。

特開２００１−２１１３６０号公報特開平５−２０７４１２号公報

特許文献１に記載されたようなサラウンド表示を行うための領域に対し、特許文献２に記載されたようなデスクイーズ処理を施した場合、表示される記録対象領域のアスペクト比がサラウンド表示を行わない場合と異なってしまう。そのため、例えば、サラウンド表示を行っていない場合にシネマスコープのアスペクト比で確認できていた記録対象領域の表示が、サラウンド表示を行うことでシネマスコープのアスペクト比では無くなってしまい、ユーザーに混乱を与える可能性がある。

そこで本発明は、デスクイーズ処理とサラウンド表示のための処理を同時に実行した場合、より分かりやすい表示を行うことのできる画像処理装置、その制御方法、プログラム及び記録媒体を提供する事を目的とする。

上記課題を解決するために、本発明の画像処理装置は、
記録対象領域と該記録対象領域の周辺領域を含む画像を取得可能な取得手段と、
前記取得手段が前記周辺領域を含まない記録対象領域の画像を取得する第１のモードと、前記取得手段が前記周辺領域を含む画像を取得する第２のモードとを切り替え可能な切り替え手段と、
前記取得手段で取得した画像をリサイズするリサイズ手段と、
前記第１のモードである場合、前記取得手段で取得した画像のうち第１の範囲を所定のアスペクト比となるように前記リサイズ手段がリサイズした映像を含む第１の映像信号を生成し、
前記第２のモードである場合、前記取得手段で取得した画像のうち前記第１の範囲と異なる第２の範囲を、前記第２の範囲に含まれる記録対象領域のリサイズ後のアスペクト比が、前記所定のアスペクト比となるように前記リサイズ手段がリサイズした映像を含む第２の映像信号を生成するように制御する制御手段と
を有することを特徴とする。

本発明によれば、デスクイーズ処理とサラウンド処理を同時に実行した場合に、より分かりやすい表示を行う事が出来る。

デジタルカメラ１００の構成例デジタルカメラ１００の動作を示すフローチャートＶＲＡＭ１１３上の映像とＳＤＩ１１６からの出力映像の表示例変形例におけるＳＤＩ１１６からの出力映像の表示

以下、参照して本発明の実施形態について説明する。本実施形態では、本発明の画像処理装置の一例として、動画像を撮影・記録可能な撮像装置であるデジタルカメラ１００を例に挙げる。

図１（Ａ）は、本実施形態に係るデジタルカメラ１００の内部構成例を示すハードウェアブロック図である。図１（Ｂ）は、デジタルカメラ１００が行う画像処理のデータパスを示す機能ブロック図である。図１（Ｂ）のブロック１５０、１５１には、例としてサラウンド領域を含めた４．５Ｋ（４５０４ｘ２３７６）で撮像した画像を２Ｋ（２０４８ｘ１０８０）で表示する場合の各処理での画素数を付記している。言うまでもなく、撮像画像の画素数と記録する画素数の少なくとも一方が異なる画素数の設定である場合にはこの限りではない。

図１（Ａ）において、レンズユニット１０１は、集光のための固定レンズ群、変倍レンズ群、絞り、変倍レンズ群の動きで移動した結像位置を補正する機能と焦点調節を行う機能とを兼ね備えた補正レンズ群により構成されている。レンズユニット１０１によって、最終的に後述のイメージセンサー１０２の結像面上に被写体像が結像される。レンズユニット１０１は、レンズ装着部１３０に装着可能な交換レンズが有する構成であり、装着される交換レンズによっては必ずしも上述のレンズ群とはならない。レンズ装着部１３０には、イメージセンサー１０２上に結像する被写体像を光学的に横方向（水平方向）に２分の１に縮小（スクイーズ）するアナモフィックレンズ（圧縮率が２倍）が装着可能である。また、被写体像を光学的に横方向（水平方向）に１．３分の１に縮小（スクイーズ）するアナモフィックレンズ（圧縮率が１．３倍）なども装着可能である。

イメージセンサー１０２は、光を電荷に変換し撮像信号を生成する。生成された撮像信号は前処理部１０３へ出力される。イメージセンサー１０２は、ＣＣＤイメージセンサやＣＭＯＳイメージセンサなどの撮像素子である。

前処理部１０３は、イメージセンサー１０２より入力され取得した撮像信号をＲＡＷ縮小部１０４が受ける事が出来るＲＡＷデータ（ＲＡＷ画像）に変換してＲＡＷ縮小部１０４へ出力する（ブロック１５０）。

ＲＡＷ縮小部１０４は、前処理部１０３にて生成されたＲＡＷデータを所定の比率で縮小した縮小ＲＡＷデータ（縮小ＲＡＷ画像）を生成し、画像生成部１０６へ出力する（ブロック１５１における縮小画像生成）。例えば、サラウンド表示がオンの場合、４５０４ｘ２３７６画素のＲＡＷデータに対して、水平１１６／２５５、垂直を５／１１になるように縮小（小数点以下切り捨て）を行って、２０４８ｘ１０８０の縮小ＲＡＷデータを生成し、画像生成部１０６へ出力する。サラウンド表示が無効化されている場合は、前処理部１０３より入力された４０９６ｘ２１６０画素のＲＡＷデータに対して水平および垂直ともに１／２になるような縮小を行って２０４８ｘ１０８０の縮小ＲＡＷデータを生成し、画像生成部１０６へ出力する。もしくは、前処理部１０３より入力されたデータに対して縮小を行わない場合は縮小処理を行わずにＲＡＷデータを画像生成部１０６へ出力する。

バス１０５は、デジタルカメラ１００の各ブロックがデータのやり取りを行うためのデータバスであり、デジタルカメラ１００の各ブロックはこのバスを介してデータのやり取りを行う。

画像生成部１０６は、ＲＡＷ縮小部１０４より入力される縮小ＲＡＷデータに対して補間処理や画質調整処理等のＲＡＷ現像処理を行ってＹＵＶ形式の全画角画像データを生成し（ブロック１５２）、ＤＲＡＭ１１３に格納する（ブロック１５３）。全画角画像データは、サラウンド表示が有効化されている場合、記録対象領域と周辺領域を含めた撮像された画像全体範囲であり、サラウンド表示が無効化されている場合は、画像全体が記録範囲である現像済みのデータである。すなわち、ＤＲＡＭ１１３は、記録対象領域と周辺領域を含めた撮像された画像全体範囲の画像と、画像全体が記録範囲である現像済みの画像とを取得可能である。

記録媒体１０７は、例えばメモリーカードなどがあげられる。この記録媒体は、デジタルカメラ１００から取り外し可能な着脱可能記録媒体であり、デジタルカメラ１００以外にもＰＣ等に装着する事ができる。

解像度変換部１０８は、画像生成部１０６が生成したＹＵＶデータの解像度変換を行う（ブロック１５４）。解像度変換部１０８は、ＤＲＡＭ１１３に格納されている全画角画像データに対して、縦方向、横方向にそれぞれ独立に拡大、ないし、縮小処理（リサイズ）を行う事が出来る。解像度変換部１０８は、サラウンド表示の有効／無効、デスクイーズ表示の有効／無効状態に応じたリサイズ処理を行い、外部出力部１１５に出力する解像度にリサイズした画像を生成する（ブロック１５４）。生成された出力用画像は、入力されたＹＵＶデータとは別の画像データとしてＤＲＡＭ１１３に格納される（ブロック１５５）。同様に、パネル１１８に出力する解像度にリサイズしたパネル出力用画像を生成し（ブロック１５４）、ＤＲＡＭ１１３に格納する（ブロック１５８）。同様に、動画像圧縮部１１９で動画像圧縮する解像度にリサイズした動画像記録用画像を生成し（ブロック１５４）、ＤＲＡＭ１１３に格納する（ブロック１６１）。解像度変換部１０８は、各出力先（ブロック１５５、ブロック１５８、ブロック１６１）にはそれぞれ独立して異なるリサイズを実施可能である。また、ＤＲＡＭ１１３に格納されている全画角画像データに対して、読み出し範囲を画像データの一部に制限する事で、解像度変換部（１０８）において、画像の切り出しとリサイズを同時に実行する事が出来る。例えば、画像データの左上を座標原点（０、０）とした場合、読み出し開始座標を（３８７、０）、読み出し解像度を１２９２×１０８０と設定し、出力解像度を２０４８×８５６とする。この場合、元の画像データから（３８７、０）を始点として、解像度１２９２×１０８０サイズの画像データが読みだされる。そして読みだされた画像データに対し、横方向へは６５／４１倍の拡大、縦方向へは６５／８２の縮小処理（いずれも小数点以下切り捨て）が施され、２０４８×８５６の画像データがＤＲＡＭ１１３に格納される。

オンスクリーンディスプレイ（ＯＳＤ）部１０９は、各種設定メニューや顔枠などのＯＳＤデータ（表示アイテム）を生成し、ＤＲＡＭ１１３に配置する。

操作部１１０は、ユーザが操作入力するためのものであり、例えばタッチパネルや操作キー（ボタン、ダイヤル、レバー等）などである。ユーザーが操作部１１０を操作すると、操作情報は制御部１１１に通知される。サラウンド表示の有効／無効、アナモフィックデスクイーズ表示の有効／無効状態は、操作部１１０からの入力によって、それぞれ独立に設定可能である。設定方法は、メニュー操作であっても、専用の物理キーの操作であってもよい。

制御部１１１は、ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）などにより構成される処理部であり、デジタルカメラ１００が備える各ブロックを制御する。
ＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）１１２は、制御部１１１が作業領域として使用する揮発性メモリである。

ＤＲＡＭ（ＤｙｎａｍｉｃＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）１１３は、デジタルカメラ１００の各ブロックが作業領域として使用する揮発性メモリである。なお、このＤＲＡＭ１１３には、所定期間に読み書き（リード／ライト）できるデータ量（読み出し速度／書き込み速度）に上限があり、その上限を超えてデータの読み書きを行うことは出来ない。なお、ＤＲＡＭ１１３は、ＤＲＡＭとは異なる機構による、高速な揮発性メモリや不揮発性メモリと置き換えることもできる。また、ＲＡＭ１１２とＤＲＡＭ１１３は同一の記憶装置上に共存する構成であっても構わない。

ＲＯＭ（ＲｅａｄオンｌｙＭｅｍｏｒｙ）１１４は、制御部１１１が実行するプログラムなどが格納された不揮発性の記録媒体であり、例えばＦｌａｓｈＲＯＭで構成される。あるいは、記録媒体１０７に格納されたプログラムデータをＲＡＭ１１２にロードし、ＲＯＭとして利用しても構わない。

外部出力部１１５は、ＤＲＡＭ１１３に格納された外部出力用画像（ブロック１５５）とＯＳＤデータを合成して外部出力用信号としてＳＤＩ１１６へ出力する（ブロック１５６）。

ＳＤＩ（ＳｅｒｉａｌＤｉｇｉｔａｌＩｎｔｅｒｆａｃｅ）１１６は、外部出力部１１５より入力される外部出力用信号をＳＤＩ形式に変更し外部に出力する（ブロック１５７）。

パネル出力部１１７は、ＤＲＡＭ１１３に格納されたパネル出力用画像（ブロック１５８）とＯＳＤデータを合成してパネル出力用信号としてパネル１１８へ出力する（ブロック１５９）。

パネル１１８は、液晶パネルや有機ＥＬパネルなどのディスプレイパネルであり、パネル出力部１１７より入力されたパネル出力信号を表示する（ブロック１６０）。

動画像圧縮部１１９は、ＤＲＡＭ１１３に格納された動画像記録用画像をＭＰＥＧ形式で圧縮（ブロック１６２）し、動画像データとしてＤＲＡＭ１１３に格納する（ブロック１６３）。

メディア制御部１２０は、動画像圧縮部１１９で生成され、ＤＲＡＭ１１３に格納された動画像データ（ブロック１６３）をコンピュータと互換のあるフォーマットに従って、記録媒体１０７に記録する（ブロック１６４、ブロック１６５）。

続いて、図２のフローチャートに基づいて、デジタルカメラ１００の本発明に係る動作を説明する。これらのフローは、ＲＯＭ１１４に格納されたプログラムに基づいて、制御部１１１がデジタルカメラ１００の各部を制御することによって実現されるものである。また、図３（Ａ）〜図３（Ｄ）は、図２のフローチャートの動作中に、ＶＲＡＭ１１３に格納される映像と、ＳＤＩ１１６に出力される映像を出力先のディスプレイに表示した場合の表示例とを示した図である。表示例３２０〜Ｓ３２３は、本発明を適用した場合の各表示例である。表示例３２３´は、本技術を適用しなかった場合の表示例である。それぞれの表示例におけるひし形と円（あるいは楕円）は、イメージセンサー１０２で撮像された撮像画像中の被写体を示している。真円の被写体をアナモフィックレンズを用いて撮影すると、光学的にスクイーズされて横方向に圧縮されるため、縦長の楕円の被写体としてイメージセンサー１０２上に結像し、撮像される。これをそのまま表示した場合は縦長の楕円被写体として表示されるが、デスクイーズ処理を施すことで、真円に復元して表示することができる。尚、本実施例では、圧縮率が２倍のアナモフィックレンズが装着された場合のデスクイーズ表示について説明するが、その他の倍率のアナモフィックレンズが装着された場合には、切り出し範囲及びデスクイーズの倍率を変更することで本発明は適用可能である。

デジタルカメラ１００を撮影モードで起動し、イメージセンサー１０２でのライブビュー画像の撮像が開始されると、図２の処理を開始する。図２の処理は、撮像画像を記録媒体１０７に記録している記録中、記録開始する前の記録待機中の何れにおいても実行可能であるものとする。記録待機中においては、後述する記録対象領域は、その時点で記録されている領域ではなく、その時点から記録を開始した場合に記録媒体１０７に記録される映像の領域である。なお、サラウンド表示のオン／オフ、デスクイーズ表示のオン／オフの設定は、予めメニュー画面などからユーザーが設定（切替）しておき、設定状態がＲＡＭ１１２またはＲＯＭ１１４に記録されるものとする。また、ライブビュー画像の表示途中でもユーザー操作に応じて設定変更できるものとする。

Ｓ２０１では、制御部１１１は、ＲＡＭ１１２またはＲＯＭ１１４の設定情報を参照し、サラウンド表示が有効（オン）に設定されているか否かを判定する。サラウンド表示が有効（オン）に設定されている場合（第２のモード）はＳ２０５に進み、サラウンド表示が無効（オフ）に設定されている場合（第１のモード）はＳ２０２に進む。

Ｓ２０２では、制御部１１１は、ＲＡＭ１１２またはＲＯＭ１１４の設定情報を参照し、デスクイーズ表示が有効（オン）に設定されているか否かを判定する。デスクイーズ表示が有効（オン）に設定されている場合（第２の設定）はＳ２０４に進み、デスクイーズ表示が無効（オフ）に設定されている場合（第１の設定）はＳ２０３に進む。

Ｓ２０３では、制御部１１１は、サラウンド表示無効、デスクイーズ表示無効状態の映像をＳＤＩ１１６に出力する。

図３（Ａ）に、Ｓ２０３の通常表示を行う場合のＶＲＡＭ１１３に格納される映像と、ＳＤＩ１１６に出力される映像との関係を示す。映像３０１は、画像生成部１０６が生成したＤＲＡＭ１１３に格納されているＹＵＶ画像である。表示例３２０は、通常表示によってＳＤＩ１１６から出力され、出力先のディスプレイで表示された映像の表示例である。２０４８×１０８０ピクセルの映像を示しており、表示中の映像全域が記録対象の領域（記録対象領域）となっている。通常表示時は、解像度変換部１０８においてリサイズ処理が行われないため、表示例３２０は映像３０１と等しい画角（撮影範囲）となる。

Ｓ２０４では、制御部１１１は、サラウンド表示無効、デスクイーズ表示が有効化された状態の映像をＳＤＩ１１６に出力する。すなわち、通常のデスクイーズ表示の映像を出力する。

図３（Ｂ）に、Ｓ２０４におけるデスクイーズ表示を行う場合のＶＲＡＭ１１３に格納される映像と、ＳＤＩ１１６に出力される映像との関係を示す。映像３０１は、画像生成部１０６が生成したＤＲＡＭ１１３に記録されたＹＵＶ画像である。横２０４８画素×縦１８０画素であり、図３（Ａ）の映像３０１と同じ画角（撮影範囲）である。表示例３２１は、Ｓ２０４でのデスクイーズ表示によってＳＤＩ１１６から出力され、出力先のディスプレイで表示された映像の表示例である。ＶＲＡＭ１１３に格納された映像３０１のうち、圧縮率２倍のアナモフィックレンズの有効映像領域に対応する画像中心の１２８０×１０８０画素の範囲３１０を切り出し、表示上のアスペクト比が２．３９：１になるようにリサイズして表示している。処理内容をより詳しく説明すると、解像度変換部１０８は、範囲３１０（１２８０×１０８０画素）を切り出し、切り出した映像信号の横幅を２倍に拡大する（２５６０×１０８０画素）。その後、アスペクト比（２．３９：１）を変えずに２０４８×１０８０画素の範囲で映像を表示するために、映像を２０４８×８５６サイズに縮小する。すなわち、これらの変倍処理（デスクイーズ）では、横方向と縦方向とで異なる変倍率での変倍処理を施している。尚、横幅を２倍拡大してから、その映像全体を縮小しても、ＶＲＡＭの第１の領域を直接、最終的なサイズ（２０４８×８５６画素）へリサイズしても、どちらでもよい。また、ＳＤＩ１１６へは、ＳＤＩ規格に則り２０４８×１０８０画素の解像度で映像を出力する必要がある。そのため、足りないピクセルに相当する領域は映像信号として黒色を外部出力部１１５で付加し、ＳＤＩ１１６へは２０４８×１０８０画素の映像信号を出力する（ブロック１５６）。その結果、ＳＤＩ１１６からの出力先のディスプレイでは、表示例３２１のように表示される。表示例３２１において、２０４８×８５６画素の範囲に、撮像画像をデスクイーズした映像３３０が表示される。

Ｓ２０５では、制御部１１１は、ＲＡＭ１１２またはＲＯＭ１１４の設定情報を参照し、デスクイーズ表示が有効（オン）に設定されているか否かを判定する。デスクイーズ表示が有効（オン）に設定されている場合はＳ２０７に進み、そうでない場はＳ２０６に進む。

Ｓ２０６では、制御部１１１は、サラウンド表示有効、デスクイーズ表示が無効化された状態の映像をＳＤＩ１１６に出力する。すなわち、通常のサラウンド表示の映像を出力する。

図３（Ｃ）に、Ｓ２０６におけるサラウンド表示を行う場合のＶＲＡＭ１１３に格納される映像と、ＳＤＩ１１６に出力される映像との関係を示す。映像３０２は、画像生成部１０６が生成したＤＲＡＭ１１３に記録されたＹＵＶ画像である。横２０４８画素×縦１８０画素であるが、図３（Ａ）の映像３０１とは異なる画角（撮影範囲）であり、サラウンド領域まで含めている分、映像３０１よりも広い画角（撮影範囲）である。より詳しくは、サラウンド表示が有効な場合、前処理部１０３からＲＡＷ縮小部へ周辺画素を含めた４５０４ｘ２３７６画素のＲＡＷデータ（うち、記録対象領域は４０９６ｘ２２６０画素）が出力される。ＲＡＷ縮小部１０４は、水平１１６／２５５、垂直を５／１１になるように縮小（小数点以下切り捨て）を行って、２０４８ｘ１０８０画素の縮小ＲＡＷデータを生成（ブロック１５１に例示した解像度）し、画像生成部１０６へ出力する。この２０４８ｘ１０８０画素の縮小ＲＡＷデータを現像して得られる映像３０２がＶＲＡＭ１１３に格納される。映像３０２のうち、サラウンド領域３０３（図中斜線部）は、記録開始しても記録媒体１０７には記録されない映像の周辺領域を示している。映像３０２のうち、記録対象領域３０４は、記録媒体１０７に記録される映像の領域を示している。サラウンド領域３０３と記録対象領域３０４とをユーザーが区別できるように、ＧＵＩとして境界に白線を描画したり、周辺領域の映像が表示される範囲に半透過のＧＵＩ部品を重ねて表示したりしても良い。表示例３２２は、Ｓ２０６でのサラウンド表示によってＳＤＩ１１６から出力され、出力先のディスプレイで表示された映像の表示例である。この映像３０２を、デスクイーズ処理を施さずにＳＤＩ１１６に出力すると、表示例３２２は映像３０２と等しい画角（撮影範囲）となる。表示例３２２では、撮像して得られた画像のうち、記録対象領域３３１と、その周辺のサラウンド領域３３２とが、区別可能なように表示される。

Ｓ２０７では、制御部１１１は、サラウンド表示有効、デスクイーズ表示が有効化された状態の映像をＳＤＩ１１６に出力する。すなわち、デスクイーズ処理とサラウンド表示を組み合わせた映像を出力する。

図３（Ｄ）に、Ｓ２０７における表示を行う場合のＶＲＡＭ１１３に格納される映像と、ＳＤＩ１１６に出力される映像との関係を示す。映像３０２は、画像生成部１０６が生成したＤＲＡＭ１１３に記録されたＹＵＶ画像であり、図３（Ｃ）の映像３０２と同じ画角（撮影範囲）であり、図３（Ｃ）の映像３０２と同様にして生成された映像である。表示例３２３は、Ｓ２０７での表示によってＳＤＩ１１６から出力され、出力先のディスプレイで表示された映像の表示例である。この処理では、ＶＲＡＭ１１３に格納されたサラウンド領域を含む２０４８×１０８０素の映像３０２（ＹＵＶ画像）から、圧縮率２倍のアナモフィックレンズの有効映像領域に対応する画像中心の１１７６×１０８０画素の範囲３１１が切りだされる。そして、範囲３１１を、リサイズ後の記録対象領域３０４に対応する範囲の表示上のアスペクト比が２．３９：１（２０４８×８５６）となるように、リサイズ（デスクイーズ）する。処理内容をより詳しく説明すると、解像度変換部１０８は、範囲３１１（１１７８×１０８０画素）を切り出し、切り出した映像信号の横幅を２倍に拡大する（２３５６×１０８０画素）。その後、映像を２０４８×９４２サイズに縮小する。尚、横幅を２倍拡大してから、その映像全体を縮小しても、ＶＲＡＭ１１３上の範囲３１１を直接、最終的なサイズ（２０４８×９４２画素）へリサイズしても、どちらでもよい。また、ＳＤＩ１１６へは、ＳＤＩ規格に則り２０４８×１０８０画素の解像度で映像を出力する必要がある。そのため、足りないピクセルに相当する領域は映像信号として黒色を外部出力部１１５で付加し、ＳＤＩ１１６へは２０４８×１０８０画素の映像信号を出力する（ブロック１５６）。その結果、ＳＤＩ１１６からの出力先のディスプレイでは、表示例３２３のように表示される。表示例３２３に示す、撮影画像が表示される２０４８×９４２画素の範囲のうち、２０４８×８５６画素の範囲が記録対象領域３３３であり、その上下の斜線部がサラウンド領域３３４である。表示例３２３における記録対象領域３３３と、サラウンド表示を伴わないデスクイーズ表示（表示例３２１）における映像領域３３０は同じアスペクト比、同じ画角（範囲）である。すなわち、表示例３２３は、表示例３２１の映像領域３３０に対して、上下にサラウンド領域３３４が追加されたものと同等な表示となる。このような表示によって、ユーザーは、サラウンド表示とデスクイーズ表示を組み合わせて行った場合にも、記録対象領域を所望するアスペクト比（シネマスコープの３．３９：１）で確認することができる。従って、サラウンド領域３３４を見て不必要な被写体の記録対象領域３３３への混入を予防できるとともに、完成品として想定されるアスペクト比での記録対象領域を見ることで、映像作品の完成品のイメージがしやすい。

なお、図２の処理は、撮影待機状態まあは記録中において、デスクイーズ表示の設定状態（オンまたはオフ）、または、サラウンド表示の設定状態（オンまたはオフ）が変更される度に行われるものとする。

また、図２の処理において、ＳＤＩ１１６へ出力する映像に対する処理を説明したが、パネル１１８に表示する映像も同様の処理を行う。制御部１１１は、パネル１１８への表示制御として、Ｓ２０３、Ｓ２０４，Ｓ２０６，Ｓ２０７において、それぞれ、パネル１１８で表示例３２０〜３２３のような表示を行うように制御する。また、図２の処理において、ＳＤＩ１１６へ出力する映像に対する処理を説明したが、映像信号を出力（送信）する手段であればＳＤＩ規格に限定されるものではなく、例えばＨＤＭＩ（登録商標）などの他の映像出力規格であってもよい。

本実施形態のサラウンド表示とデスクイーズ表示の組合せ処理（Ｓ２０７）では、サラウンド表示をしない場合のデスクイーズ処理（Ｓ２０４）の際に切りだす範囲３１０とは異なる範囲３１１を切りだしている。このようにしている効果を説明するため、仮に、サラウンド表示とデスクイーズ表示の組合せ処理でも、サラウンド表示をしない場合のデスクイーズ処理の際に切りだす範囲３１０と同じ範囲を切り出すとどうなるかについて説明する。

図３（Ｄ）の表示例３２３´は、サラウンド表示とデスクイーズ表示の組合せ処理の際に、サラウンド表示をしない場合のデスクイーズ処理の際に切りだす範囲３１０と同じ範囲を切り出した場合の表示例である。この処理では、解像度変換部１０８は、ＶＲＡＭ１１３に格納されたサラウンド領域を含む２０４８×１０８０素の映像３０２（ＹＵＶ画像）から、範囲３１０（１２９０×１０８０画素）を切り出す。そして切り出した映像信号の横幅を２倍に拡大（デスクイーズ）する（２５６０×１０８０画素）。その後、２０４８×１０８０画素の範囲で映像を表示するために、映像を２０４８×８５６サイズに縮小する。足りないピクセルに相当する領域は映像信号として黒色を外部出力部１１５で付加し、ＳＤＩ１１６へは２０４８×１０８０画素の映像信号を出力する。その結果、ＳＤＩ１１６からの出力先のディスプレイでは、表示例３２３´のように表示される。このように表示された映像においては、記録対象領域３３３´は２０４８×７７９画素のアスペクト比となり、シネマスコープ（２．３９：１）とはならない。また、サラウンド表示を行っていないデスクイーズ表示の表示例３２１と比べて記録対象領域の画角（表示される映像の範囲）は横に広がってしまい（ひし形の外側部分まで見えてくる）、アスペクトが変わってしまう。従ってユーザーは、完成品として想定されるアスペクト比及び映像範囲で記録対象領域を見ることができず、映像作品の完成品のイメージがしにくいといった不都合が生じる。これに対し本実施形態では、前述したような表示例３２３のような表示を行うことで、このような不都合を防止することができる。また、本実施形態の表示例３２３では、デスクイーズ表示中にサラウンド表示の有効と無効を切り替えるような場面において、表示上の記録対象領域の画角とアスペクト比が変化しないため、利便性を損なわずに両機能を同時に利用する事が可能となる。

＜変形例＞
変形例として、サラウンド表示有効時にデスクイーズ表示を有効化した場合（前述の図２のＳ２０５でＹｅｓと判定された場合）、前述のＳ２０７の処理に代えて、切り出し範囲は変えず、所望とするアスペクト比、映像範囲を区別可能な様に表示する例を説明する。

図４に、サラウンド表示有効時にデスクイーズ表示を有効化した場合（前述の図２のＳ２０５でＹｅｓと判定された場合）の、変形例での表示例を示す。表示アイテム４００は、記録対象領域（記録対象領域３０４に含まれる領域）であり、かつ、アナモフィックレンズの有効範囲外（シネマスコープのアスペクト比の範囲外）の領域を識別可能に示す表示アイテムである。本実施例では、対象領域を半透過に塗りつぶしているが、領域の境界に線を引く形であってもよい。領域４０１は、記録対象領域、かつ、アナモフィックレンズの有効範囲の映像に対応し、アスペクト比が２．３９：１になるようにリサイズ（１８６１×７７９画素）されている。また領域４００は、記録対象領域のうち、サラウンド表示を伴わないデスクイーズ表示（表示例３２１）では表示されない撮像範囲である。領域４０１は、サラウンド表示を伴わないデスクイーズ表示（表示例３２１）でも表示される撮像範囲である。

このような、変形例によれば、切り出し範囲を範囲３１０から変えずに、ＧＵＩ上の表示によって記録対象領域の画角／アスペクトを示し、記録されるがアナモフィックレンズの有効領域外の部分を映像上容易に確認出来る。

なお、制御部１１１が行うものとして説明した上述の各種制御は、１つのハードウェアが行ってもよいし、複数のハードウェアが処理を分担することで、装置全体の制御を行ってもよい。

また、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。さらに、上述した各実施形態は本発明の一実施形態を示すものにすぎず、各実施形態を適宜組み合わせることも可能である。

また、上述した実施形態においては、本発明をデジタルカメラ１００に適用した場合を例にして説明したが、これはこの例に限定されず、入力された画像をリサイズして表示するように制御する画像処理装置であれば適用可能である。例えば、外部入力端子から入力された動画像を、拡大して表示装置に出力するとともに、外部または内蔵の記録媒体に記録するような動画レコーダーに適用可能である。同様に、本発明はパーソナルコンピュータやＰＤＡ、携帯電話端末や携帯型の画像ビューワ、ディスプレイを備えるプリンタ装置、デジタルフォトフレーム、などに適用可能である。また、音楽プレーヤー、ゲーム機、電子ブックリーダー、タブレット端末、スマートフォン、投影装置、ディスプレイを備える家電装置や車載装置などに適用可能である。

（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

Claims

記録対象領域と該記録対象領域の周辺領域を含む画像を取得可能な取得手段と、
前記取得手段が前記周辺領域を含まない記録対象領域の画像を取得する第１のモードと、前記取得手段が前記周辺領域を含む画像を取得する第２のモードとを切り替え可能な切り替え手段と、
前記取得手段で取得した画像をリサイズするリサイズ手段と、
前記第１のモードである場合、前記取得手段で取得した画像のうち第１の範囲を所定のアスペクト比となるように前記リサイズ手段がリサイズした映像を含む第１の映像信号を生成し、
前記第２のモードである場合、前記取得手段で取得した画像のうち前記第１の範囲と異なる第２の範囲を、前記第２の範囲に含まれる記録対象領域のリサイズ後のアスペクト比が、前記所定のアスペクト比となるように前記リサイズ手段がリサイズした映像を含む第２の映像信号を生成するように制御する制御手段と
を有することを特徴とする画像処理装置。
前記リサイズ手段は、横方向と縦方向とで異なる変倍率のリサイズを行うことを特徴とする請求項１に記載の画像処理装置。
前記リサイズ手段は、デスクイーズ処理を行うことを特徴とする請求項１または２に記載の画像処理装置。
前記第１のモードである場合に前記第１の映像信号を表示手段に表示し、前記第２のモードである場合に前記第２の映像信号を前記表示手段に表示するように制御する表示制御手段をさらに有することを特徴とする請求項１乃至３の何れか１項に記載の画像処理装置。
前記リサイズ手段による横方向と縦方向とで異なる変倍率のリサイズを行わずに映像を表示する第１の設定と、前記リサイズ手段による横方向と縦方向とで異なる変倍率のリサイズを行って映像を表示する第２の設定との少なくとも何れかを設定可能な設定手段と、前記表示制御手段は、前記第１のモードでかつ前記第２の設定の場合に前記第１の映像信号を表示手段に表示し、前記第２のモードでかつ前記第２の設定の場合に前記第２の映像信号を前記表示手段に表示するように制御することを特徴とする請求項４に記載の画像処理装置。
前記設定手段は、デスクイーズ処理を行うか否かを設定する手段であることを特徴とする請求項５に記載の画像処理装置。
前記第１のモードは、サラウンド表示を行わないモードであり、前記第２のモードはサラウンド表示を行うモードであることを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
前記画像は撮像手段によって撮像された画像であり、
前記第２の範囲の横方向の範囲が対応する撮像範囲は、前記第１の範囲に含まれる記録対象領域の横方向の範囲が対応する撮像範囲と同じであることを特徴とする請求項１乃至７のいずれか１項に記載の画像処理装置。
前記画像はアナモフィックレンズを用いて撮像された画像であることを特徴とする請求項１乃至８のいずれか１項に記載の画像処理装置。
アナモフィックレンズを装着可能なレンズ装着部と、
撮像手段と、を更に有し、
前記取得手段は前記撮像手段で撮像された画像を取得することを特徴とする請求項１乃至９のいずれか１項に記載の画像処理装置。
前記第１の映像信号と前記第２の映像信号は同じサイズであることを特徴とする請求項１乃至１０のいずれか１項に記載の画像処理装置。
記録対象領域と該記録対象領域の周辺領域を含む画像を取得可能な取得ステップと、
前記取得ステップが前記周辺領域を含まない記録対象領域の画像を取得する第１のモードと、前記取得ステップが前記周辺領域を含む画像を取得する第２のモードとを切り替え可能な切り替えステップと、
前記取得ステップで取得した画像をリサイズするリサイズステップと、
前記第１のモードである場合、前記取得ステップで取得した画像のうち第１の範囲を所定のアスペクト比となるように前記リサイズステップがリサイズした映像を含む第１の映像信号を生成し、
前記第２のモードである場合、前記取得ステップで取得した画像のうち前記第１の範囲と異なる第２の範囲を、前記第２の範囲に含まれる記録対象領域のリサイズ後のアスペクト比が、前記所定のアスペクト比となるように前記リサイズステップがリサイズした映像を含む第２の映像信号を生成するように制御する制御ステップと
を有することを特徴とする画像処理装置の制御方法。
記録対象領域と該記録対象領域の周辺領域を含む画像を取得可能な取得手段と、
前記取得手段が前記周辺領域を含まない記録対象領域の画像を取得する第１のモードと、前記取得手段が前記周辺領域を含む画像を取得する第２のモードとを切り替え可能な切り替え手段と、
前記取得手段で取得した画像をリサイズするリサイズ手段と、
前記取得手段で取得した画像のうち所定の範囲を所定のアスペクト比となるように前記リサイズ手段がリサイズした映像を生成するように制御する制御手段と、
前記第２のモードである場合、前記映像のうち、前記記録対象領域に対応する領域のうち、前記第１のモードで表示されない範囲を、前記周辺領域に対応する領域と識別可能に前記映像を表示するように制御する表示制御手段と
を有することを特徴とする画像処理装置。
記録対象領域と該記録対象領域の周辺領域を含む画像を取得可能な取得ステップと、
前記取得ステップが前記周辺領域を含まない記録対象領域の画像を取得する第１のモードと、前記取得ステップが前記周辺領域を含む画像を取得する第２のモードとを切り替え可能な切り替えステップと、
前記取得ステップで取得した画像をリサイズするリサイズステップと、
前記取得ステップで取得した画像のうち所定の範囲を所定のアスペクト比となるように前記リサイズステップがリサイズした映像を生成するように制御する制御ステップと、
前記第２のモードである場合、前記映像のうち、前記記録対象領域に対応する領域のうち、前記第１のモードで表示されない範囲を、前記周辺領域に対応する領域と識別可能に前記映像を表示するように制御する表示制御ステップと
を有することを特徴とする画像処理装置の制御方法。
コンピュータを、請求項１乃至１１、１３のいずれか１項に記載された画像処理装置の各手段として機能させるためのプログラム。
コンピュータを、請求項１乃至１１、１３のいずれか１項に記載された画像処理装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。