JP4281500B2

JP4281500B2 - 電子カメラ装置及び映像出力方法

Info

Publication number: JP4281500B2
Application number: JP2003341302A
Authority: JP
Inventors: 英明黒田
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2003-09-30
Filing date: 2003-09-30
Publication date: 2009-06-17
Anticipated expiration: 2023-09-30
Also published as: JP2005109927A

Description

本発明は、ケーブルを介して接続されるテレビジョンモニタに映像信号を出力する電子カメラ装置及び映像出力方法に関する。

現在、国内では地上波デジタル放送が始まり、２０１１年までには地上波アナログ放送は終了となり、この地上波デジタル放送に対応したデジタルテレビが急速に普及している。デジタル放送は現在のアナログ放送に比べ高画質・高音質・ワイド画面と魅力があるものとなっている。

一方デジタルカメラも高画質化が進み、テレビに接続して簡単に写真が楽しむことが出来、フィルムカメラに代わって普及している。特許文献１に記載されているように、デジタルカメラにおいては見たい画像をすばやく検索する手段としてサムネイル画像を生成して主画像と関連付けて記録することが標準的になっている。デジタルカメラのファイルフォーマットを統一するDCF（Design Rule of Camera File System)規格においてもサムネイル画像を作成することが規定されていた。

図７は、従来の技術によるサムネイル画面表示例を示す図である。
図７に示す従来の技術では、パディングがついたサムネイル画像を表示した場合はパディング部分もそのまま表示されていた。図７において画像７１〜７４、７６は回転処理を行っていない画像であり、パディング部分が画像の上下に黒帯びのように表示されていた。画像７５は回転処理を行った画像であり、パディング部分は画像の左右に黒帯びのように表示されていた。

なお、ＤＣＦ規格ではパディングの位置及びパディングに使用する色は規定されておらず、必ずしも図７のように表示されるとは限らないものであった。

特開平10-341402号公報

しかし上述したＤＣＦ規格のサムネイル画像は横１６０画素×縦１２０画素と決められており、普及しているデジタルテレビのワイド画面のアスペクト比１６対９と一致しない。

このため、例えば撮像画像のアスペクト比が１６対９の撮像素子を搭載したデジタルカメラで撮影したサムネイル画像７１〜７６は図７のように常に黒い部分で示すパディング部分が付いて表示画像が見苦しくなるという不都合があった。

本発明は上述した問題点に鑑みてなされたものであり、撮像画像のアスペクト比が４対３以外、例えば１６対９の撮像素子を搭載したデジタルカメラで画像データをテレビジョン受像機等に出力表示する際に、パディング部分がなく見栄えの良い表示を行う電子カメラ装置及び映像出力方法を提供することを課題とする。

上記課題を解決し、本発明の目的を達成するため、本発明の電子カメラ装置は、主画像にアスペクト比変換手段による第１のアスペクト比変換と縮小処理とのみを行うことによりファイルフォーマット規格のサムネイル画像を生成するサムネイル画像生成手段と、サムネイル画像にアスペクト比変換手段により第２のアスペクト比変換を行ってテレビジョンモニタに表示されるように出力する出力表示手段と、主画像のアスペクト比を検出するアスペクト比検出手段と、アスペクト比が異なる複数の主画像のうち、主画像のアスペクト比の一番多いものを集計する集計手段とを備え、上記集計手段の結果により、アスペクト比が異なる複数の主画像のサムネイル画像を同時に画面表示する際に、主画像のアスペクト比の一番多いものにするように上記第２のアスペクト比変換を制御するものである。

これにより、サムネイル画像のテレビジョンモニタへの表示に際し、主画像のアスペクト比の変換及び縮小処理のみを行ってサムネイル画像を生成し、さらに生成されたサムネイル画像のアスペクト比変換を行って、テレビジョンモニタに表示されるように出力することができる。
また、表示されるサムネイル画像のアスペクト比を統一してテレビジョンモニタに表示されるように出力することができる。

また、本発明の電子カメラ装置は、主画像のアスペクト比を検出するアスペクト比検出手段と、主画像にアスペクト比変換手段による第１のアスペクト比変換と縮小処理とのみを行うことによりファイルフォーマット規格のサムネイル画像を生成するサムネイル画像生成手段と、主画像のアスペクト比がファイルフォーマット規格で定められたサムネイル画像のアスペクト比と異なるか否かを判断する判断手段と、サムネイル画像を固定サイズで記録するために付加されるパディングを検出するパディング検出手段と、サムネイル画像から検出されたパディングを取り除く除去手段と、サムネイル画像にアスペクト比変換手段により主画像のアスペクト比に基づいて第２のアスペクト比変換を行ってテレビジョンモニタに表示されるように出力する出力表示手段と、アスペクト比が異なる複数の主画像のうち、主画像のアスペクト比の一番多いものを集計する集計手段を備え、上記集計手段の結果により、アスペクト比が異なる複数の主画像のサムネイル画像を同時に画面表示する際に、主画像のアスペクト比の一番多いものにするように上記第２のアスペクト比変換を制御するものである。

これにより、サムネイル画像のテレビジョンモニタへの表示に際し、主画像のアスペクト比がファイルフォーマット規格で定められたサムネイル画像のアスペクト比と異なり、かつサムネイル画像にパディングがある場合はパディング部分を取り除く処理を行った後に、アスペクト比変換を行って、表示されるサムネイル画像のパディング部分が取り除かれて、テレビジョンモニタに表示されるように出力することができる。
また、表示されるサムネイル画像のアスペクト比を統一してテレビジョンモニタに表示されるように出力することができる。

また、本発明の映像出力方法は、主画像にアスペクト比変換手段による第１のアスペクト比変換と縮小処理とのみを行うことによりファイルフォーマット規格のサムネイル画像をサムネイル画像生成手段により生成するサムネイル画像生成ステップと、サムネイル画像にアスペクト比変換手段により第２のアスペクト比変換を行ってテレビジョンモニタに表示されるように出力表示手段により出力する出力表示ステップと、主画像のアスペクト比をアスペクト比検出手段により検出するアスペクト比検出ステップと、アスペクト比が異なる複数の主画像のうち、主画像のアスペクト比の一番多いものを集計手段により集計する集計ステップとを備え、上記集計手段の結果により、アスペクト比が異なる複数の主画像のサムネイル画像を同時に画面表示する際に、主画像のアスペクト比の一番多いものにするように上記第２のアスペクト比変換を制御するものである。

また、本発明の映像出力方法は、主画像のアスペクト比をアスペクト比検出手段により検出するアスペクト比検出ステップと、主画像にアスペクト比変換手段による第１のアスペクト比変換と縮小処理とのみを行うことによりファイルフォーマット規格のサムネイル画像を生成するサムネイル画像生成ステップと、主画像のアスペクト比がファイルフォーマット規格で定められたサムネイル画像のアスペクト比と異なるか否かを判断手段により判断する判断ステップと、サムネイル画像を固定サイズで記録するために付加されるパディングをパディング検出手段により検出するパディング検出ステップと、サムネイル画像から検出されたパディングを除去手段により取り除く除去ステップと、サムネイル画像にアスペクト比変換手段により主画像のアスペクト比に基づいて第２のアスペクト比変換を行ってテレビジョンモニタに表示されるように出力表示手段により出力する出力表示ステップと、アスペクト比が異なる複数の主画像のうち、主画像のアスペクト比の一番多いものを集計手段により集計する集計ステップを備え、上記集計手段の結果により、アスペクト比が異なる複数の主画像のサムネイル画像を同時に画面表示する際に、主画像のアスペクト比の一番多いものにするように上記第２のアスペクト比変換を制御するものである。

本発明によれば、撮像画像のアスペクト比が４対３以外の主画像を生成する電子カメラにおいても、サムネイルの表示にパディング部分が表示されず、見栄えがよいサムネイル表示をユーザーに提供することができる。また、請求項４、請求項１０によれば、主画像のアスペクト比が４対３以外でパディング部分があるサムネイル画像もパディング部分を取り除き、見栄えのよいサムネイル表示をユーザーに提供することができる。

また、主画像のアスペクト比が異なるサムネイル画像を複数枚並べて表示する場合でもサムネイル画像の大きさが統一され、見栄えがよいサムネイル表示をユーザーに提供することができる。

以下、本発明の実施の形態を、図面を参照して説明する。
図１は、本発明の実施の形態による撮像装置の構成を示すブロック図である。
図１において、撮像部１は光学系により結像された被写体映像を固体撮像素子より読み出し、映像信号として出力する。RAM２（Random Access Memory）はCPU（Central Processing Unit）７とバス（BUS）０により接続されたメモリである。フラッシュ（Flush）ROM（read only Memory）3はCPU７とバス（BUS）０により接続された書き換え可能なＲＯＭである。

LAN（Local Area Network）インターフェース（Ｉ/Ｆ）４はCPU７を外部ネットワークとの接続を行うインターフェースである。画像メモリ５はDSP（Digital Signal Processor）6により処理された画像データを一時的に記憶する。DSP６は撮像部１から取り込んだ映像信号に自動露出やホワイトバランス処理等を行う。またDSP６は、CPU７から圧縮の要求があった場合は画像メモリ５に一時的に記憶されている画像データの圧縮処理を行い、結果をRAM２に転送し、伸張の要求があった場合はRAM2のデータを伸張処理を行い結果を画像メモリ５に転送する。

CPU７はフラッシュ（Flush）ROM３に記録されているプログラムを実行し、撮像装置全体の制御を行う。表示装置８は画像メモリ５に一時記憶されている画像データにＯＳＤ（On Screen Display）を加えた画像が表示される。PCモニタ９はパーソナルコンピュータ用モニタのインターフェースで画像メモリ５に一時記憶されている画像データが表示される。

映像出力端子１０はテレビジョンモニタ接続用ケーブルとの接続用端子で、オーディオ（AUDIO）信号１４、NTSC（National Television System Committee）/PAL（Phase Alternation by Line）信号１５、HD（High definition）TV信号１６とSD（Standard definition）TV信号１７のうち選択された信号が出力される。またケーブルの接続状態及び接続されたケーブルの種類の判別信号１９がCPU７に通知される。

信号切り替え器１１はDSP６からHDTV信号とSDTV信号が入力され、CPU７からの切り替え信号１８にて選択されたTV信号を映像出力端子１０に出力する。外部記憶媒体１２は、記録時はRAM２に一時記憶されている映像圧縮信号を書き込み、再生時は記憶されている映像圧縮信号をRAM２へ読み出す。

ここで、DSP６は、テレビジョンモニタに表示される画像のアスペクト比を変換するアスペクト比変換手段を構成する。

また、DSP６は、主画像にアスペクト比変換手段により第１のアスペクト比変換を行って予め決められた画素数に縮小してサムネイル画像を生成するサムネイル画像生成手段を構成する。

また、CPU７は、DSP６に対してサムネイル画像にアスペクト比変換手段により第２のアスペクト比変換を行わせ、さらに得られた表示用サムネイル画像をテレビジョンモニタに表示されるように出力する出力表示手段を構成する。

また、DSP６は、主画像のアスペクト比を検出するアスペクト比検出手段を構成する。

また、CPU７は、主画像のアスペクト比がファイルフォーマット規格で定められたサムネイル画像のアスペクト比と異なるか否かを判断する判断手段を構成する。
また、CPU７は、サムネイル画像を固定サイズで記録するために付加されるパディングを検出するパディング検出手段を構成する。
また、CPU７は、サムネイル画像から検出されたパディングを取り除く除去手段を構成する。
また、CPU７は、DSP６に対してサムネイル画像にアスペクト比変換手段により主画像のアスペクト比に基づいてアスペクト比変換を行わせ、さらに得られた表示用サムネイル画像をテレビジョンモニタに表示されるように出力する出力表示手段を構成する。

また、CPU７は、主画像のアスペクト比を集計する集計手段を備え、集計手段の結果によりアスペクト比変換手段を制御するように構成される。
また、ファイルフォーマット規格はＤＣＦ規格であるように構成される。

以下に、具体的な動作例を説明する。
図２は、本発明によるサムネイル画面表示例を示す図である。
図２は、従来の技術に示した図７と同じサムネイル画像に本発明を適用した場合の画面表示例である。本発明においては、図７にあったようなサムネイル画像の上下あるいは左右にあるパディング部分は表示されない。

図２においてサムネイル画像２１〜２４、２６は回転処理を行っていないサムネイル画像であり、サムネイル画像の上下にパディング部分が表示されない。サムネイル画像２５は回転処理を行った画像であり、サムネイル画像の左右にパディング部分が表示されない。

図３は、本発明によるサムネイル作成処理及び第１形態のサムネイル表示処理のフローチャートを示す図であり、図３Ａはサムネイル作成処理、図３Ｂはサムネイル表示処理である。
図３Ａにおいて、サムネイルの作成処理は、まず、ステップS１で、DSP６は、主画像のアスペクト比変換を行い、ステップS２で、DSP６は、縮小処理を行ってサムネイル画像を生成する。

図３Ｂにおいて、サムネイル画像の表示処理は、ステップS３で、DSP６は、サムネイル画像にアスペクト比変換を行い、ステップS４で、CPU７は、サムネイル画像の表示を行うための出力をする。

ここで、ステップS３のサムネイル画像のアスペクト比変換はステップS１の主画像のアスペクト比の情報によって制御される。例えばアスペクト比が異なる複数の主画像のサムネイル画面を同時に画面表示する際に、サムネイル画像のアスペクト比を主画像のアスペクト比の一番多いものにすることで、アスペクト比変換により歪が生じるサムネイル画像の数を最小にすることができる。

図４は、本発明による第２形態のサムネイル画面表示を行うためのフローチャート例を示す図である。
まず、ステップS１１で、CPU７は、主画像の画像サイズを取得する。これは後述する図６に示すＪＰＥＧファイルの構造のＥｘｉｆタグの情報やマーカーに付随する情報などから取得可能である。

次に、ステップS１２で、CPU７は、取得した主画像のサイズからアスペクト比が４対３であるか否かの判断を行う。

ステップS１２で主画像のアスペクト比が４対３でない場合は、ステップS１３へ移行して、CPU７は、サムネイルにパディング部分があるか否かの判断をする。ステップS１３で、サムネイルにパディング部分があると判断したときは、ステップS１４へ移行して、DSP６は、サムネイルについているパディング部分を取り除く。

次に、ステップS１４の後及びステップS１２で主画像のアスペクト比が４対３のときは、ステップS１５へ移行して、DSP６は、サムネイルのアスペクト比変換を行う。ここで、ステップS１５のアスペクト比変換はステップS１２で判断した主画像のアスペクト比の情報によって制御される。

最後に、ステップS１６で、CPU７は、アスペクト変換後にサムネイルの表示を行うための出力をする。

図５は、本発明によるサムネイル画像の作成および表示の概要を示す図である。
図５において主画像５１はアスペクト比１６対９の主画像である。
記録時に、DSP６は、この主画像５１にアスペクト比変換５４及び縮小５４の処理を行い、ＤＣＦ規格である横１６０縦１２０画素のサムネイル画像５２を作成し、CPU７は、サムネイル画像５２を画像メモリ５に記録する。

上述したアスペクト比変換５４は図３のステップS１に対応する。また、縮小５４図３のステップS２に対応する。

再生時に、DSP６は、画像メモリ５からサムネイル画像５２を読み込み、DSP６は、サムネイル画像５２に対してアスペクト比変換処理５５を施し、表示用のサムネイル画像５３が生成される。

上述したアスペクト比変換処理５５は図３のステップS３、図４のステップS１５に対応する。

図６は、ＤＣＦ規格のＪＰＥＧファイルの構造と、画面の高さおよび幅の情報の場所を示す図である。

図６において、ＪＰＥＧファイルの構造６１は、ＳＯＩ（Start of Image）６１−１，ＡＰＰ１（Application Data 1）６１−２，ＤＱＴ（Define Quantization Tables）６１−３，ＤＨＴ（Define Huffman Tables）６１−４，ＳＯＦ（Start of Frame）６１−５，ＳＯＳ（Start of Scan）６１−６，Compressed Data６１−７，ＥＯＩ（End of Image）６１−８で構成される。

ここで、ＡＰＰ１６１−２は、ＡＰＰ１の構造６２で示すように、ＡＰＰ１ Marker６２−１，Length６２−２，Exif６２−３，TIFF Header６２−４，０th IFD（Image File Directory）６２−５，Exif IFD６２−６,１st IFD６２−７，ＪＰＥＧ Thumbnail６２−８で構成される。

また、ＳＯＦ６１−５は、ＳＯＦの構造６３で示すように、ＳＯＦ Marker６３−１，Length６３−２，データの精度６３−３，垂直ライン数６３−４，水平画素数６３−５，コンポーネント数６３−６，コンポーネント情報６３−７で構成される。

ＡＰＰ１の構造６２の０th IFD６２−５は、Exif TAG ０th IFD６４で示すように、・・・Image Width６４‐２，Image Length６4−3・・・で構成される。

ここで、Exif TAG ０th IFD６４のImage Width６４‐２はＳＯＦ６１−５の水平画素数６３−５に対応して、画面の幅６６の情報の場所を示していて、Exif TAG ０th IFD６４のImage Length６4−3はＳＯＦ６１−５の垂直ライン数６３−４に対応して、画面の高さ６５の情報の場所を示している。

上述した図４のステップS１１で、CPU７が、主画像の画面の高さ６５、画面の幅６６などの画像サイズを取得する際に、ＪＰＥＧファイルの構造６１のうち、６４で示したExifタグのImage Width６４‐２、Image Length６4−3の情報や、６３で示したＳＯＦ６１−５のマーカーに付随する水平画素数６３−５、垂直ライン数６３−４などから取得可能である。

撮像画像のアスペクト比が４対３以外、例えば１６対９の撮像素子を搭載したデジタルカメラで画像データをテレビジョン受像機等に出力表示する際に利用可能である。

本発明の実施の形態によるデジタルカメラの構成を示すブロック図である。サムネイル画面表示例を示す図である。サムネイル作成処理及び第１形態のサムネイル表示処理の動作を示すフローチャートを示す図であり、図３Ａはサムネイル作成処理、図３Ｂはサムネイル表示処理である。第２形態のサムネイル画面表示を行うための動作を示すフローチャートを示す図である。サムネイル画像の作成および表示の概要を示す図である。 DCF規格のJPEGファイルの構造と、画面の高さ及び幅の情報の場所を示す図である。従来の技術によるサムネイル画面表示例を示す図である。

符号の説明

１…撮像部、２…RAM、３…Flush ROM、４…LAN I/F、５…画像メモリ、６…DSP、７…CPU、８…表示装置、９…PCモニタI/F、１０…映像出力端子、１１…信号切り替え器、１２…外部記憶媒体、１３…USB I/F、１５…NTSC/PAL方式映像信号、１６…HD方式映像信号、１７…SD方式映像信号、１８…切り替え信号、１９…接続及びケーブル種類検出信号、２０…画面、２１〜２６…サムネイル画像、５１…主画像、５２…DCF規格のサムネイル画像、５５…アスペクト比変換、５４…アスペクト比変換及び縮小、５３…表示用サムネイル画像、６１…JPEGファイルの構造、６３…ＳＯＦの構造、６４…Exifタグ、６５…画面の高さ、６６…画面の幅

Claims

撮像手段により被写体を撮影して得られた画像データを用いて生成されるサムネイル画像を固定サイズで記録するファイルフォーマット規格に対応したファイル管理構造で記録媒体に記録して、ケーブルを介して接続されるテレビジョンモニタに上記サムネイル画像の映像信号を出力する電子カメラ装置であって、
主画像にアスペクト比変換手段による第１のアスペクト比変換と縮小処理とのみを行うことにより上記ファイルフォーマット規格のサムネイル画像を生成するサムネイル画像生成手段と、
上記サムネイル画像に上記アスペクト比変換手段により第２のアスペクト比変換を行って上記テレビジョンモニタに表示されるように出力する出力表示手段と、
主画像のアスペクト比を検出するアスペクト比検出手段と、
アスペクト比が異なる複数の主画像のうち、主画像のアスペクト比の一番多いものを集計する集計手段とを備え、
上記集計手段の結果により、アスペクト比が異なる複数の主画像のサムネイル画像を同時に画面表示する際に、主画像のアスペクト比の一番多いものにするように上記第２のアスペクト比変換を制御する
電子カメラ装置。
撮像手段により被写体を撮影して得られた画像データを用いて生成されるサムネイル画像を固定サイズで記録するファイルフォーマット規格に対応したファイル管理構造で記録媒体に記録して、ケーブルを介して接続されるテレビジョンモニタに上記サムネイル画像の映像信号を出力する電子カメラ装置であって、
主画像のアスペクト比を検出するアスペクト比検出手段と、
主画像にアスペクト比変換手段による第１のアスペクト比変換と縮小処理とのみを行うことにより上記ファイルフォーマット規格のサムネイル画像を生成するサムネイル画像生成手段と、
主画像のアスペクト比が上記ファイルフォーマット規格で定められたサムネイル画像のアスペクト比と異なるか否かを判断する判断手段と、
上記サムネイル画像を上記固定サイズで記録するために付加されるパディングを検出するパディング検出手段と、
上記サムネイル画像から検出されたパディングを取り除く除去手段と、
上記サムネイル画像に上記アスペクト比変換手段により主画像のアスペクト比に基づいて第２のアスペクト比変換を行って上記テレビジョンモニタに表示されるように出力する出力表示手段と、
アスペクト比が異なる複数の主画像のうち、主画像のアスペクト比の一番多いものを集計する集計手段を備え、
上記集計手段の結果により、アスペクト比が異なる複数の主画像のサムネイル画像を同時に画面表示する際に、主画像のアスペクト比の一番多いものにするように上記第２のアスペクト比変換を制御する
電子カメラ装置。
撮像手段により被写体を撮影して得られた画像データを用いて生成されるサムネイル画像を固定サイズで記録するファイルフォーマット規格に対応したファイル管理構造で記録媒体に記録して、ケーブルを介して接続されるテレビジョンモニタに上記サムネイル画像の映像信号を電子カメラ装置により出力する映像出力方法であって、
主画像にアスペクト比変換手段による第１のアスペクト比変換と縮小処理とのみを行うことにより上記ファイルフォーマット規格のサムネイル画像をサムネイル画像生成手段により生成するサムネイル画像生成ステップと、
上記サムネイル画像に上記アスペクト比変換手段により第２のアスペクト比変換を行って上記テレビジョンモニタに表示されるように出力表示手段により出力する出力表示ステップと、
主画像のアスペクト比をアスペクト比検出手段により検出するアスペクト比検出ステップと、
アスペクト比が異なる複数の主画像のうち、主画像のアスペクト比の一番多いものを集計手段により集計する集計ステップとを備え、
上記集計手段の結果により、アスペクト比が異なる複数の主画像のサムネイル画像を同時に画面表示する際に、主画像のアスペクト比の一番多いものにするように上記第２のアスペクト比変換を制御する
映像出力方法。
撮像手段により被写体を撮影して得られた画像データを用いて生成されるサムネイル画像を固定サイズで記録するファイルフォーマット規格に対応したファイル管理構造で記録媒体に記録して、ケーブルを介して接続されるテレビジョンモニタに上記サムネイル画像の映像信号を電子カメラ装置により出力する映像出力方法であって、
主画像のアスペクト比をアスペクト比検出手段により検出するアスペクト比検出ステップと、
主画像にアスペクト比変換手段による第１のアスペクト比変換と縮小処理とのみを行うことにより上記ファイルフォーマット規格のサムネイル画像をサムネイル画像生成手段により生成するサムネイル画像生成ステップと、
主画像のアスペクト比が上記ファイルフォーマット規格で定められたサムネイル画像のアスペクト比と異なるか否かを判断手段により判断する判断ステップと、
上記サムネイル画像を上記固定サイズで記録するために付加されるパディングをパディング検出手段により検出するパディング検出ステップと、
上記サムネイル画像から検出されたパディングを除去手段により取り除く除去ステップと、
上記サムネイル画像に上記アスペクト比変換手段により主画像のアスペクト比に基づいて第２のアスペクト比変換を行って上記テレビジョンモニタに表示されるように出力表示手段により出力する出力表示ステップと、
アスペクト比が異なる複数の主画像のうち、主画像のアスペクト比の一番多いものを集計手段により集計する集計ステップを備え、
上記集計手段の結果により、アスペクト比が異なる複数の主画像のサムネイル画像を同時に画面表示する際に、主画像のアスペクト比の一番多いものにするように上記第２のアスペクト比変換を制御する
映像出力方法。