JP2007013470A - 画像処理装置及び画像処理方法 - Google Patents

Abstract

【課題】縦長の画像や不要な領域等を含む画像とはならないアスペクト比に変換された動画像から静止画像を抽出して保存する。
【解決手段】動画像データから静止画像データを抽出して保存する画像処理装置であって、動画像データを入力する入力手段と、前記入力手段により入力された動画像データが、第１のアスペクト比を有する第１の動画像データか、第２のアスペクト比の動画像データを加工して得られ、第２のアスペクト比に応じた有効領域を有する第２の動画像データかを判別する判別手段と、前記第２の動画像データと判別された場合、前記第２のアスペクト比に応じた有効領域のみを抽出して静止画像データとして保存する保存手段とを具備する。
【選択図】 図１

Description

本発明は、例えば、ＤＶテープ等の記録媒体や外部機器から入力した動画像から静止画像を抽出してメモリカード等に保存する画像処理技術に関する。

従来、動画像を撮影し、デジタル信号として磁気テープに記録再生するビデオカメラ一体型デジタルＶＴＲが知られている。

特に、民生用のデジタルＶＴＲの規格としてＤＶフォーマットが知られており、近年では、このＤＶフォーマットに従うデジタルＶＴＲが広く普及している。

また、従来、この種のビデオカメラでは、アスペクト比４：３の動画像のみ撮影可能であった。

一方、近年、ＨＤ方式のテレビジョン放送を受信可能なテレビジョン受像機やアスペクト比１６：９の表示画面を持つテレビジョンモニタ等が広く普及したことにより、ビデオカメラにおいてもアスペクト比１６：９の動画像が撮影できるものが登場している。

このようなビデオカメラにおいては、動画像データの記録方法として、主に以下の三つの方法が考えられる。
（１）通常の動画像、すなわちＮＴＳＣ方式の場合、アスペクト比４：３で撮影した画像（図４）を、画素アスペクト比８：９の長方画素で構成された７２０×４８０画素の画像データとして記録する。
（２）スクイズ形式の動画像、すなわちＮＴＳＣ方式の場合、アスペクト比１６：９で撮影した画像の横方向の画素数を削減し、画素アスペクト比３２：３７の長方画素で構成された７２０×４８０画素の画像データとして記録する。

なお、この画像をアスペクト比４：３で表示すると、水平方向に３／４圧縮された縦長の画像（図５）となる。
（３）レターボックス形式の動画像、すなわちＮＴＳＣ方式の場合、アスペクト比１６：９で撮影した画像を、画素アスペクト比８：９の長方画素で構成された７２０×３６０画素の画像データとする。そして、上下に７２０×６０画素ずつの黒画像を付けた画像（図６）を７２０×４８０画素の画像データとして記録する。

例えば、特許文献１では、ＳＤビデオ信号における上記（１）〜（３）を判別可能な情報を、垂直ブランキング期間に送受信する方法及び、８ｍｍ規格のテープに記録する方法について述べられている。

また、特許文献２では、ＳＤビデオ信号における上記（１）〜（３）の情報をＮＴＳＣ方式及びＰＡＬ方式で送受信する方法及び、ＭＰＥＧの画像データに多重化する方法について述べられている。

すなわち、入力されたＳＤビデオ信号から画像データを得ると共に、上記（１）〜（３）を判別可能な情報を得ることが可能である。

また、一部のビデオカメラでは、テープから再生された動画像データや、外部機器から入力された動画像データ中の一画面を抽出し、静止画像としてメモリカード等の記録媒体に記録する機能を持つものがある。

また、近年、高精細なＨＤ形式の画像を記録可能なビデオカメラも登場している。

特に、ＨＤ形式の画像を記録可能な民生用ビデオカメラとしてＨＤＶフォーマット方式のビデオカメラが登場している。

ＨＤＶフォーマットでは、１４４０×１０８０画素の画像データと音声データとをＭＰＥＧ２方式で符号化し、付加情報データと共にＤＶフォーマットと同様のテープに記録する。
特開平０５−２８４４５２号公報 特開平０９−０５１５０１号公報

前述のように、ビデオカメラにおいて再生された動画像データから静止画像を抽出してメモリカード等に保存する場合、従来は、単に再生された動画像データ中の一画面を抽出してそのまま保存している。

そのため、再生される動画像データが、上記（２）のスクイズ形式あるいは（３）のレターボックス形式で記録されたアスペクト比１６：９のワイド画像であった場合でもそのまま保存されてしまう。

ここで、ＰＣで静止画像や動画像を再生させるソフトウェアの多くは、画素アスペクト比１：１（正方画素）の画像のみに対応している。

このため、そのまま保存された静止画像をＰＣで再生すると、（２）の場合には水平方向に３／４倍に縮小された縦長のスクイズ画像（図５）が再生され、（３）の場合には不要な上下の黒画像の領域を含むレターボックス画像（図６）が再生されてしまう。

また、ＨＤＶフォーマットで記録されたＨＤ形式の動画像から正方画素で構成される画像に変換してメモリカード等の記録媒体に記録するデジタルビデオカメラは存在していない。

本発明は、上記課題に鑑みてなされ、その目的は、縦長の画像や不要な領域等を含む画像とはならないアスペクト比に変換された動画像から静止画像を抽出して保存できる画像処理技術を実現することである。

上記課題を解決するため、本発明の画像処理装置は、動画像データから静止画像データを抽出して保存する画像処理装置であって、動画像データを入力する入力手段と、前記入力手段により入力された動画像データが、第１のアスペクト比を有する第１の動画像データか、第２のアスペクト比の動画像データを加工して得られ、第２のアスペクト比に応じた有効領域を有する第２の動画像データかを判別する判別手段と、前記第２の動画像データと判別された場合、前記第２のアスペクト比に応じた有効領域のみを抽出して静止画像データとして保存する保存手段とを具備する。

また、本発明の画像処理装置は、動画像データから静止画像データを抽出して保存する画像処理装置であって、動画像データを入力する入力手段と、前記入力手段により入力された動画像データが、第２のアスペクト比を有する第２の動画像データの横方向の画素数を削減して得られた第３のアスペクト比を有する第３の動画像データかを判別する判別手段と、前記第３の動画像データと判別された場合、縦方向の画素数を削減せずに横方向の画素数を増やした静止画像データとして保存する保存手段とを具備する。

また、本発明の画像処理方法は、動画像データから静止画像データを抽出して保存する画像処理方法であって、動画像データを入力する入力工程と、前記入力工程にて入力された動画像データが、第１のアスペクト比を有する第１の動画像データか、第２のアスペクト比の動画像データを加工して得られ、第２のアスペクト比に応じた有効領域を有する第２の動画像データかを判別する判別工程と、前記第２の動画像データと判別された場合、前記第２のアスペクト比に応じた有効領域のみを抽出して静止画像データとして保存する保存工程とを具備する。

また、本発明の画像処理方法は、動画像データから静止画像データを抽出して保存する画像処理方法であって、動画像データを入力する入力工程と、前記入力工程にて入力された動画像データが、第２のアスペクト比を有する第２の動画像データの横方向の画素数を削減して得られた第３のアスペクト比を有する第３の動画像データかを判別する判別工程と、前記第３の動画像データと判別された場合、縦方向の画素数を削減せずに横方向の画素数を増やした静止画像データとして保存する保存工程とを具備する。

本発明によれば、縦長の画像や不要な領域等を含む画像とはならないアスペクト比に変換された動画像から静止画像を抽出して保存できるので、縦長の画像や不要な領域等を含む画像が再生されるのを防止できる。

以下に、添付図面を参照して本発明を実施するための最良の形態について詳細に説明する。

尚、以下に説明する実施の形態は、本発明の実現手段としての一例であり、本発明が適用される装置の構成や各種条件によって適宜修正又は変更されるべきものであり、本発明は以下の実施の形態に限定されるものではない。

本実施形態では、テープ再生画像や外部入力画像から静止画像や動画像を出力画像として生成してメモリカードに記録する。その際に、上記テープ再生画像や外部入力画像がＳＤビデオ画像における（１）通常画像か、（２）スクイズ画像か、（３）レターボックス画像か、あるいは（４）ＨＤビデオ画像かを判別する。その判別結果に基づいて上記テープ再生画像や外部入力画像を図２に示す変換方式に従って変換して所定のアスペクト比の出力画像を生成し、更に当該出力画像から静止画像を抽出して記録する。

なお、以下の説明中において、画像又は画素のアスペクト比は、水平方向サイズをｗ、垂直方向サイズをｈとした場合、ｗ：ｈと記述している。また、画像の画素数は、水平方向の画素数をＷ、垂直方向の画素数をＨとした場合、Ｗ×Ｈと記述している。なお、画像のアスペクト比（ｗ：ｈ）と、画像の画素数の比（Ｗ：Ｈ）は、画素のアスペクト比が１：１（正方画素）でない場合には一致しない。例えば、ＳＤビデオ画像における通常画像のアスペクト比は４：３であるが、画素数（７２０×４８０）のアスペクト比は３：２となる。

なお、画像中の位置を示す場合には、画像の左上を原点として、画素数を単位とする水平方向の位置をＷｐ、垂直方向の位置をＨｐとした場合、［Ｗｐ，Ｈｐ］と記述している。

また、表示領域とは、画像が表示される領域であって、ＳＤビデオ信号の垂直ブランキング期間に送られる情報のように、画面に表示されない領域は含まない。ただし、レターボックス画像に含まれる上下の黒画像の領域は含むものとする。

また、有効領域とは、レターボックス画像に含まれる上下の黒画像の領域を除いた領域とする。

図１は、第１の実施形態における画像処理装置の構成を示すブロック図である。

図１において、画像処理装置１００のＣＰＵ１０２には、バス１０１を介してＲＡＭ１０３、ＲＯＭ１０４、キー操作処理部１０５、入力画像処理部１１１、出力画像処理部１２１が接続されている。

ＣＰＵ１０２はＲＯＭ１０４に格納されている制御プログラムに従って動作し、動作時の一時的な情報の格納場所としてＲＡＭ１０３を用いる。

ユーザによるキー操作の状態は、キー操作処理部１０５で保持され、ＣＰＵ１０２の上記制御プログラムは、定期的に上記キー操作の状態をキー操作処理部１０５より取得する。

ＣＰＵ１０２の上記制御プログラムは、取得した上記キー操作の状態によって、出力画像処理部１２１を制御する。そして、テープに記録されている画像の再生動作、ＩＥＥＥ１３９４端子から入力される画像の表示動作、外部入出力端子から入力される画像の表示動作を行う。更に、これらの動作中に、操作キーの操作による静止画取り込みの指示に従い、入力画像処理部１１１を制御して、動画像データ中の一画面を抽出し、静止画像データとしてメモリカードに記録する動作を行う。

先ず、図１を参照してテープに記録されている画像、音声データの再生動作について説明する。

出力画像処理部１２１は、テープ制御部１２６を制御し、不図示のテープデッキと再生ヘッドを駆動することで、デッキに収められているテープ１２６ａより、再生ヘッドを介してテープ記録データを読み出す。

テープから再生されたデータは一旦ＲＡＭ１２５に格納される。ＣＰＵ１０２の上記制御プログラムは出力画像処理部１２１を介して、上記テープ記録データがＤＶフォーマットで記録された（ａ）ＳＤ画像か、ＨＤＶフォーマットで記録された（ｂ）ＨＤ画像かを判別する。そして、判別結果に応じてＣＰＵ１０２の上記制御プログラムは、出力画像処理部１２１を制御し、上記（ａ）の場合にはＤＶフォーマットコーデック１２４によって上記テープ記録データをデコードする。また、上記（ｂ）の場合にはＨＤＶフォーマットコーデック１２７によって再生されたデータをデコードする。これにより、画像データと、音声データと、付加情報データとを得てＲＡＭ１２５に格納する。

上記画像データが上記（ａ）の場合、上記付加情報データには次の（１）〜（３）を判別する情報が含まれる。
（１）通常のアスペクト比で撮影され記録されたものか。
（２）ワイドなアスペクト比で撮影され通常のアスペクト比にスクイズされ記録されたものか。
（３）ワイドなアスペクト比で撮影され通常のアスペクト比のレターボックスで記録されたものか。

ＣＰＵ１０２の上記制御プログラムは、出力画像処理部１２１を介して、上記付加情報データを取得する。

出力画像処理部１２１は、ＲＡＭ１２５に格納されたデータを、（ａ）の場合にはＤＶフォーマットの通信仕様、（ｂ）の場合にはＨＤＶフォーマットの通信仕様に変換し１３９４制御部１２９により不図示の１３９４端子より出力する。

更に、出力画像処理部１２１は、ＲＡＭ１２５に格納された上記画像データを、（ａ）の場合にはそのままの解像度で、（ｂ）の場合にはＨＤ画像からＳＤ画像にダウンコンバートする。そして、スクイズ画像であるという付加情報データと共に、ＬＣＤ制御部１２３に出力して不図示のＬＣＤに画像を表示する。また、ＲＡＭ１２５に格納された上記音声データを、スピーカ制御部１２２にてＡＤ変換し、不図示のスピーカから音声を出力する。また、ＲＡＭ１２５に格納された上記画像データと上記音声データとを、（ａ）の場合には上記付加情報データと共に、（ｂ）の場合はＨＤ画像からＳＤ画像にダウンコンバートする。そして、スクイズ画像であるという付加情報と共に、ビデオ入出力制御部１２８に出力し、ＡＤ変換したＳＤビデオ信号を不図示のビデオ端子より出力する。なお、ここで出力されるＳＤビデオ信号の垂直ブランキング期間には、上記付加情報データより得られる上記（１），（２），（３）を判別できる信号が含まれる。

更に、出力画像処理部１２１は、ＲＡＭ１２５に格納された上記画像データと、音声データとを、入力画像処理部１１１に出力する。入力画像処理部１１１は入力された上記画像データと、音声データとをＲＡＭ１１４に格納する。

次に、図１を参照して、テープから再生された動画像データ中の一画面を静止画像としてメモリカードに記録する動作について説明する。

ユーザは、再生画像を確認しながら、操作キー１０５ａを操作し、静止画像として保存したい画像が再生されたタイミングで静止画取り込みを指示する。ＣＰＵ１０２の制御プログラムは、キー操作処理部１０５より静止画取り込みの指示があると、ＲＡＭ１１４に格納されたテープからの再生画像データが（ａ），（ｂ）のいずれであるか、又は（ａ）である場合には上記付加情報データが上記（１），（２），（３）のいずれであるかを判別する。そして、その判別結果に応じてＲＡＭ１１４に格納された再生動画像データのうちの一画面を抽出し、出力画像データに変換する変換方式について、入力画像処理部１１１に設定番号を設定する。入力画像処理部１１１は設定された設定番号に従い、上記抽出した一画面の画像データを出力画像データに変換してＲＡＭ１１４に格納する。

次に、入力画像処理部１１１は、ＲＡＭ１１４に格納された一画面の画像データを、ＪＰＥＧコーデック１１３によってエンコードしてＲＡＭ１１４に格納する。

次に、入力画像処理部１１１はＲＡＭ１１４に格納された静止画像データを、カード制御部１１５によってメモリカードＣに記録する。

ここで、図３は上記制御プログラムが実行する変換方式の設定処理を表すフローチャートである。

まず、ステップＳ３０１において、テープからの再生画像データが（ｂ）である場合には、ステップＳ３０７において設定番号に４を設定する。上記テープ記録データが（ａ）の場合には、ステップＳ３０２に進み、上記付加情報が（１）である場合には、ステップＳ３０４において設定番号に１を設定する。上記付加情報が（１）でない場合には、ステップＳ３０３に進み、上記付加情報が（２）である場合には、ステップＳ３０５において設定番号に２を設定する。上記付加情報が（３）である場合には、ステップＳ３０６において設定番号に３を設定する。

図２は、入力画像処理部１１１が設定された上記設定番号に対する、ＲＡＭ１１４に格納された上記画像データ（入力画像）から上記出力画像データ（出力画像）への変換内容をＮＴＳＣ方式の場合を例に示す表である。即ち、設定番号が１の場合、７２０×４８０画素の入力画像の全領域を有効領域として、水平方向に８／９倍と縮小することで、６４０×４８０画素の正方画素を持つ出力画像を得る。また、設定番号が２の場合、７２０×４８０画素の入力画像の全領域を有効領域として、水平方向に５３／４５倍と拡大することで、８４８×４８０画素の正方画素を持つ出力画像に変換する。また、設定番号３の場合、７２０×４８０画素の入力画像の位置［０，６０］より７２０×３６０画素の領域を有効領域として、水平方向に８／９倍と縮小することで、６４０×３６０画素の出力画像を得る。また、設定番号４の場合、１４４０×１０８０画素の入力画像の全領域を有効領域として、水平方向に４／３倍と拡大することで、１９２０×１０８０画素の出力画像を得る。

このように、テープ記録データが（ａ）である場合に、画像データが（１）〜（３）のいずれであるかを判別し、その判別結果に応じて図２の変換方式に従って出力画像データに変換する。

また、このように動画像データから抽出し記録した静止画像データを再生したときに、（２）の場合には、正方画素で構成されてアスペクト比がほぼ１６：９（正確には１５．９：９）の画像（図７）として再生できる。また、（３）の場合にも、正方画素で構成されてアスペクト比１６：９の不要な領域を含まない画像（図７）として再生できる。また、テープ記録データが（ｂ）の場合にも、正方画素で構成されてアスペクト比が１６：９の画像（図７）として再生できる。

次に、図１を参照してＩＥＥＥ１３９４端子より画像、音声データを入力した際の動作について説明する。

出力画像処理部１２１は、１３９４制御部１２９を制御し、不図示の１３９４端子で接続された外部の画像入出力機器１８０との通信により画像データを受信する。

上記画像データはＲＡＭ１２５に格納され、ＣＰＵ１０２の上記制御プログラムは、出力画像処理部１２１を介して、上記画像データがＤＶフォーマットの（ａ）ＳＤ画像か、ＨＤＶフォーマットの（ｂ）ＨＤ画像かを判別する。そして、判別結果に応じてＣＰＵ１０２の上記制御プログラムは、出力画像処理部１２１を制御し、上記（ａ）の場合にはＤＶフォーマットコーデック１２４によって上記画像データをデコードする。また、上記（ｂ）の場合にはＨＤＶフォーマットコーデック１２７によって上記画像データをデコードする。これにより、画像データと、音声データと、付加情報データとを得てＲＡＭ１２５に格納する。

上記画像データが上記（ａ）の場合、上記付加情報データには次の（１）〜（３）を判別する情報が含まれる。
（１）通常のアスペクト比で撮影され記録されたものか。
（２）ワイドなアスペクト比で撮影され通常のアスペクト比にスクイズされ記録されたものか。
（３）ワイドなアスペクト比で撮影され通常のアスペクト比のレターボックスで記録されたものか。

ＣＰＵ１０２の上記制御プログラムは、出力画像処理部１２１を介して、上記付加情報データを取得する。

また、出力画像処理部１２１は、ＲＡＭ１２５に格納された上記画像データを、（ａ）の場合にはそのままの解像度で、（ｂ）の場合にはＨＤ画像からＳＤ画像にダウンコンバートする。そして、スクイズ画像であるという付加情報データと共に、ＬＣＤ制御部１２３に出力して不図示のＬＣＤで画像を表示する。また、ＲＡＭ１２５に格納された上記音声データを、スピーカ制御部１２２によってＡＤ変換し、不図示のスピーカより音声を出力する。

また、出力画像処理部１２１は、ＲＡＭ１２５に格納された上記画像データと上記音声データとを、（ａ）の場合には上記付加情報データと共に、（ｂ）の場合にはＨＤ画像からＳＤ画像にダウンコンバートする。そして、スクイズ画像であるという付加情報データと共に、ビデオ入出力制御部１２８に出力し、ＡＤ変換したビデオ信号を不図示のビデオ端子より出力する。なお、ここで出力されるＳＤビデオ信号の垂直ブランキング期間には、上記付加情報データより得られる上記（１），（２），（３）を判別できる信号が含められる。

更に、出力画像処理部１２１は、ＲＡＭ１２５に格納された上記画像データと音声データとを、入力画像処理部１１１に出力する。入力画像処理部１１１は入力された上記画像データと、音声データとをＲＡＭ１１４に格納する。

次に、図１を参照して、１３９４端子から入力された動画像データ中の一画面を抽出し、静止画像としてメモリカードに記録する動作について説明する。

ユーザは、再生画像を確認しながら、操作キーを操作し、静止画像として保存したい画像が再生されたタイミングで静止画取り込みを指示する。ＣＰＵ１０２の制御プログラムは、キー操作処理部１０５より静止画取り込みの指示を取得すると、図３で述べた設定処理と同様に、ＲＡＭ１１４に格納された画像データが（ａ），（ｂ）のいずれであるか、又は（ａ）の場合には上記付加情報データが（１），（２），（３）のいずれであるかを判別する。そして、この判別結果に応じて、ＲＡＭ１１４に格納された動画像データのうちの一画面を抽出し、出力画像データに変換する変換方式について、入力画像処理部１１１に設定番号を設定する。また、入力画像処理部１１１は設定された設定番号に従い、上述したテープ再生記録動作での変換（図２）と同様に、抽出した一画面の画像データを出力画像データに変換してＲＡＭ１１４に格納する。

次に、入力画像処理部１１１は、ＲＡＭ１１４に格納された一画面の画像データを、ＪＰＥＧコーデック１１３によってエンコードしてＲＡＭ１１４に格納する。次に、入力画像処理部１１１はＲＡＭ１１４に格納された静止画像データを、カード制御部１１５によってのメモリカードに記録する。

このように、１３９４端子から受信した入力画像データが（ａ）である場合に、画像データが（１）〜（３）のいずれであるかを判別し、その判別結果に応じて図２の変換方式に従って出力画像データに変換する。また、この出力画像データから抽出して記録したＪＰＥＧ画像データを再生したときに、（２）の場合には、正方画素で構成されてアスペクト比がほぼ１６：９（正確には１５．９：９）の画像（図７）として再生できる。また、（３）の場合にも、正方画素で構成されてアスペクト比１６：９の不要な領域を含まない画像（図７）として再生できる。また、１３９４端子から受信した入力画像データが（ｂ）の場合にも、正方画素で構成されてアスペクト比が１６：９の画像（図７）として再生できる。

次に、図１を参照して、外部入力端子により外部機器から画像、音声データを入力した場合の動作について説明する。

出力画像処理部１２１は、ビデオ入出力制御部１２８を制御し、外部入出力端子で接続された外部の画像入出力機器１９０よりアナログビデオ信号を受信し、ＡＤ変換することで、画像データと、音声データをそれぞれＲＡＭ１２５に格納する。更に、入力されたアナログビデオ信号の垂直ブランキング期間の信号より上記（１），（２），（３）を判別するための識別情報を検出し、付加情報としてＲＡＭ１２５に格納する。

また、出力画像処理部１２１は、ＲＡＭ１２５に格納された画像データと、音声データと、付加情報データとを（ａ）ＤＶフォーマットの通信仕様でＤＶフォーマットコーデック１２４によりエンコードする。そして、１３９４制御部１２９によって不図示の１３９４端子より出力する。

更に、出力画像処理部１２１は、ＲＡＭ１２５に格納された上記デジタル画像データを、ＬＣＤ制御部１２３に出力して不図示のＬＣＤで画像を表示する。また、ＲＡＭ１２５に格納された上記音声データを、スピーカ制御部１２２によってＡＤ変換し、不図示のスピーカより音声を出力する。

更に、出力画像処理部１２１は、ＲＡＭ１２５に格納された上記画像データと、音声データとを、入力画像処理部１１１に出力する。入力画像処理部１１１は入力された上記画像データと、音声データとをＲＡＭ１１４に格納する。

次に、図１を参照して、外部機器より入力された動画像データ中の一画面を抽出して静止画像データとしてメモリカードＣに記録する動作について説明する。

ユーザは、再生画像を確認しながら、操作キーを操作し、静止画像として保存したい画像が再生されたタイミングで静止画取り込みを指示する。

ＣＰＵ１０２の制御プログラムは、キー操作処理部１０５より静止画取り込みの指示を取得すると、ＲＡＭ１１４に格納された上記画像データに対応する上記付加情報データが（１），（２），（３）のいずれであるかを判別する。そして、ＲＡＭ１１４に格納された動画像データのうちの一画面を抽出し、判別結果に応じて図３で述べた設定処理と同様に、上記画像データを出力画像データに変換する変換方式について、入力画像処理部１１１に設定番号を設定する。また、入力画像処理部１１１は設定された設定番号に従い、上述したテープ再生記録動作での変換方式（図２）と同様に、抽出した画像データを出力画像データに変換してＲＡＭ１１４に格納する。次に、入力画像処理部１１１は、ＲＡＭ１１４に格納された一画面の画像データを、ＪＰＥＧコーデック１１３によってエンコードしてＲＡＭ１１４に格納する。次に、入力画像処理部１１１はＲＡＭ１１４に格納された静止画像データを、カード制御部１１５によってメモリカードＣに記録する。

このように、ビデオ入出力端子から入力されたＳＤビデオ信号から得られる画像データが（１）〜（３）のいずれであるかを判別し、その判別結果に応じて図２の変換方式に従って出力画像データに変換する。また、この出力画像データから抽出して記録したＪＰＥＧ画像データを再生したときに、（２）の場合には、正方画素で構成されてアスペクト比がほぼ１６：９（正確には１５．９：９）の画像（図７）として再生できる。また、（３）の場合にも、正方画素で構成されてアスペクト比１６：９の不要な領域を含まない画像（図７）として再生できる。

［他の実施形態］
以上、本発明に係る実施形態について具体例を用いて詳述したが、本発明は、例えば、システム、装置、方法、プログラム若しくは記憶媒体（記録媒体）等としての実施態様をとることが可能である。具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。

また、本発明の目的は、図１に示す機能ブロック及びフローチャートにおいて、いずれの部分をハードウェア回路により実現し、或いはコンピュータを用いたソフトウェア処理によって実現しても達成されることは言うまでもない。

尚、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラム（図示のフローチャートに対応したプログラム）を、システムあるいは装置に直接あるいは遠隔から供給することによって達成される場合も含む。その場合、システム等のコンピュータが該プログラムコードを読み出して実行することになる。

従って、本発明の機能処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。

その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等の形態であっても良い。

プログラムを供給するための記録媒体（記憶媒体）としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク等がある。その他にも、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）等がある。

その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続し、該ホームページから本発明のコンピュータプログラムそのものをダウンロードすることもできる。また圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明に含まれるものである。

また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザが、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードすることもできる。この場合、ダウンロードした鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現する。

また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される他、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳ等が、実際の処理の一部又は全部を行うことによっても実現され得る。

更に、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットのメモリに書き込まれた後、該ボード等のＣＰＵ等が実際の処理の一部又は全部を行うことによっても実現される。

上記実施形態によれば、縦長の画像や不要な領域等を含む画像とはならないアスペクト比に変換された動画像から静止画像を抽出して保存できるので、縦長の画像や不要な領域等を含む画像が再生されるのを防止できる。

具体的には、入力される動画像が（ａ）ＳＤビデオ画像か（ｂ）ＨＤビデオ画像のいずれであるか、又は上記（ａ）である場合には下記（１）〜（３）かを判別する。
（１）通常のアスペクト比で撮影され記録された通常画像か。
（２）ワイドなアスペクト比で撮影され通常のアスペクト比にスクイズされ記録されたワイドスクイズ画像か。
（３）ワイドなアスペクト比で撮影され通常のアスペクト比のレターボックスで記録されたワイドレターボックス画像か。

そして、上記判別結果に応じて決定される変換方式により、上記（１）通常画像の場合には画素数６４０×４８０の出力画像に変換する。また、上記（２）ワイドスクイズ画像の場合には画素数８４８×４８０の出力画像に変換し（縦方向の画素数はそのままで横方向をのばす）する。更に、上記（３）ワイドレターボックス画像の場合には画素数６４０×３６０に変換（上下の黒色領域を削除し画像エリアのみを保存）する。更には、上記（４）ＨＤビデオ画像の場合には画素数１９２０×１０８０に変換する（縦方向の画素数はそのままで横方向をのばす）。

このように、縦長の画像や不要な領域等を含む画像とはならない正方画素のアスペクト比に変換された動画像から静止画像を抽出して保存できる。したがって、入力される動画像がアスペクト比１：１でない場合であっても、アスペクト比１：１の画像にしか対応していない多くのソフトウェアによって縦長にならず又は不要な領域を含まない動画像や静止画像を再生することができる。

また、１３９４端子やビデオ入出力端子で接続された外部機器より受信した画像データに対しても、縦長にならず又は不要な領域を含まない動画像や静止画像を再生することができる。また、受信したデータの付加情報から入力画像データのアスペクト比や有効領域を得ることができる。

また、上記動画像や静止画像をメモリカード等の記録媒体に記録することで、外部機器で再生したときにも、縦長にならず又は不要な領域を含まない動画像や静止画像を再生することができる。

本発明に係る実施形態の画像処理装置の構成を示すブロック図である。 画像データの変換処理を示す図である。 画像データの変換方式の設定処理を示すフローチャートである。 アスペクト比４：３の通常画像を例示する図である。 スクイズ画像を例示する図である。 レターボックス画像を例示する図である。 アスペクト比１６：９のワイド画像を例示する図である。

符号の説明

１００ 画像処理装置
１０１ ＣＰＵバス
１０２ ＣＰＵ
１０３ ＲＡＭ
１０４ ＲＯＭ
１０５ キー操作処理部
１１１ 入力画像処理部
１１２ ＣＣＤ
１１３ ＪＰＥＧコーデック
１１４ ＲＡＭ
１１５ カード制御部
１２１ 出力画像処理部
１２２ スピーカ制御部
１２３ ＬＣＤ制御部
１２４ ＤＶフォーマットコーデック
１２５ ＲＡＭ
１２６ テープ制御部
１２７ ＨＤＶフォーマットコーデック
１２８ ビデオ入出力制御部
１２９ １３９４制御部
１８０ １３９４端子で接続された外部の画像入出力機器
１９０ ビデオ入出力端子で接続された外部の画像入出力機器

Claims (13)

1. 動画像データから静止画像データを抽出して保存する画像処理装置であって、
   動画像データを入力する入力手段と、
   前記入力手段により入力された動画像データが、第１のアスペクト比を有する第１の動画像データか、第２のアスペクト比の動画像データを加工して得られ、第２のアスペクト比に応じた有効領域を有する第２の動画像データかを判別する判別手段と、
   前記第２の動画像データと判別された場合、前記第２のアスペクト比に応じた有効領域のみを抽出して静止画像データとして保存する保存手段とを具備することを特徴とする画像処理装置。
2. 動画像データから静止画像データを抽出して保存する画像処理装置であって、
   動画像データを入力する入力手段と、
   前記入力手段により入力された動画像データが、第２のアスペクト比を有する第２の動画像データの横方向の画素数を削減して得られた第３のアスペクト比を有する第３の動画像データかを判別する判別手段と、
   前記第３の動画像データと判別された場合、縦方向の画素数を削減せずに横方向の画素数を増やした静止画像データとして保存する保存手段とを具備することを特徴とする画像処理装置。
3. 前記第１の動画像データは前記第１のアスペクト比が１６：９のワイド画像データであり、前記第２の動画像データは前記第１の動画像データをレターボックス画像データに変換した画像データであることを特徴とする請求項１に記載の画像処理装置。
4. 前記第２の動画像データは前記第２のアスペクト比が１６：９のワイド画像データであり、前記第３の動画像データは前記第２の動画像データの横方向の画素数を圧縮したスクイズ画像データであることを特徴とする請求項２に記載の画像処理装置。
5. 前記入力手段により入力された動画像データは横７２０画素、縦４８０画素、若しくは横１４４０画素、縦１０８０画素の有効表示領域を持つ画像データであることを特徴とする請求項１又は２に記載の画像処理装置。
6. 所定の記録媒体から動画像データの読み出しを行う読み出し手段を備え、
   前記入力手段は、前記所定の記録媒体から読み出された動画像データを入力することを特徴とする請求項１又は２に記載の画像処理装置。
7. 前記読み出し手段は、前記所定の記録媒体から動画像データの付加情報を読み出し、
   前記判別手段は、読み出した前記付加情報を用いて判別を行うことを特徴とする請求項６に記載の画像処理装置。
8. 外部機器から送信された信号を受信する受信手段を備え、
   前記入力手段は、前記受信手段によって前記外部機器から受信した動画像データを入力することを特徴とする請求項１又は２に記載の画像処理装置。
9. 前記受信手段は、前記外部機器から動画像データの付加情報を受信し、
   前記判別手段は、受信した前記付加情報を用いて判別を行うことを特徴とする請求項８に記載の画像処理装置。
10. 動画像データから静止画像データを抽出して保存する画像処理方法であって、
    動画像データを入力する入力工程と、
    前記入力工程にて入力された動画像データが、第１のアスペクト比を有する第１の動画像データか、第２のアスペクト比の動画像データを加工して得られ、第２のアスペクト比に応じた有効領域を有する第２の動画像データかを判別する判別工程と、
    前記第２の動画像データと判別された場合、前記第２のアスペクト比に応じた有効領域のみを抽出して静止画像データとして保存する保存工程とを具備することを特徴とする画像処理方法。
11. 動画像データから静止画像データを抽出して保存する画像処理方法であって、
    動画像データを入力する入力工程と、
    前記入力工程にて入力された動画像データが、第２のアスペクト比を有する第２の動画像データの横方向の画素数を削減して得られた第３のアスペクト比を有する第３の動画像データかを判別する判別工程と、
    前記第３の動画像データと判別された場合、縦方向の画素数を削減せずに横方向の画素数を増やした静止画像データとして保存する保存工程とを具備することを特徴とする画像処理方法。
12. 請求項１０又は１１に記載の画像処理方法をコンピュータに実行させるためのプログラム。
13. 請求項１２に記載のプログラムを記憶したことを特徴とするコンピュータ可読記憶媒体。

Images