JP4636474B2 - 映像変換装置、映像再生装置、映像変換再生システム及びプログラム - Google Patents

Description

本発明は、映像変換装置、映像再生装置、映像変換再生システム及びプログラムに関する。

近年、ＴＶ等の映像表示装置の進歩は著しく、高解像度、高画素数で表示できる機能を備えたものが数多く開発され、一般家庭に普及している。また、携帯電話等の携帯端末に搭載される表示装置の高機能化も進んでいる。

しかしながら、携帯電話等では、小型化、軽量化等の要請もあり、通常、搭載されるＣＰＵや記憶装置は、ＴＶ等と比較すると低機能である。したがって、ＴＶやＤＶＤレコーダ等で再生する目的で作成された高画質な映像データを、携帯電話等に転送して再生するためには、当該映像データの画質を携帯電話等の機能に応じた画質、即ち、低画質に変換（低画質化）する必要がある。ここで、低画質化とは、例えば、解像度やビットレートなどを低下させることをいう。このようにすると、映像データの総容量を小さくしたり、デコード負荷を下げたりすることができる。

例えば、特許文献１には、受信した映像データを、接続する外部機器に適した映像データに変換するデジタル放送受信機が開示されている。

特開２００１−４５４３６号公報

従来のデータ変換技術では、高画質な映像データ（例えば、ＭＰＥＧデータ）を構成する各フレームを一様に低画質化しているため、携帯電話等では、一様に低画質化された映像データが再生されることになる。そうすると、せっかく高画質で記録された映像データであっても、ユーザは、携帯電話等での再生において、そのメリットを享受することができない。

本発明は、上記問題に鑑みてなされたものであり、高画質な映像データのメリットを極力損なわずに、低画質化した映像データを再生するための映像変換装置、映像再生装置、映像変換再生システム及びプログラムを提供することを目的とする。

上記目的を達成するため、本発明に係る映像変換装置は、
原映像データの先頭から１又は複数のフレームからなる映像フレーム群を順次取得し、該映像フレーム群の画質を低下させる方向で変換することで、他機器用映像データを生成する映像変換手段と、
所定の条件に基づいて、前記映像フレーム群を高画質で保持する必要があるか否かを判定するシーン判定手段と、を備え、
該シーン判定手段は、前回の判定により高画質で格納された映像フレーム群の再生開始時間と今回判定対象となる映像フレーム群の再生開始時間との間隔を算出し、該間隔が、予め設定した所定時間より短い場合、当該映像フレーム群を高画質で保持する必要はないと判定し、
前記シーン判定手段により高画質で保持する必要があると判定された場合、前記映像変換手段は、当該映像フレーム群を前記他機器用映像データ中に高画質で格納する、ことを特徴とする。

前記映像変換手段は、前記シーン判定手段により高画質で保持する必要があると判定された場合、当該映像フレーム群についての付加情報を取得し、取得した付加情報を所定のデータテーブルに登録してもよい。

この場合、前記データテーブルに登録される前記付加情報には、当該映像フレーム群の位置情報と、再生時間とが含まれるようにしてもよい。

また、前記データテーブルは、前記他機器用映像データ内の所定領域に配置されるようにしてもよい。

撮像によって原映像データを生成する撮像手段をさらに備える構成にしてもよい。

また、本発明に係る映像再生装置は、
上記の映像変換装置によって生成された映像データ内のユーザによって指示された位置から１又は複数のフレームからなる映像フレーム群を順次取得し、再生する映像再生装置であって、
前記取得した前記映像フレーム群が高画質である場合、その旨を所定態様でユーザに報知すると共に、当該映像フレーム群の少なくとも一部のフレームを一時記憶する手段と、
ユーザの指示に応答して、前記映像データの再生を一時中断し、前記一時記憶された１又は複数のフレームに対応する画像を拡大又は縮小可能に表示する手段と、を備える、ことを特徴とする。

また、本発明に係る映像変換再生システムは、
映像変換装置と、映像再生装置とを備える映像変換再生システムであって、
前記映像変換装置は、
原映像データの先頭から１又は複数のフレームからなる映像フレーム群を順次取得し、該映像フレーム群の画質を低下させる方向で変換することで、前記映像再生装置用の映像データを生成する映像変換手段と、
所定の条件に基づいて、前記映像フレーム群を高画質で保持する必要があるか否かを判定するシーン判定手段と、を備え、
該シーン判定手段は、前回の判定により高画質で格納された映像フレーム群の再生開始時間と今回判定対象となる映像フレーム群の再生開始時間との間隔を算出し、該間隔が、予め設定した所定時間より短い場合、当該映像フレーム群を高画質で保持する必要はないと判定し、
前記シーン判定手段により高画質で保持する必要があると判定された場合、前記映像変換手段は、当該映像フレーム群を前記映像データ中に高画質で格納し、
前記映像再生装置は、
前記映像データ内のユーザによって指示された位置から１又は複数のフレームからなる映像フレーム群を順次取得し、再生する手段と、
前記取得した前記映像フレーム群が高画質である場合、その旨を所定態様でユーザに報知すると共に、当該映像フレーム群の少なくとも一部のフレームを一時記憶する手段と、
ユーザの指示に応答して、前記映像データの再生を一時中断し、前記一時記憶された１又は複数のフレームに対応する画像を拡大又は縮小可能に表示する手段と、を備える、ことを特徴とする。

また、本発明に係るプログラムは、
コンピュータを、
原映像データの先頭から１又は複数のフレームからなる映像フレーム群を順次取得し、該映像フレーム群の画質を低下させる方向で変換することで、他機器用映像データを生成する映像変換手段、
所定の条件に基づいて、前記映像フレーム群を高画質で保持する必要があるか否かを判定するシーン判定手段、として機能させるプログラムであって、
前記シーン判定手段は、前回の判定により高画質で格納された映像フレーム群の再生開始時間と今回判定対象となる映像フレーム群の再生開始時間との間隔を算出し、該間隔が、予め設定した所定時間より短い場合、当該映像フレーム群を高画質で保持する必要はないと判定し、
前記シーン判定手段により高画質で保持する必要があると判定された場合、前記映像変換手段は、当該映像フレーム群を前記他機器用映像データ中に高画質で格納する、ことを特徴とする。

また、本発明の他の観点に係るプログラムは、
映像再生装置を制御するコンピュータを、
上記の映像変換装置によって生成された映像データ内のユーザによって指示された位置から１又は複数のフレームからなる映像フレーム群を順次取得し、再生する手段、
前記取得した前記映像フレーム群が高画質である場合、その旨を所定態様でユーザに報知すると共に、当該映像フレーム群の少なくとも一部のフレームを記憶装置に一時記憶する手段、
ユーザの指示に応答して、前記映像データの再生を一時中断し、前記記憶装置に一時記憶された１又は複数のフレームに対応する画像を拡大又は縮小可能に表示させる手段、として機能させる、ことを特徴とする。

本発明によれば、高画質な映像データのメリットを極力損なわずに、低画質化した映像データを再生することが可能となる。

以下、本発明の一実施形態に係る映像変換再生システムについて図面を参照して説明する。図１に示すように、本実施形態の映像変換再生システム１は、映像変換装置の一具現例であるＨＤＤレコーダ１０と、映像再生装置の一具現例である携帯電話２０と、から構成される。ＨＤＤレコーダ１０と携帯電話２０は、家庭内ネットワーク３０を介して相互にデータ送受が可能となっている。家庭内ネットワーク３０は、例えば、無線ＬＡＮ等で構成される。

ＨＤＤレコーダ１０は、図２に示すように、ネットワークカード等を備える通信部１０１と、メインメモリ１０２と、ＣＰＵ１０３と、出力部１０４と、二次記憶装置１０５と、番組受信部１０６と、から構成される。そして、これらは、内部バス１０７に繋がれている。

二次記憶装置１０５には、映像変換プログラム１０９、シーン判定プログラム１１０が記憶されており、これらは、必要に応じてメインメモリ１０２にロードされ、ＣＰＵ１０３がこれらのプログラムに従って動作することで、後述する映像データ変換処理、シーン判定処理が実行される。また、二次記憶装置１０５には、番組受信部１０６が受信した映像データ（例えば、地上デジタルテレビ方法による番組データ）が録画映像データ１１１として保存され、この録画映像データ１１１を携帯電話２０用に変換した映像データも携帯用映像データ１１２として保存される。本実施形態では、録画映像データ１１１及び携帯用映像データ１１２は、共にＭＰＥＧ２形式の動画データである。

この録画映像データ１１１は、出力部１０４を介して、図示しないＴＶモニタ等に出力され、再生される。本実施形態では、このＴＶモニタ等の画面解像度は、１９２０×１０８０ドットであり、これに対応するように録画映像データ１１１は、１９２０×１０８０ドットの解像度を有する。

携帯電話２０は、図３に示すように、ネットワークカード等を備える通信部２０１と、メインメモリ２０２と、ＣＰＵ２０３と、入力部２０４と、表示部２０５と、二次記憶装置２０６と、から構成される。そして、これらは、内部バス２０７に繋がれている。

入力部２０４は、キーパッド２１１等から構成され、ユーザからの入力を受け付ける処理を行う。表示部２０５は、液晶ディスプレイ（ＬＣＤ）２１２等から構成され、ＣＰＵ２０３からの指令に基づき、携帯用映像データ１１２に係る映像の表示等を行う。ここで、ＬＣＤ２１２の画面解像度は、６００×４８０ドットである。

二次記憶装置２０６には、再生制御プログラム２１５として、一覧表示プログラム２１６、映像再生プログラム２１７、静止画再生プログラム２１８が記憶されており、これらは、必要に応じてメインメモリ２０２にロードされ、ＣＰＵ２０３がこれらのプログラムに従って動作することで、後述する再生制御処理が実行される。また、二次記憶装置２０６には、家庭内ネットワーク３０を介してＨＤＤレコーダ１０から受信した携帯用映像データ１１２が記憶される。

図４は、本実施形態の映像変換再生システム１の動作を概念的に示す図である。先ず、ＨＤＤレコーダ１０において、映像データ変換処理が実行され、録画映像データ１１１を基に、携帯用映像データ１１２が生成される。映像データ変換処理は、具体的には、ＣＰＵ１０３の機能部である映像変換部１１５及びシーン判定部１１６により実行される。

携帯電話２０は、ユーザの操作に応答して、携帯用映像データ１１２を要求するコマンド（映像データ要求コマンド）を家庭内ネットワーク３０を介してＨＤＤレコーダ１０に送信する。かかる映像データ要求コマンドを受信したＨＤＤレコーダ１０は、二次記憶装置１０５に保存している携帯用映像データ１１２を読み出し、家庭内ネットワーク３０を介して携帯電話２０に送信する。携帯電話２０は、受信した携帯用映像データ１１２を二次記憶装置２０６に保存する。

携帯電話２０は、ユーザの操作に応答して、後述する再生制御処理を実行する。再生制御処理には、一覧表示処理、映像再生処理及び拡大表示処理が含まれる。具体的には、これらの各処理は、ＣＰＵ２０３の機能部である一覧表示部２２１、映像再生部２２２及び静止画再生部２２３により実行される。

以下、ＨＤＤレコーダ１０及び携帯電話２０で実行される上記各処理の詳細について説明する。先ず、ＨＤＤレコーダ１０で実行される映像データ変換処理について説明する。

図５は、映像データ変換処理の手順を示すフローチャートである。本実施形態では、ＣＰＵ１０３の映像変換部１１５は、ユーザの操作（携帯電話２０からのコマンドも含む）に応答して起動し、以下の映像変換処理を実行する。なお、映像変換部１１５の起動タイミングは任意であり、例えば、定期的（一定時間毎）に起動する仕様にしてもよい。

先ず、映像変換部１１５は、二次記憶装置１０５に録画映像データ１１１が保存されているか否かを判別する（ステップＳ１０１）。録画映像データ１１１が保存されていない場合（ステップＳ１０１でＮＯ）、本処理は終了する。一方、録画映像データ１１１が保存されていると（ステップＳ１０１でＹＥＳ）、映像変換部１１５は、録画映像データ１１１に含まれる映像フレーム群（図６（ａ）のフレームブロック６０１）を順次所得する（ステップＳ１０２）。

図６（ａ）に示すフレームブロック６０１は、映像を構成する各フレームを意味のある単位でまとめたものであり、例えば、ＭＰＥＧ２のＧＯＰ（Group Of Pictures）等が該当する。このフレームブロック６０１間には、圧縮コーディングにおける圧縮処理の依存関係がない。即ち、フレームブロック６０１単位で、映像を再生するためのフレームのデコードを行うことができる。また、フレームブロック６０１毎に解像度が統一されていればよく、フレームブロック６０１間で解像度が異なっていても問題ない。

なお、録画映像データ１１１に再生時間が非常に長いフレームブロック６０１が存在する場合も考えられる。そのような場合に対応するため、映像変換部１１５は、先頭のフレームブロック６０１を取得する前に、録画映像データ１１１の各フレームブロック６０１の再生時間をチェックし、予め設定した所定時間以上となるフレームブロック６０１が存在するか否かを判定するようにしてもよい。そして、所定時間以上となるフレームブロック６０１が存在する場合には、これを２以上の新たなフレームブロック６０１に分割した新たな録画映像データ１１１を生成し、これを基にして、携帯用映像データ１１２を生成してもよい。

図５のフローチャートに戻り、シーン判定部１１６は、映像変換部１１５により取得されたフレームブロックに基づいて、シーン判定処理を実行する（ステップＳ１０３）、シーン判定処理では、取得したフレームブロック６０１について、高解像度（本実施形態では、１９２０×１０８０ドットの解像度）での保存が必要であるか否かの判定が行われる。シーン判定処理の詳細は、後述する。

シーン判定部１１６によるシーン判定処理の結果、高解像度で保存する必要があると判定された場合（ステップＳ１０４でＹＥＳ）、映像変換部１１５は、当該フレームブロック６０１を高解像度で変換する（ステップＳ１０６）。但し、録画映像データ１１１は、既に、本実施形態でいう高解像度（１９２０×１０８０ドットの解像度）で保存されているため、本実施形態においては、当該変換によっても、フレームブロック６０１の解像度は変化しないことになる。

映像変換部１１５は、高解像度変換したフレームブロック６０１からｉフレームを抽出し、二次記憶装置１０５に一時的に保存する（ステップＳ１０７）。この保存したｉフレームは、シーン判定処理で使用される。ここで、ｉフレームとは、圧縮が単独で完結しているフレームをいう（例えば、ＭＰＥＧ２のｉ（イントラ）フレーム等）。本実施形態では、各フレームブロック６０１の先頭フレームは、ｉフレームであるものとする。

映像変換部１１５は、高解像度変換したフレームブロック６０１の付加情報（フレーム番号及び再生開始時間）を図６（ｂ）に示す高解像シーン管理テーブル６０２に登録する（ステップＳ１０８）。高解像シーン管理テーブル６０２は、携帯用映像データ１１２の所定領域に格納される。図７に示すように、高解像シーン管理テーブル６０２は、フレーム番号項目と、再生開始時間項目とを有する。映像変換部１１５は、当該フレームブロック６０１の先頭フレーム（即ち、ｉフレーム）の番号（当該録画映像データ１１１の先頭フレームからの順番を示す数値）をフレーム番号項目に設定し、その再生開始時間を再生開始時間項目に設定する。この高解像シーン管理テーブル６０２は、詳細は後述するが、携帯電話２０における携帯用映像データ１１２の再生で、高解像度変換したフレームブロック６０１の頭出し再生ができるようにするために使用される。

図５のフローチャートに戻り、シーン判定部１１６によるシーン判定処理の結果、高解像度で保存する必要がないと判定された場合（ステップＳ１０４でＮＯ）、映像変換部１１５は、当該フレームブロックを低解像度（本実施形態では、６００×４８０ドットの解像度）にするための変換を行う（ステップＳ１０５）。

そして、映像変換部１１５は、高解像度又は低解像度変換したフレームブロック６０１を携帯用映像データ１１２を構成するフレームブロック６０１として二次記憶装置１０５に保存する（ステップＳ１０９）。映像変換部１１５は、録画映像データ１１１から抽出したフレームブロック６０１が最終のフレームブロックであるか否かを判定し（ステップＳ１１０）、最終のフレームブロックでない場合（ステップＳ１１０でＮＯ）、ステップＳ１０２に戻り、上述した処理を繰り返し実行する。一方、最終のフレームブロックである場合には（ステップＳ１１０でＹＥＳ）、本処理を終了する。以上の映像データ変換処理により、携帯用映像データ１１２が得られる。

続いて、シーン判定処理の詳細について、図８のフローチャートを用いて説明する。先ず、シーン判定部１１６は、前回高解像度変換したフレームブロック６０１の再生開始時間と、今回の変換対象であるフレームブロック６０１の再生開始時間を取得し、その時間間隔を算出する（ステップＳ２０１）。この間隔が予め設定した所定時間より短い場合（ステップＳ２０２でＮＯ）、シーン判定部１１６は、高解像度での保存は不必要であると判定する（ステップＳ２０３）。これにより、携帯用映像データ１１２の容量増大化を抑えることがきる。

一方、両者の間隔が予め設定した所定時間以上の場合（ステップＳ２０２でＹＥＳ）、シーン判定部１１６は、二次記憶装置１０５に保持している前回高解像度変換したフレームブロック６０１のｉフレームを読み出し、今回のフレームブロック６０１のｉフレームとの画像についての類似度を算出する（ステップＳ２０４）。この類似度の算出方法に限定はなく、周知の技術が採用できる。

そして、シーン判定部１１６は、算出した類似度と、予め設定した閾値とを比較することで、双方の画像が類似しているか否かを判定する。その結果、両者が類似している場合（ステップＳ２０５でＹＥＳ）、シーン判定部１１６は、高解像度での保存は不必要であると判定する（ステップＳ２０３）。一般的に、類似の情報が継続して表示されている状況、即ち、映像の変化が乏しいシーンが続く状況では、高画質での画像表示の必要性は低いものと考えられる。したがって、このような場合での高解像度保存を避けることで、携帯用映像データ１１２の容量の無用な増大を防止できる。

一方、両画像が類似していない場合（ステップＳ２０５でＮＯ）、シーン判定部１１６は、前回高解像度変換したｉフレームの画像に写り込んでいる文字の数を周知の技術を用いて取得する（ステップＳ２０６）。取得した文字数が予め設定した所定数より少ない場合（ステップＳ２０７でＮＯ）、シーン判定部１１６は、高解像度での保存は不必要であると判定する（ステップＳ２０３）。一方、取得した文字数が所定数以上の場合（ステップＳ２０７でＹＥＳ）、シーン判定部１１６は、高解像度での保存が必要であると判定する（ステップＳ２０８）。これにより、細かい文字が密集して写り込んでいるような画像等であっても、携帯電話２０での再生の際、ユーザは、視認しやすいように拡大表示させることが可能となり、便利である。

なお、以上のシーン判定処理では、再生時間の間隔と、画像の類似度と、画像に写り込んでいる文字数との３つの条件を全てクリアした場合に、高解像度での保存が必要であると判定しているが、あくまで一例であり、これらの内、何れか１つ以上の条件をクリアすれば、高解像度での保存が必要であると判定してもよい。また、複数の条件を組み合わせる場合、その順序に制限はない。例えば、最初に類似性をチェックし、類似していない場合は文字数をチェックし、文字数が所定数以上ならば間隔をチェックし、間隔が所定時間以上ならば高解像度での保存が必要であると判定してもよい。

続いて、携帯電話２０による携帯用映像データ１１２の再生動作について説明する。最初に、一覧表示部２２１による一覧表示処理について、図９のフローチャートに沿って説明する。一覧表示部２２１は、キーパッド２１１を介したユーザ操作に応答して起動し、以下の一覧表示処理を実行する。

一覧表示部２２１は、先ず、ＨＤＤレコーダ１０から受信し、二次記憶装置２０６に記憶されている携帯用映像データ１１２から高解像シーン管理テーブル６０２を読み出す（ステップＳ３０１）。そして、携帯用映像データ１１２から、高解像シーン管理テーブル６０２のフレーム番号項目に設定されている各フレーム番号に相当するフレーム（即ち、ｉフレーム）を取得する（ステップＳ３０２）。一覧表示部２２１は、各ｉフレームの画像にその再生開始時間を付加した画像（シーン）をサムネイル表示する（ステップＳ３０３）。サムネイル表示後、一覧表示部２２１は、ユーザによる選択操作を受け付け可能な状態（選択操作の待機状態）となる（ステップＳ３０４）。ユーザは、キーパッド２１１を介した操作、例えば、カーソル移動キーを操作することで、カーソルをシーン間で移動させ、所望のシーンを選択することができる。

ユーザによりシーンが選択され、キーパッド２１１の決定キー等が押下されると、一覧表示部２２１は、ユーザによる選択結果を映像再生部２２２に通知する。そして、映像再生部２２２により、当該シーンに対応するフレームブロック６０１から再生が開始される（ステップＳ３０５）。

続いて、映像再生部２２２による映像再生処理について、図１０のフローチャートに沿って説明する。映像再生部２２２は、携帯用映像データ１１２からフレームブロック６０１を順次所得する（ステップＳ４０１）。この際、上記の如く、ユーザが選択したシーンから再生する場合では、当該シーンに対応するフレームブロック６０１から順次取得する。

次に、映像再生部２２２は、取得したフレームブロック６０１が高解像度のシーンであるか否かを判定する（ステップＳ４０２）。高解像度のシーンであるか否かは、所定の解像度（本実施形態では、６４０×４８０ドットの解像度）より高いか否かで判定する。また、当然ながら、ユーザが選択したシーンから再生する場合、初回に取得したフレームブロック６０１は、高解像度のシーンである。

上記判定の結果、当該フレームブロック６０１が高解像度のシーンでない場合（ステップＳ４０３でＮＯ）、映像再生部２２２は、ステップＳ４０４に移行して、当該フレームブロック６０１の再生を行う（図１１（ａ）参照）。一方、当該フレームブロック６０１が高解像度のシーンである場合（ステップＳ４０３でＹＥＳ）には、ステップＳ４０５〜Ｓ４０７の処理を行った後で、ステップＳ４０４に移行する。

ステップＳ４０５では、映像再生部２２２は、当該フレームブロック６０１の先頭フレーム（即ち、ｉフレーム）を抽出し、拡大表示用の画像データとして、二次記憶装置２０６に一時的に保存する。そして、ステップＳ４０６では、映像再生部２２２は、携帯電話２０の制御モードを拡大表示モードに設定する。制御モードが拡大表示モードに設定されると、後述する静止画再生部２２３が起動する。また、ステップＳ４０７では、映像再生部２２２は、ユーザに、キーパッド２１１の所定キーを押下することで拡大表示が可能である旨を報知するメッセージ（例えば“ＸＸボタンで拡大表示”）をＬＣＤ２１２に表示する（図１１（ｂ）参照）。

ここで、設定された拡大表示モードは、所定時間経過すると自動的に解除されるものとする。拡大表示モードの設定が解除されると、静止画再生部２２３による処理（拡大表示処理）は終了すると共に、上記メッセージは消去される（非表示となる）。

なお、拡大表示モードは、類似のシーンが再生されている間は解除されない仕様にしてもよい。あるいは、一旦設定されると映像再生処理が終了するまで解除されない仕様でもよい。

映像再生部２２２は、最終のフレームブロック６０１を再生するまで（ステップＳ４０８でＹＥＳ）、あるいは、ユーザにより再生停止の操作が行われるまで、以上の処理を繰り返し実行する。

続いて、静止画再生部２２３による拡大表示処理について、図１２のフローチャートに沿って説明する。上記の拡大表示モードにおいて、ユーザによりキーパッド２１１の所定キーが押下され、拡大表示の指示が入力されると（ステップＳ５０１でＹＥＳ）、静止画再生部２２３は、映像再生部２２２に映像再生処理を一時停止させる（ステップＳ５０２）。そして、二次記憶装置２０６に保存しているｉフレーム（図１０のステップＳ４０５参照）を取り出し、かかるｉフレームについての画像（ｉフレーム画像）を表示する（ステップＳ５０３）。また、静止画再生部２２３は、キーパッド２１１の所定キーを押下することで再生処理が再開される旨をユーザに報知するメッセージ（例えば“ＸＸボタンで再生再開”）をＬＣＤ２１２に表示する（図１１（ｃ）参照）。

静止画再生部２２３は、ユーザによるキーパッド２１１等を介した操作指示に従って、ｉフレーム画像の拡大・縮小・スクロール等の各処理を行う（ステップＳ５０４）。これらの処理は、ユーザにより再生再開の指示が入力されるまで（ステップＳ５０５でＹＥＳ）続けられる。

以上説明したように、本実施形態のＨＤＤレコーダ１０（映像変換装置）は、高解像度で記録された録画映像データ１１１から携帯電話２０用の携帯用映像データ１１２を生成する際、シーン判定処理を行って、各フレームブロック６０１を高解像度で保存する必要があるか否かの判定を様々な状況を勘案して行う。そして、高解像度で保存する必要があると判定したフレームブロック６０１については、低解像度化せずに携帯用映像データ１１２に格納する。したがって、データ容量を増大させずに、高解像度のシーンが含まれた携帯用映像データ１１２を生成することができる。

また、本実施形態の携帯電話２０（映像再生装置）は、高解像度で保存されたフレームブロックのｉフレーム画像をユーザの指示に応じて適宜拡大等して表示させることができる。したがって、携帯電話２０での再生においても、ユーザは、高画質映像のメリットを享受することが可能となる。

なお、本発明は、上記実施形態に限定されず、本発明の要旨を逸脱しない範囲での種々の変更は勿論可能である。

例えば、上記実施形態では、ＨＤＤレコーダ１０（映像変換装置）の映像変換部１１５は、録画映像データ１１１を低解像化することで携帯用映像データ１１２を生成しているが、画質変換のパラメータは解像度に限定されない。例えば、コーデックやビットレート等であってもよい。

また、上記実施形態では、高解像シーン管理テーブル６０２は、携帯用映像データ１１２に埋め込まれているが、ＨＤＤレコーダ１０（映像変換装置）にて、携帯用映像データ１１２とは別のデータとして生成され、二次記憶装置１０５に保存されるようにしても構わない。この場合、携帯電話２０（映像再生装置）は、ＨＤＤレコーダ１０から携帯用映像データ１１２を取得する際、高解像シーン管理テーブル６０２も併せて取得する。

また、ＨＤＤレコーダ１０（映像変換装置）の映像変換部１１５は、フレームブロック６０１の変換が、低解像度から高解像度、及び高解像度から低解像度に変化する度に、図１３に示すように、変換後のフレームブロック６０１を格納する映像トラックの場所を替えるようにしてもよい。この場合の高解像シーン管理テーブル６０２の例を図１５（ａ）に示す。

あるいは、映像変換部１１５は、図１４に示すように、全てのフレームブロック６０１を低解像度変換し、シーン判定部１１６により高解像度で保存する必要があると判定されたフレームブロック６０１のｉフレームのみを動画データとは別の映像トラックに格納するようにしてもよい。この場合の高解像シーン管理テーブル６０２の例を図１５（ｂ）に示す。

また、シーン判定処理において、他の画像内容、例えば、画像に写り込んでいる文字の大きさ、物体の大きさや種類等に基づいて、高解像度で保存するか否かの判定を行ってもよい。また、画像内容の他、映像に合わせて記録されている音声情報（例えば、音声の大きさ）等に基づいて判定することも可能である。

また、上記実施形態では、サムネイル表示されたシーンをユーザが選択することで、携帯用映像データ１１２の再生が開始されたが、サムネイル表示をすることなく、ユーザの指示により、先頭のフレームブロック６０１から再生することも勿論可能である。

また、一覧表示処理において、取得したｉフレーム画像群を別途、静止画一覧として二次記憶装置２０６に保存してもかまわない。これによって、携帯用映像データ１１２が削除された場合でも、高解像度の静止画の閲覧は可能となる。

また、上記実施形態では、ＨＤＤレコーダ１０から携帯電話２０に転送され、予め二次記憶装置２０６に保存されている携帯用映像データ１１２を再生する例を示したが、ＨＤＤレコーダ１０から携帯電話２０に携帯用映像データ１１２を転送しながら再生を行うストリーミング再生を行っても構わない。

また、携帯電話２０が、映像データ変換処理の実行機能を有し、他の機器から取得した番組データ等の映像データを携帯用映像データ１１２に変換できるようにしてもよい。

さらには、カメラ付きの携帯電話等の端末装置が、自ら撮影した映像を携帯用映像データ１１２に変換し、上記実施形態の携帯電話２０と同様にして、再生できるようにしてもよい。

また、プログラムの適用により、既存のビデオ信号記録装置等を本発明に係る映像変換装置として機能させることも可能である。即ち、上述したＣＰＵ１０３が実行したようなプログラムを、既存のビデオ信号記録装置等に適用し、当該ビデオ信号記録装置等を制御するコンピュータ（ＣＰＵなど）がそのプログラムを実行することで、上述した各機能構成や処理が実現され得る。同様に、プログラムの適用により、既存の携帯電話等を本発明に係る映像再生装置として機能させることも可能である。

このようなプログラムの配布方法は任意であり、例えば、メモリカードなどの記録媒体に格納して配布可能である他、例えば、インターネットなどの通信ネットワークを介して配布することもできる。そして、このようにして配布されたプログラムをビデオ信号記録装置等や携帯電話等にインストールして適用することで、上述したＨＤＤレコーダ１０や携帯電話２０と同様な機能を実現することができる。

本発明によれば、高画質の映像から低画質の映像を生成することで、映像データの容量を削減しつつ、必要な部分を高画質化できるため、拡大表示等でも高精細な画像をユーザに提供できる。したがって、携帯電話や録画機、ビデオカメラ等への適用が期待できる。

本発明の一実施形態に係る映像変換再生システムの構成を示す図である。 図１のＨＤＤレコーダの構成を示すブロック図である。 図１の携帯電話の構成を示すブロック図である。 図１の映像変換再生システムの動作を概念的に示す図である。 映像データ変換処理の手順を示すフローチャートである。 （ａ）は録画映像データの構成を示し、（ｂ）は携帯用映像データの構成を示す図である。 高解像シーン管理テーブルの一例を示す図である。 シーン判定処理の手順を示すフローチャートである。 一覧表示処理の手順を示すフローチャートである。 映像再生処理の手順を示すフローチャートである。 再生制御処理時における出力画面の一例を示す図であり、（ａ）は通常再生時の画面、（ｂ）は拡大表示モード時の画面、（ｃ）は拡大表示処理時の画面を示す。 拡大表示処理の手順を示すフローチャートである。 携帯用映像データの構成の変形例（その１）を示す図である。 携帯用映像データの構成の変形例（その２）を示す図である。 高解像シーン管理テーブルの変形例を示す図であり、（ａ）は図１３の携帯用映像データに対応する場合、（ｂ）は図１４の携帯用映像データに対応する場合を示す。

符号の説明

１…映像変換再生システム、１０…ＨＤＤレコーダ、２０…携帯電話、３０…家庭内ネットワーク、１０１，２０１…通信部、１０２，２０２…メインメモリ、１０３，２０３…ＣＰＵ、１０４…出力部、１０５，２０６…二次記憶装置、１０６…番組受信部、１０７，２０７…内部バス、１０９…映像変換プログラム、１１０…シーン判定プログラム、１１１…録画映像データ、１１２…携帯用映像データ、１１５…映像変換部、１１６…シーン判定部、２０４…入力部、２０５…表示部、２１１…キーパッド、２１２…ＬＣＤ、２１５…再生制御プログラム、２１６…一覧表示プログラム、２１７…映像再生プログラム、２１８…静止画再生プログラム、２２１…一覧表示部、２２２…映像再生部、２２３…静止画再生部、６０１…フレームブロック、６０２…高解像シーン管理テーブル

Claims (9)

1. 原映像データの先頭から１又は複数のフレームからなる映像フレーム群を順次取得し、該映像フレーム群の画質を低下させる方向で変換することで、他機器用映像データを生成する映像変換手段と、
   所定の条件に基づいて、前記映像フレーム群を高画質で保持する必要があるか否かを判定するシーン判定手段と、を備え、
   該シーン判定手段は、前回の判定により高画質で格納された映像フレーム群の再生開始時間と今回判定対象となる映像フレーム群の再生開始時間との間隔を算出し、該間隔が、予め設定した所定時間より短い場合、当該映像フレーム群を高画質で保持する必要はないと判定し、
   前記シーン判定手段により高画質で保持する必要があると判定された場合、前記映像変換手段は、当該映像フレーム群を前記他機器用映像データ中に高画質で格納する、
   ことを特徴とする映像変換装置。
2. 前記映像変換手段は、前記シーン判定手段により高画質で保持する必要があると判定された場合、当該映像フレーム群についての付加情報を取得し、取得した付加情報を所定のデータテーブルに登録する、
   ことを特徴とする請求項１に記載の映像変換装置。
3. 前記データテーブルに登録される前記付加情報には、当該映像フレーム群の位置情報と、再生時間とが含まれる、
   ことを特徴とする請求項２に記載の映像変換装置。
4. 前記データテーブルは、前記他機器用映像データ内の所定領域に配置される、
   ことを特徴とする請求項２又は３に記載の映像変換装置。
5. 撮像によって原映像データを生成する撮像手段をさらに備える、
   ことを特徴とする請求項１乃至４の何れか１項に記載の映像変換装置。
6. 請求項１乃至５の何れか１項に記載の映像変換装置によって生成された映像データ内のユーザによって指示された位置から１又は複数のフレームからなる映像フレーム群を順次取得し、再生する映像再生装置であって、
   前記取得した前記映像フレーム群が高画質である場合、その旨を所定態様でユーザに報知すると共に、当該映像フレーム群の少なくとも一部のフレームを一時記憶する手段と、
   ユーザの指示に応答して、前記映像データの再生を一時中断し、前記一時記憶された１又は複数のフレームに対応する画像を拡大又は縮小可能に表示する手段と、を備える、
   ことを特徴とする映像再生装置。
7. 映像変換装置と、映像再生装置とを備える映像変換再生システムであって、
   前記映像変換装置は、
   原映像データの先頭から１又は複数のフレームからなる映像フレーム群を順次取得し、該映像フレーム群の画質を低下させる方向で変換することで、前記映像再生装置用の映像データを生成する映像変換手段と、
   所定の条件に基づいて、前記映像フレーム群を高画質で保持する必要があるか否かを判定するシーン判定手段と、を備え、
   該シーン判定手段は、前回の判定により高画質で格納された映像フレーム群の再生開始時間と今回判定対象となる映像フレーム群の再生開始時間との間隔を算出し、該間隔が、予め設定した所定時間より短い場合、当該映像フレーム群を高画質で保持する必要はないと判定し、
   前記シーン判定手段により高画質で保持する必要があると判定された場合、前記映像変換手段は、当該映像フレーム群を前記映像データ中に高画質で格納し、
   前記映像再生装置は、
   前記映像データ内のユーザによって指示された位置から１又は複数のフレームからなる映像フレーム群を順次取得し、再生する手段と、
   前記取得した前記映像フレーム群が高画質である場合、その旨を所定態様でユーザに報知すると共に、当該映像フレーム群の少なくとも一部のフレームを一時記憶する手段と、
   ユーザの指示に応答して、前記映像データの再生を一時中断し、前記一時記憶された１又は複数のフレームに対応する画像を拡大又は縮小可能に表示する手段と、を備える、
   ことを特徴とする映像変換再生システム。
8. コンピュータを、
   原映像データの先頭から１又は複数のフレームからなる映像フレーム群を順次取得し、該映像フレーム群の画質を低下させる方向で変換することで、他機器用映像データを生成する映像変換手段、
   所定の条件に基づいて、前記映像フレーム群を高画質で保持する必要があるか否かを判定するシーン判定手段、として機能させるプログラムであって、
   前記シーン判定手段は、前回の判定により高画質で格納された映像フレーム群の再生開始時間と今回判定対象となる映像フレーム群の再生開始時間との間隔を算出し、該間隔が、予め設定した所定時間より短い場合、当該映像フレーム群を高画質で保持する必要はないと判定し、
   前記シーン判定手段により高画質で保持する必要があると判定された場合、前記映像変換手段は、当該映像フレーム群を前記他機器用映像データ中に高画質で格納する、
   ことを特徴とするプログラム。
9. 映像再生装置を制御するコンピュータを、
   請求項１乃至５の何れか１項に記載の映像変換装置によって生成された映像データ内のユーザによって指示された位置から１又は複数のフレームからなる映像フレーム群を順次取得し、再生する手段、
   前記取得した前記映像フレーム群が高画質である場合、その旨を所定態様でユーザに報知すると共に、当該映像フレーム群の少なくとも一部のフレームを記憶装置に一時記憶する手段、
   ユーザの指示に応答して、前記映像データの再生を一時中断し、前記記憶装置に一時記憶された１又は複数のフレームに対応する画像を拡大又は縮小可能に表示させる手段、として機能させる、
   ことを特徴とするプログラム。

Images