JP4314149B2

JP4314149B2 - トランスレート記録および追いかけ再生に対応したａｖ情報処理システム

Info

Publication number: JP4314149B2
Application number: JP2004143647A
Authority: JP
Inventors: 剛富田
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 2004-05-13
Filing date: 2004-05-13
Publication date: 2009-08-12
Anticipated expiration: 2024-05-13
Also published as: US20050254796A1; JP2005328263A

Description

この発明は、ソースＡＶ情報（記録しようとするオーディオ／ビデオ情報）のレートを変えて記録（録画）しつつ、記録済みＡＶ情報の追いかけ再生を行うシステムに関する。とくに、このシステムを用いたデジタルレコーダやデジタルＴＶに関する。

近年、デジタルＡＶ情報のエンコード／デコード（圧縮／伸張）にＭＰＥＧを利用した、ＤＶＤ−ＶＲ（ＤＶＤビデオレコーディング）やＨＤＤ（ハードディスク）などのデジタルレコーダが開発され、民生用として広く普及しつつある。これらのレコーダのうち、一部の製品では、記録媒体（ディスク）への高速アクセス性を利用して、タイムスリップ再生（録画中の内容を録画処理と並行して追いかけ再生する再生方法）が可能となっている（特許文献１または特許文献２参照）。
特開２００２−２９８５５１号公報特開２００１−２１６７３０号公報

一方、例えば録画に使用する媒体の容量と録画時間との兼ね合いで、ソースＡＶ情報の品質を損なわない高品位記録に必要なレートよりも記録レートを落として録画を行うトランスレート記録（レート変換記録）が利用されることがある。例えば、ハイビジョンＨＤ放送をその画質品位で記録するに必要なレートの１／２〜１／３の記録レートで、スタンダードＳＤの画質品位で録画を行なうことで、同じ媒体への録画時間を２〜３倍に延ばすなどがある。

前記のタイムスリップ再生機能を持つＤＶＤ−ＶＲ（またはＨＤＤ）レコーダでトランスレート記録を行う場合、通常は２組のＭＰＥＧビデオ／オーディオデコーダが必要となる。この場合、例えば第１組目のデコーダでソース情報（ＨＤ）をデコードし、それを再エンコードして別レートの情報（ＳＤ）に変えて録画する。こうして録画された番組（ＳＤ画質のＨＤ番組）を追いかけ再生する場合に、第２組目のデコーダが用いられる。しかし、ＭＰＥＧビデオ／オーディオデコーダは比較的コストの高いパーツであり、これを２組も用いるのは製品コスト上苦しい。この問題の現実的な対策の１つとして、マルチデコードに対応したＭＰＥＧデコーダの採用がある。

通常、マルチデコードに対応したＭＰＥＧデコーダは、マルチ映像の同時表示用に設計されており、映像デコーダは複数（２個）あるが、音声デコーダは１つしかない。このようなマルチデコード対応ＭＰＥＧデコーダでトランスレート録画／タイムスリップ再生を実現する場合、オーディオデコーダが１個しかないことにどう対処するか問題となる。

この発明は、オーディオデコーダが１つしかなくても（あるいは複数のオーディオデコーダがある場合でもそのうちの１個で）、デジタルＡＶ情報のトランスレート録画／タイムスリップ再生を実現するものである。

この発明の一実施の形態に係るＡＶ情報処理システムは、ソースビデオデータ（高精細画質のＨＤデジタルなど）をデコードして第１のビデオ信号（アナログ）を提供する第１のビデオデコーダ（２１）と；前記第１のビデオデコーダでデコードされた第１のビデオ信号を、前記ソースビデオデータと異なるレートのレート変換ビデオデータ（標準画質のＳＤデジタルなど）に再エンコードするエンコーダ（３０）と；前記ソースビデオデータに対応するソースオーディオデータ（通常はレート変換せず）と、前記再エンコードされたレート変換ビデオデータとを記録し再生するデジタル記録再生部（ＤＶＤ−ＶＲ／ＨＤＤレコーダ）（４０）を備えている。このシステムはさらに、前記デジタル記録再生部で前記ソースオーディオデータと前記レート変換ビデオデータを記録している間に、前記デジタル記録再生部から再生された前記レート変換ビデオデータをデコードして第２のビデオ信号（アナログ）を提供する第２のビデオデコーダ（２２）と；前記デジタル記録再生部で前記ソースオーディオデータと前記レート変換ビデオデータを記録している間に、前記デジタル記録再生部から再生された前記ソースオーディオデータをデコードしてオーディオ信号（アナログまたはリニアＰＣＭデジタルなど）を提供するオーディオデコーダ（２３）とを備えている。

ここで、上記システムは、前記ソースオーディオデータを一時格納し、この格納されたソースオーディオデータを、前記再エンコードされたレート変換ビデオデータに同期するタイミングで送出するバッファ（３２）をさらに備えることができる。

上記構成では、レート変換記録（トランスレート記録）と追いかけ再生（タイムスリップ再生）の双方を具現するにあたり、ビデオ系のデコーダは２つ（２１、２２）用いるが、追いかけ再生する際のオーディオ系デコーダは１つ（２３）で済む。

ここで、レート変換処理などにより時間遅れを伴うビデオ系のデータにオーディオ系データをきちんと同期（リップシンクなど）させたいときは、オーディオ系データをバッファ（３２）に一時蓄えて音声の遅延処理をする。こうして映像と音声のタイミング合わせを行ない、タイミング合わせを行ったビデオデータ（レート変換済み）とオーディオデータを、追いかけ再生用のＡＶデータとして記録する（一実施の形態ではタイムスリッププロセサ３４での作業）。これにより、その再生ＡＶデータ（トランスレート記録／タイムスリップ再生のＡＶデータ）の映像・音声の同期が確保される。

（概要）
デジタルＴＶなどでは、ＭＰＥＧエンコードされた映像や音声を視聴するために、少なくとも１つのＭＰＥＧデコーダ装置が必要である。この視聴しているＭＰＥＧ映像や音声をＭＰＥＧエンコードされたまま記録する場合は、視聴しているデジタルデータをそのまま記録すればよい。一方、デジタルデータそのままではなく、例えばハイビジョン番組のレートを落として記録する（トランスレート記録）方法もある。トランスレート記録を行う方法として、視聴しているＭＰＥＧデコーダのアナログ出力をＭＰＥＧエンコーダに入力し、ここでより低いレートのＭＰＥＧデジタルデータに再エンコードを行い記録する方法がある。

この記録している映像や音声を、記録処理を中断することなく時間を遡って再生する（追いかけ再生）場合、システムの中にもうひとつデコーダが必要となってくる。この要求に応える現実的なデバイスとして、マルチデコード対応しデコーダがある。マルチデコードに対応しているデコーダは、しかしながら、その用途がマルチ映像の同時表示用に設計されているため、映像は複数デコード可能であっても、音声のデコーダは１つしか搭載していない場合がある。以下に説明するこの発明の一実施の形態では、信号処理中でエンコーダを用いてトランスレートエンコードを行うシステムにおいて、２つの映像デコーダと１つの音声デコーダを用い、この１つの音声デコーダで記録中のＭＰＥＧ音声の追いかけ（タイムスリップ）再生を実現する。

（システム構成の具体例）
以下、図面を参照しながらこの発明の一実施の形態について説明する。図１は、この発明の一実施の形態に係る、トランスレート記録（レート変換録画）および追いかけ再生（タイムスリップ再生）に対応した、ＡＶ情報処理システム（デジタルＡＶレコーダ付デジタルＴＶなど）を説明する図である。

図１のシステムは、アナログＡＶ入力をデジタル記録再生するＡＶレコーダ（ＤＶＤ−ＶＲレコーダ／ＨＤＤレコーダなど）を装備した、デジタルＴＶまたはＡＶモニタ装置を想定して構成されている。このシステム構成において、アナログＡＶ入力部（ライン入力）１０からのアナログＡＶ信号ａ、地上／衛星アナログチューナ１２からのアナログＡＶ信号ａ、および地上／衛星デジタルチューナ１４からのアナログＡＶ信号ａは、信号セレクタ機能とＡＤ変換機能を内蔵したＭＰＥＧエンコーダ１６に入力される。エンコーダ１６内では、ライン入力、アナログチューナ、またはデジタルチューナからのアナログＡＶ信号ａのいずれか１つが選択され、選択されたアナログＡＶ信号ａのオーディオ分とビデオ分がそれぞれデジタル変換されて、ＭＰＥＧエンコードされたデジタルＡＶデータｄとなる。このＭＰＥＧエンコードされたデジタルＡＶデータｄおよび地上／衛星デジタルチューナ１４からのデジタルＡＶデータｄは、スイッチャ機能を内蔵したＡＶセパレータ１８に入力される。

スイッチャ／ＡＶセパレータ１８では、エンコーダ１６またはチューナ１４からのデジタルＡＶデータｄが選択され、選択されたデジタルＡＶデータｄ（ＭＰＥＧ・ＡＶデータ）がデジタルＴＶなどのＡＶモニタ装置１００に送出される（ＡＶモニタ装置１００がデジタル入力を装備している場合）。また、スイッチャ／ＡＶセパレータ１８内において、選択されたデジタルＡＶデータｄから、ビデオ分（ＭＰＥＧ・Ｖデータ）ｄと、このビデオ分に対応したオーディオ分（ＭＰＥＧ・Ａデータ）ｄとが分離される。分離されたオーディオ分（ＭＰＥＧ・Ａデータ）ｄは、バッファ３２で一時記憶され所定時間遅延してからタイムスリッププロセサ３４に送られる。なお、この所定時間遅延をしないときは、ＭＰＥＧ・ＡＶデータ（ビデオ＋オーディオのデータ）ｄが、タイムスリッププロセサ３４に直送される。

スイッチャ／ＡＶセパレータ１８で分離されたビデオ分（ＭＰＥＧ・Ｖデータ）ｄは、第１のＭＰＥＧビデオデコーダ２１に入力される。このデコーダ２１は、第２のＭＰＥＧビデオデコーダ２２およびオーディオデコーダ２３とともにワンチップＩＣ２０化されるか、これらのデコーダ（２１〜２３）を組み込んだ回路基板２０に集約される。デコーダ２２、２３については後述する。第１のＭＰＥＧビデオデコーダ２１に入力されたＭＰＥＧ・Ｖデータはアナログビデオ信号にデコードされ、レート変換用のＭＰＥＧエンコーダ３０に入力される。また、デコードされたアナログビデオ信号は、ＡＶモニタ装置１００のアナログビデオ入力に送られる。

ＭＰＥＧエンコーダ３０におけるビデオエンコード（再エンコード）のレートは、入力される信号の解像度に応じて自動的に決めるか、ユーザ操作に基づく制御ＭＰＵ５０からの指令に応じて決めることができる。例えば、地上デジタルのＨＤ放送がスイッチャ／ＡＶセパレータ１８で選択され、選択されたデジタルＨＤ放送のＭＰＥＧビデオデータ（ソースビデオデータ）がＭＰＥＧビデオデコーダ２１でアナログＨＤ信号にデコーダされ、このアナログＨＤ信号がＡＶモニタ装置１００およびＭＰＥＧエンコーダ３０に送られたとする。ここで、後述するデジタルＡＶレコーダ４０が高精細ＨＤ記録（Ｄ３、Ｄ４相当のＨＤ記録など）に対応しているなら、ＭＰＥＧエンコーダ３０においてＨＤ解像度のままＭＰＥＧビデオエンコードを自動的に行なうことができる。もし、後述するデジタルＡＶレコーダ４０がＨＤ記録に対応しておらずＳＤ記録（Ｄ２、Ｄ１ないしハーフＤ１相当のＳＤ記録など）しかできないときは、アナログＨＤ信号を対応可能な解像度（例えばＤ１）にレート変換したＭＰＥＧビデオエンコードが、ＭＰＥＧエンコーダ３０において自動的に行われる。

一方、例えば、デジタルＡＶレコーダ４０がＨＤ記録に対応していたとしても、使用するディスクの録画可能容量がＨＤ録画時間に対して不足しているためＳＤ記録で録画時間を増やしたいとユーザが希望するときは、ユーザ指示に基づくＭＰＵ５０からの指令により、必要な録画時間が確保できる程度（例えば２／３・Ｄ１レベル）に記録レートを落とすレート変換が、ＭＰＥＧエンコーダ３０において行われる。こうしてレート変換された後のＭＰＥＧ・Ｖデータｄは、タイムスリッププロセサ３４に送られる。

ここで、ＭＰＥＧデコーダ２１〜ＭＰＥＧエンコーダ３０間の信号処理にはある程度の時間がかかるため、スイッチャ／ＡＶセパレータ１８から取り出された直後のＭＰＥＧ・Ａデータｄとエンコーダ３０からのＭＰＥＧ・Ｖデータｄとは映像・音声の同期（リップシンクなど）がとれないことが起き得る。この映像・音声の同期は、タイムスリッププロセサ３４において、バッファ３２で遅延されたＭＰＥＧ・Ａデータｄをエンコーダ３０からのＭＰＥＧ・Ｖデータｄに組み合わせて記録用のＭＰＥＧ・ＡＶデータｄとすることで、解決できる（バッファ３２でどの程度の遅延を行なうかは、実際の機器毎に調整する）。

こうして得られたＭＰＥＧ・ＡＶデータｄ（トランスレート記録データ）は、追いかけ再生機能付のデジタルＡＶレコーダ４０に送られ、記録される。このデジタルＡＶレコーダ４０は、現在市販されているＤＶＤ−ＶＲレコーダおよび／またはＨＤＤ（ハードディスク）レコーダと同様に構成することができる（将来的には大容量のフラッシュメモリを用いたレコーダでも構成可能）。

ユーザ操作による指令は、例えばリモコン５４から与えられ、このユーザ操作指令はリモコン受信部５２を介して制御ＭＰＵ５０に送られる。ユーザがリモコン５４から録画中の番組の追いかけ再生（タイムスリップ再生）を指示すると、タイムスリッププロセサ３４とデジタルＡＶレコーダ４０は追いかけ再生処理に入る。すなわち、録画中のＭＰＥＧ・ＡＶデータをタイムスリッププロセサ３４内の図示しないバッファメモリでバッファリングしている間に、レコーダ４０は、その高速アクセス性を利用し、録画済みのＭＰＥＧ・ＡＶデータを再生して図示しないバッファメモリでバッファリングする。そして、バッファリングした再生データをＭＰＥＧビデオデコーダ２２とオーディオデコーダ２３に送出している間に、タイムスリッププロセサ３４内にバッファリングされた録画用のＭＰＥＧ・ＡＶデータが図示しない記録媒体（ＤＶＤ−ＲＡＭディスクやＨＤＤなど）に録画される。このようにして、録画処理を中断することなく、録画済み内容の追いかけ再生が行われる。

ＭＰＥＧビデオデコーダ２２は、追いかけ再生されたＭＰＥＧ・Ｖデータをデコードし、デコードしたアナログビデオ信号（この例ではＳＤ信号）をＡＶモニタ装置１００に送出する。また、オーディオデコーダ２３は、追いかけ再生されたＭＰＥＧ・Ａデータをデコードし、デコードしたアナログオーディオ信号をＡＶモニタ装置（音声再生機能も有する）１００に送出する。

なお、デコーダ２３でデコードされるオーディオデータのエンコード形式としては、ＭＰ２、ＭＰ３、ＭＰＥＧ・ＡＡＣ（５．１チャネル）、ＡＣ−３（Ｒ）、リニアＰＣＭなど種々な形式が可能である。また、デコーダ２３は、デコード後のデジタルオーディオデータの送出および／またはデコード後のデジタルオーディオデータをＤ／Ａ変換したアナログオーディオ信号を送出するよいうに構成することもできる。

ＡＶモニタ装置１００では（その製品仕様によるが）、ＭＰＥＧビデオデコーダ２１からのレート変換前の録画ビデオ映像と、ＭＰＥＧビデオデコーダ２２からのレート変換後の追いかけ再生ビデオ映像と、スイッチャ／ＡＶセパレータ１８からのソースビデオデータのいずれか１つあるいは任意の２つ以上が表示できる。このＡＶモニタ装置１００は、オンスクリーン表示（ＯＳＤ）表示機能の他に複数映像の同時表示機能（ピクチャ・イン・ピクチャ＝ＰｉｎＰまたはダブルウインドウ表示機能）を持つデジタルＴＶ、あるいはパソコンのモニタで構成することができる。

上記構成では、レート変換記録（トランスレート記録）と追いかけ再生（タイムスリップ再生）の双方を実行するにあたり、ビデオ系のデコーダは２つ（２１、２２）用いるが、追いかけ再生する際のオーディオ系デコーダは１つ（２３）で済んでいる。

ここで、レート変換処理などにより時間遅れを伴うビデオ系のデータにオーディオ系データをきちんと同期（リップシンクなど）させたいときは、オーディオ系データをバッファ（３２）に一時蓄えて音声の遅延処理をする。こうして映像と音声のタイミング合わせを行ない、タイミング合わせを行ったビデオデータ（レート変換済み）とオーディオデータを、追いかけ再生用のＡＶデータとして記録する。これにより、その再生ＡＶデータ（トランスレート記録／タイムスリップ再生のＡＶデータ）の映像・音声の同期が確保される。なお、レート変換記録をしない場合は、ＭＰＥＧ・ＡＶデータｄをスイッチャ／ＡＶセパレータ１８からタイムスリッププロセサ３４へ直送し、そのまま記録するようにすれば、映像と音声のずれは生じない。

（システム動作の具体例）
図２は、トランスレート記録および追いかけ再生実行時における図１のシステム動作の一例を説明するフローチャートである。図３は、追いかけ再生（タイムスリップ再生）を行なうかどうかをユーザに設定してもらう際のダイアログ表示例を説明する図である。図４は、レート変換記録を行なうかどうかと、レート変換により何分の録画をしたいのかをユーザに設定してもらう際のダイアログ表示例を説明する図である。また、図５は、追いかけ再生中のＰｉｎＰ表示例および録画情報のオンスクリーン表示例を説明する図である。

図２の処理において、まず、ユーザに、録画中にタイムスリップ再生（ＴＳ再生）するかどうか問い合わせる（ステップＳＴ１０）。この問合せは、例えば図３に示すようなダイアログ１０２をＡＶモニタ装置１００にＯＳＤ表示することで、行なうことができる。ユーザがリモコン５４の図示しないカーソルキーおよび決定キーの操作により「追いかけ再生する＝Ｙ」を選んで決定すると（ステップＳＴ１０イエス）、タイムスリッププロセサ３４は、バッファ３２でバッファリング（遅延）されたオーディオデータと、ＭＰＥＧエンコーダ３０からのビデオデータを選択するように切り替わる（ステップＳＴ１２）。この場合、タイムスリッププロセサ３４内において、エンコーダ３０からのＭＰＥＧビデオデータとバッファ３２からのＭＰＥＧオーディオデータから、記録用のＡＶデータが作成される。

また、実際の録画開始前に、ユーザに、レート変換記録（トランスレート記録）するかどうか問い合わせる（ステップＳＴ１４）。この問合せは、例えば図４に示すようなダイアログ１０４をＡＶモニタ装置１００にＯＳＤ表示することで、行なうことができる。ユーザがリモコン５４の図示しないカーソルキーおよび決定キーの操作により「レート変換記録する＝Ｙ」を選んで決定すると（ステップＳＴ１４イエス）、この決定に対応した記録レートがＭＰＥＧエンコーダ３０に設定される（ステップＳＴ１６）。

このレートの決定方法は幾つか考えられる。第１の例は、ユーザが記録レート（例えば５Ｍｂｐｓなら“５”）をリモコンからダイレクト入力するものがある。第２の例は、例えば設定可能な記録レートの候補がユーザ選択用に予め用意され（例えば２Ｍｂｐｓ、４Ｍｂｐｓ、６Ｍｂｐｓ、８Ｍｂｐｓ、１０Ｍｂｐｓ、１２Ｍｂｐｓ、１６Ｍｂｐｓ、２０Ｍｂｐｓの８候補）これらの候補をユーザがＯＳＤ表示を見ながらリモコンで選択するものがある。第３の例は、図４に示すように、現在レコーダ４０に装填されている記録媒体（図示しないＤＶＤ−ＲＡＭディスクなど）を用いて何分の録画をしたいかをユーザに入力させるものがある。この場合、例えば１２０分の番組の放送レートが１５Ｍｂｐｓであり記録レートが１５Ｍｂｐｓでは４０分しか録画できない場合において、ユーザがリモコンのテンキー入力を用いて１２０分の録画時間を入力すると、平均５Ｍｂｐｓの記録レートがＭＰＵ５０により算出され、算出された５Ｍｂｐｓが、レート変換後のレートとして、ＭＰＥＧエンコーダ３０に設定される（ステップＳＴ１６）。この設定により、ＭＰＥＧエンコーダ３０におけるビデオのレート変換動作（再エンコード）がアクティブとなる（ステップＳＴ１８）。

なお、「レート変換記録する＝Ｎ」が選ばれた場合は（ステップＳＴ１４ノー）、ステップＳＴ１６〜ＳＴ１８はスキップされる（この場合は、図１の構成ではスイッチャ／ＡＶセパレータ１８からのＭＰＥＧ・ＡＶデータｄが、再エンコードされることなく記録に用いられる）。

ＭＰＥＧエンコーダ３０にレートが設定されそのレートで録画がレコーダにおいて開始されると、録画中のモニタ映像がデコーダ２１からＡＶモニタ装置１００へ送られる。この状態で、ユーザがリモコン５４の図示しないタイムスリップキーをオンすると（ステップＳＴ２２イエス）、追いかけ再生処理が開始される（ステップＳＴ２４）。すなわち、タイムスリップ再生されたＭＰＥＧ・ＡＶデータのうち、ビデオ分はＭＰＥＧビデオデコーダ２２に入力され、オーディオ分はオーディオデコーダ２３に入力される。これにより、タイムスリップ再生の映像がデコーダ２２からモニタ装置１００の内部ビデオ系へ送られ、タイムスリップ再生の音声がデコーダ２３からモニタ装置１００の内部オーディオ系へ送られる。この処理（ステップＳＴ２４）は、録画中（ステップＳＴ２６ノー）、タイムスリップ再生のユーザ指示が生きている（ステップＳＴ２２イエス）限り、継続される。

上記タイムスリップ再生中のモニタ画像は、それ単独でモニタ表示してもよいが、例えば図５に示すようにピクチャ・イン・ピクチャ（ＰｉｎＰ）表示してもよい。図５の例では、ＭＰＥＧビデオデコーダ２１からのモニタ画像１０６が、小画面として、追いかけ再生中のモニタ画像１０８の一部（ここでは左上）にはめ込み表示されている。この表示において、モニタ装置１００が例えば４８０ｉ表示しているときは、デコーダ２１からの画像が１０８０ｉや７２０ｐであったとしても、小画面のモニタ画像１０６は、主画面のモニタ画像１０８と同じ走査線数に変換されて表示される。なお、図５の表示例では、主画面の左下側に、記録媒体（ＤＶＤ−ＲＡＭディスクなど）には必ずしも録画されない関連情報（録画番組のソースレート、ソースレートでの録画可能時間、トランスレート記録時のレート、トランスレート記録時の録画可能時間、その他の時刻情報や番組情報など）がＯＳＤ表示１１０されている。このＯＳＤ表示１１０は、ユーザからのリモコン指示などによりオン・オフ可能である。また、図５のＰｉｎＰ表示においては、ユーザからのリモコン指示などにより、ソースビデオの小モニタ画像１０６と追いかけ再生の大モニタ画像１０８は、任意に入れ替え可能である。

（一実施の形態における動作のまとめ）
<1>デコーダ２０に入力されたＭＰＥＧデータは、通常であれば、映像と音声をデコードしアナログ出力としてエンコーダに３０入力される。しかし、このシステムにおける動作では、映像のデコードは行うが音声のデコードは行わず映像のみをエンコーダ３０に入力する。この時点で音声のデコーダ２３は未使用である。

<2>音声のＭＰＥＧデジタルデータは記録媒体３２（ＳＤＲＡＭなどの半導体メモリ）に一時的にバッファリングしておく。

<3>エンコーダ３０は、映像をエンコードしＭＰＥＧデジタルデータとして出力する。これをタイムスリッププロセッサ３４でデジタル記録機器４０に送り記録するわけであるが、この際に<2>でバッファリングしておいた音声ＭＰＥＧデジタルデータをタイムスリッププロセッサ３４に出力し、エンコーダ３０の出力映像と組み合わせてデジタル記録機器４０で記録する（レコーダ４０がＤＶＤ−ＶＲ規格に準じたものなら、データ単位ＶＯＢＵ内に映像のビデオパックとバッファリングされた音声のオーディオパックを挿入して記録する）。

<4>追いかけ再生を行う場合は、音声のデコーダ２３は未使用なので、追いかけ再生における音声デコードにデコーダ２３を用いることが可能となる。

上記の処理の際に映像と音声の同期にずれが生じ得るが、これを解決する手段として、音声ＭＰＥＧデータをバッファリングしておく際にタイミングを調整する。あるいは、このシステムでの再生のみを前提とするのであれば、記録は同期がずれたままで記録し、再生時に音声を遅らせて再生する方法もある（再生時に映像・音声の同期をとる）。

なお、この発明は上記した実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を種々変形して具体化することができる。

例えば、上記した実施の形態のシステムは、音声デコーダを１個で済ます場合を例に挙げて説明したが、デジタル放送で存在する情報でアナログに変換した際に失われるもの（データ放送のサービス情報など）をエンコーダ３０出力のＭＰＥＧデジタルデータに付加したい場合において、その処理（サービス情報処理など）を行なうデバイスが１個しかない場合にも、このシステムの構成方法は有効である。この場合はオーディオデコーダ２３の使い方をその１個のデバイスに適用して考えればよい（例えばデータ放送のデコーダデバイスを記録系では用いず、追いかけ再生されたデータ中の対応データデコードにこのデバイスを用いる）。また、この発明は、パーソナルコンピュータ上のソフトウエアで仮想的なＤＶＤ／ＨＤＤレコーダを構成している場合においても、実施できる。

また、上記した実施の形態に開示されている複数の構成要素を適宜に組み合わせることにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素から幾つかの構成要素を削除しても良いものである。さらに、異なる実施の形態に係る構成要素を適宜組み合わせても良い。

この発明の一実施の形態に係る、トランスレート記録（レート変換録画）および追いかけ再生（タイムスリップ再生）に対応した、ＡＶ情報処理システム（デジタルＡＶレコーダ付デジタルＴＶなど）を説明する図。トランスレート記録および追いかけ再生実行時における図１のシステム動作の一例を説明するフローチャート図。追いかけ再生（タイムスリップ再生）を行なうかどうかをユーザに設定してもらう際のダイアログ表示例を説明する図。レート変換記録を行なうかどうかと、レート変換により何分の録画をしたいのかをユーザに設定してもらう際のダイアログ表示例を説明する図。追いかけ再生中のＰｉｎＰ表示例および録画情報のオンスクリーン表示例を説明する図。

符号の説明

１０…ＡＶ入力部；１２…地上／衛星アナログチューナ；１４…地上／衛星デジタルチューナ；１６…Ａ／Ｖ入力用ＡＤコンバータおよびＭＰＥＧエンコーダ；１８…スイッチャ（ソース源切替部）およびＡＶセパレータ（オーディオデータ分離抽出部）；２０…デコーダ部（２組のＭＰＥＧビデオデコーダと１個のオーディオデコーダをワンチップ化したＩＣまたはこれらのデコーダが組み込まれた回路基板）；３０…ＭＰＥＧエンコーダ（レート変換部…ここで記録レートが決定される）；３２…オーディオデータ用バッファ（映像音声同期用ディレイ部）；３４…タイムスリッププロセサ（タイムスリップ処理で録画と再生を並行処理するためのＡＶデータのバッファリングとタイムスリップ処理中にバッファリングしたデータの出力タイミング制御）；４０…追いかけ再生機能（タイムスリップ再生機能）付デジタルＡＶレコーダ（ＤＶＤ−ＶＲレコーダ、ＨＤＤレコーダなど）；５０…制御ＭＰＵ；５２…リモコン受信部；５４…リモコン；１００…ＯＳＤ（オンスクリーン表示）およびピクチャインピクチャ（ＰｉｎＰ）機能に対応したａｖモニタ装置（デジタルＴＶ、パソコンモニタなど）；１０２…追いかけ再生（タイムスリップ再生）を行なうかどうかを設定する表示；１０４…レート変換記録を行なうかどうかと、レート変換により何分の録画をしたいのかを設定する表示；１０６…ＰｉｎＰ表示における子画面の例；１０８…ＰｉｎＰ表示における主画面の例；１１０…オンスクリーン表示の例。

Claims

複数のＭＰＥＧビデオコーダに対して１つのオーディオデコーダしか持たないマルチデコード対応のＭＰＥＧデコーダを用いて、レート変換ビデオ録画をしながら録画済みのビデオとオーディオを同期再生するＡＶ情報処理システムであって、
ＭＰＥＧエンコードされたソースビデオデータをＭＰＥＧデコードして第１のビデオ信号を提供する第１のＭＰＥＧビデオデコーダと；
前記第１のＭＰＥＧビデオデコーダでデコードされた第１のビデオ信号を、前記ソースビデオデータと異なるレートのレート変換ビデオデータに再エンコードするＭＰＥＧエンコーダと；
前記ソースビデオデータに対応するソースオーディオデータと、前記再エンコードされたレート変換ビデオデータとを記録し再生するデジタル記録再生部と；
前記デジタル記録再生部で前記ソースオーディオデータと前記レート変換ビデオデータを記録している間に、前記デジタル記録再生部から再生された前記レート変換ビデオデータをＭＰＥＧデコードして第２のビデオ信号を提供する第２のＭＰＥＧビデオデコーダと；
前記デジタル記録再生部で前記ソースオーディオデータと前記レート変換ビデオデータを記録している間に、前記デジタル記録再生部から再生された前記ソースオーディオデータをデコードしてオーディオ信号を提供するオーディオデコーダと、
前記ソースオーディオデータを一時格納し、この格納されたソースオーディオデータを、前記再エンコードされたレート変換ビデオデータに同期するタイミングで送出するバッファを備え、
前記第１のＭＰＥＧビデオデコーダが前記ソースビデオデータのＭＰＥＧデコートに用いられ、前記第２のＭＰＥＧビデオデコーダが前記レート変換ビデオデータのＭＰＥＧデコードに用いられている間は、前記オーディオデコーダが前記レート変換ビデオデータに同期する前記ソースオーディオデータのデコードに用いられるように構成されたＡＶ情報処理システム。
前記オーディオデコーダが前記ソースオーディオデータのエンコード形式に対応したデコード機能を持つように構成された請求項１に記載のシステム。
複数のＭＰＥＧビデオコーダに対して１つのオーディオデコーダしか持たないマルチデコード対応のＭＰＥＧデコーダを用いて、レート変換ビデオ録画をしながら録画済みのビデオとオーディオを同期再生するデジタルレコーダであって、
ＭＰＥＧエンコードされたソースビデオデータをＭＰＥＧデコードして第１のビデオ信号を提供する第１のＭＰＥＧビデオデコーダと；
前記第１のＭＰＥＧビデオデコーダでデコードされた第１のビデオ信号を、前記ソースビデオデータと異なるレートのレート変換ビデオデータに再エンコードするＭＰＥＧエンコーダと；
前記ソースビデオデータに対応するソースオーディオデータと、前記再エンコードされたレート変換ビデオデータとを、光ディスクまたは磁気ディスクもしくはメモリを用いて記録し再生するデジタル記録再生部と；
前記デジタル記録再生部で前記ソースオーディオデータと前記レート変換ビデオデータを記録している間に、前記デジタル記録再生部から再生された前記レート変換ビデオデータをＭＰＥＧデコードして第２のビデオ信号を提供する第２のＭＰＥＧビデオデコーダと；
前記デジタル記録再生部で前記ソースオーディオデータと前記レート変換ビデオデータを記録している間に、前記デジタル記録再生部から再生された前記ソースオーディオデータをデコードしてオーディオ信号を提供するオーディオデコーダと、
前記ソースオーディオデータを一時格納し、この格納されたソースオーディオデータを、前記再エンコードされたレート変換ビデオデータに同期するタイミングで送出するバッファを備え、
前記第１のＭＰＥＧビデオデコーダが前記ソースビデオデータのＭＰＥＧデコートに用いられ、前記第２のＭＰＥＧビデオデコーダが前記レート変換ビデオデータのＭＰＥＧデコードに用いられている間は、前記オーディオデコーダが前記レート変換ビデオデータに同期する前記ソースオーディオデータのデコードに用いられるように構成されたデジタルレコーダ。
前記オーディオデコーダが前記ソースオーディオデータのエンコード形式に対応したデコード機能を持つように構成された請求項３に記載のレコーダ。
複数のＭＰＥＧビデオコーダに対して１つのオーディオデコーダしか持たないマルチデコード対応のＭＰＥＧデコーダを用いて、レート変換ビデオ録画をしながら録画済みのビデオとオーディオを同期再生するテレビジョン装置であって、
デジタル放送を受信し、受信内容をソースビデオデータとして出力するチューナ部と；
前記ソースビデオデータをＭＰＥＧデコードして第１のビデオ信号を提供する第１のビデオデコーダと；
前記第１のビデオデコーダでデコードされた第１のビデオ信号を、前記ソースビデオデータと異なるレートのレート変換ビデオデータに再エンコードするエンコーダと；
前記ソースビデオデータに対応するソースオーディオデータと、前記再エンコードされたレート変換ビデオデータとを記録し再生するデジタル記録再生部と；
前記デジタル記録再生部で前記ソースオーディオデータと前記レート変換ビデオデータを記録している間に、前記デジタル記録再生部から再生された前記レート変換ビデオデータをデコードして第２のビデオ信号を提供する第２のビデオデコーダと；
前記デジタル記録再生部で前記ソースオーディオデータと前記レート変換ビデオデータを記録している間に、前記デジタル記録再生部から再生された前記ソースオーディオデータをデコードしてオーディオ信号を提供するオーディオデコーダと；
前記チューナ部からのソースビデオデータ、前記第１のビデオ信号、および前記第２のビデオ信号のうちの少なくとも１つを表示する表示部
を備え、
前記第１のＭＰＥＧビデオデコーダが前記ソースビデオデータのＭＰＥＧデコートに用いられ、前記第２のＭＰＥＧビデオデコーダが前記レート変換ビデオデータのＭＰＥＧデコードに用いられている間は、前記オーディオデコーダが前記レート変換ビデオデータに同期する前記ソースオーディオデータのデコードに用いられるように構成されたテレビジョン装置。
前記オーディオデコーダが前記ソースオーディオデータのエンコード形式に対応したデコード機能を持つように構成された請求項５に記載の装置。