JP4288442B2

JP4288442B2 - 記録再生装置および映像処理方法

Info

Publication number: JP4288442B2
Application number: JP2000157857A
Authority: JP
Inventors: 健本田; 元新田; 智之佐藤; 順竹下
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2000-05-29
Filing date: 2000-05-29
Publication date: 2009-07-01
Anticipated expiration: 2020-05-29
Also published as: JP2001339685A

Description

【０００１】
【発明の属する技術分野】
この発明は、映像データを記録媒体に記録し、記録媒体から再生する記録再生装置、および、この記録再生装置と画像表示機器とからなる映像処理システムにおける映像処理方法に関する。
【０００２】
【従来の技術】
上記のような記録再生装置で、映像データを解析して、番組と番組の変わり目、番組本編とＣＭ（コマーシャル）部分の変わり目、番組内のシーンチェンジ点などを、画像の特徴点として検出する機能を備えたものが考えられている。
【０００３】
このような記録再生装置では、その検出された特徴点の情報を用いて、ＣＭ部分を飛ばして番組本編のみを再生することや、特徴点情報を再生ポイントのインデックスとして利用して、画像全体をシークすることなく所望の再生ポイントに的確かつ容易にアクセスすることなどが可能となる。
【０００４】
【発明が解決しようとする課題】
しかしながら、映像システムとしては、上記のような記録再生装置が単独で用いられずに、記録再生装置に対して、ＩＲＤ（ＩｎｔｅｇｒａｔｅｄＲｅｃｅｉｖｅｒＤｅｃｏｄｅｒ）やデジタルＴＶ（ｔｅｌｅｖｉｓｉｏｎ）受信機などの映像機器が、さらにはパーソナルコンピュータなどの情報機器が、組み合わされることも多く、その傾向は今後、いっそう増加すると思われる。
【０００５】
このような場合、従来は、上記のように記録再生装置が特徴点検出機能を有するものであっても、システムを構成する他の機器が特徴点検出機能を持たないと、その機器では、例えば、特徴点の画像をサムネイル表示（縮小表示）し、あるいは特定のシーンの画像のみを選択的に表示するなど、特徴点情報を利用した映像機能を実行することができず、それぞれの機器で特徴点情報を利用した映像機能を実行するには、それぞれの機器に特徴点検出機能を持たせる必要がある。
【０００６】
しかし、特徴点の検出および特徴点情報の生成には、規模の大きいハードウエア構成またはソフトウエア構成を必要とするので、それぞれの機器に特徴点検出機能を持たせると、システムの複雑化および高コスト化を来たす。
【０００７】
そこで、この発明は、記録再生装置が有する特徴点検出機能を、その記録再生装置の外部装置において有効に利用することができ、システムの簡略化および低コスト化を実現することができるようにしたものである。
【０００８】
【課題を解決するための手段】
この発明の記録再生装置は、
外部装置から入力されたデータを当該の記録再生装置内に取り込むとともに、外部装置からの要求によって当該外部装置にデータを出力するデジタルインタフェース部と、
外部装置から入力された映像データ、および当該の記録再生装置内で得られた映像データから、画像の特徴点を検出し、特徴点の画像を指し示す特徴点情報を生成する特徴点検出部と、
この特徴点検出部によって生成された特徴点情報を記憶保持する特徴点情報記憶保持部と、
前記特徴点検出部によって生成された特徴点情報を前記映像データに、その一部として付加する多重化部と、
この特徴点情報が付加された映像データを、記録媒体に記録し、記録媒体から再生する映像データ記録再生部と、
外部装置からの特徴点情報送信要求によって、前記特徴点検出部によって生成された特徴点情報、または前記特徴点情報記憶保持部に記憶保持されている特徴点情報を、前記デジタルインタフェース部によって当該外部装置に出力するとともに、外部装置からの映像データ送信要求によって、前記多重化部からの特徴点情報が付加された映像データ、または前記映像データ記録再生部によって前記記録媒体から再生された特徴点情報が付加された映像データを、前記デジタルインタフェース部によって当該外部装置に出力する制御部と、
を備えるものである。
【００１０】
上記のように構成したこの発明の記録再生装置では、外部装置からの要求に応じて、特徴点情報、および特徴点情報が付加された映像データが、記録再生装置から外部装置に供与されることによって、外部装置が特徴点検出機能を持たないものであっても、外部装置において特徴点情報を利用した画像表示などの映像処理を実行することができる。
【００１２】
【発明の実施の形態】
以下に、この発明の実施形態を示す。
【００１３】
〔１．記録再生装置およびシステムの概要〕
図１は、この発明の記録再生装置の一例を示し、映像信号および音声信号を、ＭＰＥＧ（ＭｏｖｉｎｇＰｉｃｔｕｒｅＥｘｐｅｒｔｓＧｒｏｕｐ）方式によって圧縮し、多重化して、ＭＰＥＧシステムのＴＳ（ＴｒａｎｓｐｏｒｔＳｔｒｅａｍ）として、ＨＤＤ（ＨａｒｄＤｉｓｋＤｒｉｖｅ）に記録し、ＨＤＤから再生する場合である。
【００１４】
なお、以下では、アナログ映像信号およびアナログ音声信号を、映像信号および音声信号と称し、デジタル映像信号およびデジタル音声信号は、デジタル映像データおよびデジタル音声データ、または単に映像データおよび音声データと称する。
【００１５】
記録再生装置１０は、この例では、地上波ＴＶ信号を受信するアンテナ１が接続され、アナログ入力端子１１Ｖ，１１Ａ，１１Ｓ、アナログ出力端子１２Ｖ，１２Ａ，１２Ｓ、デジタル入出力端子１９、入力処理部２０、出力処理部３０、多重分離処理部４０、バッファ制御回路５０、ＨＤＤ６０、システムコントローラ７０、同期制御回路８０およびデジタルインタフェース回路９０を備える。
【００１６】
多重分離処理部４０は、特徴点検出回路４１、多重化回路４２および分離回路４３を備える。ただし、特徴点検出回路４１は、便宜上、多重分離処理部４０の一部とするが、多重化回路４２および分離回路４３とは別個の回路である。
【００１７】
システムコントローラ７０は、図では省略したが、ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）、ＣＰＵが実行すべきプログラムなどが書き込まれたＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）、およびＣＰＵのワークエリアなどとして機能するＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）を備え、記録再生装置１０全体を制御するものである。
【００１８】
（１−１．入力処理および記録の概要）
アンテナ１で受信された地上波ＴＶ信号は、地上波チューナ２１で選局されて、地上波チューナ２１から映像信号および音声信号が得られ、その映像信号および音声信号が、入力切換回路２２の一方の入力端に供給される。
【００１９】
入力端子１１Ｖには外部機器からコンポジット映像信号が、入力端子１１Ａには外部機器から音声信号が、入力端子１１Ｓには外部機器からセパレート映像信号が、それぞれ供給される。
【００２０】
入力端子１１Ｖからのコンポジット映像信号、および入力端子１１Ａからの音声信号は、入力切換回路２２の他方の入力端に供給され、入力切換回路２２がシステムコントローラ７０によって切り換えられて、入力切換回路２２から、いずれかの映像信号および音声信号が選択されて取り出される。
【００２１】
入力切換回路２２からの映像信号は、ＹＣ分離回路２３で輝度信号と色差信号に分離されて、別の入力切換回路２４の一方の入力端に供給される。また、入力端子１１Ｓからのセパレート映像信号（輝度信号および色差信号）が、入力切換回路２４の他方の入力端に供給され、入力切換回路２４がシステムコントローラ７０によって切り換えられて、入力切換回路２４から、いずれかの輝度信号および色差信号が選択されて取り出される。
【００２２】
入力切換回路２４からの輝度信号および色差信号は、ＮＴＳＣ（ＮａｔｉｏｎａｌＴｅｌｅｖｉｓｉｏｎＳｙｓｔｅｍＣｏｍｍｉｔｔｅｅ）デコーダ２５で、それぞれＡ／Ｄ変換され、さらにクロマエンコード処理されて、ＮＴＳＣデコーダ２５から、コンポーネント映像データが得られる。
【００２３】
また、ＮＴＳＣデコーダ２５では、入力切換回路２４からの輝度信号から垂直同期信号および水平同期信号が分離されるとともに、その分離された同期信号に基づいてクロックおよびフィールド判別信号が生成され、これら同期信号、クロックおよびフィールド判別信号が、同期制御回路８０に供給される。同期制御回路８０では、これらの信号を基準として、記録再生装置１０の各部に必要なクロックおよびタイミング信号が生成されて、記録再生装置１０の各部に供給される。
【００２４】
ＮＴＳＣデコーダ２５からの映像データは、プリ映像処理回路２６でプリフィルタリング処理などの映像処理が施されたのち、ＭＰＥＧ映像エンコーダ２７および出力処理部３０のポスト映像処理回路３２に供給される。
【００２５】
ＭＰＥＧ映像エンコーダ２７では、プリ映像処理回路２６からの映像データに対して、ブロックＤＣＴ（ＤｉｓｃｒｅｔｅＣｏｓｉｎｅＴｒａｎｓｆｏｒｍ：離散コサイン変換）などの符号化処理が施されて、映像ＥＳ（ＥｌｅｍｅｎｔａｒｙＳｔｒｅａｍ）が生成され、そのＭＰＥＧ映像ＥＳが、多重分離処理部４０に供給される。
【００２６】
一方、入力切換回路２２からの音声信号は、音声Ａ／Ｄ変換器２８でデジタル音声データに変換されたのち、ＭＰＥＧ音声エンコーダ２９および出力処理部３０の出力切換回路３５に供給される。
【００２７】
ＭＰＥＧ音声エンコーダ２９では、音声Ａ／Ｄ変換器２８からの音声データがＭＰＥＧフォーマットに従って圧縮されて、音声ＥＳが生成され、そのＭＰＥＧ音声ＥＳが、多重分離処理部４０に供給される。
【００２８】
多重分離処理部４０では、多重化回路４２において、ＭＰＥＧ映像エンコーダ２７からの映像ＥＳおよびＭＰＥＧ音声エンコーダ２９からの音声ＥＳと各種制御信号とが多重化されて、ＭＰＥＧシステムのＴＳが生成され、そのＭＰＥＧ／ＴＳがバッファ制御回路５０に供給され、ＨＤＤ６０に記録される。
【００２９】
バッファ制御回路５０は、多重化回路４２から連続的に入力されるＭＰＥＧ／ＴＳを、ＨＤＤ６０に断続的に送出する。すなわち、ＨＤＤ６０がシーク動作を行っているときには、書き込みができないので、入力されたＴＳをバッファに一時的に蓄え、ＨＤＤ６０が書き込み可能なときに、そのＴＳを入力レートより高いレートでバッファから読み出して、ＨＤＤ６０に送出する。これによって、バッファ制御回路５０に連続的に入力されるＭＰＥＧ／ＴＳは、途切れることなくＨＤＤ６０に記録される。
【００３０】
ＨＤＤ６０は、システムコントローラ７０によって制御されて、ハードディスクにＭＰＥＧ／ＴＳを書き込む。バッファ制御回路５０とＨＤＤ６０との間のプロトコル（インタフェース）としては、ＩＤＥ（ＩｎｔｅｇｒａｔｅｄＤｅｖｉｃｅＥｌｅｃｔｒｏｎｉｃｓ）などが用いられる。
【００３１】
（１−２．再生および出力処理の概要）
再生時には、ＨＤＤ６０は、システムコントローラ７０によって制御されて、ハードディスクからＭＰＥＧ／ＴＳを読み出し、バッファ制御回路５０に供給する。バッファ制御回路５０は、記録時とは逆に、ＨＤＤ６０から断続的に入力されるＭＰＥＧ／ＴＳを、連続的なＴＳに変換して、多重分離処理部４０の分離回路４３に送出する。
【００３２】
分離回路４３では、その連続的なＭＰＥＧ／ＴＳからＰＥＳ（ＰａｃｋｅｔｉｚｅｄＥｌｅｍｅｎｔａｒｙＳｔｒｅａｍ）が抽出されて、ＭＰＥＧ映像音声デコーダ３１に供給される。
【００３３】
ＭＰＥＧ映像音声デコーダ３１では、分離回路４３からのＰＥＳが、映像ＥＳと音声ＥＳに分離され、さらに、その映像ＥＳが、ＭＰＥＧ映像デコーダで復号化されてベースバンドの映像データに変換され、音声ＥＳが、ＭＰＥＧ音声デコーダで復号化されてベースバンドの音声データに変換される。変換後の映像データは、ポスト映像処理回路３２に供給され、音声データは、出力切換回路３５に供給される。
【００３４】
ポスト映像処理回路３２では、ＭＰＥＧ映像音声デコーダ３１からの映像データおよびプリ映像処理回路２６からの映像データに対して、両者の切り換えまたは合成やポストフィルタリング処理などの映像処理が施され、処理後の映像データが、ＯＳＤ（ＯｎＳｃｒｅｅｎＤｉｓｐｌａｙ）処理回路３３に供給される。
【００３５】
ＯＳＤ処理回路３３では、ポスト映像処理回路３２からの映像データに、表示画面上でグラフィックスなどの画像が重畳的または部分的に表示されるような処理が施され、処理後の映像データが、ＮＴＳＣエンコーダ３４に供給される。
【００３６】
ＮＴＳＣエンコーダ３４では、ＯＳＤ処理回路３３からの映像データ（コンポーネント映像データ）が、輝度データと色差データとに変換され、さらに、その輝度データおよび色差データが、それぞれＤ／Ａ変換されて、それぞれアナログ信号のコンポジット映像信号およびセパレート映像信号が得られる。そのコンポジット映像信号は、出力端子１２Ｖに導出され、セパレート映像信号は、出力端子１２Ｓに導出される。
【００３７】
一方、出力切換回路３５では、システムコントローラ７０によって、ＭＰＥＧ映像音声デコーダ３１からの音声データと、音声Ａ／Ｄ変換器２８からの音声データとの、いずれかが選択されて取り出される。この選択された音声データは、音声Ｄ／Ａ変換器３６でアナログ音声信号に変換されて、出力端子１２Ａに導出される。
【００３８】
（１−３．外部装置とのインタフェースの概要）
記録再生装置１０は、デジタル入出力端子１９と多重分離処理部４０との間にデジタルインタフェース回路９０が接続されたものとされて、デジタル入出力端子１９に外部装置１１０を接続することによって、外部装置１１０からの映像音声データをＨＤＤ６０に記録し、ＨＤＤ６０から再生された映像音声データを外部装置１１０に出力することができる。
【００３９】
外部装置１１０としては、上述したＩＲＤやパーソナルコンピュータなどの機器を接続することができる。外部装置１１０と記録再生装置１０とのデジタルインタフェースとしては、ＩＥＥＥ（ＩｎｓｔｉｔｕｔｅｏｆＥｌｅｃｔｒｉｃａｌａｎｄＥｌｅｃｔｒｏｎｉｃｓＥｎｇｉｎｅｅｒｓ）１３９４規格のインタフェースなどを用いることができる。
【００４０】
外部装置１１０からデジタル入出力端子１９に入力された映像音声データは、デジタルインタフェース回路９０でフォーマット変換などの処理を施して、記録再生装置１０に適合するＴＳに変換し、多重分離処理部４０に送出する。多重分離処理部４０では、必要に応じて制御信号の解析や生成を行った上で、そのＴＳをバッファ制御回路５０に供給し、ＨＤＤ６０に記録する。
【００４１】
また、これと同時に、多重分離処理部４０の分離回路４３で、記録するＴＳからＰＥＳを抽出して、ＭＰＥＧ映像音声デコーダ３１に供給することによって、出力端子１２Ｖ，１２Ｓおよび出力端子１２Ａに、外部装置１１０からの映像音声データによるアナログ映像信号およびアナログ音声信号を得ることができる。
【００４２】
再生時には、ＨＤＤ６０でＴＳを読み出し、バッファ制御回路５０で連続的なＴＳに変換して、多重分離処理部４０に送出する。多重分離処理部４０では、必要に応じて制御信号の解析や生成を行った上で、そのＴＳをデジタルインタフェース回路９０に送出する。デジタルインタフェース回路９０では、記録時とは逆の処理によって、そのＴＳを外部装置１１０に適合する映像音声データに変換して、デジタル入出力端子１９を介して外部装置１１０に出力する。
【００４３】
また、これと同時に、多重分離処理部４０の分離回路４３で、再生されたＴＳからＰＥＳを抽出して、ＭＰＥＧ映像音声デコーダ３１に供給することによって、出力端子１２Ｖ，１２Ｓおよび出力端子１２Ａに、アナログ映像信号およびアナログ音声信号を得ることができる。
【００４４】
〔２．第１の実施形態〕
第１の実施形態として、以上のような概要の記録再生装置１０において、特徴点情報をＭＰＥＧ／ＴＳの一部として多重化する場合を示す。図２は、この場合の多重分離処理部４０の一例を示す。
【００４５】
（２−１．アナログ入力の場合）
地上波チューナ２１または入力端子１１Ｖ，１１Ｓ，１１Ａからの映像信号および音声信号は、上述したように入力処理部２０で処理され、ＭＰＥＧ映像エンコーダ２７およびＭＰＥＧ音声エンコーダ２９から多重分離処理部４０に、それぞれ映像ＥＳおよび音声ＥＳが供給される。
【００４６】
多重分離処理部４０では、このＭＰＥＧ映像エンコーダ２７からの映像ＥＳおよびＭＰＥＧ音声エンコーダ２９からの音声ＥＳが、入力切換回路４４および４５の第１の入力端に供給される。入力切換回路４４および４５の第２の入力端には、後述の前処理回路４６からの映像ＥＳおよび音声ＥＳが供給される。
【００４７】
そして、このアナログ入力時には、システムコントローラ７０によって入力切換回路４４および４５が、それぞれ第１の入力端に供給されるデータを選択する状態に切り換えられて、ＭＰＥＧ映像エンコーダ２７からの映像ＥＳおよびＭＰＥＧ音声エンコーダ２９からの音声ＥＳが、特徴点検出回路４１および多重化回路４２に供給される。
【００４８】
特徴点検出回路４１では、入力された映像ＥＳおよび音声ＥＳが解析されて、番組と番組の変わり目、番組本編とＣＭ部分の変わり目、番組内のシーンチェンジ点などが、画像の特徴点として検出され、特徴点情報が生成される。
【００４９】
そして、この特徴点検出回路４１で生成された特徴点情報が、多重化回路４２に供給され、多重化回路４２において、特徴点情報がＴＳの一部として、ＭＰＥＧ映像エンコーダ２７からの映像ＥＳおよびＭＰＥＧ音声エンコーダ２９からの音声ＥＳと多重化されて、ＭＰＥＧ／ＴＳが生成される。
【００５０】
すなわち、一般にＭＰＥＧシステムのＴＳは、図３（Ａ）に示すように、ＰＩＤ（ＰａｃｋｅｔＩｄｅｎｔｉｆｉｃａｔｉｏｎ）が０のＰＳＩ（ＰｒｏｇｒａｍＳｐｅｃｉｆｉｃＩｎｆｏｒｍａｔｉｏｎ）パケットに映像パケットや音声パケットなどが付加された構成とされる。
【００５１】
これに対して、この実施形態では、図３（Ｂ）に示すように、特徴点情報を有するパケットをＰＩＤ＝Ｘとして多重化し、ＭＰＥＧ／ＴＳ中に特徴点のピクチャを指し示すＰＴＳ（ＰｒｅｓｅｎｔａｔｉｏｎＴｉｍｅＳｔａｍｐ）を含ませる。
【００５２】
多重化回路４２からの、このように特徴点情報が多重化されたＭＰＥＧ／ＴＳは、セレクタ４７を介してバッファ制御回路５０に供給し、ＨＤＤ６０に記録する。
【００５３】
また、多重化回路４２からの特徴点情報が多重化されたＴＳを、ＨＤＤ６０に記録することなく、セレクタ４８を介してデジタルインタフェース回路９０に送出し、デジタルインタフェース回路９０で特徴点情報を含む外部装置１１０に適合する映像音声データに変換して、デジタル入出力端子１９を介して外部装置１１０に出力することもできる。
【００５４】
再生時には、ＨＤＤ６０で特徴点情報が多重化されたＴＳを読み出し、バッファ制御回路５０で連続的なＴＳに変換して、セレクタ４８を介してデジタルインタフェース回路９０に送出し、デジタルインタフェース回路９０で特徴点情報を含む外部装置１１０に適合する映像音声データに変換して、デジタル入出力端子１９を介して外部装置１１０に出力する。
【００５５】
（２−２．外部装置からのデジタル入力の場合）
外部装置１１０からデジタル入出力端子１９に入力された映像音声データは、デジタルインタフェース回路９０で記録再生装置１０に適合するＴＳに変換されて、多重分離処理部４０のセレクタ４８および４９を介して分離回路４３に供給され、分離回路４３でＴＳからＰＥＳが抽出される。
【００５６】
さらに、その抽出されたＰＥＳが前処理回路４６で映像ＥＳおよび音声ＥＳに再構成され、その再構成後の映像ＥＳおよび音声ＥＳが、入力切換回路４４および４５の第２の入力端に供給される。
【００５７】
そして、この外部装置１１０からのデジタル入力時には、システムコントローラ７０によって入力切換回路４４および４５が、それぞれ第２の入力端に供給されるデータを選択する状態に切り換えられて、前処理回路４６からの映像ＥＳおよび音声ＥＳが、特徴点検出回路４１および多重化回路４２に供給される。
【００５８】
以後は、上述したアナログ入力時と同じで、特徴点検出回路４１では、入力された映像ＥＳおよび音声ＥＳから、画像の特徴点が検出され、多重化回路４２では、図３（Ｂ）に示したように、その特徴点情報がＴＳの一部として、前処理回路４６からの映像ＥＳおよび音声ＥＳと多重化されて、ＭＰＥＧ／ＴＳが生成され、そのＭＰＥＧ／ＴＳが、セレクタ４７を介してバッファ制御回路５０に供給され、ＨＤＤ６０に記録される。
【００５９】
再生時には、ＨＤＤ６０で特徴点情報が多重化されたＴＳが読み出され、バッファ制御回路５０で連続的なＴＳに変換されて、セレクタ４８を介してデジタルインタフェース回路９０に送出され、デジタルインタフェース回路９０で特徴点情報を含む外部装置１１０に適合する映像音声データに変換されて、デジタル入出力端子１９を介して外部装置１１０に出力される。
【００６０】
〔３．第２の実施形態〕
第２の実施形態として、記録再生装置に外部装置としてデジタルＴＶ受信機を接続して、デジタルＴＶ受信機において記録再生装置で得られる特徴点情報を利用した再生を行う場合を示す。
【００６１】
図４は、この場合のシステムの一例を示す。デジタルＴＶ受信機１２０は、デジタルインタフェース回路１２１およびデジタル入出力端子１２２を備え、そのデジタル入出力端子１２２が、ケーブル１３０によって、上述した記録再生装置１０のデジタル入出力端子１９に接続される。
【００６２】
デジタルＴＶ受信機１２０のデジタルインタフェース回路１２１およびデジタル入出力端子１２２、記録再生装置１０のデジタルインタフェース回路９０およびデジタル入出力端子１９、およびケーブル１３０を含む、デジタルＴＶ受信機１２０と記録再生装置１０とのデジタルインタフェースとしては、例えば、上述したＩＥＥＥ１３９４規格のインタフェースが用いられる。また、デジタルＴＶ受信機１２０と記録再生装置１０との間のプロトコルとしては、例えば、ＡＶ／Ｃ（Ａｕｄｉｏ／ＶｉｄｅｏＣｏｎｔｒｏｌ）プロトコルが用いられる。
【００６３】
デジタルＴＶ受信機１２０は、受信部１２３、この受信部１２３からのＭＰＥＧ形式の映像音声データを復号化するＭＰＥＧ映像音声デコーダ１２４を含む映像音声処理部１２５、この映像音声処理部１２５からの映像信号によって画像が表示されるＣＲＴディスプレイなどのディスプレイ１２６、映像音声処理部１２５からの音声信号によって音声が出力されるスピーカなどの音声出力装置１２７、デジタルＴＶ受信機１２０全体を制御するシステムコントローラ１２８、およびユーザが後述するような操作を行うリモートコントローラなどの操作部１２９を備える。
【００６４】
（３−１．通常の再生）
図５は、図４のシステムにおいて特徴点情報を利用しない通常の再生を行う場合の、デジタルＴＶ受信機１２０のシステムコントローラ１２８および記録再生装置１０のシステムコントローラ７０が行う処理ルーチンの一例を示す。
【００６５】
記録再生装置１０のＨＤＤ６０には、いくつかのタイトル（番組またはプログラム）の映像音声データが、それぞれタイトル名が付けられて、それぞれＭＰＥＧ／ＴＳとして記録されているものとする。
【００６６】
この状態で、ユーザが操作部１２９で通常の再生を指示すると、まず、デジタルＴＶ受信機１２０は、ステップＳ１１で、ＡＶ／Ｃプロトコルによって記録再生装置１０に、ＨＤＤ６０に記録されている映像音声データのタイトル名のリストを送信すべきことを要求する。
【００６７】
これを受けて、記録再生装置１０は、ステップＳ２１で、デジタルＴＶ受信機１２０にタイトルリストを送信し、デジタルＴＶ受信機１２０は、ステップＳ１２で、そのタイトルリストをディスプレイ１２６上に、再生可能なタイトルとして表示する。
【００６８】
ユーザは、このディスプレイ１２６上に表示されたタイトルの中から、再生しようとするタイトルを、対応する番号を操作部１２９で入力することなどによって選択する。
【００６９】
次に、デジタルＴＶ受信機１２０は、ステップＳ１３で、ＡＶ／Ｃプロトコルによって記録再生装置１０に、そのユーザが選択したタイトルを再生タイトルとして指定し、これを受けて、記録再生装置１０は、ステップＳ２２で、指定されたタイトルのアドレスにＨＤＤ６０をシークさせるなど、指定されたタイトルの映像音声データを再生する準備を行い、準備が完了したら、そのことをデジタルＴＶ受信機１２０に通知する。
【００７０】
これを受けて、デジタルＴＶ受信機１２０は、ステップＳ１４で、ＡＶ／Ｃプロトコルによって記録再生装置１０に、指定したタイトルの再生実行を指示し、これを受けて、記録再生装置１０は、ステップＳ２３で、指定されたタイトルの映像音声データの再生を開始して、デジタルＴＶ受信機１２０にＭＰＥＧ／ＴＳを送信する。
【００７１】
デジタルＴＶ受信機１２０は、ステップＳ１５で、そのＭＰＥＧ／ＴＳを受信して、ＭＰＥＧ映像音声デコーダ１２４で復号化し、ディスプレイ１２６上に、および音声出力装置１２７で、ユーザによって選択されたタイトルの映像および音声を再生出力する。
【００７２】
（３−２．特徴点情報を利用した再生）
図４のシステムでは、さらにデジタルＴＶ受信機１２０において記録再生装置１０で得られる特徴点情報を利用した再生を行うことができる。
【００７３】
この場合、記録再生装置１０のＨＤＤ６０には、例えば、図６に示すように、タイトル１，２，３‥‥の映像音声データが、それぞれＭＰＥＧ／ＴＳとして記録されているとともに、これと別に管理されて、タイトル１，２，３‥‥の特徴点情報群が記録されているものとする。
【００７４】
各タイトルの特徴点情報群は、図７（Ａ）に、特徴点ＰＴＳ１、特徴点ＰＴＳ２‥‥として示すように、それぞれの特徴点のピクチャを指し示すＰＴＳとし、または図７（Ｂ）に、映像データ１（特徴点画像１）、映像データ２（特徴点画像２）‥‥として示すように、それぞれの特徴点の画像そのものの映像データとする。以下の例は、図７（Ｂ）のように、それぞれの特徴点の画像そのものの映像データとした場合である。
【００７５】
図８および図９は、この場合にデジタルＴＶ受信機１２０のシステムコントローラ１２８および記録再生装置１０のシステムコントローラ７０が行う処理ルーチンの一例を示す。
【００７６】
ユーザが操作部１２９で特徴点情報を利用した再生を指示すると、図５に示した通常の再生の場合と同様に、まず、デジタルＴＶ受信機１２０は、ステップＳ３１で、ＡＶ／Ｃプロトコルによって記録再生装置１０に、ＨＤＤ６０に記録されている映像音声データのタイトル名のリストを送信すべきことを要求し、記録再生装置１０は、ステップＳ４１で、デジタルＴＶ受信機１２０にタイトルリストを送信し、デジタルＴＶ受信機１２０は、ステップＳ３２で、そのタイトルリストをディスプレイ１２６上に、図１０（Ａ）に示すように再生可能なタイトルとして表示する。
【００７７】
ユーザは、このディスプレイ１２６上に表示されたタイトルの中から、再生しようとするタイトルを、対応する番号を操作部１２９で入力することなどによって選択する。図１０（Ａ）は、タイトル１が選択されることによって、タイトル１の部分が網かけ表示され、または別の色で表示された状態を示している。
【００７８】
次に、デジタルＴＶ受信機１２０は、ステップＳ３３で、ＡＶ／Ｃプロトコルによって記録再生装置１０に、ユーザによって選択されたタイトルについての特徴点情報群を送信すべきことを要求する。
【００７９】
これを受けて、記録再生装置１０は、ステップＳ４２で、ユーザによって選択されたタイトルについての特徴点情報群、この例では、図７（Ｂ）に示したような各特徴点画像の映像データを、デジタルＴＶ受信機１２０に送信する。
【００８０】
デジタルＴＶ受信機１２０は、ステップＳ３４で、その特徴点情報群、すなわち各特徴点画像の映像データによって、ユーザによって選択されたタイトルについての各特徴点画像をディスプレイ１２６上に、図１０（Ｂ）に示すようにサムネイル画像（縮小画像）１４０として表示する。
【００８１】
ユーザは、このディスプレイ１２６上に表示されたサムネイル画像１４０を見て、最初に選択したタイトルが希望したものであるか否かを判断し、希望したものでないときには、再生しようとするタイトルを選択し直す。
【００８２】
次に、デジタルＴＶ受信機１２０は、ステップＳ３５で、選択されたタイトルが変更されたか否かを判断し、変更されたときには、ステップＳ３３に戻って、変更後の選択されたタイトルについての特徴点情報群を送信すべきことを記録再生装置１０に要求し、記録再生装置１０は、ステップＳ４２で、変更後の選択されたタイトルについての特徴点情報群、すなわち各特徴点画像の映像データをデジタルＴＶ受信機１２０に送信し、デジタルＴＶ受信機１２０は、ステップＳ３４で、その各特徴点画像の映像データによって、変更後の選択されたタイトルについての各特徴点画像をディスプレイ１２６上に、サムネイル画像１４０として表示する。
【００８３】
ユーザは、このディスプレイ１２６上に表示されたサムネイル画像１４０を見て、再生しようとするタイトルを、さらに選択し直すことができる。
【００８４】
そして、ステップＳ３５で、選択されたタイトルが変更されていないと判断したときには、デジタルＴＶ受信機１２０は、選択されたタイトルが確定したものとして、ステップＳ３５からステップＳ３６に進んで、ＡＶ／Ｃプロトコルによって記録再生装置１０に、その確定したタイトルを再生タイトルとして指定する。
【００８５】
以後は、図５に示した通常の再生の場合と同じで、記録再生装置１０は、ステップＳ４３で、指定されたタイトルの映像音声データを再生する準備を行って、再生準備完了をデジタルＴＶ受信機１２０に通知し、デジタルＴＶ受信機１２０は、ステップＳ３７で、指定したタイトルの再生実行を記録再生装置１０に指示し、記録再生装置１０は、ステップＳ４４で、指定されたタイトルのＭＰＥＧ／ＴＳをデジタルＴＶ受信機１２０に送信し、デジタルＴＶ受信機１２０は、ステップＳ３８で、そのＭＰＥＧ／ＴＳを復号化して、ユーザが最終的に選択したタイトルの映像および音声を再生出力する。
【００８６】
この例によれば、ユーザは、デジタルＴＶ受信機１２０側で、ディスプレイ１２６上にサムネイル画像１４０として表示された特徴点画像群を見て、再生しようとする画像（番組またはプログラム）を的確かつ迅速に選択することができる。
【００８７】
さらに、図では省略したが、ユーザが操作部１２９での操作によって、ディスプレイ１２６上にサムネイル画像１４０として表示された特徴点画像群の中から、希望する特徴点画像を選択できるとともに、デジタルＴＶ受信機１２０からの指示によって、そのユーザによって選択された特徴点画像を含むシーン画像のＭＰＥＧ／ＴＳのみを、記録再生装置１０がデジタルＴＶ受信機１２０に送信するように、デジタルＴＶ受信機１２０および記録再生装置１０を構成することによって、ユーザは希望するシーン画像のみを選択して再生することもできる。
【００８８】
〔４．他の実施形態〕
上述した各実施形態は、映像信号および音声信号をＭＰＥＧ方式によって圧縮する場合であるが、他の圧縮方式によって圧縮してもよく、あるいは圧縮しないで、単にデジタルデータに変換し、またはデジタルデータのままとするだけでもよい。
【００８９】
また、上述した各実施形態は、記録再生装置の記録媒体（記憶素子）としてハードディスク（ＨＤＤ）を用いる場合であるが、光ディスク、光磁気ディスク、半導体メモリなどを用いてもよい。
【００９０】
さらに、上述した各実施形態は、映像音声データと特徴点情報を同一の記録媒体に記録する場合であるが、特徴点情報が多重化された映像音声データを記録媒体に記録する場合を除いて、例えば、映像音声データをハードディスク（ＨＤＤ）に記録し、特徴点情報をＲＡＭに記憶させる、などのように映像音声データと特徴点情報を別の記録媒体（記憶素子）に記録してもよい。
【００９２】
なお、映像処理装置と外部装置との接続は、有線に限らず、無線によって行うようにしてもよい。
【００９３】
【発明の効果】
上述したように、この発明によれば、記録再生装置が有する特徴点検出機能を、その記録再生装置の外部装置において有効に利用することができ、システムの簡略化および低コスト化を実現することができる。
【図面の簡単な説明】
【図１】この発明の記録再生装置の一例を示す図である。
【図２】図１の記録再生装置の多重分離処理部の一例を示す図である。
【図３】第１の実施形態におけるＭＰＥＧ／ＴＳ構成の一例を示す図である。
【図４】第２の実施形態におけるシステム構成の一例を示す図である。
【図５】第２の実施形態における通常再生の場合の処理ルーチンの一例を示す図である。
【図６】第２の実施形態における記録データ管理状態の一例を示す図である。
【図７】第２の実施形態における特徴点情報の例を示す図である。
【図８】第２の実施形態における特徴点情報を利用した再生の場合の処理ルーチンの一例の一部を示す図である。
【図９】第２の実施形態における特徴点情報を利用した再生の場合の処理ルーチンの一例の残部を示す図である。
【図１０】第２の実施形態におけるタイトルリストおよびサムネイル画像の表示状態の一例を示す図である。
【符号の説明】
主要部については図中に全て記述したので、ここでは省略する。

Claims

外部装置から入力されたデータを当該の記録再生装置内に取り込むとともに、外部装置からの要求によって当該外部装置にデータを出力するデジタルインタフェース部と、
外部装置から入力された映像データ、および当該の記録再生装置内で得られた映像データから、画像の特徴点を検出し、特徴点の画像を指し示す特徴点情報を生成する特徴点検出部と、
この特徴点検出部によって生成された特徴点情報を記憶保持する特徴点情報記憶保持部と、
前記特徴点検出部によって生成された特徴点情報を前記映像データに、その一部として付加する多重化部と、
この特徴点情報が付加された映像データを、記録媒体に記録し、記録媒体から再生する映像データ記録再生部と、
外部装置からの特徴点情報送信要求によって、前記特徴点検出部によって生成された特徴点情報、または前記特徴点情報記憶保持部に記憶保持されている特徴点情報を、前記デジタルインタフェース部によって当該外部装置に出力するとともに、外部装置からの映像データ送信要求によって、前記多重化部からの特徴点情報が付加された映像データ、または前記映像データ記録再生部によって前記記録媒体から再生された特徴点情報が付加された映像データを、前記デジタルインタフェース部によって当該外部装置に出力する制御部と、
を備える記録再生装置。
請求項１に記載の記録再生装置と、この記録再生装置に有線または無線によって接続される画像表示機器とからなる映像処理システムが行う映像処理方法として、
前記画像表示機器が前記記録再生装置に、前記記録媒体に記録されている映像データのリストを送信すべきことを要求する工程と、
その要求に応じて前記記録再生装置が前記画像表示機器に、前記記録媒体に記録されている映像データのリストを送信する工程と、
前記画像表示機器が、その送信されたリストをディスプレイ上に表示する工程と、
前記画像表示機器が前記記録再生装置に、その表示されたリスト中からユーザによって選択された映像データについての特徴点情報を送信すべきことを要求する工程と、
その要求に応じて前記記録再生装置が前記画像表示機器に、特徴点情報を送信する工程と、
前記画像表示機器が、その送信された特徴点情報によって、ユーザによって選択された映像データについての特徴点の画像を前記ディスプレイ上に表示する工程と、
前記画像表示機器が前記記録再生装置に、その特徴点の画像を表示した後にユーザによって確定された映像データを送信すべきことを要求する工程と、
その要求に応じて前記記録再生装置が前記画像表示機器に、その確定された映像データを送信する工程と、
を備える映像処理方法。