JP2004056582A - Reproducing device and method, and program - Google Patents

Reproducing device and method, and program Download PDF

Info

Publication number
JP2004056582A
JP2004056582A JP2002212708A JP2002212708A JP2004056582A JP 2004056582 A JP2004056582 A JP 2004056582A JP 2002212708 A JP2002212708 A JP 2002212708A JP 2002212708 A JP2002212708 A JP 2002212708A JP 2004056582 A JP2004056582 A JP 2004056582A
Authority
JP
Japan
Prior art keywords
video data
data
frame
image
frames
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002212708A
Other languages
Japanese (ja)
Other versions
JP4081810B2 (en
Inventor
Koji Kurosawa
黒沢 宏司
Minoru Kawahara
河原 実
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2002212708A priority Critical patent/JP4081810B2/en
Publication of JP2004056582A publication Critical patent/JP2004056582A/en
Application granted granted Critical
Publication of JP4081810B2 publication Critical patent/JP4081810B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To make a reproducing device capable of smoothening reproduced video of images recorded on nonlinear recording medium such as an optical disk and a magnetic disk in a high-speed reproduction mode. <P>SOLUTION: A stamp video decoder 44 decodes stamp video data supplied from a media controller 42 according to control of a system controller when a user selects high-speed reproduction, overlappedly stores (adds) in a memory 45 stamp video data of at least two frames or more among a plurality of reproducible frames at a reproduction rate in a frame unit and forms an image for high-speed reproduction configured by overlapping the stamp video data each other by a portion at a time in each frame time at a reproduction rate. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、再生装置および方法、並びにプログラムに関し、同一素材に関する高データレート及び低データレートのデータを記録している記録媒体から各データを再生する再生装置および方法、並びにプログラムに関する。
【0002】
【従来の技術】
光ディスクや磁気ディスクなどのノンリニア記録媒体に記録されている画像の高速再生は、通常、コマ落とし画像が表示されるようにして行われる。例えば、50倍速再生の場合、50フレーム毎に画像が更新される。
【0003】
【発明が解決しようとする課題】
ところで、このように高速再生用の画像としてコマ落とし画像が表示される場合、表示される画像以外の画像、例えば、50倍速再生の場合における、表示されるフレーム間の49フレームは欠落する。
【0004】
しかしながら、MPEG2(Moving Picture Experts Group−2)のように時間軸方向の相関を用いた方式で圧縮されている画像を復号する場合、前後のGOP(Group of Picture)の情報を必要とするときがあるので、高速再生時のコマ落としにより、その必要な情報が欠落してしまうと、画像が適切に更新されず、例えば、コマ落とし表示の間隔が一定でない不自然な映像となる。
【0005】
したがって、従来において、光ディスクや磁気ディスクなどのノンリニア記録媒体からビデオデータを高速再生する場合、従来のアナログVTRを高速再生したときに得られるような滑らかな再生映像を得ることができない課題があった。
【0006】
本発明はこのような状況に鑑みてなされたものであり、光ディスクや磁気ディスクなどのノンリニア記録媒体に記録された画像の高速再生時の再生映像を、滑らかなものとすることができるようにするものである。
【0007】
【課題を解決するための手段】
本発明の第1の再生装置は、高速再生が要求されたとき、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体から、低データレートのビデオデータを読み出す読み出し手段と、読み出し手段により読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの低データレートのビデオデータの一部づつを互いに重ね合わせて構成される高速再生用の画像を、出力レートにおける1フレーム時間毎に生成する生成手段と、生成手段により生成された高速再生用の画像を出力する出力手段とを備えることを特徴とする。
【0008】
生成手段は、N倍速再生が要求されたとき、Nフレーム毎のフレームを基準フレームとして、その基準フレームを中心とする前後の少なくとも2個以上のフレームの低データレートのビデオデータから、高速再生用の画像を生成することができる。
【0009】
本発明の第1の再生方法は、高速再生が要求されたとき、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体から、低データレートのビデオデータを読み出す読み出しステップと、読み出しステップの処理で読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの低データレートのビデオデータの一部づつを互いに重ね合わせて構成される高速再生用の画像を、出力レートにおける1フレーム時間毎に生成する生成ステップと、生成ステップの処理で生成された高速再生用の画像を出力する出力ステップとを含むことを特徴とする。
【0010】
本発明の第1のプログラムは、高速再生が要求されたときの、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体からの、低データレートのビデオデータの読み出しを制御する読み出し制御ステップと、読み出し制御ステップの処理で読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの低データレートのビデオデータの一部づつを互いに重ね合わせて構成される高速再生用の画像の、出力レートにおける1フレーム時間毎の生成を制御する生成制御ステップとを含む処理をコンピュータに実行させることを特徴とする。
【0011】
本発明の第1の再生装置および方法、並びにプログラムにおいては、高速再生が要求されたとき、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体から、低データレートのビデオデータが読み出され、読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの低データレートのビデオデータの一部づつを互いに重ね合わせて構成される高速再生用の画像が、出力レートにおける1フレーム時間毎に生成される。
【0012】
本発明の第2の再生装置は、高速再生が要求されたとき、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体から、低データレートのビデオデータを読み出す読み出し手段と、読み出し手段により読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの低データレートのビデオデータのそれぞれが1つのフレーム内の所定の表示位置に位置する高速再生用の画像を、出力レートにおける1フレーム時間毎に生成する生成手段と、生成手段により生成された高速再生用の画像を出力する出力手段とを備えることを特徴とする。
【0013】
生成手段は、N倍速再生が要求されたとき、Nフレーム毎のフレームを基準フレームとして、その基準フレームを中心とする少なくとも2個以上のフレームの低データレートのビデオデータから、高速再生用の画像を生成することができる。
【0014】
本発明の第2の再生方法は、高速再生が要求されたとき、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体から、低データレートのビデオデータを読み出す読み出しステップと、読み出しステップの処理で読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの低データレートのビデオデータのそれぞれが1つのフレーム内の所定の表示位置に位置する高速再生用の画像を、出力レートにおける1フレーム時間毎に生成する生成ステップと、生成ステップの処理で生成された高速再生用の画像を出力する出力ステップとを含むことを特徴とする。
【0015】
本発明の第2のプログラムは、高速再生が要求されたときの、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体からの、低データレートのビデオデータの読み出しを制御する読み出し制御ステップと、読み出し制御ステップの処理で読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの低データレートのビデオデータのそれぞれが1つのフレーム内の所定の表示位置に位置する高速再生用の画像の、出力レートにおける1フレーム時間毎の生成を制御する生成制御ステップとを含む処理をコンピュータに実行させることを特徴とする。
【0016】
本発明の第2の再生装置および方法、並びにプログラムにおいては、高速再生が要求されたとき、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体から、低データレートのビデオデータが読み出され、読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの低データレートのビデオデータのそれぞれが1つのフレーム内の所定の表示位置に位置する高速再生用の画像が、出力レートにおける1フレーム時間毎に生成される。
【0017】
【発明の実施の形態】
図1は、本発明の再生装置の利用例を示している。
【0018】
撮像装置1は、光学レンズ、その光学レンズを透過した被写体画像を取り込んで撮像信号を生成するCCDイメージセンサ、および生成された撮像信号にカメラ信号処理を施すカメラ信号処理回路等からなり、撮像の結果得られた複合画像信号や非圧縮のシリアルデジタルインターフェース(Serial Digital Interface;SDI、SMPTE259M)に基づいたD1フォーマットのビデオデータを記録装置2に供給する。
【0019】
記録装置2は、撮像装置1から供給されたビデオ信号を、高データレートでエンコードし、高データレートのビデオデータを生成する。記録装置2はまた、同一のビデオ信号を、低データレートでエンコードし、低データレートのビデオデータも生成する。すなわち、同一素材から、高データレートのビデオデータと低データレートのビデオデータが生成される。
【0020】
この例の場合、記録装置2は、高データレートのビデオデータとして、撮像装置1から供給されたビデオ信号に時間軸方向の相関を用いた圧縮を施し、放送に使用可能な最大約15MbpsのMPEG2ビデオデータ(高解像度のビデオデータ)を生成し、低データレートのビデオデータとして、ビデオ信号に、画素数変換処理やフレーム内完結の圧縮処理を施し(すなわち、時間軸方向の相関を用いた圧縮を行わずに)、約500kbpsのスタンプビデオデータ(低解像度のビデオデータ)を生成する。スタンプビデオデータは、MPEG2ビデオデータの全フレームに対応して生成される。
【0021】
記録装置2は、生成した高データレートのビデオデータ(MPEG2ビデオデータ)と低データレートのビデオデータ(スタンプビデオデータ)を、例えば、光ディスク3の別領域に記録する。
【0022】
再生装置4は、通常再生時において、光ディスク3から読み出した高データレートのビデオデータ(MPEG2ビデオデータ)を再生して、表示装置5に表示させる。
【0023】
再生装置4はまた、高速再生時において、詳細は後述するが、光ディスク3から読み出した再生レート内で再生可能な複数フレームのうちの少なくとも2個以上のフレームの低データレートのビデオデータ(スタンプビデオデータ)の一部づつを互いに重ね合わせて構成される高速再生用の画像を、再生レートにおける1フレーム時間毎に生成する。再生装置4は、生成した高速再生用の画像を、表示装置5に供給して表示させる。
【0024】
例えば、5倍速再生の場合、5フレーム分のスタンプビデオデータが、レベルが1/5にされてフレーム単位で加算され、その5フレームに対応する画像が重ね合わされて表示される高速再生用の画像(1フレーム)が生成される。すなわち、5個のフレームに対応する画像が重ね合わされた画像が更新されて表示されるものが、再生映像となる。
【0025】
高速再生に利用される低データレートのスタンプビデオデータは、記録装置2により、フレーム内完結の圧縮処理が施され、MPEG2ビデオデータのように時間軸方向の相関を用いずにエンコードされているので、その高速再生時の再生映像は、MPEG2ビデオデータを用いて高速再生した場合のように不自然なものとはならず、滑らかなものになる。また、所定数のフレームを構成するスタンプビデオデータに対応する画像が重ね合わされた画像が表示されるので、ユーザは、その画像(通常再生時のものとは異なる画像)から、高速再生がなされていることを認識することができる。
【0026】
図2は、記録装置2の構成例を示している。記録装置2には、撮像装置1から供給される複合画像信号、またはD1フォーマットのビデオデータが供給される。
【0027】
複合画像信号は、記録装置2の入力端子11を介してY/C分離回路12に入力され、そこで輝度信号Yとクロマ信号Cに分離され、コンポーネントデコーダ13に供給される。そして、そこで4:2:2のベースバンドコンポーネントデータY,Cb,Crに変換される。変換されたベースバンドコンポーネントデータY,Cb,Crは、タイムベースコレクタ17に供給される。
【0028】
D1フォーマットのビデオデータは、入力端子14を介してシリアル/パラレル(S/P)変換回路15に入力され、そこでパラレルデータに変換され、D1デコーダ16に供給される。そして、そこで誤り訂正等の処理が施されてデコードされ、4:2:2のベースバンドコンポーネントビデオデータY,Cb,Crに変換される。変換された4:2:2のベースバンドコンポーネントビデオデータY,Cb,Crは、タイムベースコレクタ17に供給される。
【0029】
タイムベースコレクタ17は、内蔵するバッファを用いて、コンポーネントデコーダ13またはD1デコーダ16から供給されたベースバンドコンポーネントビデオデータY,Cb,Crの時間軸を調整する。
【0030】
タイムベースコレクタ17は、時間軸が調整したベースバンドコンポーネントビデオデータを、MPEG2エンコーダ18、およびスタンプビデオエンコーダ19のそれぞれに供給する。
【0031】
MPEG2エンコーダ18は、タイムベースコレクタ17から供給されたベースバンドコンポーネントビデオデータに対して、動き補償予測、DCT、量子化、可変長符号化といった、時間軸方向の相関を用いた圧縮処理を施し、放送に使用可能な高解像度のMPEG2ビデオデータを生成する。例えば、MPEG2MP@ML(Main Profile/Main Level)のプロファイルのビデオデータが生成される。
【0032】
このMPEG2ビデオデータは、最大で15Mbpsという高データレートでメディアコントローラ20に供給される。
【0033】
スタンプビデオエンコーダ19は、タイムベースコレクタ17から供給されたベースバンドコンポーネントビデオデータ、つまりMPEG2エンコーダ18に入力された同じソース(同一素材)からのコンポーネントビデオデータに対して、時間軸方向の相関を用いずに、画素数変換処理や、フレーム内完結の圧縮処理を施してデータ量を落とし、MPEG2ビデオデータよりも低データレートのスタンプビデオデータを生成する。このスタンプビデオデータは、MPEG2ビデオデータよりも低解像度のビデオデータであり、約500kbpsという低データレートでメディアコントローラ20に供給される。
【0034】
メディアコントローラ20は、MPEG2エンコーダ18から供給されたMPEG2ビデオデータと、スタンプビデオエンコーダ19から供給されたスタンプビデオデータとに、誤り検出符号を付加したり、所定の書き込み処理を施して、それらのデータを、光ディスク3への記録に適したデータに変換し、記録用ドライバ21に供給する。
【0035】
記録用ドライバ21は、図3に示すように、MPEG2ビデオデータを、光ディスク3の最外周の高品質記録エリアARHに記録するとともに、スタンプビデオデータを、その高品質記録エリアARHの内周側の低品質記録エリアARLに記録する。光ディスク3の最内周側の管理エリアARMには、ディスク管理情報やシステム情報が格納される。
【0036】
なお、記録用ドライバ21は、半導体レーザから出射されたレーザ光を各種レンズやビームスプリッタ等の光学部品や対物レンズを介して光ディスク3に照射してデータを記録する光学ヘッド、その光学ヘッドを光ディスク3の半径方向に移動するスレッド機構、対物レンズのフォーカスやトラッキングを制御するサーボ系、レーザ光を記録用の各データに応じて変調する記録データ変調系、記録用のレーザ光をモニタする系、並びに光ディスク3を回転駆動する駆動系などからなる。
【0037】
システムコントローラ22は、ユーザインタフェース(I/F)23からのユーザコマンドに応じてメディアコントローラ20を制御し、MPEG2ビデオデータ、スタンプビデオデータ、ディスク管理情報やシステム情報の光ディスク3への記録動作を制御する。
【0038】
次に、記録装置2のMPEG2エンコーダ18およびスタンプビデオエンコーダ19を詳細に説明する。
【0039】
MPEG2エンコーダ18は、時間軸方向の相関を用い、動き補償予測による時間方向の冗長度の除去を行って、4:2:2のベースバンドコンポーネントビデオデータY,Cb,Crを圧縮する。フレーム内だけで符号化されるフレーム内符号化画像のIピクチャ、過去の画面から現在を予測することによって符号化されるフレーム間順方向予測符号化画像のPピクチャ、過去および未来の両方向の画像から現在を予測することによって符号化される双方向予測符号化画像のBピクチャを用いてビデオ情報を圧縮符号化している。Iピクチャを1つ含むピクチャのまとまりがGOPである。
【0040】
図4は、GOP内のピクチャ枚数N=15、I又はPが現れる周期M=3のGOP構造を示している。この例では時間軸に沿って、IBBPBBPBBPBBPBBが割り当てられる。
【0041】
スタンプビデオエンコーダ19は、図5に示すように、帯域制限ローパスフィルタ(LPF)31、画素間引き処理部32、およびフレーム内圧縮部33から構成されている。
【0042】
帯域制限ローパスフィルタ31は、タイムベースコレクタ17から供給される4:2:2ベースバンドコンポーネントビデオデータの高域成分を除去して、画素間引き処理部32に供給する。画素間引き処理部32は、H方向およびV方向の画素をそれぞれ、例えば1/6に間引きし、フレーム内圧縮部33に供給する。
【0043】
フレーム内圧縮部33は、フレーム内で完結できる圧縮アルゴリズムを用い、画素間引き処理部32からの画素間引きされたコンポーネントビデオデータをさらに圧縮する。
【0044】
なお、フレーム内で完結できる圧縮アルゴリズムとして、例えば、フルフレーム、1/10JPEG圧縮が用いられる。すなわち例えば、H(120)×V(80/96)、フレームレート=Full,4:2:2、8bit、1/10JPEG圧縮データのようなスタンプビデオデータ(約500kbps)が生成される。
【0045】
また、デジタルビデオデータのデータ量を約1/5にまで圧縮するためのもので、家庭用デジタルビデオ装置や業務用のデジタルビデオ装置の一部に用いられているDV規格に準拠した圧縮アルゴリズムを用いることもできる。このDV規格によれば、離散コサイン変換(DCT)と可変長符号化(VLC)を組み合わせることにより、ビデオデータの効率的な圧縮を実現することができる。
【0046】
図6は、再生装置4の構成例を示している。
【0047】
再生用ドライバ41は、メディアコントローラ42からの指示に従い、光ディスク3の管理エリアARM(図3)を参照して、MPEG2ビデオデータを高品質記録エリアARHから読み出し、またはスタンプビデオデータを低品質記録エリアARLから読み出し、メディアコントローラ42に供給する。
【0048】
メディアコントローラ42は、ユーザが通常再生を選択したときのシステムコントローラ53の制御に従って、再生用ドライバ41を介して光ディスク3からMPEG2ビデオデータを読み出すとともに、それに誤り検出符号を用いた誤り訂正処理を施して、MPEG2デコーダ43に供給する。
【0049】
メディアコントローラ42はまた、ユーザが高速再生を選択したときのシステムコントローラ53の制御に従って、再生用ドライバ41を介して光ディスク3からスタンプビデオデータを読み出すとともに、それに誤り検出符号を用いた誤り訂正処理を施して、スタンプビデオデコーダ44に供給する。
【0050】
MPEG2デコーダ43は、メディアコントローラ42から供給されたMPEG2ビデオデータ(最大15Mbpsで供給されるMPEG2フォーマットでエンコードされたデータ)をデコードし、その結果得られた4:2:2で高解像度のビデオデコード出力を再生切換コントローラ46に供給する。
【0051】
スタンプビデオデコーダ44は、ユーザが高速再生を選択したときのシステムコントローラ53の制御に従って、メディアコントローラ42から供給されたスタンプビデオデータをデコードするとともに、再生レート内で再生可能な複数フレームのうちの少なくとも2個以上のフレームのデコードされたスタンプビデオデータ(例えば、レベルが1/5にされた5フレーム分のスタンプビデオデータ)を、フレーム単位で、メモリ45に重ねて記憶し(加算し)、そのスタンプビデオデータに対応する画像が重ね合わされて表示される高速再生用の画像を生成する。スタンプビデオデコーダ44は、生成した高速再生用の画像を、画素補間等を行った後、再生切替コントローラ46に供給する。
【0052】
メモリ45は、図7に示すように、2つのバンク71Aおよびバンク71B(以下、個々に区別する必要がない場合、単に、バンク71と称する。他の場合についても同様である)を有している。
【0053】
再生切替コントローラ46は、ユーザが通常再生を選択したときのシステムコントローラ53の制御により通常再生モードに設定され、このときMPEG2デコーダ43から供給されるデコードされたMPEG2ビデオデータを、ビデオプロセスコントローラ47に供給する。
【0054】
再生切替コントローラ46はまた、ユーザが高速再生を選択したときのシステムコントローラ53の制御により高速再生モードに設定され、このときスタンプビデオデコーダ44から供給されるデコードされたスタンプビデオデータを、ビデオプロセスコントローラ47に供給する。
【0055】
ビデオプロセスコントローラ47は、再生切替コントローラ46から供給されたMPEG2ビデオデータまたはスタンプビデオデータに、ノイズ低減処理や、画質補正処理等の所定の映像処理を施して、コンポジットエンコーダ48またはD1エンコーダ50に供給する。
【0056】
コンポジットエンコーダ48は、ビデオプロセスコントローラ47からのデータをコンポジットデータにエンコードし、出力端子49を介して表示装置5に出力する。
【0057】
D1エンコーダ50は、ビデオプロセスコントローラ47からのデータにD1フォーマットに従ったエンコード処理を施し、パラレル/シリアル(P/S)変換回路51に供給する。パラレル/シリアル変換回路51は、SDIフォーマットに従ったシリアルデジタルビデオデータを生成し、出力端子52を介して表示装置5に出力する。
【0058】
システムコントローラ53は、ユーザインタフェース54からのユーザコマンドに応じてメディアコントローラ42、スタンプビデオデコーダ44、および再生切替コントローラ46を制御して、通常再生や後述する高速再生を実行させる。
【0059】
次に、再生装置4のMPEG2デコーダ43、スタンプビデオデコーダ44、および再生切換コントローラ46を詳細に説明する。
【0060】
MPEG2デコーダ43は、可変長復号部、逆量子化部、加算器、逆離散コサイン部、フレームメモリ部、動き補償部、および離散コサイン変換部(いずれも図示せず)とからなる、例えば、MPEG2MP@ML(Main Profile /Main Level)デコーダである。
【0061】
なお、記録装置1で用いられているMPEG2エンコーダ18に対応してMPEG2デコーダ43を設けたが、記録装置1にて他の形態の高解像度ビデオデータ生成装置(エンコーダ)を用いているのであれば、それにした対応したデコーダを用いることができる。
【0062】
スタンプビデオデコーダ44は、図7に示すように、伸張部61、メモリコントローラ/演算処理部62、および画素補間部63からなる。
【0063】
伸張部61は、メディアコントローラ42から、約500Kbpsで供給される4:2:2のスタンプビデオデータを、4:2:2のベースバンドコンポーネントビデオデータY,Cb,Crにデコードし、メモリコントローラ/演算処理部62に供給する。
【0064】
メモリコントローラ/演算処理部62は、再生レート内で再生可能な複数フレームのうちの少なくとも2個以上のフレームのデコードされたスタンプビデオデータ(例えば、レベルが1/5にされた5フレーム分のスタンプビデオデータ)を、フレーム単位で、メモリ45のバンク71に記憶して(加算して)、高速再生用の画像を生成する。メモリコントローラ/演算処理部62は、生成した高速再生用の画像を、所定のタイミングで画素補間部63に供給する。
【0065】
画素補間部63は、記録装置2のスタンプビデオエンコーダ19(画素間引き部32)の間引き処理に対応して、メモリコントローラ/演算処理部62から供給された高速再生用の画像のH方向およびV方向の画素をそれぞれ6倍し、再生切替コントローラ46に供給する。
【0066】
次に、高速再生を行う場合の再生装置4の動作を、図8のフローチャートを参照して説明する。なお、ここでは5倍速再生を行うものとする。
【0067】
ユーザによって5倍速再生がユーザインタフェース54を介して選択されると、ステップS1において、システムコントローラ53は、再生切替コントローラ46を高速再生モードに設定するとともに、後述するようなパラメータP,N,R,F,Jに所定の値を初期設定する。
【0068】
パラメータPには、高速再生が要求される直前に、通常再生や停止処理により出力されていたフレームのフレーム番号(表示の順番を表す番号)が初期設定される。この例の場合、フレーム番号が3番のフレームが、高速再生が要求される直前に出力されており、パラメータPには、3が初期設定されるものとする。なお、パラメータPで示されるフレームは、高速再生用の画像を構成するスタンプビデオデータを決定する際の基準となるので、適宜、基準フレームと称する。
【0069】
パラメータNには、再生レートにおける1フレーム時間に再生させるべきフレーム数(高速再生の再生速度(何倍速か))を示す情報が設定される。この例の場合のように5倍速が要求されたとき、パラメータNには、5が初期設定される。
【0070】
パラメータRは、高速再生用の画像(正確には、高速再生用の画像の1フレーム)を生成するためのデータとして最初に読み出されるスタンプビデオデータを検出するときに用いられるパラメータであり、それには、最初に読み出されるスタンプビデオデータが、パラメータPで示されるフレーム番号の基準フレームに対して何個前のフレームのものかを表す情報が設定される。この例の場合、2が初期設定され、基準フレームに対して2個前のフレームを構成するスタンプビデオデータが、高速再生用の画像を生成するためのデータとして最初に読み出される。
【0071】
パラメータFは、高速再生用の画像(1フレーム)を生成するためのデータとして最後に読み出されるスタンプビデオデータを検出するときに用いられるパラメータであり、それには、最後に読み出されるスタンプビデオデータが、基準フレームに対して何個後のフレームのものかを示す情報が設定される。この例の場合、2が初期設定され、基準フレームに対して2個後のフレームを構成するスタンプビデオデータが、高速再生用の画像を生成するためのデータとして最後に読み出される。
【0072】
パラメータJには、高速再生用の画像を生成するためのデータとして読み出されるスタンプビデオデータのフレーム間隔を示す情報が設定される。この例の場合、1が初期設定され、高速再生用の画像として最初に読み出されるスタンプビデオデータから、最後に読み出されるスタンプビデオデータまでのスタンプビデオデータより構成されるフレームが1つずつ読み出される。
【0073】
次に、ステップS2において、システムコントローラ53は、高速再生用の画像(1フレーム)を構成するスタンプビデオデータのフレーム(加算されるスタンプビデオデータのフレーム)の数Dを、下記の式に従って算出する。
D=int(N/J)
【0074】
この例の場合、N=5,J=1であるので、D=5(=int(5/1))となる。
【0075】
システムコントローラ53はまた、メモリ45の書き込みバンクをバンク71Aまたは71Bのいずれかに設定する。
【0076】
いまの場合、書き込みバンクはバンク71Aに設定される。
【0077】
ステップS3において、システムコントローラ53は、高速再生用の画像(1フレーム)を生成するためのデータとして最初に読み出されるスタンプビデオデータのフレームを決定する。具体的には、下記の式に従って算出されたパラメータTで示されるフレーム番号のフレームとされる。
T=P−R
【0078】
いまの場合、P=3,R=2であるので、高速再生用の画像を生成するためのデータとして最初に読み出されるスタンプビデオデータのフレームは、フレーム番号が1番のフレーム(3番の基準フレームの2個前のフレーム)とされる。なお、基準フレームが、1番または2番のフレームの場合、T=−1(=1−2),0(=2−2)となるが、このときも1番のフレームが最初に読み出されるフレームとなるものとする。
【0079】
次に、ステップS4において、システムコントローラ53は、メディアコントローラ42およびスタンプビデオデコーダ44に、スタンプビデオデータのメモリ45への書き込みを指令する。
【0080】
その指令により、メディアコントローラ42は、ステップS3で決定されたフレーム(フレーム番号がT番のフレーム)を構成するスタンプビデオデータを、再生用ドライバ41を介して光ディスク3から読み出すとともに、それに誤り符号を用いた誤り訂正処理を施して、スタンプビデオデコーダ44に供給する。
【0081】
スタンプビデオデコーダ44の伸張部61は、メディアコントローラ42から供給されたスタンプビデオデータをデコードし、メモリコントローラ/演算処理部62に供給する。メモリコントローラ/演算処理部62は、伸張部61からのデコードされたスタンプビデオデータのレベルを、1/D(D=int(N/J))にして、メモリ45のステップS2で書き込みバンクに決定されたバンク71に書き込む。
【0082】
いまの場合、1番のフレームを構成するスタンプビデオデータがデコードされ、そのレベルが1/5にされるとともに、メモリ45のバンク71Aに書き込まれる。
【0083】
ステップS5において、システムコントローラ53は、ステップS4の処理で、スタンプビデオデータのメモリ45への書き込みが完了するまで待機し、書き込みが完了したとき、ステップS6に進む。
【0084】
ステップS6において、システムコントローラ53は、次に読み出すスタンプビデオデータのフレームを決定する。具体的には、下記の式に従ってパラメータTを更新し、そのパラメータTで示されるフレーム番号のフレームが次の読み出しフレームとされる。
T=T+J
【0085】
いまの場合、2(=1+1)番のフレームが次の読み出しフレームとなる。
【0086】
次に、ステップS7において、システムコントローラ53は、ステップS4の場合と同様に、メディアコントローラ42およびスタンプビデオデコーダ44に対し、スタンプビデオデータのメモリ45への書き込みを指令する。
【0087】
その結果いまの場合、2番のフレームを構成するスタンプビデオデータがデコードされ、そのレベルが1/5にされるとともに、メモリ45のバンク71Aに、先に記憶された1番のフレームを構成するスタンプビデオデータに加算されて記憶される。すなわちここで、1番のフレームに対応する画像と2番のフレームに対応する画像が重ね合わされた画像が生成される。
【0088】
ステップS8において、システムコントローラ53は、ステップS7での処理で、スタンプビデオデータのメモリ45への書き込みが完了するまで待機し、書き込みが完了したとき、ステップS9に進む。
【0089】
ステップS9において、システムコントローラ53は、高速再生用の画像(1フレーム)を生成するためのデータとして最後に読み出されるスタンプビデオデータがメモリ45に書き込まれたか否かを判定する。具体的には、下記の式が成り立つか否かが判定される。
T>=P+F
【0090】
ステップS9で、スタンプビデオデータがまだメモリ45に書き込まれていないと判定されたとき、ステップS6に戻り、次に読み出されるフレームが決定される。
【0091】
いまの場合、2(=T)<3(=P)+2(=F)であるので、上記式が成り立たず、ステップS6に戻り、3(=2+1)番のフレームが次の読み出しフレームとされる。
【0092】
すなわち、ステップS9で、高速再生用の画像を生成するためのデータとして最後に読み出されるスタンプビデオデータがメモリ45に書き込まれるまで(T>=P+Fが成り立つまで)、ステップS6乃至ステップS9の処理が繰り返し実行される。その結果、いまの場合、レベルがそれぞれ1/5にされた、1番のフレーム乃至5番のフレームを構成するスタンプビデオデータが、メモリ45のバンク71Aに加算されて記憶され、1番のフレーム乃至5番のフレームに対応する画像が重ね合わされた画像(高速再生用の画像の1フレーム)が生成される。
【0093】
ステップS9で、スタンプビデオデータがメモリ45に書き込まれたと判定されたとき、処理はステップS10に進む。
【0094】
いまの場合、5番のフレームを構成するスタンプビデオデータがメモリ45のバンク71Aに書き込まれたと判定されたとき(5=3+2)、ステップS10に進む。
【0095】
ステップS10において、システムコントローラ53は、メモリ45の読み出しバンクを書き込みバンクと同じに設定する。
【0096】
いまの場合、バンク71Aが、読み出しバンクとされる。
【0097】
次に、ステップS11において、システムコントローラ53は、スタンプビデオデコーダ44に、高速再生用の画像の出力を指令する。その指令により、スタンプビデオデコーダ44のメモリコントローラ/演算処理部62は、ステップS10で読み出しバンクとして設定されたメモリ45のバンク71から、そこに記憶されている画像(高速再生用の画像(1フレーム))を読み出し、画素補間部63に供給する。画素補間部63は、メモリコントローラ/演算処理部62から供給された画像のH方向およびV方向の画素をそれぞれ6倍し、再生切替コントローラ46に供給する。
【0098】
再生切替コントローラ46はこのとき、ステップS1で高速再生モードに設定されているので、スタンプビデオデコーダ44から供給されたスタンプビデオデータを、ビデオプロセスコントローラ47に供給する。
【0099】
いまの場合、メモリ45のバンク71Aから、そこに記憶されているビデオデータ(高速再生用の画像の1フレームとしての、レベルがそれぞれ1/5とされた1番のフレーム乃至5番のフレームを構成するスタンプビデオデータが加算されたビデオデータ)が読み出され、そのH方向およびV方向の画素がそれぞれ6倍されて、再生切替コントローラ46に供給される。再生切替コントローラ46に供給されたビデオデータは、ビデオプロセスコントローラ47に供給される。
【0100】
なお、ビデオプロセスコントローラ47に供給されたビデオデータは、上述したように、そこで、ノイズ低減処理や、画質補正処理等の所定の画像処理が施された後、コンポジットエンコーダ48、またはD1エンコーダ50およびパラレル/シリアル変換回路51を介して、表示装置5に出力され、高速再生用の画像として表示される。すなわちいまの場合、1番のフレーム乃至5番のフレームに対応する画像がそれぞれ重ね合わされた画像が、高速再生用の画像として表示される。
【0101】
スタンプビデオデコーダ44乃至P/S変換回路51における高速再生用の画像の出力処理は、再生信号に同期して行われる。
【0102】
次に、ステップS12において、システムコントローラ53は、ユーザインタフェース54から、高速再生を終了するユーザコマンドが入力されたか否かを判定し、そのコマンドが入力されていないと判定した場合、ステップS13に進み、パラメータPを下記の式に従って更新する。すなわち、Nフレーム毎のフレームが基準フレームとされる。
P=P+N
【0103】
システムコントローラ53はまた、メモリ45の書き込みバンクを下記の式に従って変更する。すなわち、いま書き込みバンクとされていないバンク71が書き込みバンクとされる。
バンク71=not(バンク71)
【0104】
いまの場合、パラメータPは、8(=3+5)となり、書き込みバンクは、バンク71Bとなる。
【0105】
その後、処理は、ステップS3に戻り、それ以降の処理が行われる。すなわち、その結果、今度は、レベルがそれぞれ1/5にされた、6番のフレーム乃至10番のフレームを構成するスタンプビデオデータが加算されて高速再生用の画像のビデオデータが生成され、いま表示されている1番のフレーム乃至5番のフレームに対応する画像が重ね合わされた画像に代えて、6番のフレーム乃至10番のフレームに対応する画像が重ね合わされた画像が、表示装置5に表示される。
【0106】
ステップS12で、ユーザインタフェース54から、高速再生を終了するユーザコマンドが入力されたと判定されたとき、システムコントローラ53は、高速再生処理を終了する。なお、このとき、例えば、基準フレーム以降のMPEG2ビデオデータの通常再生が開始される。
【0107】
以上のようにして高速再生処理が行われる。
【0108】
なお、以上においては、5倍速で高速再生する場合を例として説明したが、2倍速、3倍速、または7倍速などで高速再生する場合においても、パラメータN,R,F,Jを以下のように設定することで、5倍速の場合と基本的には同様の高速再生用の画像を表示させることができる。
2倍速再生の場合は、N=2、R=0、F=1、J=1となり
3倍速再生の場合は、N=3、R=1、F=1、J=1となり、
7倍速再生の場合は、N=7、R=3、F=3、J=1となる。
【0109】
すなわち、2倍速再生の場合、レベルが1/2(2=int(2/1))とされた2個のフレームのスタンプビデオデータが、3倍速再生の場合、レベルが1/3とされた3個のフレームのスタンプビデオデータが、そして7倍速再生の場合、レベルが1/7とされた7個のフレームのスタンプビデオデータがそれぞれ加算されて高速再生用の画像(1フレーム)が、再生レートにおける1フレーム時間毎に生成される。
【0110】
また、再生レート内で再生可能なスタンプビデオデータのフレーム数を越える倍速であっても、同様にして高速再生用の画像を表示させることができる。
【0111】
例えば、再生レート内で7フレーム分のスタンプビデオデータを再生することができる場合において14倍速再生が要求されたとき、パラメータN,R,F,Jは、以下のように設定される。
N=14,R=6,F=6,J=2
【0112】
例えば、パラメータP=7とされたとき、このときの高速再生用の画像は、それぞれレベルが1/7(7=int(14/2))とされた、1(=7−6)番のフレーム、3(=1+2)番のフレーム、5番のフレーム、7番のフレーム、9番のフレーム、11番のフレーム、および13番のフレームを構成するスタンプビデオデータが加算された画像、そして15番のフレーム、17番のフレーム、19番のフレーム、21番のフレーム、23番のフレーム、25番のフレーム、および27番のフレームを構成するスタンプビデオデータが加算された画像等が、高速再生用の画像として表示される。
【0113】
また、以上においては、再生速度Nと加算フレーム数Dが同じであったが、再生速度Nと加算フレーム数Dを、異なる値にすることもできる。なお、この場合、加算フレーム数Dは、パラメータR,F,Jの合計の値となる。
【0114】
例えば、5倍速再生の場合であって、パラメータを、N=5,R=2,F=4,J=1に設定すると、レベルがそれぞれ1/7(7=int((2+4+1)/1)))にされた、7個の1番のフレーム乃至7番のフレームを構成する7個のスタンプビデオデータが加算された画像、レベルがそれぞれ1/7にされた、6番のフレーム乃至12番のフレームが加算された画像等が、高速再生用の画像として表示される。
【0115】
このようにすれば、高速再生時により進んだ画像を早いタイミングで表示させることができるので、ユーザが高速再生から通常再生または停止モードに切り換えるタイミングの遅れを防止することができる。
【0116】
また、以上においては、スタンプビデオデータのレベルを均等に加算して高速再生用の画像を生成したが、加算に際し重み付けをすることも可能である。例えば、5倍速再生の場合において、加算される5個のフレームのうち、最初に書き込まれるフレームのレベルを1/10にし、次に書き込まれるフレームのレベルを2/10にし、次に書き込まれるフレームのレベルを4/10にし、次に書き込まれるフレームのレベルを2/10にし、そして最後に書き込まれるフレームを1/10とすることができる。
【0117】
図9は、本発明の他の再生装置の利用例を示している。
【0118】
再生装置101は、図1の再生装置4と同様に、通常再生時において、光ディスク3から読み出した高データレートのビデオデータ(MPEG2ビデオデータ)を再生して、表示装置5を介して表示する。
【0119】
一方、高速再生時において再生装置101は、詳細は後述するが、光ディスク3から読み出した再生レート内で再生可能な複数フレームのうちの少なくとも2個以上のフレームの低データレートのビデオデータ(スタンプビデオデータ)のそれぞれが1つのフレーム内の所定の表示位置に位置する高速再生用の画像を、再生レートにおける1フレーム時間毎に生成する。再生装置101は、生成した高速再生用の画像を、表示装置5に供給して表示させる。
【0120】
図10および図11は、ここで生成される5倍速再生時の高速再生用の画像の表示例を示している。例えば、図10に示すようにフレームA乃至フレームEを構成するスタンプビデオデータに対応する画像が並んで表示される(表示装置5の画面の領域DR1乃至DR5に表示される)画像が高速再生用の画像として表示され、次にフレームF乃至フレームJを構成するスタンプビデオデータに対応する画像が並んで表示される画像が高速再生用の画像として表示される。すなわち、5個のフレームに対応する画像が並ぶ画像が更新されて表示されるものが、再生映像となる。
【0121】
この例の場合も、高速再生に利用される低データレートのスタンプビデオデータは、記録装置2により、時間軸方向の相関を用いずにエンコードされているので、高速再生の再生映像は、MPEG2ビデオデータを用いて高速再生する場合のように不自然なものとならず、滑らかなものになる。また、所定数のフレームを構成するスタンプビデオデータに対応する画像が並んだものが高速再生用の画像として表示されるので、ユーザは、その画像(通常再生と異なる画像)から高速再生がなされていることを認識することができる。
【0122】
図12は、再生装置101の構成例を示している。すなわち、この再生装置には、図6のスタンプビデオデコーダ44、メモリ45、およびシステムコントローラ53に代えて、スタンプビデオデコーダ111、メモリ112、およびシステムコントローラ113が設けられている。
【0123】
スタンプビデオデコーダ111は、ユーザが高速再生を選択したときのシステムコントローラ113の制御に従って、メディアコントローラ42から供給されたスタンプビデオデータをデコードするとともに、再生レート内で再生可能なデコードされたスタンプビデオデータを、フレーム単位で、メモリ112の所定メモリ領域MRに記憶して、そのスタンプビデオデータに対応する画像が並んで表示される高速再生用の画像を生成する。スタンプビデオデコーダ111は、生成した高速再生用の画像を、再生切替コントローラ46に供給する。
【0124】
メモリ112は、図13に示すように、2つのバンク131Aおよびバンク131Bを有している。バンク131Aおよびバンク131Bのそれぞれには、表示装置5の画面の表示領域DRに対応したメモリ領域MRが設けられている。
【0125】
例えば、メモリ112のバンク131には、図10および図11に示す表示領域DR1乃至DR5のそれぞれに対応したメモリ領域MR1乃至MR5(図示せず)が設けられている。
【0126】
システムコントローラ113は、ユーザインタフェース54からのユーザコマンドに応じてメディアコントローラ42、スタンプビデオデコーダ111、および再生切替コントローラ46を制御して、通常再生や後述するような高速再生を実行させる。
【0127】
図13は、スタンプビデオデコーダ111の構成例を示している。
【0128】
伸張部121は、メディアコントローラ42から約500Kbpsで供給される4:2:2のスタンプビデオデータを、4:2:2のベースバンドコンポーネントビデオデータY,Cb,Crにデコードし、メモリコントローラ122に供給する。
【0129】
メモリコントローラ122は、再生レート内で再生可能なデコードされたスタンプビデオデータを、フレーム単位で、メモリ112のバンク131の所定のメモリ領域MRに記憶して、高速再生用の画像を生成する。メモリコントローラ122は、所定のタイミングで、生成した高速再生用の画像を再生切替コントローラ46に供給する。
【0130】
次に、高速再生を行う場合の再生装置101の動作を、図14のフローチャートを参照して説明する。なお、ここでも5倍速再生を行う場合を例として説明する。
【0131】
ユーザによって5倍速再生がユーザインタフェース54を介して選択されると、ステップS21において、システムコントローラ113は、再生切替コントローラ46を高速再生モードに設定するとともに、図1の例の場合と同様の意味を有するパラメータP,N,R,F,Jに所定の値を初期設定する。
【0132】
パラメータPには、高速再生が要求される直前に、通常再生や停止処理により出力されていたフレームのフレーム番号が設定される。この例の場合、フレーム番号が3番のフレームが、高速再生が要求される直前に出力されており、パラメータPには、3が初期設定されるものとする。
【0133】
パラメータNには、この例の場合も5倍速が要求されているので、5が初期設定される。
【0134】
パラメータRには、この例の場合も、2が初期設定され、パラメータPで示されるフレーム番号の基準フレームに対して2個前のフレームを構成するスタンプビデオデータが、高速再生用の画像(1フレーム)を生成するためのデータとして最初に読み出される。
【0135】
パラメータFには、この例の場合も、2が初期設定され、基準フレームに対して2個後のフレームを構成するスタンプビデオデータが、高速再生用の画像(1フレーム)を生成するためのデータとして最後に読み出される。
【0136】
パラメータJには、この例の場合も、1が設定され、高速再生用の画像として最初に読み出されるスタンプビデオデータから、最後に読み出されるスタンプビデオデータまでのスタンプビデオデータより構成されるフレームが1つずつ読み出される。
【0137】
次に、ステップS22において、システムコントローラ113は、メモリ112への書き込みバンクをバンク131Aまたはバンク131Bのいずれかに設定する。
【0138】
いまの場合、書き込みバンクはバンク131Aに設定される。
【0139】
ステップS23において、システムコントローラ113は、メモリ112のバンク131Aおよびバンク131Bをクリアにする旨を、スタンプビデオデコーダ111に指令する。その指令によりスタンプビデオデコーダ111(メモリコントローラ122)は、メモリ112のバンク131Aおよびバンク131Bをクリアにする。
【0140】
次に、ステップS24において、システムコントローラ113は、ステップS23の処理でメモリ112のバンク131がクリアにされるまで待機し、クリアにされたとき、ステップS25に進む。
【0141】
ステップS25において、システムコントローラ113は、高速再生用の画像(1フレーム)を生成するためのデータとして最初に読み出されるスタンプビデオデータのフレームを決定する。具体的には、下記の式に従って算出されたパラメータTで示されるフレーム番号のフレームとされる。
T=P−R
【0142】
いまの場合、P=3,R=2であるので、高速再生用の画像を生成するためのデータとして最初に読み出されるスタンプビデオデータのフレームは、フレーム番号が1番のフレームとされる。
【0143】
システムコントローラ113はまた、パラメータMRに1を設定し、データが書き込まれるメモリ112の書き込みバンクとされたバンク131のメモリ領域を、メモリ領域MR1とする。
【0144】
いまの場合、メモリ112のバンク131Aのメモリ領域がメモリ領域MR1とされる。
【0145】
次に、ステップS26において、システムコントローラ113は、メディアコントローラ42およびスタンプビデオデコーダ111に、スタンプビデオデータのメモリ112への書き込みを指令する。
【0146】
その指令により、メディアコントローラ42は、ステップS25で決定されたフレーム(フレーム番号がT番のフレーム)を構成するスタンプビデオデータを、再生用ドライバ41を介して光ディスク3から読み取るとともに、それに誤り符号を用いた誤り訂正処理を施して、スタンプビデオデコーダ111に供給する。
【0147】
スタンプビデオデコーダ111の伸張部121は、メディアコントローラ42から供給されたスタンプビデオデータをデコードし、メモリコントローラ122に供給する。メモリコントローラ122は、伸張部121からのデコードされたビデオデータを、メモリ112のステップS22で書き込みバンクとされたバンク131のステップS25で設定されたメモリ領域MR1に書き込む。
【0148】
いまの場合、1番のフレームを構成するスタンプビデオデータがデコードされ、メモリ112のバンク131Aのメモリ領域MR1に書き込まれる。
【0149】
ステップS27において、システムコントローラ113は、ステップS26での処理でスタンプビデオデータのメモリ112への書き込みが完了するまで待機し、書き込みが完了したとき、ステップS28に進む。
【0150】
ステップS28において、システムコントローラ113は、次に読み出すスタンプビデオデータのフレームを決定する。具体的には、下記の式に従ってパラメータTを更新し、そのパラメータTで示されるフレーム番号のフレームが次の読み出しフレームとされる。
T=T+J
【0151】
システムコントローラ113はまた、スタンプビデオデータが書き込まれるメモリ領域MRを変更する。具体的には、下記の式に従ってパラメータMRを更新し、そのパラメータMRで示されるメモリ領域MRがスタンプビデオデータを記憶するメモリ領域とされる。
MR=MR+1
【0152】
いまの場合、2(=1+1)番のフレームが次の読み出しフレームとなり、メモリ領域MR2(=1+1)がスタンプビデオデータを記憶するメモリ領域とされる。
【0153】
次に、ステップS29において、システムコントローラ113は、高速再生用の画像(1フレーム)を生成するためのデータとして最後に読み出されるスタンプビデオデータがメモリ112に書き込まれたか否かを判定する。具体的には、下記の式が成り立つか否かが判定される。
T>P+F
【0154】
ステップS29で、スタンプビデオデータがまだメモリ112に書き込まれていないと判定されたとき、ステップ26に戻り、それ以降の処理が行われる。
【0155】
いまの場合、2<3+2であるので、ステップS26に戻り、2番のフレームを構成するスタンプビデオデータがデコードされ、メモリ112のバンク131Aのメモリ領域MR2に書き込まれる。
【0156】
すなわち、ステップS29で、高速再生用の画像を生成するためのデータとして最後に読み出されるスタンプビデオデータがメモリ112に書き込まれるまで(T>P+Fが成り立つまで)、ステップS26乃至ステップS29の処理が繰り返し実行される。その結果、いまの場合、1番のフレーム乃至5番のフレームを構成するスタンプビデオデータが、メモリ112のバンク131Aのメモリ領域MR1乃至MR5にそれぞれ記憶される。
【0157】
ステップS29で、スタンプビデオデータがメモリ112に書き込まれたと判定されたとき、処理はステップS30に進む。
【0158】
いまの場合、ステップS26の処理で5番のフレームを構成するスタンプビデオデータがメモリ112のバンク131Aのメモリ領域MR5に書き込まれたときのステップS29の判定により(6>3+2)、ステップS30に進む。
【0159】
ステップS30において、システムコントローラ113は、メモリ112の読み出しバンクを書き込みバンクと同じに設定する。
【0160】
いまの場合、バンク131Aが、読み出しバンクとされる。
【0161】
次に、ステップS31において、システムコントローラ113は、スタンプビデオデコーダ111に高速再生用の画像の出力を指令する。
【0162】
その指令により、スタンプビデオデコーダ111のメモリコントローラ122は、ステップS30で読み出しバンクとして設定されたメモリ112のバンク131から、そこに記憶されている画像(高速再生用の画像の1フレーム)を読み出し、再生切替コントローラ46に供給する。
【0163】
再生切替コントローラ46はこのとき、ステップS21で高速再生モードに設定されているので、スタンプビデオデコーダ111から供給されたスタンプビデオデータを、ビデオプロセスコントローラ47に供給する。
【0164】
いまの場合、メモリ112のバンク131Aから、そこに記憶されているビデオデータ(高速再生用の画像の1フレームとしての、メモリ領域MR1乃至MR5に配置された1番のフレーム乃至5番のフレームを構成するスタンプビデオデータ)が読み出され、再生切替コントローラ46に供給される。再生切替コントローラ46に供給されたビデオデータは、ビデオプロセスコントローラ47に供給される。
【0165】
なお、ビデオプロセスコントローラ47に供給されたビデオデータは、そこで、ノイズ低減処理や、画質補正処理等の所定の画像処理が施された後、コンポジットエンコーダ48、またはD1エンコーダ50およびパラレル/シリアル変換回路51を介して、表示装置5に出力され、高速再生用の画像として表示される。すなわちいまの場合、図10に示すように表示装置5の表示領域DR1乃至DR5に表示された1番のフレーム乃至5番のフレームに対応する画像が、再生映像として表示される。
【0166】
次に、ステップS32において、システムコントローラ113は、ユーザインタフェース54から、高速再生を終了するユーザコマンドが入力されたか否かを判定し、そのコマンドが入力されていないと判定した場合、ステップS33に進み、パラメータPを下記の式に従って更新する。
P=P+N
【0167】
システムコントローラ113はまた、メモリ112の書き込みバンクを下記の式に従って変更する。すなわち、いま書き込みバンクとされていないバンク131が書き込みバンクとされる。
バンク131=not(バンク131)
【0168】
いまの場合、パラメータPは、8(=3+5)となり、書き込みバンクは、バンク131Bとなる。
【0169】
その後、処理は、ステップS25に戻り、それ以降の処理が行われる。すなわち、その結果、今度は、6番のフレーム乃至10番のフレームを構成するスタンプビデオデータが、メモリ112のバンク131Bのメモリ領域MR1乃至MR5にそれぞれ記憶されて高速再生用の画像が生成される。そしていま表示されている1番のフレーム乃至5番のフレームに対応する画像が並ぶ画像に代えて、6番のフレーム乃至10番のフレームに対応する画像が並ぶ画像が、表示装置5に表示される。
【0170】
ステップS32で、ユーザインタフェース54から、高速再生を終了するユーザコマンドが入力されたと判定されたとき、システムコントローラ113は、高速再生処理を終了する。
【0171】
なお、以上においては、5倍速で高速再生する場合を例として説明したが、2倍速、3倍速、または7倍速などで高速再生する場合においても、パラメータN,R,F,Jを以下のように設定することで、5倍速の場合と基本的には同様の高速再生用の画像を表示させることができる。
2倍速再生の場合は、N=2、R=0、F=1、J=1となり
3倍速再生の場合は、N=3、R=1、F=1、J=1となり、
7倍速再生の場合は、N=7、R=3、F=3、J=1となる。
【0172】
すなわち、2倍速再生の場合、2個のフレームのスタンプビデオデータに対応する画像が、図15に示すように、表示装置5の表示領域DR1とDR2に表示され、3倍速再生の場合、3個のフレームに対応する画像が、図16に示すように、表示装置5の表示領域DR1,2,3に表示され、7倍速再生の場合、7個のフレームに対応する画像が、図17に示すように、表示装置5の表示領域DR1,2,3,4,5,6,7に表示される。
【0173】
また、再生レート内で再生可能なスタンプビデオデータのフレーム数を越える倍速であっても、同様にして高速再生用の画像を表示させることができる。
【0174】
例えば、再生レート内で7フレーム分のスタンプビデオデータを再生することができる場合において14倍速再生が要求されたとき、パラメータN,R,F,Jは、以下のように設定される。なお、この場合、メモリ112のバンク131には、7個のメモリ領域MR1乃至MR7が設けられている。
N=14,R=6,F=6,J=2
【0175】
例えば、パラメータP=7とされたとき、このときの高速再生用の画像は、1(=7−6)番のフレーム、3番のフレーム、5番のフレーム、7番のフレーム、9番のフレーム、11番のフレーム、および13番のフレームに対応する画像が表示装置5の表示領域DR1乃至DR7(例えば、図17)に表示されるような画像、および15番のフレーム、17番のフレーム、19番のフレーム、21番のフレーム、23番のフレーム、25番のフレーム、および27番のフレームに対応する画像が表示装置5の表示領域DR1乃至DR7に表示されるような画像等が、高速再生用の画像となる。
【0176】
また、以上においては、パラメータR,F,Jの値を大きくすることで、基準フレームに対してより進んだ画像とより遅れた画像を表示させることができ、これにより、ユーザが高速再生から通常再生や停止モードに切り換えるときのタイミング遅れを防止することができる。
【0177】
例えば、5倍速再生の場合において、パラメータN=5,R=8,F=8,J=4すると、パラメータP=9のとき、1(=9−8)番のフレーム、5番のフレーム、9番のフレーム、13番のフレーム、および17番のフレームに対応する画像が所定の領域に表示される高速再生用の画像が生成される。
【0178】
また、スタンプビデオデータを拡大または画素補間する機能を備えるようにすれば、図18のようにスタンプビデオデータに対応する画像を拡大して表示したり、図19に示すように、基準フレームを構成するスタンプビデオデータに対応する画像を中央に拡大して表示することもできる。
【0179】
【発明の効果】
第1の本発明によれば、高速再生するときに滑らかな再生映像を得ることができる。
【0180】
第2の本発明によれば、高速再生するときに滑らかな再生映像を得ることができる。
【図面の簡単な説明】
【図1】本発明の再生装置の利用例を示す図である。
【図2】図1の記録装置の構成例を示すブロック図である。
【図3】図1の光ディスクの各記録エリアを示す図である。
【図4】MPEG2ビデオデータのGOP構造を示す図である。
【図5】図2のスタンプビデオエンコーダ19の構成例を示すブロック図である。
【図6】図1の再生装置の構成例を示すブロック図である。
【図7】図6のスタンプビデオデコーダの構成例を示すブロック図である。
【図8】高速再生を行う場合の図1の再生装置の動作を説明するフローチャートである。
【図9】本発明の他の再生装置の利用例を示す図である。
【図10】高速再生用の画像の表示例を示す図である。
【図11】高速再生用の画像の他の表示例を示す図である。
【図12】図9の再生装置の構成例を示すブロック図である。
【図13】図12のスタンプビデオデコーダの構成例を示すブロック図である。
【図14】高速再生を行う場合の図9の再生装置の動作を説明するフローチャートである。
【図15】高速再生用の画像の他の表示例を示す図である。
【図16】高速再生用の画像の他の表示例を示す図である。
【図17】高速再生用の画像の他の表示例を示す図である。
【図18】高速再生用の画像の他の表示例を示す図である。
【図19】高速再生用の画像の他の表示例を示す図である。
【符号の説明】
1 撮像装置, 2 記録装置, 3 光ディスク, 4 再生装置, 5 表示装置, 41 再生用ドライバ, 42 メディアコントローラ, 44 スタンプビデオデコーダ, 45 メモリ, 46 再生切替コントローラ, 53 システムコントローラ, 54 ユーザインタフェース, 61 伸張部, 62 メモリコントローラ/演算処理部, 63 画素補間部, 101 再生装置, 111 スタンプビデオデコーダ, 112 メモリ, 113 システムコントローラ, 121 伸張部, 122 メモリコントローラ
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a reproducing apparatus, a method, and a program, and more particularly, to a reproducing apparatus, a method, and a program for reproducing each data from a recording medium that records data of the same material at a high data rate and a low data rate.
[0002]
[Prior art]
High-speed reproduction of an image recorded on a non-linear recording medium such as an optical disk or a magnetic disk is usually performed such that a frame-dropped image is displayed. For example, in the case of 50 × speed reproduction, the image is updated every 50 frames.
[0003]
[Problems to be solved by the invention]
By the way, when a frame-dropped image is displayed as an image for high-speed reproduction in this way, an image other than the displayed image, for example, 49 frames between displayed frames in the case of 50-times speed reproduction are missing.
[0004]
However, when decoding an image that has been compressed by a method using correlation in the time axis direction, such as MPEG2 (Moving Picture Experts Group-2), it is sometimes necessary to use information on the preceding and following GOPs (Group of Pictures). Therefore, if necessary information is lost due to frame skipping at the time of high-speed playback, the image is not appropriately updated, and, for example, an unnatural image in which the interval of frame skipping display is not constant.
[0005]
Therefore, conventionally, when video data is reproduced at high speed from a non-linear recording medium such as an optical disk or a magnetic disk, there is a problem that it is not possible to obtain a smooth reproduced image as obtained when a conventional analog VTR is reproduced at high speed. .
[0006]
The present invention has been made in view of such circumstances, and aims to make it possible to smooth a reproduced image at the time of high-speed reproduction of an image recorded on a non-linear recording medium such as an optical disk or a magnetic disk. Things.
[0007]
[Means for Solving the Problems]
When a high-speed playback is requested, the first playback apparatus of the present invention can output a high-speed video data and a low-speed video data, which are generated from the same moving image material, from a recording medium. Reading means for reading the video data at the data rate, and a part of the low-data-rate video data of at least two or more frames out of the plurality of frames that can be output within the output rate and read by the reading means. It is characterized by comprising generating means for generating an image for high-speed reproduction configured by superimposition every frame time at an output rate, and output means for outputting the image for high-speed reproduction generated by the generating means. I do.
[0008]
When N-times speed reproduction is requested, the generating means sets a frame for every N frames as a reference frame, and obtains high-speed reproduction from at least two or more frames before and after the reference frame at a low data rate at low data rates. Can be generated.
[0009]
The first reproducing method according to the present invention is arranged such that when high-speed reproduction is requested, a high-speed video data and a low-data-rate video data generated from the same moving image material are recorded on a recording medium. A reading step of reading the video data of the data rate, and a part of the low data rate video data of at least two or more frames out of the plurality of frames that can be output within the output rate, which are read in the processing of the reading step. And generating an image for high-speed reproduction for each frame time at the output rate, and outputting the image for high-speed reproduction generated in the processing of the generation step. It is characterized by the following.
[0010]
A first program according to the present invention is provided, when high-speed playback is requested, from a recording medium that records high data rate video data and low data rate video data generated from the same moving picture material. A read control step for controlling reading of video data of a low data rate; and a low data rate of at least two or more frames out of a plurality of frames that can be output within the output rate and are read in the processing of the read control step. A computer that executes a process including a generation control step of controlling generation of an image for high-speed reproduction configured by superimposing a part of video data on each frame at an output rate for each frame time. .
[0011]
In the first reproducing apparatus, method and program according to the present invention, when high-speed reproduction is requested, high-data-rate video data and low-data-rate video data generated from the same moving picture material are recorded. Low-data-rate video data is read from a recording medium in which the low-data-rate video data of at least two or more of the read plurality of frames that can be output at the output rate are read. Are generated for each frame time at the output rate.
[0012]
When a high-speed playback is requested, the second playback device of the present invention outputs a high-speed video data and a low-data-rate video data generated from the same moving image material to a low-speed video recording medium. Reading means for reading video data at a data rate; and each of the low-data-rate video data of at least two or more frames out of a plurality of frames that can be output within the output rate read by the reading means is one frame. Generating means for generating an image for high-speed reproduction located at a predetermined display position in the frame every frame time at an output rate, and output means for outputting the image for high-speed reproduction generated by the generating means It is characterized by.
[0013]
When N-times speed reproduction is requested, the generation unit sets a frame for every N frames as a reference frame, and obtains an image for high-speed reproduction from low-rate video data of at least two or more frames centered on the reference frame. Can be generated.
[0014]
According to a second reproduction method of the present invention, when a high-speed reproduction is requested, a high-speed video data and a low-data-rate video data generated from the same moving image material are recorded on a recording medium. A reading step of reading the video data of the data rate, and each of the low data rate video data of at least two or more frames out of the plurality of frames that can be output within the output rate and read in the processing of the reading step is 1 Generating an image for high-speed reproduction located at a predetermined display position in one frame every frame time at an output rate, and outputting an image for high-speed reproduction generated in the processing of the generating step And characterized in that:
[0015]
A second program according to the present invention is provided, when high-speed playback is requested, from a recording medium that records high data rate video data and low data rate video data generated from the same moving image material. A read control step for controlling reading of video data of a low data rate; and a low data rate of at least two or more frames out of a plurality of frames that can be output within the output rate and are read in the processing of the read control step. Generating a high-speed playback image in which each of the video data is located at a predetermined display position in one frame at a frame rate at an output rate for each frame time. Features.
[0016]
According to the second reproducing apparatus, method and program of the present invention, when high-speed reproduction is requested, high-data-rate video data and low-data-rate video data generated from the same moving picture material are recorded. The low data rate video data is read from the recording medium on which the low data rate video data of at least two or more frames of the read plurality of frames that can be output at the output rate is equal to one. An image for high-speed reproduction located at a predetermined display position in one frame is generated every frame time at the output rate.
[0017]
BEST MODE FOR CARRYING OUT THE INVENTION
FIG. 1 shows an example of use of the playback apparatus of the present invention.
[0018]
The imaging device 1 includes an optical lens, a CCD image sensor that captures a subject image transmitted through the optical lens to generate an imaging signal, a camera signal processing circuit that performs camera signal processing on the generated imaging signal, and the like. The resulting composite image signal and D1 format video data based on an uncompressed serial digital interface (SDI, SMPTE259M) are supplied to the recording device 2.
[0019]
The recording device 2 encodes the video signal supplied from the imaging device 1 at a high data rate, and generates video data at a high data rate. The recording device 2 also encodes the same video signal at a low data rate and generates video data at a low data rate. That is, high data rate video data and low data rate video data are generated from the same material.
[0020]
In the case of this example, the recording device 2 compresses the video signal supplied from the imaging device 1 as video data of a high data rate using correlation in the time axis direction, and uses a maximum of about 15 Mbps MPEG2 which can be used for broadcasting. Generates video data (high-resolution video data) and performs video pixel conversion processing and intra-frame complete compression processing on the video signal as low data rate video data (that is, compression using correlation in the time axis direction). ), And generates stamp video data (low-resolution video data) of about 500 kbps. Stamp video data is generated corresponding to all frames of MPEG2 video data.
[0021]
The recording device 2 records the generated high data rate video data (MPEG2 video data) and low data rate video data (stamp video data) in, for example, another area of the optical disc 3.
[0022]
During normal playback, the playback device 4 plays back the high data rate video data (MPEG2 video data) read from the optical disc 3 and causes the display device 5 to display the video data.
[0023]
During high-speed playback, the playback device 4 also has low data rate video data (stamp video) of at least two or more frames out of a plurality of frames that can be played within the playback rate read from the optical disc 3, as will be described in detail later. An image for high-speed reproduction, which is formed by superimposing part of the data on each other, is generated for each frame time at the reproduction rate. The playback device 4 supplies the generated high-speed playback image to the display device 5 to display it.
[0024]
For example, in the case of 5 × speed reproduction, the high-speed reproduction image in which the stamp video data for 5 frames is added to the level of 1/5 and added in frame units, and the images corresponding to the 5 frames are superimposed and displayed. (One frame) is generated. That is, an image in which an image in which images corresponding to five frames are superimposed is updated and displayed is a reproduced video.
[0025]
Stamp video data with a low data rate used for high-speed reproduction is subjected to intra-frame complete compression processing by the recording device 2 and is encoded without using correlation in the time axis direction unlike MPEG2 video data. The reproduced video at the time of high-speed reproduction does not become unnatural as in the case of high-speed reproduction using MPEG2 video data, but becomes smooth. Further, since an image in which images corresponding to the stamp video data constituting the predetermined number of frames are superimposed is displayed, the user can perform high-speed reproduction from the image (an image different from that in normal reproduction). Can be recognized.
[0026]
FIG. 2 shows a configuration example of the recording device 2. The recording device 2 is supplied with a composite image signal supplied from the imaging device 1 or video data in the D1 format.
[0027]
The composite image signal is input to a Y / C separation circuit 12 via an input terminal 11 of the recording device 2, where it is separated into a luminance signal Y and a chroma signal C and supplied to a component decoder 13. Then, it is converted into 4: 2: 2 baseband component data Y, Cb, Cr. The converted baseband component data Y, Cb, Cr are supplied to the time base collector 17.
[0028]
The D1 format video data is input to a serial / parallel (S / P) conversion circuit 15 via an input terminal 14, where it is converted into parallel data and supplied to a D1 decoder 16. Then, the data is subjected to processing such as error correction, decoded, and converted into 4: 2: 2 baseband component video data Y, Cb, and Cr. The converted 4: 2: 2 baseband component video data Y, Cb, Cr is supplied to the time base collector 17.
[0029]
The time base collector 17 adjusts the time axis of the baseband component video data Y, Cb, Cr supplied from the component decoder 13 or the D1 decoder 16 using a built-in buffer.
[0030]
The time base collector 17 supplies the baseband component video data adjusted on the time axis to the MPEG2 encoder 18 and the stamp video encoder 19 respectively.
[0031]
The MPEG2 encoder 18 subjects the baseband component video data supplied from the time base collector 17 to compression processing using correlation in the time axis direction, such as motion compensation prediction, DCT, quantization, and variable length coding. Generate high-resolution MPEG2 video data that can be used for broadcasting. For example, video data of a profile of MPEG2MP @ ML (Main Profile / Main Level) is generated.
[0032]
This MPEG2 video data is supplied to the media controller 20 at a high data rate of at most 15 Mbps.
[0033]
The stamp video encoder 19 uses the correlation in the time axis direction with respect to the baseband component video data supplied from the time base collector 17, that is, the component video data from the same source (the same material) input to the MPEG2 encoder 18. Instead, the data amount is reduced by performing a pixel number conversion process or a compression process that completes within a frame to generate stamp video data having a lower data rate than MPEG2 video data. The stamp video data is video data having a lower resolution than MPEG2 video data, and is supplied to the media controller 20 at a low data rate of about 500 kbps.
[0034]
The media controller 20 adds an error detection code to the MPEG2 video data supplied from the MPEG2 encoder 18 and the stamp video data supplied from the stamp video encoder 19, or performs a predetermined writing process on the MPEG2 video data. Is converted into data suitable for recording on the optical disc 3 and supplied to the recording driver 21.
[0035]
As shown in FIG. 3, the recording driver 21 records the MPEG2 video data in the outermost high-quality recording area ARH of the optical disc 3, and also records the stamp video data on the inner peripheral side of the high-quality recording area ARH. Recording is performed in the low quality recording area ARL. Disk management information and system information are stored in the innermost management area ARM of the optical disk 3.
[0036]
The recording driver 21 is an optical head that records data by irradiating the optical disk 3 with laser light emitted from a semiconductor laser through optical components such as various lenses and a beam splitter and an objective lens, and uses the optical head as an optical disk. 3, a sled mechanism that moves in the radial direction, a servo system that controls the focus and tracking of the objective lens, a recording data modulation system that modulates the laser light according to each data for recording, a system that monitors the laser light for recording, And a drive system for driving the optical disc 3 to rotate.
[0037]
The system controller 22 controls the media controller 20 in response to a user command from a user interface (I / F) 23, and controls the recording operation of MPEG2 video data, stamp video data, disc management information and system information on the optical disc 3. I do.
[0038]
Next, the MPEG2 encoder 18 and the stamp video encoder 19 of the recording device 2 will be described in detail.
[0039]
The MPEG2 encoder 18 compresses the 4: 2: 2 baseband component video data Y, Cb, and Cr by removing the redundancy in the time direction by motion compensation prediction using the correlation in the time axis direction. I-picture of an intra-frame coded image coded only within a frame, P-picture of an inter-frame forward-predicted coded image coded by predicting the present from a past screen, images in both past and future directions , The video information is compression-encoded by using the B picture of the bidirectionally predicted coded image which is encoded by predicting the current from the B picture. A group of pictures including one I picture is a GOP.
[0040]
FIG. 4 shows a GOP structure in which the number of pictures N = 15 in a GOP and the period M = 3 in which I or P appears. In this example, IBBPBBPBBPBBPBB is allocated along the time axis.
[0041]
As shown in FIG. 5, the stamp video encoder 19 includes a band-limited low-pass filter (LPF) 31, a pixel thinning processing unit 32, and an intra-frame compression unit 33.
[0042]
The band-limited low-pass filter 31 removes the high-frequency component of the 4: 2: 2 baseband component video data supplied from the time base collector 17 and supplies the same to the pixel thinning processing unit 32. The pixel thinning processing unit 32 thins out the pixels in the H direction and the V direction, for example, to 1/6, and supplies the thinned pixels to the intra-frame compression unit 33.
[0043]
The intra-frame compression unit 33 further uses the compression algorithm that can be completed within the frame, and further compresses the component video data that has been pixel-decimated from the pixel-decimation processing unit 32.
[0044]
As a compression algorithm that can be completed within a frame, for example, full frame, 1/10 JPEG compression is used. That is, for example, stamp video data (about 500 kbps) such as H (120) × V (80/96), frame rate = Full, 4: 2: 2, 8 bits, and 1/10 JPEG compressed data is generated.
[0045]
The compression algorithm is for compressing the amount of digital video data to about 1/5, and is a compression algorithm conforming to the DV standard used for some home digital video devices and some business digital video devices. It can also be used. According to the DV standard, efficient compression of video data can be realized by combining discrete cosine transform (DCT) and variable length coding (VLC).
[0046]
FIG. 6 shows a configuration example of the playback device 4.
[0047]
The reproduction driver 41 reads the MPEG2 video data from the high-quality recording area ARH or refers to the management area ARM (FIG. 3) of the optical disk 3 according to the instruction from the media controller 42, or reads the stamp video data from the low-quality recording area. The data is read from the ARL and supplied to the media controller 42.
[0048]
The media controller 42 reads the MPEG2 video data from the optical disc 3 via the playback driver 41 and performs error correction processing using an error detection code on the media driver 42 under the control of the system controller 53 when the user selects the normal playback. And supplies it to the MPEG2 decoder 43.
[0049]
The media controller 42 also reads the stamp video data from the optical disc 3 via the playback driver 41 under the control of the system controller 53 when the user selects high-speed playback, and performs error correction processing using an error detection code. And supplies it to the stamp video decoder 44.
[0050]
The MPEG2 decoder 43 decodes MPEG2 video data (data encoded in the MPEG2 format supplied at a maximum of 15 Mbps) supplied from the media controller 42, and obtains a 4: 2: 2 high-resolution video decode obtained as a result. The output is supplied to the reproduction switching controller 46.
[0051]
The stamp video decoder 44 decodes the stamp video data supplied from the media controller 42 according to the control of the system controller 53 when the user selects high-speed playback, and at least one of a plurality of frames that can be played at the playback rate. Decoded stamp video data of two or more frames (for example, stamp video data for five frames whose level is reduced to 1/5) are stored in a memory 45 in a frame unit (added), and are added. An image for high-speed reproduction in which images corresponding to the stamp video data are superimposed and displayed is generated. The stamp video decoder 44 supplies the generated high-speed reproduction image to the reproduction switching controller 46 after performing pixel interpolation and the like.
[0052]
As shown in FIG. 7, the memory 45 includes two banks 71A and 71B (hereinafter, simply referred to as a bank 71 when there is no need to distinguish them individually. The same applies to other cases). I have.
[0053]
The reproduction switching controller 46 is set to the normal reproduction mode under the control of the system controller 53 when the user selects the normal reproduction. At this time, the decoded MPEG2 video data supplied from the MPEG2 decoder 43 is sent to the video process controller 47. Supply.
[0054]
The playback switching controller 46 is also set to a high-speed playback mode under the control of the system controller 53 when the user selects high-speed playback. At this time, the decoded stamp video data supplied from the stamp video decoder 44 is transmitted to the video process controller. 47.
[0055]
The video process controller 47 performs predetermined video processing such as noise reduction processing and image quality correction processing on the MPEG2 video data or stamp video data supplied from the reproduction switching controller 46, and supplies the processed video data to the composite encoder 48 or the D1 encoder 50. I do.
[0056]
The composite encoder 48 encodes data from the video process controller 47 into composite data, and outputs the composite data to the display device 5 via the output terminal 49.
[0057]
The D1 encoder 50 performs an encoding process on the data from the video process controller 47 in accordance with the D1 format, and supplies the data to a parallel / serial (P / S) conversion circuit 51. The parallel / serial conversion circuit 51 generates serial digital video data according to the SDI format and outputs the serial digital video data to the display device 5 via the output terminal 52.
[0058]
The system controller 53 controls the media controller 42, the stamp video decoder 44, and the reproduction switching controller 46 in response to a user command from the user interface 54 to execute normal reproduction and high-speed reproduction described later.
[0059]
Next, the MPEG2 decoder 43, the stamp video decoder 44, and the playback switching controller 46 of the playback device 4 will be described in detail.
[0060]
The MPEG2 decoder 43 includes a variable length decoding unit, an inverse quantization unit, an adder, an inverse discrete cosine unit, a frame memory unit, a motion compensation unit, and a discrete cosine transform unit (all not shown). @ML (Main Profile / Main Level) decoder.
[0061]
Although the MPEG2 decoder 43 is provided in correspondence with the MPEG2 encoder 18 used in the recording device 1, if the recording device 1 uses another form of high-resolution video data generating device (encoder). , A corresponding decoder can be used.
[0062]
As shown in FIG. 7, the stamp video decoder 44 includes a decompression unit 61, a memory controller / arithmetic processing unit 62, and a pixel interpolation unit 63.
[0063]
The expansion unit 61 decodes the 4: 2: 2 stamp video data supplied at about 500 Kbps from the media controller 42 into 4: 2: 2 baseband component video data Y, Cb, Cr, It is supplied to the arithmetic processing unit 62.
[0064]
The memory controller / arithmetic processing unit 62 decodes stamp video data of at least two or more frames out of a plurality of frames that can be reproduced at the reproduction rate (for example, a stamp for five frames whose level is reduced to 1/5). The video data) is stored (added) in the bank 71 of the memory 45 in frame units to generate an image for high-speed reproduction. The memory controller / arithmetic processing unit 62 supplies the generated high-speed reproduction image to the pixel interpolation unit 63 at a predetermined timing.
[0065]
The pixel interpolating unit 63 corresponds to the thinning process of the stamp video encoder 19 (pixel thinning unit 32) of the recording device 2 and corresponds to the H direction and the V direction of the image for high-speed reproduction supplied from the memory controller / arithmetic processing unit 62. Are multiplied by 6 and supplied to the reproduction switching controller 46.
[0066]
Next, the operation of the playback device 4 when performing high-speed playback will be described with reference to the flowchart in FIG. Here, it is assumed that quintuple-speed playback is performed.
[0067]
When 5 × speed reproduction is selected by the user via the user interface 54, in step S1, the system controller 53 sets the reproduction switching controller 46 to the high-speed reproduction mode and sets parameters P, N, R, Initially, predetermined values are set to F and J.
[0068]
The frame number (number indicating the display order) of the frame output by the normal reproduction or the stop processing immediately before the request for the high-speed reproduction is initially set as the parameter P. In the case of this example, it is assumed that the frame having the frame number 3 is output immediately before the high-speed reproduction is requested, and the parameter P is initially set to 3. Note that the frame indicated by the parameter P is referred to as a reference frame, as appropriate, since it serves as a reference when determining the stamp video data forming the image for high-speed reproduction.
[0069]
In the parameter N, information indicating the number of frames to be reproduced in one frame time at the reproduction rate (the reproduction speed of high-speed reproduction (how many times faster)) is set. When 5 × speed is requested as in the case of this example, 5 is initially set as the parameter N.
[0070]
The parameter R is a parameter used when detecting stamp video data that is first read as data for generating an image for high-speed reproduction (accurately, one frame of the image for high-speed reproduction). , Information indicating how many frames before the reference frame of the frame number indicated by the parameter P is the stamp video data to be read first. In the case of this example, 2 is initially set, and the stamp video data forming the frame two frames before the reference frame is first read as data for generating an image for high-speed reproduction.
[0071]
The parameter F is a parameter used when detecting stamp video data that is read last as data for generating an image (one frame) for high-speed playback. The stamp video data that is read last includes: Information indicating the number of frames after the reference frame is set. In the case of this example, 2 is initially set, and the stamp video data constituting the frame two frames after the reference frame is finally read as data for generating an image for high-speed reproduction.
[0072]
In the parameter J, information indicating the frame interval of the stamp video data read as data for generating an image for high-speed reproduction is set. In the case of this example, 1 is initially set, and frames composed of stamp video data from stamp video data to be read first as an image for high-speed reproduction to stamp video data to be read last are read one by one.
[0073]
Next, in step S2, the system controller 53 calculates the number D of the frames of the stamp video data (the frames of the stamp video data to be added) constituting the image (one frame) for high-speed reproduction according to the following equation. .
D = int (N / J)
[0074]
In this example, since N = 5 and J = 1, D = 5 (= int (5/1)).
[0075]
The system controller 53 also sets the write bank of the memory 45 to one of the banks 71A or 71B.
[0076]
In this case, the write bank is set to the bank 71A.
[0077]
In step S3, the system controller 53 determines a frame of stamp video data to be read first as data for generating an image (one frame) for high-speed reproduction. Specifically, the frame is a frame having a frame number indicated by the parameter T calculated according to the following equation.
T = PR
[0078]
In this case, since P = 3 and R = 2, the frame of the stamp video data which is read first as the data for generating the image for high-speed reproduction is the frame having the frame number 1 (the reference number 3). (Frame two frames before the frame). When the reference frame is the first or second frame, T = -1 (= 1-2) and 0 (= 2-2). In this case, too, the first frame is read first. It shall be a frame.
[0079]
Next, in step S4, the system controller 53 instructs the media controller 42 and the stamp video decoder 44 to write the stamp video data into the memory 45.
[0080]
In response to the instruction, the media controller 42 reads the stamp video data constituting the frame (the frame having the frame number T) determined in step S3 from the optical disc 3 via the playback driver 41, and outputs an error code to the stamp video data. After performing the used error correction processing, the data is supplied to the stamp video decoder 44.
[0081]
The decompression unit 61 of the stamp video decoder 44 decodes the stamp video data supplied from the media controller 42, and supplies the decoded video data to the memory controller / arithmetic processing unit 62. The memory controller / arithmetic processing unit 62 sets the level of the decoded stamp video data from the decompression unit 61 to 1 / D (D = int (N / J)), and determines the write bank in step S2 of the memory 45. Is written to the bank 71.
[0082]
In this case, the stamp video data constituting the first frame is decoded, the level is reduced to 1/5, and the stamp video data is written to the bank 71A of the memory 45.
[0083]
In step S5, the system controller 53 waits until the writing of the stamp video data to the memory 45 is completed in the processing of step S4, and when the writing is completed, the system controller 53 proceeds to step S6.
[0084]
In step S6, the system controller 53 determines a frame of the stamp video data to be read next. Specifically, the parameter T is updated according to the following equation, and the frame of the frame number indicated by the parameter T is set as the next read frame.
T = T + J
[0085]
In this case, the second (= 1 + 1) th frame is the next read frame.
[0086]
Next, in step S7, the system controller 53 instructs the media controller 42 and the stamp video decoder 44 to write the stamp video data to the memory 45, as in the case of step S4.
[0087]
As a result, in the present case, the stamp video data constituting the second frame is decoded, the level thereof is reduced to 1/5, and the first frame previously stored in the bank 71A of the memory 45 is constituted. It is added to the stamp video data and stored. That is, here, an image in which the image corresponding to the first frame and the image corresponding to the second frame are superimposed is generated.
[0088]
In step S8, the system controller 53 waits until the writing of the stamp video data into the memory 45 is completed in the processing in step S7, and proceeds to step S9 when the writing is completed.
[0089]
In step S9, the system controller 53 determines whether or not stamp video data to be read last as data for generating an image (one frame) for high-speed reproduction has been written into the memory 45. Specifically, it is determined whether the following equation is satisfied.
T> = P + F
[0090]
If it is determined in step S9 that the stamp video data has not been written to the memory 45, the process returns to step S6, and the next frame to be read is determined.
[0091]
In this case, since 2 (= T) <3 (= P) +2 (= F), the above formula does not hold, and the process returns to step S6, where the frame of number 3 (= 2 + 1) is set as the next read frame. You.
[0092]
That is, in step S9, the processes of steps S6 to S9 are performed until the stamp video data to be read last as data for generating an image for high-speed reproduction is written to the memory 45 (until T> = P + F is satisfied). It is executed repeatedly. As a result, in this case, the stamp video data constituting the first to fifth frames whose levels are respectively reduced to 1/5 are added and stored in the bank 71A of the memory 45, and are stored in the first frame. An image in which the images corresponding to the fifth through fifth frames are superimposed (one frame of the image for high-speed reproduction) is generated.
[0093]
If it is determined in step S9 that the stamp video data has been written to the memory 45, the process proceeds to step S10.
[0094]
In this case, when it is determined that the stamp video data forming the fifth frame has been written to the bank 71A of the memory 45 (5 = 3 + 2), the process proceeds to step S10.
[0095]
In step S10, the system controller 53 sets the read bank of the memory 45 to be the same as the write bank.
[0096]
In this case, the bank 71A is a read bank.
[0097]
Next, in step S11, the system controller 53 instructs the stamp video decoder 44 to output an image for high-speed reproduction. In response to the instruction, the memory controller / arithmetic processing unit 62 of the stamp video decoder 44 reads the image stored therein (image for high-speed reproduction (one frame) from the bank 71 of the memory 45 set as the read bank in step S10. )) Is read out and supplied to the pixel interpolation unit 63. The pixel interpolation unit 63 multiplies the pixels in the H direction and the V direction of the image supplied from the memory controller / arithmetic processing unit 62 by six and supplies the same to the reproduction switching controller 46.
[0098]
At this time, the reproduction switching controller 46 supplies the stamp video data supplied from the stamp video decoder 44 to the video process controller 47 since the high-speed reproduction mode is set in step S1.
[0099]
In this case, from the bank 71A of the memory 45, the video data (the first to fifth frames each having a level of 1/5 as one frame of an image for high-speed reproduction) stored therein are stored. The video data to which the stamp video data is added is read out, and the pixels in the H and V directions are each multiplied by 6 and supplied to the reproduction switching controller 46. The video data supplied to the playback switching controller 46 is supplied to a video process controller 47.
[0100]
Note that, as described above, the video data supplied to the video process controller 47 is subjected to predetermined image processing such as noise reduction processing and image quality correction processing, and then the composite encoder 48 or the D1 encoder 50 and The image is output to the display device 5 via the parallel / serial conversion circuit 51 and displayed as an image for high-speed reproduction. That is, in this case, an image in which images corresponding to the first to fifth frames are superimposed on each other is displayed as an image for high-speed reproduction.
[0101]
The output processing of the image for high-speed reproduction in the stamp video decoder 44 to the P / S conversion circuit 51 is performed in synchronization with the reproduction signal.
[0102]
Next, in step S12, the system controller 53 determines whether or not a user command for terminating high-speed playback has been input from the user interface 54, and when determining that the command has not been input, proceeds to step S13. , And the parameter P is updated according to the following equation. That is, a frame every N frames is set as a reference frame.
P = P + N
[0103]
The system controller 53 also changes the write bank of the memory 45 according to the following equation. That is, the bank 71 that has not been set as the write bank is set as the write bank.
Bank 71 = not (Bank 71)
[0104]
In this case, the parameter P is 8 (= 3 + 5), and the write bank is the bank 71B.
[0105]
Thereafter, the process returns to step S3, and the subsequent processes are performed. That is, as a result, the stamp video data constituting the sixth to tenth frames, each of which has a level reduced to 1/5, is added to generate video data of an image for high-speed reproduction. Instead of the image in which the images corresponding to the displayed first to fifth frames are superimposed, the image in which the images corresponding to the sixth to tenth frames are superimposed is displayed on the display device 5. Is displayed.
[0106]
If it is determined in step S12 that a user command to end high-speed playback has been input from the user interface 54, the system controller 53 ends the high-speed playback processing. At this time, for example, normal reproduction of MPEG2 video data after the reference frame is started.
[0107]
The high-speed reproduction processing is performed as described above.
[0108]
In the above description, the case of high-speed reproduction at 5 × speed has been described as an example. However, even at the time of high-speed reproduction at 2 ×, 3 ×, or 7 × speed, the parameters N, R, F, and J are set as follows. , It is possible to display an image for high-speed reproduction basically similar to the case of 5 × speed.
In the case of 2 × speed reproduction, N = 2, R = 0, F = 1, J = 1
In the case of triple-speed playback, N = 3, R = 1, F = 1, J = 1,
In the case of 7 × speed reproduction, N = 7, R = 3, F = 3, and J = 1.
[0109]
That is, in the case of double speed reproduction, the stamp video data of two frames whose level is 1/2 (2 = int (2/1)) is reduced to 1/3 in the case of triple speed reproduction. In the case of 3 frames of stamp video data, and in the case of 7 × speed reproduction, the 7 frames of stamp video data whose level has been reduced to 1/7 are added, and an image (1 frame) for high speed reproduction is reproduced. Generated every frame time at the rate.
[0110]
Further, even at a double speed exceeding the number of frames of stamp video data that can be reproduced within the reproduction rate, an image for high-speed reproduction can be displayed in the same manner.
[0111]
For example, when 14 times speed reproduction is requested in a case where stamp video data for 7 frames can be reproduced within the reproduction rate, the parameters N, R, F, and J are set as follows.
N = 14, R = 6, F = 6, J = 2
[0112]
For example, when the parameter P is set to 7, the image for high-speed reproduction at this time has the 1/7 (7 = int (14/2)) level and the 1 (= 7−6) th image. Frame, an image to which stamp video data constituting frame No. 3 (= 1 + 2), frame No. 5, frame No. 7, frame No. 9, frame No. 11, and frame No. 13, and 15 No. 17 frame, No. 19 frame, No. 21 frame, No. 23 frame, No. 25 frame, and an image to which the stamp video data forming the No. 27 frame is added is reproduced at high speed. Is displayed as an image for use.
[0113]
In the above description, the playback speed N and the number of added frames D are the same, but the playback speed N and the number of added frames D may be different values. In this case, the number D of added frames is a total value of the parameters R, F, and J.
[0114]
For example, in the case of 5 × speed reproduction, when the parameters are set to N = 5, R = 2, F = 4, J = 1, the levels are respectively 1/7 (7 = int ((2 + 4 + 1) / 1)) )), The image to which the seven stamp video data composing the seven first to seventh frames are added, and the sixth to twelfth levels, each of which has a 1/7 level. An image or the like with the added frame is displayed as an image for high-speed reproduction.
[0115]
This makes it possible to display an image advanced at the time of high-speed reproduction at an earlier timing, so that it is possible to prevent a delay in timing at which the user switches from the high-speed reproduction to the normal reproduction or the stop mode.
[0116]
Further, in the above description, an image for high-speed reproduction is generated by adding the levels of the stamp video data equally, but it is also possible to weight the addition. For example, in the case of 5 × speed reproduction, of the five frames to be added, the level of the first frame to be written is set to 1/10, the level of the next frame to be written is set to 2/10, and the next frame to be written is set. Can be 4/10, the level of the next frame to be written can be 2/10, and the last frame to be written can be 1/10.
[0117]
FIG. 9 shows an example of use of another reproducing apparatus of the present invention.
[0118]
The playback device 101 plays back the high-data-rate video data (MPEG2 video data) read from the optical disc 3 and displays it via the display device 5 during normal playback, similarly to the playback device 4 of FIG.
[0119]
On the other hand, at the time of high-speed playback, the playback device 101 outputs video data of a low data rate (stamp video) of at least two or more frames out of a plurality of frames that can be played within the playback rate read from the optical disc 3, as will be described in detail later. ) Is generated for each frame time at the reproduction rate, in which an image for high-speed reproduction is located at a predetermined display position within one frame. The playback device 101 supplies the generated high-speed playback image to the display device 5 to display it.
[0120]
FIGS. 10 and 11 show display examples of the high-speed reproduction image generated at the time of 5 × speed reproduction. For example, as shown in FIG. 10, images corresponding to stamp video data constituting frames A to E are displayed side by side (displayed in the areas DR1 to DR5 of the screen of the display device 5). Are displayed next to each other, and an image in which images corresponding to the stamp video data constituting the frames F to J are displayed side by side is displayed as an image for high-speed reproduction. That is, an image in which images corresponding to the five frames are arranged and updated is displayed as a reproduced video.
[0121]
Also in this example, the stamp video data of a low data rate used for high-speed reproduction is encoded by the recording device 2 without using the correlation in the time axis direction. It does not become unnatural as in the case of high-speed reproduction using data, but becomes smooth. In addition, since a sequence of images corresponding to the stamp video data constituting a predetermined number of frames is displayed as an image for high-speed reproduction, the user performs high-speed reproduction from the image (an image different from normal reproduction). Can be recognized.
[0122]
FIG. 12 shows a configuration example of the playback device 101. That is, this playback apparatus is provided with a stamp video decoder 111, a memory 112, and a system controller 113 instead of the stamp video decoder 44, the memory 45, and the system controller 53 of FIG.
[0123]
The stamp video decoder 111 decodes the stamp video data supplied from the media controller 42 under the control of the system controller 113 when the user selects high-speed playback, and decodes the stamp video data that can be played within the playback rate. Is stored in a predetermined memory area MR of the memory 112 on a frame basis, and an image for high-speed reproduction in which images corresponding to the stamp video data are displayed side by side is generated. The stamp video decoder 111 supplies the generated high-speed playback image to the playback switching controller 46.
[0124]
The memory 112 has two banks 131A and 131B as shown in FIG. Each of the banks 131A and 131B is provided with a memory area MR corresponding to the display area DR of the screen of the display device 5.
[0125]
For example, in the bank 131 of the memory 112, memory regions MR1 to MR5 (not shown) corresponding to the display regions DR1 to DR5 shown in FIGS. 10 and 11 are provided.
[0126]
The system controller 113 controls the media controller 42, the stamp video decoder 111, and the playback switching controller 46 in response to a user command from the user interface 54 to execute normal playback and high-speed playback as described later.
[0127]
FIG. 13 shows a configuration example of the stamp video decoder 111.
[0128]
The expansion unit 121 decodes the 4: 2: 2 stamp video data supplied from the media controller 42 at about 500 Kbps into 4: 2: 2 baseband component video data Y, Cb, and Cr, and sends the decoded video data to the memory controller 122. Supply.
[0129]
The memory controller 122 stores the decoded stamp video data reproducible at the reproduction rate in a predetermined memory area MR of the bank 131 of the memory 112 on a frame-by-frame basis, and generates an image for high-speed reproduction. The memory controller 122 supplies the generated high-speed playback image to the playback switching controller 46 at a predetermined timing.
[0130]
Next, the operation of the playback device 101 when performing high-speed playback will be described with reference to the flowchart in FIG. Here, a case where the 5 × speed reproduction is performed will be described as an example.
[0131]
When quintuple-speed playback is selected by the user via the user interface 54, in step S21, the system controller 113 sets the playback switching controller 46 to the high-speed playback mode and has the same meaning as in the example of FIG. The parameters P, N, R, F, and J are initialized to predetermined values.
[0132]
In the parameter P, the frame number of the frame output by the normal reproduction or the stop processing immediately before the high-speed reproduction is requested is set. In the case of this example, it is assumed that the frame having the frame number 3 is output immediately before the high-speed reproduction is requested, and the parameter P is initially set to 3.
[0133]
In this example, 5 times speed is required for the parameter N, so 5 is initially set.
[0134]
In this example as well, the parameter R is initially set to 2, and the stamp video data forming the frame two frames before the reference frame of the frame number indicated by the parameter P is the image for high-speed reproduction (1). ) Is first read out as data for generating a frame.
[0135]
In this example as well, the parameter F is initially set to 2, and the stamp video data constituting the frame two frames after the reference frame is the data for generating an image (one frame) for high-speed reproduction. Is read last.
[0136]
Also in this example, 1 is set to the parameter J, and one frame is composed of stamp video data from the first stamp video data to the last stamp video data read as an image for high-speed reproduction. Are read one by one.
[0137]
Next, in step S22, the system controller 113 sets the bank to be written to the memory 112 to either the bank 131A or the bank 131B.
[0138]
In this case, the write bank is set to the bank 131A.
[0139]
In step S23, the system controller 113 instructs the stamp video decoder 111 to clear the banks 131A and 131B of the memory 112. In response to the instruction, the stamp video decoder 111 (memory controller 122) clears the banks 131A and 131B of the memory 112.
[0140]
Next, in step S24, the system controller 113 waits until the bank 131 of the memory 112 is cleared in the processing of step S23, and when the bank 131 is cleared, proceeds to step S25.
[0141]
In step S25, the system controller 113 determines a frame of stamp video data to be read first as data for generating an image (one frame) for high-speed reproduction. Specifically, the frame is a frame having a frame number indicated by the parameter T calculated according to the following equation.
T = PR
[0142]
In this case, since P = 3 and R = 2, the frame of the stamp video data which is read first as data for generating an image for high-speed reproduction is the frame with the first frame number.
[0143]
The system controller 113 also sets 1 to the parameter MR, and sets the memory area of the bank 131, which is the write bank of the memory 112 to which data is written, as the memory area MR1.
[0144]
In this case, the memory area of the bank 131A of the memory 112 is the memory area MR1.
[0145]
Next, in step S26, the system controller 113 instructs the media controller 42 and the stamp video decoder 111 to write the stamp video data into the memory 112.
[0146]
In response to the command, the media controller 42 reads the stamp video data constituting the frame (the frame having the frame number T) determined in step S25 from the optical disc 3 via the reproduction driver 41, and outputs an error code thereto. After performing the used error correction processing, the data is supplied to the stamp video decoder 111.
[0147]
The decompression unit 121 of the stamp video decoder 111 decodes the stamp video data supplied from the media controller 42 and supplies the decoded video to the memory controller 122. The memory controller 122 writes the decoded video data from the decompression unit 121 into the memory area MR1 set in step S25 of the bank 131, which is the write bank in step S22 of the memory 112.
[0148]
In this case, the stamp video data forming the first frame is decoded and written into the memory area MR1 of the bank 131A of the memory 112.
[0149]
In step S27, the system controller 113 waits until the writing of the stamp video data to the memory 112 is completed in the processing in step S26, and when the writing is completed, the process proceeds to step S28.
[0150]
In step S28, the system controller 113 determines a frame of the stamp video data to be read next. Specifically, the parameter T is updated according to the following equation, and the frame of the frame number indicated by the parameter T is set as the next read frame.
T = T + J
[0151]
The system controller 113 also changes the memory area MR where the stamp video data is written. Specifically, the parameter MR is updated according to the following equation, and the memory area MR indicated by the parameter MR is used as a memory area for storing stamp video data.
MR = MR + 1
[0152]
In this case, the second (= 1 + 1) th frame is the next read frame, and the memory area MR2 (= 1 + 1) is a memory area for storing stamp video data.
[0153]
Next, in step S29, the system controller 113 determines whether or not stamp video data to be read last as data for generating an image (one frame) for high-speed reproduction has been written to the memory 112. Specifically, it is determined whether the following equation is satisfied.
T> P + F
[0154]
If it is determined in step S29 that the stamp video data has not yet been written to the memory 112, the process returns to step 26, and the subsequent processing is performed.
[0155]
In this case, since 2 <3 + 2, the flow returns to step S26, where the stamp video data forming the second frame is decoded and written to the memory area MR2 of the bank 131A of the memory 112.
[0156]
That is, in step S29, the processing of steps S26 to S29 is repeated until the stamp video data to be read last as data for generating an image for high-speed reproduction is written in the memory 112 (until T> P + F is satisfied). Be executed. As a result, in this case, the stamp video data constituting the first to fifth frames is stored in the memory regions MR1 to MR5 of the bank 131A of the memory 112, respectively.
[0157]
If it is determined in step S29 that the stamp video data has been written to the memory 112, the process proceeds to step S30.
[0158]
In this case, when the stamp video data forming the fifth frame is written in the memory area MR5 of the bank 131A of the memory 112 in the process of step S26 (6> 3 + 2), the process proceeds to step S30. .
[0159]
In step S30, the system controller 113 sets the read bank of the memory 112 to be the same as the write bank.
[0160]
In this case, the bank 131A is a read bank.
[0161]
Next, in step S31, the system controller 113 instructs the stamp video decoder 111 to output an image for high-speed reproduction.
[0162]
In response to the instruction, the memory controller 122 of the stamp video decoder 111 reads the image (one frame of the image for high-speed reproduction) stored therein from the bank 131 of the memory 112 set as the read bank in step S30. It is supplied to the reproduction switching controller 46.
[0163]
At this time, the reproduction switching controller 46 supplies the stamp video data supplied from the stamp video decoder 111 to the video process controller 47 since the high-speed reproduction mode is set in step S21.
[0164]
In this case, the video data stored in the bank 131A of the memory 112 (the first frame to the fifth frame arranged in the memory regions MR1 to MR5 as one frame of the image for high-speed reproduction) The constituent stamp video data is read out and supplied to the reproduction switching controller 46. The video data supplied to the playback switching controller 46 is supplied to a video process controller 47.
[0165]
The video data supplied to the video process controller 47 is subjected to predetermined image processing such as noise reduction processing and image quality correction processing, and then to the composite encoder 48 or the D1 encoder 50 and the parallel / serial conversion circuit. The image is output to the display device 5 via the display 51 and displayed as an image for high-speed reproduction. That is, in this case, as shown in FIG. 10, the images corresponding to the first to fifth frames displayed in the display areas DR1 to DR5 of the display device 5 are displayed as the reproduced video.
[0166]
Next, in step S32, the system controller 113 determines whether or not a user command for terminating high-speed playback has been input from the user interface 54, and when determining that the command has not been input, proceeds to step S33. , And the parameter P is updated according to the following equation.
P = P + N
[0167]
The system controller 113 also changes the write bank of the memory 112 according to the following equation. That is, the bank 131 that is not currently set as the write bank is set as the write bank.
Bank 131 = not (bank 131)
[0168]
In this case, the parameter P is 8 (= 3 + 5), and the write bank is the bank 131B.
[0169]
Thereafter, the process returns to step S25, and the subsequent processes are performed. That is, as a result, the stamp video data forming the sixth to tenth frames is stored in the memory areas MR1 to MR5 of the bank 131B of the memory 112, respectively, and an image for high-speed reproduction is generated. . Then, instead of the images in which the images corresponding to the first to fifth frames currently displayed are arranged, the images in which the images corresponding to the sixth to tenth frames are arranged are displayed on the display device 5. You.
[0170]
When it is determined in step S32 that a user command to end high-speed playback has been input from the user interface 54, the system controller 113 ends the high-speed playback processing.
[0171]
In the above description, the case of high-speed reproduction at 5 × speed has been described as an example. However, even at the time of high-speed reproduction at 2 ×, 3 ×, or 7 × speed, the parameters N, R, F, and J are set as follows. , It is possible to display an image for high-speed reproduction basically similar to the case of 5 × speed.
In the case of 2 × speed reproduction, N = 2, R = 0, F = 1, J = 1
In the case of triple-speed playback, N = 3, R = 1, F = 1, J = 1,
In the case of 7 × speed reproduction, N = 7, R = 3, F = 3, and J = 1.
[0172]
That is, in the case of double-speed playback, images corresponding to the stamp video data of two frames are displayed in the display areas DR1 and DR2 of the display device 5 as shown in FIG. 16 are displayed in the display areas DR1, DR2, DR3 of the display device 5 as shown in FIG. 16, and in the case of 7 × speed reproduction, the images corresponding to the seven frames are shown in FIG. As described above, the image is displayed in the display areas DR1, 2, 3, 4, 5, 6, and 7 of the display device 5.
[0173]
Further, even at a double speed exceeding the number of frames of stamp video data that can be reproduced within the reproduction rate, an image for high-speed reproduction can be displayed in the same manner.
[0174]
For example, when 14 times speed reproduction is requested in a case where stamp video data for 7 frames can be reproduced within the reproduction rate, the parameters N, R, F, and J are set as follows. In this case, seven memory areas MR1 to MR7 are provided in the bank 131 of the memory 112.
N = 14, R = 6, F = 6, J = 2
[0175]
For example, when the parameter P is set to 7, the image for high-speed reproduction at this time is the first (= 7−6) frame, the third frame, the fifth frame, the seventh frame, and the ninth frame. Frames, images corresponding to the eleventh frame and the thirteenth frame are displayed in the display areas DR1 to DR7 (for example, FIG. 17) of the display device 5, and the fifteenth frame and the seventeenth frame , The image corresponding to the 19th frame, the 21st frame, the 23rd frame, the 25th frame, and the 27th frame are displayed in the display areas DR1 to DR7 of the display device 5, and the like. It becomes an image for high-speed reproduction.
[0176]
In the above description, by increasing the values of the parameters R, F, and J, it is possible to display an image that is more advanced and an image that is later than the reference frame. Timing delay when switching to the reproduction or stop mode can be prevented.
[0177]
For example, in the case of 5 × speed reproduction, if parameters N = 5, R = 8, F = 8, and J = 4, when parameter P = 9, the 1st (= 9−8) frame, the 5th frame, An image for high-speed reproduction in which images corresponding to the ninth frame, the thirteenth frame, and the seventeenth frame are displayed in a predetermined area is generated.
[0178]
If a function for enlarging or interpolating the stamp video data is provided, an image corresponding to the stamp video data can be enlarged and displayed as shown in FIG. 18, or a reference frame can be formed as shown in FIG. The image corresponding to the stamp video data to be displayed can be enlarged and displayed at the center.
[0179]
【The invention's effect】
According to the first aspect of the present invention, it is possible to obtain a smooth reproduced image when performing high-speed reproduction.
[0180]
According to the second aspect of the present invention, it is possible to obtain a smooth reproduced video when performing high-speed reproduction.
[Brief description of the drawings]
FIG. 1 is a diagram illustrating an example of use of a playback device according to the present invention.
FIG. 2 is a block diagram illustrating a configuration example of the recording apparatus of FIG.
FIG. 3 is a diagram showing each recording area of the optical disc of FIG. 1;
FIG. 4 is a diagram showing a GOP structure of MPEG2 video data.
FIG. 5 is a block diagram illustrating a configuration example of a stamp video encoder 19 in FIG. 2;
FIG. 6 is a block diagram illustrating a configuration example of the playback device of FIG. 1;
FIG. 7 is a block diagram illustrating a configuration example of a stamp video decoder of FIG. 6;
FIG. 8 is a flowchart illustrating the operation of the playback device of FIG. 1 when performing high-speed playback.
FIG. 9 is a diagram showing a usage example of another playback device of the present invention.
FIG. 10 is a diagram illustrating a display example of an image for high-speed reproduction.
FIG. 11 is a diagram showing another display example of an image for high-speed reproduction.
12 is a block diagram illustrating a configuration example of the playback device in FIG. 9;
13 is a block diagram illustrating a configuration example of a stamp video decoder in FIG.
FIG. 14 is a flowchart illustrating the operation of the playback device of FIG. 9 when performing high-speed playback.
FIG. 15 is a diagram showing another display example of an image for high-speed reproduction.
FIG. 16 is a diagram showing another display example of an image for high-speed reproduction.
FIG. 17 is a diagram showing another display example of an image for high-speed reproduction.
FIG. 18 is a diagram illustrating another display example of an image for high-speed reproduction.
FIG. 19 is a diagram showing another display example of an image for high-speed reproduction.
[Explanation of symbols]
Reference Signs List 1 imaging device, 2 recording device, 3 optical disk, 4 playback device, 5 display device, 41 playback driver, 42 media controller, 44 stamp video decoder, 45 memory, 46 playback switching controller, 53 system controller, 54 user interface, 61 Decompressor, 62 memory controller / arithmetic processor, 63 pixel interpolator, 101 playback device, 111 stamp video decoder, 112 memory, 113 system controller, 121 decompressor, 122 memory controller

Claims (8)

高速再生が要求されたとき、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体から、前記低データレートのビデオデータを読み出す読み出し手段と、
前記読み出し手段により読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの前記低データレートのビデオデータの一部づつを互いに重ね合わせて構成される高速再生用の画像を、前記出力レートにおける1フレーム時間毎に生成する生成手段と、
前記生成手段により生成された前記高速再生用の画像を出力する出力手段と
を備えることを特徴とする再生装置。
Reading means for reading out the low data rate video data from a recording medium recording high data rate video data and low data rate video data generated from the same moving picture material when high speed reproduction is requested When,
For high-speed reproduction configured by superimposing parts of the low-data-rate video data of at least two or more frames out of a plurality of frames that can be output within the output rate and read by the reading unit. Generating means for generating the image of the above every frame time at the output rate;
An output unit that outputs the high-speed playback image generated by the generation unit.
前記生成手段は、N倍速再生が要求されたとき、Nフレーム毎のフレームを基準フレームとして、前記基準フレームを中心とする前後の少なくとも2個以上のフレームの前記低データレートのビデオデータから、前記高速再生用の画像を生成する
ことを特徴とする請求項1に記載の再生装置。
The generating means, when N-times speed reproduction is requested, sets the frame of every N frames as a reference frame, from the low data rate video data of at least two or more frames before and after the reference frame. The reproduction apparatus according to claim 1, wherein an image for high-speed reproduction is generated.
高速再生が要求されたとき、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体から、前記低データレートのビデオデータを読み出す読み出しステップと、
前記読み出しステップの処理で読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの前記低データレートのビデオデータの一部づつを互いに重ね合わせて構成される高速再生用の画像を、前記出力レートにおける1フレーム時間毎に生成する生成ステップと、
前記生成ステップの処理で生成された前記高速再生用の画像を出力する出力ステップと
を含むことを特徴とする再生方法。
A step of reading the low data rate video data from a recording medium recording high data rate video data and low data rate video data generated from the same moving image material when high speed playback is requested; When,
A high-speed configuration in which a part of the low-data-rate video data of at least two or more frames out of a plurality of frames that can be output within the output rate and that are read in the processing of the reading step are overlapped with each other. Generating an image for reproduction for each frame time at the output rate;
An output step of outputting the high-speed playback image generated in the processing of the generation step.
高速再生が要求されたときの、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体からの、前記低データレートのビデオデータの読み出しを制御する読み出し制御ステップと、
前記読み出し制御ステップの処理で読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの前記低データレートのビデオデータの一部づつを互いに重ね合わせて構成される高速再生用の画像の、前記出力レートにおける1フレーム時間毎の生成を制御する生成制御ステップと
を含む処理をコンピュータに実行させることを特徴とするプログラム。
Reading of the low data rate video data from a recording medium that records high data rate video data and low data rate video data generated from the same moving picture material when high speed playback is requested A read control step of controlling
The low-data-rate video data of at least two or more frames out of a plurality of frames that can be output within the output rate and that are read in the processing of the read control step are partially overlapped with each other. A program for causing a computer to execute a process including: a generation control step of controlling generation of an image for high-speed reproduction for each frame time at the output rate.
高速再生が要求されたとき、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体から、前記低データレートのビデオデータを読み出す読み出し手段と、
前記読み出し手段により読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの前記低データレートのビデオデータのそれぞれが1つのフレーム内の所定の表示位置に位置する高速再生用の画像を、前記出力レートにおける1フレーム時間毎に生成する生成手段と、
前記生成手段により生成された前記高速再生用の画像を出力する出力手段と
を備えることを特徴とする再生装置。
Reading means for reading out the low data rate video data from a recording medium recording high data rate video data and low data rate video data generated from the same moving picture material when high speed reproduction is requested When,
Each of the low-data-rate video data of at least two or more frames out of a plurality of frames that can be output within the output rate read by the reading unit is located at a predetermined display position in one frame. Generating means for generating an image for high-speed reproduction for each frame time at the output rate;
An output unit that outputs the high-speed playback image generated by the generation unit.
前記生成手段は、N倍速再生が要求されたとき、Nフレーム毎のフレームを基準フレームとして、前記基準フレームを中心とする少なくとも2個以上のフレームの前記低データレートのビデオデータから、前記高速再生用の画像を生成する
ことを特徴とする請求項5に記載の再生装置。
When the N-times speed reproduction is requested, the generation unit sets the high-speed reproduction from the low-data-rate video data of at least two or more frames centered on the reference frame, using a frame every N frames as a reference frame. The reproduction apparatus according to claim 5, wherein an image for use is generated.
高速再生が要求されたとき、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体から、前記低データレートのビデオデータを読み出す読み出しステップと、
前記読み出しステップの処理で読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの前記低データレートのビデオデータのそれぞれが1つのフレーム内の所定の表示位置に位置する高速再生用の画像を、前記出力レートにおける1フレーム時間毎に生成する生成ステップと、
前記生成ステップの処理で生成された前記高速再生用の画像を出力する出力ステップと
を含むことを特徴とする再生方法。
A step of reading the low data rate video data from a recording medium recording high data rate video data and low data rate video data generated from the same moving image material when high speed playback is requested; When,
Each of the low-data-rate video data of at least two or more frames out of a plurality of frames that can be output within the output rate read in the processing of the reading step is located at a predetermined display position in one frame. Generating a positioned high-speed playback image for each frame time at the output rate;
An output step of outputting the high-speed playback image generated in the processing of the generation step.
高速再生が要求されたときの、同一の動画像素材から生成された高データレートのビデオデータおよび低データレートのビデオデータを記録している記録媒体からの、前記低データレートのビデオデータの読み出しを制御する読み出し制御ステップと、
前記読み出し制御ステップの処理で読み出された、出力レート内で出力可能な複数フレームのうちの少なくとも2個以上のフレームの前記低データレートのビデオデータのそれぞれが1つのフレーム内の所定の表示位置に位置する高速再生用の画像の、前記出力レートにおける1フレーム時間毎の生成を制御する生成制御ステップと
を含む処理をコンピュータに実行させることを特徴とするプログラム。
Reading of the low data rate video data from a recording medium that records high data rate video data and low data rate video data generated from the same moving picture material when high speed playback is requested A read control step of controlling
Each of the low-data-rate video data of at least two or more frames out of a plurality of frames that can be output within the output rate read in the processing of the read control step is a predetermined display position in one frame. A generation control step of controlling generation of an image for high-speed reproduction at the output rate for each frame time, the program being executed by a computer.
JP2002212708A 2002-07-22 2002-07-22 Playback apparatus and method, and program Expired - Fee Related JP4081810B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002212708A JP4081810B2 (en) 2002-07-22 2002-07-22 Playback apparatus and method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002212708A JP4081810B2 (en) 2002-07-22 2002-07-22 Playback apparatus and method, and program

Publications (2)

Publication Number Publication Date
JP2004056582A true JP2004056582A (en) 2004-02-19
JP4081810B2 JP4081810B2 (en) 2008-04-30

Family

ID=31935558

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002212708A Expired - Fee Related JP4081810B2 (en) 2002-07-22 2002-07-22 Playback apparatus and method, and program

Country Status (1)

Country Link
JP (1) JP4081810B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006050391A (en) * 2004-08-06 2006-02-16 Matsushita Electric Ind Co Ltd Motion picture data reproducing apparatus and method, motion picture recording apparatus and method, and recording medium with motion picture data recorded thereon
WO2009139096A1 (en) * 2008-05-12 2009-11-19 三菱電機株式会社 Video reproducing apparatus and video reproducing method
US8411735B2 (en) 2006-02-17 2013-04-02 Sony Corporation Data processing apparatus, data processing method, and program
US8934550B2 (en) 2006-02-17 2015-01-13 Sony Corporation Data processing apparatus, data processing method, and program for processing image data of a moving image

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006050391A (en) * 2004-08-06 2006-02-16 Matsushita Electric Ind Co Ltd Motion picture data reproducing apparatus and method, motion picture recording apparatus and method, and recording medium with motion picture data recorded thereon
US7801411B2 (en) 2004-08-06 2010-09-21 Panasonic Corporation Moving picture data playback apparatus, moving picture data playback method, moving picture data recording apparatus, moving picture data recording method, and recording medium with moving picture data recorded thereon
US8411735B2 (en) 2006-02-17 2013-04-02 Sony Corporation Data processing apparatus, data processing method, and program
US8934550B2 (en) 2006-02-17 2015-01-13 Sony Corporation Data processing apparatus, data processing method, and program for processing image data of a moving image
WO2009139096A1 (en) * 2008-05-12 2009-11-19 三菱電機株式会社 Video reproducing apparatus and video reproducing method

Also Published As

Publication number Publication date
JP4081810B2 (en) 2008-04-30

Similar Documents

Publication Publication Date Title
JP3491366B2 (en) Special reproduction method and special reproduction apparatus for encoded data
JP4794386B2 (en) Imaging device
JPH08214265A (en) Method and device for reproducing encoded data
JP4221669B2 (en) Recording apparatus and method, recording medium, and program
JP3592025B2 (en) Captured image recording device
JP3221785B2 (en) Imaging device
JP3365109B2 (en) Data reproducing apparatus and data reproducing method
JP2008035281A (en) Image coding method
JP4211153B2 (en) Recording apparatus and method
JP4081810B2 (en) Playback apparatus and method, and program
JP2008252874A (en) Moving picture coding method, moving picture decoding method, moving picture coding device, and moving picture decoding device
US6999090B2 (en) Data processing apparatus, data processing method, information storing medium, and computer program
US20040233806A1 (en) Recording device and method, recording medium and program
JP3922490B2 (en) Video signal re-encoding device and method and video signal recording and re-encoding device and method
JP2004180345A (en) Photographed image recording apparatus
JP2009033604A (en) Video signal coding apparatus and method
JP2003023637A (en) Image coding method and image coding device
US7912340B2 (en) Data processing apparatus
JP4251859B2 (en) Data processing apparatus and method
JP4292465B2 (en) File recording apparatus and file recording method
US8149679B2 (en) Recording/reproducing device and method, recording medium, and program
JP4487196B2 (en) Recording apparatus and control method thereof
JP4609272B2 (en) RECORDING DEVICE, RECORDING METHOD, RECORDING PROGRAM, IMAGING DEVICE, IMAGING DEVICE RECORDING CONTROL METHOD, AND RECORDING CONTROL PROGRAM
JPH08130715A (en) Picture reproducing device
JP3880892B2 (en) Video recording / playback device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050708

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070531

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070730

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070824

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071022

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20071112

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080121

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080203

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110222

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120222

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130222

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees