JP4827934B2 - データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体 - Google Patents

データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体 Download PDF

Info

Publication number
JP4827934B2
JP4827934B2 JP2009000870A JP2009000870A JP4827934B2 JP 4827934 B2 JP4827934 B2 JP 4827934B2 JP 2009000870 A JP2009000870 A JP 2009000870A JP 2009000870 A JP2009000870 A JP 2009000870A JP 4827934 B2 JP4827934 B2 JP 4827934B2
Authority
JP
Japan
Prior art keywords
data
video
atom
stream
recording
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2009000870A
Other languages
English (en)
Other versions
JP2009118512A (ja
Inventor
次郎 木山
裕利 岩野
孝好 山口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2009000870A priority Critical patent/JP4827934B2/ja
Publication of JP2009118512A publication Critical patent/JP2009118512A/ja
Application granted granted Critical
Publication of JP4827934B2 publication Critical patent/JP4827934B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • G11B20/1217Formatting, e.g. arrangement of data block or words on the record carriers on discs
    • G11B20/1251Formatting, e.g. arrangement of data block or words on the record carriers on discs for continuous data, e.g. digitised analog information signals, pulse code modulated [PCM] data
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327Table of contents
    • G11B27/329Table of contents on a disc [VTOC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23406Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving management of server-side video buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42646Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4825End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/1062Data buffering arrangements, e.g. recording or playback buffers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/1062Data buffering arrangements, e.g. recording or playback buffers
    • G11B2020/10805Data buffering arrangements, e.g. recording or playback buffers involving specific measures to prevent a buffer overflow
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/1062Data buffering arrangements, e.g. recording or playback buffers
    • G11B2020/10814Data buffering arrangements, e.g. recording or playback buffers involving specific measures to prevent a buffer underrun
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2545CDs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/781Television signal recording using magnetic recording on disks or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、映像データ、音声データをハードディスク、光ディスク等のランダムアクセス可能な記録媒体に対して記録・再生するデータ記録方法、データ編集方法およびデータ復号方法、及びその装置、及び記録媒体に関するものである。
ディスクメディアを用いたビデオや音声のディジタル記録再生装置が普及しつつある。テープメディアにはないディスクメディアにおける特徴機能として、非破壊編集機能あるいはノンリニア編集機能と呼ばれるものがある。この機能は、ディスク上に記録したAVストリームを移動あるいはコピーすることなく、AVストリームの任意の区間を任意の順番で再生できる、というもので、AVストリームのどこからどこまでどういう順番で再生するかを示す情報(再生管理情報)を作り、その情報に従って再生することで実現される。
このようなディスクメディアでは、素材を書き換えたりデータを移動することなく、編集を行うことが可能なわけであるが、素材を直接編集したい場合もある。例えば、非破壊編集した結果を、パーソナル・コンピュータ(PC)で扱いやすいように1個のファイルにまとめたいとする。この場合、編集結果で使用されている部分のみを個々のAVストリームから抜き出し結合して1個のファイルにまとめることになる。
次のような場合もある。ディスクの空き容量を増やすため、AVストリーム中の不要な中間部分を削除したいとする。この場合、中間部分の前後を結合することになる。
以上のような場合、AVストリーム同士を繋ぎあわせることになる訳であるが、ビデオデータの符号化方式にMPEGビデオ規格(ISO/IEC 11172-2やISO/IEC 13818-2)を用いた場合、繋ぎ目において再生が乱れるおそれがある。
その理由について、以下に説明する。MPEGビデオ規格では可変長符号化を採用しており、符号化データを所定のレートで符号化する場合、VBV(Video Buffering Verifier)と呼ばれる仮想デコーダモデルを符号化器の出力に接続して使用し、そのデコードバッファ(VBVバッファ)がオーバーフローもアンダーフローも発生しないように符号化することが規定されている。
このモデルでは、上記の所定レート以下で符号化データがVBVバッファに入力され、そのレートでVBVバッファのデータ占有量が増加する。その一方、フレームあるいはフィールドの復号が終了する毎、一瞬でその符号化データ量分、データ占有量が減少する。
MPEGビデオによる符号化データは、このような増加・減少を繰り返しても、図22に示すようなVBVバッファがアンダーフローやオーバーフローを起こさないように制御して符号化されなければ、正常な再生は保証されない。ビデオデータを繋ぎ合わせた場合に、再生が乱れるおそれがあるのは、繋ぎ合わせた箇所において、VBVバッファがアンダーフローやオーバーフローしてしまうおそれがあるためである。
繋ぎ合わせた箇所でVBVバッファが破綻する理由について、例を挙げて説明する。ここでは、VBVバッファの占有量の時間遷移がそれぞれ図23(a)に示すビデオ符号化データAの時間OUTの前半部と、図23(b)に示すビデオ符号化データBの時間INの後半部とを結合する場合について説明する。
図23(c)にその結果を示す。結合点直前のバッファ占有量が低いのにも関わらず、結合点直後で符合化データ量の大きいフレームあるいはフィールドの復号が発生しているため、バッファのアンダーフローが発生していることがわかる。ここのようなことが発生するのは、繋ぎ目においてはバッファ占有量の整合が取れない可能性があるためである。
上述の問題を解決する方法として、例えば特開平9-182024号公報では、復号器の入力データの転送速度を高めることにより、アンダーフローを防止する技術が提案されている(従来技術1、例えば、特許文献1参照)。
また別の方法として、例えば特開平8-251582号公報では、結合の際に繋ぎ目の部分を一旦復号し、VBVバッファが破綻しないような符号化データ量になるように符号化し直す技術(再符号化)が提案されている(従来技術2、例えば、特許文献2参照)。
特開平9-182024号公報 特開平8-251582号公報
しかしながら、従来技術1の場合、特殊な復号器を用意する必要があり、コストの面で不利になるという問題点がある。
また、従来技術2の場合においては、再符号化により画質が低下するおそれがあり、さらに符号化と復号を逐次的あるいは並列的に行う必要あるため、装置が複雑化するという問題も含んでいる。
本発明は、上記課題に鑑みてなされたものであり、AVストリームを繋ぎ合わせて構成されたAVストリームを再生する際に、再生の乱れが生じるのを、簡単な構成にて防止することが可能なデータ記録方法、データ編集方法、データ復号方法、データ記録装置、及びデータ復号装置を提供することを目的とする。
本願の第1の発明は、少なくとも映像又は音声からなる第1のデータを含む複数の第1のユニットで構成される第2のユニットと、前記第2のユニットを管理する第1のプログラムとを、記録媒体に記録するデータ記録方法であって、前記第1のプログラムが、前記第1のユニット間の結合箇所を管理する情報を有することを特徴とする。
本願の第2の発明は、前記結合箇所は、前記第2のユニット中から任意の前記第1のデータを削除した箇所であることを特徴とする。
本願の第3の発明は、前記第2のユニットは、1個のファイルで管理されることを特徴とする。
本願の第4の発明は、前記映像の第1のデータは、該映像をMPEG規格により符号化したものであることを特徴とする。
本願の第5の発明は、少なくとも映像又は音声からなる第1のデータを含む第1のユニットと、少なくとも映像又は音声からなる第2のデータを含む第3のユニットとを接続して、第2のユニットを作成するデータ編集方法であって、前記第2のユニットを管理する第1のプログラムが、前記第1のユニットと前記第3のユニットとの結合箇所を管理する情報を有することを特徴とする。
本願の第6の発明は、前記第1のユニットと前記第3のユニットは、前記第2のユニット中の任意の前記第1のデータを削除することによって形成されることを特徴とする。
本願の第7の発明は、前記第2のユニットは、1個のファイルで管理されることを特徴とする。
本願の第8の発明は、前記映像の第1、第2のデータは、該映像をMPEG規格により符号化したものであることを特徴とする。
本願の第9の発明は、少なくとも映像又は音声からなる第1のデータを含む複数の第1のユニットで構成される第2のユニットを、該第2のユニットを管理する第1のプログラムに従って復号するデータ復号方法であって、前記第1のプログラムが、前記第1のユニット間の結合箇所を管理する情報を有し、前記結合箇所情報に基づき、前記第1のユニットの復号を制御することを特徴とする。
本願の第10の発明は、前記第1のユニットの復号の制御は、前記結合箇所において復号を一時停止することを特徴とする。
本願の第11の発明は、前記第1のユニットの復号の制御は、前記結合箇所の前後で復号器を切り替えることを特徴とする。
本願の第12の発明は、前記映像の第1,第2のデータは、該映像をMPEG規格により符号化したものであることを特徴とする。
本願の第13の発明は、少なくとも映像又は音声からなる第1のデータを含む複数の第1のユニットで構成される第2のユニットと、前記第2のユニットを管理する第1のプログラムとを、記録媒体に記録するデータ記録装置であって、前記第1のプログラムが、前記第1のユニット間の結合箇所を管理する情報を有することを特徴とする。
本願の第14の発明は、少なくとも映像又は音声からなる第1のデータを含む第1のユニットと、少なくとも映像又は音声からなる第2のデータを含む第3のユニットとを接続して、第2のユニットを作成するデータ編集装置であって、前記第2のユニットを管理する第1のプログラムが、前記第1のユニットと第3のユニットとの結合箇所を管理する情報を有することを特徴とする。
本願の第15の発明は、少なくとも映像又は音声からなる第1のデータを含む複数の第1のユニットで構成される第2ユニットを、該第2のユニットを管理する第1のプログラムに従って復号するデータ復号装置であって、前記第1のプログラムが、前記第1のユニットの結合箇所情報を管理し、前記結合箇所情報に基づき、復号の制御を行う前記第1のユニットの復号器を備えたことを特徴とする。
本発明の実施形態におけるビデオディスクレコーダの概略構成を示すブロック図である。 QuickTimeファイルフォーマットにおける管理情報とAVストリームの関係を示す説明図である。 QuickTimeファイルフォーマットにおけるMovie atomの概要を示す説明図である。 QuickTimeファイルフォーマットにおけるTrack atomの概要を示す説明図である。 QuickTimeファイルフォーマットにおけるTrack header atomの概要を示す説明図である。 QuickTimeファイルフォーマットにおけるMedia atomの概要を示す説明図である。 QuickTimeファイルフォーマットにおけるMedia information atomの概要を示す説明図である。 Sample table atomによるデータ管理の例を示す説明図である。 QuickTimeファイルフォーマットにおけるSample table atomの概要を示す説明図である。 QuickTimeファイルフォーマットにおけるEdit atomの概要を示す説明図である。 Edit atomによる再生範囲指定の例を示す説明図である。 QuickTimeファイルフォーマットにおけるUser-defined data atomの概要を示す説明図である。 本発明の第1の実施例におけるストリームの構成を示す説明図である。 本発明の第1の実施例におけるVUの構造を示す説明図である。 本発明の第1の実施例におけるQuickTimeによるAVストリーム管理形態を示す説明図である。 本発明の第1の実施例における記録動作を示すフローチャートである。 本発明の第1の実施例におけるAVストリーム結合の状態を示す説明図である。 本発明の第1の実施例におけるAVストリーム結合を管理する情報の構成の第1の例を示す説明図である。 本発明の第1の実施例におけるAVストリーム結合を管理する情報の構成の第2の例を示す説明図である。 本発明の第1の実施例におけるAVストリーム結合を管理する情報の構成の第3の例を示す説明図である。 本発明の第1の実施例における再生動作を示すフローチャートである。 VBVバッファの占有量遷移の例を示す説明図である。 従来技術によるMPEGビデオストリーム結合の例を示す説明図である。
以下、本発明の実施形態について、図面を参照しながら詳細に説明する。
<システム構成>
図1は本実施形態において共通に用いる、アフレコ可能なビデオディスクレコーダの構成である。この装置は、図1に示すように、バス100、ホストCPU101、RAM102、ROM103、ユーザインタフェース104、システムクロック105、光ディスク106、ピックアップ107、ECCデコーダ108、ECCエンコーダ109、再生用バッファ110、記録/アフレコ用バッファ111、デマルチプレクサ112、マルチプレクサ113、多重化用バッファ114、オーディオデコーダ115、ビデオデコーダ116、オーディオエンコーダ117、ビデオエンコーダ118および図示されないカメラ、マイク、スピーカ、ディスプレイ等で構成される。
ホストCPU101は、バス100を通じてデマルチプレクサ112、マルチプレクサ113、ピックアップ107、また図示していないが、オーディオデコーダ115、ビデオデコーダ116、オーディオエンコーダ117、ビデオエンコーダ118との通信を行う。
再生時には、光ディスク106からピックアップ107を通じて読み出されたデータは、ECCデコーダ108によって誤り訂正され、再生用バッファ110に一旦蓄えられる。デマルチプレクサ112は、オーディオデコーダ115、ビデオデコーダ116からのデータ送信要求に従って、再生用バッファ中のデータをその種別によって適当なデコーダに振り分ける。
一方、記録時には、オーディオエンコーダ117とビデオエンコーダ118によって圧縮符号化されたデータは、多重化用バッファ114に一旦送られ、マルチプレクサ113によってAV多重化され、記録/アフレコ用バッファ111に送られる。記録/アフレコ用バッファ111中のデータは、ECCエンコーダ109によって誤り訂正符号を付加され、ピックアップ107を通じて光ディスク106に記録される。
オーディオデータの符号化方式にはMPEG-1 Layer-IIを、ビデオデータの符号化方式にはMPEG-2をそれぞれ用いる。
光ディスク106は、外周から内周に向かって螺旋状に記録再生の行われる脱着可能な光ディスクとする。2048byteを1セクタとし、誤り訂正のため16セクタでECCブロックを構成する。ECCブロック中のデータを書き換える場合、そのデータが含まれるECCブロック全体を読み込み、誤り訂正を行い、対象のデータを書き換え、再び誤り訂正符号を付加し、ECCブロックを構成し記録媒体に記録する必要がある。
また、記録効率を上げるためZCAV(ゾーン角速度一定)を採用しており、記録領域は回転数の異なる複数のゾーンで構成される。
<ファイルシステム>
光ディスク106上の各種情報を管理するためにファイルシステムを用いる。ファイルシステムには、PCとの相互運用を考慮してUDF(Universal Disk Format)を使用する。ファイルシステム上では、各種管理情報やAVストリームはファイルとして扱われる。ユーザエリアは、2048byteの論理ブロック(セクタと一対一対応)で管理される。
各ファイルは、整数個のエクステント(連続した論理ブロック)で構成され、エクステント単位で分散して記録してもよい。空き領域は、Space Bitmapを用いて論理ブロック単位で管理される。
上記エクステントを表す情報やSpace Bitmap等、ファイルシステムに関する管理情報は光ディスク106上に記録される。
<ファイルフォーマット>
AVストリーム管理のためのフォーマットとして、QuickTimeファイルフォーマットを用いる。QuickTimeファイルフォーマットとは、Apple社が開発したマルチメディアデータ管理用フォーマットであり、PCの世界で広く用いられている。
QuickTimeファイルフォーマットは、ビデオデータやオーディオデータ等(これらを総称してメディアデータとも呼ぶ)と管理情報とで構成される。両者を合わせてここでは、QuickTimeムービー(略してムービー)と呼ぶ。両者は同じファイル中に存在しても、別々のファイルに存在してもよい。
同じファイル中に存在する場合は、図2(a)に示すファイル201のような構成をとる。各種情報は、atomという共通の構造に格納される。管理情報はMovie atomという構造に格納され、AVストリームはMovie data atomという構造に格納される。
尚、Movie atomはメディアデータの任意の区間を任意の順序で再生することを制御するための一種のプログラム情報であり、メディアデータ中の任意の時間に対応するAVデータのファイル中での相対位置を導くためのテーブルや、メディアデータの属性情報や、後述する外部参照情報などが含まれている。
一方、管理情報とメディアデータを別々のファイルに格納した場合は、図2(b)に示すファイル202,203のような構成をとる。管理情報はMovie atomという構造に格納されるが、AVストリームはatomには格納される必要はない。このとき、Movie atomはAVストリームを格納したファイル203を「外部参照」している、という。
外部参照は、図2(c)に示すように、ファイル204のMovie atom が複数のファイル205,206 に設けたAVストリームファイル#1,#2に対して行うことが可能であり、この仕組みにより、AVストリーム自体を物理的に移動することなく、見かけ上編集を行ったように見せる、いわゆる「ノンリニア編集」「非破壊編集」が可能になる。
それでは、図3乃至図12を用いて、QuickTimeの管理情報のフォーマットについて説明する。まず、共通の情報格納フォーマットであるatomについて説明する。atomの先頭には、そのatomのサイズであるAtom size、そのatomの種別情報であるTypeが必ず存在する。Typeは4文字で区別され、例えばMovie atomでは’moov’、Movie data atomでは’mdat’となっている。
各atomは別のatomを含むことができる。すなわち、atom間には階層構造がある。Movie atomの構成を図3に示す。Movie header atom は、そのMovie atomが管理するムービーの全体的な属性を管理する。Track atomは、そのムービーに含まれるビデオやオーディオ等のトラックに関する情報を格納する。User-defined data atomは、独自に定義可能なatomである。
Track atomの構成を図4に示す。Track header atomは、そのトラックの全体的な属性を管理する。Edit atomは、メディアデータのどの区間をムービーのどのタイミングで再生するかを管理する。Track reference atomは、別のトラックとの関係を管理する。Media atomは、実際のビデオやオーディオといったデータを管理する。
Track header atomの構成を図5に示す。ここでは、後での説明に必要なもののみ説明する。flagsは属性を示すフラグの集合である。代表的なものとして、Track enabledフラグがあり、このフラグが1であれば、そのトラックは再生され、0であれば、再生されない。layerはそのトラックの空間的な優先度を表しており、画像を表示するトラックが複数あれば、layerの値が小さいトラックほど画像が前面に表示される。
Media atomの構成を図6に示す。Media header atomは、そのMedia atomの管理するメディアデータに関する全体的な属性等を管理する。Handler reference atomは、メディアデータをどのデコーダでデコードするかを示す情報を格納する。Media information atomは、ビデオやオーディオ等メディア固有の属性情報を管理する。
Media information atomの構成を図7に示す。Media information header atomは、ビデオやオーディオ等メディア固有の属性情報を管理する。Handler reference atomは、Media atomの項で説明したとおりである。Data information atomは、そのQuickTimeムービーが参照するメディアデータを含むファイルの名前を管理するatomであるData reference atomを含む。Sample table atomは、データのサイズや再生時間等を管理している。
次に、Sample table atomについて説明するが、その前に、QuickTimeにおけるデータの管理方法について、図8に示すファイル801を用いて説明する。QuickTimeでは、データの最小単位(例えばビデオフレーム)をサンプル(sample)と呼ぶ。個々のトラック毎に、サンプルには再生時間順に1から番号(サンプル番号)がついている。
QuickTimeフォーマットでは、個々のサンプルの再生時間長およびデータサイズを管理している。また、同一トラックに属するサンプルが再生時間順にファイル中で連続的に配置された領域をチャンク(chunk)と呼ぶ。チャンクにも再生時間順に、1から番号がついている。
また、QuickTimeフォーマットでは、個々のチャンクのファイル先頭からのアドレスおよび個々のチャンクが含むサンプル数を管理している。これらの情報に基づき、任意の時間に対応するサンプルの位置を求めることが可能となっている。
Sample table atomの構成を図9に示す。Sample description atomは、個々のチャンクのデータフォーマット(Data format)やサンプルが格納されているファイルのインデックス等を管理するテーブルであり、データフォーマットやサンプルの格納されているファイル等が異なる場合、テーブル中の異なるエントリで管理される。なお、エントリとは、テーブル中において、他の情報から参照される情報の単位のことである。
Time-to-sample atomは、個々のサンプルの再生時間を管理する。Sync sample atomは、個々のサンプルのうち、デコード開始可能なサンプルを管理する。Sample-to-chunk atomは、個々のチャンクに含まれるサンプル数および個々のチャンクがSample description atom中のどのエントリを参照しているかを管理する。Sample size atomは、個々のサンプルのサイズを管理する。Chunk offset atomは、個々のチャンクのファイル先頭からのアドレスを管理する。
Edit atomは、図10に示すように、1個のEdit list atomを含む。Edit list atomは、Number of entriesで指定される個数分の、Track duration、Media time、Media rateの値の組(エントリ)を持つ。各エントリは、トラック上で連続的に再生される区間に対応し、そのトラック上での再生時間順に並んでいる。
Track durationはそのエントリが管理する区間のトラック上での再生時間、Media timeはそのエントリが管理する区間の先頭に対応するメディアデータ上での位置、Media rateはそのエントリが管理する区間の再生スピードを表す。尚、Media timeが-1の場合は、そのエントリのTrack duration分、そのトラックでのサンプルの再生を停止する。この区間のことをempty editと呼ぶ。
図11にEdit listの使用例を示す。ここでは、Edit list atomの内容が図11(a)に示す内容であり、さらにサンプルの構成が図11(b)であったとする。尚、ここではi番目のエントリのTrack durationをD(i)、Media timeをT(i)、Media rateをR(i)とする。このとき、実際のサンプルの再生は図11(c)に示す順に行われる。このことについて簡単に説明する。
まず、エントリ#1はTrack durationが13000、Media timeが20000、Media rateが1であるため(図11(a))、そのトラックの先頭から13000の区間(図11(c))はサンプル中の時刻20000から33000(=20000+13000)の区間を再生する(図11(b))。次に、エントリ#2はTrack durationが5000、Media timeが-1であるため(図11(a))、トラック中の時刻13000から18000(=13000+5000)の区間、何も再生を行わない(null, 図11(c))。
最後に、エントリ#3はTrack durationが10000、Media timeが0、Media rateが1であるため(図11(a))、トラック中の時刻18000(=13000+5000)から28000(=18000+10000)の区間において(図11(c))、サンプル中の時刻0から10000の区間を再生する(図11(b))。
図12にUser-defined data atomの構成を示す。このatomには、QuickTimeフォーマットで定義されてない独自の情報を任意個数格納することができる。1個の独自情報は1個のエントリで管理され、1個のエントリはSizeとTypeとUser dataとで構成される。Sizeはそのエントリ自体のサイズを表し、Typeは独自情報をそれぞれ区別するための識別情報、User dataは実際のデータを表す。
<インデックス・ファイル>
ディスク内に含まれるQuickTimeムービーを管理するため、AVインデックス・ファイルという特別のQuickTimeムービーファイルをディスク内に1個置く。AVインデックス・ファイルには、ディスク内のファイル(QuickTimeムービーやQuickTimeムービーから参照されている静止画等)に関するサムネイルや各種属性が登録されている。
各種属性の中には、そのファイルが外部参照されている回数を示すlink countがある。link countを参照することで、そのファイルを参照しているファイルがあるかどうかを容易に知ることができ、他から参照されているファイルを不用意に削除してしまうことを防ぐことができる。
<実施例1>
本発明の一実施例について、図13乃至図21を用いて説明する。
<AVストリームの形態>
本実施例におけるAVストリームの構成を、図13及び図14とともに説明する。AVストリームは、整数個のRecord Unit(RU)で構成される。RUはディスク上で連続的に記録する単位である。RUの長さは、AVストリームを構成するRUをどのようにディスク上に配置してもシームレス再生(再生中に絵や音が途切れないで再生できること)が保証されるように設定される。この設定方法については後述する。
また、RU境界がECCブロック境界と一致するようにストリームを構成する。RUのこれらの性質によって、AVストリームをディスクに記録した後も、シームレス再生を保証したまま、ディスク上でRU単位の配置を容易に変更することができる。
RUは整数個のVideo Unit(VU)で構成する。VUは単独再生可能な単位であり、そのことから再生の際のエントリ・ポイントとなりうる。VUの構成を図14に示す。VUは1秒程度のビデオデータを格納した整数個のGOP(グループ・オブ・ピクチャ)とそれらと同じ時間に再生されるメインオーディオデータを格納した整数個のAAU(オーディオ・アクセス・ユニット)で構成される。
尚、GOPはMPEG-2ビデオ規格における圧縮の単位であり、複数のビデオフレーム(典型的には15フレーム程度)で構成される。AAUはMPEG-1 LayerII規格における圧縮の単位で、1152点の音波形サンプル点により構成される。サンプリング周波数が48kHzの場合、AAUあたりの再生時間は0.024秒となる。
VU中ではAV同期再生のために必要となる遅延を小さくするため、AAU、GOPの順に配置する。また、VU単位で独立再生可能なように、VU中のビデオデータの先頭にはSequence Header(SH)を置く。
VUの再生時間は、VUに含まれるビデオフレーム数にビデオフレーム周期をかけたものと定義する。また、VUを整数個組み合わせてRUを構成する場合、RUの始終端をECCブロック境界に合わせるため、VUの末尾を0で埋める。
尚、本実施例では、図13および図14に示すAVストリーム構成を用いて説明しているが、本発明はこのストリーム構成に限定されるものではない。
<AVストリーム管理方法>
AVストリームの管理方法は、前述のQuickTimeファイルフォーマットをベースにしている。図15にQuickTimeによるAVストリーム管理形態を示す。AAUをオーディオデータのサンプル、Sequence headerと整数個のGOPをビデオデータのサンプルとし、VU中のメインオーディオとビデオの塊をそれぞれ1チャンクに対応させる。
<ディスク配置決定方法>
AVストリームのディスク上での配置決定方法について説明する。シームレス再生を保証するためには、次へのRUへのジャンプ時間も含めたRU読み出し時間がRUの再生時間より小さければよい。
つまり、RU再生時間をTe(i)、AVストリーム中の任意のRUであるRU#iについて最大再生時間をT(i)、分断ジャンプを含めた最大読み出し時間をTr(i)としたとき、Te(i)≧Tr(i)・・・<式1>、を満たせばよい。
AVストリーム中のメインオーディオ、ビデオの最大ビットレートをそれぞれRa、Rv、再生機器の最大アクセス時間をTa、連続読み出しレートをRsとしたとき、Tr(i)=Te(i)×(Rv+Ra)/Rs+Ta・・・<式2>、となる。
<式1><式2>をTe(i)で解いて、Te(i)≧Ta×Rs/(Rs-Rv-Ra)・・・<式3>、が得られる。
つまり、シームレス再生保証可能なRU再生時間下限値Teminは、Temin=Ta×Rs/(Rs-Rv-Ra)・・・<式4>、となる。
<記録時の処理>
ユーザから録画が指示された場合の処理を、図16に沿って説明する。このとき記録するAVストリームは、ビデオのビットレートRv=5Mbps、オーディオのサンプリング周波数48kHz、ビットレートRa=Rp=256kbpsであるものとする。すでに、ファイルシステムの管理情報はRAM上に読み込まれているとする。
まず、ストリームの構成や連続領域の構成を決定する(ステップ701)。1VUを1GOP=30フレームで構成するとしたとき、<式4>にRs=20Mbps、Ta=1秒、Rv=5Mbps、Ra=256kbpsを代入し、Te(i)の範囲である1.36秒以上が得られる。1VUの再生時間を0.5秒としているため、RU再生時間は2秒とする。
次に、2個のVUを連続的に記録可能な空き領域を探す。具体的には2×(Rv+Ra)、つまり11 Mbit以上の連続的な空き領域を、RAM102上のSpace Bitmapを参照して探す。存在しなければ録画を中止し、録画できないことをユーザに知らせる(ステップ702)。
また、オーディオエンコーダ117、ビデオエンコーダ118をそれぞれ起動する(ステップ703)。次に、記録用バッファに1ECCブロック分(32KB)以上のデータが蓄積されているかどうかをチェックし(ステップ704)、蓄積されている間、ステップ705からステップ708を繰り返す。
蓄積されていれば、次に記録するディスク上のECCブロックの空き状況を、RAM上のSpace Bitmapを参照して調べる(ステップ705)。空きがなければ、2個のVUを記録可能な連続的な空き領域を探し(ステップ707)、その空き領域の先頭へピックアップを移動する(ステップ708)。
次に、記録用バッファ111中の1ECCブロック分のデータを、ディスクに記録する(ステップ706)。記録用バッファ111にデータが蓄積されていなければ、記録終了が指示されているかどうかをチェックし(ステップ709)、記録終了でなければ、ステップ704を実行する。
記録終了が指示されていた場合、以下のステップを実行する。まず、記録用バッファ中の32KBに満たないデータに関して、末尾にダミーデータを付加し32KBにする(ステップ710)。次に、そのデータをディスク上に記録する(ステップ711〜ステップ714)。最後に、RAM102上のQuickTime管理情報(Movie atom)とファイルシステム管理情報を、光ディスク106に記録する(ステップ715〜ステップ716)。
以上の処理と並行するオーディオエンコーダ117、ビデオエンコーダ118やマルチプレクサ113の動作について説明する。それぞれのエンコーダはマルチプレクサ113にエンコード結果を送り、マルチプレクサはそれらを多重化用バッファ114に格納する。
1VU分のデータ、つまり1GOPとそれに同期して再生されるAAUが多重化用バッファ114に蓄積されたら、マルチプレクサ113は記録用バッファ111に1VUのデータを送る。さらに、ホストCPU101に1VU分のデータがエンコードできたことを通知し、ホストCPU101はVUを構成するGOPやAAUの数およびサイズを基に、RAM102上のQuickTime管理情報を更新する。
<編集時の処理>
AVストリームの途中をRU単位で削除することを考える。前述のように、RUの境界はECCブロック境界と一致する。さらに、ECCブロックは16セクタで構成され、セクタと論理ブロックは一致する。したがって、ファイルシステム管理情報とQuickTime管理情報を書き換えるのみで、RU単位の削除が可能である。
ファイルシステム管理情報に関しては、前述のSpace bitmap中の削除する領域に対応するビットを0にすることで、領域を開放し、削除対象RUを管理するエクステントを変更する。QuickTime管理情報に関しては、削除区間に含まれるサンプルをSample tableから削除し、削除区間の後に位置するチャンクのChunk offsetの値を削除区間のバイト数マイナスする。
また、削除による各トラックの再生時間の短縮に伴い、Edit list(図10,11)のTrack durationを短縮する(図10,11)。上記の削除により、AVストリームは削除区間の直前と直後とが接続された形となる。このとき、ビデオトラックについては、繋ぎ目を示すために、削除直前と削除直後の領域の繋ぎ目にあたる時刻の前後で別のエントリとする。
例えばAVストリーム#1とAVストリーム#2を繋ぐことによって、図17に示すような構成となったAVストリームがあった場合、Edit list atom(図10)を、図18に示すように、2エントリで構成する。一方、AVストリーム同士をRU単位で結合する場合も、削除の場合と同様、ファイルシステム管理情報とQuickTime管理情報とを書き換えることにより対応可能である。この情報により、トラックの時間軸における繋ぎ目の時刻および、その時刻に対応するデータのファイル中でのアドレスがわかる。
尚、本実施例では、繋ぎ目が1個の場合について説明したが、2個以上の場合、個数に応じてエントリ数を増やせばよいことは言うまでもない。
尚、ここでは、1トラックのビデオにおいて、Edit listのエントリを切り替えることで繋ぎ目を示したが、AVストリーム同士を結合することによって生じた、復号・再生に支障を来たす可能性のある箇所を示すことができればどのような方法を用いてもよいことは言うまでもない。一例を挙げると、繋ぎ目毎にビデオトラックを切り替えることで、繋ぎ目を示すことが考えられる。
具体的には、結合によって、図17に示すような構成となったAVストリームがあった場合、前半部と後半部とを別トラックで管理し、前半部・後半部を管理するトラックのEdit list atom(図10)の内容を、それぞれ図19(a)、(b)に示す内容とすることで、繋ぎ目を示すことが可能である。このとき、後の編集時にビデオトラック#1と#2が誤まって統合されることを防ぐために、ビデオトラック#1、#2の少なくとも1個の値、具体的にはCreation time(図5)等を異なる値にする。
また、繋ぎ目の前後で異なる内容のSample description atom(図9)を用いることで、繋ぎ目を示してもよい。具体的には、結合によって、図17に示すような構成となったAVストリームがあった場合、図20に示すように、AVストリーム#1中のビデオデータとAVストリーム#2中のビデオデータがSample description atomの異なるエントリ#1、#2で表される属性を参照するようにする。
このことにより、繋ぎ目を示すことが可能になる。さらに、Sample description atomのそれぞれのエントリ中の少なくとも1個の値が異なるようにすることで、後の編集時にSample description tableの最適化(内容の共通な複数のエントリを1個にまとめること)のためにエントリ#1、#2が誤まってマージされることを防ぐことが可能になる。
<再生時の処理>
ユーザから再生が指示された場合の処理を、図21に沿って説明する。ここでは、すでに再生の対象となるAVストリームに関するQuickTime管理情報がRAM102に読み込まれているものとする。
光ディスク106上の再生指示されたVUの先頭から再生用データの読み出しを行う(ステップ901)。このとき、十分な再生時間分のデータを再生用バッファ110へ読み出すまでステップ901を繰り返す(ステップ902)。
ここで十分とは、再生用データ読み出しの中断期間が最大の場合でも、再生が途切れないだけのデータ量を意味する。具体的には、AVデータの読み出しに伴う分断のジャンプ(最大1秒)を行った場合を想定し、1秒分のデータ量とする。
次に、ホストCPU101は、ビデオデコーダ116およびオーディオデコーダ115を起動する(ステップS903)。ホストCPU101は、QuickTime管理情報に基づき、デマルチプレクサ112に指令を出すことで、符号化データを再生用バッファ110からオーディオデコーダ115およびビデオデコーダ116へ転送する。
また、ユーザから再生終了を指示されていないかチェックする(ステップ904)。指示されていなければ、再生用AVデータの読み出しを行う(ステップ905)。再生終了を指示されていれば、終了する。
ホストCPU101はシステムクロック105を参照し、現在の時刻がビデオトラックのEdit list atom(図10)のエントリ(図11)の切り替えのタイミングであった場合、その箇所が繋ぎ目であると判断し、ビデオデコーダ116およびオーディオデコーダ115の復号を一時停止する。このとき、繋ぎ目を示すのに、ビデオチャンクの参照するSample description table(図20)のエントリの切り替わりを利用している場合は、エントリの切り替わりが発生した箇所を繋ぎ目と判断する。
このことによって、繋ぎ目直前のビデオフレームが複数フレーム連続して表示(フリーズ)されることになるが、その間にビデオデコーダ116のデコーダバッファにデータを貯えることができるため、バッファのアンダーフローは起きない。つまり、デコーダバッファのアンダーフローが発生したときのように、再生がしばらく乱れるようなことはない。また、もともと繋ぎ目における映像は不連続であるため、それ以外の箇所でフリーズが発生する場合に比べ、乱れが目立たない。
尚、本実施例では、ビデオデコーダが1個だけを用いているが、ビデオデコーダを複数個用意して繋ぎ目で切り替えてもよい。具体的には、再生時に以下のことを行う。まず、ビデオトラックのEdit list atom のエントリの切り替えからAVデータ中の実際の繋ぎ目の位置がわかるため、繋ぎ目以降のビデオデータを繋ぎ目以前のビデオデコーダとは別のビデオデコーダに送りデコードを開始し、いつでも表示可能な状態にしておく。次に、Edit list atomのエントリの切り替えのタイミングになった時点で、ビデオデコーダを繋ぎ目以前のものから繋ぎ目以降のものに切り替える。この場合、繋ぎ目の前後でデコーダが異なるため、VBVバッファの占有量の不連続が起こることはなく、さらに、ビデオデコーダが1個のときのようにフリーズさせる必要がない。
また、本実施例では、編集の際に生じる繋ぎ目を管理しているが、本発明の管理対象である繋ぎ目は編集の際に生じるものに限定されない。例えば、録画の際、新規のAVストリームを既存のAVストリームファイルの末尾に追加するかたちで行う場合、追加点の前後でVBVバッファ占有量の不連続が生じ、そのAVストリームファイルをそのまま再生した場合、追加点の直後で復号・再生が乱れるおそれがあるが、追加点を本実施例と同様に管理することで、そのような復号・再生の乱れを抑えることが可能である。
以上説明したように、本発明によれば、複数のAVストリームを繋ぎ合わせて1本のAVストリームを作成した場合に、そのAVストリームを管理する管理情報によって、繋ぎ目の位置情報を管理することで、再生時に繋ぎ目付近で表示が乱れることを防ぐことが可能になる。
映像データや音声データ等のAVストリームを、例えばハードディスクや光ディスク等のランダムアクセス可能な記録媒体に記録、復号する場合に、該AVストリーム間の再生データの乱れを防止できるデータ記録、編集、復号方法、並びにそれらの装置に適している。
100 バス
101 ホストCPU
106 光ディスク
108 ECCデコーダ
109 ECCエンコーダ
112 デマルチプレクサ
113 マルチプレクサ
115 オーディオデコーダ
116 ビデオデコーダ
117 オーディオエンコーダ
118 ビデオエンコーダ

Claims (1)

  1. 少なくとも映像データを含むAVストリームと、
    前記AVストリームに関するプログラム情報と、
    前記AVストリームと前記プログラム情報を各々ファイルとして管理するためのファイルシステム管理情報と、
    を記録媒体に記録するデータ記録方法であって、
    前記AVストリームは、1個のファイルとして管理され、
    前記プログラム情報は、前記AVストリーム内の連続的に再生可能な第1の区間に対応する第1のトラック情報を含んでおり、
    前記方法は、
    前記第1の区間から第2の区間を削除するステップと、
    前記AVストリーム内で前記削除した第2の区間の直前と直後の位置を繋ぎ合わせるように、前記ファイルシステム管理情報を書き換える第1の書き換えるステップと、
    繋ぎ目を示すために、前記繋ぎ目の前後で別のトラック情報に切り替わるように前記プログラム情報を書き換える第2の書き換えるステップと、
    を有することを特徴とするデータ記録方法。
JP2009000870A 2001-06-15 2009-01-06 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体 Expired - Lifetime JP4827934B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009000870A JP4827934B2 (ja) 2001-06-15 2009-01-06 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2001180952 2001-06-15
JP2001180952 2001-06-15
JP2009000870A JP4827934B2 (ja) 2001-06-15 2009-01-06 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2008182638A Division JP4684319B2 (ja) 2001-06-15 2008-07-14 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体

Publications (2)

Publication Number Publication Date
JP2009118512A JP2009118512A (ja) 2009-05-28
JP4827934B2 true JP4827934B2 (ja) 2011-11-30

Family

ID=19021289

Family Applications (5)

Application Number Title Priority Date Filing Date
JP2003506195A Expired - Fee Related JP3784387B2 (ja) 2001-06-15 2002-06-14 データ復号方法
JP2008182638A Expired - Fee Related JP4684319B2 (ja) 2001-06-15 2008-07-14 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体
JP2009000870A Expired - Lifetime JP4827934B2 (ja) 2001-06-15 2009-01-06 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体
JP2009000869A Expired - Lifetime JP4937280B2 (ja) 2001-06-15 2009-01-06 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体
JP2010072983A Expired - Fee Related JP4937370B2 (ja) 2001-06-15 2010-03-26 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2003506195A Expired - Fee Related JP3784387B2 (ja) 2001-06-15 2002-06-14 データ復号方法
JP2008182638A Expired - Fee Related JP4684319B2 (ja) 2001-06-15 2008-07-14 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2009000869A Expired - Lifetime JP4937280B2 (ja) 2001-06-15 2009-01-06 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体
JP2010072983A Expired - Fee Related JP4937370B2 (ja) 2001-06-15 2010-03-26 データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体

Country Status (7)

Country Link
US (6) US7653285B2 (ja)
EP (6) EP2204989A1 (ja)
JP (5) JP3784387B2 (ja)
KR (1) KR100537392B1 (ja)
CN (8) CN101430909B (ja)
ES (1) ES2364374T3 (ja)
WO (1) WO2002104016A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1309196A3 (en) * 2001-10-29 2005-07-20 Matsushita Electric Industrial Co., Ltd. File creating method and data reproduction method
JP2005012262A (ja) * 2003-06-16 2005-01-13 Canon Inc 記録装置、記録方法、記録再生装置及び記録再生方法
JP4217553B2 (ja) * 2003-07-09 2009-02-04 キヤノン株式会社 動画像記録装置及びその方法
JP4035824B2 (ja) * 2003-07-30 2008-01-23 ソニー株式会社 編集装置
KR100524770B1 (ko) * 2003-09-17 2005-10-31 엘지전자 주식회사 주문형 비디오 서비스 장치 및 방법
JP5381454B2 (ja) * 2009-07-23 2014-01-08 ソニー株式会社 映像音声記録装置及び編集方法
JP5919665B2 (ja) * 2011-07-19 2016-05-18 日本電気株式会社 情報処理装置、物体追跡方法および情報処理プログラム
JP5848594B2 (ja) * 2011-12-14 2016-01-27 キヤノン株式会社 記録装置
JP5917123B2 (ja) * 2011-12-14 2016-05-11 キヤノン株式会社 記録装置
JP6467680B2 (ja) * 2014-01-10 2019-02-13 パナソニックIpマネジメント株式会社 ファイル生成方法およびファイル生成装置

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6482024A (en) 1987-09-25 1989-03-28 Brother Ind Ltd Image output device
JPH0251582A (ja) 1988-08-12 1990-02-21 Kyokado Eng Co Ltd 地盤注入用薬液
JP3509080B2 (ja) * 1993-10-15 2004-03-22 ソニー株式会社 データ再生装置
US5534944A (en) * 1994-07-15 1996-07-09 Matsushita Electric Corporation Of America Method of splicing MPEG encoded video
JPH0863867A (ja) 1994-08-24 1996-03-08 Nippon Columbia Co Ltd 光ディスク再生装置
JPH08251582A (ja) 1995-03-07 1996-09-27 Toshiba Corp 符号化データ編集装置
JP3603381B2 (ja) 1995-04-07 2004-12-22 ソニー株式会社 圧縮データ編集装置および圧縮データ編集方法
MX9702856A (es) * 1995-08-21 1997-07-31 Matsushita Electric Ind Co Ltd Disco optico, dispositivo de reproduccion y metodo de reproduccion que pueden lograr una conmutacion dinamica del contenido reproducido.
JP3277923B2 (ja) * 1995-12-08 2002-04-22 ソニー株式会社 データ記録再生装置とその方法
TW318906B (ja) * 1995-12-08 1997-11-01 Sony Co Ltd
JP3277922B2 (ja) 1995-12-08 2002-04-22 ソニー株式会社 データ記録再生装置とその方法
JPH09182024A (ja) 1995-12-27 1997-07-11 Sony Corp 映像データ伸長装置およびデータ伸長方法
JPH10106237A (ja) * 1996-09-25 1998-04-24 Sony Corp 編集装置
US5999698A (en) * 1996-09-30 1999-12-07 Kabushiki Kaisha Toshiba Multiangle block reproduction system
JPH10285529A (ja) * 1997-04-04 1998-10-23 Sony Corp 画像編集装置および画像編集方法
JPH1196730A (ja) 1997-09-17 1999-04-09 Matsushita Electric Ind Co Ltd 光ディスク及びその編集装置、再生装置
DE69833976T2 (de) * 1997-09-17 2006-09-07 Matsushita Electric Industrial Co., Ltd., Kadoma Optische Platte, Aufzeichnungsgerät, und rechnerlesbares Aufzeichnungsmedium
US6134243A (en) * 1998-01-15 2000-10-17 Apple Computer, Inc. Method and apparatus for media data transmission
JP3997367B2 (ja) 1998-04-30 2007-10-24 ソニー株式会社 記録再生装置および方法、並びに記録媒体
JP2000023099A (ja) 1998-07-03 2000-01-21 Sony Corp 映像信号記録再生装置、映像信号記録再生方法、映像信号再生装置、映像信号再生方法および記録媒体
JP3356691B2 (ja) * 1998-07-07 2002-12-16 株式会社東芝 情報記録媒体とその記録方法及び再生方法
WO2000018117A1 (fr) 1998-09-08 2000-03-30 Sharp Kabushiki Kaisha Procede d'edition d'images a variation temporelle et dispositif d'edition d'images a variation temporelle
KR100583358B1 (ko) * 1998-11-16 2006-05-25 코닌클리케 필립스 일렉트로닉스 엔.브이. 실시간 정보를 기록하는 방법 및 장치
JP2000232625A (ja) 1999-02-10 2000-08-22 Victor Co Of Japan Ltd 符号化データ編集多重化装置
JP2000287172A (ja) 1999-03-31 2000-10-13 Toshiba Corp 画像データ処理装置
KR100473887B1 (ko) * 1999-05-07 2005-03-08 삼성전자주식회사 프로그램 일부 임시 삭제 방법
EP1054405A1 (en) * 1999-05-18 2000-11-22 Deutsche Thomson-Brandt Gmbh Method for marking digital data
CN1321311A (zh) * 1999-07-07 2001-11-07 松下电器产业株式会社 Av数据记录装置及方法、用该av数据记录装置或方法记录的盘、av数据重放装置及方法
GB2353655B (en) 1999-08-26 2003-07-23 Sony Uk Ltd Signal processor
JP4211153B2 (ja) 1999-09-17 2009-01-21 ソニー株式会社 記録装置および方法
JP3956549B2 (ja) * 1999-09-30 2007-08-08 ソニー株式会社 記録装置および方法、再生装置および方法並びに記録媒体
EP1149494A1 (en) 1999-11-23 2001-10-31 Koninklijke Philips Electronics N.V. Seamless switching of mpeg video streams
JP2001157161A (ja) 1999-11-25 2001-06-08 Matsushita Electric Ind Co Ltd 画像編集装置、画像編集方法及びプログラム記録媒体
JP4517267B2 (ja) 2000-04-21 2010-08-04 ソニー株式会社 記録装置および方法、再生装置および方法、プログラム、並びに記録媒体
CN1239021C (zh) 2000-04-21 2006-01-25 索尼公司 信息处理设备及方法、程序和记录介质
CN1199446C (zh) * 2000-04-21 2005-04-27 索尼公司 信息处理设备和方法
US6898799B1 (en) * 2000-10-23 2005-05-24 Clearplay, Inc. Multimedia content navigation and playback

Also Published As

Publication number Publication date
ES2364374T3 (es) 2011-09-01
EP2204990A1 (en) 2010-07-07
CN101430912A (zh) 2009-05-13
EP1988710A1 (en) 2008-11-05
KR20040007705A (ko) 2004-01-24
CN101499305A (zh) 2009-08-05
JP3784387B2 (ja) 2006-06-07
JP4684319B2 (ja) 2011-05-18
CN101430910A (zh) 2009-05-13
US20080075435A1 (en) 2008-03-27
WO2002104016A1 (en) 2002-12-27
JP2009118511A (ja) 2009-05-28
CN101430909B (zh) 2012-11-14
KR100537392B1 (ko) 2005-12-19
US20080063374A1 (en) 2008-03-13
EP1408687A4 (en) 2006-05-24
US8306405B2 (en) 2012-11-06
US20080137730A1 (en) 2008-06-12
CN101430910B (zh) 2013-06-19
JP4937370B2 (ja) 2012-05-23
CN101430911A (zh) 2009-05-13
JP2009005371A (ja) 2009-01-08
JP2009118512A (ja) 2009-05-28
CN101499305B (zh) 2012-11-14
EP1408687A1 (en) 2004-04-14
CN101430907A (zh) 2009-05-13
US20100260470A1 (en) 2010-10-14
EP2204988A1 (en) 2010-07-07
CN101430909A (zh) 2009-05-13
EP1988710B1 (en) 2011-06-08
EP2204989A1 (en) 2010-07-07
CN100450168C (zh) 2009-01-07
CN1516962A (zh) 2004-07-28
CN101430912B (zh) 2014-08-06
US7653285B2 (en) 2010-01-26
JPWO2002104016A1 (ja) 2004-10-07
JP4937280B2 (ja) 2012-05-23
US20040170394A1 (en) 2004-09-02
US20100296796A1 (en) 2010-11-25
CN101430908A (zh) 2009-05-13
EP2204991A1 (en) 2010-07-07
JP2010213286A (ja) 2010-09-24

Similar Documents

Publication Publication Date Title
JP4937370B2 (ja) データ記録方法、データ編集方法およびデータ復号方法、並びにその装置、及び記録媒体
JP5386384B2 (ja) データ記録方法、データ削除方法、記録装置、記録媒体およびプログラム
WO2007129524A1 (ja) 情報処理装置及び情報処理方法、並びにコンピュータ・プログラム
JPWO2005015907A1 (ja) データ処理装置
JP3986973B2 (ja) Avデータ記録方法、avデータ記録装置、データ記録媒体、及びプログラム
JP4322216B2 (ja) データ記録方法
JP2002373480A (ja) データ記録方法及びデータ記録装置ならびに記録媒体
JP4409588B2 (ja) データ記録方法、データ削除方法、記録装置、記録媒体およびプログラム
JP4312783B2 (ja) Avデータ再生方法、avデータ再生装置、プログラム、並びに記録媒体
JP2003022621A (ja) データ記録方法、データ変更方法及びその装置
JP2003168283A (ja) データ編集方法およびデータ記録媒体
JP2003168284A (ja) データ記録方法およびデータ編集方法

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110913

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110913

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140922

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4827934

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

SG99 Written request for registration of restore

Free format text: JAPANESE INTERMEDIATE CODE: R316G99

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

EXPY Cancellation because of completion of term