JP2004282794A - Recording method and reproducing method for recording medium - Google Patents
Recording method and reproducing method for recording medium Download PDFInfo
- Publication number
- JP2004282794A JP2004282794A JP2004187302A JP2004187302A JP2004282794A JP 2004282794 A JP2004282794 A JP 2004282794A JP 2004187302 A JP2004187302 A JP 2004187302A JP 2004187302 A JP2004187302 A JP 2004187302A JP 2004282794 A JP2004282794 A JP 2004282794A
- Authority
- JP
- Japan
- Prior art keywords
- information
- video
- picture
- video information
- packet
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Signal Processing For Digital Recording And Reproducing (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
本発明は、記録媒体の記録方法及び再生方法に関し、特に光ディスクの高密度記録/再生に関するものである。 The present invention relates to a recording method and a reproducing method of a recording medium, and more particularly to a high-density recording / reproducing of an optical disk.
図27は、下記の特許文献1に示された従来の光ディスク記録再生装置のブロック図である。図において、40はビデオ信号をディジタル情報に変換するビデオA/D変換器、41は映像情報圧縮手段、69は圧縮された映像情報をフレーム周期の整数倍に等しいセクタ情報に変換するフレームセクタ変換手段、70はエンコーダ、71は記録媒体での符号間干渉を小さくするため所定の変調符号に変換するための変調器、72は上記変調符号に従ってレーザを変調するためのレーザ駆動回路、73はレーザ出力スイッチである。
FIG. 27 is a block diagram of a conventional optical disk recording / reproducing apparatus disclosed in
76は光ディスク、74はレーザ光を出射する光ヘッド、75は光ヘッド74から出射される光ビームをトラッキングするアクチュエータ、78は光ヘッド74を送るトラバースモータ、77は光ディスク76を回転させるディスクモータ、79はモータ駆動回路、80,81はモータ制御回路である。
76 is an optical disk, 74 is an optical head that emits laser light, 75 is an actuator that tracks the light beam emitted from the
また、82は光ヘッド74からの再生信号を増幅する再生アンプ、83は記録された変調信号からデータを得る復調器、84はデコーダ、85はフレームセクタ逆変換手段、86は上記圧縮情報を伸長する情報伸長手段、87は伸長された情報をアナログビデオ信号に変換するD/A変換器である。
Reference numeral 82 denotes a reproduction amplifier for amplifying a reproduction signal from the
図23は、ディジタル動画情報を圧縮して伝送・蓄積するために規格化が進められているMPEG方式のデータ配列構造(レイヤ構造)を簡略化して表した図で、59は複数のフレーム情報からなるGOP、60はいくつかのピクチャ(画面)から構成されるGOPレイヤ、61は1画面をいくつかのブロックに分割したスライス、62はいくつかのマクロブロック( MB)から構成されるスライスレイヤ、63は8画素×8画素で構成される
ブロックレイヤである。
FIG. 23 is a diagram showing a simplified data arrangement structure (layer structure) of the MPEG system, which is being standardized for compressing, transmitting and storing digital moving image information. GOP 60 is a GOP layer composed of several pictures (screens), 61 is a slice obtained by dividing one screen into several blocks, 62 is a slice layer composed of several macroblocks (MB), 63 is a block layer composed of 8 pixels × 8 pixels.
図24は、15画面を1GOPとしたときの符号化構造を示した図で、66はフレーム内DCTを行う映像情報であるIピクチャ、68は前方向の動き補償を行うDCT符号化による映像情報であるPピクチャ、67は時間的に前後に位置する上記Iピクチャ61およびPピクチャ68を参照画面として動き補償を行ったDCT符号化が行われるBピクチャである。
FIG. 24 is a diagram showing a coding structure when 15 screens are 1 GOP. 66 is an I picture which is video information for performing DCT in a frame, and 68 is video information by DCT coding which performs forward motion compensation.
図25(a),(b)は、1GOP内の映像データ量を、各GOP間の画質を一定にするために可変構造にした場合と、録画時間を一定にするために固定レートにしたものとを比較した図である。 FIGS. 25 (a) and 25 (b) show a case where the amount of video data in one GOP has a variable structure in order to make the image quality between each GOP constant, and a case where the video data amount has a fixed rate in order to make the recording time constant. FIG.
また、図26(a)は、1GOP当りの画質を同一に保った場合の1GOP当りのデータ量を示した図で、αはデータレートの最高値、βは平均データレートを表わす。また、図26(b)は、各画像(e),(d),(c)において1GOPあたりの画質とデータ量を比較した図である。 FIG. 26A is a diagram showing the data amount per GOP when the image quality per GOP is kept the same. Α represents the maximum value of the data rate, and β represents the average data rate. FIG. 26B is a diagram comparing the image quality and data amount per GOP in each of the images (e), (d), and (c).
次に、従来例の動作を説明する。ディジタル映像情報の圧縮技術が進むにつれ、上記圧縮情報を光ディスクに記録することにより、従来のVTR等に代表されるようなテープ媒体に比べて検索性にすぐれ、きわめて使い勝手の良い映像ファイリング装置を実現することが可能となっている。また、このようなディスクファイル装置は、ディジタル情報を扱うため、アナログビデオ信号を記録する場合に比べてダビング劣化がなく、さらに光記録再生であるため、非接触で信頼性に優れたシステムが実現できる。 Next, the operation of the conventional example will be described. As digital video information compression technology advances, recording the above compressed information on an optical disk realizes an extremely easy-to-use video filing device with better searchability compared to conventional tape media such as VTRs. It is possible to do. In addition, since such disk file devices handle digital information, they do not suffer from dubbing degradation compared to recording analog video signals, and since they use optical recording / reproduction, a non-contact and highly reliable system is realized. it can.
従来、このような圧縮動画情報を光ディスクに記録する場合は、図27のブロック回路図に示した光ディスク76に、図23に示したMPEG方式のようなディジタル圧縮動画情報を記録する方法が取られる。このとき、ビデオA/D変換器40でディジタル化された映像情報は、映像情報圧縮手段41によって例えばMPEG等の標準圧縮動画方式で変換される。この圧縮された映像情報は、エンコードされるとともに光ディスクの符号間干渉の影響を小さくするための変調が施されて光ディスク76に記録される。このとき、例えば各GOP単位でのデータ量はほぼ同じ量になるようにし、またフレーム周期の整数倍に等しいセクタに振り分けることによって、GOP単位での編集等が可能となることは明かである。 Conventionally, when such compressed moving image information is recorded on an optical disk, a method of recording digital compressed moving image information such as the MPEG system shown in FIG. 23 on the optical disk 76 shown in the block circuit diagram of FIG. 27 is used. . At this time, the video information digitized by the video A / D converter 40 is converted by the video information compression means 41 in a standard compressed moving image system such as MPEG. The compressed video information is encoded and modulated to reduce the influence of intersymbol interference of the optical disk, and is recorded on the optical disk 76. At this time, for example, it is clear that editing or the like in GOP units can be performed by setting the data amount in each GOP unit to be substantially the same and allocating the data to sectors equal to an integral multiple of the frame period.
また、再生時においては、光ディスク76に記録された映像情報を光ヘッド74で再生して再生アンプ82にて増幅し、復調器83およびデコーダ84にてディジタルデータに復元した後、フレームセクタ逆変換手段85にてアドレス,パリティ等のデータを取り除いた純粋な映像元データとして復元する。さらに、情報伸長手段86にて例えばMPEG復号化を行うことで映像信号に再現し、D/A変換器87によってアナログ映像信号に変換されてモニタ等に表示可能となる。
At the time of reproduction, the video information recorded on the optical disk 76 is reproduced by the
ここで上述したように、ディジタル動画圧縮方法としてMPEG方式を用いると、図24に示したように、フレーム内DCTによる圧縮を行うIピクチャ66と、前方向の動き補償を行うDCT符号化による映像情報であるPピクチャ68と、時間的に前後に位置するIピクチャ66およびPピクチャ68を参照画面として動き補償を行ったDCT符号化が行われるBピクチャ67とがいくつか組合わさった符号化構造を、そのまま光ディスク76内に記録することになる。
As described above, when the MPEG method is used as a digital moving image compression method, as shown in FIG. 24, an
これらの情報のうち、Iピクチャ66はフレーム内DCTを行っているため、この情報単独で画像再生を行うことが可能であるが、Pピクチャ68は前方向の動き補償を行っているため、Iピクチャ66を再生した後でなければ画像再生を行うことが出来ず、また、Bピクチャ67は、両方向からの予測画面であるため、前後にあるIピクチャ66またはPピクチャ68を再生した後でなければ再生できない。また、これらの情報のうち、当然両方向予測を行っているBピクチャ67が最もデータ量が少なく、符号化効率も良い。
Of these pieces of information, the I
しかし、このBピクチャ67は単独で再生できないため、Iピクチャ66やPピクチャ68を必要とするが、その分、Bピクチャ67の枚数を増やすと処理回路におけるバッファメモリ量が増えるとともに、データ入力から映像再生までの遅延時間が増大する問題がある。しかし、光ディスク等に代表される蓄積系メディアにおいては、長時間記録のために圧縮効率の良い符号化方式が望まれ、一方、上記映像再生の遅延時間はあまり問題にならないため、図23および図24に示すような符号化方式が適している。
However, since the
次に、1枚の光ディスクにおいて、どの部分でも画質一定となるように映像データを記録すると、図25(a)に示すような可変レート構造となる。これは、1GOP当りの画質を一定とした場合、図25(a)に示すように、1GOPに必要な映像データ量が変動するからである。これは、例えば、細かい画像の場合Iピクチャに必要とされるデータ量が増大した場合や、動きの早い映像データが連続した場合は、PピクチャやBピクチャにおける圧縮効率があまり高くならないからである。また、当然ではあるが、図26(b)に示すように、1GOP当りのデータ量を増加させると、絵柄によっては異なるものの、画像のS/Nも改善される。 Next, when video data is recorded on one optical disc so that the image quality is constant in any part, a variable rate structure as shown in FIG. 25A is obtained. This is because when the image quality per GOP is constant, the amount of video data required for one GOP varies as shown in FIG. This is because, for example, in the case of a fine image, when the data amount required for an I picture increases, or when fast-moving video data continues, the compression efficiency of a P picture or a B picture does not become very high. . Also, as a matter of course, as shown in FIG. 26 (b), when the data amount per GOP is increased, the S / N of the image is improved though it differs depending on the picture.
これに対して、光ディスク1枚の記録時間を一定にするためには、図26(b)に示す固定レートで記録するフォーマットが適している。しかし、磁気テープ媒体と異なり、光ディスク媒体を用いた映像記録再生装置の場合は、1パッケージあたりの総データ量が小さいため、高画質を維持しつつできるだけ圧縮効率を高めなければならない。そのためには、図25(a)に示す可変レート方式の方が、光ディスク1枚当りの映像データのファイル効率が良いことはいうまでもない。 On the other hand, in order to keep the recording time of one optical disc constant, a format for recording at a fixed rate shown in FIG. 26B is suitable. However, unlike a magnetic tape medium, in the case of a video recording / reproducing apparatus using an optical disk medium, the total data amount per package is small, so that the compression efficiency must be as high as possible while maintaining high image quality. To this end, it goes without saying that the variable rate method shown in FIG. 25A has a higher file efficiency of video data per optical disc.
そこで、例えば、再生専用の光ディスク装置においては、あらかじめエンコードすることにより、可変レート時における光ディスク1枚全部のデータ量分布を知ることが可能となるため、2回目のエンコード時に全体のデータ分布を調整し、結果的にディスク1枚当りの再生時間を可変レート時においても一定に調整することが可能となる。 Therefore, for example, in a read-only optical disk device, it is possible to know the data amount distribution of the entire optical disk at the time of variable rate by encoding in advance, so that the entire data distribution is adjusted at the second encoding. As a result, it is possible to adjust the reproduction time per disc even at a variable rate.
上述したように、従来の光ディスクの映像記録方式においては、1GOP当りのデータレートを可変とすることにより1枚の光ディスク媒体に記録される映像データのファイル効率を向上させているが、磁気テープ媒体にくらべて大幅に総データ量の小さい光ディスク媒体においては、従来よりさらに圧縮効率の高いファイル方法が望まれていた。 As described above, in the conventional optical disc video recording system, the file efficiency of video data recorded on one optical disc medium is improved by making the data rate per GOP variable. In the case of an optical disk medium having a significantly smaller total data amount than that of a conventional optical disk medium, there has been a demand for a file method having a higher compression efficiency than before.
一般的に映画フィルムならば24フレーム/秒,NTSC信号ならば30フレーム/秒のように固定化されていたため、スポーツ映像素材等における決定的瞬間を高速度カメラ等で撮影した、時間分解能の高い映像ソース等を取り扱うことができなかった。 In general, movie frames are fixed at 24 frames / sec. And NTSC signals are fixed at 30 frames / sec. Could not handle video sources, etc.
また、1枚のディスクに複数のフレームレートを有する映像ソースが混在した場合に、それを画面表示するのに必要な制御情報等が無いため一部の規定されたフレームレートの映像しか表示できなかったり、フレームレートが異なっていてもお互いに関連する映像データ間のアクセス等がスムーズに行えなかったりする問題点があった。
本発明は、上記のような問題点を解消することを目的としてなされたもので、圧縮効率の高い映像記録/再生方法を可能にすることを目的とする。
Further, when video sources having a plurality of frame rates are mixed on one disc, there is no control information required for displaying the video sources on a screen, and therefore, only a video of a part of a prescribed frame rate can be displayed. Also, there is a problem that even if the frame rates are different, it is not possible to smoothly access video data related to each other.
SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and has as its object to enable a video recording / reproducing method with high compression efficiency.
本発明はまた、ビデオパケットの再生に際し、プライベートパケットに含まれる秒当りのコマ数に関する情報及び格納アドレスを利用することができる記録方法を提供することを目的とする。 Another object of the present invention is to provide a recording method that can use information on the number of frames per second and a storage address included in a private packet when reproducing a video packet.
本発明は、
フレーム内DCTが行われた映像情報であるIピクチャ、前方向の動き補償が行われたDCT符号化による映像情報であるPピクチャ、時間的に前後に位置する前記Iピクチャ、Pピクチャを参照画面として動き補償が行われたDCT符号化による映像情報であるBピクチャを含む映像情報と、当該映像情報の制御情報を含むディジタル情報を記録媒体に記録する記録方法において、
前記ディジタル情報が、前記制御情報を含むプライベートパケットと前記映像情報とを含むビデオパケットを単位として構成され、
前記プライベートパケットは前記ビデオパケットよりも前に配置されるものであり、
前記プライベートパケットには前記ビデオパケットの映像情報における秒当たりのコマ数に関する情報と、該パケットに格納されている前記ピクチャの格納アドレスを記録することを特徴とする記録媒体の記録方法を提供するものである。
The present invention
The reference picture is an I picture that is video information subjected to intra-frame DCT, a P picture that is video information obtained by DCT coding that has been subjected to forward motion compensation, and the I picture and P picture that are temporally located before and after. In a recording method for recording video information including a B picture, which is video information by DCT coding with motion compensation performed thereon, and digital information including control information of the video information on a recording medium,
The digital information is configured in units of a video packet including the private packet including the control information and the video information,
The private packet is arranged before the video packet,
A recording method of a recording medium, characterized in that information about the number of frames per second in video information of the video packet and a storage address of the picture stored in the packet are recorded in the private packet. It is.
本願の他の発明の映像記録方法は、テレビジョンの画面表示に必要な所定コマ数で表示可能な通常再生用ディジタル映像圧縮情報以外に、上記ディジタル映像情報の映像シーンと関連する映像シーンから構成され、上記の所定コマ数よりも1秒あたりのコマ数が多い別の補間ディジタル圧縮映像情報をディスクに録画するようにしたものである。 A video recording method according to another aspect of the present invention comprises a video scene related to the video scene of the digital video information, in addition to the digital video compression information for normal reproduction which can be displayed in a predetermined number of frames required for television screen display. Further, another interpolated digital compressed video information having a larger number of frames per second than the above-mentioned predetermined number of frames is recorded on a disk.
本願の他の発明の映像記録方法は、通常再生用ディジタル映像情報に隣接した第一の付加データ領域を設け、上記通常再生用ディジタル映像情報の映像シーンに対応した拡張ディジタル映像情報が存在するか否かを示すフラグ、補間ディジタル映像情報のディスク上の存在位置を示す第一のアドレス位置情報、上記補間ディジタル映像情報のデータサイズ、および上記補間ディジタル映像情報を再生する際の再生速度を書き込むようにしたものである。 According to another aspect of the present invention, there is provided a video recording method in which a first additional data area is provided adjacent to normal reproduction digital video information, and there is extended digital video information corresponding to the video scene of the normal reproduction digital video information. A flag indicating whether or not the interpolation digital video information is present on the disc; first address position information indicating a location of the interpolation digital video information on the disc; a data size of the interpolation digital video information; and a reproduction speed for reproducing the interpolation digital video information. It was made.
本願の他の発明の映像記録方法は、拡張ディジタル映像情報に隣接した第二の付加データ領域を設け、拡張ディジタル映像情報を再生した後にアクセスすべき通常再生用ディジタル映像情報のディスク上の存在位置を示す第二のアドレス位置情報、および補間ディジタル映像情報内の各ピクチャの存在アドレス位置を示す情報を記録するようにしたものである。 According to another aspect of the present invention, there is provided a video recording method, wherein a second additional data area is provided adjacent to extended digital video information, and the location of a normal reproduction digital video information on a disc to be accessed after the extended digital video information is reproduced. , And information indicating the existing address position of each picture in the interpolated digital video information.
本願の他の発明の映像再生方法は、特許請求の範囲第1項または第2項によってディスクに記録した通常再生用ディジタル映像情報を再生するとき、操作者からの指令により、第一の付加データにあるアドレス情報に従って、通常再生用ディジタル映像情報の映像シーンに相当する補間ディジタル映像情報が書き込んであるディスクのセクタに光ヘッドをアクセスさせるとともに上記補間ディジタル映像情報を低速再生し、その後第二の付加データにあるアドレス情報に基づいて元の通常再生用ディジタル映像情報の記録位置に復帰するようにしたものである。
According to another aspect of the present invention, there is provided a video reproducing method comprising the steps of: when reproducing digital video information for normal reproduction recorded on a disc according to
本願の他の発明の映像記録/再生方法は、記録時には時間的に前後したフレーム間またはフィールド間の動き推定情報に基づいてディジタル映像情報を圧縮するとともに、フレームまたはフィールドごとの映像の動きまたは画像の輝度信号変化または色信号変化に応じて1秒当りのコマ数を削減して記録媒体に記録し、再生時には、上記削減したフレームまたはフィールドの前後を重複表示してテレビジョンの画面表示に必要なコマ数を確保するようにしたものである。 A video recording / reproducing method according to another aspect of the present invention compresses digital video information based on motion estimation information between frames or fields that are temporally adjacent to each other at the time of recording. The number of frames per second is reduced according to the change in the luminance signal or the change in the chrominance signal, and is recorded on a recording medium. It is intended to secure a large number of frames.
本願の他の発明の他の発明の映像記録/再生方法は、記録時に、数枚から数十枚の画面に相当するディジタル映像情報をひとまとめにした映像情報単位の先頭に設けられた映像情報以外の制御情報を記述する領域に、重複表示するために必要な制御情報であるディスクの情報記録時における削減コマ数、および再生時における前後の画面の重複表示方法を記録するとともに、再生時に、上記制御情報に基づきフレームレートが変動するディスク上の映像データを、所定のテレビジョン表示に必要なフレームレートに変換して表示するようにしたものである。 A video recording / reproducing method according to another invention of the present invention is a method for recording and reproducing digital video information corresponding to several to several tens of screens other than the video information provided at the head of a video information unit. In the area where the control information is described, the number of reduced frames at the time of recording the information of the disc, which is the control information necessary for the overlapping display, and the overlapping display method of the previous and next screens at the time of reproduction are recorded. Video data on a disk whose frame rate fluctuates based on control information is converted into a frame rate required for a predetermined television display and displayed.
本願の他の発明の映像記録/再生方法は、フレームレートを所定の値に制御するための制御情報の内容が、複数の映像情報単位にまたがって同一である場合には最初の映像情報単位の先頭に上記制御情報を記述し、以降は上記制御情報の内容を変更する場合のみ上記制御情報の変更内容を記述するようにしたものである。 In the video recording / reproducing method according to another aspect of the present invention, when the content of control information for controlling a frame rate to a predetermined value is the same over a plurality of video information units, the first video information unit The control information is described at the head, and thereafter, only when the content of the control information is changed, the changed content of the control information is described.
本願の他の発明の映像記録/再生方法は、記録媒体に記録された映像情報がフレーム単位の映像情報であって、フレーム内DCTを行う映像情報であるIピクチャと、前方向の動き補償を行うDCT符号化による映像情報であるPピクチャと、時間的に前後に位置する上記IピクチャおよびPピクチャを参照画面として動き補償を行ったDCT符号化が行われるBピクチャとが混在する数フレームから数十フレーム単位の映像情報ブロックの連続であって、画面の動きまたは輝度信号の変化または色信号の変化に応じて上記画像データのヘッダ部を除くBピクチャに相当する映像データ部分を削除するとともに、上記ヘッダ部に削除した画面のいずれのフィールドを重複表示するかを書き込んだものである。 According to a video recording / reproducing method of another invention of the present application, video information recorded on a recording medium is video information in units of frames, and an I picture which is video information to be subjected to DCT in a frame and a motion compensation in a forward direction are performed. From several frames in which P pictures, which are video information obtained by DCT coding to be performed, and B pictures to be subjected to DCT coding with motion compensation performed using the I picture and P picture located before and after in time as reference screens, are mixed. A video data block which is a succession of video information blocks in units of several tens of frames and which corresponds to a B picture excluding the header portion of the image data according to the movement of the screen or the change of the luminance signal or the change of the color signal is deleted. In the header portion, which field of the deleted screen is to be overlapped is written.
本願の他の発明の映像再生装置は、ディジタル映像情報が記録された光ディスクと、この光ディスクの情報を読み取る光ヘッドと、低速再生用の補間映像情報があるか否かを示すフラグ情報を認識して低速再生用の補間映像情報がある場合には光ディスクに記録されている補間情報アドレスや補間情報サイズにもとずいて上記補間情報の読み取り制御を行う補間情報読み取り制御手段と、通常再生時に、不連続となるテンポラルリファレンス値を低速再生のレートを示した補間情報レートにしたがって連続となるよう変換するテンポラルリファレンス変換制御手段を備えたものである。 A video reproducing apparatus according to another aspect of the present invention recognizes an optical disk on which digital video information is recorded, an optical head for reading information on the optical disk, and flag information indicating whether or not there is interpolation video information for low-speed reproduction. When there is interpolation video information for low-speed playback, interpolation information read control means for controlling the reading of the interpolation information based on the interpolation information address and interpolation information size recorded on the optical disc, and at the time of normal playback, It is provided with a temporal reference conversion control means for converting a discontinuous temporal reference value to be continuous according to an interpolation information rate indicating a low-speed reproduction rate.
本発明に係わる記録媒体の記録方法によれば、秒当りのコマ数に関する情報及び各々のピクチャの格納アドレスを含むプライベートパケットを読み込んだ後、ビデオパケットが再生されるので、ビデオパケットの再生に際し、プライベートパケットに含まれる秒当りのコマ数に関する情報及び格納アドレスを利用することができる。 According to the recording method of the recording medium according to the present invention, the video packet is reproduced after reading the private packet including the information on the number of frames per second and the storage address of each picture. The information on the number of frames per second and the storage address included in the private packet can be used.
また、本発明に係わる映像記録方法によれば、テレビジョンの表示動作によって規定された通常再生におけるコマ数よりも、時間分解能の高い映像ストリームをファイルすることができるため、スポーツにおける動作解析や、教育・ゲーム等そのほかあらゆる分野において実用性が向上する。 Further, according to the video recording method according to the present invention, it is possible to file a video stream having a higher time resolution than the number of frames in normal playback defined by the display operation of the television, so that the motion analysis in sports, Practicality is improved in all fields such as education and games.
また、本発明に係わる映像記録方法によれば、通常再生映像データと時間分解能の高い映像データ(補間ディジタル映像情報)を光ディスク上の別の部分に配置するとともに、これらのアドレス情報を通常映像データが記録されている領域に書き込んであるため、瞬時に上記通常再生映像データと関係のある時間分解能の高い映像ファイルを呼び出すことが可能となり、また、時間分解能の高い映像情報の再生スピードも書き込んでおくことができるようになったため、ユーザが映像を見ながら設定する必要がなくなり、利便性が向上する。 Further, according to the video recording method of the present invention, the normal reproduced video data and the video data with high time resolution (interpolated digital video information) are arranged in different portions on the optical disk, and the address information is stored in the normal video data. Is written in the area where is recorded, so it is possible to instantly call up a video file with a high time resolution related to the above-mentioned normal playback video data, and also write the playback speed of the video information with a high time resolution. Since the setting can be made, the user does not need to set while watching the video, and the convenience is improved.
また、本発明に係わる映像記録方法によれば、時間分解能の高い映像データを再生終了した際に、元の通常再生ストリームへの戻り先アドレスが書き込まれているため、瞬時に元のストリームに復帰することが可能となり、また、各ピクチャの開始アドレス値が記録されているため、上記時間分解能の高い映像データを再生装置のバッファメモリに取り込んだ後、メモリからのデータの取り出しが容易になる。 Further, according to the video recording method of the present invention, when the reproduction of the video data with high time resolution is completed, the return address to the original normal reproduction stream is written, so that the video stream is immediately returned to the original stream. In addition, since the start address value of each picture is recorded, it is easy to take out the video data with high time resolution into the buffer memory of the playback device and then take out the data from the memory.
また、本発明に係わる映像再生方法によれば、通常再生用の映像データと、時間分解能の高い映像データを関連づけて、アクセスすることが可能となるため、光ディスクのデータアクセス制御を自動化することが可能となる。 Further, according to the video reproducing method according to the present invention, it is possible to access the video data for normal reproduction in association with the video data having a high time resolution, so that it is possible to automate the data access control of the optical disc. It becomes possible.
また、本発明に係わる映像記録/再生方法によれば、画像の動きに応じてコマ数を可変にしたため、映像データのファイル効率が向上し、よりデータ圧縮が難しい映像へのデータ配分を増やしたり、より長時間の映像記録再生が可能となる。 Further, according to the video recording / reproducing method according to the present invention, the number of frames is made variable in accordance with the movement of the image, so that the file efficiency of the video data is improved and the data distribution to the video which is more difficult to compress is increased. Thus, video recording and reproduction for a longer time can be performed.
また、本発明に係わる映像記録/再生方法によれば、複数の映像データをひとまとめにした映像情報単位で、可変ピクチャレートの映像デコード方法を書き込んだため、動き予測補償を行っている映像データにおけるその他の映像データのデコード制御情報と同一の時間間隔で、制御することが可能となる。 Further, according to the video recording / reproducing method according to the present invention, a video decoding method of a variable picture rate is written in a video information unit in which a plurality of video data are put together, so that the video data for which motion prediction compensation is performed is Control can be performed at the same time interval as the decode control information of other video data.
また、本発明に係わる映像記録/再生方法によれば、可変ピクチャーレートのデコード内容が変更する場合、および一番最初の場合のみ、制御データを書き込んだため、上記映像情報単位に書き込まれている制御情報の内容で制御動作を繰り返す回数が減少し、コントローラの動作が単純化される。 Further, according to the video recording / reproducing method according to the present invention, control data is written only when the decoding content of the variable picture rate is changed and at the very first time, so that the video data is written in units of the video information. The number of times the control operation is repeated according to the content of the control information is reduced, and the operation of the controller is simplified.
また、本発明に係わる映像記録/再生方法によれば、可変ピクチャレートで書き込まれた映像情報をデコードする際に、フィールド単位に画面の重複表示が可能となったため、第1フィールドと第2フィールドの繰り返しによって生じる画面表示の時間的な前後関係の狂いや、各フィールド関の時間間隔のばらつきによる画面のぎこちなさを緩和することが可能となる。 Also, according to the video recording / reproducing method according to the present invention, when decoding video information written at a variable picture rate, it is possible to display the screen in units of fields, so that the first field and the second field can be displayed. It is possible to alleviate the irregularity of the temporal display of the screen display caused by the repetition of the above and the awkwardness of the screen due to the variation of the time interval between the fields.
また、本発明に係わる映像再生装置によれば、ビデオストリームを基本画像情報と補間画像情報に分離することによって、MPEG規格で規定されているテンポラルリフアレンスの値が離散的になるが、この値を連続値に変換する手段を設けることにより、MPEG規格の範囲を逸脱することのないMPEGストリームが得られる映像再生装置が構成でき、補間情報読み取り制御手段によって基本画像と補間画像が不連続になっているビデオストリームを連続なものとして再生することができる。 According to the video reproducing apparatus of the present invention, by separating the video stream into basic image information and interpolated image information, the temporal reference value defined by the MPEG standard becomes discrete. Is provided, a video reproducing apparatus capable of obtaining an MPEG stream without departing from the range of the MPEG standard can be configured, and the interpolation information reading control means makes the basic image and the interpolated image discontinuous. Video stream can be played back as a continuous stream.
実施の形態1.
図1は、ビデオストリームのユーザーデータに、本発明の実施の形態1の制御情報を挿入した場合のデコード方法を示すフローテャートである。図2は本実施の形態1における光ディスク再生装置の構成を示すブロック回路図で、1は光ディスク、2は再生アンプ、3は復調器、4は誤り訂正手段、5はテンポラルリファレンス制御手段、6はバッファ、7は復号化手段、8はD/A変換器、9は再生制御手段、10は光ヘッド制御手段、11は補間情報読み取り制御手段である。また、再生制御手段9は、通常再生か、1/2倍あるいは1/4倍の再生かを示す再生速度要求信号を受け、この信号をテンポラルリファレンス変換制御手段5へ送信する。
FIG. 1 is a flowchart showing a decoding method when the control information according to the first embodiment of the present invention is inserted into user data of a video stream. FIG. 2 is a block circuit diagram showing the configuration of the optical disk reproducing apparatus according to the first embodiment, wherein 1 is an optical disk, 2 is a reproducing amplifier, 3 is a demodulator, 4 is error correction means, 5 is temporal reference control means, and 6 is temporal reference control means. A buffer, 7 is a decoding means, 8 is a D / A converter, 9 is a reproduction control means, 10 is an optical head control means, and 11 is an interpolation information reading control means. The playback control means 9 receives a playback speed request signal indicating normal playback, 1/2 times or 1/4 times playback, and sends this signal to the temporal reference conversion control means 5.
テンポラルリファレンス変換制御手段5は、通常再生時にはテンポラルリファレンスの値を1/4倍し該値を処理する。また、1/2倍低速再生時にはテンポラルリファレンスの値を1/2倍し該値を処理する。また1/4倍低速再生時にはテンポラルリファレンスの値をそのままとして処理する。さらに再生制御手段9は再生モードの変更点で復号化手段7にテンポラルリファレンスのリセット/セット処理を行う。 During normal playback, the temporal reference conversion control means 5 multiplies the value of the temporal reference by 1/4 and processes the value. In addition, at the time of 1/2 times slow reproduction, the value of the temporal reference is halved and processed. Also, at the time of 1/4 times low-speed reproduction, processing is performed with the value of the temporal reference as it is. Further, the reproduction control means 9 performs the reset / set processing of the temporal reference to the decoding means 7 at the change point of the reproduction mode.
補間情報読み取り手段11は、再生モードとGOP層のユーザ領域に記録してある補間情報フラグ、補間情報開始アドレス、補間情報サイズ、補間情報レートに応じて光ディスク1の特定領域に記録してある補間情報を読み出すために光ヘッド制御手段10を介して光ヘッドを制御する。
The interpolation information reading means 11 interpolates the interpolation information recorded in a specific area of the
図3は通常再生時におけるフローチャートを示す。まず再生が開始されると補間情報があるかを補間情報フラグより調べる。この補間情報がある場合は、通常再生においてはテンポラルリファレンス値が連続でない。そのために補間情報レートを読み取り、テンポラルリファレンスを連続にするような変換を行う。図1を例にとると、テンポラルリファレンス値を1/4倍することで行なえる。 FIG. 3 shows a flowchart at the time of normal reproduction. First, when the reproduction is started, it is checked from the interpolation information flag whether interpolation information is present. If there is this interpolation information, the temporal reference value is not continuous during normal reproduction. For this purpose, the interpolation information rate is read, and conversion is performed so that the temporal reference is continuous. Taking FIG. 1 as an example, this can be achieved by multiplying the temporal reference value by 1/4.
図4は低速再生時におけるフローチャートを示す。まず再生が開始されると上で述べた通常再生時におけるフローにしたがった動作をする。低速再生要求信号が入力されると、まず補間情報があるかどうかを調べる。なければ、通常の低速再生を行う。ある場合はテンポラルリファレンス変換を行う。そして補間情報を読み取り、基本情報とあわせて低速再生用のバッファ上でビデオストリームを構成する。その後本ストリームを復号化手段に送り、デコード、再生する。 FIG. 4 shows a flowchart at the time of low-speed reproduction. First, when the reproduction is started, the operation according to the flow at the time of the normal reproduction described above is performed. When the low-speed reproduction request signal is input, it is first checked whether or not there is interpolation information. If not, normal low-speed playback is performed. In some cases, temporal reference conversion is performed. Then, the interpolation information is read, and a video stream is formed on a low-speed reproduction buffer together with the basic information. After that, this stream is sent to the decoding means, where it is decoded and reproduced.
図5は本実施の形態1の通常再生用のシステムストリームを示す図である。図において、パックヘッダ(図中、「PH」と略記)12は同期再生用の時間基準参照用の付加情報などが格納されたもので、システムヘッダ(図中、「SH」と略記)13はプログラムの先頭のパックに付加されるものであり、ストリーム全体の概要を記述格納したものである。また、プライベート2パケット(図中、「P2P」と略記)14はパケットデータが格納され、オーディオパケット(図中、「AP」と略記)15はオーディオデータが格納され、キャラクタパケット(図中、「CP」と略記)16は文字データが格納され、ビデオパケット(図中、「VP」と略記)17はビデオデータが格納されている。
FIG. 5 is a diagram showing a system stream for normal reproduction according to the first embodiment. In the figure, a pack header (abbreviated as "PH" in the figure) 12 stores additional information for referring to a time reference for synchronous reproduction, and a system header (abbreviated as "SH" in the figure) 13 It is added to the pack at the beginning of the program and describes and stores the outline of the entire stream. A private 2 packet (abbreviated as “P2P” in the figure) 14 stores packet data, an audio packet (abbreviated as “AP” in the figure) 15 stores audio data, and a character packet (abbreviated as “AP” in the figure) Character data is stored in a
プライベート2パケット14には以下の制御情報が格納されており、補間コマ用情報が格納された補間システムストリームの有無を示す情報フラグ(図中、「IF」と略記)18、補間システムストリームを格納したパックのアドレスを示す情報アドレス(図中、「IA」と略記)19、補間システムストリームのを格納したパックの情報の大きさを示す情報サイズ(図中、「IS」と略記)20、補間システムストリームの映像情報のピクチャレートを示す(図中、「PR」と略記)21等が格納されており、それに先立って該パケットの大きさを示すパケット長(図中、「PL」と略記)22、パケットの開始を示すパケット開始コード(図中、「PS」と略記)23とから構成されている。また、パックには1GOPのビデオ情報が格納されており、その開始点にあるパックヘッダ12は光ディスクなどのアクセスの単位であるセクタの先頭に配置されている。
The private 2
図6は本実施の形態1の低速再生用のシステムストリームを示す図である。図において、プライベート2パケット14にはパケット開始コード23、該低速再生用の映像情報に対応する通常再生用映像情報が含まれているパックの先頭位置を示す戻りアドレス値(図中、「RA」と略記)24、該パケットに格納されている各々のピクチャの格納アドレスを示すピクチャアドレスデータ(図中、「PAD」と略記)25が格納されている。
FIG. 6 is a diagram showing a system stream for low-speed reproduction according to the first embodiment. In the figure, a private 2
図7は本実施の形態1の光ディスク1へのストリーム情報の格納配置を示す図である。図においてTOC(table of contents)26は番組つまりタイトルの開始セクタアドレスが書き込まれており、起動直後に読み込みされる領域、27は図1で示した1GOPの映像情報が格納されているパックであり、通常再生用のシステムストリーム情報が記録されている領域、28は低速再生用の映像情報が記録されているパックである。
FIG. 7 is a diagram showing a storage arrangement of stream information on the
低速再生用の映像情報が記録されているパックは、図7に示すように光ディスク1上の特定領域に集中して配置する方法や、図7中の28(b)に示すように通常再生用パック情報の後ろに記録する方法、つまり通常再生用パックと低速再生用パックを交互に記録する方法がある。また、図8は通常再生用のビデオストリーム(a)と、補間情報用のストリーム(b),(c)とを示した概念図である。また、図9はコマ数の多いストリームにおいて、どのフィールドを選択して再生するかを示した図である。
A pack in which video information for low-speed reproduction is recorded is concentrated on a specific area on the
次に、実施の形態1の動作を説明する。図1はMPEG規格におけるGOP層中のデータフローチャートである。図中、グループスタートコードはGOPの開始コードを、タイムコードはシーケンスの先頭からの時間を、クローズドGOPフラグはGOP内の画像が他のGOPから独立して再生が可能であることを、ブロークンリンクフラグは先行するGOPデータが編集のためには使用不可能であることを、拡張開始コードはグループ拡張領域のスタートを、グループ拡張データはグループ拡張データを、ユーザデータスタートコードはユーザデータ領域のスタートを、ユーザデータはユーザデータ領域のデータを、ピクチャ層は一枚の画面に共通な属性をそれぞれ示す。 Next, the operation of the first embodiment will be described. FIG. 1 is a data flowchart in the GOP layer in the MPEG standard. In the figure, the group start code indicates the start code of the GOP, the time code indicates the time from the beginning of the sequence, the closed GOP flag indicates that the images in the GOP can be reproduced independently of other GOPs, and the broken link The flag indicates that the preceding GOP data cannot be used for editing, the extension start code indicates the start of the group extension area, the group extension data indicates the group extension data, and the user data start code indicates the start of the user data area. , The user data indicates data in the user data area, and the picture layer indicates attributes common to one screen.
GOPとはGroup of Pictureの略であり、ランダムアクセスの単位となる画面グループの最小単位である。ここで、ユーザデータとはユーザが自由にデータを挿入してもよいとされている領域であり、本実施の形態1においては、この領域に補間情報があるかどうか、つまり補間情報を用いての低速再生が可能か否かを示す補間情報フラグと、補間情報の格納している領域の開始アドレスを示す補間情報開始アドレスを示す補間情報開始アドレスと、そしてその補間情報のサイズを示す補間情報サイズと、補間情報を含めた画像情報がどのくらいのピクチャレートで撮影されたものであるかを示す補間情報レートの4つの領域を定義する。 GOP is an abbreviation of Group of Picture, and is the minimum unit of a screen group that is a unit of random access. Here, the user data is an area in which the user may freely insert data. In the first embodiment, whether or not interpolation information is present in this area, that is, using the interpolation information, Interpolation information flag indicating whether low-speed reproduction is possible, interpolation information start address indicating the start address of the area where the interpolation information is stored, and interpolation information indicating the size of the interpolation information Four areas of a size and an interpolation information rate indicating the picture rate at which the image information including the interpolation information is captured are defined.
補間情報は低速再生可能箇所のみに発生するもので、光ディスクに記録されている画像情報全てにわたって本方法で符号化されている必要性はなく、野球、サッカー、ゴルフなどのスポーツ番組において、ボールに追従するシーンなど低速再生の必要性が高い箇所のみの補間情報を光ディスクに記録しておけばよい。よって補間情報の記録領域は、基本情報を記録する領域に比べてかなり低くすることが可能である。これらは、上記プライベート2パケット内の制御情報における情報フラグ18により上記補間情報の有無が記述されているため、プレーヤ内で自動判別することも可能であるほか、映像再生中に上記補間情報の有無を画面表示して操作者に選択させることも可能である。
The interpolation information is generated only at the low-speed playable portion, and there is no need to encode all the image information recorded on the optical disc by the method according to the present invention. Interpolation information of only a portion where high-speed reproduction is necessary such as a scene to be followed may be recorded on the optical disc. Therefore, the recording area for the interpolation information can be considerably lower than the area for recording the basic information. Since the presence / absence of the interpolation information is described by the
また、プライベート2パケット内の制御情報において補間情報開始アドレスが記述されているため、瞬時に光ディスク上の補間情報記録領域にアクセスすることが可能になる。また、図5においてプライベート2パケット14内に、戻り先アドレスが記述してあるため、瞬時に元の通常再生映像に復帰することができる。また、図5のプライベートパケット14には、各ピクチャのアドレスが書き込まれているため、データを読み込んだ後、プレーヤのバッファメモリからのデータの読みだしがスムーズに行えるようになった。
Further, since the interpolation information start address is described in the control information in the two private packets, it is possible to instantaneously access the interpolation information recording area on the optical disk. In FIG. 5, since the return address is described in the private 2
ここで、一般的なディジタル画像情報を圧縮符号化する方法は、以下のようになっている。圧縮されたピクチャタイプには、上述のように“I”、“P”、“B”の3つのピクチャタイプがある。低速再生時に使用する補間情報は“B”タイプを用いる。これは2つの理由による。1つめは、Bピクチャタイプは3つのタイプの中でもっとも情報量が少なく補間情報記録領域が少なくできるためである。2つめは、補間情報は低速再生画であるために連続する画面では変化の度合が少なく相関の高いので、“I”,“P”タイプのピクチャを用いなくても高画質を維持できるためである。当然補間情報をデコードする際には、元の通常再生映像データにおけるIピクチャおよびPピクチャを用いて、補間情報のBピクチャをデコードするか、補間情報自身に、Bピクチャのデコードに必要なIピクチャやPピクチャを備えておかなくてはならない。 Here, a method of compressing and encoding general digital image information is as follows. As described above, there are three compressed picture types, “I”, “P”, and “B”. The "B" type interpolation information is used at the time of low-speed reproduction. This is for two reasons. The first is that the B picture type has the smallest amount of information among the three types, and the interpolation information recording area can be reduced. Second, since the interpolation information is a low-speed playback image, the degree of change is small and the correlation is high in continuous screens, so that high image quality can be maintained without using “I” or “P” type pictures. is there. Naturally, when decoding the interpolation information, the I picture and the P picture in the original normal reproduction video data are used to decode the B picture of the interpolation information, or the interpolation information itself includes the I picture necessary for decoding the B picture. And P-pictures.
図8は本実施の形態1における符号化圧縮された画像情報の構成の記録位置を示す図である。図8(a)において、“I”、“P”、“B”はそれぞれMPEG方式で圧縮された画像タイプをあらわす。“I”はIピクチャをあらわし、このIピクチャのみの情報から符号化された画面で、時間方向の冗長度を削減するフレーム間予測を用いずに生成される。“P”はPピクチャをあらわし、IまたはPピクチャからの予測をおこなってできる画面である。一般にPピクチャ内のマクロブロックタイプは、予測メモリを用いないフレーム内予測画面と、予測メモリを用いる順方向フレーム間予測画面の両方を含んでいる。“B”はBピクチャをあらわし、双方向予測によって生成される。画面タイプの下の数字はテンポラル・リファレンスと呼ばれるものでピクチャの再生順を示すものである。 FIG. 8 is a diagram showing a recording position of the configuration of the encoded and compressed image information according to the first embodiment. In FIG. 8A, “I”, “P”, and “B” each represent an image type compressed by the MPEG method. “I” represents an I picture, and is generated on the screen encoded from information of only the I picture without using inter-frame prediction for reducing redundancy in the time direction. “P” represents a P picture and is a screen that can be predicted from an I or P picture. In general, the macroblock type in a P picture includes both an intra-frame prediction screen using no prediction memory and a forward inter-frame prediction screen using a prediction memory. “B” represents a B picture and is generated by bidirectional prediction. The number below the screen type is called a temporal reference and indicates the playback order of pictures.
通常のNTSC方式のTV信号の1秒あたりのフレーム数は、ほぼ30フレーム/秒)である。これに対し、本実施の形態1で用いる画像は、例えば毎秒120フレームで撮影されたものや、それと同様のアニメーションなどである。これをTV受像機で扱える30フレーム/秒で符号化すると、再生画像は1/4倍の低速再生になる。そこでこの画像情報を4フレームにつき1フレームの割合で再生すると、通常の速度で再生される。同様に2フレームにつき1フレームの割合で再生すると、1/2倍の低速再生が実現できる。 The number of frames per second of a normal NTSC TV signal is approximately 30 frames / second. On the other hand, the image used in the first embodiment is, for example, an image shot at 120 frames per second, or an animation similar thereto. If this is encoded at 30 frames / sec which can be handled by a TV receiver, the reproduced image is reproduced at a low speed of 1/4 times. Therefore, when this image information is reproduced at a rate of one frame per four frames, the image information is reproduced at a normal speed. Similarly, when reproduction is performed at a rate of one frame for every two frames, a half speed reproduction can be realized.
光ディスクへの情報記録の方法を以下に示す。通常の速度で再生する場合に読みだす画像情報を基本情報、低速再生時にしか読みださない画像情報を補間情報とすると、図7に示すように、基本情報は通常の画像情報を記録するのと同様に、光ディスク1の内周に設けた記録領域27に連続的に記録する。これに対し補間情報は、光ディスク1の外周に設けた記録領域28(b)にまとめて記録する。
The method of recording information on the optical disk will be described below. Assuming that the image information read out at the time of normal speed reproduction is the basic information and the image information read out only at the low speed reproduction is the interpolation information, the basic information records the normal image information as shown in FIG. Similarly to the above, recording is continuously performed on the
本実施の形態1では、基本情報が4枚に1枚の割合であるので、NTSC方式の場合120フレーム/秒で撮影されたものを用いており、1/2倍再生の場合は、補間情報bと基本情報を読み出すことで30フレーム/秒の低速再生が行われ、1/4倍再生の場合は、補間情報aと補間情報bと基本情報を読み出すことで30フレーム/秒の低速再生が行える。 In the first embodiment, the basic information has a ratio of one out of four. Therefore, in the case of the NTSC system, the image captured at 120 frames / second is used. By reading b and the basic information, low-speed reproduction of 30 frames / sec is performed. In the case of 1/4 reproduction, low-speed reproduction of 30 frames / sec is performed by reading the interpolation information a, the interpolation information b and the basic information. I can do it.
図8は本実施の形態における低速再生の概念図で、ここでは、撮影に用いるカメラのフレームレートは120コマ/secとする。この場合、30コマ/secのモニターでは1/4倍の低速再生画(図8(c))、2枚に1枚の割合で再生を行うと1/2倍の低速再生画(図8(b))、また4枚に1枚の割合で再生を行うと通常再生画となる。 FIG. 8 is a conceptual diagram of low-speed reproduction according to the present embodiment. Here, the frame rate of a camera used for photographing is 120 frames / sec. In this case, on a monitor of 30 frames / sec, a low-speed playback image of 1/4 times (FIG. 8C) is reproduced at a rate of one out of every two images (FIG. 8 (C)). b)) Also, when the reproduction is performed at a ratio of one out of four images, a normal reproduced image is obtained.
MPEG符号化されたピクチャには、面内符号化画面のIピクチャ、一方向の予測画面を利用するPピクチャ、両方向の予測を利用するBピクチャがある。GOP内のピクチャ数(N)、IまたはPピクチャの現れる周期(M)について、通常はN=15、M=3に選ぶことが一般的になっている。本実施の形態1においては、通常再生時に使用するピクチャについては従来通りのピクチャの配列とし、低速再生時のみに使用する補間情報のピクチャはBタイプを多く用いたストリームとする。B以外のタイプのピクチャを使用すると、通常再生時に読み出さないために、通常再生のピクチャが構成できない場合があるためである。図8中においてはN=60、M=12となる。 The MPEG-coded pictures include an I picture of an intra-coded picture, a P picture using a one-way prediction picture, and a B picture using a two-way prediction. With respect to the number of pictures (N) in a GOP and the cycle (M) in which I or P pictures appear, it is general to select N = 15 and M = 3. In the first embodiment, pictures used during normal playback are arranged in the same manner as in the conventional picture, and interpolation information pictures used only during low-speed playback are streams using many B types. This is because if a picture of a type other than B is used, the picture is not read out during normal reproduction, so that a picture for normal reproduction may not be formed. In FIG. 8, N = 60 and M = 12.
また、図8中、網掛けを施していないピクチャは補間情報から得られるピクチャで、通常再生時には用いない。また、高フレームレートで撮影した情報は、フレーム間差分はが常のものに比べて小さくなるために、情報量の少ないBタイプを用いることはディスク容量の面からも有効である。そのため、1GOPあたりのBピクチャタイプの比率は、補間情報におけるBピクチャの占有比>通常再生時のBピクチャの占有比となる。 In FIG. 8, unshaded pictures are pictures obtained from interpolation information and are not used during normal reproduction. In addition, since information captured at a high frame rate has a smaller inter-frame difference than normal information, the use of the B type having a small amount of information is effective also from the viewpoint of disk capacity. Therefore, the ratio of the B picture type per GOP is: B picture occupation ratio in interpolation information> B picture occupation ratio during normal reproduction.
本実施の形態1の方式で光ディスク1に記録した画像情報を再生する場合、参照値(以下、「テンポラルリファレンス値」という)と呼ばれる画像の再生順をあらわす数字が問題になる。図8(a)の画面タイプの下の数字を例にすると、符号化したビデオストリームのテンポラルリファレンスは1,2,3,4,5・・・と順序よく並んでいるために通常再生できるが、図8(c)の場合は1/4倍の低速再生になる。また、基本情報のみを再生した場合、テンポラルリファレンスは1,5,9,13・・・・・と定数倍はなれたところにあるので、一般のデコーダにかからない場合がある。
When reproducing the image information recorded on the
一般的な映像再生装置は、秒あたりのコマ数は例えばNTSCだとほぼ30コマ/秒と固定されているために、低速再生の場合はいかに低速に再生しようとも時間分解能は向上せず、ぎくしゃくした再生画しか得られなかった。そこで本実施の形態1では、高速度カメラなどで撮影した秒あたりのコマ数の多い映像素材を符号化し、再生速度に応じて、復号する秒あたりのコマ数を変化させるようにした。 In a general video reproducing apparatus, the number of frames per second is fixed to, for example, about 30 frames / second in NTSC. Therefore, in the case of low-speed reproduction, no matter how low the reproduction speed is, the time resolution is not improved. Only the reproduced image that was obtained was obtained. Therefore, in the first embodiment, a video material having a large number of frames per second captured by a high-speed camera or the like is encoded, and the number of frames decoded per second is changed according to the reproduction speed.
図9は、本実施の形態1における通常再生におけるフィールド再生法を示す図である。通常、テレビジョンにおけるフレームはインターレース再生であり、第1フィールド、第2フィールドで1つのフレームを構成している。図9(a)、(b)は低速再生時の再生フィールドを示す図である。また通常再生時には点線で囲んだフィールドを再生する。よって、点線で囲まれたフィールドが通常システムストリームになり、囲まれていないフィールドは補間システムストリームになる。 FIG. 9 is a diagram showing a field reproduction method in normal reproduction according to the first embodiment. Normally, a frame in television is interlaced reproduction, and the first field and the second field constitute one frame. FIGS. 9A and 9B are views showing a reproduction field at the time of low-speed reproduction. At the time of normal reproduction, a field surrounded by a dotted line is reproduced. Therefore, the fields enclosed by the dotted line become the normal system stream, and the fields not enclosed become the interpolation system stream.
このような補間情報は、図7中の28(b)に示すように、補間情報のみを別のデータストリームとして光ディスク上の別の場所に配置することも可能であるが、図28(a)のように、通常再生ストリームの後ろに例えばGOP単位で配置することも可能である。ただし、光ディスク上の同一の場所に配置した場合は、通常再生時において必要バッファメモリの増大や、読みだしレートの向上が必要になってくる。また、光ディスク上の別の場所の補間情報を配置した場合は、補間情報再生時におけるアクセス時間が増大する。 As shown in FIG. 7 (b), such interpolation information can be arranged in another location on the optical disc by using only the interpolation information as another data stream, but FIG. 28 (a) , It is also possible to arrange it after the normal reproduction stream, for example, in GOP units. However, if they are arranged at the same location on the optical disk, it is necessary to increase the required buffer memory and improve the reading rate during normal reproduction. In addition, when interpolation information at another location on the optical disk is arranged, the access time when reproducing the interpolation information increases.
また、図9(a)のフィールド再生方法では、通常再生時にフィールドの時間間隔が一定でなく、画像再生時に再生画がぎくしゃくするのに対して、図9(b)のフィールド再生方法では、通常再生時のフィールドの時間間隔が一定となり、スムーズな再生画が得られる。また、補間情報は画像全般について存在する必要はないため、低速再生の要求頻度の高いところだけに本方式を用いることが可能である。 Also, in the field reproduction method of FIG. 9A, the time interval of the field is not constant during normal reproduction, and the reproduced image becomes jerky during image reproduction. On the other hand, in the field reproduction method of FIG. The time interval of the field at the time of reproduction becomes constant, and a smooth reproduced image is obtained. In addition, since the interpolation information need not exist for the entire image, the present method can be used only in a place where low-speed reproduction is frequently requested.
実施の形態2.
次に、本発明の実施の形態2を説明する。図10は本実施の形態2の映像記録再生方法を示す図で、図10(a)は通常のビデオストリームのGOP内の画面タイプを示す図であり、図10(b)はコマを減らしたビデオストリームのGOP内の画面タイプを示す図である。ここでは通常ビデオストリームにおけるB2、B4、B6の各フレームを削除し、再生時には、削除されたフレーム箇所に直前のフレームB1、B3、B5を連続再生する。この場合、連続再生は再生画をフリーズすることにより実現する。さらに、削除したフレームの情報量を別のフレームに割り当て再符号化することでより高画質が得られ、また、削除したフレーム情報量に相当する記録時間の増大が可能となる。
Next, a second embodiment of the present invention will be described. FIG. 10 is a diagram showing a video recording / reproducing method according to the second embodiment. FIG. 10 (a) is a diagram showing a screen type in a GOP of a normal video stream, and FIG. It is a figure which shows the screen type in the GOP of a video stream. Here, each frame of B2, B4, and B6 in the normal video stream is deleted, and at the time of reproduction, the immediately preceding frames B1, B3, and B5 are continuously reproduced at the position of the deleted frame. In this case, continuous playback is realized by freezing the playback image. Furthermore, by assigning the information amount of the deleted frame to another frame and re-encoding, higher image quality can be obtained, and the recording time corresponding to the deleted frame information amount can be increased.
図11は、本実施の形態2の画面フリーズを実現するためのビデオストリームの構造を示す図である。図において、ピクチャヘッダ(図中、「PCH」と略記)29にはピクチャ情報の開始コードなどが格納され、ピクチャ符号化機能拡張部(図中、「PCEX」と略記)30には符号化の機能拡張された情報が格納され、量子化マトリックス機能拡張部(図中、「QMFEX」と略記)31には量子化マトリックスの機能拡張された情報が格納され、ピクチャ表示機能拡張部(図中、「PDEX」と略記)32にはピクチャ表示の機能拡張された情報が格納され、ピクチャ空間スケーラブル機能拡張部(図中、「PSEX」と略記)33にはピクチャ空間スケーラブルの機能拡張された情報が格納され、ピクチャテンポラルスケーラブル機能拡張部(図中、「PTSEX」と略記)34にはピクチャテンポラルスケーラブルの機能拡張された情報が格納され、スライス層(図中、「SLICE」と略記)35には開始コードを持つ一連のデータ列の中の最少単位であるスライスが格納されている。 FIG. 11 is a diagram showing a structure of a video stream for realizing a screen freeze according to the second embodiment. In the figure, a picture header (abbreviated as “PCH” in the figure) 29 stores a start code of picture information and the like, and a picture coding function extension unit (abbreviated as “PCEX” in the figure) 30 is used for encoding. The expanded information is stored, and the quantization matrix function expansion unit (abbreviated as “QMFEX” in the figure) 31 stores the expanded information of the quantization matrix, and the picture display function expansion unit (in the figure, “PDEX” is abbreviated to the picture display function, and the picture space scalable function extension unit (abbreviated to “PSEX” in the figure) 33 stores the picture space scalable information. The picture temporal scalable function extension unit (abbreviated as “PTSEX” in the figure) 34 has the picture temporal scalable function extended. Broadcast is stored, (in the figure, abbreviated as "SLICE") slice layer slice is the minimum unit of a series of data strings having a start code 35 is stored.
さらにピクチャ符号化機能拡張部30中には、トップフィールドが時間的に先に来るかどうかを示すトップフィールドファーストフラグ(図中、「TFF」と略記)37、テレシネ変換のために、第1フィールドを再表示するかどうかを示すリピートファーストフィールドフラグ(図中、「RFF」と略記)38、プログレッシブフォーマットかどうかを示すプログレッシブフレームフラグ(図中、「PF」と略記)39がある。これらはいずれもMPEG規格の中に規定されているものである。この3つのフラグとMPEG規格で規定されているシーケンス拡張部のプログレッシブシーケンスフラグを各種設定を行うことにより、フレームあるいはフィールドの再生を設定できる。図18は実施の形態2のフラグ設定による再生モードを示す図である。
The picture coding
図12は、本実施の形態2のブロック回路図で、ディジタル動画情報を録画した光ディスクを作成する際に、ディジタル映像情報の1秒当りのコマ数を削減した記録映像ファイルを作成することにより、ディジタル映像の圧縮効率を高めるようにしたものである。図において、40はビデオA/D変換器、41は映像情報圧縮手段、90は動ベクトル量を検出する動ベクトル量検出手段、91はコマ落し量判定手段、42はディスクフォーマットエンコーダ、43は変調手段、44は記録データファイル、45はROMディスクマスタリング装置、1は作成ROMディスクである。 FIG. 12 is a block circuit diagram of the second embodiment. When an optical disc on which digital moving image information is recorded is created, a recorded image file in which the number of frames per second of digital image information is reduced is created. This is to improve the compression efficiency of digital video. In the figure, 40 is a video A / D converter, 41 is video information compressing means, 90 is a moving vector amount detecting means for detecting a moving vector amount, 91 is a frame drop amount determining means, 42 is a disk format encoder, and 43 is a modulation. Means, 44 is a recording data file, 45 is a ROM disk mastering device, 1 is a created ROM disk.
図13は、実施の形態2において、動ベクトル量に対してどのようにコマ落しを行うかを示した図で、図13(a)は24コマ/秒と30コマ/秒とを動ベクトル量に応じて切り替えるようにした場合を、図13(b)は30コマ/秒と27コマ/秒と24コマ/秒とを切り替えるようにした場合をそれぞれ示している。 FIG. 13 is a diagram showing how frames are dropped with respect to the motion vector amount in the second embodiment. FIG. 13 (a) shows that 24 frames / second and 30 frames / second are FIG. 13B shows a case where switching is performed between 30 frames / second, 27 frames / second, and 24 frames / second, respectively.
TV画面における1秒当りのコマ数は、NTSC圏やPAL圏によっても異なるが、例えば日本や米国の場合は、30コマ/秒である。TV画面に表示する際のコマ数は、TV方式のフォーマットに対応させる必要があるが、光ディスクに記録する映像データは、必ずしも全てのコマ数をファイルしておく必要はなく、コマ落ちしても目だたない範囲でピクチャ単位のデータを削除することが可能である。この場合、画面表示する際は、複数のピクチャから構成されるGOP単位に設けられたヘッダ部分または、ピクチャデータの先頭部分に設けられたヘッダ部分に、前回の同じ画面を繰り返し再生するフラグを立てることにより、対応可能である。 The number of frames per second on the TV screen differs depending on the NTSC zone or PAL zone, but is 30 frames / second in Japan and the United States, for example. The number of frames to be displayed on the TV screen needs to correspond to the format of the TV system. However, the video data to be recorded on the optical disk does not necessarily need to file all the number of frames. It is possible to delete data in picture units within an inconspicuous range. In this case, when displaying a screen, a flag for repeatedly reproducing the previous screen is set in a header portion provided for each GOP composed of a plurality of pictures or a header portion provided at the head of picture data. By doing so, it is possible to respond.
しかし、元々24コマ/秒でデータが構成されている映画フィルムの場合は別にして、必ずしも1GOP単位におけるピクチャの削減数を一定にすることは、コマ落ちした場合に絵柄によっては目だつ場合がある。そこで、図12に示す実施の形態2では、画面の動きの速さに応じてコマ落ちさせる数を適応的に可変させている。 However, apart from the case of a movie film in which data is originally composed of 24 frames / sec, keeping the number of picture reductions per GOP unit constant may be noticeable depending on the picture when a frame is dropped. . Therefore, in the second embodiment shown in FIG. 12, the number of dropped frames is adaptively changed according to the speed of the screen movement.
図19、図20、図21は本実施の形態2の画面フリーズを実現するためのビデオストリームの構造を示す図である。図において、シーケンスヘッダ(図中、「SH」と略記)46はランダムアクセスの頭出しのために使われる、GOP47はピクチャを何枚か集めたものをひとかたまりにしたもの、シーケンスヘッダコード(図中、「SHC」と略記)48はシーケンスヘッダ46に含まれシーケンスヘッダを識別するためのコード、シーケンス拡張部(図中、「SQEX」と略記)49はシーケンスヘッダ46に含まれMPEG1とMPEG2を区別するもの、シーケンス表示拡張部(図中、「SQDP」と略記)50はシーケンスヘッダ46に含まれ表示に関する機能拡張を行うためのフラグなどが格納されたもの、シーケンススケーラブル拡張部(図中、「SQSC」と略記)51はシーケンスヘッダ46に含まれスケーラブル拡張を行うためのフラグなどが格納されたもの、ユーザデータ部(図中、「UD」と略記)52には、ユーザデータ開始部(図中、「UDSC」と略記)53とユーザデータ(図中、「USRDT」と略記)54が格納されている。GOP47内にはGOPヘッダ(図中、「GPH」と略記)55とユーザデータ52とピクチャ層56が格納されている。ピクチャ層56にはピクチャヘッダ(図中、「PCH」と略記)57とスライス層58が格納されている。
FIG. 19, FIG. 20, and FIG. 21 are diagrams showing the structure of a video stream for realizing a screen freeze according to the second embodiment. In the figure, a sequence header (abbreviated as "SH" in the figure) 46 is used for random access cueing, a
図19、図20、図21中のいずれかのユーザデータ部52に、秒あたりのコマ数、どの画面をフリーズするかの情報を書き込んでおくことにより、装置からの再生制御が容易となる。
By writing information on the number of frames per second and which screen is to be frozen in any of the
図22は映像素材のフィールドの削除方法を示す図である。映画素材をテレシネ変換している映像素材の場合、図22(a)に示すように、削除フィールド88を時間的に前のフィールド89で補う。そのとき図9で示した各フラグ設定状態は88aの削除フィールド箇所ではトップフィールドファーストフラグ37が1、リピートファーストフィールド38が1、プログレッシブフレームフラグ39が1となり、88bの削除フィールド箇所ではトップフィールドファーストフラグ37が0、リピートファーストフィールド38が1、プログレッシブフレームフラグ39が1となる。
FIG. 22 is a diagram showing a method of deleting a field of a video material. In the case of a video material in which a movie material is subjected to telecine conversion, as shown in FIG. 22A, the deleted field 88 is supplemented by a temporally previous field 89. At this time, the flag setting states shown in FIG. 9 are such that the top field
また、ビデオカメラで撮影した映画(vシネマ)の場合、図22(b)に示すように、削除フィールドを削除し、秒あたり24コマの情報のストリームを構成することができる。そのとき図9で示した各フラグ設定状態は59cの削除フィールド箇所ではトップフィールドファーストフラグ37が0、リピートファーストフィールド38が1、プログレッシブフレームフラグ39が1となり、59dの削除フィールド箇所ではトップフィールドファーストフラグ37が1、リピートファーストフィールド38が1、プログレッシブフレームフラグ39が1となる。
In the case of a movie (v cinema) shot by a video camera, as shown in FIG. 22B, the deletion field can be deleted to form a stream of information of 24 frames per second. At this time, each flag setting state shown in FIG. 9 is such that the top field
次に、実施の形態2の動作を説明する。図12において、映像情報圧縮手段41にて圧縮された映像報の動ベクトル量を、動ベクトル量検出手段90にて抽出する。一般的に動きベクトルのコードは、動きの少ない方に小さなビット数が割り当てられ、動きの大きい方に大きなビット数が割り当てられるため、動ベクトル量をカウントするだけで、画面ごとの動きの速さを定量的に把握できる。
Next, the operation of the second embodiment will be described. In FIG. 12, the motion vector amount of the video report compressed by the video
また、絵柄によっては、画面のほとんどが静止画像に近い場合でも画面の一部が大きく動く場合も考えられるので、このような場合はピクチャ全体の平均レベルではなく、マクロブロック(MB)単位での動きベクトルデータの最大値を、抽出して動ベクトル量とする方が適している。 In addition, depending on the design, a part of the screen may move greatly even when the screen is almost a still image. In such a case, instead of the average level of the entire picture, the macroblock (MB) unit is used. It is more suitable to extract the maximum value of the motion vector data and use it as a motion vector amount.
そのため、動ベクトル量検出回路90にて1GOP当りの動ベクトル量を計数し、この計数値が所定の値を超えたか超えないかで、コマ落し量判定手段91で1GOP当りのコマ落ち数を決定することが可能となる。また、この場合、ディスクフォーマットエンコーダ42にて一旦メモリに蓄積された圧縮映像データのうち、Bピクチャのデータを削除するとともに、1GOP単位で割り当てられているヘッダ情報、または1ピクチャ単位で割り当てられているヘッダ情報を書き換える動作を行う。
Therefore, the motion vector amount per one GOP is counted by the motion vector
これは、IピクチャやPピクチャを削除してしまうと、前後するBピクチャがデコードできなくなり、また、ヘッダに削除したピクチャの情報を書き込むことで、再生時に前後の画面をフリーズさせ、1秒当りのコマ数をTV方式の必要数に合わせることが可能となるからである。 This is because if an I-picture or P-picture is deleted, the preceding and following B-pictures cannot be decoded, and the information of the deleted picture is written in the header to freeze the previous and next screens during playback, and the The number of frames can be adjusted to the required number of TV systems.
実施の形態2の場合、動ベクトル量が大きい場合は、コマ落ちを少なくし、例えば静止画像に近くて動ベクトル量が小さい場合はコマ落ちを大きくすることで、光ディスクに記録するデータ量を減らすことが可能となる。このような方式では、コマ落ち量が画面の動きに応じて可変されるため、コマ落ちしても人間の目に目だたなくなる。この場合の動ベクトル量の検出は、1GOP内に均等に割り当てられているPピクチャから行うことが望ましく、Bピクチャからも可能であるが、圧縮画像の連続性や両方向データの存在がシステムを複雑にしてしまう恐れがある。 In the second embodiment, when the moving vector amount is large, the number of dropped frames is reduced. For example, when the moving vector amount is small and the moving vector amount is small, the number of dropped frames is increased, thereby reducing the data amount to be recorded on the optical disc. It becomes possible. In such a method, since the amount of dropped frames is varied according to the movement of the screen, even if the frames are dropped, they are invisible to the human eye. In this case, the detection of the motion vector amount is desirably performed from P pictures evenly allocated in one GOP, and can be performed from B pictures. However, the continuity of the compressed image and the existence of bidirectional data complicate the system. There is a risk of doing so.
また、コマ落し量判定手段91において、コマ落ち数を、図13(a)に示すように、動ベクトル量の大小に応じてゼロと、1秒当り6コマ(ピクチャ数24コマ/秒)の2種類に設定することも可能であるが、図13(b)に示すように、ゼロから1秒当り6コマの間を多段階に設定することも可能である。フィルム映画等の場合においては、24コマ/秒となっているため、MPEG等の規格においても24コマ/秒からの再生方式等が規定されている。そのため、特に上述の24コマ/秒と30コマ/秒との2段階でコマ落ちを規定すると、システムの構成が簡単になり、極めて実用的である。 13A, the number of dropped frames is set to zero according to the magnitude of the motion vector amount, and to 6 frames per second (24 pictures / second) as shown in FIG. Although two types can be set, as shown in FIG. 13B, it is also possible to set the number of frames between zero and six frames per second in multiple stages. In the case of a film movie or the like, the frame rate is 24 frames / sec. Therefore, a reproduction method from 24 frames / sec is specified in standards such as MPEG. For this reason, if the number of dropped frames is defined in two steps, that is, 24 frames / second and 30 frames / second, the configuration of the system is simplified, which is extremely practical.
なお、図13では、ピクチャ間の動きに反比例してコマ落ち数を段階的に決定したが、実際の人間の目の特性を考慮すると、動きが速すぎて人間の目が追従できる範囲を超えた場合は、逆にコマ落ち数を大きくしても目だたない場合がある。これは、人間の目には図17に示すようなコマ落ちの検知限特性があると予想されるからである。この場合、当然ながら静止画像に近い映像ではコマ落ちは検知されにくい。一方、あまりにも映像の動きが激しく、人間の目の追従が困難な場合においても、当然ながらコマ落ちは検知されにくいからである。図14のデータ変換テーブル92では、このような特性を利用して動ベクトル量の抽出値を補正するようにしたものである。 In FIG. 13, the number of dropped frames is determined stepwise in inverse proportion to the movement between pictures. However, in consideration of the characteristics of the actual human eye, the movement is too fast to exceed the range that the human eye can follow. If the number of dropped frames is increased, the number of dropped frames may be inconspicuous. This is because it is expected that the human eye has a detection limit characteristic of dropped frames as shown in FIG. In this case, it is natural that the dropping of the frame is hardly detected in the image close to the still image. On the other hand, even when the motion of the video is so intense that it is difficult for the human eye to follow, it is naturally difficult to detect a dropped frame. In the data conversion table 92 shown in FIG. 14, the extracted value of the motion vector amount is corrected using such characteristics.
図14は、上記の人間の特性を考慮しコマ数を可変するブロック回路図で、図12と同一符号はそれぞれ同一部分を示しており、92はデータ変換テーブル、93はコマ落し量判定手段である。図中の変換テーブル92では動ベクトル量が所定の絶対量以下の場合には、動ベクトル量に反比例した数のコマ落ちを行い、上記絶対量以上の場合においては上記動ベクトル量に比例した数のコマ落ちを行うようにしたものである。 FIG. 14 is a block circuit diagram for varying the number of frames in consideration of the characteristics of human beings. The same reference numerals as in FIG. 12 denote the same parts, 92 denotes a data conversion table, and 93 denotes a frame drop amount determining means. is there. In the conversion table 92 shown in the figure, when the motion vector amount is equal to or less than a predetermined absolute amount, the number of dropped frames is inversely proportional to the motion vector amount. This is to make the frame drop.
図15は、実施の形態2におけるコマ落し前、および光ディスク上に記録されるディジタル圧縮映像データの配列を示した図、図16はコマ数を落として光ディスク上に記録した映像情報データが、再生時に、画面上の表示がどのようになるかを示した図で、図16(a)はコマ落ししていない映像データの表示画面、図16(b)は3画面に1画面コマ落しを行った映像データの表示画面、図16(c)は3画面に2画面コマ落しを行った映像データの表示画面、図16(d)は5画面に1画面コマ落しを行った映像データの表示画面をそれぞれ示している。 FIG. 15 is a diagram showing an arrangement of digital compressed video data recorded on the optical disc before frame dropping and according to the second embodiment, and FIG. 16 is a diagram showing video information data recorded on the optical disc with a reduced number of frames. FIG. 16A is a diagram showing how the display on the screen is sometimes displayed. FIG. 16A shows a display screen of video data in which frames are not dropped, and FIG. 16B shows one frame dropped for three screens. 16 (c) is a display screen of video data in which two frames are dropped on three screens, and FIG. 16 (d) is a display screen of video data in which one frame is dropped on five screens Are respectively shown.
図17は、人間の視感特性を示す図で、画像の動きの早さに対して、検知されるコマ落ち数がどの程度までであるかを示している。 FIG. 17 is a diagram illustrating human visual perception characteristics, and shows how many dropped frames are detected with respect to the speed of image movement.
実際に光ディスク上に記録される映像情報は、図15(c)に示すような形となる。元々のディジタル圧縮映像データは、図15(a)に示すようなデータ配列をとる。これは、Iピクチャは独自での再生が可能であるが、Pピクチャは時間的に前のIピクチャ、またはPピクチャからの予測画面を必要とし、Bピクチャは前後のIピクチャまたはPピクチャからの予測画面を必要とするからである。したがって、画面の再生順序とは異なり、Iピクチャの次にPピクチャのデータを配置し、その次にBピクチャのデータを配置する構成となっている。 The video information actually recorded on the optical disk has a shape as shown in FIG. The original digital compressed video data has a data array as shown in FIG. This means that an I picture can be independently reproduced, but a P picture requires a prediction screen from the previous I picture or P picture, and a B picture requires a prediction picture from the preceding or succeeding I picture or P picture. This is because a prediction screen is required. Therefore, unlike the reproduction order of the screen, the data of the P picture is arranged after the I picture, and the data of the B picture is arranged after the I picture.
しかし、光ディスク上のデータ配置は、例えば、特殊再生時においてIピクチャとPピクチャのみを再生する場合を考えると、IピクチャとPピクチャが連続して配置されているのが大変都合が良く、図15(c)のように並び替えられる。これは、圧縮後のデータ量は、元の映像信号データ量に比べて充分小さくなっているため、光ディスク再生装置のメモリの並び替えが容易に可能で、上述したデータの配列変換に対して充分に対応可能であるからである。本方式の場合は、さらに動きの速い映像データが連続するGOPの場合においてBピクチャを部分的に削除することで、図15(c)に示すように、よりデータ量が削減され、ファイル効率が向上している。 However, regarding the data arrangement on the optical disc, for example, when only the I picture and the P picture are reproduced during the special reproduction, it is very convenient that the I picture and the P picture are continuously arranged. 15 (c). This is because the data amount after compression is sufficiently smaller than the original video signal data amount, so that the memory of the optical disk reproducing device can be easily rearranged, and the data array conversion described above is sufficient. It is because it is possible to respond to. In the case of this method, the data amount is further reduced and the file efficiency is reduced as shown in FIG. Has improved.
このようなデータの並び替えとピクチャデータの削減は、例えば図12や図14中に示したディスクフォーマットエンコーダ42によって行われるが、さらに高密度記録を行う際の符号間干渉の除去等を目的として、例えばEFM変調や1−7変調といった変調が施され、記録可能なファイル装置(例えば磁気ディスクや磁気テープ、または光磁気ディスク等)に一旦記録される。このようにして一旦保管されたデータによりROMディスクマスタリング装置45によって例えば原盤が作成され、スタンパによってROMディスク9が大量生産される。当然ではあるが、光ディスクが記録再生装置の場合は以上の動作が記録データファイル7およびROMディスクマスタリング装置を介さずに行われ、直接光ディスクにデータが記録される。
Such data rearrangement and picture data reduction are performed by, for example, the disk format encoder 42 shown in FIG. 12 or FIG. 14, but for the purpose of removing intersymbol interference when performing high-density recording. For example, modulation such as EFM modulation or 1-7 modulation is performed, and is temporarily recorded on a recordable file device (for example, a magnetic disk, a magnetic tape, or a magneto-optical disk). For example, a master is created by the ROM disk mastering device 45 using the data once stored in this way, and the
次に、上述した圧縮映像データを光ディスクから読みだして再生し、画面に表示した場合は、図16に示すようになる。図16(a)はコマ落しを許容しない、ピクチャ間にある程度動きがある映像の場合で、エンコード前の映像とピクチャ単位で対応している。これに対して、3画面に1画面のコマ落ちを許容した場合は、図16(b)のようになり、B2,B4,B6ピクチャをコマ落ちさせ、おのおのB1,B3,B5ピクチャをフリーズ(もう一度繰り返して表示)させる。また、さらに3画面に2画面コマ落ちを許容した場合は、Bピクチャのない画面が再生される。図16(c)のような場合は、コマ落ちの状態が人間の目に検知されやすくなっているが、きわめて静止画像に近い場合は、ここまでコマ落ちを許容しても目だたない。 Next, when the above-described compressed video data is read from the optical disc, reproduced, and displayed on the screen, the result is as shown in FIG. FIG. 16A shows a video in which frame skipping is not allowed and there is some movement between pictures. The video corresponds to a video before encoding in picture units. On the other hand, when the skipping of one frame is allowed for three screens, the result is as shown in FIG. 16B, in which the B2, B4, and B6 pictures are dropped, and the B1, B3, and B5 pictures are frozen ( Display again). Further, when two frames are dropped on three screens, a screen without a B picture is reproduced. In the case shown in FIG. 16 (c), the state of dropped frames is easily detected by human eyes. However, when the image is very close to a still image, even if dropped frames are allowed to this point, it is not noticeable.
また、図16(d)に示すように、図16(a)と図16(b)の中間である5画面ごとに1コマのコマ落しを許容する場合も考えられ、この場合でもBピクチャがコマ落ちされ、前後のピクチャをフリーズすることで対応可能である。この場合のコマ落ちさせる単位は、例えば図16(d)の場合は5画面でのフリーズの位置を固定させることが人間の目に目だたなくするためには望ましく、フリーズ位置を固定しつつBピクチャのみのコマ落しを行うために、図16(d)に示すように、必ずしも前の画像をフリーズさせるだけでなく、後の画像からのフリーズも行われる。このようなフリーズの制御は、GOPの先頭に設けられたヘッダ部またはピクチャデータでの先頭部分に設けられたヘッダ部において、フラグ等を設けることにより行われる。 Also, as shown in FIG. 16 (d), it is conceivable to allow one frame to be dropped every five screens which is halfway between FIG. 16 (a) and FIG. 16 (b). This can be dealt with by dropping frames and freezing the previous and next pictures. In this case, it is desirable to fix the position of the freeze on the five screens in the case of FIG. In order to perform frame dropping of only the B picture, as shown in FIG. 16D, not only the preceding image is always frozen, but also the subsequent image is frozen. Such freeze control is performed by providing a flag or the like in a header provided at the head of the GOP or a header provided at the head of picture data.
ここで、コマ落しを行った映像データを重複表示するための制御情報で重要なのは、まず映像データがインターレスかノンインターレス方式かを見きわめる必要がある。そのための情報は、図19に示すように、複数の映像データをひとまとめにした映像情報単位GOP47が1つないし複数個集まった先頭に記述されるシーケンスヘッダ46におけるユーザデータ52に記述することが望ましい。これは、上記インターレス方式がピクチャ単位に切り替わることは、動き補償等の関係上あまりなく、一度設定すればあまり変えないものであるためである。
Here, the important control information for redundantly displaying the dropped video data is to determine whether the video data is of the interlace or non-interlace type. As shown in FIG. 19, information for this purpose is desirably described in
また、どのフィールドを重複表示するかの制御命令は、動きのぎこちなさ等を解消するため、画面単位で制御することが望ましく、図20のピクチャ層56の先頭に設けられたユーザデータ領域52に書き込んでおくのがよい。
It is preferable that the control command for determining which field is to be overlapped be displayed is controlled in units of a screen in order to eliminate awkward movement or the like, and the user command is provided in the
元々コマ数が少ない映像データを、表示の際にプルアップして所定のフレームレートにする方法としては、フィルムソースの映画素材がよく用いられる。この場合、図22(a)に示すように元々のフィルムをテレビジョン信号にした場合は、3個または2個のフィールドに同じフィルムから作成された映像が生成されている。そのため図のように5枚に1枚のフィールドを重複表示してテレビに再生している。ただし、挿入は、第一フィールドと第2フィールドが数枚おきに交互に挿入されることとなる。このようにすれば映像を重複表示してもなめらかさが保たれた形でフレームレート変換が可能である。元々がテレビジョン信号であったものを、コマ落ちさせた場合においては、フィールド単位で時間的順序があるため、一つ前のフィールドの情報を基に重複表示することとなる。 As a method of pulling up video data originally having a small number of frames to a predetermined frame rate at the time of display, a movie material of a film source is often used. In this case, when the original film is converted into a television signal as shown in FIG. 22A, images created from the same film are generated in three or two fields. Therefore, as shown in the figure, one out of every five fields is displayed and reproduced on the television. However, in the insertion, the first field and the second field are inserted alternately every several sheets. By doing so, it is possible to convert the frame rate while maintaining the smoothness even when the video is displayed repeatedly. When frames are dropped from what was originally a television signal, there is a chronological order in field units, so that overlapping display is performed based on information of the immediately preceding field.
1 光ディスク、 2 再生アンプ、 3 復調器、 4 誤り訂正手段、 5 テンポラルリファレンス変換制御手段、 6 バッファ、 7 復号化手段、 8 D/A変換器、 9 再生制御手段、 10 光ヘッド制御手段、 11 補間情報読み取り制御手段、 12 パックヘッダ、 13 システムヘッダ、 14 プライベート2パケット、 15 オーディオパケット、 16 プライベートパケット、 17 ビデオパケット、 18 情報フラグ、 19 情報アドレス、 20 情報サイズ、 21 ピクチャレート、 22 パケット長、 23 パケット開始コード、 24 戻りアドレス値、 25 ピクチャアドレスデータ、 26 TOC、 27 通常再生用映像情報、 28 低速再生用映像情報、 29 ピクチャヘッダ、 30 ピクチャ符号化機能拡張部、 31 量子化マトリックス機能拡張部、 32 ピクチャ表示機能拡張部、 33 ピクチャ空間スケーラブル機能拡張部、 34 ピクチャテンポラルスケーラブル機能拡張部、 35 スライス層、 37 トップフィールドファーストフラグ、 38 リピートファーストフィールドフラグ、 39 プログレッシブフレームフラグ、 40 ビデオA/D変換器、 41 映像情報圧縮手段、 42 ディスクフォーマットエンコーダ、 43 変調手段、 44 データストレージ、 45 ROMディスクマスタリング装置、 46 シーケンスヘッダ、 47 GOP、 48 シーケンスヘッダコード、 49 シーケンス拡張部、 50 シーケンス表示拡張部、 51 シーケンススケーラブル拡張部、 52 ユーザデータ部、 53 ユーザデータ開始部、 54 ユーザデータ、 55 GOPヘッダ、 56 ピクチャ層、 57 ピクチャヘッダ、 58 スライス層、 59 GOP、 60 GOPレイヤ、 61 スライス、 62 スライスレイヤ、 63 ブロックレイヤ、 66 Iピクチャ、 67 Bピクチャ、 68 Pピクチャ、 69 フレームセクタ手段、 70 エンコーダ、 71 変調器、 72 レーザ駆動回路、 73 レーザ出力スイッチ、 74 光ヘッド、 75 アクチュエータ、 76 光ディスク、 77 ディスクモータ、 78 トラバースモータ、 79 モータ駆動回路、 80 モータ制御回路、 81 モータ制御回路、 82 再生アンプ、 83 復調器、 84 デコーダ、 85 フレームセクタ逆変換手段、 86 情報伸長手段、 87 D/A変換器、 88 削除フィールド、 89 フィールド、 90 動ベクトル量検出手段、 91 コマ落し量判定手段、 92 データ変換テーブル、 93 コマ落し量判定手段。 REFERENCE SIGNS LIST 1 optical disk, 2 reproduction amplifier, 3 demodulator, 4 error correction means, 5 temporal reference conversion control means, 6 buffer, 7 decoding means, 8 D / A converter, 9 reproduction control means, 10 optical head control means, 11 Interpolation information reading control means, 12 pack header, 13 system header, 14 private 2 packets, 15 audio packets, 16 private packets, 17 video packets, 18 information flags, 19 information addresses, 20 information sizes, 21 picture rates, 22 packet lengths , 23 packet start code, 24 return address value, 25 picture address data, 26 TOC, 27 video information for normal reproduction, 28 video information for low speed reproduction, 29 picture header, 30 pictures Encoding function extension unit, 31 Quantization matrix function extension unit, 32 picture display function extension unit, 33 picture space scalable function extension unit, 34 picture temporal scalable function extension unit, 35 slice layer, 37 top field first flag, 38 repeat first Field flag, 39 progressive frame flag, 40 video A / D converter, 41 video information compression means, 42 disk format encoder, 43 modulation means, 44 data storage, 45 ROM disk mastering device, 46 sequence header, 47 GOP, 48 sequence Header code, 49 sequence extension, 50 sequence display extension, 51 sequence scalable extension, 52 user data 53 user data start part, 54 user data, 55 GOP header, 56 picture layer, 57 picture header, 58 slice layer, 59 GOP, 60 GOP layer, 61 slice, 62 slice layer, 63 block layer, 66 I picture, 67 B Picture, 68P picture, 69 frame sector means, 70 encoder, 71 modulator, 72 laser drive circuit, 73 laser output switch, 74 optical head, 75 actuator, 76 optical disk, 77 disk motor, 78 traverse motor, 79 motor drive circuit , 80 motor control circuit, 81 motor control circuit, 82 reproduction amplifier, 83 demodulator, 84 decoder, 85 frame sector reverse conversion means, 86 information decompression means , 87 D / A converter, 88 deleted field, 89 field, 90 motion vector amount detecting means, 91 dropped frame determining means, 92 data conversion table, 93 dropped frame determining means.
Claims (7)
前記ディジタル情報が、前記制御情報を含むプライベートパケットと前記映像情報とを含むビデオパケットを単位として構成され、
前記プライベートパケットは前記ビデオパケットよりも前に配置されるものであり、
前記プライベートパケットには前記ビデオパケットの映像情報における秒当たりのコマ数に関する情報と、該パケットに格納されている前記ピクチャの格納アドレスを記録することを特徴とする記録媒体の記録方法。 The reference picture is an I picture that is video information subjected to intra-frame DCT, a P picture that is video information obtained by DCT coding that has been subjected to forward motion compensation, and the I picture and P picture that are temporally located before and after. In a recording method for recording video information including a B picture, which is video information by DCT coding with motion compensation performed thereon, and digital information including control information of the video information on a recording medium,
The digital information is configured in units of a video packet including the private packet including the control information and the video information,
The private packet is arranged before the video packet,
A recording method for a recording medium, characterized in that information about the number of frames per second in video information of the video packet and a storage address of the picture stored in the packet are recorded in the private packet.
前記プライベートパケットには、前記第2の映像情報の開始アドレスを記録することを特徴とする請求項1に記載の記録媒体の記録方法。 The video information includes first video information and second video information related to the first video information, and the first video information and the second video information are determined by an operator's selection. Either is playable,
The method according to claim 1, wherein a start address of the second video information is recorded in the private packet.
前記ディジタル情報が、前記制御情報を含むプライベートパケットと前記映像情報とを含むビデオパケットを単位として構成され、
前記プライベートパケットは前記ビデオパケットよりも前に配置されるものであり、
前記映像情報は、第1の映像情報と当該第1の映像情報に関連する第2の映像情報とを含み、
前記第1の映像情報を含むディジタルのプライベートパケットには前記ビデオパケットの映像情報における秒当たりのコマ数に関する情報を記録し、
前記第2の映像情報を含むディジタルのプライベートパケットには、該パケットに格納されている前記ピクチャの格納アドレスを記録することを特徴とする記録媒体の記録方法。 The reference picture is an I picture that is video information subjected to intra-frame DCT, a P picture that is video information obtained by DCT coding that has been subjected to forward motion compensation, and the I picture and P picture that are temporally located before and after. In a recording method for recording video information including a B picture, which is video information by DCT coding with motion compensation performed thereon, and digital information including control information of the video information on a recording medium,
The digital information is configured in units of a video packet including the private packet including the control information and the video information,
The private packet is arranged before the video packet,
The video information includes first video information and second video information related to the first video information,
In the digital private packet including the first video information, information on the number of frames per second in the video information of the video packet is recorded.
A recording method for a recording medium, characterized in that a storage address of the picture stored in the digital private packet including the second video information is recorded.
前記プライベートパケットには、前記第2の映像情報の開始アドレスを記録することを特徴とする請求項3に記載の記録媒体の記録方法。 Either the first video information or the second video information can be reproduced by an operator's selection,
4. The method according to claim 3, wherein a start address of the second video information is recorded in the private packet.
前記プライベートパケットの、前記ビデオパケットの映像情報における秒当りのコマ数に関する情報と、前記ピクチャの格納アドレスとを取得し、
前記ビデオパケットの映像情報における秒当りのコマ数に関する情報と、前記ピクチャの格納アドレスとに基いて、前記映像情報を再生することを特徴とする記録媒体の再生方法。 A reproducing method for reproducing a recording medium recorded by the recording medium recording method according to claim 1,
The private packet, obtaining information on the number of frames per second in the video information of the video packet, and the storage address of the picture,
A method for reproducing a recording medium, comprising: reproducing the video information based on information on the number of frames per second in the video information of the video packet and a storage address of the picture.
前記プライベートパケットの、前記ビデオパケットの映像情報における秒当りのコマ数に関する情報、及び前記第2の映像情報の開始アドレスを取得し、
前記ビデオパケットの映像情報における秒当りのコマ数に関する情報に基いて、前記映像情報を再生し、
前記第2の映像情報が選択された場合に、前記第2の映像情報の開始アドレスに基いて前記第2の映像情報を再生することを特徴とする記録媒体の再生方法。 A reproducing method for reproducing a recording medium recorded by the recording medium recording method according to claim 2 or 4,
The private packet, information on the number of frames per second in the video information of the video packet, and the start address of the second video information,
Based on the information on the number of frames per second in the video information of the video packet, reproduce the video information,
A method for reproducing a recording medium, comprising: reproducing the second video information based on a start address of the second video information when the second video information is selected.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004187302A JP3898711B2 (en) | 2004-06-25 | 2004-06-25 | Recording medium recording method and reproducing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004187302A JP3898711B2 (en) | 2004-06-25 | 2004-06-25 | Recording medium recording method and reproducing method |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP02827695A Division JP3604186B2 (en) | 1995-02-16 | 1995-02-16 | Recording method and recording method of recording medium |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005131221A Division JP2005312063A (en) | 2005-04-28 | 2005-04-28 | Recording method and reproducing method for recording medium |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004282794A true JP2004282794A (en) | 2004-10-07 |
JP3898711B2 JP3898711B2 (en) | 2007-03-28 |
Family
ID=33297162
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004187302A Expired - Lifetime JP3898711B2 (en) | 2004-06-25 | 2004-06-25 | Recording medium recording method and reproducing method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3898711B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7340150B2 (en) | 1994-09-26 | 2008-03-04 | Mitsubishi Denki Kabushiki Kaisha | Digital video signal record and playback device and method for selectively reproducing desired video information from an optical disk |
-
2004
- 2004-06-25 JP JP2004187302A patent/JP3898711B2/en not_active Expired - Lifetime
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7340150B2 (en) | 1994-09-26 | 2008-03-04 | Mitsubishi Denki Kabushiki Kaisha | Digital video signal record and playback device and method for selectively reproducing desired video information from an optical disk |
US7343083B2 (en) | 1994-09-26 | 2008-03-11 | Mitsubishi Denki Kabushiki Kaisha | Digital video signal record and playback device and method for selectively reproducing desired video information from an optical disk |
Also Published As
Publication number | Publication date |
---|---|
JP3898711B2 (en) | 2007-03-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100219748B1 (en) | Optical disk recording and reproducing device and method | |
US20010026677A1 (en) | Methods and apparatus for transcoding progressive I-slice refreshed MPEG data streams to enable trick play mode features on a television appliance | |
CA2468867C (en) | Recording medium having a data structure for managing reproduction of graphic data and recording and reproducing methods and apparatuses | |
JP4726267B2 (en) | Encoded video signal format | |
KR100950540B1 (en) | User selectable variable trick mode speed | |
JPH09200695A (en) | Method and device for decoding video data for high-speed reproduction | |
JP3604186B2 (en) | Recording method and recording method of recording medium | |
JP3496604B2 (en) | Compressed image data reproducing apparatus and compressed image data reproducing method | |
JP3861362B2 (en) | Digital signal reproduction method and apparatus | |
JP3551887B2 (en) | Moving image reproducing method and apparatus | |
KR100975170B1 (en) | Image data reproducing device and method | |
JP3253530B2 (en) | Video recording device | |
JP4468497B2 (en) | Method and apparatus for reproducing original data of digitally encoded video film | |
JPH10336585A (en) | Dynamic image recording/reproducing device and dynamic image recording/reproducing method | |
JPH11275518A (en) | Image signal reproduction device and its method | |
JP2004289876A (en) | Recording device | |
JPH09116866A (en) | Encoding method, encoding/decoding method and recording /reproducing device | |
JPH08111843A (en) | Method and device for video disk recording and reproducing and video disk therefor | |
JP3898711B2 (en) | Recording medium recording method and reproducing method | |
JP3558384B2 (en) | Video recording and playback method | |
JP4320738B2 (en) | Audio video signal recording apparatus and audio video signal recording method | |
KR20070043016A (en) | Improving the accessibility of graphics during and after trick play | |
JP2004140723A (en) | Method and device for reproducing digital video information | |
JP2005312063A (en) | Recording method and reproducing method for recording medium | |
JP4573166B2 (en) | Information recording apparatus, information reproducing apparatus, information recording method, and information reproducing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050301 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050428 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050621 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050819 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20051004 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051129 |
|
A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20051215 |
|
A912 | Removal of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20060623 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061116 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20061221 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110105 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120105 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130105 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130105 Year of fee payment: 6 |
|
EXPY | Cancellation because of completion of term |