JP3496603B2 - AV synchronous reproduction method and apparatus, and information recording medium - Google Patents

AV synchronous reproduction method and apparatus, and information recording medium

Info

Publication number
JP3496603B2
JP3496603B2 JP34990499A JP34990499A JP3496603B2 JP 3496603 B2 JP3496603 B2 JP 3496603B2 JP 34990499 A JP34990499 A JP 34990499A JP 34990499 A JP34990499 A JP 34990499A JP 3496603 B2 JP3496603 B2 JP 3496603B2
Authority
JP
Japan
Prior art keywords
data
audio
video
information
reproduction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP34990499A
Other languages
Japanese (ja)
Other versions
JP2001169249A (en
Inventor
勝義 間瀬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP34990499A priority Critical patent/JP3496603B2/en
Publication of JP2001169249A publication Critical patent/JP2001169249A/en
Application granted granted Critical
Publication of JP3496603B2 publication Critical patent/JP3496603B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368—Multiplexing of audio and video streams

Description

【発明の詳細な説明】Detailed Description of the Invention

【０００１】[0001]

【発明の属する技術分野】本発明は、ＤＶＤ−ＲＡＭや
ＣＤ−ＲＯＭの情報記録媒体から映像データ及び音声デ
ータを再生する際に、映像データの切り替えを音声デー
タの一回分の再生時間のタイミングで行って音声データ
及び映像データの同期確立を図るＡＶ同期再生方法及び
その装置並びに情報記録媒体に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention, when reproducing video data and audio data from an information recording medium such as a DVD-RAM or a CD-ROM, switches the video data at the timing of one reproduction time of the audio data. The present invention relates to an AV synchronous reproduction method, an apparatus therefor, and an information recording medium for achieving synchronization between audio data and video data.

【０００２】[0002]

【従来の技術】従来、映像（ビデオ、適宜、Ｖと略称す
る）データ及び音声（オーディオ、適宜、Ａと略称す
る）データを再生する装置（適宜、ＡＶ再生装置と略称
する）において、例えば、ＤＶＤ−ＲＡＭやＣＤ−ＲＯ
Ｍの情報記録媒体から連続的に映像データ及び音声デー
タを再生する方式として、ＭＰＥＧ(Moving Picture Ex
pert Group／ＩＳＯ１１１７２準拠）が採用されてい
る。このＭＰＥＧ方式の規格では、映像データ及び音声
データにそれぞれ３３ビット／９０ｋＨｚで示す時刻情
報（ＰＳＴ：Presentation Time Stamps／ＩＳＯ１１１
７２−１、適宜、タイムスタンプと記載し、又は、ＰＳ
Ｔと略称する）が付加されている。この時刻情報を監視
して、その映像データ及び音声データを再生時の同期確
立が図られている。2. Description of the Related Art Conventionally, in a device for reproducing video (video, appropriately abbreviated as V) and audio (audio, appropriately abbreviated as A) data (hereinafter appropriately referred to as AV reproducing device), for example, DVD-RAM and CD-RO
As a method for continuously reproducing video data and audio data from the M information recording medium, MPEG (Moving Picture Ex
pert Group / ISO11172 compliant) is adopted. According to the MPEG standard, time information (PST: Presentation Time Stamps / ISO111) indicated by 33 bits / 90 kHz for video data and audio data, respectively.
72-1 is described as a time stamp as appropriate, or PS
(Abbreviated as T) is added. This time information is monitored to establish synchronization when reproducing the video data and audio data.

【０００３】このように、従来のＡＶ同期再生装置で
は、常に映像データ及び音声データのそれぞれの時刻情
報を監視してＡＶ同期を確立している。例えば、特開平
１１−１６４２５６号の「オーディオ・ビデオデータ同
期再生装置及び方法」では、映像データ及び音声データ
の処理を個別的に行い、基準となる処理時間が異なるデ
ータ上で正確な映像データ及び音声データの同期確立を
可能にしている。As described above, in the conventional AV synchronization reproducing apparatus, the AV synchronization is always established by monitoring the time information of each of the video data and the audio data. For example, in Japanese Unexamined Patent Publication No. 11-164256, "Audio / Video Data Synchronous Playback Device and Method", video data and audio data are individually processed, and accurate video data and Enables synchronization of voice data.

【０００４】図６は従来のＡＶ同期再生装置の一例を示
すブロック図である。図６において、このＡＶ同期再生
装置は、ＤＶＤ−ＲＡＭやＣＤ−ＲＯＭのドライブなど
のファイル装置４１とともに、このファイル装置４１か
らの映像データ及び音声データなどを分離するＡＶ分離
部４２及び、ここで分離した映像データを処理する映像
処理部４３を有している。さらに、このＡＶ同期再生装
置は、映像処理部４３からの映像データを表示する映像
表示装置４４と、映像データ及び音声データの同期再生
制御を行うＡＶ同期制御部４５と、ＡＶ分離部４２で分
離した音声データを処理する音声処理部４６及び、この
音声処理部４６で処理した音声データを再生する音声再
生装置４７を有している。FIG. 6 is a block diagram showing an example of a conventional AV synchronous reproducing apparatus. In FIG. 6, the AV synchronous reproducing apparatus includes a file device 41 such as a DVD-RAM or CD-ROM drive, an AV separating unit 42 for separating video data and audio data from the file device 41, and the like. It has a video processing unit 43 for processing the separated video data. Further, this AV synchronous reproduction device is separated by the video display device 44 that displays the video data from the video processing unit 43, the AV synchronization control unit 45 that controls the synchronous reproduction of the video data and the audio data, and the AV separation unit 42. The audio processing unit 46 for processing the processed audio data and the audio reproduction device 47 for reproducing the audio data processed by the audio processing unit 46.

【０００５】このＡＶ同期再生装置における、ＡＶ同期
動作は、ＡＶ同期制御部４５の音声時刻情報（ＰＳＴ）
算出部４５ａが、音声データの処理量に基づいて、音声
時刻情報（ＰＳＴ）相当量を算出する。この音声時刻情
報相当量と映像データに付加されている映像時刻情報と
を時刻情報（ＰＳＴ）比較部４５ｂで比較する。この比
較結果に応じて、映像スキップ制御４５ｃ及び映像リピ
ート制御４５ｄが映像表示を制御して音声データ再生と
の同期をとっている。The AV synchronization operation in this AV synchronization reproducing apparatus is performed by the audio time information (PST) of the AV synchronization controller 45.
The calculation unit 45a calculates the audio time information (PST) equivalent amount based on the processing amount of the audio data. The time information (PST) comparison unit 45b compares the audio time information equivalent amount and the video time information added to the video data. In accordance with the comparison result, the video skip control 45c and the video repeat control 45d control the video display to synchronize with the audio data reproduction.

【０００６】[0006]

【発明が解決しようとする課題】このような従来例で
は、特に、ＡＶ同期を確立するために時刻情報（ＰＳ
Ｔ）比較部、映像スキップ制御部及び映像リピート制御
部を設けており、ここでの音声時刻情報相当量と映像時
刻情報との比較結果に応じて、映像表示を制御して音声
データ再生との同期を確立している。したがって、回路
規模及び処理規模が大きくなるという欠点がある。In such a conventional example, in particular, the time information (PS
T) A comparison unit, a video skip control unit, and a video repeat control unit are provided, and the video display is controlled to reproduce the audio data according to the comparison result of the audio time information equivalent amount and the video time information. Establishing synchronization. Therefore, there is a drawback that the circuit scale and the processing scale become large.

【０００７】さらに、ＡＶ同期の確立基準を連続した音
声再生時刻としている。すなわち、音声データは連続し
て送られてくると仮定しているため、再生音声データが
抜け落ちた場合、その抜け落ちた分の音声データだけ、
音声時間が短くなってしまう。すなわち、音声データが
抜け落ちた場合、同期がずれることによって映像データ
及び音声データの同期が確立できなくなることが考えら
れる。Further, the AV synchronization establishment standard is the continuous audio reproduction time. That is, since it is assumed that the audio data is continuously sent, when the reproduced audio data is missing, only the missing audio data is
The voice time becomes shorter. That is, when the audio data is omitted, it is conceivable that the synchronization of the video data and the audio data cannot be established due to the deviation of the synchronization.

【０００８】本発明は、このような従来の技術における
課題を解決するものであり、音声データ及び映像データ
における時刻情報（ＰＳＴ）の監視が不要になり、か
つ、映像データを短い時間中に切り替えて表示すること
によって映像データを保存する記憶容量を少なくして、
その処理規模及び回路規模が削減できるＡＶ同期再生方
法及びその装置並びに情報記録媒体の提供を目的とす
る。The present invention solves the problems in the prior art as described above. It becomes unnecessary to monitor the time information (PST) in the audio data and the video data, and the video data is switched in a short time. The storage capacity for saving video data is reduced by displaying as
An object of the present invention is to provide an AV synchronous reproducing method, an apparatus and an information recording medium which can reduce the processing scale and the circuit scale.

【０００９】さらに、本発明は、映像表示を行う際に音
声データ及び映像データの時刻情報を毎回比較して、映
像データ及び音声データの同期ずれが直ちに補正できる
ようになり、結果的に映像データ及び音声データの同期
ずれのない高品質のオーディオ・ビデオ出力が可能にな
るＡＶ同期再生方法及びその装置並びに情報記録媒体の
提供を目的とする。Further, according to the present invention, when the video data is displayed, the time information of the audio data and the time information of the video data are compared every time, and the synchronization deviation of the video data and the audio data can be immediately corrected, resulting in the video data. Another object of the present invention is to provide an AV synchronous reproduction method, an apparatus therefor, and an information recording medium which enable high-quality audio / video output without synchronization deviation of audio data.

【００１０】[0010]

【課題を解決するための手段】上記課題を達成するため
に、本発明のＡＶ同期再生方法は、時刻情報をそれぞれ
格納した映像情報及び音声情報を連続的に形成した圧縮
データから、映像データ及び音声データを再生する際に
同期確立を図るＡＶ同期再生方法において、入力される
圧縮データから映像情報及び音声情報を分離するステッ
プと、この分離された音声情報及び映像情報から音声デ
ータ及び映像データを分離し、かつ、音声データ及び映
像データのそれぞれの時刻情報を抽出するステップと、
前記分離された映像データにおける前後の映像データの
時刻情報から時刻差を算出し、かつ、この時刻差から映
像データの表示時間を算出し、この表示時間に対応する
再生音声データ量を求めるステップと、この再生音声デ
ータ量分における音声再生及び再生音声データ量分に対
応する一回分の映像データを映像表示するステップと、
再生音声データ量の最終を認識するステップとを有し、
前記した映像情報及び音声情報を分離するステップから
再生音声データ量の最終を認識するまでのステップを圧
縮データの入力終了まで繰り返している。In order to achieve the above object, according to the AV synchronous reproduction method of the present invention, a video data and a video data are formed from compressed data in which video information and time information respectively storing time information are continuously formed. In an AV synchronous reproduction method for establishing synchronization when reproducing audio data, a step of separating video information and audio information from input compressed data, and audio data and video data from the separated audio information and video information. Separating and extracting time information of each of the audio data and the video data,
Calculating a time difference from time information of preceding and following video data in the separated video data, calculating a display time of the video data from the time difference, and obtaining a reproduced audio data amount corresponding to the display time; , A step of displaying audio data in the reproduced audio data amount and displaying one time of video data corresponding to the reproduced audio data amount,
Recognizing the end of the reproduced audio data amount,
The steps from the step of separating the video information and the audio information to the recognition of the end of the reproduced audio data amount are repeated until the input of the compressed data is completed.

【００１１】本発明のＡＶ同期再生装置は、時刻情報を
それぞれ格納した映像情報及び音声情報を連続的に形成
した圧縮データから、映像データ及び音声データを再生
する際に同期確立を図るＡＶ同期再生装置にあって、音
声データの１回分の再生時間を映像データの画面表示時
間に対応させる処理を、圧縮データの入力から終了まで
繰り返す再生同期手段を備える構成としてある。The AV synchronous reproducing apparatus of the present invention is an AV synchronous reproducing apparatus for establishing synchronization when reproducing video data and audio data from compressed data in which video information and audio information in which time information is respectively stored are continuously formed. The apparatus is configured to include a reproduction synchronization unit that repeats the process of associating the reproduction time of one time of the audio data with the screen display time of the video data from the input of the compressed data to the end.

【００１２】前記再生同期手段として、入力圧縮データ
から映像情報及び音声情報を分離する第１分離手段と、
第１分離手段で分離された音声情報及び映像情報から音
声データ及び映像データを分離し、かつ、音声データ及
び映像データのそれぞれの時刻情報を分離する第２分離
手段と、第２分離手段からの音声データ及び映像データ
を伸長して出力する音声及び映像データ再生手段と、第
２分離手段で分離された映像データの前後の映像データ
の時刻情報から時刻差を算出し、かつ、この時刻差から
映像データの表示時間を求めるとともに、この表示時間
に対応する再生音声データ量を算出し、この再生音声デ
ータ量分における音声再生を開始し、かつ、再生音声デ
ータ量分に対応する一回分の映像データを映像表示する
とともに、再生音声データ量の最終を認識し、この映像
情報及び音声情報の分離から最終の認識までの処理を、
圧縮データの入力終了まで繰り返す制御を行う再生制御
手段とを備える構成としてある。As the reproduction synchronizing means, a first separating means for separating video information and audio information from the input compressed data,
A second separating unit that separates the audio data and the video data from the audio information and the video information separated by the first separating unit, and separates the time information of each of the audio data and the video data; The time difference is calculated from the time information of the audio and video data reproducing means for expanding and outputting the audio data and the video data and the time information of the video data before and after the video data separated by the second separating means, and from this time difference In addition to obtaining the display time of the video data, calculating the playback audio data amount corresponding to this display time, starting the audio playback for this playback audio data amount, and playing a single video corresponding to the playback audio data amount. While displaying the data as a video, the end of the amount of reproduced audio data is recognized, and the processing from the separation of this video information and audio information to the final recognition is performed.
A reproduction control means is provided for performing control repeatedly until the input of the compressed data is completed.

【００１３】前記音声及び映像データ再生手段として、
入力される圧縮データを一時的に記憶する圧縮データバ
ッファと、圧縮データバッファからの圧縮データを伸長
した映像データに生成して出力する映像デコード回路
と、映像デコード回路からの伸長した映像データを一時
的に記憶し、再生制御手段からの映像再生開始信号に基
づいて出力する復元データバッファと、復元データバッ
ファからの映像データをアナログ信号に変換して出力す
るＤ／Ａ変換回路とを備える構成としてある。As the audio and video data reproducing means,
The compressed data buffer that temporarily stores the input compressed data, the video decoding circuit that generates and outputs the compressed data from the compressed data buffer into decompressed video data, and the decompressed video data from the video decoding circuit And a D / A conversion circuit for converting the video data from the restored data buffer into an analog signal and outputting the analog data. is there.

【００１４】前記音声及び映像データ再生手段として、
入力される圧縮データを一時的に記憶する圧縮データバ
ッファと、圧縮データバッファからの圧縮データを伸長
した音声データに生成して出力する音声デコード回路
と、音声デコード回路からの伸長した音声データを一時
的に記憶し、再生制御手段からの音声再生開始信号に基
づいて出力し、かつ、再生する音声データの終了を示す
音声再生終了信号を再生制御手段に出力する復元データ
バッファと、復元データバッファからの音声データをア
ナログ信号に変換して出力するＤ／Ａ変換回路とを備え
る構成としてある。As the audio and video data reproducing means,
The compressed data buffer that temporarily stores the input compressed data, the audio decoding circuit that generates and outputs the compressed data from the compressed data buffer as decompressed audio data, and the decompressed audio data from the audio decoding circuit From the restored data buffer, which is stored in the storage device and is output based on the audio reproduction start signal from the reproduction control means, and which outputs the audio reproduction end signal indicating the end of the audio data to be reproduced to the reproduction control means. And a D / A conversion circuit that converts the audio data into an analog signal and outputs the analog signal.

【００１５】[0015]

【００１６】前記再生制御手段が、音声及び映像データ
再生手段から音声データ及び映像データをそれぞれに伸
長して出力する際に、音声データ及び映像のデータのそ
れぞれの再生開始時刻を整合させる制御を行う構成とし
てある。When the reproduction control means expands and outputs the audio data and the video data from the audio and video data reproduction means, the reproduction control means controls the reproduction start times of the audio data and the video data to match each other. It is as a configuration.

【００１７】前記再生制御手段が、第２分離手段で分離
した音声データ及び映像データのそれぞれの時刻情報の
ずれを判定し、この判定で時刻差が大きく、音声出力及
び映像表示の再生ができない場合に、映像データ及び音
声データの時刻差が実質的に一致するまで圧縮データを
取り込む制御を行う構成としてある。In the case where the reproduction control means determines a difference between the time information of the audio data and the time information of the video data separated by the second separating means, and the time difference is large due to this judgment, the audio output and the video display cannot be reproduced. In addition, the compressed data is controlled until the time difference between the video data and the audio data substantially matches.

【００１８】前記時刻情報のずれを判定した際に、同期
ずれによる時刻差が大きく、音声出力及び映像表示の再
生ができない場合に、映像データ及び／又は音声データ
が異常であるとして、再生制御手段が同期再生の制御を
停止する構成としてある。When the time difference due to the time difference is determined and the time difference due to the synchronization error is large and the audio output and the video display cannot be reproduced, it is determined that the video data and / or the audio data is abnormal, and the reproduction control means. Is configured to stop the control of the synchronous reproduction.

【００１９】前記第２分離手段で分離された映像データ
の前後の映像データの時刻差から、映像データの表示時
間を算出して再生音声データ量を求める際に、表示時間
を、音声データの再生周波数で除算して得る構成として
ある。When the display time of the video data is calculated from the time difference between the video data before and after the video data separated by the second separating means to obtain the reproduced audio data amount, the display time is the reproduction of the audio data. The structure is obtained by dividing by the frequency.

【００２０】本発明の情報記録媒体は、入力された圧縮
データから映像情報及び音声情報を分離し、この分離さ
れた音声情報及び映像情報から音声データ及び映像デー
タを分離するとともに、これら音声データ及び映像デー
タのそれぞれの時刻情報を抽出し、分離された映像デー
タの前後の映像データの時刻情報から時刻差を算出する
とともに、この時刻差から映像データの表示時間を算出
して、この表示時間に対応する再生音声データ量を求
め、この再生音声データ量分における音声再生及び再生
音声データ量分に対応する一回分の映像データを映像表
示して、再生音声データ量の最終を認識し、かつ、前記
した映像情報及び音声情報の分離から再生音声データ量
の最終の認識するまでの処理を、圧縮データの入力終了
まで繰り返す制御をコンピュータが実行するためのプロ
グラムを格納している。The information recording medium of the present invention separates the video information and the audio information from the input compressed data, separates the audio data and the video data from the separated audio information and the video information, and outputs the audio data and the audio data. Each time information of the video data is extracted, the time difference is calculated from the time information of the video data before and after the separated video data, and the display time of the video data is calculated from this time difference. Obtain the corresponding amount of reproduced audio data, reproduce the audio in the amount of reproduced audio data and display one time of video data corresponding to the amount of reproduced audio data, and recognize the end of the amount of reproduced audio data, and A control for repeating the above-described processing from the separation of the video information and the audio information to the final recognition of the reproduced audio data amount until the input of the compressed data is completed. Computer is storing a program for execution.

【００２１】前記記載の情報記録媒体において、音声デ
ータ及び映像データをそれぞれ伸長して出力する際に、
音声データ及び映像のデータのそれぞれの再生開始時刻
を整合させるとともに、分離した音声データ及び映像デ
ータのそれぞれの時刻情報のずれを判定し、この判定で
時刻差が大きく、音声出力及び映像表示の再生ができな
い場合に、映像データ及び音声データの時刻差が実質的
に一致するまで圧縮データを取り込み、かつ、前記時刻
情報のずれを判定した際に、時刻差が大きく、音声出力
及び映像表示の再生ができない場合に、映像データ及び
／又は音声データが異常であるとして、同期再生を停止
する制御をコンピュータが実行するためのプログラムを
格納している。In the information recording medium described above, when decompressing and outputting audio data and video data,
The reproduction start times of the audio data and video data are matched, and the time difference between the separated audio data and video data is judged, and the time difference is large in this judgment, and the audio output and video display are reproduced. If it is not possible, the compressed data is taken in until the time difference between the video data and the audio data substantially coincides, and when the time difference is judged, the time difference is large and the audio output and the video display are reproduced. If it is not possible, the program stores a program for causing the computer to execute control for stopping the synchronous reproduction, assuming that the video data and / or the audio data is abnormal.

【００２２】前記記載の情報記録媒体において、前記分
離した映像データの前後の映像データの時刻差から映像
データの表示時間を算出して再生音声データ量を求める
際に、表示時間を、音声データの再生周波数で除算して
得る制御をコンピュータが実行するためのプログラムを
格納している。In the information recording medium described above, when the display time of the video data is calculated from the time difference between the video data before and after the separated video data to obtain the reproduced audio data amount, the display time is calculated as It stores a program for the computer to execute the control obtained by dividing by the reproduction frequency.

【００２３】このような本発明のＡＶ同期再生方法及び
その装置は、音声データの再生終了によって映像データ
を切り替えている。この結果、慣用的な従来の構成のよ
うな音声データ及び映像データにおける時刻情報（ＰＳ
Ｔ）の監視が不要になる。さらに、映像データを短時間
中に切り替えて映像表示しており、映像データを保存す
るバッファなどの記憶容量が少なくなる。したがって、
その処理規模及び回路規模が削減できるようになる。In the AV synchronous reproduction method and apparatus thereof according to the present invention, the video data is switched when the reproduction of the audio data is completed. As a result, the time information (PS) in audio data and video data as in the conventional conventional configuration is used.
There is no need to monitor T). Further, the video data is switched within a short time to display the video, and the storage capacity of the buffer for storing the video data is reduced. Therefore,
The processing scale and circuit scale can be reduced.

【００２４】また、本発明は、映像表示を行う際に音声
データ及び映像データの時刻情報を毎回比較（前記した
再生音声データ量の最終を認識し、この認識で映像デー
タの表示時間の算出からの処理を圧縮データの入力終了
まで繰り返す）している。したがって、映像データ及び
音声データの同期ずれを直ちに補正できるようになり、
結果的に映像データ及び音声データの同期ずれのない高
品質のオーディオ・ビデオ出力が可能になる。Further, according to the present invention, the time information of the audio data and the time information of the video data are compared every time when the video is displayed (the last of the reproduced audio data amount is recognized and the recognition is performed to calculate the display time of the video data. Is repeated until the input of compressed data is completed). Therefore, it becomes possible to immediately correct the synchronization deviation between the video data and the audio data,
As a result, high-quality audio / video output can be achieved without synchronization deviation between video data and audio data.

【００２５】本発明の情報記録媒体は、小型汎用コンピ
ュータやサーバが本発明を実施するためのプログラムを
外部記憶媒体に格納して提供している。The information recording medium of the present invention stores and provides a program for a small general-purpose computer or server to carry out the present invention in an external storage medium.

【００２６】この結果、本発明の実施が容易になるとと
もに、以後のバージョンアッブなどにも容易に対応可能
になる。As a result, the present invention can be implemented easily and can be easily adapted to subsequent version updates.

【００２７】[0027]

【発明の実施の形態】次に、本発明のＡＶ同期再生方法
及びその装置並びに情報記録媒体の実施の形態を図面を
参照して詳細に説明する。図１は本発明のＡＶ同期再生
方法及びその装置並びに情報記録媒体の第１実施形態に
おける構成を示すブロック図である。BEST MODE FOR CARRYING OUT THE INVENTION Next, embodiments of the AV synchronous reproduction method and apparatus and the information recording medium of the present invention will be described in detail with reference to the drawings. FIG. 1 is a block diagram showing the configuration of an AV synchronous reproduction method and apparatus and an information recording medium according to the first embodiment of the present invention.

【００２８】図１を参照すると、このＡＶ同期再生装置
は、ＤＶＤ−ＲＡＭやＣＤ−ＲＯＭの情報記録媒体から
再生したＭＰＥＧ方式などの圧縮データ（映像情報、音
声情報及び時刻情報等）を取り込む入力回路１と、この
入力回路１からの圧縮データを映像情報と音声情報とに
分離して出力する第１分離手段としての分離（ＤＥＭＵ
Ｘ）回路２とを有している。Referring to FIG. 1, this AV synchronous reproducing apparatus receives an input for taking in compressed data (video information, audio information, time information, etc.) such as MPEG system reproduced from an information recording medium such as a DVD-RAM or a CD-ROM. The circuit 1 and the separation (DEMU) as the first separation means for separating the compressed data from the input circuit 1 into the video information and the audio information and outputting them.
X) circuit 2.

【００２９】このＡＶ同期再生装置は、分離回路２から
の映像情報を映像タイムスタンプと映像データとに分離
して出力する第２分離手段としての映像タイムスタンプ
（時刻情報）分離回路３と、分離回路２からの音声情報
を音声タイムスタンプと音声データとに分離して出力す
る第２分離手段としての音声タイムスタンプ（時刻情
報）分離回路６を有している。This AV synchronous reproduction apparatus separates the video information from the separation circuit 2 into a video time stamp (time information) separation circuit 3 as a second separation means for separating and outputting the video time stamp and the video data. The audio time stamp (time information) separating circuit 6 is provided as a second separating means for separating the audio information from the circuit 2 into an audio time stamp and audio data and outputting the separated data.

【００３０】また、このＡＶ同期再生装置は、映像タイ
ムスタンプ分離回路３からの圧縮した映像データを伸長
（復元）して出力する映像データ再生手段としての映像
再生回路４と、この映像再生回路４からの映像データを
画面表示するモニタ装置５とを有し、さらに、音声タイ
ムスタンプ分離回路６からの圧縮した音声データを伸長
（復元）して出力する音声データ再生手段としての音声
再生回路７と、この音声再生回路７からの音声データを
音声出力するスピーカ８とを有している。The AV synchronous reproducing apparatus also includes a video reproducing circuit 4 as a video data reproducing means for expanding (decompressing) the compressed video data from the video time stamp separation circuit 3 and outputting the expanded video data. And a sound reproduction circuit 7 as a sound data reproduction means for expanding (decompressing) the compressed sound data from the sound time stamp separation circuit 6 and outputting it. , And a speaker 8 for outputting voice data from the voice reproduction circuit 7.

【００３１】また、このＡＶ同期再生装置には、映像タ
イムスタンプ分離回路３からの映像タイムスタンプ、及
び、音声タイムスタンプ分離回路６からの映像タイムス
タンプが入力され、かつ、音声再生回路７から再生する
音声データの終了を通知する音声再生終了信号が入力さ
れる再生制御手段としての再生制御回路９が設けられて
いる。Further, the video time stamp from the video time stamp separating circuit 3 and the video time stamp from the audio time stamp separating circuit 6 are input to the AV synchronous reproducing apparatus, and reproduced from the audio reproducing circuit 7. A reproduction control circuit 9 is provided as reproduction control means to which an audio reproduction end signal for notifying the end of the audio data to be input is input.

【００３２】図２は映像再生回路４の内部構成を示すブ
ロック図である。図２において、この映像再生回路４
は、入力される圧縮データを一時的に記憶する圧縮デー
タバッファ１０と、この圧縮データバッファ１０からの
圧縮データを伸長（復元）した映像データに生成して出
力する映像デコード回路１１とを有している。また、こ
の映像再生回路４は、映像デコード回路１１からの伸長
（復元）した映像データを一時的に記憶し、かつ、映像
データを再生制御回路９からの映像再生開始信号に基づ
いて出力する復元データバッファ１２と、この復元デー
タバッファ１２からの映像データをアナログ信号に変換
してモニタ装置５に出力するＤ／Ａ変換回路１３と有し
ている。FIG. 2 is a block diagram showing the internal structure of the video reproducing circuit 4. In FIG. 2, this video reproduction circuit 4
Has a compressed data buffer 10 for temporarily storing the input compressed data, and a video decoding circuit 11 for generating and outputting the compressed data from the compressed data buffer 10 as decompressed (decompressed) video data. ing. The video reproduction circuit 4 also temporarily stores the expanded (restored) video data from the video decoding circuit 11 and outputs the video data based on the video reproduction start signal from the reproduction control circuit 9. It has a data buffer 12 and a D / A conversion circuit 13 which converts the video data from the restored data buffer 12 into an analog signal and outputs the analog signal to the monitor device 5.

【００３３】図３は音声再生回路７の内部構成を示すブ
ロック図である。図３において、この音声再生回路７
は、入力される圧縮データを一時的に記憶する圧縮デー
タバッファ１４と、この圧縮データバッファ１４からの
圧縮データを伸長（復元）した音声データに生成して出
力する音声デコード回路１５とを有している。また、音
声デコード回路１５からの伸長（復元）した音声データ
を一時的に記憶し、かつ、音声データを再生制御回路９
からの音声再生開始信号に基づいて出力するとともに、
再生する音声データが終了したことを示す音声再生終了
信号を、再生制御回路９に出力する復元データバッファ
１６を備えている。また、この音声再生回路７は、復元
データバッファ１６からの音声データをアナログ信号に
変換してスピーカ８に出力するＤ／Ａ変換回路１７を備
えている。FIG. 3 is a block diagram showing the internal structure of the audio reproduction circuit 7. In FIG. 3, this audio reproduction circuit 7
Has a compressed data buffer 14 for temporarily storing the input compressed data, and an audio decoding circuit 15 for generating and outputting the compressed data from the compressed data buffer 14 as decompressed (decompressed) audio data. ing. The expanded (restored) audio data from the audio decoding circuit 15 is temporarily stored, and the audio data is reproduced by the reproduction control circuit 9
Output based on the audio playback start signal from
The recovery data buffer 16 is provided for outputting to the reproduction control circuit 9 an audio reproduction end signal indicating that the audio data to be reproduced has ended. The audio reproduction circuit 7 also includes a D / A conversion circuit 17 that converts the audio data from the restored data buffer 16 into an analog signal and outputs the analog signal to the speaker 8.

【００３４】以下、本発明の第１実施形態の動作につい
て説明する。ここでは、音声データの１回分の再生時間
を映像データの画面表示時間に対応させ、映像データの
切り替えを音声データの一回分の再生時間のタイミング
で行う。すなわち、音声データの再生を映像表示タイミ
ング処理と兼用して、音声データ及び映像データの同期
確立を図っている。この場合、欠陥のある音声データの
１回分の再生時間を映像データの画面表示時間に対応さ
せると、音声データの全部が再生されないことがある。
しかし、毎回タイムスタンプを取っており、同期が取れ
ているため、特に問題とならない。The operation of the first embodiment of the present invention will be described below. Here, one playback time of the audio data is associated with the screen display time of the video data, and the video data is switched at the timing of the one playback time of the audio data. That is, the reproduction of the audio data is also used as the video display timing process to establish the synchronization between the audio data and the video data. In this case, if one reproduction time of defective audio data is associated with the screen display time of video data, the entire audio data may not be reproduced.
However, since the time stamps are taken every time and they are synchronized, there is no particular problem.

【００３５】図１において、入力回路１がＤＶＤ−ＲＡ
ＭやＣＤ−ＲＯＭの情報記録媒体から再生したＭＰＥＧ
方式などの圧縮データ（映像情報、音声情報及び時刻情
報等）を取り込み、この圧縮データが分離回路２に入力
される。分離回路２は圧縮データを映像情報及び音声情
報に分離する。この分離された音声情報が音声タイムス
タンプ分離回路６に入力され、ここで分離回路２からの
音声情報を音声タイムスタンプと音声データとに分離し
て出力される。In FIG. 1, the input circuit 1 is a DVD-RA.
MPEG reproduced from an M or CD-ROM information recording medium
Compressed data such as a method (video information, audio information, time information, etc.) is taken in, and this compressed data is input to the separation circuit 2. The separation circuit 2 separates the compressed data into video information and audio information. This separated audio information is input to the audio time stamp separation circuit 6, where the audio information from the separation circuit 2 is separated into an audio time stamp and audio data and output.

【００３６】また、分離回路２で分離された映像情報が
映像タイムスタンプ分離回路３に入力され、ここで分離
回路２からの映像情報を映像タイムスタンプと映像デー
タとに分離して出力する。この映像タイムスタンプによ
って映像データの再生時刻が判明するものであり、圧縮
データは連続的に入力されるため、それぞれの映像デー
タの時刻が得られる。この得られた映像データの時刻か
ら一つ前の映像データの時刻を差し引くと、その映像デ
ータの表示時間が算出される。この映像の表示時間か
ら、この映像の表示時間に対応する音声再生データ量を
次式（１）で求める。The video information separated by the separation circuit 2 is input to the video time stamp separation circuit 3, where the video information from the separation circuit 2 is separated into a video time stamp and video data and output. Since the reproduction time of the video data is known from this video time stamp and the compressed data is continuously input, the time of each video data can be obtained. By subtracting the time of the immediately preceding video data from the time of the obtained video data, the display time of the video data is calculated. From the display time of this video, the amount of audio reproduction data corresponding to the display time of this video is calculated by the following equation (1).

【００３７】 映像表示時間（ｖｉＴ）＝音声再生時間（ｖｏＴ） ＝音声再生周波数（ｖｏＦ）×音声再生データ量（ｖｏＤ）…（１） また、音声再生周波数（ｖｏＦ）は、圧縮データに対し
て一定であることから、あとで説明するように、時間
（ｖｉＴ／ｖｏＴ）を、音声データの再生周波数（ｖｏ
Ｆ）で除算することによって、再生する音声データ量
（ｖｏＤ）が求められる。Video display time (viT) = sound reproduction time (voT) = sound reproduction frequency (voF) × sound reproduction data amount (voD) (1) Further, the sound reproduction frequency (voF) is the compressed data. Since it is constant, as will be described later, the time (viT / voT) is set to the reproduction frequency (voT) of the audio data.
By dividing by F), the audio data amount (voD) to be reproduced is obtained.

【００３８】映像タイムスタンプ分離回路３及び音声タ
イムスタンプ分離回路６からの、最初の映像データの映
像表示と音声データの再生出力とは、その時刻を再生制
御回路９の制御で整合させる。この時刻が整合した映像
データが映像タイムスタンプ分離回路３から映像再生回
路４に入力される。また、時刻が整合した音声データが
音声タイムスタンプ分離回路７から音声再生回路６に入
力される。この場合、映像表示時間に合致した音声デー
タを再生制御回路９の制御で音声タイムスタンプ分離回
路６から音声再生回路７に出力する。The video display of the first video data and the reproduction output of the audio data from the video time stamp separation circuit 3 and the audio time stamp separation circuit 6 are matched at the time under the control of the reproduction control circuit 9. The video data whose time is aligned is input from the video time stamp separation circuit 3 to the video reproduction circuit 4. Also, the audio data whose time is matched is input from the audio time stamp separation circuit 7 to the audio reproduction circuit 6. In this case, the audio data matching the video display time is output from the audio time stamp separation circuit 6 to the audio reproduction circuit 7 under the control of the reproduction control circuit 9.

【００３９】次に、音声データの再生が終了し、この音
声データの再生終了を示す音声再生終了信号を再生制御
回路９が音声再生回路７から取り込む。この取り込みに
よって、再生制御回路９が、映像タイムスタンプ分離回
路３及び音声タイムスタンプ分離回路６を制御して、前
記したように次の映像データと今回の映像データとの映
像表示時間に整合した音声データを音声再生回路７に出
力する制御を行い、かつ、映像データを映像表示回路に
出力する制御を行う。Next, when the reproduction of the audio data is completed, the reproduction control circuit 9 takes in the audio reproduction end signal indicating the end of the reproduction of the audio data from the audio reproduction circuit 7. By this capture, the reproduction control circuit 9 controls the video time stamp separation circuit 3 and the audio time stamp separation circuit 6 to perform the audio matching the video display time of the next video data and the current video data as described above. The control for outputting the data to the audio reproduction circuit 7 and the control for outputting the video data to the video display circuit are performed.

【００４０】このとき、再生制御回路９が、映像タイム
スタンプ分離回路３からの映像タイムスタンプ及び音声
タイムスタンプ分離回路６からの音声タイムスタンプを
比較する。この二つのタイムスタンプの時刻差が大きい
場合、映像データ及び／又は音声データが異常（エラー
発生）であると再生制御回路９が認識する。この認識に
よって、再生制御回路９が一定時間、映像タイムスタン
プと音声タイムスタンプとの取り込み及び比較を繰り返
す。この一定時間における比較で、二つのタイムスタン
プの時刻差が小さくならない場合、再生制御回路９が、
映像タイムスタンプ分離回路３及び映像再生回路４を制
御して映像データの出力を停止する制御を行う。At this time, the reproduction control circuit 9 compares the video time stamp from the video time stamp separation circuit 3 with the audio time stamp from the audio time stamp separation circuit 6. When the time difference between the two time stamps is large, the reproduction control circuit 9 recognizes that the video data and / or the audio data is abnormal (error has occurred). By this recognition, the reproduction control circuit 9 repeats capturing and comparing the video time stamp and the audio time stamp for a certain period of time. If the time difference between the two time stamps does not become small by the comparison at this fixed time, the reproduction control circuit 9
The video time stamp separation circuit 3 and the video reproduction circuit 4 are controlled to stop the output of the video data.

【００４１】このタイムスタンプの時刻差が大きい場合
とは、映像データ及び音声データの同期ずれによって、
結果的に高品質のオーディオ・ビデオ出力が得られない
場合である。When the time difference between the time stamps is large, it means that the video data and the audio data are out of synchronization with each other.
As a result, high quality audio / video output cannot be obtained.

【００４２】同様に、再生制御回路９が、音声タイムス
タンプ分離回路６及び音声再生回路７を制御して音声デ
ータの出力を停止する制御を行う。この後、再生制御回
路９が前記したように映像タイムスタンプ分離回路３及
び音声タイムスタンプ分離回路６からの映像データの映
像表示と音声データとの再生出力との時刻を整合させ動
作から繰り返す。このような動作の繰り返しによって音
声データと映像データとの同期を確立する。Similarly, the reproduction control circuit 9 controls the audio time stamp separation circuit 6 and the audio reproduction circuit 7 to stop the output of audio data. After that, the reproduction control circuit 9 matches the time of the video display of the video data from the video time stamp separation circuit 3 and the audio time stamp separation circuit 6 with the reproduction output of the audio data, and repeats the operation. By repeating such operations, synchronization between the audio data and the video data is established.

【００４３】次に、この動作を図２及び図３を参照して
詳細に説明する。図１から図３において、入力回路１か
ら映像タイムスタンプ分離回路３及び音声タイムスタン
プ分離回路６までの動作は、前記した図１のみを参照し
た説明と同様である。映像タイムスタンプ分離回路３か
らの映像データが図２に示す映像再生回路４に入力され
る。Next, this operation will be described in detail with reference to FIGS. 1 to 3, the operation from the input circuit 1 to the video time stamp separation circuit 3 and the audio time stamp separation circuit 6 is the same as the above description with reference to only FIG. The video data from the video time stamp separation circuit 3 is input to the video reproduction circuit 4 shown in FIG.

【００４４】この図２に示す映像再生回路４では、圧縮
データバッファ１０が、入力される圧縮データを一時的
に記憶し、圧縮データバッファ１０からの圧縮データを
映像デコード回路１１が伸長（復元）した映像データに
生成して出力する。この映像デコード回路１１からの伸
長（復元）した映像データを、復元データバッファ１２
が一時的に記憶し、かつ、映像データを再生制御回路９
からの映像再生開始の信号の入力によって出力する。な
お、映像デコード回路１１は、映像データを、再生制御
回路９からの映像再生開始の信号の入力によって出力す
るようにしても良い。In the video reproducing circuit 4 shown in FIG. 2, the compressed data buffer 10 temporarily stores the input compressed data, and the video decoding circuit 11 expands (decompresses) the compressed data from the compressed data buffer 10. Generated video data and output. The decompressed (restored) video data from the video decoding circuit 11 is stored in the restored data buffer 12
Is temporarily stored and the video data is reproduced by the control circuit 9
It is output by inputting the signal to start the video playback from. The video decoding circuit 11 may output the video data by inputting a video reproduction start signal from the reproduction control circuit 9.

【００４５】音声タイムスタンプ分離回路６からの音声
データが、図３に示す音声再生回路７に入力される。こ
の図３に示す音声再生回路７は、入力される圧縮データ
を圧縮データバッファ１４が一時的に記憶する。この圧
縮データバッファ１４からの圧縮データを音声デコード
回路１５が伸長（復元）した音声データに生成して出力
する。この音声デコード回路１５からの伸長（復元）し
た音声データを一時的に復元データバッファ１６が記憶
し、かつ、音声データを再生制御回路９からの音声再生
開始を示す信号に基づいて出力するとともに、音声デー
タが終了したことを示す音声再生終了信号を再生制御回
路９に出力する。なお、音声デコード回路１５は、音声
データを再生制御回路９からの音声再生開始を示す信号
に基づいて出力し、かつ音声再生終了信号を再生制御回
路９に出力するようにしても良い。The audio data from the audio time stamp separation circuit 6 is input to the audio reproduction circuit 7 shown in FIG. In the audio reproduction circuit 7 shown in FIG. 3, the compressed data buffer 14 temporarily stores the input compressed data. The compressed data from the compressed data buffer 14 is generated and output by the audio decoding circuit 15 as expanded (decompressed) audio data. The decompressed (decompressed) audio data from the audio decoding circuit 15 is temporarily stored in the decompression data buffer 16, and the audio data is output based on the signal indicating the audio reproduction start from the reproduction control circuit 9. An audio reproduction end signal indicating that the audio data has ended is output to the reproduction control circuit 9. The audio decoding circuit 15 may output audio data based on a signal from the reproduction control circuit 9 indicating the start of audio reproduction, and may output an audio reproduction end signal to the reproduction control circuit 9.

【００４６】また、映像タイムスタンプ分離回路３で分
離した映像タイムスタンプ及び音声タイムスタンプ分離
回路６からの音声タイムスタンプが再生制御回路９に出
力される。再生制御回路９では、まず、取り込んだ映像
タイムスタンプと音声タイムスタンプとを比較し、大き
な時刻差がないかを調べる。大きくずれている場合（大
きな時刻差を有している場合）、再生制御回路９が、そ
の映像タイムスタンプと音声タイムスタンプの時刻差が
小さくなるまで一定時間、映像タイムスタンプと音声タ
イムスタンプの取り込み及び比較を繰り返す。The video time stamp separated by the video time stamp separation circuit 3 and the audio time stamp from the audio time stamp separation circuit 6 are output to the reproduction control circuit 9. The reproduction control circuit 9 first compares the captured video time stamp and the audio time stamp to check if there is a large time difference. When there is a large deviation (when there is a large time difference), the reproduction control circuit 9 captures the video time stamp and the audio time stamp for a certain time until the time difference between the video time stamp and the audio time stamp becomes small. And repeat the comparison.

【００４７】映像タイムスタンプと音声タイムスタンプ
との比較に大きな時刻差がない場合や、映像タイムスタ
ンプと音声タイムスタンプの一定時間の取り込みによっ
て大きな時刻差が発生しなくなったことを再生制御回路
９が認識できた場合は、今回、映像表示する映像タイム
スタンプと次に映像表示する映像タイムスタンプとの時
刻差を算出し、その映像データの表示時間を得る。The reproduction control circuit 9 indicates that there is no large time difference in the comparison between the video time stamp and the audio time stamp, or that a large time difference does not occur due to the capturing of the video time stamp and the audio time stamp for a certain time. If it can be recognized, the time difference between the video time stamp for video display and the video time stamp for next video display is calculated to obtain the display time of the video data.

【００４８】次に、前記した（数１）の「映像表示時間
（ｖｉＴ）＝音声再生時間（ｖｏＴ）＝音声再生周波数
（ｖｏＦ）×音声再生データ量（ｖｏＤ）」から得られ
た時間（ｖｉＴ／ｖｏＴ）を、音声データの再生周波数
（ｖｏＦ）で除算して音声再生データ量（ｖｏＤ）を算
出する。この算出した音声再生データ量分（ｖｏＤ）
を、音声再生開始の信号として音声再生回路７に出力す
る。Next, the time (viT) obtained from the above-mentioned (Equation 1) "video display time (viT) = sound reproduction time (voT) = sound reproduction frequency (voF) × sound reproduction data amount (voD)". / VoT) is divided by the reproduction frequency (voF) of the audio data to calculate the audio reproduction data amount (voD). This calculated audio playback data amount (voD)
Is output to the audio reproduction circuit 7 as a signal for starting audio reproduction.

【００４９】音声再生回路７では、音声再生開始の信号
を入力した復元データバッファ１６が、一次的に保持し
ている音声デコード回路１５からの伸長した音声データ
を出力して、その再生開始を行う。これと同時に、再生
制御信号回路９は、映像再生開始信号を映像再生回路４
に出力する。映像再生回路４では、映像再生開始信号を
復元データバッファ１２に送出する制御を行って、ここ
からの１回分の映像データをモニタ装置５で出力して映
像表示を行う。In the audio reproduction circuit 7, the restored data buffer 16 to which the audio reproduction start signal is input outputs the expanded audio data from the audio decoding circuit 15 which is temporarily held, and starts reproduction thereof. . At the same time, the playback control signal circuit 9 sends a video playback start signal to the video playback circuit 4.
Output to. The video reproduction circuit 4 controls the transmission of the video reproduction start signal to the restored data buffer 12, and the video data for one time from this is output by the monitor device 5 to display the video.

【００５０】音声再生回路７では、復元データバッファ
１６が、再生するための音声データが終了した時点で再
生制御回路９に音声データの終了を音声再生終了信号に
よって通知する。この動作を入力回路１への圧縮データ
の入力終了まで繰り返す。In the audio reproduction circuit 7, the restored data buffer 16 notifies the reproduction control circuit 9 of the end of the audio data by the audio reproduction end signal at the time when the audio data to be reproduced is completed. This operation is repeated until the input of the compressed data to the input circuit 1 is completed.

【００５１】このような第１実施形態の動作では、音声
データの再生終了によって映像データを切り替えてい
る。この結果、慣用的な構成のような音声データ出及び
映像データの時刻情報（ＰＳＴ）の監視が不要になる。
さらに、映像データを短時間中に切り替えて映像表示し
ており、映像データを保存する復元データバッファ１２
の記憶容量が少なくなる。したがって、その処理規模及
び回路規模が削減できるようになる。In the operation of the first embodiment as described above, the video data is switched when the reproduction of the audio data is completed. As a result, it becomes unnecessary to monitor the time information (PST) of the audio data and the video data as in the conventional configuration.
Further, the restored data buffer 12 that saves the image data by displaying the image by switching the image data within a short time.
Storage capacity is reduced. Therefore, the processing scale and circuit scale can be reduced.

【００５２】また、映像表示を行う際に音声データ及び
映像データのタイムシタンプ（時刻情報）を毎回比較し
ており、映像データ及び音声データの同期ずれを直ちに
補正できるようになる。これによって、結果的に映像デ
ータ及び音声データの同期ずれのない高品質のオーディ
オ・ビデオ出力が可能になる。Further, the time shifts (time information) of the audio data and the video data are compared every time when the video is displayed, so that the synchronization deviation of the video data and the audio data can be immediately corrected. As a result, high-quality audio / video output can be achieved without synchronization deviation between video data and audio data.

【００５３】次に、本発明の第２実施形態について図面
を参照して詳細に説明する。この第２実施形態は、図１
から図３の処理を小型汎用コンピュータで実行するもの
である。すなわち、音声データと映像データとの同期確
立動作を、映像データの切り替えが音声データの一回分
の再生時間のタイミングで行われて、その音声データ及
び映像データの同期確立を図っている。Next, a second embodiment of the present invention will be described in detail with reference to the drawings. This second embodiment is shown in FIG.
3 is executed by a small general-purpose computer. That is, the operation of establishing synchronization between the audio data and the video data is performed at the timing of the reproduction time for one time of the audio data when the switching of the video data is performed, and the synchronization of the audio data and the video data is established.

【００５４】図４は、第２実施形態の構成を示すブロッ
ク図である。図４を参照すると、この構成は、小型汎用
コンピュータの基本的な構成である。ＲＯＭ，ＲＡＭ及
びＣＰＵなどで構成される制御部１８、ハードディスク
（ＨＤを情報記録媒体とするファイル装置１９、メモリ
２０、サウンド回路２１及び表示回路２５を有してい
る。サウンド回路２１は、サウンドデータを一時的に保
存するバッファ２２及びＤ／Ａ変換回路２３で構成さ
れ、また、Ｄ／Ａ変換回路２３にスピーカ２４が接続さ
れている。FIG. 4 is a block diagram showing the configuration of the second embodiment. Referring to FIG. 4, this configuration is the basic configuration of a small general-purpose computer. It has a control unit 18 including a ROM, a RAM, a CPU, a hard disk (a file device 19 having an HD as an information recording medium, a memory 20, a sound circuit 21, and a display circuit 25. The buffer 22 and the D / A conversion circuit 23 that temporarily store the data are also provided, and the speaker 24 is connected to the D / A conversion circuit 23.

【００５５】表示回路２５にはモニタ装置２６が接続さ
れている。さらに、フロッピーディスク（ＦＤ）、コン
パクトディスク（ＣＤ）−ＲＯＭ又は光磁気ディスク
（ＭＯ）の記録情報を再生するドライブ３０を有し、こ
れらの、制御部１８からメモリ２０、サウンド回路２
１、表示回路２５、入力操作部２７及びドライブ３０ま
でがデータ／制御バスライン２８に接続されている。A monitor device 26 is connected to the display circuit 25. Further, it has a drive 30 for reproducing recorded information on a floppy disk (FD), a compact disk (CD) -ROM or a magneto-optical disk (MO).
1, the display circuit 25, the input operation unit 27 and the drive 30 are connected to the data / control bus line 28.

【００５６】次に、第２実施形態の動作について説明す
る。図５は第２実施形態の動作の処理手順を示すフロー
チャートである。図４及び図５を参照して、圧縮データ
の再生動作及び音声データと映像データの同期確立動作
について説明する。ドライブ３０からの記録情報が制御
部１８の制御でファイル装置１９にダウンロードされ
て、このファイル装置１９から圧縮データがメモリ２０
に記憶される（ステップＳ１) 。制御部１８の制御でメ
モリ２０に記憶している圧縮データを映像情報及び音声
情報に分離する（ステップＳ２) 。Next, the operation of the second embodiment will be described. FIG. 5 is a flowchart showing the processing procedure of the operation of the second embodiment. The operation of reproducing compressed data and the operation of establishing synchronization between audio data and video data will be described with reference to FIGS. 4 and 5. The recording information from the drive 30 is downloaded to the file device 19 under the control of the control unit 18, and the compressed data is downloaded from the file device 19 to the memory 20.
(Step S1). Under the control of the control unit 18, the compressed data stored in the memory 20 is separated into video information and audio information (step S2).

【００５７】この分離された音声情報が、さらに音声タ
イムスタンプと音声データとに分離され、さらに、映像
情報が映像タイムスタンプと映像データとに分離される
（ステップＳ３) 。次に、音声タイムスタンプと映像タ
イムスタンプの時刻差を調べる（ステップＳ４) 。この
調べで音声タイムスタンプと映像タイムスタンプの時刻
差が大きくない場合は（ステップＳ５：Ｙｅｓ）、圧縮
されている音声データ及び映像データを伸長（復元）し
てメモリ２０に記憶する（ステップＳ６) 。The separated audio information is further separated into an audio time stamp and audio data, and the video information is further separated into a video time stamp and video data (step S3). Next, the time difference between the audio time stamp and the video time stamp is checked (step S4). If the time difference between the audio time stamp and the video time stamp is not large in this check (step S5: Yes), the compressed audio data and video data are expanded (decompressed) and stored in the memory 20 (step S6). .

【００５８】ステップＳ５で時刻差が大きい場合は、一
定時間、音声タイムスタンプと映像タイムスタンプの取
り込みを行う（ステップＳ７) 。さらに、音声タイムス
タンプと映像タイムスタンプとの時刻差を判断し、時刻
差が小さい場合（ステップＳ８：Ｙｅｓ）、ステップＳ
６に進む。時刻差が大きい場合は（ステップＳ８：Ｎ
ｏ）、この時刻差が大きいことをモニタ装置２６で画面
表示する（ステップＳ９) 。次に、制御部１８が制御動
作を中止してステップ２の取り込みから再度実行する
（ステップＳ１０）If the time difference is large in step S5, the audio time stamp and the video time stamp are fetched for a certain period of time (step S7). Further, the time difference between the audio time stamp and the video time stamp is judged, and if the time difference is small (step S8: Yes), step S
Go to 6. If the time difference is large (step S8: N
o), the fact that this time difference is large is displayed on the screen of the monitor device 26 (step S9). Next, the control unit 18 stops the control operation, and executes again from the acquisition in step 2 (step S10).

【００５９】そして、制御部１８は、今回映像表示する
映像タイムスタンプと次に映像表示する映像タイムスタ
ンプの時刻差を算出し、その映像データの表示時間を得
る。すなわち、映像タイムスタンプから一回で映像表示
する映像データ当りの表示時間を計算する（ステップＳ
１１) 。次に、制御部１８の制御でメモリ２０に記憶し
ている伸長した映像データを読み出して表示回路２５に
転送し、このモニタ装置２６で画面表示する（ステップ
Ｓ１２) 。Then, the control unit 18 calculates the time difference between the video time stamp for the current video display and the video time stamp for the next video display, and obtains the display time of the video data. That is, the display time per video data to be displayed at one time is calculated from the video time stamp (step S
11). Then, under the control of the control unit 18, the expanded video data stored in the memory 20 is read out, transferred to the display circuit 25, and displayed on the screen by the monitor device 26 (step S12).

【００６０】次に、制御部１８は、計算した１回分の映
像データに対応する時間分の音声データを、サウンド回
路２１のバッファ２２に転送する（ステップＳ１３) 。
サウンド回路２１ではバッファ２２に一時的に格納して
いる音声データをＤ／Ａ変換回路２３に出力し、ここで
アナログ信号に変換してスピーカ２４から音声出力する
（ステップＳ１４) 。サウンド回路２１は、バッファ２
２で格納している音声データが終了した際に、この音声
データの終了を示す音声再生終了信号を、データ／制御
バスライン２７を通じて制御部１８に通知する（ステッ
プＳ１５) 。Next, the control section 18 transfers the audio data for the time corresponding to the calculated one-time video data to the buffer 22 of the sound circuit 21 (step S13).
The sound circuit 21 outputs the sound data temporarily stored in the buffer 22 to the D / A conversion circuit 23, converts it into an analog signal, and outputs the sound from the speaker 24 (step S14). The sound circuit 21 is the buffer 2
When the voice data stored in 2 is finished, a voice reproduction end signal indicating the end of the voice data is notified to the control unit 18 through the data / control bus line 27 (step S15).

【００６１】通知を取り込んだ制御部１８は、メモリ２
０に記憶している伸長した映像データを読み出して表示
回路２５に転送し、このモニタ装置２６で画面表示する
（ステップＳ１６) 。また、メモリ２０に記憶している
伸長した音声データを読み出してサウンド回路２１に転
送し、スピーカ２４から音声出力する（ステップＳ１
７) 。入力回路１への圧縮データ（映像情報、音声情報
及び時刻情報等）の入力が終了したかを制御部１８が判
断し（ステップＳ１８) 、未終了の場合（ステップＳ１
８：Ｎｏ) 、ステップＳ２に戻って以降の処理を繰り返
す。また、終了の場合（ステップＳ１８：Ｙｅｓ) 、制
御部１８の制御動作を停止して終了となる。このように
ＣＰＵで１８は、音声データを再生している間にも、音
声データと映像データの分離を行い、圧縮データから伸
長する処理を繰り返している。The control unit 18 that has received the notification is in the memory 2
The decompressed video data stored in 0 is read out, transferred to the display circuit 25, and displayed on the monitor 26 (step S16). Further, the decompressed voice data stored in the memory 20 is read out, transferred to the sound circuit 21, and outputted as voice from the speaker 24 (step S1).
7). The control unit 18 determines whether the input of the compressed data (video information, audio information, time information, etc.) to the input circuit 1 is completed (step S18), and if not completed (step S1).
8: No), and returns to step S2 to repeat the subsequent processing. When the operation is finished (step S18: Yes), the control operation of the controller 18 is stopped and the operation is finished. As described above, the CPU 18 repeats the process of separating the audio data and the video data and expanding the compressed data even while reproducing the audio data.

【００６２】このように第２実施形態では、小型汎用コ
ンピュータにおいて、特別な回路を追加しないで、すな
わち、ソフトウェアによって、本発明を実施（映像デー
タの切り替えを音声データの一回分の再生時間のタイミ
ングで行って音声データ及び映像データの同期を確立）
できるようになる。As described above, in the second embodiment, the present invention is implemented in a small general-purpose computer without adding a special circuit, that is, by software (the switching of video data is the timing of one reproduction time of audio data). To establish synchronization of audio data and video data)
become able to.

【００６３】この第２実施形態は、小型汎用コンピュー
タにおいて、映像データの切り替えを音声データの一回
分の再生時間のタイミングで行って音声データ及び映像
データの同期を確立している。この場合の制御プログラ
ムは、制御部１８のＲＯＭに、ブロートプログラムや他
のプログラムとともに実装されている場合が多いが、フ
ァイル装置１９のハードディスク（ＨＤなどにインスト
ールによって実装される場合も多い。In the second embodiment, in the small general-purpose computer, the video data is switched at the timing of the reproduction time for one time of the audio data to establish the synchronization of the audio data and the video data. In many cases, the control program in this case is installed in the ROM of the control unit 18 together with the bloat program and other programs, but in many cases, it is installed in the hard disk (HD or the like) of the file device 19 by installation.

【００６４】このインストールは、ドライブ３０がフロ
ッピーディスク（ＦＤ）、コンパクトディスク（ＣＤ）
−ＲＯＭ又は光磁気ディスク（ＭＯ）のプログラムを読
み出して実行する。このＦＤ，ＣＤ−ＲＯＭ，ＭＯが請
求項における情報記録媒体であり、市販流通する汎用ソ
フトウェアパッケージとして取り扱われる。In this installation, the drive 30 is a floppy disk (FD) or a compact disk (CD).
Read and execute programs in ROM or magneto-optical disk (MO). The FD, CD-ROM, and MO are the information recording media in the claims, and are treated as a commercially available general-purpose software package.

【００６５】また、第２実施形態は、小型汎用コンピュ
ータ単体をもって説明したが、ネットワーク構成にも対
応できる。例えば、クライアント／サーバシステムとし
て構築された場合にも本発明の実施が可能である。この
クライアント／サーバシステムでは、遠隔手続き呼び出
し（ＲＰＣ）プログラムが、フロッピーディスク（Ｆ
Ｄ）、コンパクトディスク（ＣＤ）−ＲＯＭ又は光磁気
ディスク（ＭＯ）などに格納してサーバに提供される。Although the second embodiment has been described by using a small general-purpose computer alone, it can also be applied to a network configuration. For example, the present invention can be implemented even when constructed as a client / server system. In this client / server system, a remote procedure call (RPC) program uses a floppy disk (F
D), a compact disc (CD) -ROM, a magneto-optical disc (MO), or the like, and is provided to the server.

【００６６】また、ＴＣＰ／ＩＰ網（例えば、インター
ネット）などによるＣＧＩ(CommonGateway Interface)
を通じて本発明を実行するプログラムをダウンロードす
ることも出来る。このようなダウンロードによるインス
トールも市販流通する汎用ソフトウェアパッケージと同
様であり、本発明に含まれる。A CGI (Common Gateway Interface) based on a TCP / IP network (for example, the Internet) or the like
It is also possible to download the program for executing the present invention through. The installation by such download is similar to the general-purpose software package distributed on the market and is included in the present invention.

【００６７】[0067]

【発明の効果】以上の説明から明らかなように、本発明
のＡＶ同期再生方法及びその装置によれば、音声データ
の再生終了によって映像データを切り替えている。As is apparent from the above description, according to the AV synchronous reproduction method and the apparatus thereof of the present invention, the video data is switched when the reproduction of the audio data is completed.

【００６８】この結果、音声データ及び映像データにお
ける時刻情報（ＰＳＴ）の監視が不要になり、さらに、
映像データを短時間中に切り替えて映像表示しており、
映像データを保存するバッファなどの記憶容量が少なく
なる。したがって、その処理規模及び回路規模が削減で
きるという効果を奏する。As a result, it becomes unnecessary to monitor the time information (PST) in the audio data and the video data, and
The video data is switched within a short time to display the video,
The storage capacity such as a buffer for storing video data is reduced. Therefore, it is possible to reduce the processing scale and the circuit scale.

【００６９】また、本発明によれば、映像表示を行う際
に音声データ及び映像データの時刻情報を毎回比較して
いる。Further, according to the present invention, the time information of the audio data and the time information of the video data are compared every time when the video is displayed.

【００７０】したがって、映像データ及び音声データの
同期ずれを直ちに補正できるようになり、結果的に映像
データ及び音声データの同期ずれのない高品質のオーデ
ィオ・ビデオ出力が可能になるという効果を奏する。Therefore, it is possible to immediately correct the synchronization deviation between the video data and the audio data, and as a result, it is possible to achieve high-quality audio / video output without the synchronization deviation between the video data and the audio data.

【００７１】本発明の情報記録媒体によれば、小型汎用
コンピュータやサーバが本発明を実施するためのプログ
ラムを外部記憶媒体に格納して提供している。According to the information recording medium of the present invention, a small general-purpose computer or server stores the program for implementing the present invention in an external storage medium and provides it.

【００７２】この結果、本発明の実施が容易になるとと
もに、以後のバージョンアッブなどにも容易に対応可能
になるという効果を奏する。As a result, there is an effect that the present invention can be implemented easily and can be easily applied to the subsequent version upgrade.

【図面の簡単な説明】[Brief description of drawings]

【図１】本発明のＡＶ同期再生方法及びその装置並びに
情報記録媒体の実施形態における構成を示すブロック図
である。FIG. 1 is a block diagram showing a configuration in an embodiment of an AV synchronous reproduction method and apparatus and an information recording medium of the present invention.

【図２】図１中の映像再生回路の内部構成を示すブロッ
ク図である。2 is a block diagram showing an internal configuration of a video reproduction circuit in FIG.

【図３】図１中の音声再生回路の内部構成を示すブロッ
ク図である。3 is a block diagram showing an internal configuration of an audio reproducing circuit in FIG.

【図４】第２実施形態の構成を示すブロック図である。FIG. 4 is a block diagram showing a configuration of a second embodiment.

【図５】第２実施形態の動作の処理手順を示すフローチ
ャートである。FIG. 5 is a flowchart showing a processing procedure of an operation of the second embodiment.

【図６】従来のＡＶ同期再生装置の一例を示すブロック
図である。FIG. 6 is a block diagram showing an example of a conventional AV synchronous playback device.

【符号の説明】[Explanation of symbols]

１ 入力回路 ２ 分離（ＤＥＭＵＸ）回路 ３ 映像タイムスタンプ（時刻情報）分離回路 ４ 映像再生回路 ６ 音声タイムスタンプ（時刻情報）分離回路 ７ 音声再生回路 ９ 再生制御回路 １０，１４ 圧縮データバッファ １１ 映像デコード回路 １２ 復元データバッファ １５ 音声デコード回路 １８ 制御部 １９ ファイル装置 ２１ サウンド回路 ２４ スピーカ ２５ 表示回路 ２６ モニタ装置 ３０ ドライブ 1 input circuit 2 separation (DEMUX) circuit 3 Video time stamp (time information) separation circuit 4 Video playback circuit 6 Audio time stamp (time information) separation circuit 7 Audio reproduction circuit 9 Playback control circuit 10,14 Compressed data buffer 11 Video decoding circuit 12 Restored data buffer 15 Audio decoding circuit 18 Control unit 19 file devices 21 sound circuit 24 speakers 25 Display circuit 26 Monitor device 30 drive

Claims (11)

(57)【特許請求の範囲】(57) [Claims] 【請求項１】 時刻情報をそれぞれ格納した映像情報及
び音声情報を連続的に形成した圧縮データから、映像デ
ータ及び音声データを再生する際に同期確立を図るＡＶ
同期再生方法において、 入力される圧縮データから映像情報及び音声情報を分離
するステップと、 この分離された音声情報及び映像情報から音声データ及
び映像データを分離し、かつ、音声データ及び映像デー
タのそれぞれの時刻情報を抽出するステップと、 前記分離された映像データにおける前後の映像データの
時刻情報から時刻差を算出し、かつ、この時刻差から映
像データの表示時間を算出し、この表示時間に対応する
再生音声データ量を求めるステップと、 この再生音声データ量分における音声再生及び再生音声
データ量分に対応する一回分の映像データを映像表示す
るステップと、 再生音声データ量の最終を認識するステップとを有し、 前記した映像情報及び音声情報を分離するステップから
再生音声データ量の最終を認識するまでのステップを圧
縮データの入力終了まで繰り返すことを特徴とするＡＶ
同期再生方法。1. An AV for achieving synchronization establishment when reproducing video data and audio data from compressed data in which video information and audio information in which time information is respectively stored are continuously formed.
In the synchronous reproduction method, a step of separating video information and audio information from the input compressed data, and separating audio data and video data from the separated audio information and video information, and Extracting the time information of the video data, calculating the time difference from the time information of the preceding and following video data in the separated video data, and calculating the display time of the video data from this time difference, and corresponding to this display time. The amount of reproduced audio data to be reproduced, the audio reproduction in the reproduced audio data amount and the video display of one video data corresponding to the reproduced audio data amount, and the step of recognizing the end of the reproduced audio data amount. And recognizing the end of the reproduced audio data amount from the step of separating the video information and the audio information described above. AV characterized by repeating the steps up to the input end of the compressed data
Synchronous playback method. 【請求項２】 時刻情報をそれぞれ格納した映像情報及
び音声情報を連続的に形成した圧縮データから、映像デ
ータ及び音声データを再生する際に同期確立を図るＡＶ
同期再生装置にあって、 音声データの１回分の再生時間が映像データの画面表示
時間に対応する処理を、圧縮データの入力から終了まで
繰り返す再生同期手段を備え、 この再生同期手段が、 入力圧縮データから映像情報及び音声情報を分離する第
１分離手段と、 前記第１分離手段で分離された音声情報及び映像情報か
ら音声データ及び映像データを分離し、かつ、音声デー
タ及び映像データのそれぞれの時刻情報を分離する第２
分離手段と、 前記第２分離手段からの音声データ及び映像データを伸
長して出力する音声及び映像データ再生手段と、 前記第２分離手段で分離された映像データの前後の映像
データの時刻情報から時刻差を算出し、かつ、この時刻
差から映像データの表示時間を求めるとともに、この表
示時間に対応する再生音声データ量を算出し、この再生
音声データ量分における音声再生を開始し、かつ、再生
音声データ量分に対応する一回分の映像データを映像表
示するとともに、再生音声データ量の最終を認識し、こ
の映像情報及び音声情報の分離から最終の認識までの処
理を、圧縮データの入力終了まで繰り返す制御を行う再
生制御手段と、 を備えることを特徴とするＡＶ同期再生装置。 2. An AV for achieving synchronization when reproducing video data and audio data from compressed data in which video information and audio information in which time information is stored are continuously formed.
In the synchronous playback device, a process of one-time playback time of the audio data corresponding to the screen display time of the video data comprises reproduction synchronization means repeated until completion of the input of the compressed data, the synchronized playback means, input compressed Separation of video and audio information from data
1 separation means and audio information and video information separated by the first separation means
Audio data and video data from the
Second for separating time information of video and video data
The separating means and the audio data and the video data from the second separating means are expanded.
Audio and video data reproduction means for long output and video before and after the video data separated by the second separation means
Calculate the time difference from the time information of the data, and
The display time of the video data is calculated from the difference and this table
Calculate the playback audio data amount corresponding to the indicated time, and
Start and play the audio playback for the amount of audio data
A video table showing the video data for one time corresponding to the amount of audio data
And recognize the end of the reproduced audio data amount,
From the separation of the video and audio information of the
Control is repeated until the end of input of compressed data.
An AV synchronized playback device comprising: a live control unit . 【請求項３】 前記音声及び映像データ再生手段が、 入力される圧縮データを一時的に記憶する圧縮データバ
ッファと、 前記圧縮データバッファからの圧縮データを伸長した映
像データに生成して出力する映像デコード回路と、 前記映像デコード回路からの伸長した映像データを一時
的に記憶し、再生制御手段からの映像再生開始信号に基
づいて出力する復元データバッファと、 前記復元データバッファからの映像データをアナログ信
号に変換して出力するＤ／Ａ変換回路と、 を備えることを特徴とする請求項２記載のＡＶ同期再生
装置。Wherein the audio and video data reproducing means, a compression data buffer for temporarily storing the compressed data to be inputted, image generating and outputting the video data decompressing the compressed data from the compressed data buffer A decoding circuit, a decompression data buffer for temporarily storing the decompressed video data from the video decoding circuit, and outputting the decompressed video data based on a video reproduction start signal from a reproduction control unit, and an analog video data from the decompression data buffer. The AV synchronous reproduction apparatus according to claim 2 , further comprising a D / A conversion circuit that converts the signal into a signal and outputs the signal. 【請求項４】 前記音声及び映像データ再生手段が、 入力される圧縮データを一時的に記憶する圧縮データバ
ッファと、 前記圧縮データバッファからの圧縮データを伸長した音
声データに生成して出力する音声デコード回路と、 前記音声デコード回路からの伸長した音声データを一時
的に記憶し、再生制御手段からの音声再生開始信号に基
づいて出力し、かつ、再生する音声データの終了を示す
音声再生終了信号を再生制御手段に出力する復元データ
バッファと、 前記復元データバッファからの音声データをアナログ信
号に変換して出力するＤ／Ａ変換回路と、 を備えることを特徴とする請求項２記載のＡＶ同期再生
装置。Wherein said audio and video data reproducing means, to the compressed data buffer for temporarily storing the compressed data to be input, generates and the audio data decompressing the compressed data from the compressed data buffer output audio A decoding circuit and an audio reproduction end signal that temporarily stores the expanded audio data from the audio decoding circuit, outputs the audio data based on the audio reproduction start signal from the reproduction control means, and indicates the end of the audio data to be reproduced. 3. The AV synchronization according to claim 2 , further comprising: a restored data buffer for outputting the audio data to the reproduction control means, and a D / A conversion circuit for converting the audio data from the restored data buffer into an analog signal and outputting the analog signal. Playback device. 【請求項５】 前記再生制御手段が、 音声及び映像データ再生手段から音声データ及び映像デ
ータをそれぞれ伸長して出力する際に、音声データ及び
映像のデータのそれぞれの再生開始時刻を整合させる制
御を行うことを特徴とする請求項２，３又は４記載のＡ
Ｖ同期再生装置。5. When the reproduction control means expands and outputs the audio data and the video data from the audio and video data reproduction means, the reproduction control means controls the reproduction start times of the audio data and the video data to match each other. A according to claim 2, 3 or 4 , characterized in that
V sync playback device. 【請求項６】 前記再生制御手段が、 第２分離手段で分離した音声データ及び映像データのそ
れぞれの時刻情報のずれを判定し、 この判定で時刻差が大きく、音声出力及び映像表示の再
生ができない場合に、映像データ及び音声データの時刻
差が実質的に一致するまで圧縮データを取り込む制御を
行うことを特徴とする請求項２〜５のいずれかに記載の
ＡＶ同期再生装置。6. The reproduction control means determines a shift in time information of each of the audio data and the video data separated by the second separation means, and the time difference is large in this determination, and the audio output and the video display are reproduced. The AV synchronous reproducing apparatus according to any one of claims 2 to 5, wherein if the time difference between the video data and the audio data does not substantially coincide with each other, the compressed data is controlled to be captured. 【請求項７】 前記時刻情報のずれを判定した際に、 同期ずれによる時刻差が大きく、音声出力及び映像表示
の再生ができない場合に、映像データ及び／又は音声デ
ータが異常であるとして、再生制御手段が同期再生の制
御を停止することを特徴とする請求項６に記載のＡＶ同
期再生装置。7. When the deviation of the time information is determined, if the time difference due to the synchronization deviation is large and the audio output and the video display cannot be reproduced, it is determined that the video data and / or the audio data is abnormal and the reproduction is performed. 7. The AV synchronous reproduction apparatus according to claim 6, wherein the control means stops the control of the synchronous reproduction. 【請求項８】 前記第２分離手段で分離された映像デー
タの前後の映像データの時刻差から、映像データの表示
時間を算出して再生音声データ量を求める際に、前記表
示時間を、音声データの再生周波数で除算して得ること
を特徴とする請求項２〜７のいずれかに記載のＡＶ同期
再生装置。8. The display time is calculated when the display time of the video data is calculated from the time difference between the video data before and after the video data separated by the second separating means to obtain the reproduced audio data amount. 8. The AV synchronous reproducing apparatus according to claim 2, wherein the AV synchronous reproducing apparatus is obtained by dividing by a reproduction frequency of data. 【請求項９】 入力された圧縮データから映像情報及び
音声情報を分離し、 この分離された音声情報及び映像情報から音声データ及
び映像データを分離するとともに、これら音声データ及
び映像データのそれぞれの時刻情報を抽出し、 分離された映像データの前後の映像データの時刻情報か
ら時刻差を算出するとともに、この時刻差から映像デー
タの表示時間を算出して、この表示時間に対応する再生
音声データ量を求め、 この再生音声データ量分における音声再生及び再生音声
データ量分に対応する一回分の映像データを映像表示し
て、再生音声データ量の最終を認識し、 かつ、前記した映像情報及び音声情報の分離から再生音
声データ量の最終の認識するまでの処理を、圧縮データ
の入力終了まで繰り返す制御をコンピュータが実行する
ためのプログラムを格納したことを特徴とする情報記録
媒体。9. The video information and the audio information are separated from the input compressed data, the audio data and the video data are separated from the separated audio information and the video information, and the time of each of the audio data and the video data is separated. Information is extracted, and the time difference is calculated from the time information of the video data before and after the separated video data, and the display time of the video data is calculated from this time difference, and the playback audio data amount corresponding to this display time is calculated. The audio reproduction in this reproduction audio data amount and the video data of one time corresponding to the reproduction audio data amount are displayed as an image, the end of the reproduction audio data amount is recognized, and the above-mentioned video information and audio The computer executes control to repeat the processing from the separation of information to the final recognition of the amount of reproduced audio data until the end of input of compressed data. Information recording medium characterized by storing a program for. 【請求項１０】 前記請求項９記載の情報記録媒体にお
いて、 音声データ及び映像データをそれぞれ伸長して出力する
際に、音声データ及び映像のデータのそれぞれの再生開
始時刻を整合させるとともに、分離した音声データ及び
映像データのそれぞれの時刻情報のずれを判定し、この
判定で時刻差が大きく、音声出力及び映像表示の再生が
できない場合に、映像データ及び音声データの時刻差が
実質的に一致するまで圧縮データを取り込み、かつ、前
記時刻情報のずれを判定した際に、時刻差が大きく、音
声出力及び映像表示の再生ができない場合に、映像デー
タ及び／又は音声データが異常であるとして、同期再生
を停止する制御をコンピュータが実行するためのプログ
ラムを格納したことを特徴とする情報記録媒体。10. The information recording medium according to claim 9, wherein when the audio data and the video data are decompressed and output, the reproduction start times of the audio data and the video data are matched and separated. The time difference between the audio data and the video data is determined, and when the time difference is large due to this determination and the audio output and the video display cannot be reproduced, the time difference between the video data and the audio data substantially matches. If the time difference is large and the audio output and the video display cannot be played back when the compressed data is captured and the deviation of the time information is determined, it is determined that the video data and / or the audio data is abnormal and the synchronization is performed. An information recording medium having a program stored therein for causing a computer to execute control for stopping reproduction. 【請求項１１】 前記請求項９記載の情報記録媒体にお
いて、 前記分離した映像データの前後の映像データの時刻差か
ら映像データの表示時間を算出して再生音声データ量を
求める際に、表示時間を、音声データの再生周波数で除
算して得る制御をコンピュータが実行するためのプログ
ラムを格納したことを特徴とする情報記録媒体。11. The information recording medium according to claim 9 , wherein the display time is calculated when the display time of the video data is calculated from the time difference between the video data before and after the separated video data to obtain the reproduced audio data amount. An information recording medium, which stores a program for a computer to execute control obtained by dividing by the reproduction frequency of audio data.
JP34990499A 1999-12-09 1999-12-09 AV synchronous reproduction method and apparatus, and information recording medium Expired - Fee Related JP3496603B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP34990499A JP3496603B2 (en) 1999-12-09 1999-12-09 AV synchronous reproduction method and apparatus, and information recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP34990499A JP3496603B2 (en) 1999-12-09 1999-12-09 AV synchronous reproduction method and apparatus, and information recording medium

Publications (2)

Publication Number Publication Date
JP2001169249A JP2001169249A (en) 2001-06-22
JP3496603B2 true JP3496603B2 (en) 2004-02-16

Family

ID=18406902

Family Applications (1)

Application Number Title Priority Date Filing Date
JP34990499A Expired - Fee Related JP3496603B2 (en) 1999-12-09 1999-12-09 AV synchronous reproduction method and apparatus, and information recording medium

Country Status (1)

Country Link
JP (1) JP3496603B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003101102A1 (en) * 2002-05-24 2003-12-04 Mitsubishi Denki Kabushiki Kaisha Mobile communication device
JP3731658B2 (en) 2002-09-06 2006-01-05 船井電機株式会社 Optical disk playback device
JPWO2006006714A1 (en) * 2004-07-14 2008-05-01 セイコーエプソン株式会社 VIDEO REPRODUCTION SYNC SIGNAL GENERATION METHOD, VIDEO REPRODUCTION SYNC SIGNAL GENERATION PROGRAM, TIMING CONTROL DEVICE, VIDEO / AUDIO SYNCHRONOUS REPRODUCTION METHOD, VIDEO / AUDIO SYNCHRONOUS REPRODUCTION PROGRAM, AND VIDEO / AUDIO SYNCHRONOUS REPRODUCTION DEVICE

Also Published As

Publication number Publication date
JP2001169249A (en) 2001-06-22

Similar Documents

Publication Publication Date Title
JP3063841B2 (en) Audio / video synchronous playback device
JP3063838B2 (en) Audio / video synchronous playback apparatus and method
US6163646A (en) Apparatus for a synchronized playback of audio-video signals
US6512884B1 (en) Method and apparatus for synchronized play back of audio-video signals
US6163647A (en) Apparatus for synchronized playback of audio-video signals
JP3104681B2 (en) Audio / video synchronous playback method and apparatus
JP4536653B2 (en) Data processing apparatus and method
JP4983923B2 (en) Decoder device and decoding method
JP2000224535A (en) Moving image reproducing device
KR20070037355A (en) Data recording and reproducing apparatus, method of recording and reproducing data, and program therefor
JP3389807B2 (en) Video and audio recording and playback device
JP3496603B2 (en) AV synchronous reproduction method and apparatus, and information recording medium
JP2000078531A (en) Method and system for editing audio data
JP2001309303A (en) Real time picture recording and reproducing device
JP2000308012A (en) Video/audio reproducing device
JP3039472B2 (en) Image and audio playback device
JP2001298711A (en) Image recording and reproducing device and method, and recording medium
JP3807053B2 (en) Video / audio synchronization method and video / audio signal recording / reproducing apparatus
JPH10145733A (en) Recording and reproducing method for moving image signal
JPH10164512A (en) Data-processing synchronization device
JP2000333106A (en) Image file management device, its method and computer- readable storage medium
JP2001326908A (en) Recording and reproducing device and method for controlling the same
JPH09107522A (en) Video and audio data companding processor
JP2019125994A (en) Video and audio reproduction device
JPH09107521A (en) Video and audio signal compression method and device therefor

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071128

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081128

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081128

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091128

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091128

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101128

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111128

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111128

Year of fee payment: 8

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111128

Year of fee payment: 8

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111128

Year of fee payment: 8

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111128

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121128

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121128

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121128

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121128

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131128

Year of fee payment: 10

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees