JPH10308923A - Reproduction synchronization device - Google Patents
Reproduction synchronization deviceInfo
- Publication number
- JPH10308923A JPH10308923A JP9114749A JP11474997A JPH10308923A JP H10308923 A JPH10308923 A JP H10308923A JP 9114749 A JP9114749 A JP 9114749A JP 11474997 A JP11474997 A JP 11474997A JP H10308923 A JPH10308923 A JP H10308923A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- video
- data
- decoding
- buffer memory
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Television Signal Processing For Recording (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
- Electrophonic Musical Instruments (AREA)
Abstract
Description
【０００１】[0001]
【産業上の利用分野】本発明は、MIDI（Musical Instru
mental Digital Interfaceの頭文字）信号などの符号化
音声データと、コンピュータグラフィクス（以降CGと略
す）などの符号化映像データとを同期して復号再生する
再生同期装置に関するものである。The present invention relates to a MIDI (Musical Instrument)
The present invention relates to a playback synchronizing device for synchronously decoding and playing back encoded audio data such as a mental digital interface (initial) signal and encoded video data such as computer graphics (hereinafter abbreviated as CG).
【０００２】[0002]
【従来の技術】近年、データ伝送ネットワークの進歩に
より、多様なデータサービスが実現されつつある。その
1つとして、通信によりMIDIデータを配信して、データ
入力を受けて楽音を発する音源を備えた端末で楽曲の伴
奏を実現する通信カラオケシステムが実用化されてい
る。また業務用の通信カラオケシステムでは端末側にレ
ーザディスク装置等の映像再生手段を備え、楽曲と対応
した映像を背景に用いる事が一般的である。しかし家庭
用として実用化されている通信カラオケ装置では、静止
画、またはTVやビデオなどから得られる楽曲とは関係の
ない独立した映像を背景に表示している。2. Description of the Related Art In recent years, various data services have been realized with the progress of data transmission networks. That
As one type, a communication karaoke system has been put to practical use in which MIDI data is distributed by communication, and music accompaniment is realized on a terminal provided with a sound source that receives a data input and emits a musical tone. In general, a commercial communication karaoke system is provided with a video reproducing means such as a laser disk device on the terminal side, and uses a video corresponding to the music as a background. However, in a communication karaoke apparatus which is put into practical use for home use, a still image or an independent video which is not related to music obtained from a TV or a video is displayed on a background.
【０００３】一方、コンピュータグラフィクス（以降CG
と略す）と音声の同期の方法については、特開平7-9877
0にその実現方法が提案されている。これによると、計
算処理時間を予測し、計算処理が表示に間に合わない場
合は表示を待ち合わせ、あるいは飛ばす方法が示されて
いる。On the other hand, computer graphics (hereinafter CG)
And the method of synchronizing audio are disclosed in Japanese Unexamined Patent Publication No. 7-9877.
0 proposes a way to achieve this. According to this method, a calculation processing time is predicted, and when the calculation processing cannot be performed in time for the display, a method of waiting or skipping the display is shown.
【０００４】[0004]
【発明が解決しようとする課題】前記の家庭用通信カラ
オケ装置は映像の再生内容の魅力が充分でないという問
題を有していた。また特開平7-98770の方法によれば、
計算処理に時間がかかり、表示に間に合わないデータが
連続して発生した場合、表示できない状態、あるいは、
映像がフリーズ（停止）した状態が長く続く、と言う問
題がある。The above-mentioned home-use communication karaoke apparatus has a problem that the reproduced contents of video are not sufficiently attractive. According to the method of JP-A-7-98770,
If the calculation process takes a long time and data that cannot be displayed continuously occurs continuously,
There is a problem that the video freezes (stops) for a long time.
【０００５】本発明は上記の問題を解決するもので、音
声と映像の同期を実現する安価な再生同期装置を提供
し、背景映像としては、CGなどを用いて少量のデータで
高度な映像を表示できる魅力のある通信カラオケシステ
ムを実現することを目的とする。The present invention has been made to solve the above-mentioned problems, and provides an inexpensive reproduction synchronizing apparatus for realizing synchronization between audio and video. As a background video, an advanced video can be formed with a small amount of data using CG or the like. The purpose is to realize an attractive communication karaoke system that can be displayed.
【０００６】[0006]
【課題を解決するための手段】上記課題を解決するため
に本発明の請求項１の再生同期装置は、符号化音声デー
タから同期信号を抽出する同期信号抽出手段と、符号化
映像データの復号に要する時間を予測し、復号終了予測
時刻を出力する復号時刻予測手段と、復号終了予測時刻
が、該当する符号化映像データの定められた表示時刻に
対応する同期信号の発生時刻よりも遅れる場合に間引信
号を発生する間引信号生成手段と、符号化映像データを
一時蓄積するバッファメモリと、符号化映像データをバ
ッファメモリに供給するデータ供給手段と、バッファメ
モリに蓄積した符号化映像データを復号しデジタル映像
信号を生成して、出力する映像生成手段と、デジタル映
像信号を一時蓄積する表示メモリと、表示メモリのデジ
タル映像信号を同期信号に従って、映像信号として出力
する映像出力手段とを備え、但し上記のデータ供給手段
は、デジタル映像信号の生成終了、または間引信号の入
力があった場合に次のデータをバッファメモリに供給
し、上記の映像生成手段は、間引信号の入力があった場
合に進行中の映像生成処理を中止して次のデータの映像
生成を開始するという構成を有している。According to a first aspect of the present invention, there is provided a reproduction synchronizing apparatus for extracting a synchronizing signal from encoded audio data, and decoding the encoded video data. Decoding time prediction means for predicting the time required for decoding and outputting a decoding end prediction time, and the decoding end prediction time is later than the generation time of the synchronization signal corresponding to the predetermined display time of the corresponding coded video data A decimating signal generating means for generating a decimating signal, a buffer memory for temporarily storing coded video data, a data supply means for supplying coded video data to the buffer memory, and a coded video data stored in the buffer memory Video generating means for decoding the digital video signal to generate and output a digital video signal, a display memory for temporarily storing the digital video signal, and a digital video signal from the display memory. Video output means for outputting as a video signal in accordance with the signal, provided that the data supply means supplies the next data to the buffer memory when the generation of the digital video signal is completed or when a thinning signal is input. The video generation means has a configuration in which, when a thinning signal is input, the ongoing video generation processing is stopped and the video generation of the next data is started.
【０００７】上記の構成により、同期信号抽出手段は、
符号化音声データから同期信号を抽出する。復号時刻予
測手段は、符号化映像データから復号に要する時間を予
測し、復号終了予測時刻を出力する。間引信号生成手段
は、復号終了予測時刻が、該当する符号化映像データの
定められた表示時刻に対応する同期信号の発生時刻より
も遅れる場合に間引信号を発生する。バッファメモリ
は、符号化映像データを一時蓄積する。データ供給手段
は、デジタル映像信号の生成終了、または間引信号の入
力があった場合に次の符号化映像データをバッファメモ
リに供給する。映像生成手段は、バッファメモリに蓄積
した符号化映像データからデジタル映像信号を生成して
出力する。また、映像生成手段は、間引信号の入力があ
った場合に進行中の映像生成処理を中止して次のデータ
の映像生成を開始する。表示メモリはデジタル映像信号
を一時蓄積する。映像出力手段は、表示メモリのデジタ
ル映像信号を同期信号に従って映像信号として出力する
事になる。[0007] With the above arrangement, the synchronization signal extracting means includes:
A synchronization signal is extracted from the encoded audio data. The decoding time prediction means predicts the time required for decoding from the encoded video data, and outputs a predicted decoding end time. The thinning signal generation means generates a thinning signal when the predicted decoding end time is later than the generation time of the synchronization signal corresponding to the predetermined display time of the corresponding coded video data. The buffer memory temporarily stores the encoded video data. The data supply unit supplies the next coded video data to the buffer memory when the generation of the digital video signal is completed or when the thinning signal is input. The video generation means generates and outputs a digital video signal from the coded video data stored in the buffer memory. Further, when the thinning-out signal is input, the video generation means stops the ongoing video generation process and starts the video generation of the next data. The display memory temporarily stores the digital video signal. The video output means outputs the digital video signal of the display memory as a video signal according to the synchronization signal.
【０００８】また、本発明の請求項２の再生同期装置
は、符号化音声データから同期信号を抽出する同期信号
抽出手段と、符号化映像データを一時蓄積するバッファ
メモリと、バッファメモリのデータの残量を検出し、同
期信号の到着時に前のデータの残量が0になっていない
場合に間引信号を発生するバッファ残量検出手段と、符
号化映像データをバッファメモリに供給するデータ供給
手段と、バッファメモリに蓄積した符号化映像データを
復号しデジタル映像信号を生成して出力する映像生成手
段と、デジタル映像信号を一時蓄積する表示メモリと表
示メモリのデジタル映像信号を同期信号に従って映像信
号として出力する映像出力手段と、を備え、但し上記の
データ供給手段は、バッファメモリのデータの残量が0
になった場合に次のデータをバッファメモリに供給する
とともに、間引信号の入力があった場合はデータを1ユ
ニット分とばして供給するという構成を有している。According to a second aspect of the present invention, there is provided a reproduction synchronization apparatus, comprising: a synchronization signal extracting means for extracting a synchronization signal from encoded audio data; a buffer memory for temporarily storing encoded video data; A buffer remaining amount detecting means for detecting a remaining amount and generating a thinning signal when the remaining amount of previous data is not 0 when a synchronization signal arrives, and a data supply for supplying encoded video data to a buffer memory Means for decoding the encoded video data stored in the buffer memory to generate and output a digital video signal; a display memory for temporarily storing the digital video signal; Video output means for outputting the signal as a signal.
In this case, the next data is supplied to the buffer memory in the case of, and the data is supplied by skipping one unit when a thinning signal is input.
【０００９】上記の構成により、同期信号抽出手段は符
号化音声データから同期信号を抽出する。バッファメモ
リは符号化映像データを一時蓄積する。バッファ残量検
出手段は、バッファメモリのデータの残量を検出し、同
期信号の到着時に前のデータの残量が0になっていない
場合に間引信号を発生する。データ供給手段は、バッフ
ァメモリのデータの残量が0になった場合に次の符号化
映像データをバッファメモリに供給するとともに、間引
信号の入力があった場合は、符号化映像データを1ユニ
ット分とばして供給する。映像生成手段は、バッファメ
モリに蓄積した符号化映像データからデジタル映像信号
を生成して出力する。表示メモリはデジタル映像信号を
一時蓄積する。映像出力手段は、表示メモリのデジタル
映像信号を同期信号に従って映像信号として出力する。With the above arrangement, the synchronization signal extracting means extracts the synchronization signal from the encoded audio data. The buffer memory temporarily stores the encoded video data. The buffer remaining amount detecting means detects the remaining amount of data in the buffer memory, and generates a thinning signal if the previous data remaining amount has not become 0 when the synchronization signal arrives. The data supply means supplies the next encoded video data to the buffer memory when the remaining amount of data in the buffer memory becomes 0, and reduces the encoded video data to 1 when a thinning signal is input. Supply by unit. The video generation means generates and outputs a digital video signal from the coded video data stored in the buffer memory. The display memory temporarily stores the digital video signal. The video output means outputs the digital video signal of the display memory as a video signal according to the synchronization signal.
【００１０】また、本発明の請求項３の再生同期装置
は、符号化音声データから同期信号を抽出する同期信号
抽出手段と、符号化映像データの復号に割り当てられる
CPUの演算時間の割合を予測し、CPU平均割当率を出力す
るCPU平均割当率算出手段と、CPU平均割当率が所定値を
下回る場合に間引信号を発生する間引信号生成手段と、
符号化映像データを一時蓄積するバッファメモリと、符
号化映像データをバッファメモリに供給するデータ供給
手段と、バッファメモリに蓄積した符号化映像データを
復号しデジタル映像信号を生成して出力する映像生成手
段と、デジタル映像信号を一時蓄積する表示メモリと、
表示メモリのデジタル映像信号を同期信号に従って映像
信号として出力する映像出力手段とを備え、但し上記の
データ供給手段は、デジタル映像信号の生成終了、また
は間引信号の入力があった場合に次のデータをバッファ
メモリに供給し、上記の映像生成手段は、間引信号の入
力があった場合に進行中の映像生成処理を中止して次の
データの映像生成を開始するという構成を有している。[0010] A reproduction synchronization apparatus according to a third aspect of the present invention is assigned to a synchronization signal extracting means for extracting a synchronization signal from encoded audio data, and to decoding of encoded video data.
A CPU average allocation ratio calculation unit that predicts a ratio of CPU operation time and outputs a CPU average allocation ratio, and a thinning signal generation unit that generates a thinning signal when the CPU average allocation ratio is lower than a predetermined value.
Buffer memory for temporarily storing encoded video data, data supply means for supplying the encoded video data to the buffer memory, and video generation for decoding the encoded video data stored in the buffer memory to generate and output a digital video signal Means, a display memory for temporarily storing a digital video signal,
Video output means for outputting the digital video signal of the display memory as a video signal in accordance with the synchronization signal, provided that the data supply means completes the generation of the digital video signal, or when the thinning signal is input, the following Supplying data to the buffer memory, the video generation means has a configuration in which, when a thinning signal is input, the video generation processing in progress is stopped and the video generation of the next data is started. I have.
【００１１】上記の構成により、同期信号抽出手段は符
号化音声データから同期信号を抽出する。CPU平均割当
率算出手段は、符号化映像データの復号に割り当てられ
るCPUの演算時間の割合を予測し、CPU平均割当率を出力
する。間引信号生成手段は、CPU平均割当率が所定値を
下回る場合に間引信号を発生する。バッファメモリは、
符号化映像データを一時蓄積する。データ供給手段は、
デジタル映像信号の生成終了、または間引信号の入力が
あった場合に、次の符号化映像データをバッファメモリ
に供給する。映像生成手段は、バッファメモリに蓄積し
た符号化映像データからデジタル映像信号を生成して出
力する。また、映像生成手段は、間引信号の入力があっ
た場合に進行中の映像生成処理を中止して次のデータの
映像生成を開始する。表示メモリはデジタル映像信号を
一時蓄積する。映像出力手段は、表示メモリのデジタル
映像信号を同期信号に従って映像信号として出力する。With the above arrangement, the synchronizing signal extracting means extracts a synchronizing signal from the encoded audio data. The CPU average allocation ratio calculating means predicts a ratio of a CPU operation time allocated to decoding of encoded video data, and outputs a CPU average allocation ratio. The thinning signal generation means generates a thinning signal when the average CPU allocation ratio is lower than a predetermined value. The buffer memory is
The coded video data is temporarily stored. The data supply means
When the generation of the digital video signal is completed or when the thinning signal is input, the next coded video data is supplied to the buffer memory. The video generation means generates and outputs a digital video signal from the coded video data stored in the buffer memory. Further, when the thinning-out signal is input, the video generation means stops the ongoing video generation process and starts the video generation of the next data. The display memory temporarily stores the digital video signal. The video output means outputs the digital video signal of the display memory as a video signal according to the synchronization signal.
【００１２】また、本発明の請求項４の再生同期装置
は、符号化音声データから同期信号を抽出する同期信号
抽出手段と、符号化映像データの復号に割り当てられる
システムバスの占有時間の割合を予測し、システムバス
平均割当率を出力するシステムバス平均割当率算出手段
と、システムバス平均割当率が、既定値を下回る場合に
間引信号を発生する間引信号生成手段と、符号化映像デ
ータから復号に要する時間を予測し、復号終了予測時刻
を出力する復号時刻予測手段と、復号終了予測時刻が、
該当する符号化映像データの定められた表示時刻に対応
する同期信号の発生時刻よりも遅れる場合に間引信号を
発生する間引信号生成手段と、符号化映像データを一時
蓄積するバッファメモリと、符号化映像データをバッフ
ァメモリに供給するデータ供給手段と、バッファメモリ
に蓄積した符号化映像データを復号しデジタル映像信号
を生成して出力する映像生成手段と、デジタル映像信号
を一時蓄積する表示メモリと、表示メモリのデジタル映
像信号を同期信号に従って映像信号として出力する映像
出力手段とを備え、但し上記のデータ供給手段は、デジ
タル映像信号の生成終了、または間引信号の入力があっ
た場合に次のデータをバッファメモリに供給し、上記の
映像生成手段は、間引信号の入力があった場合に進行中
の映像生成処理を中止して次のデータの映像生成を開始
する、という構成を有している。According to a fourth aspect of the present invention, there is provided a reproduction synchronizing apparatus for synchronizing a synchronizing signal from coded audio data with a synchronizing signal extracting means for extracting a synchronizing signal from the coded audio data. A system bus average allocation ratio calculating unit for predicting and outputting a system bus average allocation ratio; a thinning signal generating unit for generating a thinning signal when the system bus average allocation ratio is lower than a predetermined value; Decoding time prediction means for predicting the time required for decoding from and outputting a decoding end predicted time,
A decimating signal generating unit that generates a decimating signal when the time is later than a generation time of a synchronization signal corresponding to a predetermined display time of the corresponding coded video data, and a buffer memory that temporarily stores the coded video data, Data supply means for supplying coded video data to a buffer memory, video generation means for decoding coded video data stored in the buffer memory to generate and output a digital video signal, and display memory for temporarily storing digital video signals And video output means for outputting the digital video signal of the display memory as a video signal in accordance with the synchronization signal. However, the data supply means is provided when the generation of the digital video signal is completed, or when a thinning signal is input. The next data is supplied to the buffer memory, and the above-described video generation means executes the ongoing video generation process when the thinning signal is input. Sealed and has a configuration that, to start an image formation of the next data.
【００１３】上記の構成により、同期信号抽出手段は符
号化音声データから同期信号を抽出する。システムバス
平均割当率算出手段は、符号化映像データの復号に割り
当てられるシステムバスの占有時間の割合を予測し、シ
ステムバス平均割当率を出力する。間引信号生成手段
は、システムバス平均割当率が既定値を下回る場合に間
引信号を発生する。バッファメモリは符号化映像データ
を一時蓄積する。データ供給手段は、デジタル映像信号
の生成終了、または間引信号の入力があった場合に、次
の符号化映像データをバッファメモリに供給する。映像
生成手段は、バッファメモリに蓄積した符号化映像デー
タからデジタル映像信号を生成して出力する。また、映
像生成手段は、間引信号の入力があった場合に進行中の
映像生成処理を中止して次のデータの映像生成を開始す
る。表示メモリはデジタル映像信号を一時蓄積する。映
像出力手段は、表示メモリのデジタル映像信号を同期信
号に従って映像信号として出力する。With the above arrangement, the synchronization signal extracting means extracts the synchronization signal from the encoded audio data. The system bus average allocation ratio calculation means predicts the ratio of the occupation time of the system bus allocated for decoding the encoded video data, and outputs the system bus average allocation ratio. The thinning signal generating means generates a thinning signal when the average system bus allocation ratio is lower than a predetermined value. The buffer memory temporarily stores the encoded video data. The data supply unit supplies the next encoded video data to the buffer memory when the generation of the digital video signal is completed or when the thinning signal is input. The video generation means generates and outputs a digital video signal from the coded video data stored in the buffer memory. Further, when the thinning-out signal is input, the video generation means stops the ongoing video generation process and starts the video generation of the next data. The display memory temporarily stores the digital video signal. The video output means outputs the digital video signal of the display memory as a video signal according to the synchronization signal.
【００１４】また、本発明の請求項５の再生同期装置
は、符号化音声データから同期信号を抽出する同期信号
抽出手段と、符号化映像データの復号に割り当てられる
システムメモリの割合を予測し、システムメモリ平均割
当率を出力するシステムメモリ平均割当率算出手段と、
システムメモリ平均割当率が所定値を下回る場合に間引
信号を発生する間引信号生成手段と、符号化映像データ
の復号に要する時間を予測し、復号終了予測時刻を出力
する復号時刻予測手段と、復号終了予測時刻が、該当す
る符号化映像データを定められた表示時刻に対応する同
期信号の発生時刻よりも遅れる場合に間引信号を発生す
る間引信号生成手段と、符号化映像データを一時蓄積す
るバッファメモリと、符号化映像データをバッファメモ
リに供給するデータ供給手段と、バッファメモリに蓄積
した符号化映像データを復号しデジタル映像信号を生成
して出力する映像生成手段と、デジタル映像信号を一時
蓄積する表示メモリと、表示メモリのデジタル映像信号
を同期信号に従って映像信号として出力する映像出力手
段とを備え、但し上記のデータ供給手段は、デジタル映
像信号の生成終了、または間引信号の入力があった場合
に次のデータをバッファメモリに供給し、上記の映像生
成手段は、間引信号の入力があった場合に進行中の映像
生成処理を中止して次のデータの映像生成を開始すると
いう構成を有している。According to a fifth aspect of the present invention, there is provided a reproduction synchronization apparatus for predicting a ratio of a synchronization signal extracting means for extracting a synchronization signal from encoded audio data and a system memory allocated to decoding of encoded video data. System memory average allocation ratio calculating means for outputting a system memory average allocation ratio,
A decimating signal generating means for generating a decimating signal when the system memory average allocation rate is lower than a predetermined value; a decoding time predicting means for predicting a time required for decoding encoded video data and outputting a decoding end predicted time; A decimating signal generating unit for generating a decimating signal when the decoding end prediction time is later than the generation time of the synchronization signal corresponding to the display time determined for the corresponding coded video data; A buffer memory for temporarily storing the encoded video data, a data supply unit for supplying the encoded video data to the buffer memory, a video generating unit for decoding the encoded video data stored in the buffer memory to generate and output a digital video signal, A display memory for temporarily storing signals, and video output means for outputting a digital video signal of the display memory as a video signal in accordance with a synchronization signal; The data supply means supplies the next data to the buffer memory when the generation of the digital video signal is completed or when the thinning signal is input, and the video generation means receives the input of the thinning signal. In this case, the present embodiment has a configuration in which the ongoing video generation process is stopped and the video generation of the next data is started.
【００１５】上記の構成により、同期信号抽出手段は符
号化音声データから同期信号を抽出する。システムメモ
リ平均割当率算出手段は符号化映像データの復号に割り
当てられるシステムメモリの割合を予測し、システムメ
モリ平均割当率を出力する。間引信号生成手段はシステ
ムメモリ平均割当率が既定値を下回る場合に間引信号を
発生する。バッファメモリは符号化映像データを一時蓄
積する。データ供給手段は、デジタル映像信号の生成終
了、または間引信号の入力があった場合に、次の符号化
映像データをバッファメモリに供給する。映像生成手段
は、バッファメモリに蓄積した符号化映像データからデ
ジタル映像信号を生成して出力する。また、映像生成手
段は、間引信号の入力があった場合に進行中の映像生成
処理を中止して次のデータの映像生成を開始する。表示
メモリはデジタル映像信号を一時蓄積する。映像出力手
段は、表示メモリのデジタル映像信号を同期信号に従っ
て映像信号として出力する。With the above arrangement, the synchronization signal extracting means extracts the synchronization signal from the encoded audio data. The system memory average allocation ratio calculation means predicts the ratio of the system memory allocated for decoding the encoded video data, and outputs the system memory average allocation ratio. The thinning signal generation means generates a thinning signal when the average allocation rate of the system memory falls below a predetermined value. The buffer memory temporarily stores the encoded video data. The data supply unit supplies the next encoded video data to the buffer memory when the generation of the digital video signal is completed or when the thinning signal is input. The video generation means generates and outputs a digital video signal from the coded video data stored in the buffer memory. Further, when the thinning-out signal is input, the video generation means stops the ongoing video generation process and starts the video generation of the next data. The display memory temporarily stores the digital video signal. The video output means outputs the digital video signal of the display memory as a video signal according to the synchronization signal.
【００１６】[0016]
【実施の形態】本発明の実施例について、図面を参照し
ながら説明する。 《実施例１》図1は本発明の実施例１の構成を示すブロ
ック図である。実施例１の再生同期装置は、入力される
MIDIデータから同期信号を抽出してこの同期信号を間引
信号生成部103と映像出力部108に出力する同期信号抽出
部101、符号化映像データを入力して復号終了予測時刻
のデータを間引信号生成部103に出力する復号時刻予測
部102、符号化映像データと間引信号生成部103の出力の
間引信号が入力され符号化映像データを出力するデータ
供給部104、データ供給部104の出力の符号化映像データ
を記憶するバッファメモリ105、バッファメモリ105の出
力を復号してデジタル映像信号を表示メモリ107に出力
する映像生成部106を有している。映像生成部106はCPU1
06A、システムバス106B及びシステムメモリ106Cを有し
ている。Embodiments of the present invention will be described with reference to the drawings. << Embodiment 1 >> FIG. 1 is a block diagram showing a configuration of Embodiment 1 of the present invention. The playback synchronization device according to the first embodiment is input
A synchronization signal extraction unit 101 extracts a synchronization signal from MIDI data and outputs the synchronization signal to a thinning signal generation unit 103 and a video output unit 108.Inputs encoded video data and thins out data at a predicted decoding end time. A decoding time prediction unit 102 that outputs to the signal generation unit 103, a data supply unit 104 that receives encoded video data and a thinning signal output from the thinning signal generation unit 103, and outputs encoded video data, It has a buffer memory 105 for storing output encoded video data, and a video generation unit 106 for decoding the output of the buffer memory 105 and outputting a digital video signal to the display memory 107. The image generation unit 106 is a CPU1
06A, a system bus 106B and a system memory 106C.
【００１７】図2は本発明の実施例１の動作を示すタイ
ミングチャートであり、以下に動作の概要を説明する。
図において、同期信号201はMIDIデータから抽出した信
号である。両端に矢を持つ矢印ＡないしＦで示す各フレ
ームの予測時間202は映像の復号に要する時間の予測値
であり、それぞれの矢印の左側の端点が復号開始時刻を
示し、右側の端点がそれぞれのフレームの復号終了予測
時刻を示す。間引き信号203について、この例ではフレ
ームCの復号終了予測時刻ｔeが、フレームCの表示を終
了すべき時刻ｔ3よりも後になる為、その事が判明する
フレームBの復号終了時刻ｔ2に間引信号203が発生す
る。バッファメモリの内容204は、この例では、フレー
ムCの表示が間に合わないと推定されるため、フレームD
のデータが準備できる時点ｔ3で、フレームCのデータを
破棄し、フレームDのデータを蓄積していることを示
す。表示メモリの内容205は、フレームCの表示が間に合
わないと推定されたため、フレームBのデータが、2フレ
ームに相当する時間中表示メモリ107に蓄積され、続い
てフレームDのデータと入れ替わる。表示画像206は実際
に表示される映像の内容であり、表示メモリの内容205
と同じである。FIG. 2 is a timing chart showing the operation of the first embodiment of the present invention. The outline of the operation will be described below.
In the figure, a synchronization signal 201 is a signal extracted from MIDI data. The predicted time 202 of each frame indicated by arrows A to F having arrows at both ends is a predicted value of the time required for decoding the video, the left end point of each arrow indicates the decoding start time, and the right end point is the respective end point. Indicates the predicted decoding end time of the frame. For thinning signal 203, the decoded predicted ending time t e of the frame C in this example, to become later than the time t 3 should end the display of the frame C, the decoding end time t 2 of the frame B that it is found A thinning signal 203 is generated. In this example, since the display of the frame C is estimated to be too late in this example,
Once t 3 when data is ready, discards the data frame C, indicating that accumulates data frame D. Since it is presumed that the display of the frame C is not in time for the contents 205 of the display memory, the data of the frame B is accumulated in the display memory 107 for a time corresponding to two frames, and subsequently replaced with the data of the frame D. The display image 206 is the content of the video actually displayed and the content 205 of the display memory.
Is the same as
【００１８】図1と図2を用いて、実施例１の動作を詳細
に説明する。図1で、同期信号抽出部101は、入力された
MIDIデータから同期信号を抽出する。同期信号は周期が
一定である必要はないが、本実施例では簡単のため図2
の同期信号201に示すように一定周期として説明する。
復号時刻予測部102は、入力された符号化映像データの
内容から復号に要する時間を予測し、復号終了予測時刻
を出力する。図2の予測時間202で、矢印のついている線
分Ａ〜Ｆは復号に要する時間を示し、線分の右端が復号
終了予測時刻ｔeを示している。本実施例では、フレー
ムBの復号終了時点ｔ2で、フレームCの復号に要する時
間を予測する。その結果復号終了予測時刻が、フレーム
Cのデータを表示メモリに蓄積すべき時刻ｔ4、すなわち
図2の同期信号(3)よりも後になるであろう事が判明す
る。間引信号生成部103は、上記の予測結果にしたがっ
て、図2に示す様に、フレームBの復号終了時点ｔ2で間
引信号203を生成する。一方、データ供給部104は、デジ
タル映像信号の生成が終了したとき（符号化映像データ
の復号と同じ事を意味する）、または間引信号203の入
力があった場合に、次の符号化映像データをバッファメ
モリ105に供給する。本実施例では、フレームBの復号終
了時点ｔ2で、バッファメモリ105には一旦フレームCの
符号化映像データを蓄積する。しかし上記のように、間
引信号203が発生するため、同期信号201の(2)の時点
で、データ供給部104はフレームCの符号化映像データを
破棄し、フレームDの符号化映像データを蓄積する。映
像生成部106は、バッファメモリ105に蓄積した符号化映
像データを復号しデジタル映像信号を生成して出力す
る。図２の例では、映像生成部106は、間引信号202の入
力がある為、進行中のフレームCの復号処理を同期信号2
01の(2)の時点で中断し、次のフレームDの符号化映像デ
ータの復号処理を開始する。表示メモリ107は復号され
た結果のデジタル映像信号を一時蓄積する。映像出力部
108は、表示メモリ107のデジタル映像信号を同期信号に
従って映像信号として出力する。The operation of the first embodiment will be described in detail with reference to FIGS. In FIG. 1, the synchronization signal extraction unit 101
Extract synchronization signal from MIDI data. The period of the synchronization signal does not need to be constant, but in this embodiment, for simplicity, FIG.
The description will be made assuming that the period is constant as shown by the synchronization signal 201 of FIG.
The decoding time prediction unit 102 predicts the time required for decoding from the content of the input coded video data, and outputs a predicted decoding end time. In estimated time 202 in FIG. 2, a line segment A~F marked with an arrow indicates the time required for decoding, the right end of the line segment indicates the decoding end predicted time t e. In this embodiment, at the decoding end time t 2 of the frame B, and predicts the time required for decoding of the frame C. As a result, the predicted decoding end time is
It turns out that the data of C will be stored at the time t 4 to be stored in the display memory, that is, after the synchronization signal (3) in FIG. Decimating the signal generating unit 103 according to the above prediction result, as shown in FIG. 2, to produce a decimation signal 203 at the decoding end time t 2 of the frame B. On the other hand, when the generation of the digital video signal ends (meaning the same as the decoding of the encoded video data), or when the thinning signal 203 is input, the data supply unit 104 The data is supplied to the buffer memory 105. In this embodiment, at the decoding end time t 2 of the frame B, and accumulates once the frame C encoded video data in the buffer memory 105. However, as described above, since the thinning signal 203 is generated, at the time (2) of the synchronization signal 201, the data supply unit 104 discards the coded video data of the frame C and replaces the coded video data of the frame D. accumulate. The video generator 106 decodes the encoded video data stored in the buffer memory 105, generates a digital video signal, and outputs the digital video signal. In the example of FIG. 2, since the thinning signal 202 is input, the video generation unit 106 performs decoding of the ongoing frame C by the synchronization signal 2.
The process is interrupted at the time point of (2) of 01, and the decoding process of the encoded video data of the next frame D is started. The display memory 107 temporarily stores the decoded digital video signal. Video output section
108 outputs the digital video signal of the display memory 107 as a video signal according to the synchronization signal.
【００１９】この実施例１は符号化された映像データを
ＣＰＵ及びシステムメモリを有するコンピュータなどに
よる計算処理によって復号するシステムであり、各フレ
ームの復号に要する時間を予測し、映像の内容により復
号処理が表示すべき時刻までに間に合わない場合には、
そのフレームの復号処理を放棄し、前フレームの映像を
繰返して表示する事で、カラオケなどで必要な音声との
同期再生の破綻を避ける事ができる。The first embodiment is a system for decoding coded video data by a calculation process using a computer having a CPU and a system memory. The system predicts the time required for decoding each frame, and performs decoding processing based on the contents of the video. If is not in time for the time to display,
By abandoning the decoding processing of the frame and repeatedly displaying the video of the previous frame, it is possible to avoid a failure in synchronous reproduction with audio required for karaoke or the like.
【００２０】《実施例２》図3は本発明の実施例２の構
成を示すブロック図である。実施例２の再生同期装置は
入力されるMIDIデータから同期信号を抽出して、この同
期信号をバッファ残量検出部309と映像出力部308に検出
する同期信号抽出部301、前記同期信号が入力されたバ
ッファ残量検出部309の出力の間引信号が入力されるデ
ータ供給部304、データ供給部304の復号化映像データが
入力されるバッファメモリ305、バッファメモリ305の出
力が入力される映像生成部306、映像生成部306の出力の
デジタル映像信号が入力される表示メモリ307、表示メ
モリの出力が入力される映像出力部308を有する。映像
生成部306はCPU306A，システムバス306B及びシステムメ
モリ306Cを有している。Embodiment 2 FIG. 3 is a block diagram showing the configuration of Embodiment 2 of the present invention. The reproduction synchronizing apparatus according to the second embodiment extracts a synchronizing signal from input MIDI data, and detects the synchronizing signal in a buffer remaining amount detecting unit 309 and a video output unit 308. Data supply unit 304 to which the thinned-out signal of the output from the buffer remaining amount detection unit 309 is input, a buffer memory 305 to which the decoded video data of the data supply unit 304 is input, and an image to which the output of the buffer memory 305 is input It has a generation unit 306, a display memory 307 to which a digital video signal output from the video generation unit 306 is input, and a video output unit 308 to which an output of the display memory is input. The video generation unit 306 has a CPU 306A, a system bus 306B, and a system memory 306C.
【００２１】図4は実施例２の動作を示すタイミングチ
ャートであり、以下に動作の概要を説明する。同期信号
401はMIDIデータから抽出した信号である。間引き信号4
03について、この例ではバッファメモリの内容404のフ
レームCの符号化映像データが、同期信号401の(3)の時
点で0になっていない為、その事が判明する同期信号(3)
の時点で間引信号403が発生している。バッファメモリ
の内容404は、この例では、フレームCの復号処理が延長
されたため、フレームDのデータをとばして、フレームC
の次にフレームEのデータを蓄積していることを示して
いる。表示メモリの内容405は、フレームCの表示が1フ
レーム遅れるため、フレームBのデータが、2フレームに
相当する時間中表示メモリ307に蓄積され、続いてフレ
ームC、フレームEと続いている。表示画像406は実際に
表示される映像の内容であり、表示メモリ307の内容と
同じである。FIG. 4 is a timing chart showing the operation of the second embodiment. The outline of the operation will be described below. Sync signal
401 is a signal extracted from MIDI data. Decimation signal 4
Regarding 03, in this example, the encoded video data of frame C of the contents 404 of the buffer memory is not 0 at the time of (3) of the synchronization signal 401, so the synchronization signal (3)
The thinning signal 403 has been generated at the time point. In this example, the content of the buffer memory 404 is such that the data of the frame D is skipped because the decoding process of the frame C is extended.
Next, it indicates that the data of the frame E is accumulated. In the display memory contents 405, since the display of the frame C is delayed by one frame, the data of the frame B is accumulated in the display memory 307 for a period of time corresponding to two frames, followed by the frames C and E. The display image 406 is the content of the video actually displayed, and is the same as the content of the display memory 307.
【００２２】次に、図3と図4を用いて、実施例２の動作
を詳細に説明する。図3で、バッファ残量検出部309は、
バッファメモリ305のデータの残量を検出する。本実施
例では、図4のバッファメモリの内容404に示す様に、フ
レームCの復号処理が同期信号401の(3)の時点でも終了
せず、バッファメモリ305のデータの残量が0になってい
ない。そのため、バッファ残量検出部305は、図4の間引
信号403に示す様に、同期信号401の(3)の時点で間引信
号を発生する。データ供給部304は、この間引信号を受
け、図4のバッファメモリの内容404に示す様に、バッフ
ァメモリ305へのフレームDの符号化映像データの蓄積を
放棄し、フレームCの復号処理の終了後、フレームEの符
号化映像データを蓄積する。また、フレームCの復号処
理が同期信号401の(3)の時点で終了していない為、表示
メモリ307には、図4の表示メモリ307の内容405に示す様
に、同期信号401の(4)の時点まで、フレームBのデジタ
ル映像信号が蓄積される。同期信号401の(5)の時点以降
は、フレームCに続いて復号したフレームEのデジタル映
像信号が蓄積される。Next, the operation of the second embodiment will be described in detail with reference to FIGS. In FIG. 3, the buffer remaining amount detection unit 309
The remaining amount of data in the buffer memory 305 is detected. In the present embodiment, as shown in the content 404 of the buffer memory in FIG. 4, the decoding process of the frame C does not end even at the time (3) of the synchronization signal 401, and the remaining amount of data in the buffer memory 305 becomes zero. Not. Therefore, the buffer remaining amount detection unit 305 generates a thinning signal at the time point (3) of the synchronization signal 401, as shown in the thinning signal 403 in FIG. Upon receiving the thinning signal, the data supply unit 304 abandons the accumulation of the encoded video data of the frame D in the buffer memory 305 as shown in the content 404 of the buffer memory in FIG. After that, the coded video data of the frame E is stored. Further, since the decoding process of the frame C has not been completed at the point (3) of the synchronization signal 401, the display memory 307 stores (4) of the synchronization signal 401 as shown in the content 405 of the display memory 307 in FIG. The digital video signal of the frame B is accumulated until the point of). After the point (5) of the synchronization signal 401, the decoded digital video signal of the frame E following the frame C is accumulated.
【００２３】この実施例２によれば、符号化された映像
データをＣＰＵ及びシステムメモリを有するコンピュー
タなどによる計算処理によって復号するシステムであ
り、映像の内容により復号処理が表示すべき時刻までに
間に合わない場合には、そのフレームの符号化映像デー
タを蓄積するバッファメモリのデータの残量を検出し、
次のフレームの復号処理を放棄し、そのフレームの映像
を継続表示する事で、カラオケなどで必要な音声との同
期再生の破綻を避ける事ができる。According to the second embodiment, there is provided a system for decoding encoded video data by a calculation process using a computer having a CPU and a system memory. If not, the remaining amount of data in the buffer memory for storing the encoded video data of the frame is detected,
By abandoning the decoding processing of the next frame and continuously displaying the video of the frame, it is possible to avoid a failure in synchronous reproduction with audio required for karaoke or the like.
【００２４】《実施例３》図5は本発明実施例３の構成
を示すブロック図である。実施例３の再生同期装置は入
力されるMIDIデータから同期信号を抽出して、この同期
信号を間引信号生成部503と映像出力部508に出力する同
期信号抽出部501、映像生成部506のＣＰＵ506Ａの復号
処理に割当てられる比率のＣＰＵ平均割当率を求めるＣ
ＰＵ平均割当率算出部510、ＣＰＵ平均割当率のデータ
が入力され間引信号をデータ供給部504と映像生成部506
に出力する間引信号生成部503、データ供給部504の出力
をメモリするバッファメモリ505、バッファメモリの出
力を復号する映像生成部506、映像生成部506の出力のデ
ジタル映像信号を記憶する表示メモリ507、表示メモリ5
07の出力が入力され映像信号を出力する映像出力部508
を有する。映像生成部506はＣＰＵ506Ａ、システムバス
506B及びシステムメモリ506Cを有する。<< Embodiment 3 >> FIG. 5 is a block diagram showing a configuration of Embodiment 3 of the present invention. The playback synchronization apparatus of the third embodiment extracts a synchronization signal from input MIDI data, and outputs the synchronization signal to a thinning signal generation unit 503 and a video output unit 508. C for calculating the average CPU allocation ratio of the ratio allocated to the decoding process of the CPU 506A
PU average allocation ratio calculation unit 510, CPU average allocation ratio data is input, and a thinning signal is supplied to data supply unit 504 and video generation unit 506.
503, a buffer memory 505 for storing the output of the data supply unit 504, a video generation unit 506 for decoding the output of the buffer memory, and a display memory for storing a digital video signal output from the video generation unit 506. 507, display memory 5
Video output unit 508 that receives the output of 07 and outputs a video signal
Having. The image generation unit 506 includes a CPU 506A and a system bus.
506B and a system memory 506C.
【００２５】図6は実施例３の動作を示すタイミングチ
ャートであり、以下に動作の概要を説明する。図におい
て、同期信号601はMIDIデータから抽出した信号であ
る。間引き信号603について、この例ではフレームCの復
号に割り当てられるCPU506Aの平均割当率が所定値を下
回るため、その事が判明する同期信号601の(2)の時点で
間引信号603が発生している。バッファメモリの内容604
に示すように、この例では、フレームCの復号処理に充
分な演算時間をCPU506Aに割り当てることができないと
予測されるため、フレームCの復号処理を放棄し、同期
信号601の(2)の時点でフレームDのデータと置換してい
る。表示メモリ507の内容605は、この例では、フレーム
Cの表示が間に合わないと推定されるため、フレームBの
データが2フレームに相当する時間中表示メモリ507に蓄
積され、続いてフレームDのデータと入れ替わってい
る。表示画像606は実際に表示される映像の内容であ
り、表示メモリ507の内容605と同じである。FIG. 6 is a timing chart showing the operation of the third embodiment. The outline of the operation will be described below. In the figure, a synchronization signal 601 is a signal extracted from MIDI data. Regarding the thinned signal 603, in this example, the average allocation rate of the CPU 506A allocated to the decoding of the frame C is lower than a predetermined value, so that the thinned signal 603 is generated at the time (2) of the synchronization signal 601 where it is clear. I have. Buffer memory contents 604
In this example, since it is predicted that sufficient operation time for the decoding process of the frame C cannot be allocated to the CPU 506A in this example, the decoding process of the frame C is abandoned and the synchronization signal 601 at (2) Is replaced with frame D data. The content 605 of the display memory 507 is, in this example, a frame.
Since it is presumed that the display of C is not in time, the data of frame B is accumulated in the display memory 507 for a time corresponding to two frames, and is subsequently replaced with the data of frame D. The display image 606 is the content of the video actually displayed, and is the same as the content 605 of the display memory 507.
【００２６】次に、図5と図6を用いて、実施例３の動作
を詳細に説明する。図5で、CPU平均割当率算出部510
は、符号化映像データの復号に割り当てられるCPU506A
の演算時間の割合を予測し、CPU平均割当率607のデータ
を出力する。CPU平均割当率607はCPU506Aの他の処理の
量により、図6に示す様に変化する。本実施例では、フ
レームを単位として平均化を行っているため、CPU平均
割当率607はフレームを単位として変化している。間引
信号生成部503は、CPU平均割当率607が、所定値を下回
る場合に間引信号603を発生する。本実施例では、図6に
おいて、同期信号601の(2)の時点と(3)の時点の間、す
なわち、フレームCの復号処理の期間においてCPU平均割
当率607が所定値を下回り、図6に示す様に同期信号601
の(2)の時点で、間引信号603を発生する。この結果を受
けて、データ供給部504は同期信号601の(2)の時点でフ
レームCの符号化映像データを破棄し、フレームDの符号
化映像データを蓄積する。映像生成部506は、バッファ
メモリ505に蓄積した符号化映像データを復号しデジタ
ル映像信号を生成して出力する。本実施例では、映像生
成部506は、間引信号603の入力により、進行中のフレー
ムCの復号処理を同期信号601の(2)の時点で中断し、次
のフレームDの符号化映像データの復号処理を開始す
る。表示メモリ507は復号された結果のデジタル映像信
号を一時蓄積し、映像出力部508は、表示メモリのデジ
タル映像信号を同期信号601に従って映像信号として出
力する。Next, the operation of the third embodiment will be described in detail with reference to FIGS. In FIG. 5, the CPU average allocation ratio calculation unit 510
Is the CPU 506A assigned for decoding encoded video data.
Is calculated, and data of the average CPU allocation ratio 607 is output. The CPU average allocation ratio 607 changes as shown in FIG. 6 according to the amount of other processing of the CPU 506A. In this embodiment, since the averaging is performed in units of frames, the average CPU allocation ratio 607 changes in units of frames. The thinning signal generation unit 503 generates a thinning signal 603 when the CPU average allocation ratio 607 is lower than a predetermined value. In the present embodiment, in FIG. 6, between the time point (2) and the time point (3) of the synchronization signal 601, that is, during the decoding process of the frame C, the CPU average allocation rate 607 falls below a predetermined value. The synchronization signal 601 as shown in
At the point (2), a thinning signal 603 is generated. In response to this result, the data supply unit 504 discards the coded video data of the frame C and stores the coded video data of the frame D at the point (2) of the synchronization signal 601. The video generation unit 506 decodes the coded video data stored in the buffer memory 505 to generate and output a digital video signal. In the present embodiment, the video generation unit 506 interrupts the ongoing decoding process of the frame C at the point (2) of the synchronization signal 601 due to the input of the decimation signal 603, and outputs the encoded video data of the next frame D. Starts the decryption process. The display memory 507 temporarily stores the decoded digital video signal, and the video output unit 508 outputs the digital video signal of the display memory as a video signal according to the synchronization signal 601.
【００２７】この実施例３は、符号化された映像データ
をCPU及びシステムメモリを有するコンピュータなどに
よる計算処理によって復号するシステムであり、映像の
内容により復号処理が表示すべき時刻までに間に合わな
い場合には、そのフレームの復号に割り当てられるCPU5
06Cの処理能力を予測し、そのフレームの復号処理を放
棄し、前フレームの映像を継続して表示する事で、カラ
オケなどで必要な音声との同期再生の破綻を避ける事が
できる。The third embodiment is a system in which coded video data is decoded by a calculation process using a computer having a CPU and a system memory. In the case where the decoding process cannot be completed by the time to be displayed due to the content of the video. Contains the CPU5 assigned to decoding that frame.
By predicting the processing capacity of the 06C, abandoning the decoding processing of the frame, and continuously displaying the video of the previous frame, it is possible to avoid a failure in synchronous reproduction with audio required for karaoke or the like.
【００２８】《実施例４》図7は本発明の実施例４の構
成を示すブロック図である。実施例４の再生同期装置は
入力されるMIDIデータから同期信号801を抽出して、こ
の同期信号801を間引信号生成部703と映像出力部708に
入力する同期信号抽出部701、映像生成部706のシステム
バス706Bのシステムバス平均割当率を求めるシステムバ
ス平均割当率算出部711、システムバス平均割当率のデ
ータが入力され間引信号を出力する間引信号生成部70
3、間引信号803が入力されるデータ供給部704と映像生
成部706、データ供給部704の出力を記憶するバッファメ
モリ705、バッファメモリ705の出力を復号する映像生成
部706、映像生成部706の出力を記憶する表示メモリ707
及び表示メモリ707のデジタル映像信号を映像信号に変
換する映像出力部708を有する。映像生成部706はCPU706
A、システムバス706B及びシステムメモリ706Cを有して
いる。Fourth Embodiment FIG. 7 is a block diagram showing a configuration of a fourth embodiment of the present invention. The reproduction synchronizing apparatus according to the fourth embodiment extracts a synchronizing signal 801 from input MIDI data, and outputs the synchronizing signal 801 to a thinning signal generating unit 703 and a video output unit 708. A system bus average allocation ratio calculation unit 711 that obtains a system bus average allocation ratio of the system bus 706B, and a thinned signal generation unit 70 that receives data of the system bus average allocation ratio and outputs a thinned signal.
3. Data supply unit 704 and image generation unit 706 to which thinning signal 803 is input, buffer memory 705 storing the output of data supply unit 704, image generation unit 706 decoding the output of buffer memory 705, image generation unit 706 Display memory 707 to store the output of
And a video output unit 708 for converting a digital video signal of the display memory 707 into a video signal. The image generation unit 706 is a CPU 706
A, a system bus 706B and a system memory 706C.
【００２９】図8は実施例４の動作を示すタイミングチ
ャートであり、以下に動作の概要を説明する。図におい
て同期信号801はMIDIデータから抽出した信号である。
間引き信号803について、この例ではフレームCの復号に
割り当てられるシステムバス706Bの平均割当率が所定値
を下回るため、その事が判明する同期信号801の(2)の時
点で間引信号803が発生している。バッファメモリの内
容804に示すように、この例では、フレームCの復号処理
に充分な占有時間をシステムバス706Bに割り当てること
ができないと予測されるため、フレームCの復号処理を
放棄し、同期信号801の(2)の時点でフレームDのデータ
と置換している。表示メモリの内容805は、この例で
は、フレームCの表示が間に合わないと推定されるた
め、フレームBのデータが2フレームに相当する時間中表
示メモリ707に蓄積され、続いてフレームDのデータと入
れ替わっている。表示画像806は実際に表示され映像の
内容であり、表示メモリ707の内容805と同じである。FIG. 8 is a timing chart showing the operation of the fourth embodiment. The outline of the operation will be described below. In the figure, a synchronization signal 801 is a signal extracted from MIDI data.
In this example, since the average allocation rate of the system bus 706B allocated to the decoding of the frame C is lower than the predetermined value, the thinning signal 803 is generated at the time (2) of the synchronization signal 801 that is known to be the same. doing. As shown in the contents 804 of the buffer memory, in this example, it is predicted that a sufficient occupation time for the decoding process of the frame C cannot be allocated to the system bus 706B. At the time point (2) of 801, the data is replaced with the data of frame D. In this example, since the display of the frame C is estimated to be in time in this example, the contents of the display memory 805 are stored in the display memory 707 during the time corresponding to two frames, and then the data of the frame D are Has been replaced. The display image 806 is the content of the actually displayed video, and is the same as the content 805 of the display memory 707.
【００３０】次に、図7と図8を用いて、実施例４の動作
を詳細に説明する。図7で、システムバス平均割当率算
出部711は、符号化映像データの復号に割り当てられる
システムバス706Bの占有時間の割合を予測し、システム
バス平均割当率808を出力する。システムバス平均割当
率808はシステムバス706Bが他の用途に使われる量によ
り、図8に示す様に変化する。本実施例では、フレーム
を単位として平均化を行っているため、システムバス平
均割当率808はフレームを単位として変化している。間
引信号生成部703は、システムバス平均割当率808が、所
定値を下回る場合に間引信号803を発生する。本実施例
では、図8において、同期信号801の(2)の時点と同期信
号801の(3)の時点の間、すなわち、フレームCの復号処
理の期間においてシステムバス平均割当率808が所定値
を下回り、図8に示す様に、同期信号801の(2)の時点
で、間引信号803を発生する。この結果を受けて、デー
タ供給部704は同期信号801の(2)の時点でフレームCの符
号化映像データを破棄し、フレームDの符号化映像デー
タを蓄積する。映像生成部706は、バッファメモリ705に
蓄積した符号化映像データを復号しデジタル映像信号を
生成して出力する。本実施例では、映像生成部706は、
間引信号803の入力により、進行中のフレームCの復号処
理を同期信号801の(2)の時点で中断し、次のフレームD
の符号化映像データの復号処理を開始する。表示メモリ
707は復号された結果のデジタル映像信号を一時蓄積
し、映像出力部708は、表示メモリのデジタル映像信号
を同期信号801に従って、映像信号として出力する。Next, the operation of the fourth embodiment will be described in detail with reference to FIGS. In FIG. 7, the average system bus allocation ratio calculation unit 711 predicts the ratio of the occupation time of the system bus 706B allocated for decoding the encoded video data, and outputs the average system bus allocation ratio 808. The average system bus allocation ratio 808 changes as shown in FIG. 8 depending on the amount of the system bus 706B used for another purpose. In the present embodiment, averaging is performed in units of frames, so that the average system bus allocation ratio 808 changes in units of frames. The thinning signal generation unit 703 generates a thinning signal 803 when the average system bus allocation ratio 808 is lower than a predetermined value. In the present embodiment, in FIG. 8, the average system bus allocation ratio 808 is a predetermined value between the time point (2) of the synchronization signal 801 and the time point (3) of the synchronization signal 801, that is, during the frame C decoding process. , The thinning signal 803 is generated at the time (2) of the synchronization signal 801 as shown in FIG. In response to this result, the data supply unit 704 discards the coded video data of the frame C and stores the coded video data of the frame D at the time (2) of the synchronization signal 801. The video generation unit 706 decodes the coded video data stored in the buffer memory 705 to generate and output a digital video signal. In the present embodiment, the video generation unit 706
Due to the input of the thinning signal 803, the decoding process of the ongoing frame C is interrupted at the point (2) of the synchronization signal 801 and the next frame D
Of the encoded video data is started. Display memory
Reference numeral 707 temporarily stores the decoded digital video signal, and the video output unit 708 outputs the digital video signal in the display memory as a video signal according to the synchronization signal 801.
【００３１】この実施例４は、符号化された映像データ
をCPU及びシステムメモリを有するコンピュータなどに
よる計算処理によって復号するシステムであり、映像の
内容により復号処理が表示すべき時刻までに間に合わな
い場合には、そのフレームの復号に割り当てられるシス
テムバス706Bの占有時間を予測し、そのフレームの復号
処理を放棄し、前フレームの映像を継続して表示する事
で、カラオケなどで必要な音声との同期再生の破綻を避
ける事ができる。The fourth embodiment is a system for decoding coded video data by a calculation process using a computer having a CPU and a system memory. If the decoding process cannot be completed by the time to be displayed due to the content of the video. Predict the occupation time of the system bus 706B allocated for decoding the frame, abandon the decoding process of the frame, and continuously display the video of the previous frame, so that the audio required for karaoke etc. Failure of synchronous reproduction can be avoided.
【００３２】《実施例５》図9は本発明の実施例５の構
成を示すブロック図である。実施例５の再生同期装置は
入力されるMIDIデータから同期信号1001を抽出して、こ
の同期信号を間引信号生成部903及び映像出力部908に入
力する同期信号抽出部901、映像生成部906のシステムメ
モリ906Cのシステムメモリ平均割当率を算出して間引信
号生成部903に入力するシステムメモリ平均割当率算出
部901、システムメモリ平均割当率のデータから間引信
号を生成し、データ供給部904と映像生成部906に入力す
る間引き信号生成部903、データ供給部904の出力を記憶
するバッファメモリ905、バッファメモリ905の出力を復
号してデジタル映像信号を生成する映像生成部906、映
像生成部の出力を記憶する表示メモリ907、表示メモリ9
07の出力を映像信号に変換する映像出力部908を有して
いる。映像生成部906はCPU906A、システムバス906B及び
システムメモリ906Cを有している。<< Embodiment 5 >> FIG. 9 is a block diagram showing the configuration of Embodiment 5 of the present invention. The playback synchronization apparatus according to the fifth embodiment extracts a synchronization signal 1001 from input MIDI data, and outputs the synchronization signal to a thinning signal generation unit 903 and a video output unit 908, a synchronization signal extraction unit 901 and a video generation unit 906. A system memory average allocation ratio calculation unit 901 that calculates a system memory average allocation ratio of the system memory 906C and inputs the data to the thinning signal generation unit 903, generates a thinning signal from the data of the system memory average allocation ratio, and supplies a data supply unit. A thinning signal generating unit 903 to be input to the 904 and the video generating unit 906, a buffer memory 905 for storing an output of the data supplying unit 904, a video generating unit 906 for decoding an output of the buffer memory 905 to generate a digital video signal, Display memory 907, display memory 9 for storing the output of the unit
It has a video output unit 908 for converting the output of 07 into a video signal. The video generation unit 906 has a CPU 906A, a system bus 906B, and a system memory 906C.
【００３３】図10は本発明の実施例５の動作を示すタイ
ミングチャートであり、以下に動作の概要を説明する。
図において、同期信号1001はMIDIデータから抽出した信
号である。間引き信号803について、この例ではフレー
ムCの復号に割り当てられるシステムメモリ906Cの平均
割当率が既定値を下回るため、その事が判明する同期信
号1001の(2)の時点で間引信号803が発生している。バッ
ファメモリの内容1004に示すように、この例では、フレ
ームCの復号処理に充分な占有時間をシステムメモリ906
Cに割り当てることができないと予測されるため、フレ
ームCの復号処理を放棄し、同期信号1001の(2)の時点で
フレームDのデータと置換している。表示メモリの内容1
005は、この例では、フレームCの表示が間に合わないと
推定されるため、フレームBのデータが2フレームに相当
する時間中表示メモリ907に蓄積され、続いてフレームD
のデータと入れ替わっている。表示画像1006は実際に表
示され映像の内容であり、表示メモリ907の内容1005と
同じである。FIG. 10 is a timing chart showing the operation of the fifth embodiment of the present invention. The outline of the operation will be described below.
In the figure, a synchronization signal 1001 is a signal extracted from MIDI data. In this example, since the average allocation rate of the system memory 906C allocated to decoding of the frame C is lower than the predetermined value, the thinning signal 803 is generated at the time (2) of the synchronization signal 1001 that indicates that the thinning signal 803 is obtained. doing. As shown in the content 1004 of the buffer memory, in this example, the occupation time sufficient for the decoding process of the frame C is set in the system memory 906.
Since it is predicted that it cannot be assigned to C, the decoding process of frame C is abandoned and replaced with the data of frame D at the point (2) of the synchronization signal 1001. Display memory contents 1
005, in this example, it is estimated that the display of the frame C is not in time, so that the data of the frame B is accumulated in the display memory 907 during the time corresponding to two frames, and then the frame D is displayed.
Data has been replaced. The display image 1006 is the content of the video actually displayed and is the same as the content 1005 of the display memory 907.
【００３４】次に、図9と図10を用いて、実施例５の動
作を詳細に説明する。図9で、システムメモリ平均割当
率算出部912は、符号化映像データの復号に割り当てら
れるシステムメモリ906Cの占有時間の割合を予測し、シ
ステムメモリ平均割当率1009のデータを出力する。シス
テムメモリ平均割当率1009はシステムメモリ906Cが他の
用途に使われる量により、図10に示す様に変化する。本
実施例では、フレームを単位として平均化を行っている
ため、システムメモリ平均割当率1009はフレームを単位
として変化している。間引信号生成部903は、システム
メモリ平均割当率1009が、所定値を下回る場合に間引信
号1003を発生する。本実施例では、図10において、同期
信号1001の(2)の時点と同期信号1001の(3)の時点の間、
すなわち、フレームCの復号処理の期間においてシステ
ムメモリ平均割当率1009が所定値を下回り、図10に示す
様に同期信号1001の(2)の時点で、間引信号1003を発生
する。この結果を受けて、データ供給部904は同期信号1
001の(2)の時点でフレームCの符号化映像データを破棄
し、フレームDの符号化映像データを蓄積する。映像生
成部906は、バッファメモリ905に蓄積した符号化映像デ
ータを復号しデジタル映像信号を生成して出力する。本
実施例では、映像生成部906は、間引信号1003の入力に
より、進行中のフレームCの復号処理を同期信号1001の
(2)の時点で中断し、次のフレームDの符号化映像データ
の復号処理を開始する。表示メモリ907は復号された結
果のデジタル映像信号を一時蓄積し、映像出力部908
は、表示メモリ907ののデジタル映像信号を同期信号100
1に従って映像信号として出力する。Next, the operation of the fifth embodiment will be described in detail with reference to FIGS. In FIG. 9, the system memory average allocation ratio calculation unit 912 predicts the ratio of the occupation time of the system memory 906C allocated to decoding of encoded video data, and outputs data of the system memory average allocation ratio 1009. The system memory average allocation ratio 1009 changes as shown in FIG. 10 depending on the amount of the system memory 906C used for other purposes. In the present embodiment, the averaging is performed in units of frames, so that the average system memory allocation ratio 1009 changes in units of frames. The thinning signal generation unit 903 generates a thinning signal 1003 when the average system memory allocation ratio 1009 is lower than a predetermined value. In the present embodiment, in FIG. 10, between the time point (2) of the synchronization signal 1001 and the time point (3) of the synchronization signal 1001,
That is, during the frame C decoding process, the system memory average allocation ratio 1009 falls below the predetermined value, and the thinning signal 1003 is generated at the time (2) of the synchronization signal 1001 as shown in FIG. In response to this result, the data supply unit 904 sends the synchronization signal 1
At time (2) of 001, the coded video data of frame C is discarded, and the coded video data of frame D is stored. The video generation unit 906 decodes the encoded video data stored in the buffer memory 905 to generate and output a digital video signal. In the present embodiment, the video generation unit 906 performs the decoding process of the ongoing frame C based on the input of the
The process is interrupted at the point of (2), and the decoding process of the encoded video data of the next frame D is started. A display memory 907 temporarily stores the decoded digital video signal, and outputs the digital video signal to a video output unit 908.
Converts the digital video signal of the display memory 907 to the synchronization signal 100
Output as a video signal according to 1.
【００３５】この実施例５は、符号化された映像データ
をCPU、システムメモリを有するコンピュータなどによ
る計算処理によって復号するシステムであり、映像の内
容により復号処理が表示すべき時刻までに間に合わない
場合であっても、そのフレームの復号に割り当てられる
システムメモリ906Cの占有時間を予測し、そのフレーム
の復号処理を放棄し、前フレームの映像を継続して表示
する事で、カラオケなどで必要な音声との同期再生の破
綻を避ける事ができる。The fifth embodiment is a system for decoding coded video data by calculation using a computer having a CPU, a system memory, and the like. In the case where the decoding process cannot be completed by the time to be displayed due to the content of the video. However, by predicting the occupation time of the system memory 906C allocated to the decoding of the frame, abandoning the decoding process of the frame, and continuously displaying the video of the previous frame, the audio necessary for karaoke etc. Failure of synchronous playback with the video can be avoided.
【００３６】[0036]
【発明の効果】以上の様に、本発明によれば、符号化映
像データの復号に要する時間、符号化映像データのバッ
ファ残量、符号化映像データの復号に割り当てられるCP
U平均割当率、符号化映像データの復号に割り当てられ
るシステムバス平均割当率、符号化映像データの復号に
割り当てられるシステムメモリ平均割当率に基づいて、
復号処理中またはこれから復号処理を行うフレームの処
理を破棄し、同一のフレームを継続して表示する事で、
音声信号と映像信号との同期を崩すことなく再生を続け
るシステムを実現できる。As described above, according to the present invention, the time required for decoding encoded video data, the remaining buffer amount of encoded video data, and the CP allocated for decoding encoded video data are provided.
U average allocation rate, system bus average allocation rate allocated to decoding of encoded video data, based on system memory average allocation rate allocated to decoding of encoded video data,
By discarding the processing of the frame to be subjected to the decoding processing during or from the decoding process and continuously displaying the same frame,
It is possible to realize a system that continues reproduction without losing synchronization between the audio signal and the video signal.
【図１】本発明の実施例１の構成を示すブロック図FIG. 1 is a block diagram showing a configuration of a first embodiment of the present invention.
【図２】実施例１の動作を示すタイミングチャートFIG. 2 is a timing chart showing the operation of the first embodiment;
【図３】本発明の実施例２の構成を示すブロック図FIG. 3 is a block diagram showing a configuration of a second embodiment of the present invention.
【図４】実施例２の動作を示すタイミングチャートFIG. 4 is a timing chart showing the operation of the second embodiment.
【図５】本発明の実施例３の構成を示すブロック図FIG. 5 is a block diagram showing a configuration of a third embodiment of the present invention.
【図６】実施例３の動作を示すタイミングチャートFIG. 6 is a timing chart showing the operation of the third embodiment.
【図７】本発明の実施例４の構成を示すブロック図FIG. 7 is a block diagram showing a configuration of a fourth embodiment of the present invention.
【図８】実施例４の動作を示すタイミングチャートFIG. 8 is a timing chart showing the operation of the fourth embodiment.
【図９】本発明の実施例５の構成を示すブロック図FIG. 9 is a block diagram showing a configuration of a fifth embodiment of the present invention.
【図10】実施例５の動作を示すタイミングチャートFIG. 10 is a timing chart illustrating the operation of the fifth embodiment.
101、301、501、701、901 同期信号抽出部 102 復号時刻予測部 103、503、703、903 間引信号生成部 104、304、504、704、904 データ供給部 105、305、505、705、905 バッファメモリ 106、306、506、706、906 映像生成部 106A、306A、506A、706A、906A CPU 106B、306B、506B、706B、906B システムバス 106C、306C、506C、706C、906C システムメモリ 107、307、507、707、907 表示メモリ 108、308、508、708、908 映像出力部 309 バッファ残量検出部 510 システムバス平均割当
率算出部 711 システムバス平均割当
率算出部 912 システムメモリ平均割
当率算出部101, 301, 501, 701, 901 Synchronous signal extraction unit 102 Decoding time prediction unit 103, 503, 703, 903 Thinned signal generation unit 104, 304, 504, 704, 904 Data supply unit 105, 305, 505, 705, 905 Buffer memory 106, 306, 506, 706, 906 Video generator 106A, 306A, 506A, 706A, 906A CPU 106B, 306B, 506B, 706B, 906B System bus 106C, 306C, 506C, 706C, 906C System memory 107, 307 , 507, 707, 907 Display memory 108, 308, 508, 708, 908 Video output unit 309 Buffer remaining amount detection unit 510 System bus average allocation ratio calculation unit 711 System bus average allocation ratio calculation unit 912 System memory average allocation ratio calculation unit
Claims (5)
る同期信号抽出手段と、 符号化映像データの復号に要する時間を予測し、復号終
了予測時刻を出力する復号時刻予測手段と、 復号終了予測時刻が、該当する符号化映像データの定め
られた表示時刻に対応する同期信号の発生時刻よりも遅
れる場合に間引信号を発生する間引信号生成手段と、 符号化映像データを一時蓄積するバッファメモリと、 符号化映像データをバッファメモリに供給するデータ供
給手段と、 バッファメモリに蓄積した符号化映像データを復号し、
デジタル映像信号を生成して出力する映像生成手段と、 デジタル映像信号を一時蓄積する表示メモリと、 表示メモリのデジタル映像信号を同期信号に従って、映
像信号として出力する映像出力手段と、を備え、 但し上記のデータ供給手段は、デジタル映像信号の生成
終了または間引信号の入力があった場合に次のデータを
バッファメモリに供給するものであり、 上記の映像生成手段は、間引信号の入力があった場合に
進行中の映像生成処理を中止し、次のデータの映像生成
を開始するものであることを特徴とする再生同期装置。1. A synchronization signal extraction unit for extracting a synchronization signal from encoded audio data, a decoding time prediction unit for predicting a time required for decoding of encoded video data and outputting a decoding end prediction time, and a decoding end prediction. A decimating signal generating means for generating a decimating signal when the time is later than a synchronizing signal generation time corresponding to a predetermined display time of the corresponding coded video data, and a buffer for temporarily storing the coded video data A memory, data supply means for supplying the encoded video data to the buffer memory, and decoding the encoded video data stored in the buffer memory;
Video generating means for generating and outputting a digital video signal; display memory for temporarily storing the digital video signal; and video output means for outputting the digital video signal of the display memory as a video signal in accordance with a synchronization signal; The data supply means is for supplying the next data to the buffer memory when the generation of the digital video signal is completed or when the thinning signal is input. A reproduction synchronizing apparatus characterized in that when there is, a video synchronizing process in progress is stopped and video generation of the next data is started.
る同期信号抽出手段と、 符号化映像データを一時蓄積するバッファメモリと、 バッファメモリのデータの残量を検出し、同期信号の到
着時に前のデータの残量が0になっていない場合に間引
信号を発生するバッファ残量検出手段と、 符号化映像データをバッファメモリに供給するデータ供
給手段と、 バッファメモリに蓄積した符号化映像データを復号しデ
ジタル映像信号を生成し出力する映像生成手段と、 デジタル映像信号を一時蓄積する表示メモリと、 表示メモリのデジタル映像信号を同期信号に従って映像
信号として出力する映像出力手段とを備え、 但し上記のデータ供給手段は、バッファメモリのデータ
の残量が0になった場合に次のデータをバッファメモリ
に供給するとともに、間引信号の入力があった場合はデ
ータを1ユニット分とばして供給することを特徴とする
再生同期装置。2. A synchronous signal extracting means for extracting a synchronous signal from encoded audio data, a buffer memory for temporarily storing encoded video data, a remaining amount of data in the buffer memory is detected, and when a synchronous signal arrives, Buffer remaining amount detecting means for generating a thinning signal when the remaining data amount of the data is not 0, data supplying means for supplying encoded video data to the buffer memory, and encoded video data stored in the buffer memory Video signal generating means for decoding and generating a digital video signal, a display memory for temporarily storing the digital video signal, and a video output means for outputting the digital video signal of the display memory as a video signal according to a synchronization signal, The data supply means supplies the next data to the buffer memory when the remaining amount of data in the buffer memory becomes 0, and A reproduction synchronizing device for supplying data by skipping one unit when a thinning signal is input.
る同期信号抽出手段と、 符号化映像データの復号に割り当てられるCPUの演算時
間の割合を予測し、CPU平均割当率を出力するCPU平均割
当率算出手段と、 CPU平均割当率が、所定値を下回る場合に間引信号を発
生する間引信号生成手段と、 符号化映像データを一時蓄積するバッファメモリと、 符号化映像データをバッファメモリに供給するデータ供
給手段と、バッファメモリに蓄積した符号化映像データ
を復号し、デジタル映像信号を生成して出力する映像生
成手段と、 デジタル映像信号を一時蓄積する表示メモリと、 表示メモリのデジタル映像信号を同期信号に従って映像
信号として出力する映像出力手段とを備え、 上記のデータ供給手段は、デジタル映像信号の生成終
了、または間引信号の入力があった場合に次のデータを
バッファメモリに供給し、 上記の映像生成手段は、間引信号の入力があった場合に
進行中の映像生成処理を中止して次のデータの映像生成
を開始する再生同期装置。3. A synchronizing signal extracting means for extracting a synchronizing signal from encoded audio data, and a CPU average allocation for estimating a ratio of CPU operation time allocated to decoding of encoded video data and outputting a CPU average allocation ratio. Rate calculating means, a thinning signal generating means for generating a thinning signal when the average CPU allocation rate is lower than a predetermined value, a buffer memory for temporarily storing encoded video data, and a buffer memory for storing the encoded video data. Data supply means for supplying, video generation means for decoding encoded video data stored in the buffer memory to generate and output a digital video signal, display memory for temporarily storing the digital video signal, and digital video of the display memory Video output means for outputting a signal as a video signal in accordance with a synchronization signal, wherein the data supply means terminates generation of the digital video signal or thins out the digital video signal. When the signal is input, the next data is supplied to the buffer memory. When the thinning-out signal is input, the video generation unit stops the ongoing video generation process and outputs the video of the next data. A playback synchronizer that initiates generation.
る同期信号抽出手段と、 符号化映像データの復号に割り当てられるシステムバス
の占有時間の割合を予測し、システムバス平均割当率を
出力するシステムバス平均割当率算出手段と、 システムバス平均割当率が所定値を下回る場合に間引信
号を発生する間引信号生成手段と、 符号化映像データを一時蓄積するバッファメモリと、 符号化映像データをバッファメモリに供給するデータ供
給手段と、 バッファメモリに蓄積した符号化映像データを復号しデ
ジタル映像信号を生成して出力する映像生成手段と、 デジタル映像信号を一時蓄積する表示メモリと、 表示メモリのデジタル映像信号を同期信号に従って映像
信号として出力する映像出力手段とを備え、 但し上記のデータ供給手段は、デジタル映像信号の生成
終了、または間引信号の入力があった場合に次のデータ
をバッファメモリに供給し、 上記の映像生成手段は、間引信号の入力があった場合に
進行中の映像生成処理を中止して次のデータの映像生成
を開始することを特徴とする再生同期装置。4. A synchronizing signal extracting means for extracting a synchronizing signal from encoded audio data, and a system for estimating a ratio of an occupation time of a system bus allocated to decoding of encoded video data and outputting an average system bus allocation ratio. Means for calculating an average bus allocation rate; means for generating a thinning signal when the average system bus allocation rate falls below a predetermined value; buffer memory for temporarily storing encoded video data; A data supply unit for supplying the buffer memory; a video generation unit for decoding the encoded video data stored in the buffer memory to generate and output a digital video signal; a display memory for temporarily storing the digital video signal; Video output means for outputting a digital video signal as a video signal in accordance with a synchronization signal; When the generation of the digital video signal is completed or when the thinning signal is input, the next data is supplied to the buffer memory. The above-described video generating means generates the ongoing video when the thinning signal is input. A reproduction synchronizing apparatus, wherein the processing is stopped and the generation of the video of the next data is started.
る同期信号抽出手段と、 符号化映像データの復号に割り当てられるシステムメモ
リの割合を予測し、システムメモリ平均割当率を出力す
るシステムメモリ平均割当率算出手段と、 システムメモリ平均割当率が既定値を下回る場合に間引
信号を発生する間引信号生成手段と、 符号化映像データを一時蓄積するバッファメモリと、 符号化映像データをバッファメモリに供給するデータ供
給手段と、 バッファメモリに蓄積した符号化映像データを復号しデ
ジタル映像信号を生成して出力する映像生成手段と、 デジタル映像信号を一時蓄積する表示メモリと、 表示メモリのデジタル映像信号を同期信号に従って映像
信号として出力する映像出力手段とを備え、 但し上記のデータ供給手段は、デジタル映像信号の生成
終了、または間引信号の入力があった場合に次のデータ
をバッファメモリに供給し、 上記の映像生成手段は、間引信号の入力があった場合に
進行中の映像生成処理を中止して次のデータの映像生成
を開始することを特徴とする再生同期装置。5. A synchronous signal extracting means for extracting a synchronous signal from encoded audio data, and a system memory average allocation for predicting a ratio of a system memory allocated to decoding of encoded video data and outputting an average system memory allocation ratio. Rate calculating means, thinning signal generating means for generating a thinning signal when the average allocation rate of the system memory falls below a predetermined value, buffer memory for temporarily storing encoded video data, and encoding video data in the buffer memory. A data supply means for supplying, a video generation means for decoding the encoded video data stored in the buffer memory to generate and output a digital video signal, a display memory for temporarily storing the digital video signal, and a digital video signal of the display memory And video output means for outputting as a video signal in accordance with the synchronization signal. When the generation of the digital video signal is completed, or when the thinning signal is input, the next data is supplied to the buffer memory. A reproduction synchronizing apparatus, wherein the processing is stopped and the generation of the video of the next data is started.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11474997A JP3377401B2 (en) | 1997-05-02 | 1997-05-02 | Playback synchronization device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11474997A JP3377401B2 (en) | 1997-05-02 | 1997-05-02 | Playback synchronization device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10308923A true JPH10308923A (en) | 1998-11-17 |
| JP3377401B2 JP3377401B2 (en) | 2003-02-17 |
Family
ID=14645722
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP11474997A Expired - Fee Related JP3377401B2 (en) | 1997-05-02 | 1997-05-02 | Playback synchronization device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3377401B2 (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100610900B1 (en) * | 2004-12-09 | 2006-08-09 | 엘지전자 주식회사 | Dynamic Control Method of Video Encoder |
| JP2008011337A (en) * | 2006-06-30 | 2008-01-17 | Fujitsu Ltd | Reproducing apparatus and reproducing method |
| US7433524B2 (en) | 2003-05-08 | 2008-10-07 | Ricoh Company, Ltd. | Processing system with frame rate and image quality optimized |
| JP2011171833A (en) * | 2010-02-16 | 2011-09-01 | Fujitsu Ltd | Apparatus, method and program for reproducing moving image |
| JP2013089105A (en) * | 2011-10-20 | 2013-05-13 | Mitsubishi Electric Corp | Display terminal |
-
1997
- 1997-05-02 JP JP11474997A patent/JP3377401B2/en not_active Expired - Fee Related
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7433524B2 (en) | 2003-05-08 | 2008-10-07 | Ricoh Company, Ltd. | Processing system with frame rate and image quality optimized |
| KR100610900B1 (en) * | 2004-12-09 | 2006-08-09 | 엘지전자 주식회사 | Dynamic Control Method of Video Encoder |
| JP2008011337A (en) * | 2006-06-30 | 2008-01-17 | Fujitsu Ltd | Reproducing apparatus and reproducing method |
| JP4579877B2 (en) * | 2006-06-30 | 2010-11-10 | 富士通セミコンダクター株式会社 | Playback apparatus and playback method |
| JP2011171833A (en) * | 2010-02-16 | 2011-09-01 | Fujitsu Ltd | Apparatus, method and program for reproducing moving image |
| US8811804B2 (en) | 2010-02-16 | 2014-08-19 | Fujitsu Limited | Methods and systems for reducing moving image data volume while maintaining luminance data of the moving image |
| JP2013089105A (en) * | 2011-10-20 | 2013-05-13 | Mitsubishi Electric Corp | Display terminal |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3377401B2 (en) | 2003-02-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6396874B1 (en) | Decoding method and apparatus and recording method and apparatus for moving picture data | |
| US6163646A (en) | Apparatus for a synchronized playback of audio-video signals | |
| JP3063838B2 (en) | Audio / video synchronous playback apparatus and method | |
| JP3039624B2 (en) | Audio / video synchronous playback device | |
| JPH10200862A (en) | Audio and video synchronous reproducing device | |
| JP2004007140A (en) | Voice reproducing device and voice reproduction control method to be used for the same device | |
| JPH07303240A (en) | Digital recording voice and video synchronous variable speedreproduction | |
| JP2001356767A (en) | Device and method for synchronous reproduction and recording medium with recorded program for synchronous reproduction | |
| JP4305065B2 (en) | AV synchronization processing apparatus and method, and AV recording apparatus | |
| CN105409229A (en) | Information processing apparatus, information processing method, and program | |
| JP3100308B2 (en) | Image and audio information playback system | |
| JP3377401B2 (en) | Playback synchronization device | |
| JPH10336602A (en) | Image and sound encoded data multiplexing method and device therefor | |
| JP4217934B2 (en) | Transport stream recording apparatus and method, and recording medium | |
| JPH10210483A (en) | Dynamic image reproducing device and method thereof | |
| US20070248170A1 (en) | Transmitting Apparatus, Receiving Apparatus, and Reproducing Apparatus | |
| JP3134588B2 (en) | Synchronous playback method of compressed image data and compressed sound data | |
| JP2998640B2 (en) | Video playback device | |
| JPH11134804A (en) | Image and audio synchronization system | |
| JPH10174065A (en) | Image audio multiplex data edit method and its device | |
| JP2000083258A (en) | Method for multiplexing coded data and device therefor | |
| JPH10276408A (en) | Video information providing control method and system therefor | |
| JP2012034210A (en) | Video/audio recording/playback device and video/audio recording/playback method | |
| JP2005303831A (en) | Data receiving apparatus and method, and data transmitting apparatus and method | |
| JP2004289484A (en) | Video reproducing device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071206 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081206 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091206 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091206 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101206 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |