JPH10210464A - Sent image, decoding device - Google Patents

Sent image, decoding device

Info

Publication number
JPH10210464A
JPH10210464A JP823697A JP823697A JPH10210464A JP H10210464 A JPH10210464 A JP H10210464A JP 823697 A JP823697 A JP 823697A JP 823697 A JP823697 A JP 823697A JP H10210464 A JPH10210464 A JP H10210464A
Authority
JP
Japan
Prior art keywords
decoding
buffer
image data
amount
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP823697A
Other languages
Japanese (ja)
Other versions
JP3969776B2 (en
Inventor
Masahito Nonaka
雅人 野中
Kiyoshi Fukui
潔 福井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP823697A priority Critical patent/JP3969776B2/en
Publication of JPH10210464A publication Critical patent/JPH10210464A/en
Application granted granted Critical
Publication of JP3969776B2 publication Critical patent/JP3969776B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

PROBLEM TO BE SOLVED: To prevent visual deterioration from appearing on a screen, even when the receiving image data must be partly disused or displayed again by monitoring the changed variable of the receiving image data on a time base and performing the control to selectively disuse or display again the receiving image data, having a small changed variable on the time base based on the monitoring result. SOLUTION: A changed variable detection part 106 and a buffer remaining capacity calculation part 107 monitor the changed variable of an image on a time base and the buffer remaining capacity respectively. Based on these monitoring signals, a decoding control part 108 estimates the occurrence of overflow or underflow of a buffer memory 103 and also estimates the change of the image. Then unavoidable display disturbances are caused to the image that has a small change on the time base. In other words, the receiving image data having a small changed amount on the time base is selectively disused or displayed again, when the receiving image data must be partly disused or displayed again. Thus, visual deterioration can be suppressed against occurrence of the display disturbance.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】木発明は、動画像の信号処
理、特に伝送路のクロックと独立なクロックで動作する
圧縮動画像などのメディアを伸長・表示するビデオデコ
ード装置に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to video signal processing, and more particularly to a video decoding apparatus for expanding and displaying media such as a compressed moving image operated by a clock independent of a clock of a transmission line.

【0002】[0002]

【従来の技術】[Prior art]

文献:「実践MPEG教科書」1995年アスキー出版
局 従来、圧縮動画像伝送に関する文献として前述の文献が
ある。この文献には、圧縮動画像伝送に関する各種の技
術や問題点が記述されている。例えば、LANから公衆
網への乗り入れを行うアプリケーション等の場合には、
ネットワーククロックの供給を必ずしも期待できないこ
と、そしてかかるネットワーククロックの供給を受けら
れない場合には次のような問題があることが指摘されて
いる。すなわち、ネットワーククロックの供給が無い状
態での圧縮動画像の伝送においては、送信側と受信側の
クロックが独立して動作していると、その速度差に応じ
てデータの処理速度が異なってしまうことが指摘されて
いる。
Literature: "Practical MPEG Textbook", 1995, ASCII Publishing Bureau Conventionally, there is the above-mentioned literature as a compressed moving image transmission literature. This document describes various technologies and problems related to compressed moving image transmission. For example, in the case of an application or the like for entering a public network from a LAN,
It has been pointed out that the supply of the network clock cannot always be expected, and that when the supply of the network clock cannot be received, there are the following problems. That is, in the transmission of a compressed moving image in a state where the network clock is not supplied, if the clocks on the transmission side and the reception side operate independently, the data processing speed differs according to the speed difference. It has been pointed out that.

【0003】しかしながら、このようにデータの処理速
度が異なると、受信データを一時的に記憶するバッファ
メモリの使用量は、エンコーダ側とデコード側の処理速
度の関係によって大きく異なってしまう。例えば、エン
コーダの処理が早いと、デコードの処理が追い付かず増
加し、逆の場合は減少してしまう。しかも、バッファが
空になると、表示すべき新たな画像が存在しなくなるた
め「2度表示」が必要となり、逆に一杯になると入力さ
れた新たな画像を保持することができなくなるため「駒
落し」が発生し、視覚的な劣化が目立ってしまう。
[0003] However, when the data processing speeds differ as described above, the amount of buffer memory used to temporarily store received data greatly differs depending on the relationship between the processing speeds on the encoder side and the decoding side. For example, if the processing of the encoder is fast, the decoding processing cannot catch up and increases, and in the opposite case, it decreases. In addition, when the buffer becomes empty, there is no new image to be displayed, so "display twice" is required. On the other hand, when the buffer is full, the input new image cannot be held and "dropped frame" Is generated, and visual deterioration is conspicuous.

【0004】このようなことを防ぐには、送受信間で同
期したクロックを使う必要がある。
In order to prevent such a situation, it is necessary to use a clock synchronized between transmission and reception.

【0005】これに関し、MPEG2システムではプロ
グラムクロック基準参照値(ProgramClock Reference
、以下PCRという)と呼ばれる時間情報を規定し、
クロックの同期を確保している。文献にはこの方法につ
いても記載されている。以下、この方法について説明す
る。
In this regard, in the MPEG2 system, a program clock reference value (ProgramClock Reference) is used.
, Hereinafter referred to as PCR).
Ensures clock synchronization. The literature also describes this method. Hereinafter, this method will be described.

【0006】エンコーダは、基準クロックから作成した
PCRをデコードに伝送し、デコードでは自身の持つク
ロックをカウントし、送られてきたPCRの値と比較す
る。これが一致すれば、クロックの同期が確保されてい
ることになる。PLL回路等によって、2つの値が一致
するようにクロックの周波数を制御することで、送受信
のクロックを同期させることができる。
[0006] The encoder transmits the PCR created from the reference clock to the decode, counts its own clock in the decode, and compares the count with the transmitted PCR value. If this coincides, it means that clock synchronization is ensured. By controlling the frequency of the clock so that the two values match by a PLL circuit or the like, the clock for transmission and reception can be synchronized.

【0007】図2にこの構成を示す。PCRに相当する
同期信号が付加された圧縮画像テークが入力端子201
から入力され、同期分離部202で圧縮画像データと同
期信号に分離される。画像データは同期分離部202か
らの制御でバッファメモリ203に蓄えられる。PLL
部204では、同期分離部202からの同期信号を基準
にクロックを再生する。このクロックを元にした読み出
し制御信号でバッファメモリ203から画像データを読
み出し、映像復号部205でこれを伸長し表示メモリ2
06に転送する。表示メモリ206からは、表示系のタ
イミングで読み出され、出力端子207から映像信号を
出力する。
FIG. 2 shows this configuration. A compressed image take to which a synchronization signal corresponding to PCR is added is input terminal 201.
, And is separated by the sync separation unit 202 into compressed image data and a sync signal. The image data is stored in the buffer memory 203 under the control of the sync separation unit 202. PLL
The unit 204 reproduces a clock based on the synchronization signal from the synchronization separation unit 202. The image data is read from the buffer memory 203 by a read control signal based on this clock, and is decompressed by the video
06. It is read from the display memory 206 at the timing of the display system, and outputs a video signal from the output terminal 207.

【0008】このように、PLL回路を用いることで、
送受信でクロックが一致、すなわちバッファメモリへの
書き込み量(同期分離部202から制御)と読み出し量
(映像復号部205からの読み出し制御)は同じになる
ため、バッファに蓄えられているデータ量が一定とな
り、前述のオーバーフロー等が発生しなくなる。
As described above, by using the PLL circuit,
Since the clocks in transmission and reception are the same, that is, the amount of writing to the buffer memory (control from the synchronization separation unit 202) and the amount of reading (control of reading from the video decoding unit 205) are the same, the amount of data stored in the buffer is constant. And the above-mentioned overflow does not occur.

【0009】[0009]

【発明が解決しようとする課題】以上のように、圧縮画
像データに同期信号を付加し、これを基準とするPLL
回路を構成することで、送受信間でクロックを一致させ
ることができる。これにより、画像表示における「駒落
し」、「2度表示」を防ぐことができる。
As described above, the synchronization signal is added to the compressed image data, and the PLL based on the synchronization signal is added.
By configuring the circuit, the clock can be matched between transmission and reception. As a result, "dropped frames" and "display twice" in image display can be prevented.

【0010】しかしながら、ATMネットワーク等の伝
送遅延に変動があるネットワークでは、送られてくる同
期信号にジッタがのってしまう。
[0010] However, in a network such as an ATM network in which the transmission delay fluctuates, the transmitted synchronization signal has jitter.

【0011】遅延変動が大きくなると、PLL回路で変
動の吸収ができなくなるだけでなく、PLL回路がロッ
クしなくなるという場合がある。この場合、送受信間の
クロックが一致しないため、その速度差に応じて受信バ
ッファの蓄積量が増減することになり、オーバーフロー
による「駒落し」、又はアンダーフローによる同じ画像
の「2度表示」が発生する。特に、時間軸で画像に大き
な変化がある場合に、「駒落し」又は「2度表示」、す
なわち表示の乱れが発生すると画質劣化が目だってしま
う。
When the delay fluctuation increases, not only the fluctuation cannot be absorbed by the PLL circuit but also the PLL circuit may not lock. In this case, since the clocks between the transmission and reception do not match, the amount of accumulation in the reception buffer increases or decreases in accordance with the speed difference, and "frame drop" due to overflow or "display twice" of the same image due to underflow occurs. Occur. In particular, when there is a large change in the image on the time axis, if "dropped frames" or "display twice", that is, if the display is disturbed, the image quality deteriorates noticeably.

【0012】また、従来技法では、PLL回路を追加す
ることによる回路規模の増加や再生クロックにジッタが
残留することを避けるために、あえてPLL回路を使用
しない場合もあった。この場合、表示の乱れの問題は未
解決のままであった。
In the conventional technique, a PLL circuit may not be used in order to avoid an increase in the circuit scale due to the addition of a PLL circuit and a residual jitter in a reproduced clock. In this case, the problem of display disorder remains unsolved.

【0013】[0013]

【課題を解決するための手段】かかる課題を解決するた
め本発明においては、受信画像データを一時的に蓄積す
る受信バッファと、当該受信バッファより読み出した受
信画像データを送信側のクロックと異なるクロックによ
り復号する復号化手段とを備える伝送画像復号装置にお
いて、以下の手段を備えたことを特徴とする。
According to the present invention, there is provided a receiving buffer for temporarily storing received image data, and a receiving buffer for storing received image data read from the receiving buffer, the clock being different from a clock on a transmitting side. A transmission image decoding apparatus comprising: a decoding means for decoding by means of the following:

【0014】すなわち、(1) 受信画像データにおける時
間軸上の変化量を監視する変化量監視手段と、(2) 受信
画像データの一部について廃棄又は再表示の必要が生じ
た場合、変化量監視手段の検出結果に基づいて、時間軸
上の変化量が少ない受信画像データを選択的に廃棄又は
再表示させるよう復号化手段を制御する復号制御手段と
を備えたことを特徴とするこのように、本発明において
は、受信画像データの一部について廃棄又は再表示の必
要が生じた場合にも、時間軸上の変化量が少ない受信画
像データを選択的に廃棄又は再表示できるので、表示画
面上でかかる処理がなされても、該当する画面に視覚上
の劣化が現れないようにできる。
That is, (1) a change amount monitoring means for monitoring a change amount on the time axis in the received image data, and (2) a change amount when a part of the received image data needs to be discarded or redisplayed. Decoding control means for controlling the decoding means to selectively discard or redisplay received image data having a small amount of change on the time axis based on the detection result of the monitoring means. In the present invention, even when it is necessary to discard or redisplay a part of the received image data, the received image data with a small amount of change on the time axis can be selectively discarded or redisplayed. Even if such processing is performed on the screen, it is possible to prevent visual deterioration from appearing on the corresponding screen.

【0015】[0015]

【発明の実施の形態】BEST MODE FOR CARRYING OUT THE INVENTION

(A)第1の実施形態 以下、本発明に係るデコード装置の第1の実施形態を説
明する。
(A) First Embodiment A first embodiment of a decoding device according to the present invention will be described below.

【0016】(A−1)第1の実施形態の構成 「駒落し」や「2度表示」を行っても、常に同じ画像を
表示する静止画では、表示の乱れが発生しても画質劣化
にはならないが、時間軸上で表示画像に大きな変化があ
る場合には、画質劣化として目立ってしまう。
(A-1) Configuration of the First Embodiment Even if "frame drop" or "display twice" is performed, in the case of a still image which always displays the same image, the image quality is deteriorated even if the display is disturbed. However, if there is a large change in the displayed image on the time axis, it will stand out as image quality degradation.

【0017】そこで、この実施形態に係るビデオデコー
ドでは、「駒落し」や「2度表示」を行う必要が生じた
場合には、時間軸上での変化が少ない画像に対して行う
ことで、バッファにオーバーフロー等が発生しても、視
覚的な画質の劣化を最小限にとどめる。
Therefore, in the video decoding according to this embodiment, when it is necessary to perform “dropping frames” or “display twice”, the video decoding is performed on an image having little change on the time axis. Even if an overflow or the like occurs in the buffer, deterioration of visual image quality is minimized.

【0018】図1は、本発明の第1の実施形態に係るデ
コード装置の全体構成を示すフローック図である。
FIG. 1 is a flow chart showing the overall configuration of the decoding device according to the first embodiment of the present invention.

【0019】図1に示すように、デコード装置は、入力
端子101、同期分離部102、バッファメモリ10
3、PLL部104、映像復号部105、変化量検出部
106、バッファ残量算出部107、復号制御部10
8、表示メモリ109、映像信号出力端子110からな
る。
As shown in FIG. 1, the decoding device comprises an input terminal 101, a sync separation section 102, a buffer memory 10
3. PLL unit 104, video decoding unit 105, change amount detection unit 106, buffer remaining amount calculation unit 107, decoding control unit 10
8, a display memory 109, and a video signal output terminal 110.

【0020】ここで、入力端子101は、同期信号が付
加された圧縮画像データを入力する端子であり、入力さ
れた圧縮動画像データは当該入力端子101より同期分
離部102に与えられる。同期分離部102は、圧縮画
像データと同期信号を分離する手段である。分離された
信号のうち、圧縮画像データはバッファメモリ103に
入力され、同期信号はPLL部104に入力される。な
お、圧縮画像データは、バッファメモリ103に蓄積さ
れる。また、PLL部104は、同期信号を基準に送信
側クロックを再生する。
Here, an input terminal 101 is a terminal for inputting compressed image data to which a synchronization signal is added, and the input compressed moving image data is supplied to the synchronization separation unit 102 from the input terminal 101. The synchronization separation unit 102 is means for separating the compressed image data and the synchronization signal. Of the separated signals, the compressed image data is input to the buffer memory 103, and the synchronization signal is input to the PLL unit 104. The compressed image data is stored in the buffer memory 103. Further, the PLL unit 104 reproduces the transmission clock based on the synchronization signal.

【0021】映像復号部105は、バッファメモリ10
3から読み出した圧縮画像データを伸長する手段であ
る。変化量検出部106は、時間軸上の画像の変化を検
出する手段である。バッファ残量算出部107は、バッ
ファメモリ103に蓄えられているデータ量を求める手
段である。復号制御部108は、映像復号部105から
の復号終了信号と変化量検出部106からの画像の変化
情報及びバッファ残量算出部107からのバッファ残量
から映像復号部105の復号表示タイミングを制御する
手段である。表示メモリ109は、復号画像データを保
持し表示系タイミングで出力するメモリである。映像出
力端子110は、映像信号の出力端子である。
The video decoding unit 105 includes a buffer memory 10
3 is a means for expanding the compressed image data read from the third image data. The change amount detection unit 106 is a unit that detects a change in the image on the time axis. The buffer remaining amount calculation unit 107 is a unit for calculating the amount of data stored in the buffer memory 103. The decoding control unit 108 controls the decoding display timing of the video decoding unit 105 based on the decoding end signal from the video decoding unit 105, the image change information from the change amount detection unit 106, and the remaining buffer amount from the remaining buffer calculation unit 107. It is a means to do. The display memory 109 is a memory that holds decoded image data and outputs the decoded image data at display system timing. The video output terminal 110 is a video signal output terminal.

【0022】実施形態に係るデコード装置は以上の手段
から構成されるが、このうち、図2に示す従来のデコー
ド装置には無い特有な手段は、変化量検出部106と、
バッファ残量算出部107と、復号制御部108の3つ
の手段である。以下、かかる実施形態に特有の手段につ
いて説明する。
The decoding device according to the embodiment comprises the above means. Among them, the unique means not included in the conventional decoding device shown in FIG.
The three means are a buffer remaining amount calculation unit 107 and a decoding control unit 108. Hereinafter, means specific to such an embodiment will be described.

【0023】まず、変化量検出部106の構成を図3に
示す。この変化量検出部106は、バッファメモリ10
3から映像復号部105へ転送されたデータ量を検出す
る手段である。なお、図3は、画像1フレーム分の圧縮
データ量から時間軸上の画像の変化を検出する場合の構
成を示すものである。
First, the configuration of the change amount detection unit 106 is shown in FIG. This change amount detection unit 106
3 is a means for detecting the amount of data transferred from 3 to the video decoding unit 105. FIG. 3 shows a configuration for detecting a change in the image on the time axis from the amount of compressed data for one frame of the image.

【0024】図3に示すように、変化量検出部106
は、読み出し制御信号(メモリアドレス)入力端子30
1、復号終了信号入力端子302、レジスタ303及び
305、減算器304、変化量出力端子306からな
る。
As shown in FIG. 3, the change amount detecting section 106
Is a read control signal (memory address) input terminal 30
1, a decoding end signal input terminal 302, registers 303 and 305, a subtractor 304, and a change amount output terminal 306.

【0025】ここで、レジスタ303は、復号終了信号
をトリガ信号として読み出しアドレスを保持するレジス
タであり、減算器304は、一周期前の読み出し量と新
たな読み出し量の差を求めるためのものである。なお、
レジスタ305は、復号終了信号をトリガ信号として減
算器306の出力値を保持するのに用いられる。
Here, the register 303 is a register for holding a read address using the decoding end signal as a trigger signal, and the subtractor 304 is for calculating a difference between the read amount one cycle before and a new read amount. is there. In addition,
The register 305 is used to hold the output value of the subtractor 306 using the decoding end signal as a trigger signal.

【0026】次に、バッファ残量算出部107の構成を
説明する。このバッファ残量算出部107は、バッファ
メモリ103の残量を監視するのに用いられる手段であ
り、書き込み制御信号(メモリアドレス)と読み出し制
御信号(メモリアドレス)を減算器に入力し、その差分
を求める構成になっている。
Next, the configuration of the buffer remaining amount calculation unit 107 will be described. The buffer remaining amount calculation unit 107 is a unit used to monitor the remaining amount of the buffer memory 103, and inputs a write control signal (memory address) and a read control signal (memory address) to a subtracter, Is required.

【0027】続いて、復号制御部108の構成を図4に
示す。なお、図4は、オーバーフローに対する制御を行
う部分のみ記載している。アンダーフローに対しては同
様の回路が別に必要になる。
Next, the configuration of the decoding control unit 108 is shown in FIG. FIG. 4 shows only a portion for controlling the overflow. A similar circuit is separately required for underflow.

【0028】図4に示すように、復号制御部108は、
複数の入出力端子(バッファ残量入力端子401、変化
量入力端子402、復号終了信号入力端子403、デー
タ出力命令端子415、復号開始命令出力端子416)
と、比較器404、405と、複数のゲート回路(NA
NDゲート406、ANDゲート407、410、レジ
スタ408、409、411、412、NORゲート4
12、ORゲート414)とからなる。
As shown in FIG. 4, the decoding control unit 108
Plural input / output terminals (buffer remaining amount input terminal 401, change amount input terminal 402, decoding end signal input terminal 403, data output instruction terminal 415, decoding start instruction output terminal 416)
, Comparators 404 and 405, and a plurality of gate circuits (NA
ND gate 406, AND gates 407, 410, registers 408, 409, 411, 412, NOR gate 4
12, OR gate 414).

【0029】ここで、比較器404は、バッファ残量と
閾値Aを比較する比較器であり、比較器405は、変化
量と閾値Bを比較する比較器である。なお、NANDゲ
ート406は、2つの比較器404及び405のNAN
Dを得る手段である。また、レジスタ408は、復号終
了信号をクロックの1サイクル分遅延させる手段であ
る。さらに、レジスタ409は、NANDゲート406
の出力を復号終了信号でホールドする手段である。さら
に、ANDゲート410は、レジスタ408とレジスタ
409の出力を入力とし、その論理積を得る手段であ
る。また、シフトレジスタ411は、ANDゲート41
0の出力を遅延させるのに用いられる。さらに、レジス
タ412は、NANDゲート406の出力をクロックの
1サイクル分遅延させる手段である。
Here, the comparator 404 is a comparator for comparing the remaining buffer amount with the threshold value A, and the comparator 405 is a comparator for comparing the change amount with the threshold value B. Note that the NAND gate 406 is the NAN of the two comparators 404 and 405.
It is a means to obtain D. The register 408 is means for delaying the decoding end signal by one clock cycle. Further, the register 409 includes a NAND gate 406
Is held by the decoding end signal. Further, the AND gate 410 is a means for receiving the outputs of the registers 408 and 409 as inputs and obtaining a logical product thereof. In addition, the shift register 411 includes the AND gate 41
Used to delay the output of 0. Further, the register 412 is means for delaying the output of the NAND gate 406 by one cycle of the clock.

【0030】(A−2)第1の実施形態の動作 (A−2−1)基本動作 続いて、デコード装置の動作内容を説明する。まず、基
本的な動作内容を説明する。
(A-2) Operation of First Embodiment (A-2-1) Basic Operation Next, the operation of the decoding device will be described. First, basic operation contents will be described.

【0031】デコード装置は、同期信号が付加された圧
縮画像データを入力端子101に入力すると、これを同
期分離部102に与え、圧縮画像データと同期信号とに
分離する。次に、デコード装置は、分離された圧縮画像
データを同期分離部102の動作タイミングでバッファ
メモリ103に書き込むと共に、同期信号をPLL部1
04に供給し、当該PLL部104において送信側クロ
ックを再生する。なお、この再生クロックは映像復号部
105に与えられる。
When the decoding device inputs the compressed image data to which the synchronization signal has been added to the input terminal 101, the decoding device supplies the input to the synchronization separation unit 102, and separates the compressed image data and the synchronization signal. Next, the decoding device writes the separated compressed image data into the buffer memory 103 at the operation timing of the synchronization separation unit 102, and outputs the synchronization signal to the PLL unit 1
04, and the PLL section 104 reproduces the transmission side clock. The reproduced clock is supplied to the video decoding unit 105.

【0032】デコード装置は、当該再生クロックを用い
てバッファメモリ103に蓄えられているデータを読み
出し、映像復号部105で伸長する。やがて、1枚の画
像の伸長が終了すると、復号終了信号を出力すると共
に、伸長された画像を表示メモリ109に転送し、表示
系のタイミングで出力する。
The decoding device reads the data stored in the buffer memory 103 by using the reproduction clock, and decompresses the data by the video decoding unit 105. When the decompression of one image is completed, a decoding end signal is output and the decompressed image is transferred to the display memory 109 and output at the timing of the display system.

【0033】以上がデコード装置の基本的な動作の内容
である。
The basic operation of the decoding apparatus has been described above.

【0034】(A−2−2)オーバーフロー時の動作 次に、本実施形態に係るデコード装置に特有な機能部で
ある映像復号部105の復号制御動作を説明する。な
お、この制御に密接に関係するのが、変化量検出部10
6とバッファ残量算出部107の2つの回路部である。
このうち、変化量検出部106は、時間軸上の画像の変
化量を検出するのに用いられ、バッファ残量算出部10
7は、伝送遅延変動等を原因としてPLL部104が送
信側クロックにロックしていない場合に生じるバッファ
残量の変動を算出するのに用いられる。
(A-2-2) Operation at the Time of Overflow Next, the decoding control operation of the video decoding unit 105, which is a functional unit unique to the decoding apparatus according to the present embodiment, will be described. It should be noted that the change amount detection unit 10 is closely related to this control.
6 and a buffer remaining amount calculation unit 107.
The change amount detection unit 106 is used to detect the change amount of the image on the time axis, and the buffer remaining amount calculation unit 10
Reference numeral 7 is used to calculate a change in the remaining buffer amount that occurs when the PLL unit 104 is not locked to the transmission side clock due to a transmission delay change or the like.

【0035】まず、変化量検出部106とバッファ残量
算出部107の動作内容を説明する。
First, the operation of the change amount detector 106 and the buffer remaining amount calculator 107 will be described.

【0036】変化量検出部106は、画像1フレームあ
たりの圧縮データ量を求めることによって画像の変化量
を監視する手段であり、図3のレジスタ303に、復号
終了信号をトリガ信号として、各画像フレーム処理終了
時点での総読み出し量(メモリアドレス)を保持する。
そして、減算器304において、新たな1フレーム分の
データを加えた総読み出し量(メモリアドレス)とレジ
スタ303に保持されている前回までの総読み出し量と
の差を求め、画像1フレームあたりの圧縮データを得
る。なお、減算器304の出力は、復号終了信号をトリ
ガ信号とするレジスタ305で1復号周期の信号にさ
れ、時間軸上の画像の変化量として出力端子306より
出力される。
The change amount detection unit 106 is a means for monitoring the amount of change in the image by obtaining the amount of compressed data per frame of the image. The total read amount (memory address) at the end of the frame processing is held.
Then, the subtractor 304 calculates the difference between the total read amount (memory address) obtained by adding the data for one new frame and the total read amount stored in the register 303 up to the previous time, and compresses the image per frame. Get the data. The output of the subtractor 304 is converted into a signal of one decoding cycle by a register 305 using a decoding end signal as a trigger signal, and is output from an output terminal 306 as a change amount of an image on a time axis.

【0037】一方、バッファ残量算出部107は、書き
込まれたデータ量(すなわち、書き込み側メモリアドレ
ス)と読み出されたデータ量(すなわち、読み出し側の
メモリアドレス)との差を求めることによりバッファ残
量を算出し、これを出力する。
On the other hand, the buffer remaining amount calculation unit 107 obtains the difference between the amount of data written (ie, the memory address on the write side) and the amount of data read (ie, the memory address on the read side) to obtain the buffer. Calculate the remaining amount and output this.

【0038】復号制御部108は、これら変化量やバッ
ファ残量と共に、映像復号部105から出力される復号
終了信号を入力し、復号開始命令やデータ出力命令を生
成する。ここで、復号開始命令はバッファメモリ103
からデータを取り込むための命令で、データ出力命令は
復号画像を表示メモリ109に転送し表示するための命
令である。
The decoding control unit 108 inputs the decoding end signal output from the video decoding unit 105 together with the change amount and the remaining buffer amount, and generates a decoding start command and a data output command. Here, the decoding start instruction is stored in the buffer memory 103.
The data output command is a command for transferring the decoded image to the display memory 109 for display.

【0039】以下、図5に基づいて、バッファオーバー
フロー時に実行される復号制御部108の動作を説明す
る。
The operation of the decoding control unit 108 executed when the buffer overflows will be described below with reference to FIG.

【0040】復号制御部108は、比較器404におい
て、前述のバッファ残量算出部107の出力とある閾値
Aとを比較することにより、バッファ残量がある閾値A
を越えているか否かを判別している。ここで、比較器4
04は、バッファ残量が閾値Aを越えると、「H」レベ
ルのアラーム信号を出力し、バッファオーバーフローが
近いことを報知する。例えば、図5の第6フレーム〜第
9フレームの復号処理期間がこの状態に相当する。な
お、閾値Aにはバッファ容量、受信データレート等から
求まる固定値が用いられている。
The decoding control section 108 compares the output of the buffer remaining amount calculation section 107 with a certain threshold value A in the comparator 404, thereby obtaining a threshold value A having a buffer remaining amount.
Is determined. Here, the comparator 4
When the buffer remaining amount exceeds the threshold value A, an alarm signal of “H” level is output to notify that the buffer overflow is near. For example, the decoding processing period of the sixth to ninth frames in FIG. 5 corresponds to this state. Note that a fixed value obtained from the buffer capacity, the reception data rate, and the like is used as the threshold value A.

【0041】また、復号制御部108は、比較器405
において、前述の変化量検出部106の出力とある閾値
Bとを比較することにより、現在処理中の画像が「駒落
し」しても画質劣化の小さな画像か否かを判別してい
る。ここでも、比較器405は、「駒落し」可能な画像
の場合には「H」レベルの信号を出力する。例えば、図
5では、第4フレームと第9フレームの復号処理期間が
この状態を表している。なお、閾値Bには表示画像サイ
ズ等から求まる固定値が用いられている。
Further, the decoding control unit 108 includes a comparator 405
By comparing the output of the change amount detection unit 106 with a certain threshold value B, it is determined whether or not the image currently being processed is an image with small image quality deterioration even if the "frame dropped". Also in this case, the comparator 405 outputs an “H” level signal in the case of an image that can be “dropped frame”. For example, in FIG. 5, the decoding processing periods of the fourth and ninth frames indicate this state. Note that a fixed value obtained from the display image size or the like is used as the threshold value B.

【0042】従って、比較器404の出力が「H」レベ
ルであり、かつ、比較器405の出力が「H」レベルの
とき(すなわち、バッファ残量が閾値Aを越え、かつ、
画像が「駒落し」可能である場合)、その出力が「L」
レベルとなり、「駒落し」が必要であり、かつ、実際に
「駒落し」ができることが後段の回路に報知される。以
後の回路は、この「L」レベルの信号を基準に、「駒落
し」動作を開始する。
Therefore, when the output of the comparator 404 is at the “H” level and the output of the comparator 405 is at the “H” level (that is, the remaining buffer amount exceeds the threshold A, and
If the image can be "dropped", the output is "L"
The level is reached, and it is notified to a subsequent circuit that "dropping out" is required and "dropping out" can be actually performed. Subsequent circuits start the "dropping" operation based on the "L" level signal.

【0043】実際に、「駒落し」を行うには、「駒落
し」を行う画像に対するデータ出力命令をキャンセル
し、「駒落し」画像の代わりに次の画像を表示するため
の復号開始命令を前倒しして出力する必要がある。そこ
で、前者の目的のために用いられるのが、ANDゲート
407である。
Actually, in order to perform "dropout", the data output command for the image to be dropped is canceled, and a decoding start command to display the next image in place of the "dropout" image is issued. It is necessary to output it ahead of time. Therefore, the AND gate 407 is used for the former purpose.

【0044】ANDゲート407では、復号終了信号を
1サイクル遅延させた信号を、NANDゲート406の
出力でマスク(すなわち、AND)することで、データ
出力命令を送出しないようにする。つまり、バッファ残
量が閾値Aを超えた状態で、変化量が閾値B以下の場
合、当該ANDゲート407から映像復号部105に対
しては、映像復号部105から伸長画像が出力されない
ように制御信号が出力される。
The AND gate 407 masks (ie, ANDs) the signal obtained by delaying the decoding end signal by one cycle with the output of the NAND gate 406 so that the data output instruction is not transmitted. That is, if the amount of change is equal to or smaller than the threshold B while the buffer remaining amount exceeds the threshold A, the AND gate 407 controls the video decoding unit 105 so that the decompressed image is not output from the video decoding unit 105. A signal is output.

【0045】一方、後者の目的のためには、シフトレジ
スタ411が用いられる。シフトレジスタ411は、表
示メモリ109へのデータ転送が終了してからに新たな
復号を開始するように、データ転送にかかる時間だけ復
号終了信号を遅延させる働きをする。「駒落し」などが
発生しない場合は、この信号が復号開始命令となる。レ
ジスタ412とNORゲート413では、NANDゲー
ト406出力の立ち下がりエッジを求め、追加すべき復
号開始命令を生成している。ORゲート414では、シ
フトレジスタ411出力の通常の復号開始命令に、NO
Rゲート413出力のパルスを追加している。このよう
にして、前倒しして復号を開始する復号開始命令を生成
している。
On the other hand, a shift register 411 is used for the latter purpose. The shift register 411 functions to delay the decoding end signal by the time required for the data transfer so as to start a new decoding after the data transfer to the display memory 109 is completed. If no “dropped frame” occurs, this signal becomes a decoding start command. The register 412 and the NOR gate 413 find the falling edge of the output of the NAND gate 406 and generate a decoding start instruction to be added. In the OR gate 414, the normal decoding start instruction of the output of the shift register 411 includes NO
A pulse output from the R gate 413 is added. In this way, a decoding start instruction for starting decoding ahead of time is generated.

【0046】以上のように制御することで、バッファ残
量が多くなった時には、表示メモリ109に受信データ
量の少ない1枚の画像が書き込まれないことになり、代
わりに次の画像を復号し表示メモリヘの転送することに
なり、表示の際に「駒落し」となる。
By performing the above control, when the remaining buffer capacity becomes large, one image having a small amount of received data is not written in the display memory 109, and instead, the next image is decoded. The data is transferred to the display memory, and a "frame drop" occurs at the time of display.

【0047】(A−2−3)アンダーフロー時の動作 これに対して、バッファアンダーフローの場合は、同様
の回路によって、復号開始命令に対して「H」パルスが
出ないようにマスクをかけ、1回の復号処理に対しデー
タ出力命令を2回出力することで実現される。
(A-2-3) Operation at the time of underflow On the other hand, in the case of a buffer underflow, the same circuit is masked so as not to output the "H" pulse in response to the decoding start instruction. This is realized by outputting a data output instruction twice for one decoding process.

【0048】(A−3)第1の実施形態の効果 圧縮動画像の伝送において、送信側と受信側のクロック
が独立していると、その速度差に応じて受信バッファの
残量が増減する。PLL回路でクロックを再生すること
で、バッファ残量を一定にすることができるが、伝送路
の遅延変動によっては、PLLがロックしない場合があ
る。この場合、クロックは独立してしまうためバッファ
残量が増減する。ここで、バッファメモリがオーバーフ
ロー又はアンダーフローを起こすと、「駒落し」や「2
度表示」が発生し、表示の乱れが生じる。このような表
示の乱れは、時間軸上での変化の大きい画像では劣化が
目立つが、変化の小さな画像では大きな劣化とはならな
い。
(A-3) Effect of the First Embodiment In transmitting a compressed moving image, if the clocks on the transmitting side and the receiving side are independent, the remaining amount of the receiving buffer increases or decreases according to the speed difference. . Reproduction of the clock by the PLL circuit makes it possible to keep the remaining amount of the buffer constant. However, the PLL may not be locked depending on the delay variation of the transmission line. In this case, the clock becomes independent, so that the remaining buffer capacity increases and decreases. Here, when the buffer memory overflows or underflows, the "frame drop" or "2"
Degree display "occurs, and the display is disturbed. Such display disturbance is noticeable in an image having a large change on the time axis, but is not significant in an image having a small change.

【0049】そこで、上述の構成のデコード装置を用い
る。
Therefore, the decoding device having the above configuration is used.

【0050】図6に、第1の実施形態によってもたらさ
れる効果を説明する。ここでは、受信側のクロック周波
数が送信側のクロック周波数より低く、バッファオ一バ
ーフローを起こす状態を示している。上段はバッファの
状態を示しており、折れ線で示されているバッファ残量
がオーバーフローレベルを超えると、「駒落し」が発生
する。下段は受信画像と表示画像を示している。受信側
クロック周波数が低いため、表示フレーム数は受信フレ
ーム数より低くなっている。
FIG. 6 explains the effect brought about by the first embodiment. Here, a state where the clock frequency of the receiving side is lower than the clock frequency of the transmitting side and a buffer overflow occurs is shown. The upper row shows the state of the buffer. When the remaining amount of the buffer indicated by the polygonal line exceeds the overflow level, "dropping out" occurs. The lower part shows the received image and the display image. Since the receiving side clock frequency is low, the number of display frames is lower than the number of received frames.

【0051】従来方法では、バッファオーバーフローが
発生した時点で「駒落し」が起こることになる。このた
め、図6の受信画像「5」と受信画像「10」で「駒落
し」が起きる。これらの画像はその直前の受信画像
「4」及び「9」との差が大きい。このため、表示画像
では黒丸の動きに不連続な部分が現れ(矢印の部分)、
画質劣化となる。
In the conventional method, "dropping out" occurs when a buffer overflow occurs. For this reason, "dropped frame" occurs in the received image "5" and the received image "10" in FIG. These images have a large difference from the immediately preceding received images “4” and “9”. For this reason, in the display image, a discontinuous portion appears in the movement of the black circle (arrow portion),
Image quality is degraded.

【0052】そこで、第1の実施形態では、上述したよ
うに、バッファ残量が閾値Aを超えている状態で、変化
量が閾値Bより小さい画像を受信すると、これを「駒落
し」するように制御する。すなわち、図6において、受
信画像「3」に対する受信画像「4」の変化量、受信画
像「7」に対する受信画像「8」の変化量が閾値Bより
小さく、この時バッファ残量も閾値Aより大きくなって
いるため、受信画像「4」及び「8」を「駒落し」する
ことになる。その結果、図6に示すような表示画像が得
られ、黒丸の動きに不自然さが現れない。
Therefore, in the first embodiment, as described above, when an image whose change amount is smaller than the threshold value B is received in a state where the buffer remaining amount exceeds the threshold value A, the image is dropped. To control. That is, in FIG. 6, the amount of change of the received image “4” with respect to the received image “3” and the amount of change of the received image “8” with respect to the received image “7” are smaller than the threshold value B. Since the size is large, the received images “4” and “8” are “dropped”. As a result, a display image as shown in FIG. 6 is obtained, and no unnaturalness appears in the movement of the black circle.

【0053】以上のように、第1の実施形態によれば、
変化量検出部106で時間軸上での画像の変化量を、バ
ッファ残量算出部107でバッファの残量を監視し、こ
れらの信号を元に復号制御部108でバッファメモリ1
03のオーバーフロー又はアンダーフローの発生と画像
の変化を推測し、避けられない表示の乱れを時間軸上で
変化の少ない画像に対して行っている。これにより、表
示の乱れが発生した際の視覚的な劣化を抑えることがで
きる。
As described above, according to the first embodiment,
The amount of change of the image on the time axis is monitored by the change amount detection unit 106, the remaining amount of the buffer is monitored by the buffer remaining amount calculation unit 107, and the decoding control unit 108 controls the buffer memory 1 based on these signals.
The occurrence of overflow or underflow of 03 and the change of the image are estimated, and the inevitable display disturbance is performed on the image with little change on the time axis. As a result, it is possible to suppress visual deterioration when display disturbance occurs.

【0054】また、第1の実施形態では、圧縮画像デー
タが通常、画像のフレーム間の差分データを元に作成さ
れていることを利用し、時間軸上での画像の変化を受信
データ量から推測している。このため、図3に示すよう
な簡単な構成で上記効果を得ている。時間軸上での画像
の変化は受信データ量以外からでも知ることができる。
例えば、圧縮画像データを復号する際に得られる動きベ
クトル値、変換係数、さらに復号画像を用いて実際にフ
レーム間差分を求めることが挙げられる。本案施形態で
は、受信データ量を対象に記述しているが、これら他の
方法で画像の変化を推測しても差し差し支えない。
In the first embodiment, the fact that the compressed image data is usually created based on the difference data between the frames of the image is used, and the change of the image on the time axis is calculated from the received data amount. I guess. For this reason, the above effect is obtained with a simple configuration as shown in FIG. The change of the image on the time axis can be known from other than the received data amount.
For example, there is a method of actually calculating an inter-frame difference using a motion vector value, a transform coefficient, and a decoded image obtained when decoding compressed image data. In the embodiment of the present invention, the amount of received data is described as a target. However, changes in an image may be estimated using these other methods.

【0055】(B)第2の実施形態 以下、本発明に係るデコード装置の第2の実施形態を説
明する。
(B) Second Embodiment Hereinafter, a second embodiment of the decoding device according to the present invention will be described.

【0056】(B−1)第2の実施形態の構成 第1の実施形態においては、時間軸上の画像変化情報、
バッファ残量を独立に比較器で閾値と比較して、「駒落
し」等の制御を行っていたが、この第2の実施形態にお
いては、この2種類の情報を一体化して扱い、「駒落
し」等の制御を行う場合について説明する。
(B-1) Configuration of the Second Embodiment In the first embodiment, image change information on the time axis,
The buffer remaining amount is independently compared with a threshold value by a comparator to perform control such as "dropping out frames". In the second embodiment, however, the two types of information are handled integrally and " The case of performing control such as "drop" will be described.

【0057】なお、第2の実施形態の全体構成として
は、第1の実施形態と同じく図1の構成のものを用いる
が、このうち、復号制御部108として異なるものを用
いる。
As the overall configuration of the second embodiment, the configuration shown in FIG. 1 is used as in the first embodiment, but a different configuration is used as the decoding control unit 108.

【0058】図7に第2の実施形態に係る復号制御部1
08の構成を示す。図7は、図4との対応部分に対応符
号を付して示したものであり、比較器404、405及
びNAND406に代えて、ROM704を用いること
を除いて同様の回路部品から構成されている。
FIG. 7 shows a decoding control unit 1 according to the second embodiment.
08 is shown. FIG. 7 shows parts corresponding to those in FIG. 4 with corresponding reference numerals, and is configured by the same circuit components except that a ROM 704 is used instead of the comparators 404 and 405 and the NAND 406. .

【0059】ここで、ROM704は、バッファ残量と
変化量に応じて定まる制御情報を格納しており、2つの
量関係に応じた適応的な「駒落し」制御を実現できるよ
うになっている。例えば、バッファ残量が多い場合には
変化量が比較的大きいときに「駒落し」が実行されるよ
うにし、バッファ残量が少ない場合には変化量が極めて
小さくても「駒落し」が実行されるようになっている。
なお、この図7は、図4の場合と同じく、オーバーフロ
ーに対する制御部分のみ表したもので、アンダーフロー
に対しては同様の回路が別に必要になる。
Here, the ROM 704 stores control information determined according to the remaining amount of the buffer and the amount of change, so that adaptive "drop-out" control according to the relationship between the two amounts can be realized. . For example, when the remaining buffer amount is large, "dropout" is executed when the change amount is relatively large, and when the buffer amount is small, "dropout" is executed even when the change amount is extremely small. It is supposed to be.
Note that FIG. 7 shows only the control part for the overflow as in the case of FIG. 4, and a similar circuit is separately required for the underflow.

【0060】因みに、図7に示す復号制御部108は、
バッファ残量の入力端子701、時間軸上の画像の変化
量の入力端子702、復号終了信号の入力端子703、
バッファ残量と変化量を入力とするROM704、レジ
スタ708の出力とROM704の出力を入力とするA
NDゲート707、復号終了信号をクロック1サイクル
分遅延させるレジスタ708、ROM704の出力を復
号終了信号でホールドするレジスタ709、レジスタ7
08及び709の出力を入力とするANDゲート71
0、ANDゲート710の出力を遅延させるシフトレジ
スタ711、ROM704の出力をクロック1サイクル
分遅延させるレジスタ712、ROM704の出力とレ
ジスタ712の反転出力を入力とするNORゲート71
3、NORゲート713の出力とシフトレジスタ711
の出力を入力とするORゲート714、データ出力命令
の出力端子715、復号開始命令の出力端子716から
なる。
Incidentally, the decoding control unit 108 shown in FIG.
A buffer remaining input terminal 701, an image change amount input terminal 702 on the time axis, a decoding end signal input terminal 703,
ROM 704 that inputs the remaining buffer and the amount of change, A that receives the output of register 708 and the output of ROM 704
ND gate 707, register 708 for delaying the decoding end signal by one clock cycle, register 709 for holding the output of ROM 704 with the decoding end signal, register 7
AND gate 71 which receives the outputs of 08 and 709 as inputs
0, a shift register 711 that delays the output of the AND gate 710, a register 712 that delays the output of the ROM 704 by one clock cycle, and a NOR gate 71 that receives the output of the ROM 704 and the inverted output of the register 712 as inputs.
3. The output of the NOR gate 713 and the shift register 711
An OR gate 714 that receives the output of the data input, an output terminal 715 for a data output instruction, and an output terminal 716 for a decoding start instruction.

【0061】(B−2)第2の実施形態の動作 第2の実施形態における基本的な動作については、第1
の実施形態の場合と同様である。従って、ここでは、回
路構成を異にする復号制御部108の動作についてのみ
説明する。
(B-2) Operation of the Second Embodiment The basic operation of the second embodiment is described in the first embodiment.
This is the same as the embodiment. Therefore, here, only the operation of the decoding control unit 108 having a different circuit configuration will be described.

【0062】第2の実施形態においても、復号制御部1
08は、変化量とバッファ残量及び復号終了信号から復
号開始命令とデータ出力命令を生成する。このために設
けられた第2の実施形態に特有の回路ブロックがROM
704であり、このROM704において、変化量とバ
ッファ残量から「駒落し」を発生させるための元信号を
生成する。
Also in the second embodiment, the decoding control unit 1
08 generates a decoding start command and a data output command from the change amount, the remaining buffer amount, and the decoding end signal. A circuit block specific to the second embodiment provided for this purpose is a ROM block.
The ROM 704 generates an original signal for generating “dropped frame” from the amount of change and the remaining amount of the buffer.

【0063】この信号が「L」レベルの時に「駒落し」
が起こる。ANDゲート707では、この信号で復号終
了信号を1サイクル遅延させた信号をマスク(AND)
することで、データ出力命令を送出しないようにしてい
る。ANDゲート710では、この信号を1復号周期遅
延させた信号で復号終了信号を1サイクル遅延させた信
号をマスク(AND)している。
When this signal is at the "L" level, a "frame drop"
Happens. The AND gate 707 masks a signal obtained by delaying the decoding end signal by one cycle with this signal (AND)
By doing so, the data output instruction is not sent. The AND gate 710 masks (AND) a signal obtained by delaying the decoding end signal by one cycle with a signal obtained by delaying this signal by one decoding cycle.

【0064】シフトレジスタ711は、表示メモリ10
9へのデータ転送が終了してから新たな復号を開始する
ように、データ転送にかかる時間復号終了信号を遅延さ
せる働きをする。レジスタ712とNORゲート713
では、ROM704の出力の立ち下がりエッジを求め、
ORゲート714では、シフトレジスタ709の出力に
新たなパルスを追加し復号開始命令を生成している。
The shift register 711 includes the display memory 10
The operation of delaying the decoding end signal for the time required for the data transfer so that a new decoding is started after the data transfer to the N.9 is completed. Register 712 and NOR gate 713
Now, find the falling edge of the output of the ROM 704,
The OR gate 714 adds a new pulse to the output of the shift register 709 to generate a decoding start instruction.

【0065】このように、第2の実施形態では、ROM
704において変化量とバッファ残量の関係から「駒落
し」の制御を行っている点が特徴となる。この構成にす
ることで、バッファ残量に対し適応的に「駒落し」フレ
ームを決定することができる。例えば、バッファ残量が
比較的小さい段階では変化量が極めて小さくても「駒落
し」が行われ、バッファ残量が大きい段階では変化量が
比較的大きくても「駒落し」が実行される。
As described above, in the second embodiment, the ROM
It is characterized in that the control of “dropped frames” is performed in 704 based on the relationship between the change amount and the remaining buffer amount. With this configuration, it is possible to adaptively determine the "dropped frame" for the remaining buffer amount. For example, at the stage where the remaining buffer amount is relatively small, "dropout" is performed even if the amount of change is extremely small, and at the stage where the remaining buffer amount is large, "dropout" is executed even when the change amount is relatively large.

【0066】(B−3)第2の実施形態の効果 以上のように、第2の実施例によれば、復号制御部10
8においてバッファ残量と変化量の双方の任意の関係か
ら適応的に「駒落し」等の制御を行うようにしたことに
より、画質劣化が視覚的に目立ちやすい静止画像である
か視覚的に目立ち難い動画像であるかに基づいて「駒落
し」の実行基準を設定することも可能となる。例えば、
静止画像に近い画像では、かなり小さい画像の変化でも
「駒落し」が実行されるようにすることにより、視覚的
な劣化をより一段と目立たないようにすることができ
る。
(B-3) Effect of Second Embodiment As described above, according to the second embodiment, the decoding control unit 10
8, the control such as “dropping frames” is adaptively performed based on an arbitrary relationship between both the remaining buffer amount and the change amount, so that the image quality degradation is a visually noticeable still image or visually noticeable. It is also possible to set an execution reference for “dropping frames” based on whether the moving image is difficult. For example,
In the case of an image that is close to a still image, even if the change of the image is very small, “dropout” is executed, so that the visual deterioration can be made less noticeable.

【0067】(C)他の実施形態 なお、上述の実施形態においては、伝送路を介して圧縮
画像データが伝送されてくる場合について述べたが、こ
れに限らず、圧縮されていない画像データを受信する場
合にも適用し得る。
(C) Other Embodiments In the above embodiment, the case where the compressed image data is transmitted via the transmission path has been described. However, the present invention is not limited to this. It can be applied to the case of receiving.

【0068】また、上述の実施形態においては、動画像
を伝送する場合について述べたが、符号化された静止画
を復号化する場合にも適用し得る。
In the above-described embodiment, the case where a moving image is transmitted has been described. However, the present invention can be applied to a case where an encoded still image is decoded.

【0069】[0069]

【発明の効果】上述のように、本発明によれば、受信画
像データを一時的に蓄積する受信バッファと、当該受信
バッファより読み出した受信画像データを送信側のクロ
ックと異なるクロックにより復号する復号化手段とを備
える伝送画像復号装置において、受信画像データの一部
の廃棄又は再表示の必要が生じた場合、時間軸上の変化
量が少ない受信画像データを選択的に廃棄又は再表示す
るようにしたことにより、当該処理実行時における表示
画面の視覚特性が劣化しないようにできる。
As described above, according to the present invention, a receiving buffer for temporarily storing received image data and a decoding for decoding the received image data read from the receiving buffer with a clock different from the clock on the transmitting side. When it is necessary to discard or redisplay a part of the received image data in the transmission image decoding apparatus including the decoding means, the received image data having a small amount of change on the time axis is selectively discarded or redisplayed. By doing so, it is possible to prevent the visual characteristics of the display screen from deteriorating during the execution of the processing.

【図面の簡単な説明】[Brief description of the drawings]

【図1】伝送画像復号装置の一実施形態を示すブロック
図である。
FIG. 1 is a block diagram illustrating an embodiment of a transmission image decoding device.

【図2】従来用いられている伝送画像復号装置の構成を
示すブロック図である。
FIG. 2 is a block diagram illustrating a configuration of a conventionally used transmission image decoding device.

【図3】図1の変化量検出部の構成を示すブロック図で
ある。
FIG. 3 is a block diagram illustrating a configuration of a change amount detection unit in FIG. 1;

【図4】第1の実施形態に係る復号制御部の構成を示す
ブロック図である。
FIG. 4 is a block diagram illustrating a configuration of a decoding control unit according to the first embodiment.

【図5】図1内における各部の動作関係を示すタイムチ
ャートである。
FIG. 5 is a time chart showing an operation relationship of each unit in FIG. 1;

【図6】バッファ残量と表示画像の関係を表した説明図
である。
FIG. 6 is an explanatory diagram showing a relationship between a buffer remaining amount and a display image.

【図7】第2の実施形態に係る復号制御部の構成を示す
ブロック図である。
FIG. 7 is a block diagram illustrating a configuration of a decoding control unit according to a second embodiment.

【符号の説明】[Explanation of symbols]

102…同期分離部、103…バッファメモリ、104
…PLL部、105…映像復号部、106…変化量検出
部、107…バッファ残量算出部、108…復号制御
部、109…表示メモリ、404、405…比較器、4
06…NANDゲート、704…ROM。
102: synchronization separation unit; 103: buffer memory; 104
... PLL unit, 105 ... Video decoding unit, 106 ... Change amount detection unit, 107 ... Buffer remaining amount calculation unit, 108 ... Decoding control unit, 109 ... Display memory, 404, 405 ... Comparator, 4
06 ... NAND gate, 704 ... ROM.

Claims (4)

【特許請求の範囲】[Claims] 【請求項1】 受信画像データを一時的に蓄積する受信
バッファと、当該受信バッファより読み出した受信画像
データを送信側のクロックと異なるクロックにより復号
する復号化手段とを備える伝送画像復号装置において、 上記受信画像データにおける時間軸上の変化量を監視す
る変化量監視手段と、 上記受信画像データの一部について廃棄又は再表示の必
要が生じた場合、上記変化量監視手段の検出結果に基づ
いて、時間軸上の変化量が少ない受信画像データを選択
的に廃棄又は再表示させるよう上記復号化手段を制御す
る復号制御手段とを備えたことを特徴とする伝送画像復
号装置。
1. A transmission image decoding apparatus comprising: a reception buffer that temporarily stores received image data; and a decoding unit that decodes the received image data read from the reception buffer using a clock different from a clock on a transmission side. A change amount monitoring means for monitoring a change amount on the time axis in the received image data; and when it becomes necessary to discard or redisplay a part of the received image data, based on a detection result of the change amount monitoring means. And a decoding control means for controlling the decoding means so as to selectively discard or redisplay received image data having a small amount of change on the time axis.
【請求項2】 上記受信バッファのデータ残量を監視す
るデータ残量監視手段を備え、上記復号制御手段は、上
記変化量監視手段及びデータ残量監視手段の監視結果に
基づいて、上記受信画像データの廃棄又は再表示の必要
性を判定することを特徴とする請求項1に記載の伝送画
像復号装置。
2. The apparatus according to claim 1, further comprising: a data remaining amount monitoring unit that monitors a data remaining amount of the reception buffer, wherein the decoding control unit determines the received image based on a monitoring result of the change amount monitoring unit and the data remaining amount monitoring unit. 2. The transmission image decoding apparatus according to claim 1, wherein the necessity of discarding or redisplaying the data is determined.
【請求項3】 上記変化量監視手段は、時間軸上での画
像の変化量を、受信画像データのデータ量から算出する
ことを特徴とする請求項1又は2に記載の伝送画像復号
装置。
3. The transmission image decoding apparatus according to claim 1, wherein the change amount monitoring unit calculates a change amount of the image on the time axis from a data amount of the received image data.
【請求項4】 上記復号制御手段は、バッファ残量及び
変化量の任意の組み合わせのそれぞれについての制御情
報を制御情報記憶手段に格納していることを特徴をする
請求項1〜3のいずれかに記載の伝送画像復号装置。
4. The decoding control means according to claim 1, wherein said decoding control means stores control information for each of an arbitrary combination of a buffer remaining amount and a change amount in a control information storage means. 3. The transmission image decoding device according to item 1.
JP823697A 1997-01-21 1997-01-21 Transmission image decoding device Expired - Fee Related JP3969776B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP823697A JP3969776B2 (en) 1997-01-21 1997-01-21 Transmission image decoding device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP823697A JP3969776B2 (en) 1997-01-21 1997-01-21 Transmission image decoding device

Publications (2)

Publication Number Publication Date
JPH10210464A true JPH10210464A (en) 1998-08-07
JP3969776B2 JP3969776B2 (en) 2007-09-05

Family

ID=11687525

Family Applications (1)

Application Number Title Priority Date Filing Date
JP823697A Expired - Fee Related JP3969776B2 (en) 1997-01-21 1997-01-21 Transmission image decoding device

Country Status (1)

Country Link
JP (1) JP3969776B2 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6717535B2 (en) 2001-05-11 2004-04-06 Nec Corporation System and method for preventing input of variable length codes from being interrupted
JP2007274521A (en) * 2006-03-31 2007-10-18 Sanyo Electric Co Ltd Output controller
JP2010288028A (en) * 2009-06-10 2010-12-24 Nec Casio Mobile Communications Ltd Moving picture stream processing apparatus and moving picture stream processing program
JP2013232801A (en) * 2012-04-27 2013-11-14 Fujitsu Ltd Moving image encoding device, moving image encoding method, moving image decoding device, and moving image decoding method
JP2016129420A (en) * 2016-03-07 2016-07-14 富士通株式会社 Device and method for decoding moving image
JP2016129418A (en) * 2016-03-07 2016-07-14 富士通株式会社 Device and method for decoding moving image
JP2016129419A (en) * 2016-03-07 2016-07-14 富士通株式会社 Device and method for decoding moving image
JP2016146645A (en) * 2016-03-07 2016-08-12 富士通株式会社 Moving picture coding and decoding system and moving picture coding and decoding method

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6717535B2 (en) 2001-05-11 2004-04-06 Nec Corporation System and method for preventing input of variable length codes from being interrupted
JP2007274521A (en) * 2006-03-31 2007-10-18 Sanyo Electric Co Ltd Output controller
JP2010288028A (en) * 2009-06-10 2010-12-24 Nec Casio Mobile Communications Ltd Moving picture stream processing apparatus and moving picture stream processing program
JP2013232801A (en) * 2012-04-27 2013-11-14 Fujitsu Ltd Moving image encoding device, moving image encoding method, moving image decoding device, and moving image decoding method
JP2016129420A (en) * 2016-03-07 2016-07-14 富士通株式会社 Device and method for decoding moving image
JP2016129418A (en) * 2016-03-07 2016-07-14 富士通株式会社 Device and method for decoding moving image
JP2016129419A (en) * 2016-03-07 2016-07-14 富士通株式会社 Device and method for decoding moving image
JP2016146645A (en) * 2016-03-07 2016-08-12 富士通株式会社 Moving picture coding and decoding system and moving picture coding and decoding method

Also Published As

Publication number Publication date
JP3969776B2 (en) 2007-09-05

Similar Documents

Publication Publication Date Title
US6317165B1 (en) System and method for selective capture of video frames
US6031584A (en) Method for reducing digital video frame frequency while maintaining temporal smoothness
US6803964B1 (en) Method and apparatus for processing digital data
KR100298958B1 (en) Synchronization arrangement for a compressed video signal
US20070019739A1 (en) Video and audio reproducing apparatus and video and audio reproducing method for reproducing video images and sound based on video and audio streams
US7865021B2 (en) Compressed stream decoding apparatus and method
US8134644B2 (en) Audio synchronizer control and communications method and apparatus
US6670996B2 (en) Apparatus and method for display of progressive and interland video content
KR100981378B1 (en) Device and process for the read-synchronization of video data and of ancillary data and associated products
US9654812B2 (en) Encoding apparatus and the method
US20100220781A1 (en) Moving picture decoding apparatus
US7327789B2 (en) Decoding apparatus, decoding method, decoding program, and decoding program storage medium
JPH10210464A (en) Sent image, decoding device
US6728312B1 (en) Adaptive video decoding and rendering with respect to processor congestion
WO2008017227A1 (en) A method, apparatus for realizing frame frequency conversion
KR20140018235A (en) Mechanism for clock recovery for streaming content being communicated over a packetized communication network
US6751404B1 (en) Method and apparatus for detecting processor congestion during audio and video decode
JP3025447B2 (en) Video data decoder and decoding method
US20100097521A1 (en) Video-signal processing apparatus, video-signal processing method, video-signal processing computer program, and video-signal control circuit
WO2022179681A1 (en) Method for operating a display device of a vehicle for displaying video frames of a video stream at a predefined frame rate and corresponding display device and vehicle
US8768150B2 (en) Method and system for trick mode support in a motion adaptive deinterlacer with inverse telecine
US5724476A (en) Method and apparatus for extending and reproducing compressed moving pictures
US8237859B2 (en) Method for video conversion of video stream and apparatus thereof
US8681879B2 (en) Method and apparatus for displaying video data
JP2001231035A (en) Decoding synchronous controller, decoder, and decode synchronization control method

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040210

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040409

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20050111

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050307

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070508

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070605

R150 Certificate of patent (=grant) or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100615

Year of fee payment: 3

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110615

Year of fee payment: 4

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110615

Year of fee payment: 4

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120615

Year of fee payment: 5

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130615

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees