JPH10234045A - Time-varying image communication equipment - Google Patents

Time-varying image communication equipment

Info

Publication number
JPH10234045A
JPH10234045A JP3768797A JP3768797A JPH10234045A JP H10234045 A JPH10234045 A JP H10234045A JP 3768797 A JP3768797 A JP 3768797A JP 3768797 A JP3768797 A JP 3768797A JP H10234045 A JPH10234045 A JP H10234045A
Authority
JP
Japan
Prior art keywords
data
image
reference image
moving image
error
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP3768797A
Other languages
Japanese (ja)
Inventor
Takashi Nishi
敬 西
Masahito Nonaka
雅人 野中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP3768797A priority Critical patent/JPH10234045A/en
Publication of JPH10234045A publication Critical patent/JPH10234045A/en
Withdrawn legal-status Critical Current

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide the time-varying image communication equipment in which a delay of transmission is prevented by suppressing increased capacity of a standby buffer due to a long re-transmission wait time, lot of code bit amount is assigned to realize improved image quality and a coded type is accurately detected. SOLUTION: A time-varying image decoder 100 is provided with a coding type detection section 112 that detects a coding type, a reference image discrimination section 113 that discriminates whether or not the data received in error based on the coded type are a reference image of data correctly received, and a re-transmission request discrimination section 110 that discriminates whether or not a retransmission request is made based on an output of the reference image discrimination section 113. Then the reference image discrimination section 113 discriminates whether or not erroneous image data are a reference image of succeeding image, and when the data are used for the reference image, since it gives effects on the succeeding image, re-transmission request is made. When the data are not used for the reference image, since it gives no effects on the succeeding image, no re-transmission request is made.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、動画像圧縮におけ
る動画像通信装置に係り、詳細には、誤りのある通信路
で用いられる動画像通信装置、特に、誤りの訂正をAR
Q(Automatic Repeat Request)と呼ばれる方法で行う
動画像通信装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a moving image communication apparatus for moving image compression, and more particularly, to a moving image communication apparatus used in a communication path having an error, and more particularly, to an AR apparatus for correcting an error.
The present invention relates to a moving image communication device performed by a method called Q (Automatic Repeat Request).

【0002】[0002]

【従来の技術】画像圧縮の国際標準としてJPEG(Jo
int Photograghic Expert Group)やMPEG(Moving
Picture Expert Group)がある。
2. Description of the Related Art JPEG (Jo
int Photograghic Expert Group) or MPEG (Moving
Picture Expert Group).

【0003】MPEGの特徴は、DCT(Discrete Cos
ine Transform:離散コサイン変換)による静止画像圧
縮に加えて、時間軸方向の圧縮のためのフレーム間予測
処理を行なうことである。また動画像圧縮の前提条件と
してフレームのランダム・アクセスができること、早送
りによる再生や巻戻し再生(逆方向)ができることがあ
げられている。
[0003] MPEG is characterized by DCT (Discrete Cos
ine Transform: Performs inter-frame prediction processing for compression in the time axis direction in addition to still image compression by discrete cosine transform. As prerequisites for moving image compression, it is mentioned that random access to frames can be performed, and reproduction by fast forward and rewind reproduction (reverse direction) can be performed.

【0004】また、MPEGでは、早送り、巻き戻し、
途中からの再生が基本となっているため、ある単位の動
画像をまとめてGOP(Group of Pictures )を形成
し、その単位での独立再生ができるようにしている。上
記GOP内の画面の予測構造として、動画のフレームを
意味する1枚1枚の画像(ピクチャ)、I、B、Pピク
チャを用いる。
In MPEG, fast forward, rewind,
Since playback from the middle is fundamental, moving pictures of a certain unit are collectively formed to form a GOP (Group of Pictures) so that independent playback can be performed in that unit. As a predictive structure of a screen in the GOP, individual pictures (pictures), I, B, and P pictures, which mean frames of a moving image, are used.

【0005】上記ピクチャは、符号化される方式に従っ
て以下のタイプに分類される。
[0005] The pictures are classified into the following types according to the encoding method.

【0006】(1)Iピクチャ(Intra-coded picture:イ
ントラ符号化画像) 符号化されるときその画像1枚の中だけで閉じた情報の
みを使う。換言すれば、復号するときIピクチャ自身の
情報のみで画像が再構成できる。実際には、他の画像と
の差分をとらずそのままDCTして符号化する。この符
号化方式は、一般に効率が悪いが、これを随所に入れて
Iピクチャだけを復号すればランダムアクセスや高速再
生が可能となる。さらに、Iピクチャを復号してメモリ
に蓄え、逆方向に読み出すことを繰り返せば逆転再生を
も可能となる。
(1) I-picture (Intra-coded picture) When coding, only closed information in one picture is used. In other words, when decoding, an image can be reconstructed using only the information of the I picture itself. In practice, DCT is coded without any difference from other images. Although this encoding method is generally inefficient, random insertion and high-speed reproduction can be achieved by decoding the I picture only by putting it anywhere. Further, if the I picture is decoded, stored in the memory, and read in the reverse direction, reverse reproduction can be performed.

【0007】(2)Pピクチャ(Predictive-coded pictur
e:前方予測符号化画像) Pピクチャは、予測画像(差分をとる基準となる画像)
として、入力で時間的に前に位置し既に復号されたIピ
クチャまたはPピクチャを使う。実際には動き補償され
た予測画像との差を符号化するか差分をとらずに符号化
する(イントラ符号化)か効率のよい方をマクロブロッ
ク単位で選択できる。
(2) P picture (Predictive-coded pictur)
e: forward prediction coded image) P picture is a prediction image (a reference image for taking a difference)
Use an I-picture or a P-picture which is located earlier in time at the input and has already been decoded. In practice, it is possible to select, on a macroblock-by-macroblock basis, whether to encode the difference from the motion-compensated predicted image or to encode without taking the difference (intra encoding).

【0008】(3)Bピクチャ(Bidirectionally predict
ive-coded picture:両方向予測符号化画像) Bピクチャは、予測画像として時間的に前に位置し既に
復号されIピクチャまたはPピクチャ、時間的に後ろに
位置するすでに復号されたIピクチャまたはPピクチ
ャ、及びその両方から作られた補間画像の3種類を使
う。ここで、補間フレームの場合は両方向から予測を行
うが、動き補償の予測モードは大きく分類して3つあ
る。過去から現在を予測する順方向動き補償、未来から
現在を予測する逆方向動き補償、過去と未来の両方から
現在を予測する補間動き補償である。上記順方向動き補
償と逆方向動き補償とは、一つの参照フレームから読み
出したブロックとマッチングをとるという点で、通常の
動き補償(MC)と同じ処理である。また、上記補間動
き補償は、2つの参照フレームから読み出したブロック
を、現在のフレームと参照フレームとの時間距離を考慮
した重みづけをして合成し、予測信号を得るものであ
る。
(3) B picture (Bidirectionally predict
ive-coded picture: bidirectional predictive coded image) A B picture is a temporally preceding I-picture or P-picture that is located earlier in time as a predicted picture, and an already-decoded I-picture or P-picture that is located later in time. , And interpolated images made from both. Here, in the case of an interpolation frame, prediction is performed from both directions, but there are three types of motion compensation prediction modes which are roughly classified. These are forward motion compensation for predicting the present from the past, backward motion compensation for predicting the present from the future, and interpolation motion compensation for predicting the present from both the past and the future. The forward motion compensation and the backward motion compensation are the same processes as ordinary motion compensation (MC) in that matching is performed with a block read from one reference frame. In addition, the interpolation motion compensation is to obtain a prediction signal by combining blocks read from two reference frames by weighting in consideration of the time distance between the current frame and the reference frame.

【0009】上記3種類の動き補償後の差分の符号化と
イントラ符号化の中で一番効率のよいものをマクロブロ
ック単位に選択できる。
The most efficient one of the three types of difference coding and intra coding after motion compensation can be selected for each macroblock.

【0010】そして、GOPにおいて、Bピクチャを符
号化または復号するには、その予測画像となる時間的に
は後方にあるIピクチャまたはPピクチャが先に符号化
されていなくてはならないため、GOPを構成するには
Iピクチャ、Pピクチャ、Bピクチャは所定の順序が必
要であるが、Iピクチャの間隔、及びPピクチャの間隔
は自由でGOPの内部でも変わってもよい。
[0010] In order to encode or decode a B picture in a GOP, an I picture or a P picture which is a temporally backward prediction picture must be coded first. A predetermined order is necessary for the I picture, the P picture, and the B picture in order to construct the formula. However, the interval between the I pictures and the interval between the P pictures are free and may be changed inside the GOP.

【0011】従来のこの種の動画像復号装置としては、
例えば、特願平7−98645号「動画像データ伝送装
置」に開示されたものがある。
As a conventional moving picture decoding apparatus of this type,
For example, there is one disclosed in Japanese Patent Application No. 7-98645 “Moving image data transmission device”.

【0012】上記公報に記載されているように、動画像
を符号化する方法として「フレーム内符号化」、「フレ
ーム間符号化」、及び「双方向符号化」を行い、そのデ
ータと符号化タイプを通信する装置において、誤りが発
生したときは「フレーム内符号化」されたフレームのみ
を再送要求する。
As described in the above publication, "intra-frame encoding", "inter-frame encoding", and "bidirectional encoding" are performed as a method of encoding a moving image, and the data and encoding are performed. In the type communication device, when an error occurs, a retransmission request is made only for an "intra-coded" frame.

【0013】誤りのある環境で正しいデータを確実に伝
送するために、ARQ(AutomaticRepeat Request)と
呼ばれる方法を用いる場合がある。ARQは、誤り検出
とデータの再送で実現される。送信側では、送るべきデ
ータ(符号化ビット列)をフレームと呼ばれる単位に分
割し、フレーム単位にCRC(Cyclic Redundancy Chec
k:巡回冗長検査符号)等の誤り検出符号とフレームの番
号を付加して送出する。受信側では、誤り検出符号を用
いて受けたフレームに誤りがあるか否かを調べる。誤り
がない場合はデータを処理部に渡し、誤りがあった場合
はそのフレームの番号を送信測に通知し同じフレームを
再度伝送するように要求する。送信側は、再送要求(A
RQ信号)を受けて、同じフレームを再度伝送する。こ
のような仕組みにより、誤りのある伝送路でも正確にデ
ータを伝送できるようになる。
In order to reliably transmit correct data in an erroneous environment, a method called ARQ (Automatic Repeat Request) may be used. ARQ is realized by error detection and data retransmission. On the transmitting side, data to be transmitted (encoded bit string) is divided into units called frames, and CRC (Cyclic Redundancy Check) is performed in frame units.
k: Cyclic redundancy check code) and an error detection code and a frame number are transmitted. The receiving side checks whether or not the received frame has an error using the error detection code. If there is no error, the data is passed to the processing unit. If there is an error, the frame number is notified to the transmission measurement and a request is made to transmit the same frame again. The transmitting side transmits a retransmission request (A
RQ signal), and transmits the same frame again. With such a mechanism, data can be transmitted accurately even on an erroneous transmission path.

【0014】図7はΑRQ機能を有する従来例の動画像
復号装置の構成を示すブロック図である。図中、実線は
データの流れを、また破線は制御信号を示す。
FIG. 7 is a block diagram showing the configuration of a conventional moving picture decoding apparatus having a ΑRQ function. In the figure, a solid line indicates a data flow, and a broken line indicates a control signal.

【0015】図7において、動画像復号装置は、多重化
信号が入力される多重化ビット列入力端子101、入力
された多重化ビット列信号を貯めておく多重化ビット列
受信バッファ102、多重化信号を分離し、各メディア
の信号に分けるシステム多重復号器103、分離された
信号(ここでは画像のみ)を待機させる待機バッファ1
05、侍機バッファ105にデータを書き込むかどうか
の制御を行うデータ書込み制御部104、入力された画
像データを復号する動画像復号部107、システム多重
復号器103の出力と待機バッファ105の出力のどち
らを動画像復号部107に入力するかを切替えるセレク
タ106、セレクタ106の制御を行うデータ入力制御
部109、動画像復号部107の結果を出力する画像信
号出力端子108、再送要求を出すかどうかを判断する
再送要求判断部110、再送要求信号を出力する再送要
求出力端子111、及び入力された画像データの符号化
タイプを検出する符号化タイプ検出部112から構成さ
れる。
In FIG. 7, a moving picture decoding apparatus includes a multiplexed bit stream input terminal 101 to which a multiplexed signal is input, a multiplexed bit stream receiving buffer 102 for storing the input multiplexed bit stream signal, and a separation of the multiplexed signal. And a system multiplex decoder 103 for dividing the signals into signals of respective media, and a standby buffer 1 for holding a separated signal (here, only an image).
05, a data write control unit 104 for controlling whether data is written to the samurai machine buffer 105, a video decoding unit 107 for decoding input image data, an output of the system multiplex decoder 103 and an output of the standby buffer 105 A selector 106 for switching which is input to the video decoding unit 107, a data input control unit 109 for controlling the selector 106, an image signal output terminal 108 for outputting the result of the video decoding unit 107, and whether to issue a retransmission request , A retransmission request output terminal 111 that outputs a retransmission request signal, and an encoding type detection unit 112 that detects the encoding type of the input image data.

【0016】上記動画像復号装置は、ARQ機能のため
に、通常の動画像復号装置に、再送要求判断部110及
び再送要求出力端子111が追加されている。
In the moving picture decoding apparatus, a retransmission request determining unit 110 and a retransmission request output terminal 111 are added to a normal moving picture decoding apparatus for an ARQ function.

【0017】以上の構成において、上記符号化タイプ検
出部112で検出された符号化タイプとシステム多重復
号器113の出力であるSN(Sequence Number)とC
RC符号チェックの結果を再送要求判断部110に入力
し、CRCチェックの結果がエラーである、つまりデー
タが誤った場合に符号化タイプが「フレーム内符号化」
であればSNとともに再送要求信号出力端子111より
再送要求信号を出す。
In the above configuration, the coding type detected by the coding type detecting section 112, the SN (Sequence Number) output from the system multiplex decoder 113, and C
The result of the RC code check is input to the retransmission request determination unit 110, and if the result of the CRC check is an error, that is, if the data is erroneous, the coding type is “intra-frame coding”.
If so, a retransmission request signal is output from the retransmission request signal output terminal 111 together with the SN.

【0018】[0018]

【発明が解決しようとする課題】しかしながら、このよ
うな従来のARQ機能を備えた動画像復号装置にあって
は、上記方法で再送要求を行うと以下のような問題があ
ることが判明した。
However, it has been found that such a conventional moving picture decoding apparatus having an ARQ function has the following problems when a retransmission request is made by the above method.

【0019】すなわち、「フレーム内符号化」された画
像が次の画像の参照画像となっていない場合に符号化効
率の低下となる。
That is, the coding efficiency is reduced when the "intra-frame coded" image is not the reference image of the next image.

【0020】また、「フレーム間符号化」された画像も
次の画像の参照画像となる場合があり、その場合に再送
要求をしないと画質が劣化する。
Also, an image subjected to "inter-frame encoding" may be used as a reference image for the next image. In this case, the image quality is degraded unless a retransmission request is made.

【0021】また、符号化タイプが誤っている場合もあ
るので、誤りのあるフレームから符号化タイプを正しく
指定できず、その時に正しい制御ができない。
Further, since the coding type may be incorrect, the coding type cannot be specified correctly from the frame having the error, and correct control cannot be performed at that time.

【0022】本発明は、再送待ち時間が長いことによる
待機バッファの増大を抑えて遅延を防ぐとともに、符号
化ビット量を多く割り当てて画質の向上が実現でき、符
号化タイプの検出を正確に行うことができる動画像通信
装置を提供することを目的とする。
The present invention suppresses an increase in the waiting buffer due to a long retransmission waiting time, prevents delay, improves the image quality by allocating a large amount of coding bits, and accurately detects the coding type. It is an object of the present invention to provide a moving image communication device capable of performing the above.

【0023】[0023]

【課題を解決するための手段】本発明に係る動画像通信
装置は、入カデータに誤りがあった場合に再送する機能
を持つ動画像通信装置において、符号化タイプを検出す
る符号化タイプ検出手段と、符号化タイプ情報に基づい
て誤って受信したデータが正しく受信したデータの参照
画像となっているか否かを判断する参照画像判断手段
と、参照画像判断手段の出力に基づいて再送要求をする
かどうかの判断を行う再送要求判断手段とを備えて構成
する。
SUMMARY OF THE INVENTION A moving picture communication apparatus according to the present invention is a moving picture communication apparatus having a function of retransmitting when input data has an error. And a reference image determining means for determining whether or not the erroneously received data is a reference image of the correctly received data based on the encoding type information, and a retransmission request based on the output of the reference image determining means And a retransmission request judging means for judging whether the retransmission is required.

【0024】上記動画像通信装置は、シーケンスナンバ
ーを格納するシーケンスナンバー格納手段と、エラー処
理結果を格納するエラー格納手段とを備え、参照画像判
断手段は、シーケンスナンバー及びエラー処理結果に基
づいて誤って受信したデータが一つ後に正しく受信した
データの参照画像となっているか否かを判断をするもの
であってもよい。
The above moving picture communication apparatus comprises a sequence number storing means for storing a sequence number, and an error storing means for storing an error processing result, and the reference image judging means detects an error based on the sequence number and the error processing result. It may be determined whether or not the received data is a reference image of the data received correctly one time later.

【0025】上記動画像通信装置は、シーケンスナンバ
ーを複数格納するシーケンスナンバー格納手段と、エラ
ー処理結果を複数格納するエラー格納手段とを備え、参
照画像判断手段は、複数のシーケンスナンバー及び複数
のエラー処理結果に基づいて誤って受信したデータが前
後に正しく受信したデータの参照画像となっているか否
か判断をするものであってもよい。
The above moving picture communication apparatus comprises a sequence number storing means for storing a plurality of sequence numbers, and an error storing means for storing a plurality of error processing results, wherein the reference image determining means includes a plurality of sequence numbers and a plurality of error numbers. Based on the processing result, it may be determined whether or not the erroneously received data is a reference image of the data received correctly before and after.

【0026】上記動画像通信装置は、動画像データを復
号する動画像復号手段を備え、参照画像判断手段による
参照画像判断後、動画像データを復号するものであって
もよい。
The moving image communication apparatus may include moving image decoding means for decoding moving image data, and decode the moving image data after the reference image is determined by the reference image determining means.

【0027】上記符号化タイプ検出手段は、画像データ
を復号する際に検出した符号化タイプを、符号化タイプ
検出情報として出力するようにしてもよい。
The encoding type detection means may output the encoding type detected when decoding the image data as encoding type detection information.

【0028】さらに、上記動画像通信装置は、誤り検出
とデータの再送により誤りのある通信路で正確にデータ
を転送するARQ(Automatic Repeat Request)制御手
段を備えたものであってもよく、上記符号化は、MPE
G(Moving Picture ExpertGroup)符号化方式若しくは
H.261等の国際標準符号化方式に準拠した符号化で
あってもよい。
Further, the moving picture communication apparatus may include ARQ (Automatic Repeat Request) control means for accurately transferring data on a communication path having an error by detecting an error and retransmitting the data. The encoding is MPE
G (Moving Picture Expert Group) coding scheme or H.264 H.261 or the like.

【0029】[0029]

【発明の実施の形態】本発明に係る動画像通信装置は、
誤り検出とデータの再送により誤りのある通信路で正確
にデータを転送するARQ機能を有する動画像復号装置
に適用することができる。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS A moving picture communication apparatus according to the present invention comprises:
The present invention can be applied to a moving picture decoding apparatus having an ARQ function for accurately transferring data on a communication path having an error by error detection and data retransmission.

【0030】図1は本発明の第1の実施形態に係るΑR
Q機能を有する動画像復号装置の構成を示すブロック図
である。本実施形態に係る動画像復号装置の説明にあた
り図7に示す動画像復号装置と同一構成部分には同一符
号を付している。
FIG. 1 shows ΔR according to the first embodiment of the present invention.
It is a block diagram which shows the structure of the moving image decoding apparatus which has a Q function. In the description of the video decoding device according to the present embodiment, the same components as those of the video decoding device shown in FIG. 7 are denoted by the same reference numerals.

【0031】図1において、100はΑRQ機能を有す
る動画像復号装置(動画像通信装置)であり、動画像復
号装置100は、多重化信号が入力される多重化ビット
列入力端子101、入力された多重化ビット列を貯めて
おく多重化ビット列受信バッファ102、多重化信号を
分離し、各メディアの信号に分けるシステム多重復号器
103、分離された信号(ここでは画像のみ)を待機さ
せる待機バッファ105、侍機バッファ105にデータ
を書き込むかどうかの制御を行うデータ書込み制御部1
04、入力された画像データを復号する動画像復号部1
07(動画像復号手段)、システム多重復号器103の
出力と待機バッファ105の出力のどちらを動画像復号
部107に入力するかを切替えるセレクタ106、セレ
クタ106の制御を行うデータ入力制御部109、動画
像復号部107の結果を出力する画像信号出力端子10
8、再送要求を出すかどうかを判断する再送要求判断部
110(再送要求判断手段)、再送要求信号を出力する
再送要求出力端子111、入力された画像データの符号
化タイプを検出する符号化タイプ検出部112(符号化
タイプ検出手段)、及び参照画像かどうかを判断する参
照画像判断部113(参照画像判断手段)から構成され
る。
In FIG. 1, reference numeral 100 denotes a video decoding device (video communication device) having a ΑRQ function. The video decoding device 100 has a multiplexed bit string input terminal 101 to which a multiplexed signal is input, A multiplexed bit stream receiving buffer 102 for storing a multiplexed bit stream, a system multiplex decoder 103 for separating a multiplexed signal and dividing it into signals for each medium, a standby buffer 105 for waiting for a separated signal (here, only an image); Data write control unit 1 for controlling whether to write data to samurai machine buffer 105
04, moving image decoding unit 1 for decoding input image data
07 (moving image decoding means), a selector 106 for switching which of the output of the system multiplex decoder 103 and the output of the standby buffer 105 is input to the moving image decoding unit 107, a data input control unit 109 for controlling the selector 106, Image signal output terminal 10 for outputting the result of moving image decoding section 107
8. Retransmission request determination unit 110 (retransmission request determination unit) for determining whether to issue a retransmission request, retransmission request output terminal 111 for outputting a retransmission request signal, encoding type for detecting the encoding type of input image data It comprises a detecting unit 112 (encoding type detecting unit) and a reference image determining unit 113 (reference image determining unit) for determining whether or not the image is a reference image.

【0032】上記システム多重復号器103は、シーケ
ンスナンバーを格納するシーケンスナンバー格納手段及
びエラー処理結果を格納するエラー格納手段としての機
能を有する。
The system multiplex decoder 103 has a function as a sequence number storing means for storing a sequence number and an error storing means for storing an error processing result.

【0033】上記参照画像判断部113は、誤った画像
データが後の画像の参照画像となるかどうかを判断する
もので、図2で後述するように参照画像であれば後の画
像に影響を与えるので再送要求を行い、参照画像ではな
い場合であれば後の画像に影響を与えないので再送要求
をしないという処理を行う。
The reference image judging section 113 judges whether or not erroneous image data becomes a reference image of a subsequent image. If the erroneous image data is a reference image as described later with reference to FIG. Therefore, a retransmission request is made, and if it is not a reference image, a process is performed in which a retransmission request is not made since the subsequent image is not affected.

【0034】このように、本実施形態に係る動画像復号
装置100は、前記図7の動画像復号装置に、参照画像
判断部113を追加した構成となっている。
As described above, the moving picture decoding apparatus 100 according to the present embodiment has a configuration in which the reference picture judging section 113 is added to the moving picture decoding apparatus shown in FIG.

【0035】次に、上述のように構成された動画像復号
装置100の動作を説明する。
Next, the operation of the moving picture decoding apparatus 100 configured as described above will be described.

【0036】図2は上記参照画像判断部113の動作を
説明するためのフローチャートであり、図中STはフロ
ーの各ステップである。
FIG. 2 is a flowchart for explaining the operation of the reference image determining unit 113. In the figure, ST indicates each step of the flow.

【0037】図2において、本フローは以下のようなス
テップからなる。すなわち、符号化タイプを取得するス
テップST101、前のフレームを参照画像とするかど
うかを判断するステップST102、参照画像とすると
の結果を出力するステップST103、参照画像としな
いとの結果を出力するステップST104、SN(Sequ
ence Number)を格納するステップST105、一つ前
のSNを出力するステップST106、CRC(Cyclic
Redundancy Check)チェックした結果を格納するステ
ップST107、一つ前のCRCチェックした結果を出
力するステップST108とからなる。
Referring to FIG. 2, this flow includes the following steps. That is, a step ST101 of acquiring an encoding type, a step ST102 of determining whether or not a previous frame is used as a reference image, a step ST103 of outputting a result as a reference image, and a step of outputting a result of not using a reference image ST104, SN (Sequ
Step ST105 for storing the previous SN, Step ST106 for outputting the previous SN, and CRC (Cyclic).
(Redundancy Check) Step ST107 for storing the result of the check, and step ST108 for outputting the result of the previous CRC check.

【0038】以下、上記図1及び図2に示すフローチャ
ートを参照して詳細な動作を説明する。
The detailed operation will be described below with reference to the flowcharts shown in FIGS.

【0039】図1に示すように、まず、多重化ビット列
入力端子101から伝送路を通ってきた多重化ビット列
が入力される。入力されたビット列は多重化ビット列受
信バッファ102に入力され、システム多重復号器10
3のタイミングに合わせて読み込まれる。
As shown in FIG. 1, first, a multiplexed bit string that has passed through a transmission path is input from a multiplexed bit string input terminal 101. The input bit sequence is input to the multiplexed bit sequence receiving buffer 102, and the system multiplex decoder 10
It is read in accordance with the timing of 3.

【0040】システム多重復号器103では、入力され
た信号を多重化信号に分離し、各メディアの信号に分け
る。
The system multiplex decoder 103 separates the input signal into multiplexed signals and divides them into signals of each medium.

【0041】ここで、分割された信号に対してCRCの
チェックをし、エラーでなければ現在再送要求をしてい
るかを判断し、再送要求していれば今獲得したデータが
再送要求していたものかを判断し、今獲得したデータが
再送要求していたものであれば獲得したデータを動画像
復号部107に入力する。
Here, the CRC of the divided signal is checked, and if there is no error, it is determined whether a retransmission request is currently made. If the retransmission request is made, the currently acquired data has made a retransmission request. Then, if the acquired data has been requested to be retransmitted, the acquired data is input to the video decoding unit 107.

【0042】また、今獲得したデータが再送要求してい
たものでなければ再送要求していたデータを再送できな
いとの信号であるかを判断し、再送できないとの信号で
ある場合は待機バッファ105のデータの再送要求判断
をしたデータ以前のデータをセレクタ106を介して動
画像復号部107に入力する。
It is determined whether or not the currently acquired data is a signal indicating that the retransmitted data cannot be retransmitted unless the data has been requested to be retransmitted. The data before the data for which the data retransmission request is determined is input to the video decoding unit 107 via the selector 106.

【0043】上記以外の場合には、データを待機バッフ
ァ105に入力する。
In other cases, data is input to the standby buffer 105.

【0044】符号化タイプ検出部112では、入力され
たデータの符号化タイプを検出し、その結果を参照画像
判断部113に入力する。
The encoding type detecting section 112 detects the encoding type of the input data, and inputs the result to the reference image determining section 113.

【0045】参照画像判断部113の動作に関しては、
図2を用いて説明する。
Regarding the operation of the reference image determining unit 113,
This will be described with reference to FIG.

【0046】まず、ステップST101で符号化タイプ
を取得する。次いで、ステップST102で符号化タイ
プ情報を用いて1フレーム前の画像データが今獲得した
画像データの参照画像となっているか否かを判別する。
参照画像とする場合には、ステップST103で参照画
像とするとの結果を出力してステップST105に進
み、参照画像としない場合には、ステップST104で
参照画像としないとの結果を出力してステップST10
5に進む。
First, an encoding type is obtained in step ST101. Next, in step ST102, it is determined whether or not the image data of the previous frame is a reference image of the image data just acquired using the encoding type information.
If it is to be a reference image, a result indicating that it is a reference image is output in step ST103, and the process proceeds to step ST105. If it is not a reference image, a result indicating that it is not a reference image is output in step ST104, and step ST10 is performed.
Go to 5.

【0047】例えば、符号化タイプが「フレーム内符号
化」されたものであれば、1フレーム前の画像データを
参照していないことが分かる。また、「フレーム間符号
化」されたものである場合は、1フレーム前の画像デー
タを参照していることが分かる。また、「双方向予測符
号化」されたものの場合も1フレーム前の画像データを
参照している可能性があることが分かる。
For example, if the encoding type is "intra-frame encoding", it is understood that the image data of one frame before is not referred to. Also, in the case of “inter-frame coding”, it can be understood that the image data of one frame before is referred to. Also, it can be seen that there is a possibility that the image data of one frame before is also referred to in the case of “bidirectional predictive coding”.

【0048】ステップST105では、システム多重復
号器103の出力の一つであるSN(Sequence Numbe
r)を格納し、ステップST106で今獲得したSNの
一つ前のSN(図1ではSN-1として示す)を出力す
る。
In step ST105, one of the outputs of the system multiplex decoder 103 is SN (Sequence Number).
r) is stored, and the immediately preceding SN (shown as SN-1 in FIG. 1) is output from the SN just obtained in step ST106.

【0049】次いで、ステップST107でシステム多
重復号器103の出力の一つであるCRCチェックの結
果を格納し、ステップST108で今獲得したCRCチ
ェックの結果の一つ前のCRCチェックの結果(図1で
はCRCresult-1として示す)を出力して本フロ
ーを終了する。
Next, in step ST107, the result of the CRC check, which is one of the outputs of the system multiplex decoder 103, is stored. In step ST108, the result of the CRC check immediately before the result of the CRC check just obtained (FIG. 1) In this case, it is output as CRCresult-1), and the flow ends.

【0050】図1に戻って、以上3つの出力、すなわち
参照画像か否かの判別信号(図1のRI)、SN-1及び
CRCresult-1を再送要求判断部110に入力
し、再送要求の判断を行う。
Returning to FIG. 1, the above three outputs, that is, the discrimination signal (RI in FIG. 1) for determining whether or not the image is a reference image, SN-1 and CRCresult-1 are input to the retransmission request determination section 110, and the retransmission request Make a decision.

【0051】再送要求判断部110では、再送要求の判
断を行い、再送要求する必要があれば(例えば、一つ前
の画像データが今獲得した画像データの参照画像となっ
ていて、CRCチェックの結果がエラーの場合)、一つ
前のSΝ(図1のSN-1)とともに再送要求信号(図1
のARQrequest)を再送要求信号出力端子11
1から出力する。その後、上記結果をシステム多重復号
器103に通知する。
The retransmission request judging section 110 judges a retransmission request, and if it is necessary to make a retransmission request (for example, if the previous image data is a reference image of the image data just acquired, If the result is an error), a retransmission request signal (FIG. 1) together with the immediately preceding S (SN-1 in FIG. 1).
ARQ request) to the retransmission request signal output terminal 11
Output from 1. Thereafter, the result is notified to the system multiplex decoder 103.

【0052】一方、再送要求判断部110で再送要求す
る必要なしと判断されれば、現在再送要求をしているか
を判断し、再送要求していなければ待機バッファ105
のデータを再送要求判断をしたデータ以前のデータをセ
レクタ106を介して動画像復号部107に入力する。
この処理は再送要求判断部110がデータ入力制御部1
09に制御信号を送り、データ入力制御部109がセレ
クタ106を制御することで実現される。
On the other hand, if retransmission request determining section 110 determines that there is no need to request a retransmission, it is determined whether a retransmission request is currently made.
Is input to the video decoding unit 107 via the selector 106 before the data for which the data retransmission request is determined.
This processing is performed by the retransmission request determination unit 110 by the data input control unit 1.
The control signal is transmitted to the data input control section 09, and the data input control section 109 controls the selector 106 to realize the control.

【0053】以上の処理がなされた後、動画像復号部1
07では、入力された画像データを復号し、復号され画
像データを画像信号出力端子108から出力する。
After the above processing is performed, the moving image decoding unit 1
At 07, the input image data is decoded, and the decoded image data is output from the image signal output terminal 108.

【0054】以上説明したように、第1の実施形態に係
る動画像復号装置100は、符号化タイプを検出する符
号化タイプ検出部112と、符号化タイプに基づいて誤
って受信したデータが正しく受信したデータの参照画像
となっているか否かを判断する参照画像判断部113
と、参照画像判断部113の出力に基づいて再送要求を
するかどうかの判断を行う再送要求判断部110とを備
え、参照画像判断部113が、誤った画像データが後の
画像の参照画像となるかどうかを判断し、参照画像であ
れば後の画像に影響を与えるので再送要求を行い、参照
画像ではない場合であれば後の画像に影響を与えないの
で再送要求をしないという処理を行うように構成したの
で、必要以上に再送を行わないため、再送待ち時間が長
いことによる待機バッファの増大を抑えて遅延を防ぎ、
また、符号化ビット量を多く割り当てることができ、画
質の向上を実現することができる。また、正確に受信し
たデータから符号化タイプの検出を行うので符号化タイ
プを正しく判断することができる。
As described above, the moving picture decoding apparatus 100 according to the first embodiment uses the coding type detection unit 112 for detecting the coding type and the data received erroneously based on the coding type. Reference image determination unit 113 that determines whether or not the received data is a reference image
And a retransmission request determination unit 110 that determines whether to request retransmission based on the output of the reference image determination unit 113. The reference image determination unit 113 determines whether the incorrect image data is a reference image of a subsequent image. It is determined whether the image is a reference image, and if the image is not a reference image, a retransmission request is performed. If the image is not a reference image, a retransmission request is not performed because the image is not affected. Since it is configured as described above, retransmission is not performed more than necessary, suppressing the increase of the standby buffer due to long retransmission waiting time and preventing delay,
In addition, a large amount of coded bits can be allocated, and the image quality can be improved. Further, since the encoding type is detected from the correctly received data, the encoding type can be correctly determined.

【0055】一方、蓄積画像のように前もって符号化タ
イプが分かっていない場合にも利用できることにより、
リアルタイム性が重視されるような場合(例えば、TV
電話など)にも利用することができる。
On the other hand, it can be used even when the encoding type is not known in advance, such as a stored image,
When real-time performance is important (for example, TV
Phone, etc.).

【0056】なお、本実施形態では、誤った両像データ
が後の参照画像であるかどうかを判断するための符号化
タイプを検出する符号化タイプ検出部112を動画像復
号部107の前に置いたが、画像復号をする際に検出し
た符号化タイプを用することもできる。
In the present embodiment, the coding type detecting unit 112 for detecting the coding type for determining whether or not the erroneous two-image data is the later reference image is provided before the moving image decoding unit 107. However, it is also possible to use the encoding type detected at the time of image decoding.

【0057】また、本実施形態では、1フレーム毎にS
Nを付けた場合の例を示したが、例えば、1フレームを
GOB(Grop of Blocks)という単位に分割した場合
も、1フレーム後の画像の符号化タイプを検出すること
で同様に参照画像となっているかどうかが分かる。
In this embodiment, S is set for each frame.
Although an example in which N is added has been shown, for example, even when one frame is divided into units of GOB (Grop of Blocks), by detecting the encoding type of the image after one frame, the reference image is similarly set. You can see if it is.

【0058】図3は本発明の第2の実施形態に係るΑR
Q機能を有する動画像復号装置の参照画像判断部113
の動作を示すフローチャートである。本実施形態に係る
動画像復号装置の全体構成は前記図1と同様であり、参
照画像判断部113の動作のみが異なる。
FIG. 3 shows ΔR according to the second embodiment of the present invention.
Reference image determination unit 113 of video decoding device having Q function
6 is a flowchart showing the operation of the first embodiment. The overall configuration of the video decoding device according to the present embodiment is the same as that in FIG. 1 described above, and only the operation of the reference image determination unit 113 is different.

【0059】図3において、本動画像復号装置の参照画
像判断部の動作フローは以下のようなステップからな
る。すなわち、符号化タイプを取得するステップST2
01、取得した符号化タイプを格納するステップST2
02、判断対象のデータの前後の符号化タイプを取得す
るステップST203、前後のフレームが判断対象のデ
ータを参照画像とするかどうかを判断するステップST
204、参照画像とするとの結果を出力するステップS
T205、参照画像としないとの結果を出力するステッ
プST206、SNを格納するステップST207、判
断対象のデータのSNを出力するステップST208、
CRCチェックした結果を格納するステップST20
9、判断対象のデータのCRCチェックした結果を出力
するステップST210とからなる。なお、判断対象の
データとは、前後のフレームの参照画像となっているか
を判断する対象になっているデータのことである。
In FIG. 3, the operation flow of the reference image judging section of the present moving picture decoding apparatus comprises the following steps. That is, step ST2 of acquiring an encoding type
01, step ST2 for storing the obtained encoding type
02, step ST203 of acquiring the coding type before and after the data to be determined, step ST203 of determining whether the preceding and succeeding frames use the data to be determined as a reference image
204, Step S for outputting a result as a reference image
T205, step ST206 of outputting a result indicating that the image is not a reference image, step ST207 of storing SN, step ST208 of outputting the SN of data to be determined,
Step ST20 for storing the result of the CRC check
9. Step ST210 of outputting the result of the CRC check of the data to be judged. Note that the data to be determined is data that is to be determined as to whether or not it is a reference image of a previous or next frame.

【0060】以下、上記図3に示すフローチャートを参
照して参照画像判断部の動作を説明する。
The operation of the reference image determining section will be described below with reference to the flowchart shown in FIG.

【0061】まず、ステップST201で符号化タイプ
を取得し、ステップST202で取得した符号化タイプ
を格納する。次いで、ステップST203で判断対象の
データの前後の符号化タイプを取得し、ステップST2
04でそれらの情報を用いて判断対象のデータがその前
後のフレームの参照画像となっているかを判断する。参
照画像とする場合には、ステップST205で参照画像
とするとの結果を出力してステップST207に進み、
参照画像としない場合には、ステップST206で参照
画像としないとの結果を出力してステップST207に
進む。
First, the coding type is obtained in step ST201, and the obtained coding type is stored in step ST202. Next, in step ST203, the encoding types before and after the data to be determined are obtained, and in step ST2.
In step 04, it is determined whether or not the data to be determined is a reference image of a frame before and after that using the information. If the image is to be a reference image, a result indicating that the image is a reference image is output in step ST205, and the process proceeds to step ST207.
If the image is not a reference image, a result indicating that the image is not a reference image is output in step ST206, and the process proceeds to step ST207.

【0062】上記判断方法の例を図4を参照して説明す
る。
An example of the above determination method will be described with reference to FIG.

【0063】図4は参照画像判断例を示すブロック図で
あり、図中I、Ρ、Bはそれぞれフレーム内符号化、フ
レーム間符号化、双方向予測符号化されたフレームを表
す。
FIG. 4 is a block diagram showing an example of reference image determination. In the figure, I,..., And B represent frames subjected to intra-frame coding, inter-frame coding, and bidirectional predictive coding, respectively.

【0064】例えば、判断対象のデータが図4の3フレ
ームのデータの時、前後のフレームとして第0、1、
2、4フレームの符号化タイプを獲得したとする。前記
第1の実施形態では第3フレームの後ろの第4フレーム
がフレーム内符号化されているので、後の画像の参照画
像とならないとして再送要求はしないが、本実施形態で
は3フレームは前の双方向予測符号化された画像の参照
画像(となりうる)との判断をする。
For example, when the data to be determined is the data of the three frames in FIG.
Suppose that the coding type of two or four frames has been acquired. In the first embodiment, since the fourth frame after the third frame is intra-coded, no retransmission request is made because the fourth frame does not become a reference image of a subsequent image. It is determined that the image that has been bidirectionally coded is a reference image (can be a reference image).

【0065】このことにより第3フレームは再送要求さ
れる。
As a result, the third frame is requested to be retransmitted.

【0066】他の例として例えば、第6フレームが判断
対象のデータの場合、例えば、第4、5、7、8フレー
ムの符号化タイプを獲得したとする。第6フレームは第
7フレームの参照画像となっているが、第8フレームは
フレーム内符号化されたデータであるので再送要求をし
ないようにするなどもあげられる。
As another example, when the sixth frame is the data to be determined, for example, it is assumed that the coding types of the fourth, fifth, seventh, and eighth frames have been acquired. Although the sixth frame is a reference image of the seventh frame, the eighth frame is intra-frame coded data, so that a retransmission request is not issued.

【0067】次いで、ステップST207でシステム多
重復号器103の出力の一つであるSNを格納し、ステ
ップST208で判断対象のデータのSNを出力する。
次いで、ステップST209でシステム多重復号器10
3の出力の一つであるCRCチェックの結果を格納し、
ステップST210で判断対象のデータのCRCチェッ
クの結果を出力して本フローを終了する。
Next, in step ST207, one of the outputs of the system multiplex decoder 103 is stored, and in step ST208, the SN of the data to be determined is output.
Next, in step ST209, the system multiplex decoder 10
And stores the result of the CRC check, one of the outputs of
In step ST210, the result of the CRC check of the data to be determined is output, and this flow ends.

【0068】以上説明したように、第2の実施形態に係
る動画像復号装置では、参照画像判断部が、誤った画像
データが後の画像の参照画像となるかだけでなく前の画
像の参照画像となっているかどうかも判断する機能を備
えているので、より正確に参照画像となるか否かの判断
ができ、特に前の画像のコマ落しを防ぐことができる。
As described above, in the moving picture decoding apparatus according to the second embodiment, the reference picture judging section not only determines whether the erroneous picture data is a reference picture of a succeeding picture but also refers to a reference picture of a preceding picture. Since a function of determining whether or not the image is an image is provided, it is possible to more accurately determine whether or not the image is a reference image, and it is possible to particularly prevent frame skipping of a previous image.

【0069】図5は本発明の第3の実施形態に係るΑR
Q機能を有する動画像復号装置の構成を示すブロック図
である。本実施形態に係る動画像復号装置の説明にあた
り前記図1と同一構成部分には同一符号を付している。
FIG. 5 shows ΔR according to the third embodiment of the present invention.
It is a block diagram which shows the structure of the moving image decoding apparatus which has a Q function. In the description of the video decoding device according to the present embodiment, the same components as those in FIG. 1 are denoted by the same reference numerals.

【0070】図5において、200はΑRQ機能を有す
る動画像復号装置(動画像通信装置)であり、動画像復
号装置200は、多重化信号が入力される多重化ビット
列入力端子101、入力された多重化ビット列を貯めて
おく多重化ビット列受信バッファ102、多重化信号を
分離し、各メディアの信号に分けるシステム多重復号器
103、分離された信号(ここでは画像のみ)を待機さ
せる待機バッファ105、侍機バッファ105にデータ
を書き込むかどうかの制御を行うデータ書込み制御部1
04、入力された画像データを復号する動画像復号部1
07、システム多重復号器103の出力と待機バッファ
105の出力のどちらを動画像復号部107に入力する
かを切替えるセレクタ106、セレクタ106の制御を
行うデータ入力制御部109、動画像復号部107の結
果を出力する画像信号出力端子108、再送要求を出す
かどうかを判断する再送要求判断部110、再送要求信
号を出力する再送要求出力端子111、画像データの符
号化タイプを入力する符号化タイプ入力端子201(符
号化タイプ検出手段)、及び参照画像かどうかを判断す
る参照画像判断部202(参照画像判断手段)から構成
される。
In FIG. 5, reference numeral 200 denotes a video decoding device (video communication device) having a ΑRQ function. The video decoding device 200 receives a multiplexed bit string input terminal 101 to which a multiplexed signal is input, A multiplexed bit stream receiving buffer 102 for storing a multiplexed bit stream, a system multiplex decoder 103 for separating a multiplexed signal and dividing it into signals for each medium, a standby buffer 105 for waiting for a separated signal (here, only an image); Data write control unit 1 for controlling whether to write data to samurai machine buffer 105
04, moving image decoding unit 1 for decoding input image data
07, a selector 106 for switching which of the output of the system multiplex decoder 103 and the output of the standby buffer 105 is input to the video decoding unit 107, a data input control unit 109 for controlling the selector 106, An image signal output terminal 108 for outputting a result, a retransmission request determination unit 110 for determining whether to issue a retransmission request, a retransmission request output terminal 111 for outputting a retransmission request signal, and an encoding type input for inputting an encoding type of image data. It comprises a terminal 201 (encoding type detecting means) and a reference image determining unit 202 (reference image determining means) for determining whether or not the image is a reference image.

【0071】第3の実施形態の構成は、符号化タイプ入
力端子201と、前記図1の参照画像判断部113とは
動作の異なる参照画像判断部202とを備えたこと、前
記図1の符号化タイプ検出部112がないことが前記第
1の実施形態と異なっている。
The configuration of the third embodiment includes an encoding type input terminal 201 and a reference image judging unit 202 which operates differently from the reference image judging unit 113 of FIG. The difference from the first embodiment is that the conversion type detection unit 112 is not provided.

【0072】以下、上述のように構成された動画像復号
装置200の動作を説明する。
The operation of the moving picture decoding apparatus 200 configured as described above will be described below.

【0073】基本的な動作は前記第1の実施形態で説明
した動作とほぼ同じあるが、第3の実施形態は符号化タ
イプがあらかじめ分かっている場合の例であるので、符
号化タイプ入力端子201より現在獲得したデータの符
号化タイプを参照画像判断部202に入力し、参照画像
となるかを判断する。
The basic operation is almost the same as the operation described in the first embodiment. However, since the third embodiment is an example in which the encoding type is known in advance, the encoding type input terminal From 201, the encoding type of the data obtained at present is input to the reference image determination unit 202, and it is determined whether the data is a reference image.

【0074】例えば、参照画像判断例を図6(a)
(b)に示すものとする。図6(a)の例をとると、第
2フレームは双方向予測符号化されたデータであり、こ
れは前後どの画像の参照画像ともならないと判断する。
また、図6(b)の例をとると、これはフレーム内符号
化された第0フレームを参照して以降のフレームを符号
化していることを表している。そのとき第2フレームは
前後どの画像の参照画像ともならないと判断する。図6
(a)(b)の2例も参照画像とならないと判定された
ので再送要求は行われない。
For example, an example of reference image determination is shown in FIG.
(B). In the example of FIG. 6A, the second frame is data that has been bidirectionally predictively coded, and it is determined that the second frame does not become a reference image of any of the preceding and following images.
Also, taking the example of FIG. 6B, this indicates that the subsequent frames are encoded with reference to the intra-coded 0th frame. At this time, it is determined that the second frame does not become a reference image of any of the preceding and following images. FIG.
Since the two examples (a) and (b) are also determined not to be reference images, no retransmission request is made.

【0075】上記参照画像判断以外の動作は前記第1の
実施形態で説明した動作と同様である。
The operation other than the above-described reference image determination is the same as the operation described in the first embodiment.

【0076】以上説明したように、第3の実施形態に係
る動画像復号装置200は、符号化タイプ入力端子20
1からの符号化タイプ入力により参照画像判断部202
が、前もって分かっている符号化タイプを利用するよう
に構成しているので、誤った画像データが前後の画像の
参照画像となっているかどうかを直ちに判定すことがで
きる、再送要求するまでの遅延を防ぐことができる。
As described above, the moving picture decoding apparatus 200 according to the third embodiment has the
Reference image determination unit 202 by inputting the encoding type from 1
However, since it is configured to use an encoding type that is known in advance, it is possible to immediately determine whether or not erroneous image data is a reference image of the preceding and following images, a delay before requesting retransmission. Can be prevented.

【0077】したがって、上記優れた特長を有する動画
像通信装置を、例えば、ΜPEG2システムに準拠した
動画像復号装置に適用して好適である。ΜPEGシステ
ムとしては映画やTV番組をΜPEGストリーム化した
ものが考えられる。
Therefore, the moving picture communication apparatus having the above-mentioned excellent features is suitably applied to, for example, a moving picture decoding apparatus conforming to the $ PEG2 system. As the ΜPEG system, a system in which a movie or a TV program is converted into a ΜPEG stream can be considered.

【0078】なお、上記各実施形態において、動画像復
号装置を、例えばMPEGアルゴリズムに基づく動画像
圧縮装置に適用してもよいが、勿論これには限定され
ず、動画像符号化を行うものであれば全ての装置に適用
可能であることは言うまでもない。
In each of the above embodiments, the moving picture decoding apparatus may be applied to a moving picture compression apparatus based on, for example, the MPEG algorithm. However, the present invention is not limited to this. Needless to say, it can be applied to all devices.

【0079】また、上記動画像復号装置、参照画像判断
部を構成する回路やバッファ、セレクタの数、種類な
ど、さらには処理ステップ内容は前述した上記各実施形
態に限られないことは言うまでもなく、ソフトウェアに
より実現するようにしてもよい。
Further, it goes without saying that the number and types of circuits, buffers, and selectors constituting the moving picture decoding apparatus, the reference picture judging section, and the details of the processing steps are not limited to those of the above-described embodiments. It may be realized by software.

【0080】さらに、上述の各実施形態では、動画像復
号装置に適用しているが、再送要求を適応的に切り替え
る装置であればどのような装置でもよく、また動画像復
号装置という名称に限定されるものではない。本発明の
技術的思想の範囲内であれば動画像処理装置等のように
適宜変更することができ、動画像装置の一部に組み込ま
れる態様であってもよい。
Further, in each of the above embodiments, the present invention is applied to a moving picture decoding apparatus. However, any apparatus that adaptively switches retransmission requests may be used. It is not something to be done. As long as it is within the scope of the technical idea of the present invention, it can be appropriately changed like a moving image processing device or the like, and may be a mode incorporated in a part of the moving image device.

【0081】[0081]

【発明の効果】本発明に係る動画像通信装置は、符号化
タイプを検出する符号化タイプ検出手段と、符号化タイ
プ情報に基づいて誤って受信したデータが正しく受信し
たデータの参照画像となっているか否かを判断する参照
画像判断手段と、参照画像判断手段の出力に基づいて再
送要求をするかどうかの判断を行う再送要求判断手段と
を備えて構成したので、再送待ち時間が長いことによる
待機バッファの増大を抑えて遅延を防ぐことができ、符
号化ビット量を多く割り当てて画質の向上を図ることが
でき、さらに符号化タイプの検出を正確に行うことがで
きる。
According to the moving picture communication apparatus of the present invention, the coding type detecting means for detecting the coding type and the erroneously received data based on the coding type information become the reference image of the correctly received data. The retransmission request determination means for determining whether or not to request retransmission based on the output of the reference image determination means. , The delay can be prevented, the image quality can be improved by allocating a large amount of encoded bits, and the encoding type can be accurately detected.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明を適用した第1の実施形態に係る動画像
通信装置の構成を示すブロック図である。
FIG. 1 is a block diagram illustrating a configuration of a moving image communication device according to a first embodiment to which the present invention has been applied.

【図2】上記動画像通信装置の参照画像判断部の動作を
示すフローチャートである。
FIG. 2 is a flowchart illustrating an operation of a reference image determining unit of the moving image communication device.

【図3】本発明を適用した第2の実施形態に係る動画像
通信装置の参照画像判断部の動作を示すフローチャート
である。
FIG. 3 is a flowchart illustrating an operation of a reference image determining unit of the moving image communication device according to the second embodiment to which the present invention is applied.

【図4】上記動画像通信装置の参照画像判断例を説明す
るための図である。
FIG. 4 is a diagram for explaining a reference image determination example of the moving image communication device.

【図5】本発明を適用した第3の実施形態に係る動画像
通信装置の構成を示すブロック図である。
FIG. 5 is a block diagram illustrating a configuration of a moving image communication device according to a third embodiment to which the present invention has been applied.

【図6】上記動画像通信装置の参照画像判断例を説明す
るための図である。
FIG. 6 is a diagram for explaining a reference image determination example of the moving image communication device.

【図7】従来の動画像復号装置の構成を示すブロック図
である。
FIG. 7 is a block diagram illustrating a configuration of a conventional video decoding device.

【符号の説明】[Explanation of symbols]

100,200 動画像復号装置(動画像通信装置)、
101 多重化ビット列入力端子、102 多重化ビッ
ト列受信バッファ、103 システム多重復号器、10
4 データ書込み制御部、105 待機バッファ、10
6 セレクタ、107 動画像復号部(動画像復号手
段)、108 画像信号出力端子、109データ入力制
御部、110 再送要求判断部(再送要求判断手段)、
111再送要求出力端子、112 符号化タイプ検出部
(符号化タイプ検出手段)、113,202 参照画像
判断部(参照画像判断手段)、201 符号化タイプ入
力端子
100, 200 video decoding device (video communication device),
101 multiplexed bit string input terminal, 102 multiplexed bit string reception buffer, 103 system multiplex decoder, 10
4 data write control unit, 105 standby buffer, 10
6 selector, 107 moving image decoding unit (moving image decoding unit), 108 image signal output terminal, 109 data input control unit, 110 retransmission request determining unit (retransmission request determining unit),
111 retransmission request output terminal, 112 coding type detection unit (coding type detection unit), 113, 202 reference image determination unit (reference image determination unit), 201 coding type input terminal

Claims (7)

【特許請求の範囲】[Claims] 【請求項1】 入カデータに誤りがあった場合に再送す
る機能を持つ動画像通信装置において、 符号化タイプを検出する符号化タイプ検出手段と、 前記符号化タイプ情報に基づいて誤って受信したデータ
が正しく受信したデータの参照画像となっているか否か
を判断する参照画像判断手段と、 前記参照画像判断手段の出力に基づいて再送要求をする
かどうかの判断を行う再送要求判断手段とを備えたこと
を特徴とする動画像通信装置。
1. A moving image communication apparatus having a function of retransmitting when input data has an error, comprising: an encoding type detection unit for detecting an encoding type; and an erroneous reception based on the encoding type information. Reference image determination means for determining whether data is a reference image of correctly received data, and retransmission request determination means for determining whether to request retransmission based on an output of the reference image determination means. A moving image communication device, comprising:
【請求項2】 上記請求項1記載の動画像通信装置にお
いて、 シーケンスナンバーを格納するシーケンスナンバー格納
手段と、 エラー処理結果を格納するエラー格納手段とを備え、 前記参照画像判断手段は、前記シーケンスナンバー及び
前記エラー処理結果に基づいて誤って受信したデータが
一つ後に正しく受信したデータの参照画像となっている
か否かを判断をすることを特徴とする動画像通信装置。
2. The moving image communication apparatus according to claim 1, further comprising: a sequence number storage unit for storing a sequence number; and an error storage unit for storing an error processing result. A moving image communication apparatus, comprising: determining whether data erroneously received is a reference image of data received correctly one time later based on a number and the error processing result.
【請求項3】 上記請求項1又は2の何れかに記載の動
画像通信装置において、 シーケンスナンバーを複数格納するシーケンスナンバー
格納手段と、 エラー処理結果を複数格納するエラー格納手段とを備
え、 前記参照画像判断手段は、前記複数のシーケンスナンバ
ー及び前記複数のエラー処理結果に基づいて誤って受信
したデータが前後に正しく受信したデータの参照画像と
なっているか否か判断をすることを特徴とする動画像通
信装置。
3. The moving picture communication device according to claim 1, further comprising: a sequence number storage unit configured to store a plurality of sequence numbers; and an error storage unit configured to store a plurality of error processing results. The reference image determining means determines whether or not the erroneously received data is a reference image of the correctly received data before and after based on the plurality of sequence numbers and the plurality of error processing results. Video communication device.
【請求項4】 上記請求項1、2又は3の何れかに記載
の動画像通信装置において、 動画像データを復号する動画像復号手段を備え、 前記参照画像判断手段による参照画像判断後、動画像デ
ータを復号することを特徴とする動画像通信装置。
4. The moving image communication device according to claim 1, further comprising: a moving image decoding unit that decodes moving image data, wherein a moving image is decoded after a reference image is determined by the reference image determining unit. A moving image communication device for decoding image data.
【請求項5】 前記符号化タイプ検出手段は、 画像データを復号する際に検出した符号化タイプを、符
号化タイプ検出情報として出力することを特徴とする請
求項1、2、3又は4の何れかに記載の動画像通信装
置。
5. The coding type detecting means according to claim 1, wherein said coding type detecting means outputs a coding type detected when decoding image data as coding type detection information. The moving image communication device according to any one of the above.
【請求項6】 さらに、請求項1、2、3、4又は5の
何れかに記載の動画像通信装置において、 誤り検出とデータの再送により誤りのある通信路で正確
にデータを転送するARQ(Automatic Repeat Reques
t)制御手段を備えたことを特徴とする動画像通信装
置。
6. The moving picture communication apparatus according to claim 1, further comprising: an ARQ for accurately transferring data on a communication path having an error by detecting an error and retransmitting the data. (Automatic Repeat Reques
t) A moving image communication device comprising control means.
【請求項7】 前記符号化は、MPEG(Moving Pictu
re Expert Group)符号化方式若しくはH.261等の
国際標準符号化方式に準拠した符号化であることを特徴
とする請求項1又は5の何れかに記載の動画像通信装
置。
7. The method according to claim 1, wherein the encoding is performed by MPEG (Moving Pictu).
re Expert Group) coding method or H.264. The moving image communication device according to claim 1, wherein the encoding is based on an international standard encoding system such as H.261.
JP3768797A 1997-02-21 1997-02-21 Time-varying image communication equipment Withdrawn JPH10234045A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP3768797A JPH10234045A (en) 1997-02-21 1997-02-21 Time-varying image communication equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP3768797A JPH10234045A (en) 1997-02-21 1997-02-21 Time-varying image communication equipment

Publications (1)

Publication Number Publication Date
JPH10234045A true JPH10234045A (en) 1998-09-02

Family

ID=12504498

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3768797A Withdrawn JPH10234045A (en) 1997-02-21 1997-02-21 Time-varying image communication equipment

Country Status (1)

Country Link
JP (1) JPH10234045A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001008420A1 (en) * 1999-07-28 2001-02-01 Matsushita Electric Industrial Co., Ltd. Device for encoding motion picture signals and encoding method
WO2002005497A1 (en) * 2000-07-07 2002-01-17 Matsushita Electric Industrial Co., Ltd. Data transmitter, data receiver, and data transmitting/receiving method
WO2003041415A1 (en) * 2001-11-06 2003-05-15 Matsushita Electric Industrial Co., Ltd. Moving picture coding method and moving picture decoding method
JP2011217416A (en) * 2011-08-01 2011-10-27 Canon Inc Image processing apparatus and method
JP2013038812A (en) * 2006-01-04 2013-02-21 Core Wireless Licensing S A R L Method for verifying state integrity of video encoder and video decoder

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001008420A1 (en) * 1999-07-28 2001-02-01 Matsushita Electric Industrial Co., Ltd. Device for encoding motion picture signals and encoding method
US6885704B1 (en) 1999-07-28 2005-04-26 Matsushita Electric Industrial Co., Ltd. Coding apparatus and coding method of time-varying image signal
US7203184B2 (en) 2000-07-07 2007-04-10 Matsushita Electric Industrial Co., Ltd. Data transmitter, data receiver, and data transmitting/receiving method
WO2002005497A1 (en) * 2000-07-07 2002-01-17 Matsushita Electric Industrial Co., Ltd. Data transmitter, data receiver, and data transmitting/receiving method
US8126056B2 (en) 2001-11-06 2012-02-28 Panasonic Corporation Moving picture coding method, and moving picture decoding method
US8265153B2 (en) 2001-11-06 2012-09-11 Panasonic Corporation Moving picture coding method, and moving picture decoding method
KR100917521B1 (en) 2001-11-06 2009-09-16 파나소닉 주식회사 Moving picture coding method and moving picture decoding method
US7756204B2 (en) 2001-11-06 2010-07-13 Panasonic Corporation Moving picture coding method, and moving picture decoding method
US7782936B2 (en) 2001-11-06 2010-08-24 Panasonic Corporation Moving picture coding method and moving picture decoding method
US9578323B2 (en) 2001-11-06 2017-02-21 Panasonic Intellectual Property Corporation Of America Moving picture coding method, and moving picture decoding method
US8107533B2 (en) 2001-11-06 2012-01-31 Panasonic Corporation Moving picture coding method, and moving picture decoding method
US8126057B2 (en) 2001-11-06 2012-02-28 Panasonic Corporation Moving picture coding method, and moving picture decoding method
WO2003041415A1 (en) * 2001-11-06 2003-05-15 Matsushita Electric Industrial Co., Ltd. Moving picture coding method and moving picture decoding method
US8194747B2 (en) 2001-11-06 2012-06-05 Panasonic Corporation Moving picture coding method, and moving picture decoding method
US8213517B2 (en) 2001-11-06 2012-07-03 Panasonic Corporation Moving picture coding method, and moving picture decoding method
US7310373B2 (en) 2001-11-06 2007-12-18 Matsushita Electric Industrial Co., Ltd. Moving picture coding method, and moving picture decoding method
US9462267B2 (en) 2001-11-06 2016-10-04 Panasonic Intellectual Property Corporation Of America Moving picture coding method, and moving picture decoding method
US8964839B2 (en) 2001-11-06 2015-02-24 Panasonic Intellectual Property Corporation Of America Moving picture coding method, and moving picture decoding method
US9078003B2 (en) 2001-11-06 2015-07-07 Panasonic Intellectual Property Corporation Of America Moving picture coding method, and moving picture decoding method
US9241161B2 (en) 2001-11-06 2016-01-19 Panasonic Intellectual Property Corporation Of America Moving picture coding method, and moving picture decoding method
US9241162B2 (en) 2001-11-06 2016-01-19 Panasonic Intellectual Property Corporation Of America Moving picture coding method, and moving picture decoding method
US9338448B2 (en) 2001-11-06 2016-05-10 Panasonic Intellectual Property Corporation Of America Moving picture coding method, and moving picture decoding method
US9344714B2 (en) 2001-11-06 2016-05-17 Panasonic Intellectual Property Corporation Of America Moving picture coding method, and moving picture decoding method
JP2013038812A (en) * 2006-01-04 2013-02-21 Core Wireless Licensing S A R L Method for verifying state integrity of video encoder and video decoder
JP2011217416A (en) * 2011-08-01 2011-10-27 Canon Inc Image processing apparatus and method

Similar Documents

Publication Publication Date Title
KR100296660B1 (en) Error for decoding video signal
JP3365771B2 (en) Video signal compression device
US7212576B2 (en) Picture encoding method and apparatus and picture decoding method and apparatus
US5841475A (en) Image decoding with dedicated bidirectional picture storage and reduced memory requirements
JP3302939B2 (en) Video signal decompressor for independently compressed even and odd field data
US5479212A (en) Picture data coding apparatus
WO2005076629A1 (en) Image encoding device and method, image decoding device and method, and imaging device
KR20060106580A (en) Method for decoding a video signal encoded in inter-layer prediction manner
EP1599047B1 (en) Video (de)coding device with frequency band retransmission
JPH08154247A (en) Compressed image data processor nd method therefor
EP1158812A2 (en) Method for detecting errors in a video signal
JPH0984019A (en) Image data storage device
JPH10234045A (en) Time-varying image communication equipment
JP2002010265A (en) Transmitting device and its method and receiving device and it method
JPH10224746A (en) Image transmission system
JP2674241B2 (en) Video encoding device
JP4581192B2 (en) Image information encoding apparatus and method
JP3078990B2 (en) Low delay mode image decoding method
JPH08294123A (en) Moving image data transmitter
JP2751510B2 (en) Video decoding device
JPH11317946A (en) Image communication method, its system, and storage medium for recording image communication program
JPH11341521A (en) Coder for stereoscopic moving image
US7529413B2 (en) Method for reducing data amount in an image memory system
JP2864761B2 (en) Motion compensated interframe predictive coding device
JP2001078198A (en) Error concealment control method, coder and image signal transmission system

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20040511