JP3312635B2 - Stored image transmission method and apparatus - Google Patents

Stored image transmission method and apparatus

Info

Publication number
JP3312635B2
JP3312635B2 JP21549693A JP21549693A JP3312635B2 JP 3312635 B2 JP3312635 B2 JP 3312635B2 JP 21549693 A JP21549693 A JP 21549693A JP 21549693 A JP21549693 A JP 21549693A JP 3312635 B2 JP3312635 B2 JP 3312635B2
Authority
JP
Japan
Prior art keywords
encoded data
memory
scenes
image
stored
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP21549693A
Other languages
Japanese (ja)
Other versions
JPH0775093A (en
Inventor
健二 秋山
久 茨木
愼夫 中野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP21549693A priority Critical patent/JP3312635B2/en
Publication of JPH0775093A publication Critical patent/JPH0775093A/en
Application granted granted Critical
Publication of JP3312635B2 publication Critical patent/JP3312635B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は、ディジタル回線を介し
て互いに接続された送信装置と受信装置を備え、送信装
置は、入力音声信号と入力画像信号とを符号化する符号
化手段と、符号化手段の出力の符号化データの送信及び
制御信号の送受信を行う通信制御手段とを含み、受信装
置は、前記符号化データの受信及び制御信号の送受信を
行う通信制御手段と、前記符号化データを復号化する復
号化手段とを含む蓄積画像伝送装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention comprises a transmitting device and a receiving device connected to each other via a digital line, the transmitting device comprising: an encoding means for encoding an input audio signal and an input image signal; Communication control means for transmitting encoded data output from the encoding means and transmitting and receiving a control signal, wherein the receiving device comprises: a communication control means for receiving the encoded data and transmitting and receiving a control signal; and And a decoding unit for decoding the stored image.

【0002】[0002]

【従来の技術】音声を含む画像を符号化して伝送し、受
信側で重要なシーンの動きや解像度を高品質に再現する
ためには、音声を含む画像を符号化速度の高速な高品質
符号化装置で符号化し、符号化速度以上の高速度のディ
ジタル回線やマイクロ回線を用いて伝送したり、符号化
速度以下の低速度のディジタル回線を用いてあらかじめ
時間をかけて伝送しておく必要があった。
2. Description of the Related Art In order to encode and transmit an image including voice and reproduce the important scene motion and resolution at a high quality on the receiving side, a high-quality code having a high coding speed is required for the image including voice. It is necessary to encode using an encoding device and transmit using a high-speed digital line or micro-line that is faster than the encoding speed, or to use a low-speed digital line that is less than or equal to the encoding speed and take time beforehand. there were.

【0003】[0003]

【発明が解決しようとする課題】しかし、符号化速度以
下の低速度のディジタル回線を用いてあらかじめ時間を
かけて伝送すると、全てのシーンの伝送が終了するまで
待つ必要があること等の問題がある。
However, if transmission is performed for a long time in advance using a low-speed digital line having a speed lower than the encoding speed, it is necessary to wait until transmission of all scenes is completed. is there.

【0004】本発明の目的は、このような問題を解決
し、低速度のディジタル回線を用いて伝送する場合であ
っても重要なシーンの動きや解像度を高品質に再現でき
る蓄積画像伝送方法および装置を提供することにある。
SUMMARY OF THE INVENTION An object of the present invention is to solve such a problem and to provide a stored image transmission method and method capable of reproducing important scene motion and resolution with high quality even when transmission is performed using a low-speed digital line. It is to provide a device.

【0005】[0005]

【課題を解決するための手段】本発明の蓄積画像伝送方
法は、 伝送する画像信号を、動きおよび/または解像度
を高品質に再現したい重要なシーンとそれ以外のその他
のシーンに分け、重要なシーンは受信側で動きおよび/
または解像度を高品質に再現できるように高い符号化速
度で符号化してメモリに一時的に蓄積し、その他のシー
ンは前記高い符号化速度に比べて低い符号化速度で符号
化してメモリに一時的に蓄積するステップと、 最初に前
記重要なシーンに相当する符号化データのみを伝送して
受信装置の第1のメモリに蓄積するステップと、 次に、
前記その他のシーンに相当する符号化データを伝送して
受信装置の第2のメモリに蓄積するステップと、該第2
のメモリに蓄積された符号化データは、直ちに復号化し
て出力し、重要なシーンでは、前記第1のメモリに蓄積
された符号化データを復号化して出力するステップを有
する。また、本発明の蓄積画像伝送装置は、伝送する画
像信号を、動きおよび/または解像度を高品質に再現し
たい重要なシーンとそれ以外のその他のシーンに分け、
重要なシーンは受信側で動きおよび/または解像度を高
品質に再現できるように高い符号化速度で符号化してメ
モリに一時的に蓄積し、その他のシーンは前記高い符号
化速度に比べて低い符号化速度で符号化してメモリに一
時的に蓄積し、最初に前記重要なシーンに相当する符号
化データをのみを伝送し、次に前記その他のシーンに相
当する符号化データを伝送する送信装置と、 最初に前記
重要なシーンに相当する符号化データのみを送信装置か
ら受信して自装置の第1のメモリに蓄積し、次に前記そ
の他のシーンに相当する符号化データを送信装置から受
信して自装置の第2のメモリに蓄積し、該第2のメモリ
に蓄積された符号化データは、直ちに復号化して出力
し、重要なシーンでは、前記第1のメモリに蓄積された
符号化データを復号化して出力する受信装置とを有し、
前記送信装置と前記受信装置がディジタル回線を介して
互いに接続されている
Means for Solving the Problems A method of transmitting a stored image of the present invention
The method is to transform the transmitted image signal by motion and / or resolution.
Important scenes and others that you want to reproduce in high quality
And important scenes are moved and / or
Or high coding speed to reproduce the resolution with high quality
And temporarily store it in memory.
Code at a lower coding rate compared to the higher coding rate.
A step of temporarily storing in the memory turned into first before
Only transmit encoded data corresponding to important scenes
Accumulating in a first memory of the receiving device ;
Transmitting the encoded data corresponding to the other scenes,
Storing in a second memory of the receiving device;
The encoded data stored in the memory of the
And store it in the first memory for important scenes
Decoding and outputting the encoded data
I do . The storage image transmission apparatus of the present invention, image transmitting
Reproduce image signals with high quality motion and / or resolution
Important scenes and other scenes,
Critical scenes have higher motion and / or higher resolution at the receiver
Encode at a high encoding speed so that the
Temporarily store in the memory, other scenes with the high sign
Encoding at a lower encoding speed than the
Code that accumulates occasionally and initially corresponds to the important scene
Only the encrypted data, and then
A transmitting apparatus for transmitting those encoding data, first the
Is only the encoded data corresponding to the important scene a transmitting device?
And stores it in the first memory of the own device.
Coded data corresponding to another scene from the transmitting device.
And stores it in a second memory of its own device.
The encoded data stored in is immediately decoded and output.
However, in important scenes, the scenes stored in the first memory are stored.
A receiving device that decodes and outputs encoded data,
The transmitting device and the receiving device are connected via a digital line.
Connected to each other .

【0006】[0006]

【作用】送信装置は、伝送する画像を動きや解像度を高
品質に再現したい重要なシーンとそれ以外のその他のシ
ーンに分け、重要なシーンはその他のシーンに比べて高
い符号化速度で符号化し、その他のシーンは重要なシー
ンに比べて低い符号化速度で符号化し、重要なシーンの
符号化データとその他のシーンの符号化データとを多重
化して伝送するように構成されており、受信装置は、多
重化して伝送されてきた符号化データを元の重要なシー
ンの符号化データとその他のシーンの符号化データとに
分離するように構成されている。
The transmitting device divides an image to be transmitted into important scenes for which motion and resolution are to be reproduced with high quality and other scenes, and encodes important scenes at a higher coding speed than other scenes. The other scenes are encoded at a lower encoding speed than the important scenes, and the encoded data of the important scenes and the encoded data of the other scenes are multiplexed and transmitted. Is configured to separate the coded data transmitted after being multiplexed into the coded data of the original important scene and the coded data of other scenes.

【0007】送信装置では、上述のように全てのシーン
の画像を符号化し終えた後、送信装置と受信装置とをデ
ィジタル回線を介して接続し、例えばその他のシーンの
最初の一部のシーンの符号化データを伝送すると同時に
重要なシーンの符号化データとその他のシーンの符号化
データとを多重化して伝送する。受信装置では、まず最
初に受信したその他のシーンの符号化データを復号化し
て表示し、引続き受信したその他のシーンの符号化デー
タも順次復号化して表示する。一方、重要なシーンの符
号化データは、重要なシーンを表示すべき時間になった
時に順次復号化して表示する構成である。したがって、
低速度のディジタル回線を用いて伝送する場合であって
も、伝送する全てのシーンを重要なシーンと同様に高品
質に再現することはできないが、全ての符号化データの
伝送が終了するまで待つ必要がなく、重要なシーンの動
きや解像度を高品質に再現できることが可能となる。
In the transmitting device, after the images of all the scenes have been encoded as described above, the transmitting device and the receiving device are connected via a digital line, and, for example, the first partial scene of the other scenes is connected. At the same time as transmitting the encoded data, the encoded data of the important scene and the encoded data of the other scenes are multiplexed and transmitted. The receiver first decodes and displays the coded data of the other scenes received first, and then sequentially decodes and displays the coded data of the other scenes received subsequently. On the other hand, encoded data of important scenes is sequentially decoded and displayed when it is time to display important scenes. Therefore,
Even if transmission is performed using a low-speed digital line, all scenes to be transmitted cannot be reproduced with high quality like important scenes, but wait until transmission of all encoded data is completed. This eliminates the need and enables high-quality reproduction of important scene movements and resolutions.

【0008】なお、入力画像信号を符号化するか否かを
選択する入力信号選択手段を備える構成も可能である。
It is also possible to provide an input signal selecting means for selecting whether or not to encode an input image signal.

【0009】また、符号化手段はさらに、音声符号化手
段の音声符号化データ出力を一時的に蓄積して蓄積した
音声符号化データを出力する第1の送信符号化データ蓄
積手段と、第1の画像符号化手段の第1の画像符号化デ
ータ出力を一時的に蓄積して蓄積した第1の画像符号化
データを出力する第2の送信符号化データ蓄積手段と、
第2の画像符号化手段の第2の画像符号化データ出力を
一時的に蓄積して蓄積した第2の画像符号化データを出
力する第3の送信符号化データ蓄積手段とを有し、符号
化データ多重化手段として、第1の送信符号化データ蓄
積手段の音声符号化データ出力と第2の送信符号化デー
タ蓄積手段の第1の画像符号化データ出力と第3の送信
符号化データ蓄積手段の第2の画像符号化データ出力と
を多重化する符号化データ多重化手段を備える構成も可
能である。
The encoding means further includes a first transmission encoded data storage means for temporarily accumulating the audio encoded data output of the audio encoding means and outputting the accumulated audio encoded data; A second transmission encoded data accumulating means for temporarily accumulating the first image encoded data output of the image encoding means and outputting the accumulated first image encoded data;
A third transmission encoded data accumulating means for temporarily accumulating the second image encoded data output of the second image encoding means and outputting the accumulated second image encoded data; As encoded data multiplexing means, voice encoded data output of the first transmission encoded data storage means, first image encoded data output of the second transmission encoded data storage means, and third transmission encoded data accumulation It is also possible to provide a configuration including encoded data multiplexing means for multiplexing the second image encoded data output of the means.

【0010】復号化手段はさらに、符号化データ分離手
段の音声符号化データ出力を一時的に蓄積して蓄積した
音声符号化データを出力する第1の受信符号化データ蓄
積手段と、符号化データ分離手段の第1の画像符号化デ
ータ出力を一時的に蓄積して蓄積した第1の画像符号化
データを出力する第2の受信符号化データ蓄積手段と、
符号化データ分離手段の第2の画像符号化データ出力を
一時的に蓄積して蓄積した第2の画像符号化データを出
力する第3の受信符号化データ蓄積手段とを有し、音声
復号化手段、第1の画像復号化手段、第2の画像復号化
手段としてそれぞれ第1の受信符号化データ蓄積手段の
音声符号化データ出力を復号化する音声復号化手段と、
第2の受信符号化データ蓄積手段の第1の画像符号化デ
ータ出力を復号化する第1の画像復号化手段と、第3の
受信符号化データ蓄積手段の第2の画像符号化データ出
力を復号化する第2の画像復号化手段を備える構成も可
能である。
[0010] The decoding means further includes: first reception encoded data storage means for temporarily accumulating the audio encoded data output of the encoded data separation means and outputting the accumulated audio encoded data; Second received encoded data storage means for temporarily accumulating the first image encoded data output of the separating means and outputting the accumulated first image encoded data;
A third reception coded data storage means for temporarily storing the second video coded data output of the coded data separation means and outputting the stored second video coded data; Audio decoding means for decoding the audio encoded data output of the first received encoded data storage means as means, first image decoding means, and second image decoding means, respectively.
The first image decoding means for decoding the first image encoded data output of the second reception encoded data storage means and the second image encoded data output of the third reception encoded data accumulation means are A configuration including a second image decoding unit for decoding is also possible.

【0011】外部入出力機器を制御するための制御手段
を備え、前記外部入出力機器の制御信号の入出力手段を
備える構成も可能である。
It is possible to provide a control means for controlling the external input / output device, and a control signal input / output means for the control signal of the external input / output device.

【0012】第1の画像符号化手段は、第2の画像符号
化手段をも備える構成も可能である。
[0012] The first image encoding means may be provided with a second image encoding means.

【0013】[0013]

【実施例】次に、本発明の実施例について図面を参照し
て説明する。
Next, embodiments of the present invention will be described with reference to the drawings.

【0014】図1は、本発明の一実施例の蓄積画像伝送
装置を示すブロック図である。この蓄積画像伝送装置は
送信装置100と受信装置200とを備え、これらがデ
ィジタル回線300を介して対向して接続されている。
ディジタル回線300としては、例えばISDN回線等
が用いられる。
FIG. 1 is a block diagram showing a stored image transmission apparatus according to one embodiment of the present invention. This storage image transmission device includes a transmission device 100 and a reception device 200, which are connected to each other via a digital line 300.
As the digital line 300, for example, an ISDN line or the like is used.

【0015】送信装置100は、送信装置100全体を
制御する制御手段としての操作・制御部170と、音声
信号の入力手段としての音声信号入力端子18と、画像
信号の入力手段としての画像信号入力端子11と、入力
音声信号をA/D変換する音声信号A/D変換手段とし
てのA/D変換器118と、入力画像信号をA/D変換
する画像信号A/D変換手段としてのA/D変換器11
0と、A/D変換器110でA/D変換された信号を符
号器125へ入力するか否かを選択する入力信号選択手
段としてのスイッチ130と、A/D変換器118でA
/D変換された音声信号を符号化する音声符号化手段と
しての符号器128と、A/D変換器110でA/D変
換された画像信号を符号化する第1の画像符号化手段と
しての符号器120と、入力信号選択手段としてのスイ
ッチ130によって選択された画像信号を符号化する第
2の画像符号化手段としての符号器125と、符号器1
28の音声符号化データ出力を一時的に蓄積して蓄積し
た音声符号化データを出力する第1の送信符号化データ
蓄積手段としてのメモリ148と、符号器120の第1
の画像符号化データ出力を一時的に蓄積して蓄積した第
1の画像符号化データ出力する第2の送信符号化データ
蓄積手段としてのメモリ140と、符号器125の第2
の画像符号化データ出力を一時的に蓄積して蓄積した第
2の画像符号化データ出力する第3の送信符号化データ
蓄積手段としてのメモリ145と、メモリ148、14
0及び145の符号化データ出力を多重化して送信する
符号化データ多重化手段としての信号多重部135と、
ディジタル回線300を介して受信装置200と符号化
データの送信及び制御信号の送受信を行う通信制御手段
としての網制御部160を備えている。符号器120、
125とスイッチ130は符号器部180を構成してい
る。
The transmitting apparatus 100 includes an operation / control section 170 as control means for controlling the entire transmitting apparatus 100, an audio signal input terminal 18 as an audio signal inputting means, and an image signal inputting means as an image signal inputting means. A terminal 11, an A / D converter 118 as an audio signal A / D converter for A / D converting the input audio signal, and an A / D converter as an image signal A / D converter for A / D converting the input image signal D converter 11
0, a switch 130 as input signal selection means for selecting whether to input the signal A / D converted by the A / D converter 110 to the encoder 125, and an A / D converter 118
An encoder 128 as an audio encoding unit for encoding the / D-converted audio signal, and a first image encoding unit for encoding the image signal A / D-converted by the A / D converter 110. An encoder 120; an encoder 125 as second image encoding means for encoding an image signal selected by the switch 130 as input signal selection means; and an encoder 1
Memory 148 as first transmission encoded data storage means for temporarily accumulating the audio encoded data output of No. 28 and outputting the accumulated audio encoded data;
And a memory 140 as a second transmission encoded data storage unit for temporarily storing the encoded image data output of the second and outputting the accumulated first encoded image data.
Memory 145 as third transmission encoded data storage means for temporarily accumulating the image encoded data output of No. 3 and outputting the accumulated second image encoded data, and memories 148 and 14
A signal multiplexing unit 135 as coded data multiplexing means for multiplexing and transmitting the coded data outputs of 0 and 145;
A network control unit 160 is provided as communication control means for transmitting encoded data and transmitting and receiving control signals to and from the receiving device 200 via the digital line 300. Encoder 120,
The 125 and the switch 130 constitute the encoder unit 180.

【0016】受信装置200は、受信装置200全体を
制御する制御手段としての操作・制御部270と、ディ
ジタル回線300を介して送信装置100と符号化デー
タの受信及び制御信号の送受信を行う通信制御手段とし
ての網制御部260と、受信符号化データを音声符号化
データと第1の画像符号化データと第2の画像符号化デ
ータとに分離する符号化データ分離手段としての信号分
離部235と、信号分離部235の音声符号化データ出
力を一時的に蓄積して蓄積した音声符号化データを出力
する第1の受信符号化データ蓄積手段としてのメモリ2
48と、信号分離部235の第1の画像符号化データ出
力を一時的に蓄積して蓄積した第1の画像符号化データ
を出力する第2の受信符号化データ蓄積手段としてのメ
モリ240と、信号分離部235の第2の画像符号化デ
ータ出力を一時的に蓄積して蓄積した第2の画像符号化
データを出力する第3の受信符号化データ蓄積手段とし
てのメモリ245と、メモリ248に蓄積された音声符
号化データ出力を復号化する音声復号化手段としての復
号器228と、メモリ240に蓄積された第1の画像符
号化データ出力を復号化する第1の画像復号化手段とし
ての復号器220と、メモリ245に蓄積された第2の
画像符号化データ出力を復号化する第2の画像復号化手
段としての復号器225と、復号器220及び復号器2
25で復号化された画像復号化データ出力を多重化する
画像復号化出力多重化手段としてのスイッチ230と、
復号化音声データをD/A変換する音声信号D/A変換
手段としてのD/A変換器218と、復号化画像データ
をD/A変換する画像信号D/A変換手段としてのD/
A変換器210と、音声信号の出力手段としての音声信
号出力端子28と、画像信号の出力手段としての画像信
号出力端子21を備えている。復号器220、225と
スイッチ230は復号器部280を構成している。
The receiving apparatus 200 includes an operation / control section 270 as control means for controlling the entire receiving apparatus 200, and a communication control for receiving encoded data and transmitting / receiving control signals with the transmitting apparatus 100 via the digital line 300. A network control unit 260 as means, a signal separating unit 235 as encoded data separating means for separating received encoded data into audio encoded data, first image encoded data, and second image encoded data; And a memory 2 serving as first reception encoded data storage means for temporarily accumulating the audio encoded data output of the signal separation unit 235 and outputting the accumulated audio encoded data.
48, a memory 240 as second reception encoded data storage means for temporarily accumulating the first image encoded data output of the signal separation unit 235 and outputting the accumulated first image encoded data, The memory 245 as a third reception encoded data storage unit for temporarily accumulating the second encoded image data output of the signal separation unit 235 and outputting the accumulated second encoded image data, and the memory 248. A decoder 228 as an audio decoding means for decoding the stored encoded audio data output, and a first image decoding means for decoding the first encoded image data output stored in the memory 240. A decoder 220; a decoder 225 as second image decoding means for decoding the second encoded image data output stored in the memory 245; and the decoder 220 and the decoder 2
A switch 230 as image decoding output multiplexing means for multiplexing the image decoding data output decoded in 25;
A D / A converter 218 as an audio signal D / A converter for D / A converting the decoded audio data, and a D / A converter 218 as an image signal D / A converter for D / A converting the decoded image data.
An A converter 210, an audio signal output terminal 28 as an audio signal output unit, and an image signal output terminal 21 as an image signal output unit are provided. The decoders 220 and 225 and the switch 230 constitute a decoder unit 280.

【0017】メモリ148、140、145、248、
240、245はDRAM、磁気ディスク装置あるいは
その他のディジタルメモリを用いることができる。
The memories 148, 140, 145, 248,
240, 245 can use DRAM, magnetic disk device or other digital memory.

【0018】本実施例における送信装置100の特徴と
するところは、音声信号は1つの符号器128で符号化
して第1の送信符号化データ蓄積手段としてのメモリ1
48に蓄積する構成であり、画像信号は2つの符号器1
20、125で符号化する構成である。すなわち、伝送
する画像信号を、動きや解像度を高品質に再現したい重
要なシーンとそれ以外のその他のシーンに分け、重要な
シーンは受信側で動きや解像度を高品質に再現できるよ
うに第1の画像符号化手段の符号化速度に比べて高い符
号化速度で符号化する第2の画像符号化手段としての符
号器125で符号化して第2の画像符号化データ出力を
一時的に蓄積して蓄積した第2の画像符号化データを出
力する第3の送信符号化データ蓄積手段としてのメモリ
145に蓄積する構成であり、その他のシーンは第2の
画像符号化手段の符号化速度に比べて低い符号化速度で
符号化する第1の画像符号化手段としての符号器120
で符号化して第1の画像符号化データ出力を一時的に蓄
積して蓄積した第1の画像符号化データを出力する第2
の送信符号化データ蓄積手段としてのメモリ140に蓄
積する構成であり、第1の送信符号化データ蓄積手段と
してメモリ148の音声符号化データ出力と第2の送信
符号化データ蓄積手段としてのメモリ140の第1の画
像符号化データ出力と第3の送信符号化データ蓄積手段
としてのメモリ145の第2の画像符号化データ出力と
を多重化する符号化データ多重化手段としての信号多重
部135を備えたことにある。
A feature of the transmitting apparatus 100 according to the present embodiment is that an audio signal is encoded by one encoder 128 and the memory 1 as a first encoded transmission data storage means.
The image signal is stored in two encoders 1
20 and 125. That is, an image signal to be transmitted is divided into important scenes whose motion and resolution are desired to be reproduced with high quality and other scenes other than the important scenes. , And temporarily stores a second encoded image data output by the encoder 125 as the second image encoding means for encoding at a higher encoding speed than the encoding speed of the image encoding means. The second encoded image data is stored in a memory 145 serving as third encoded encoded data storage means for outputting encoded second image encoded data. Other scenes are compared with the encoding speed of the second image encoded means. Encoder as first image encoding means for encoding at a low encoding speed
And temporarily stores the first encoded image data output and outputs the accumulated first encoded image data.
The first transmission coded data storage means stores the voice coded data output from the memory 148 as the first transmission coded data storage means and the memory 140 as the second transmission coded data storage means. And a signal multiplexing unit 135 as coded data multiplexing means for multiplexing the first image coded data output of the memory 145 and the second image coded data output of the memory 145 as third transmission coded data storage means. Have prepared.

【0019】本実施例における受信装置200の特徴と
するところは、送信装置100から多重化伝送された受
信符号化データを音声符号化データと第1の画像符号化
データと第2の画像符号化データとに分離する符号化デ
ータ分離手段としての信号分離部235を備え、送信装
置100の符号器128で符号化された音声符号化デー
タを第1の受信符号化データ蓄積手段としてのメモリ2
48に蓄積して蓄積した音声符号化データ出力を復号化
する音声復号化手段としての復号器228で復号化する
構成であり、送信装置100の符号器120で符号化さ
れた画像符号化データを第2の受信符号化データ蓄積手
段としてのメモリ240に蓄積して蓄積した第1の画像
符号化データ出力を復号化する第1の画像復号化手段と
しての復号器220で復号化する構成であり、送信装置
100の符号器125で符号化された画像符号化データ
を第3の受信符号化データ蓄積手段としてのメモリ24
5に蓄積して蓄積した第2の画像符号化データ出力を復
号化する第2の画像復号化手段としての復号器225で
復号化する構成であり、第1の画像復号化手段としての
復号器220の第1の画像復号化データ出力と第2の画
像復号化手段としての復号器225の第2の画像復号化
データ出力とを多重化して出力する画像復号化出力多重
化手段としてのスイッチ230を備えたことにある。
The feature of the receiving apparatus 200 in this embodiment is that the received coded data multiplexed and transmitted from the transmitting apparatus 100 is converted into audio coded data, first image coded data, and second image coded data. A signal separating unit 235 serving as coded data separating means for separating data into data; and a memory 2 serving as first received coded data storage means for storing voice coded data coded by the coder 128 of the transmitting apparatus 100.
48, a decoder 228 serving as an audio decoding means for decoding the audio encoded data output accumulated and accumulated. The image encoded data encoded by the encoder 120 of the transmitting apparatus 100 is decoded. In this configuration, the first image encoded data output stored and stored in the memory 240 as the second received encoded data storage means is decoded by the decoder 220 as the first image decoding means. The image data encoded by the encoder 125 of the transmitting apparatus 100 is stored in the memory 24 as a third reception encoded data storage unit.
5 is decoded by a decoder 225 as a second image decoding means for decoding the second encoded image data output accumulated in the decoder 5, and a decoder as a first image decoding means. A switch 230 as image decoding output multiplexing means for multiplexing and outputting the first image decoded data output of 220 and the second image decoded data output of the decoder 225 as second image decoding means That you have.

【0020】本実施例において、網制御部160、26
0は符号化データの送受信を行うだけでなく、ディジタ
ル回線300の呼接続、送信装置100と受信装置20
0との間の制御信号の伝送制御も行う。また、操作・制
御部170及び270は人間操作及び受信した制御信号
150並びに250に基づき装置全体の制御を行うとと
もに制御信号150、250を相手側に伝送する。
In this embodiment, the network controllers 160 and 26
0 not only transmits and receives coded data, but also performs call connection of the digital line 300, transmission device 100 and reception device 20.
Transmission control of a control signal between 0 is also performed. The operation / control units 170 and 270 control the entire apparatus based on human operations and the received control signals 150 and 250, and transmit the control signals 150 and 250 to the other party.

【0021】図2、図3、図4及び図5は、本実施例の
説明図であって、図2は例えばテレビ電話のように符号
化速度が低く、動画像のフレームを間引きフレームの解
像度を落として伝送する形態の例を、図3及び図4は符
号化データの伝送形態の例を、図5は重要なシーンの動
きを忠実に再現できる様子の例をそれぞれ示す。また、
図2、図3、図4及び図5において、Fは動画像のフレ
ームを、Sはその他のシーンを、Mは重要なシーンをそ
れぞれ示し、図中の数字はフレーム番号を示す。
2, 3, 4 and 5 are explanatory diagrams of the present embodiment. FIG. 2 shows the resolution of a thinned frame of a moving image frame, such as a videophone, in which the encoding speed is low. 3 and 4 show examples of a form of transmission of encoded data, and FIG. 5 shows an example of a state in which the movement of an important scene can be faithfully reproduced. Also,
2, 3, 4, and 5, F indicates a frame of a moving image, S indicates another scene, M indicates an important scene, and the numbers in the figures indicate frame numbers.

【0022】以下、本装置の動作を図1、図2、図3、
図4及び図5を参照して説明する。
Hereinafter, the operation of the present apparatus will be described with reference to FIGS.
This will be described with reference to FIGS.

【0023】まず、ビデオテープレコーダやレーザビデ
オディスクプレーヤ等の外部入力機器400から入力し
た音声信号をA/D変換器118でA/D変換して音声
信号の符号器128で符号化し、符号化データをメモリ
148に蓄積する。外部入力機器400から音声信号と
同時に入力した画像信号をA/D変換器110でA/D
変換して第1の画像符号化手段としての符号器120で
符号化し、符号化データをメモリ140に蓄積する。入
力画像中の重要なシーンでは、入力信号選択手段として
のスイッチ130を閉じ、第2の画像符号化手段として
の符号器125が動作して符号化データをメモリ145
に蓄積する。第1の画像符号化手段としての符号器12
0では、その他のシーンを符号器125に比べて低い符
号化速度で符号化する。したがって、復号化画像は例え
ば図2に示すようなコマ送りの画像となる。一方、重要
なシーンの画像については、スイッチ130を閉じ、受
信側で動きや解像度を高品質に再現できるように符号器
125によりその他のシーンを符号化する符号器120
に比べて高い符号化速度で高品質符号化する。全てのシ
ーンの画像を符号化し終えた後、各々のシーンの画像符
号化データと音声符号化データとを符号化データ多重化
手段としての信号多重部135で多重化する。
First, an audio signal input from an external input device 400 such as a video tape recorder or a laser video disk player is A / D-converted by an A / D converter 118, encoded by an audio signal encoder 128, and encoded. The data is stored in the memory 148. The A / D converter 110 converts the image signal input simultaneously with the audio signal from the external input device 400 into an A / D signal.
The image data is converted and encoded by the encoder 120 as first image encoding means, and the encoded data is stored in the memory 140. In an important scene in the input image, the switch 130 as the input signal selecting means is closed, and the encoder 125 as the second image encoding means operates to store the encoded data in the memory 145.
To accumulate. Encoder 12 as first image encoding means
At 0, other scenes are encoded at a lower encoding speed than the encoder 125. Therefore, the decoded image is, for example, a frame-forward image as shown in FIG. On the other hand, for an image of an important scene, the switch 130 is closed, and the encoder 125 encodes other scenes by the encoder 125 so that the motion and resolution can be reproduced with high quality on the receiving side.
Performs high quality coding at a higher coding speed than that of. After the encoding of the images of all the scenes is completed, the image encoded data and the audio encoded data of each scene are multiplexed by the signal multiplexing unit 135 as encoded data multiplexing means.

【0024】次に、送信装置100または受信装置20
0から呼接続を行い、ディジタル回線300を介して送
信装置100と受信装置200とを接続し、各々の網制
御部160及び260で制御信号のやり取りにより符号
化データを伝送するためのデータリンクを確立させる。
データリンクが確立した時点で送信装置100の信号多
重部135及び受信装置200の信号分離部235を介
して符号化データの伝送を開始し、信号分離部235に
より、符号器128で符号化された音声符号化データは
復号器228で復号化するように、符号器120で符号
化された第1の画像符号化データは復号器220で復号
化するように、また符号器125で符号化された第2の
画像符号化データは復号器225で復号化するように各
々の受信符号化データに応じて蓄積するメモリを選択す
る。
Next, the transmitting device 100 or the receiving device 20
0, a call connection is made, the transmitting apparatus 100 and the receiving apparatus 200 are connected via the digital line 300, and a data link for transmitting encoded data by exchanging control signals between the network control units 160 and 260 is established. Let it be established.
When the data link is established, the transmission of the encoded data starts via the signal multiplexing unit 135 of the transmitting device 100 and the signal separating unit 235 of the receiving device 200, and the encoded data is encoded by the encoder 128 by the signal separating unit 235. The encoded audio data is decoded by the decoder 228, the first encoded image data encoded by the encoder 120 is encoded by the decoder 220, and encoded by the encoder 125. The memory for storing the second encoded image data is selected according to each received encoded data so as to be decoded by the decoder 225.

【0025】符号化データの伝送方法としては、例え
ば、図3に示すように、まず画像信号中の重要なシーン
Mに相当する符号化データのみを伝送して受信装置20
0のメモリ245に蓄積する。次に、その他のシーンS
に相当する符号化データを伝送して受信装置200のメ
モリ240に蓄積する。この時、受信装置200のスイ
ッチ230はa側に接続されており、メモリ240に蓄
積された符号化データは、直ちに復号器220によって
復号化し、D/A変換器210によってD/A変換して
出力する。ここで、重要なシーンでは、スイッチ230
をb側に接続し、復号器225で復号化したデータをD
/A変換器210に入力し、D/A変換して出力する。
したがって、受信装置200では図5に示すような画像
が再現され、重要なシーンとその他のシーンとを連続し
て再生することができる。また、音声符号化データは、
画像符号化データと同時に送り、画像信号と同期して出
力する。
As a method of transmitting encoded data, for example, as shown in FIG. 3, first, only encoded data corresponding to an important scene M in an image signal is transmitted, and
0 is stored in the memory 245. Next, the other scene S
Is transmitted and stored in the memory 240 of the receiving device 200. At this time, the switch 230 of the receiving device 200 is connected to the a side, and the encoded data stored in the memory 240 is immediately decoded by the decoder 220, and D / A converted by the D / A converter 210. Output. Here, in an important scene, the switch 230
Is connected to the b side, and the data decoded by the decoder 225 is
The signal is input to the / A converter 210, D / A converted, and output.
Therefore, the image shown in FIG. 5 is reproduced in the receiving device 200, and an important scene and other scenes can be reproduced continuously. Also, the audio encoded data is
It is sent at the same time as the encoded image data, and output in synchronization with the image signal.

【0026】なお、本実施例において、入力信号選択手
段としてのスイッチ130により符号器125で符号化
するか否かを選択することとして説明したが、スイッチ
130を除いて全ての入力信号を符号化し、信号多重部
135において不必要な符号化データを多重化しない構
成としても本発明の蓄積画像伝送装置を実現できること
は明かである。また、本実施例において、符号化データ
を蓄積する手段としてメモリ148、140及び145
を有することとして説明したが、これらの蓄積手段を備
えず直接信号多重部135で多重化する構成としても本
発明の蓄積画像伝送装置を実現できることは明かであ
る。
In this embodiment, it has been described that whether or not encoding is performed by the encoder 125 is selected by the switch 130 as input signal selecting means. However, all input signals except for the switch 130 are encoded. It is apparent that the stored image transmission apparatus of the present invention can be realized even when unnecessary encoded data is not multiplexed in the signal multiplexing unit 135. In this embodiment, as means for storing encoded data, memories 148, 140 and 145 are used.
However, it is apparent that the stored image transmission apparatus of the present invention can be realized even if the signal multiplexing unit 135 directly multiplexes the data without the storage means.

【0027】なお、本実施例において、重要なシーンの
符号化データを先に送り、次にその他のシーンを伝送す
る形態について説明したが、図4に示すように、まずそ
の他のシーンの一部の画像を先に伝送し、受信側で復号
化して表示を開始し、次に、重要なシーンの符号化デー
タを伝送し、その他のシーンに引続き復号化して表示す
ることも可能であることは明かである。
In the present embodiment, the mode in which the encoded data of the important scene is transmitted first, and then the other scenes are transmitted has been described. However, as shown in FIG. It is also possible to transmit the image first, decode it on the receiving side and start displaying it, then transmit the encoded data of the important scene, and continue decoding and displaying the other scenes It is clear.

【0028】さらに、送信装置100では全てのシーン
の画像を符号化し終えた後に、例えばその他のシーンの
最初の一部のシーンの符号化データを伝送すると同時に
重要なシーンの符号化データとその他のシーンの符号化
データとを多重化して伝送する。受信装置200では、
まず最初に受信したその他のシーンの符号化データを一
旦メモリに蓄積するとともに復号化して表示し、引続き
受信したその他のシーンの符号化データも一旦メモリに
蓄積するとともに順次復号化して表示する。一方、重要
なシーンの符号化データは順次メモリに蓄積し、重要な
シーンを表示すべき時間になった時にメモリに蓄積した
符号化データを順次復号化して表示することにより、重
要なシーンの動きや解像度を高品質に再現できることが
可能であることは明かである。
Further, after the transmitting apparatus 100 completes the encoding of the images of all the scenes, for example, the encoded data of the first partial scene of the other scenes is transmitted, and at the same time, the encoded data of the important scene and the encoded data of the other scenes are transmitted. The encoded data of the scene is multiplexed and transmitted. In the receiving device 200,
First, the coded data of the other scenes received first is temporarily stored in the memory, decoded and displayed, and the coded data of the other scenes subsequently received are also temporarily stored in the memory and sequentially decoded and displayed. On the other hand, the encoded data of important scenes are sequentially stored in the memory, and when the time to display the important scenes is reached, the encoded data stored in the memory is sequentially decoded and displayed, so that the movement of the important scenes is performed. It is clear that it is possible to reproduce high quality and resolution.

【0029】なお、受信装置200には、メモリ24
8、240及び245を備えており、受信した画像及び
音声信号を必要に応じて何度も再生することができる。
さらに、図3のSの部分のみを再生することにより早送
りを行うこともできる。なお、メモリ248、240及
び245を備えない構成においても本発明の蓄積画像伝
送装置を実現できることは明かである。
The receiving device 200 has a memory 24
8, 240, and 245, and can reproduce the received image and audio signals as many times as necessary.
Furthermore, fast-forwarding can be performed by reproducing only the portion S in FIG. It is apparent that the stored image transmission apparatus of the present invention can be realized even in a configuration without the memories 248, 240 and 245.

【0030】なお、送信装置100は、ビデオテープレ
コーダ、レーザビデオディスクプレーヤ及びレコーダ等
の外部入力機器400を制御する機能を操作・制御部1
70に備え、制御信号150の入出力手段としての外部
入力機器制御信号入出力端子12を備える構成とすれ
ば、外部入力機器400を制御することもできることは
明かである。
The transmitting device 100 operates and controls the function of controlling the external input device 400 such as a video tape recorder, a laser video disk player, and a recorder.
It is apparent that the external input device 400 can also be controlled if the external input device 400 is provided with the external input device control signal input / output terminal 12 as an input / output unit for the control signal 150.

【0031】また、受信装置200は、ビデオテープレ
コーダやレーザビデオディスクレコーダ等の外部出力機
器を制御する機能を操作・制御部270に備え、制御信
号の入出力手段としての外部出力機器制御信号入出力端
子22を備える構成とすれば、外部出力機器を制御する
こともできることは明かである。
The receiving apparatus 200 has a function of controlling an external output device such as a video tape recorder or a laser video disk recorder in the operation / control section 270, and receives an external output device control signal input / output as a control signal input / output means. Obviously, if the output terminal 22 is provided, the external output device can be controlled.

【0032】図6、図7はそれぞれ図1の符号器120
及び125、復号器220及び225の詳細構成例を示
す。
FIGS. 6 and 7 respectively show the encoder 120 of FIG.
And 125, and a detailed configuration example of the decoders 220 and 225.

【0033】符号器120及び125は、現フレームと
予測フレームとのフレーム間予測誤差を求める減算手段
としての減算器300と、フレーム間予測誤差を符号化
する変換手段としての変換器305と、変換された結果
を量子化して可変長符号化する可変長符号化手段として
の可変長符号化器310と、可変長符号から変換結果を
復元する逆可変長符号化手段としての逆可変長符号化器
315と、元のフレーム間予測誤差を求める逆変換手段
としての逆変換器320と、フレーム間予測誤差と前フ
ーレムとの加算を行い現フレームを復元する加算手段と
しての加算器325と、復元された現フレームを遅延さ
せる遅延手段としてのフレームメモリ330を備える。
The encoders 120 and 125 include a subtractor 300 as subtraction means for obtaining an inter-frame prediction error between the current frame and the predicted frame, a converter 305 as a conversion means for encoding the inter-frame prediction error, A variable length encoder 310 as a variable length encoder for quantizing the obtained result and performing variable length encoding, and an inverse variable length encoder as an inverse variable length encoder for restoring the conversion result from the variable length code 315, an inverse transformer 320 as an inverse transform unit for obtaining an original inter-frame prediction error, and an adder 325 as an addition unit for restoring the current frame by adding the inter-frame prediction error and the previous Fourierm. A frame memory 330 as delay means for delaying the current frame.

【0034】復号器220及び225は、可変長符号か
ら変換結果を復元する逆可変長符号化手段としての逆可
変長符号化器330と、元のフレーム間予測誤差を求め
る逆変換手段としての逆変換器335と、フレーム間予
測誤差と前フレームとの加算を行い現フレームを復元す
る加算手段としての加算器340と、復元した現フレー
ムを遅延させる遅延手段としてのフレームメモリ345
を備える。
The decoders 220 and 225 are composed of an inverse variable length encoder 330 as an inverse variable length encoder for restoring the conversion result from the variable length code, and an inverse variable encoder as an inverse transformer for obtaining the original inter-frame prediction error. A converter 335, an adder 340 as addition means for adding the inter-frame prediction error to the previous frame to restore the current frame, and a frame memory 345 as delay means for delaying the restored current frame
Is provided.

【0035】以下、符号器120(125)と復号器2
20(225)の動作を説明する。
Hereinafter, the encoder 120 (125) and the decoder 2
20 (225) will be described.

【0036】まず、符号器120(125)について説
明する。A/D変換器110でA/D変換された現フレ
ームの信号から減算器300でフレーム間予測値を減算
してフレーム間予測誤差を求め、変換器305でフレー
ム間予測誤差に対して例えばDCT変換を行い、可変長
符号化器310でDCT変換結果に対して量子化及び可
変長符号化を行い、求めた可変長符号化データをメモリ
140または145に出力する。また、逆可変長符号化
器315で可変長符号化データを逆可変長符号化し、逆
変換器320で逆変換して元のフレーム間予測誤差を求
める。次に、求められたフレーム間予測誤差と前フレー
ムとの加算を加算器325で行うことにより現フレーム
を復元する。復元された現フレームをフレームメモリ3
30に蓄積して遅延させて次のフレームの予測値として
使用する。なお、変換器305におけるフレーム間予測
誤差の変換方法としては、DCT変換の他にアダマール
変換等が利用できる。
First, the encoder 120 (125) will be described. A subtractor 300 subtracts an inter-frame prediction value from a signal of the current frame that has been A / D converted by the A / D converter 110 to obtain an inter-frame prediction error. After performing the transform, the variable length encoder 310 performs quantization and variable length coding on the DCT transform result, and outputs the obtained variable length encoded data to the memory 140 or 145. Also, the inverse variable length encoder 315 performs inverse variable length encoding on the variable length coded data, and the inverse transformer 320 performs inverse transform to obtain the original inter-frame prediction error. Next, the current frame is restored by adding the calculated inter-frame prediction error and the previous frame by the adder 325. The restored current frame is stored in the frame memory 3
The data is accumulated in the data 30 and delayed and used as a predicted value of the next frame. As a method of converting the inter-frame prediction error in the converter 305, Hadamard transform or the like can be used in addition to DCT transform.

【0037】復号器220(225)では、メモリ24
0または245の符号化データが入力し、逆可変長符号
化器330で入力符号化データを逆可変長符号化し、逆
変換器335で逆DCT変換して元のフレーム間予測誤
差を求める。次に、求められたフレーム間予測誤差と前
フレームとの加算を加算器340で行い、現フレームを
復元し、D/A変換器210に出力する。復元された現
フレームをフレームメモリ345に蓄積して遅延させて
次のフレームの予測値として利用する。なお、変換器3
05におけるフレーム間予測誤差の変換方法としては、
DCTやアダマール変換等が利用できる。
In the decoder 220 (225), the memory 24
The coded data of 0 or 245 is input, the input coded data is subjected to inverse variable length encoding by the inverse variable length encoder 330, and the inverse DCT transform is performed by the inverse transformer 335 to obtain the original inter-frame prediction error. Next, the calculated inter-frame prediction error and the previous frame are added by the adder 340 to restore the current frame and output it to the D / A converter 210. The restored current frame is accumulated in the frame memory 345, delayed, and used as a predicted value of the next frame. The converter 3
As a method of converting the inter-frame prediction error in 05,
DCT, Hadamard transform, etc. can be used.

【0038】図8、図9はそれぞれ本発明の蓄積画像伝
送装置の他の実施例であって、図1の符号器120及び
125、復号器220及び225の詳細構成例を示す。
本実施例において、図1の符号器部180及び復号器部
280以外の部分は図1と全く同じであるので説明を省
略する。
FIGS. 8 and 9 show other embodiments of the stored image transmission apparatus according to the present invention, respectively, and show detailed configuration examples of the encoders 120 and 125 and the decoders 220 and 225 of FIG.
In this embodiment, parts other than the encoder unit 180 and the decoder unit 280 in FIG. 1 are exactly the same as those in FIG.

【0039】符号器120(125)は、現フレームと
予測フレームとのフレーム間予測誤差を求める減算手段
としての減算器400と、フレーム間予測誤差を符号化
する変換手段としての変換器405と、変換した結果を
量子化して可変長符号化する可変長符号化手段としての
可変長符号化器410と、可変長符号化データの出力先
を選択する可変長符号化データ出力先選択手段としての
スイッチ415と、可変長符号化データから変換結果を
復元するための逆可変長符号化手段としての逆可変長符
号化器420と、元のフレーム間予測誤差を求めるため
の逆変換手段としての逆変換器425と、フレーム間予
測誤差と前フレームとの加算を行い現フレームを復元す
る加算手段としての加算器430と、復元された現フレ
ームを遅延させる遅延手段としてのフレームメモリ44
0及び445と、復元された現フレームを蓄積するフレ
ームメモリ440または445を選択するフレームメモ
リ選択手段としてのスイッチ435と、フレームメモリ
440または445の出力を選択するフレームメモリ出
力選択手段としてのスイッチ450を備える。
The encoder 120 (125) includes a subtractor 400 as subtraction means for obtaining an inter-frame prediction error between the current frame and the predicted frame, a converter 405 as a conversion means for encoding the inter-frame prediction error, and A variable length encoder 410 as variable length encoding means for quantizing the result of the conversion and performing variable length encoding, and a switch as variable length encoded data output destination selecting means for selecting an output destination of the variable length encoded data. 415, an inverse variable length encoder 420 as an inverse variable length encoding unit for restoring a conversion result from the variable length encoded data, and an inverse transformation as an inverse transformation unit for obtaining an original inter-frame prediction error 425, an adder 430 as an adding means for adding the inter-frame prediction error to the previous frame and restoring the current frame, and delaying the restored current frame. Frame memory 44 as extending means
0 and 445, a switch 435 as a frame memory selecting means for selecting the frame memory 440 or 445 for storing the restored current frame, and a switch 450 as a frame memory output selecting means for selecting the output of the frame memory 440 or 445. Is provided.

【0040】復号器220(225)は、メモリ240
及び245からの入力を選択する入力選択手段としての
スイッチ455と、可変長符号からDCT変換結果を復
元する逆可変長符号化手段としての逆可変長符号化器4
60と、元のフレーム間予測誤差を求める逆変換手段と
しての逆変換器465と、フレーム間予測誤差と前フレ
ームとの加算を行い現フレームを復元する加算手段とし
ての加算器475と、復元された現フレームを蓄積して
遅延させる遅延手段としてのフレームメモリ480及び
485と、蓄積するフレームメモリ480または485
を選択するフレームメモリ選択手段としてのスイッチ4
75と、フレームメモリ480または485の出力を選
択するフレームメモリ出力選択手段としてのスイッチ4
90を備える。
The decoder 220 (225)
455 as an input selecting means for selecting an input from the first and second 245, and an inverse variable length encoder 4 as an inverse variable length encoding means for restoring the DCT transform result from the variable length code
60, an inverse transformer 465 as an inverse transform unit for obtaining the original inter-frame prediction error, an adder 475 as an addition unit for adding the inter-frame prediction error to the previous frame and restoring the current frame, and Frame memories 480 and 485 as delay means for storing and delaying the current frame, and a frame memory 480 or 485 for storing
Switch 4 as frame memory selection means for selecting
75 and a switch 4 as a frame memory output selecting means for selecting an output of the frame memory 480 or 485.
90.

【0041】以下、符号器120(125)と復号器2
20(225)の動作を重要なシーンとその他のシーン
の符号化方法に関して説明する。
Hereinafter, the encoder 120 (125) and the decoder 2
The operation of 20 (225) will be described with respect to the important scene and other scene encoding methods.

【0042】まず、重要なシーンの符号化方法について
説明する。
First, an important scene encoding method will be described.

【0043】まず、符号器120(125)及び復号器
220(225)のスイッチ415、435、450、
455、490、475を全てb側に接続する。A/D
変換器110によってA/D変換された現フレームの信
号からフレームメモリ445に蓄積されたフレーム間予
測値を減算器400で減算してフレーム間予測誤差を求
め、変換器405でフレーム間予測誤差に対して例えば
DCT変換を行い、可変長符号化器410でDCT変換
結果に対して量子化及び可変長符号化を行い、求められ
た可変長符号化データをメモリ145に出力する。ま
た、逆可変長符号化器420で可変長符号化データを逆
可変長符号化し、逆変換器425で逆変換して元のフレ
ーム間予測誤差を求める。次に、求められたフレーム間
予測誤差と前フレームとの加算を加算器430で行うこ
とにより現フレームを復元し、フレームメモリ445に
復元された現フレ−ムを蓄積する。次に、フレームメモ
リ445に蓄積された現フレームを次のフレームの予測
値として使用する。
First, the switches 415, 435, 450 of the encoder 120 (125) and the decoder 220 (225)
455, 490 and 475 are all connected to the b side. A / D
The interframe prediction value stored in the frame memory 445 is subtracted by the subtractor 400 from the signal of the current frame A / D converted by the converter 110 to obtain an interframe prediction error, and the converter 405 converts the interframe prediction error into an interframe prediction error. On the other hand, for example, DCT transformation is performed, and the variable length encoder 410 performs quantization and variable length encoding on the DCT transformation result, and outputs the obtained variable length encoded data to the memory 145. Also, the inverse variable length encoder 420 performs inverse variable length encoding on the variable length encoded data, and the inverse transformer 425 inversely transforms the data to obtain the original inter-frame prediction error. Next, the current frame is restored by adding the calculated inter-frame prediction error and the previous frame by the adder 430, and the restored current frame is stored in the frame memory 445. Next, the current frame stored in the frame memory 445 is used as a predicted value of the next frame.

【0044】復号器220(225)では、入力したメ
モリ245の符号化データを逆可変長符号化器460で
逆可変長符号化し、さらに逆変換器465で逆DCT変
換して元のフレーム間予測誤差を求める。次に、フレー
ム間予測誤差とフレームメモリ485に蓄積された前フ
レームとの加算を加算器470で行い、現フレームを復
元してD/A変換器210に出力する。また、フレーム
メモリ485に復元された現フレームを蓄積する。次
に、フレームメモリ485に蓄積された現フレームを次
のフレームの予測値として使用する。
In the decoder 220 (225), the input coded data in the memory 245 is subjected to inverse variable length encoding by the inverse variable length encoder 460, and further subjected to inverse DCT transform by the inverse transformer 465 to perform the original inter-frame prediction. Find the error. Next, the addition of the inter-frame prediction error and the previous frame stored in the frame memory 485 is performed by the adder 470, and the current frame is restored and output to the D / A converter 210. The restored current frame is stored in the frame memory 485. Next, the current frame stored in the frame memory 485 is used as a predicted value of the next frame.

【0045】次に、その他のシーンの符号化方法につい
て説明する。
Next, another method of encoding a scene will be described.

【0046】まず、符号器120(125)及び復号器
220(225)のスイッチ415、435、450、
455、490、475を全てa側に接続する。A/D
変換器110によってA/D変換された現フレームの信
号からフレームメモリ440に蓄積されたフレーム間予
測値を減算器400で減算してフレーム間予測誤差を求
め、変換器405でフレーム間予測誤差に対して例えば
DCT変換を行い、可変長符号化器410でDCT変換
結果に対して量子化及び可変長符号化を行い、求められ
た可変長符号化データをメモリ140に出力する。ま
た、逆可変長符号化器420で可変長符号化データを逆
可変長符号化し、逆変換器425で逆変換して元のフレ
ーム間予測誤差を求める。次に、求められたフレーム間
予測誤差と前フレームとの加算を加算器430で行うこ
とにより現フレームを復元し、フレームメモリ440に
復元された現フレームを蓄積する。次に、フレームメモ
リ440に蓄積された現フレームを次のフレームの予測
値として使用する。
First, the switches 415, 435, 450 of the encoder 120 (125) and the decoder 220 (225)
455, 490 and 475 are all connected to the a side. A / D
The interframe prediction value accumulated in the frame memory 440 is subtracted by the subtractor 400 from the signal of the current frame A / D converted by the converter 110 to obtain an interframe prediction error, and the converter 405 converts the interframe prediction error into an interframe prediction error. On the other hand, for example, DCT transformation is performed, quantization and variable length encoding are performed on the DCT transformation result by the variable length encoder 410, and the obtained variable length encoded data is output to the memory 140. Also, the inverse variable length encoder 420 performs inverse variable length encoding on the variable length encoded data, and the inverse transformer 425 inversely transforms the data to obtain the original inter-frame prediction error. Next, the current frame is restored by adding the obtained inter-frame prediction error and the previous frame by the adder 430, and the restored current frame is accumulated in the frame memory 440. Next, the current frame stored in the frame memory 440 is used as a predicted value of the next frame.

【0047】復号器220(225)では、入力したメ
モリ240の符号化データを逆可変長符号化器460で
逆可変長符号化し、さらに逆変換器465で逆DCT変
換して元のフレーム間予測誤差を求める。次に、フレー
ム間予測誤差とフレームメモリ480に蓄積された前フ
レームとの加算を加算器470で行い、現フレームを復
元してD/A変換器210に出力する。また、フレーム
メモリ480に復元された現フレームを蓄積する。次
に、フレームメモリ480に蓄積された現フレームを次
のフレームの予測値として使用する。なお、重要なシー
ンを符号化する場合とその他のシーンを符号化する場合
では、符号器220(225)の各種符号化パラメータ
を変更すれば良いことは明かである。
In the decoder 220 (225), the input coded data in the memory 240 is subjected to inverse variable length encoding by the inverse variable length encoder 460, and further subjected to inverse DCT transform by the inverse transformer 465 to perform the original inter-frame prediction. Find the error. Next, the addition of the inter-frame prediction error and the previous frame stored in the frame memory 480 is performed by the adder 470, and the current frame is restored and output to the D / A converter 210. Also, the restored current frame is stored in the frame memory 480. Next, the current frame stored in the frame memory 480 is used as a predicted value of the next frame. It is clear that various encoding parameters of the encoder 220 (225) may be changed between encoding an important scene and encoding other scenes.

【0048】したがって、上述の符号化方法をとること
により重要なシーン及びその他のシーンの符号化並びに
復号化を各々同一の符号器部及び復号器部で実現でき
る。
Therefore, by employing the above-described encoding method, encoding and decoding of important scenes and other scenes can be realized by the same encoder and decoder.

【0049】なお、変換器405、逆変換器425及び
465におけるフレーム間予測誤差の変換方法として
は、DCT変換の他にアダマール変換等が利用できる。
As a method of converting the inter-frame prediction error in the converter 405 and the inverse converters 425 and 465, Hadamard transform or the like can be used in addition to DCT.

【0050】[0050]

【発明の効果】以上説明したように本発明は、伝送する
画像を重要なシーンとその他のシーンに分け、重要なシ
ーンは動きや解像度を高品質に再現するためにその他の
シーンに比べて高い符号化速度で符号化し、その他のシ
ーンは重要なシーンに比べて低い符号化速度で符号化
し、全てのシーンの画像を符号化し終えた後、例えばそ
の他のシーンの最初の一部のシーンの符号化データを伝
送すると同時に重要なシーンの符号化データとその他の
シーンの符号化データとを多重化して伝送し、多重化し
て伝送した符号化データを元の重要なシーンの符号化デ
ータとその他のシーンの符号化データとに分離し、まず
最初に受信したその他のシーンの符号化データを復号化
して表示し、引続き受信したその他のシーンの符号化デ
ータも順次復号化して表示し、一方、重要なシーンの符
号化データは、順次メモリに蓄積し、重要なシーンを表
示すべき時間になった時に順次復号化して表示すること
により、低速度のディジタル回線を用いて伝送する場合
であっても、伝送する全てのシーンを重要なシーンと同
様に高品質に再現することはできないが、全ての符号化
データの伝送が終了するまで待つ必要がなく、重要なシ
ーンの動きや解像度を高品質に再現できることが可能と
なる効果がある。
As described above, according to the present invention, an image to be transmitted is divided into important scenes and other scenes, and important scenes are higher than other scenes in order to reproduce motion and resolution with high quality. After encoding at the encoding speed, encoding other scenes at a lower encoding speed than the important scene, and encoding the images of all the scenes, for example, encoding the first partial scene of the other scenes Coded data of important scenes and coded data of other scenes are multiplexed and transmitted at the same time as the coded data of the important scenes. It is separated from the encoded data of the scene, the encoded data of the other scenes received first is decoded and displayed, and the encoded data of the other scenes received continuously is decoded sequentially. On the other hand, coded data of important scenes are sequentially stored in a memory, and when important scenes have to be displayed, they are sequentially decoded and displayed, so that they can be transmitted using a low-speed digital line. Even if it does, all scenes to be transmitted cannot be reproduced with high quality like important scenes, but there is no need to wait until transmission of all encoded data is completed, And resolution can be reproduced with high quality.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の第一実施例の蓄積画像伝送装置を示す
ブロック図である。
FIG. 1 is a block diagram illustrating a stored image transmission device according to a first embodiment of the present invention.

【図2】符号化速度が低く、動画像のフレームを間引き
フレームの解像度を落して伝送する形態の例を示す図で
ある。
FIG. 2 is a diagram illustrating an example of a mode in which a coding speed is low and frames of a moving image are transmitted at a reduced resolution of a thinned frame.

【図3】符号化データの伝送形態の例を示す図である。FIG. 3 is a diagram illustrating an example of a transmission form of encoded data.

【図4】符号化データの伝送形態の例を示す図である。FIG. 4 is a diagram illustrating an example of a transmission form of encoded data.

【図5】重要なシーンの動きを忠実に再現する様子を示
す図である。
FIG. 5 is a diagram showing a state in which the movement of an important scene is faithfully reproduced.

【図6】図1中の符号器120、125の構成例を示す
ブロック図である。
FIG. 6 is a block diagram illustrating a configuration example of encoders 120 and 125 in FIG.

【図7】図1中の復号器220、225の構成例を示す
ブロック図である。
FIG. 7 is a block diagram illustrating a configuration example of decoders 220 and 225 in FIG.

【図8】図1中の符号器120、125の他の構成例を
示すブロック図である。
FIG. 8 is a block diagram showing another configuration example of the encoders 120 and 125 in FIG.

【図9】図1中の復号器220、225の他の構成例を
示すブロック図である。
9 is a block diagram illustrating another configuration example of the decoders 220 and 225 in FIG.

【符号の説明】[Explanation of symbols]

100 送信装置 200 受信装置 300 ディジタル回線 400 外部入力機器 170,270 操作・制御部 118 音声信号A/D変換器 110 画像信号A/D変換器 130 スイッチ 128 符号器 120 符号器 125 符号器 148 メモリ 140 メモリ 145 メモリ 135 信号多重部 160,260 網制御部 235 信号分離部 248 メモリ 240 メモリ 245 メモリ 228 復号器 220 復号器 225 復号器 230 スイッチ 218 音声信号D/A変換器 210 画像信号D/A変換器 150,250 制御信号 11 画像信号入力端子 18 音声信号入力端子 21 画像信号出力端子 28 音声信号出力端子 12 外部入力機器制御信号入出力端子 22 外部出力機器制御信号入出力端子 F 動画像のフレーム S その他のシーン M 重要なシーン 300,400 減算器 305,405 変換器 310,410 可変長符号化器 315,330,420,460 逆可変長符号化器 320,335,425,465 逆変換器 325,340,430,470 加算器 330,345,440,445,480,485
フレームメモリ 415,435,450,455,475,490
スイッチ
REFERENCE SIGNS LIST 100 Transmitting device 200 Receiving device 300 Digital line 400 External input device 170, 270 Operation / control unit 118 Audio signal A / D converter 110 Image signal A / D converter 130 Switch 128 Encoder 120 Encoder 125 Encoder 148 Memory 140 Memory 145 Memory 135 Signal multiplexing unit 160, 260 Network control unit 235 Signal separation unit 248 Memory 240 Memory 245 Memory 228 Decoder 220 Decoder 225 Decoder 230 Switch 218 Audio signal D / A converter 210 Image signal D / A converter 150, 250 Control signal 11 Image signal input terminal 18 Audio signal input terminal 21 Image signal output terminal 28 Audio signal output terminal 12 External input device control signal input / output terminal 22 External output device control signal input / output terminal F Frame of moving image S Other of M M Important scene 300, 400 Subtractor 305, 405 Transformer 310, 410 Variable length encoder 315, 330, 420, 460 Inverse variable length encoder 320, 335, 425, 465 Inverse transformer 325, 340 , 430, 470 Adders 330, 345, 440, 445, 480, 485
Frame memory 415, 435, 450, 455, 475, 490
switch

フロントページの続き (56)参考文献 特開 平2−254887(JP,A) (58)調査した分野(Int.Cl.7,DB名) H04N 7/24 - 7/68 H04N 7/16 - 7/173 H04N 5/91 - 5/956 Continuation of the front page (56) References JP-A-2-254887 (JP, A) (58) Fields investigated (Int. Cl. 7 , DB name) H04N 7/ 24-7/68 H04N 7/ 16-7 / 173 H04N 5/91-5/956

Claims (2)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 伝送する画像信号を、動きおよび/また
は解像度を高品質に再現したい重要なシーンとそれ以外
のその他のシーンに分け、重要なシーンは受信側で動き
および/または解像度を高品質に再現できるように高い
符号化速度で符号化してメモリに一時的に蓄積し、その
他のシーンは前記高い符号化速度に比べて低い符号化速
度で符号化してメモリに一時的に蓄積するステップと、 最初に前記重要なシーンに相当する符号化データのみを
伝送して受信装置の第1のメモリに蓄積するステップ
と、 次に、前記その他のシーンに相当する符号化データを伝
送して受信装置の第2のメモリに蓄積するステップと、 該第2のメモリに蓄積された符号化データは、直ちに復
号化して出力し、重要なシーンでは、前記第1のメモリ
に蓄積された符号化データを復号化して出力するステッ
プを有する蓄積画像伝送方法。
An image signal to be transmitted is moved and / or moved.
Are important scenes for which you want to reproduce the resolution with high quality and others
Other scenes, important scenes move on the receiving side
And / or high enough to reproduce the resolution in high quality
Encode at the encoding speed, temporarily store in memory,
Other scenes have a lower coding rate compared to the higher coding rate.
And temporarily storing the data in a memory, and first, only the encoded data corresponding to the important scene is stored.
Transmitting and storing in a first memory of the receiving device
If, then, the coded data corresponding to the other scene Den
Transmitting and storing the encoded data in the second memory of the receiving device;
The important scene is stored in the first memory
To decode and output the encoded data stored in
Stored image transmission method having a loop.
【請求項2】 伝送する画像信号を、動きおよび/また
は解像度を高品質に再現したい重要なシーンとそれ以外
のその他のシーンに分け、重要なシーンは受信側で動き
および/または解像度を高品質に再現できるように高い
符号化速度で符号化してメモリに一時的に蓄積し、その
他のシーンは前記高い符号化速度に比べて低い符号化速
度で符号化してメモリに一時的に蓄積し、最初に前記重
要なシーンに相当する符号化データのみを伝送し、次に
前記その他のシーンに相当する符号化データを伝送する
送信装置と、 最初に前記重要なシーンに相当する符号化データのみを
前記送信装置から受信して自装置の第1のメモリに蓄積
し、次に前記その他のシーンに相当する符号化データを
前記送信装置から受信して自装置の第2のメモリに蓄積
し、該第2のメモリに蓄積された符号化データは、直ち
に復号化して出力し、重要なシーンでは、前記第1のメ
モリに蓄積された符号化データを復号化して出力する受
信装置とを有し、 前記送信装置と前記受信装置がディジタル回線を介して
互いに接続されている蓄積画像伝送装置。
2. The method according to claim 1, further comprising the steps of :
Are important scenes for which you want to reproduce the resolution with high quality and others
Other scenes, important scenes move on the receiving side
And / or high enough to reproduce the resolution in high quality
Encode at the encoding speed, temporarily store in memory,
Other scenes have a lower coding rate compared to the higher coding rate.
And temporarily store it in memory.
Only the encoded data corresponding to the required scene is transmitted, and then
Transmit encoded data corresponding to the other scene
First, only the encoded data corresponding to the important scene is transmitted to the transmitting device.
Received from the transmitting device and stored in the first memory of the own device
Then, the encoded data corresponding to the other scene is
Received from the transmitting device and stored in its own second memory
The encoded data stored in the second memory is immediately
And outputs the decoded data. In an important scene, the first
Receiving and decoding encoded data stored in memory
Communication device, wherein the transmission device and the reception device are connected via a digital line.
Stored image transmission devices connected to each other.
JP21549693A 1993-08-31 1993-08-31 Stored image transmission method and apparatus Expired - Fee Related JP3312635B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP21549693A JP3312635B2 (en) 1993-08-31 1993-08-31 Stored image transmission method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP21549693A JP3312635B2 (en) 1993-08-31 1993-08-31 Stored image transmission method and apparatus

Publications (2)

Publication Number Publication Date
JPH0775093A JPH0775093A (en) 1995-03-17
JP3312635B2 true JP3312635B2 (en) 2002-08-12

Family

ID=16673356

Family Applications (1)

Application Number Title Priority Date Filing Date
JP21549693A Expired - Fee Related JP3312635B2 (en) 1993-08-31 1993-08-31 Stored image transmission method and apparatus

Country Status (1)

Country Link
JP (1) JP3312635B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100547146B1 (en) * 2003-10-06 2006-01-26 삼성전자주식회사 Image processing apparatus and the method thereof

Also Published As

Publication number Publication date
JPH0775093A (en) 1995-03-17

Similar Documents

Publication Publication Date Title
JP3085024B2 (en) Image recompressor and image recording device
JP3161017B2 (en) Video decoding device
KR950014860B1 (en) Image recording apparatus
JPH05153577A (en) Moving picture decoder
JPH06205438A (en) Method and device for encoding picture singal, method and device for decoding picture signal and picture signal recording medium
JPS61118085A (en) Coding system and device for picture signal
US5333137A (en) Coding system having data controlling mechanism activated when error is detected
JP3666047B2 (en) Information transmission method
JP3312635B2 (en) Stored image transmission method and apparatus
JP3834170B2 (en) Video code processing system
JPH08102908A (en) Reproducing device
JP3166501B2 (en) Image recompression method and image recompression device
JP2820630B2 (en) Image decoding device
JP3104805B2 (en) Videophone
JPH0678279A (en) Picture generating system
JP3384910B2 (en) Imaging device and image reproducing device
JP4193252B2 (en) Signal processing apparatus and method, signal decoding apparatus, and signal encoding apparatus
JPH1175198A (en) Image signal compressor and method and storage medium
JP2001028755A (en) Image coder and image coding method
KR0147934B1 (en) Digital image recording/reproducing apparatus
KR100337724B1 (en) Video signal coding
JPH10294943A (en) Video signal encoding system, video signal encoder, video signal decoding system and video signal decoder
JPH0759092A (en) Transmitter for picture signal
JP3139791B2 (en) Video packet communication system
JP3750217B2 (en) Video encoding transmission device

Legal Events

Date Code Title Description
LAPS Cancellation because of no payment of annual fees