CN1175672C - 运动图像信号的编码装置及编码方法 - Google Patents

运动图像信号的编码装置及编码方法 Download PDF

Info

Publication number
CN1175672C
CN1175672C CNB00801373XA CN00801373A CN1175672C CN 1175672 C CN1175672 C CN 1175672C CN B00801373X A CNB00801373X A CN B00801373XA CN 00801373 A CN00801373 A CN 00801373A CN 1175672 C CN1175672 C CN 1175672C
Authority
CN
China
Prior art keywords
picture
encoding
coding
image
encoding block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB00801373XA
Other languages
English (en)
Other versions
CN1317207A (zh
Inventor
���念��
井村康治
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1317207A publication Critical patent/CN1317207A/zh
Application granted granted Critical
Publication of CN1175672C publication Critical patent/CN1175672C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H04N19/895—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

画面计数器(205)从通信开始时起对输入的画面进行计数并输出。在来自画面计数器(205)的计数值在预定值(N)以下的情况下，编码控制部(206)输出用于控制的编码模式信息，使得进行帧内编码，而在大于(N)的情况下，输出运动补偿预测方式的编码模式信息。此外，将控制信号输出到量化部(210)，使得在计数值在(N-1)以下的情况下，增大量化参数的值，而在N的情况下，减小量化参数的值。

Description

运动图像信号的编码装置及编码方法
技术领域
本发明涉及电视电话、电视会议等使用的数字运动图像信号的编码装置及编码方法，特别涉及发生传输差错的传输线路上的图像通信中的数字运动图像信号的编码装置及编码方法、以及解码装置及解码方法。
背景技术
作为现有数字运动图像信号的编码方法，可以举出1993年3月推荐的ITU-T Recommendation(推荐)H.261中的编码方法。H.261的特征性的编码方法是运动补偿预测方式。运动补偿预测方式具体如下进行。
首先，比较输入图像画面和前一编码画面，测定其间的运动量(运动检测)。根据该运动量和前一编码画面来预测输入图像画面。计算该预测出的图像(预测图像)和输入图像画面之间的差分(预测误差信号)，将该预测误差信号和前述的运动量传输到接收端。由此，能够以少的数据量来传输图像信息。
此外，在H.261中有下述方法，与上述运动补偿预测方式不同，不用与前一编码画面之间的差分，而是对输入图像画面本身进行编码，该方法被称为帧内编码方式。帧内编码方式与运动补偿预测方式相比，产生的数据量多，用于通信开始时等不存在前一编码画面的情况、或者与前一编码画面之间的相关低、比运动补偿预测方式产生的数据量多的情况。
此外，在传输线路上发生传输差错、图像的一部分的画质恶化的情况下，在只传输预测误差信号的运动补偿预测方式中，画质恶化传播到下一画面以后，所以在这种情况下，通过使用帧内编码，能够对画质恶化进行恢复。
运动补偿预测方式和帧内编码方式都将画面分割为16×16像素的块(编码块)，对每个编码块进行。将对画面内所有编码块强制性地进行帧内编码所得的画面称为“帧内画面”，而将通过运动补偿预测方式编码所得的画面称为“帧间画面”。
另一方面，在传输中发生传输差错的情况下抑制传输差错引起的画质恶化的技术有隐蔽处理技术。隐蔽处理技术是接收端自发进行的处理，不是推荐中规定的内容。然而，通过进行该处理，能够抑制发生传输差错时的画质恶化。作为隐蔽处理技术之一，有下述方法：在发生传输差错、不能对接收到的编码块数据正确地进行解码的情况下，原封不动地输出前一编码画面的同一位置上的编码块数据。
此外，作为隐蔽处理技术，有下述等方法：将周边的不能正确解码的编码块的运动量用作当前编码块的运动量，用它根据前一编码画面来生成预测图像并输出。
在图像通信开始时，通常最初的第1画面使用帧内画面。这是因为不存在运动补偿预测编码时必需的前一编码画面。
在传输第1画面的过程中，如果发生传输差错，则第1画面的一部分的编码块不能正确解码。在此情况下，由于不存在前一编码画面，所以不能进行使用前一编码画面的一部分的隐蔽处理。因此，对于该第1画面的一部分，不得不用预定的值进行隐蔽处理。
这样，在第1画面中发生传输差错时的画质与存在前一编码画面的情况下进行隐蔽处理时的画质相比显著恶化。此外，有下述课题：由于使用运动补偿预测方式，所以在第2画面以后，第1画面中的画质恶化随着时间的经过而传播下去。
发明内容
本发明的目的在于提供一种运动图像信号的编码装置及编码方法，能够抑制通信开始时的显著的画质恶化。
本发明的主题是：从通信开始时起，连续(N次)用帧内编码方式对多个画面进行编码，对于最初的(N-1)个画面，粗糙地传输画质，而精细地传输最后的第N个画面。
本发明提供的第1技术方案的一种运动图像信号的编码装置，包括：帧内编码部件，对运动图像信号分割为多份所得的编码块原封不动地进行编码，即进行帧内编码；帧间编码部件，进行画面间编码；以及编码控制部件，进行编码的控制，使得对从通信开始时起N个(N≥2)画面连续进行帧内编码，其中，上述编码控制部件使从通信开始时起N-1个画面的画质较从通信开始起第N个画面的画质粗糙。
本发明还提供一种包括第1技术方案的运动图像信号的编码装置的基站装置。
本发明还提供一种包括第1技术方案的运动图像信号的编码装置的通信终端装置。
本发明还提供一种运动图像信号的编码方法，包括：帧内编码步骤，对运动图像信号分割为多份所得的编码块原封不动地进行编码，即进行帧内编码；帧间编码步骤，进行画面间编码；以及编码控制步骤，进行编码的控制，使得对从通信开始时起N个(N≥2)画面连续进行帧内编码的同时，使从通信开始时起N-1个画面的画质较从通信开始起第N个画面的画质粗糙。
附图说明
图1是包括本发明一实施例的编码装置的无线通信装置的结构方框图；
图2是本发明一实施例的编码装置的结构方框图；
图3是与本发明一实施例的编码装置对应的解码装置的结构方框图；以及
图4是包括本发明的编码装置的无线通信装置中使用的信号的帧结构图。
具体实施方式
以下，参照附图来详细说明本发明的实施例。
(实施例1)
图1是包括本发明一实施例的编码装置的无线通信装置的结构方框图。这里，所谓无线通信装置，是指数字无线通信系统中的基站装置或移动台等通信终端装置。此外，无线通信终端装置可以是便携式终端，也可以是连接到计算机上使用的形态。
在该无线通信装置中，在发送端由摄像机等摄像部101取入图像，作为图像信号输出到A/D变换器102。在A/D变换器102中，图像信号被变换为数字声音信号，输出到编码部103。编码部103对数字声音信号进行图像编码处理，将编码过的信息输出到调制解调部104。调制解调部104对编码过的图像信号进行数字调制，送至无线发送电路105。在无线发送电路105中，对调制后的信号施加规定的无线发送处理。该信号经天线106发送。处理器107适当地用RAM 109及ROM 108中存储的数据进行处理。
另一方面，在无线通信装置的接收端，天线106接收到的信号由无线接收电路110施加规定的无线接收处理，送至调制解调部104。在调制解调部104中，对接收信号进行解调处理，将解调后的信号输出到解码部111。解码部111对解调后的信号进行解码处理，得到数字解码信号，将该数字解码信号输出到D/A变换器112。D/A变换器112将从解码部111输出的数字解码信号变换为模拟解码信号，输出到显示器等显示部113。最后，显示部113显示图像。
这里，编码部103及解码部111由DSP等处理器107用RAM 109及ROM108中存储的存储器来操作。此外，这些操作程序被存储在ROM 108中。
图2是图1所示的无线通信装置的编码部中应用的本发明的编码装置的结构方框图。
在图2中，光栅-编码块变换部201将取得的图像数据变换为光栅编码块。光栅-编码块变换部201变换过的光栅编码块的位置信息被送至复用部216。此外，该光栅编码块数据(当前画面)被送至运动检测部202。
在运动检测部202中，根据前一画面和当前画面之间的差分来检测图像中的运动。此时，前一画面被从帧存储器203输出。存储器控制部204根据运动检测部202的运动量信息来控制帧存储器203中存储的再现图像的输出。运动量信息被送至可变长编码部215，在那里被变换为霍夫曼码，被送至复用部216。
画面计数器205对画面的个数进行计数。画面计数器205的计数值被送至编码控制部206。编码控制部206判定是帧内编码模式还是运动补偿预测方式模式，将判定的编码模式输出到开关207，根据该编码模式进行量化参数的控制。该量化参数被送至量化部210。编码模式信息被送至复用部216。
在运动补偿预测方式模式的情况下，编码块数据由减法器208与帧存储器203中存储的前一画面进行比较，其差分被送至离散余弦变换部(DCT)209。在帧内编码模式的情况下，编码块数据原封不动地被送至离散余弦变换部209。
离散余弦变换后的数据被送至量化部210，根据从编码控制部206送来的量化参数进行量化。该DCT系数的量化数据被送至可变长编码部211，并且被送至逆量化部212。在可变长编码部211中，将DCT系数的量化数据变换为霍夫曼码，送至复用部216。
送至逆量化部212的DCT系数的量化数据被逆量化，成为DCT系数，被送至逆离散余弦变换部213。在逆离散余弦变换部213中，用DCT系数进行逆离散余弦变换，得到与前一画面和当前画面之间的差分相当的编码块数据。
在加法器214中，将该编码块数据和当前画面相加，得到当前画面，即将运动部分更新到前一画面，得到当前画面，该当前画面被送至帧存储器203并存储。
在复用部216中，对DCT系数、运动量信息、编码块的位置信息、及编码模式进行复用，得到复用数据。发送该复用数据。
接着，说明具有上述结构的编码装置的操作。
输入图像在光栅-编码块变换部201中被分割为16×16像素大小的编码块并输出。接着，分割出的编码块数据被送至运动检测部202，在那里与帧存储器203内的前画面进行比较，求当前编码块的运动量(前一画面和当前画面之间的差分)。该运动量信息被送至可变长编码部215，在那里被变换为霍夫曼码，被送至复用部216。
从通信开始时起，画面计数器205对输入的画面进行计数并输出。选择要编码的图像的处理部(未图示)预先选择出的图像的信息(编码图像选择信息)被输入到画面计数器205。画面计数器205每当输入该图像信息时进行递增计数。此外，画面计数器205在装置电源接通时、或图像传输初始时自动被复位。
开关207根据编码控制部206的编码方式信息来切换来自帧存储器203的画面输出。具体地说，在帧内编码方式的情况下，将开关207切换到0一方，而在运动补偿预测方式的情况下，将开关207切换到帧存储器203，从帧存储器203将前一画面的数据输出到减法器208。
在减法器208中，求前一画面和当前编码块数据之间的差分，将该差分值输出到离散余弦变换部209。在离散余弦变换部209中，差分值被变换到频域，成为DCT系数，被送至量化部210。在量化部210中，DCT系数被量化，作为量化数据被送至可变长编码部211。在可变长编码部211中，量化过的数据被变换为霍夫曼码。在帧内编码方式的情况下，差分值原封不动地成为编码块数据，而在运动补偿预测方式的情况下，差分值成为运动预测误差信号。
量化过的频域的DCT系数由逆量化部212和逆离散余弦变换部213还原为原来的差分值，与来自帧存储器203的前一画面相加，写入到帧存储器203中，用于下一画面的编码。
变换为霍夫曼码的编码块数据、DCT系数、运动量信息、编码块位置信息、及编码模式由复用部216作为1个数据来复用并输出。例如，在复用数据中，如图4所示，在起始码401、首标403之间配置编码块位置信息402，在首标403之后配置编码模式信息404、运动量信息405、及余弦变换系数406。
在本发明的编码装置中，通过使用上述的画面计数器，在通信开始时或图像传输初始时，多次传输同一图像，可靠地传输作为基准的第1个图像，可靠地进行后级的处理、即将与基准图像之间的差分更新到基准图像的处理。其结果是，能够降低图像接收端的画质恶化。
接着，说明用该画面计数器进行的传输控制。
在来自画面计数器205的计数值在预定值(N)以下的情况下，编码控制部206将进行控制以进行帧内编码的编码模式信息输出到量化部210。在此情况下，根据来自编码控制部206的指示，开关207切换到0端，所以在量化部210中，对帧内画面进行DCT系数的量化。
此外，在画面计数器205的计数值大于N的情况下，将进行控制以进行运动补偿预测方式编码的编码模式信息输出到量化部210。在此情况下，根据来自编码控制部206的指示，开关207切换到帧存储器203端，所以在量化部120中，对帧间画面进行DCT系数的量化。
此外，编码控制部206将控制信号输出到量化部210，使得在计数值在(N-1)以下的情况下，增大量化参数的值，即，使图像变得粗糙，而在N的情况下，减小量化参数的值，即，使图像变得精细。
例如，在N＝3的情况下，即在多次传输的次数是3次的情况下，各画面中的编码模式和量化参数的一例如下所示。
第1画面      ：帧内编码方式      量化参数31
第2画面      ：帧内编码方式      量化参数31
第3画面      ：帧内编码方式      量化参数8
第4画面以后  ：运动补偿预测方式  量化参数任意
(量化参数越小，表明图像越精细)
进行多次传输的图像的画质及传输次数可以考虑可靠地进行传输及数据量来决定。如果考虑这些，最好如上所述，使传输次数为3次，只使最终的图像精细。
这里，如下计算使传输次数为3次的情况下的出错难易。作为前提条件，设
传输差错率为1e-4(平均每1万比特错1比特)
精细画质时的码量为16000比特
粗糙画质时的码量为6400比特。
在对第1画面和第2画面粗糙地进行编码、对第3画面精细地进行编码的情况下，
第1画面的码量为6400比特
第2画面的码量为6400比特
第3画面的码量为16000比特。
此时，如果传输差错率是1e-4，则第1画面发生的传输差错是6400比特×1e-4＝0.64。此外，如果设第1画面内包含的传输单位(将画面划分为带状来传输时的单位)数为9个，如果9个传输单位内任一个发生差错的概率均等，则为6400比特×1e-4×1/9＝0.07。
同样，对于第2画面，也为6400比特×1e-4×1/9＝0.07。对于第3画面，码量是16000比特，所以为16000比特×1e-4×1/9＝0.18。
在9个传输单位内、3次都在同一位置发生差错的概率为
0.07×0.07×0.18＝0.008。
在现有编码装置中，只有第1画面是帧内编码方式的画面，而第2画面以后是运动补偿预测方式的画面，所以不能使用基准图像的概率(编码块由于传输差错而不能解码的概率)为0.18。因此，与现有编码装置相比，能够将不能使用基准图像的概率降低约95％。
对于码量，帧内编码方式(Ia)码量(精细)：帧内编码方式(Ib)码量(粗糙)：运动补偿预测方式(P)码量约是7∶3∶1，所以如果比较从通信开始到4个画面的码量，则现有：IPPP＝7，1，1，1＝9，本发明：IbIbIaP＝3，3，7，1＝14，增加量约为1.5倍。
这样，考虑码量的增加量和不能使用第1画面的概率，能够决定传输次数和画质等。产生码量因输入图像而异，所以它们的传输次数和画质也适当变更来进行。
在本发明的编码装置中，从通信开始时起，连续(N次)用帧内编码方式对多个画面进行编码，对于最初的(N-1)个画面，粗糙地传输画质，而精细地传输最后的第N个画面。
根据本发明，通过连续(N-1)次传输帧内画面，能够减小同一位置的编码块一次也不能正确解码的概率，不会使画质恶化传播。因此，即使在第1画面发生传输差错、有不能解码的编码块的情况下，由于下一画面被进行帧内编码来传输，所以在下一画面，只要同一位置的编码块因传输差错而不能正确解码，就能够对该部分的画质恶化进行恢复。
在此情况下，帧内画面与运动补偿预测方式的帧内画面相比码量多，所以从发送端传输到接收端需要很多时间。因此，通过粗糙地传输最初的(N-1)个画面的画质，而将码量抑制得很少，缩短传输时间。此外，通过使(N-1)个画面的画质粗糙，减少码量，能够减小该画面发生传输差错的概率。
(实施例2)
图3是与本发明一实施例的编码装置对应的解码装置的结构方框图。
在图3中，接收信号被送至分离部301，在那里被分离为DCT系数的霍夫曼码、运动量信息的霍夫曼码、编码块位置信息、编码模式信息，被送至各自的处理部。具体地说，DCT系数被送至可变长解码部302，运动量信息被送至可变长编码部305，编码块位置信息被送至帧存储器307及解码差错存储器310，编码模式信息被送至帧内发送请求判定部309。
可变长解码部302解码过的DCT系数被送至逆量化部303，被逆量化。该逆量化过的DCT系数被送至逆离散余弦变换部304，在那里被用于逆离散余弦变换。
可变长解码部305解码过的运动量信息被送至存储器控制部306。存储器控制部306控制从帧存储器307输出的画面。如果在可变长解码部302、305中发生解码差错，则将解码差错信号送至解码差错存储器310。
在帧内发送请求判定部309中，根据发生解码差错的画面是否是帧内画面，即根据是否有用帧内编码方式一次也不能正确解码的解码块，来判定是否需要请求帧内发送，将帧内发送请求信号送至通信对方端。
在该解码装置中，在从通信开始时起接收到的帧内画面中，将因传输差错而不能正确解码的编码块的位置存储到存储器中，在通信开始后初次接收到帧间画面的情况下，在存在通过帧内编码方式一次也不能正确解码的编码块时，进行控制以向发送端发出帧内画面的发送请求。具体地说，在初次检测出帧间画面的情况下，参照存储器来确认是否存在不能正确解码的编码块，判定是否向发送端发出帧内画面发送请求。
这是基于下述理由。即，在接收帧间画面时，在存在一次也不能正确地通过帧内编码方式进行解码的编码块的情况下，由于该编码块没有被写入任何图像数据，所以该部分的画质显著恶化。如果不顾存在这种编码块，而接收帧间画面，则其画质恶化会传播，连续输出难看的图像。
因此，在通信开始后，存储用帧内编码方式一次也不能正确进行的编码块的位置，在通信开始后初次接收到帧间画面时，如果有用帧内编码方式一次也不能正确解码的编码块，则对该帧同画面不进行解码，而向发送端请求帧内画面。由此，能够得到用帧内编码方式一次也不能正确进行的编码块的帧内画面，帧同画面不会参照用帧内编码方式一次也不能正确进行的编码块，能够避免显著的画质恶化在时间上的传播。
接着，说明上述结构的解码装置的操作。
首先，从发送端送来的数据在分离部301中被分离为DCT系数的霍夫曼码、运动量信息的霍夫曼码、编码块位置信息、和编码模式信息。
DCT系数的霍夫曼码在可变长解码部302中被解码为量化后的DCT系数，在逆量化部303中被逆量化为DCT系数。该逆量化过的DCT系数被送至逆离散余弦变换部304，在那里被用于逆离散余弦变换，得到图像数据。
运动量信息的霍夫曼码也同样由可变长解码部305解码为运动量信息，被送至存储器控制部306。存储器控制部306根据运动量信息来进行地址计算，用于从帧存储器307中读出图像数据。
帧存储器307的输出和逆离散余弦变换后的图像数据由加法器308相加，再现再现图像。再现图像被输出，并且被存储到帧存储器307中，用于下一画面的解码。
可变长解码部302、305在解码中因传输差错而检测出作为可变长码不存在的码的情况下，分别输出解码差错信号。解码差错存储器310以编码块为单位来存储哪个编码块不能正确解码。
解码差错存储器310由非0非1的值进行初始化，对正确解码过的编码块写入0，对发生解码差错的编码块写入1。进行控制，使得对于写入1次0的编码块，即使其后该编码块发生解码差错，也不写入1。即，在发生解码差错的情况下，从解码差错存储器310中读出该编码块的差错状态。如果是0则不更新解码差错存储器310的内容，如果是初始值则写入1，而如果是1则原封不动。
通过这样进行控制，一次也不能用帧内编码模式正确解码的编码块即使其后不能正确解码，也能够不存储到解码差错存储器310中。
帧内发送请求判定部309接收分离出的编码模式信息，在接收开始后初次接收到帧间画面的情况下，参照解码差错存储器310。在编码模式是帧内编码模式、在解码差错存储器310中存在一次也不能正确解码的编码块的情况下，向发送端(通信对方端)输出帧内发送请求信号。
在解码端，在具有隐蔽处理功能的情况下，在接收第N画面时，即使在发生传输差错的情况下，用于进行隐蔽处理的前一编码画面已经存在、而且连续(N-1)次同一位置的编码块不能正确解码的概率非常低，所以能够避免显著的画质恶化。
通过进行这种控制，能够得到没有用帧内编码方式一次也不能正确进行的编码块的帧内画面，帧间画面不会参照用帧内编码方式一次也不能正确进行的编码块，能够避免显著的画质恶化在时间上的传播。
采用兼备上述本发明的编码装置及解码装置的结构，通过在发送端和接收端使用该结构，能够进行双向图像通信。
上述实施例1、2的运动图像编码/解码是作为运动图像编码装置/运动图像解码装置来说明的，但是将这些运动图像编码/解码也可以作为软件来构成。例如，也可以将上述运动图像编码/解码的程序存储到ROM中，根据该程序按照CPU的指示来操作。此外，也可以由计算机从记录这种软件的媒体中读出软件，由计算机执行运动图像编码/解码。在这种情况下，也呈现与上述实施例1、2同样的作用、效果。
在上述实施例中，说明了在传输中容易发生差错的无线传输线路中的情况，但是本发明也可以应用于有线传输线路的情况。本发明在无线图像通信终端中能特别发挥其效果。
本发明的编码装置采用下述结构，包括：帧内编码部，对运动图像信号分割为多份所得的编码块原封不动地进行编码，即进行帧内编码；以及编码控制部，进行编码的控制，使得对从通信开始时起N个画面连续进行帧内编码。
根据该结构，通过连续(N-1)次传输帧内画面，能够减小同一位置的编码块一次也不能正确解码的概率，不会使画质恶化传播。因此，即使在第1画面发生传输差错、有不能正确解码的编码块的情况下，由于下一画面被进行帧内编码来传输，所以在下一画面，只要同一位置的编码块因传输差错而不能正确解码，就能够对该部分的画质恶化进行恢复。
本发明的编码装置采用下述结构，其中，上述编码控制部使从通信开始时起N-1个画面的画质比较粗糙，而使从通信开始起第N个画面的画质比较精细。
根据该结构，能够将码量抑制得很少，缩短传输时间，能够减小画面发生传输差错的概率。
本发明的解码装置采用下述结构，包括：解码部，对图像编码数据进行解码；存储部，在图像编码数据是帧内编码过的图像编码数据的情况下，存储与因传输差错而不能正确解码的图像编码数据对应的运动图像信号中的编码块的位置信息；以及请求部，在通信开始以后初次接收到运动补偿预测编码过的图像编码数据的情况下，确认存储部中是否存在一次也不能正确解码的编码块，在确认为存在时，请求发送帧内编码过的画面。
根据该结构，能够得到没有用帧内编码方式一次也不能正确进行的编码块的帧内画面，能够避免显著的画质恶化在时间上的传播。
本发明的解码装置采用下述结构，其中，在通信开始以后初次接收到运动补偿预测编码过的图像编码数据的情况下，在存储部中存在一次也不能正确解码的编码块时，解码部不进行运动补偿预测编码过的图像编码数据的解码。
根据该结构，帧间画面不会参照用帧内编码方式一次也不能正确进行的编码块，能够避免显著的画质恶化在时间上的传播。
本发明的编码方法包括：帧内编码步骤，对运动图像信号分割为多份所得的编码块原封不动地进行编码，即进行帧内编码；以及编码控制步骤，进行编码的控制，使得对从通信开始时起N个画面连续进行帧内编码，并且使从通信开始时起N-1个画面的画质比较粗糙，而使从通信开始起第N个画面的画质比较精细。
根据该方法，通过连续(N-1)次传输帧内画面，能够减小同一位置的编码块一次也不能正确解码的概率，不会使画质恶化传播。因此，即使在第1画面发生传输差错、有不能解码的编码块的情况下，由于下一画面被进行帧内编码来传输，所以在下一画面，只要同一位置的编码块因传输差错而不能正确解码，就能够对该部分的画质恶化进行恢复。
本发明的解码方法包括：解码步骤，对图像编码数据进行解码；存储步骤，在上述图像编码数据是帧内编码过的图像编码数据的情况下，存储与因传输差错而不能正确解码的图像编码数据对应的运动图像信号中的编码块的位置信息；以及请求步骤，在通信开始以后初次接收到运动补偿预测编码过的图像编码数据的情况下，确认是否存在一次也不能正确解码的编码块，在确认为存在时，请求发送帧内编码过的画面。
根据该方法，能够得到没有用帧内编码方式一次也不能正确进行的编码块的帧内画面，能够避免显著的画质恶化在时间上的传播。
本发明的解码方法在解码步骤中，在通信开始以后初次接收到运动补偿预测编码过的图像编码数据的情况下，在存在一次也不能正确解码的编码块时，不进行运动补偿预测编码过的图像编码数据的解码。
根据该方法，帧间画面不会参照用帧内编码方式预测也不能正确进行的编码块，能够避免显著的画质恶化在时间上的传播。
如上所述，根据本发明，能够将同一位置的编码块用帧内编码方式一次也不能解码的概率抑制得很低，不会使显著的画质恶化在时间上传播，所以即使用发生传输差错的传输线路进行图像传输，也能够提供好看的图像。
此外，在有同一位置的编码块用帧内编码方式一次也不能解码的编码块的情况下，不进行帧间画面的解码，所以能够避免显著的画质恶化，不会使恶化在时间上传播，能够提供好看的图像。
本说明书基于1999年7月28日申请的特愿平11-213808号。其内容全部包含于此。
产业上的可利用性
本发明能够应用于数字无线通信系统中的基站装置或移动台等通信终端装置。

Claims (4)

1、一种运动图像信号的编码装置，包括：
帧内编码部件，对运动图像信号分割为多份所得的编码块原封不动地进行编码，即进行帧内编码；
帧间编码部件，进行画面间编码；以及
编码控制部件，进行编码的控制，使得对从通信开始时起N个(N≥2)画面连续进行帧内编码，
其中，上述编码控制部件使从通信开始时起N-1个画面的画质较从通信开始起第N个画面的画质粗糙。
2、一种包括如权利要求1所述的运动图像信号的编码装置的基站装置。
3、一种包括如权利要求1所述的运动图像信号的编码装置的通信终端装置。
4、一种运动图像信号的编码方法，包括：
帧内编码步骤，对运动图像信号分割为多份所得的编码块原封不动地进行编码，即进行帧内编码；
帧间编码步骤，进行画面间编码；
以及编码控制步骤，进行编码的控制，使得对从通信开始时起N个(N≥2)画面连续进行帧内编码的同时，使从通信开始时起N-1个画面的画质较从通信开始起第N个画面的画质粗糙。
CNB00801373XA 1999-07-28 2000-07-10 运动图像信号的编码装置及编码方法 Expired - Fee Related CN1175672C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP213808/1999 1999-07-28
JP21380899A JP3483806B2 (ja) 1999-07-28 1999-07-28 動画像信号の符号化装置及び符号化方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CNA2004100058668A Division CN1555200A (zh) 1999-07-28 2000-07-10 运动图像信号的解码装置

Publications (2)

Publication Number Publication Date
CN1317207A CN1317207A (zh) 2001-10-10
CN1175672C true CN1175672C (zh) 2004-11-10

Family

ID=16645390

Family Applications (2)

Application Number Title Priority Date Filing Date
CNA2004100058668A Pending CN1555200A (zh) 1999-07-28 2000-07-10 运动图像信号的解码装置
CNB00801373XA Expired - Fee Related CN1175672C (zh) 1999-07-28 2000-07-10 运动图像信号的编码装置及编码方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CNA2004100058668A Pending CN1555200A (zh) 1999-07-28 2000-07-10 运动图像信号的解码装置

Country Status (8)

Country Link
US (1) US6885704B1 (zh)
EP (1) EP1119207A4 (zh)
JP (1) JP3483806B2 (zh)
KR (1) KR100414339B1 (zh)
CN (2) CN1555200A (zh)
AU (1) AU5850900A (zh)
BR (1) BR0006964A (zh)
WO (1) WO2001008420A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1598941A4 (en) * 2003-02-03 2009-02-18 Sharp Kk DEVICE AND METHOD FOR CODING, DEVICE AND METHOD FOR DECODING, PROGRAM AND RECORDING MEDIUM
JP4520229B2 (ja) * 2003-07-01 2010-08-04 株式会社エヌ・ティ・ティ・ドコモ 通信装置およびプログラム
KR100849512B1 (ko) 2007-02-09 2008-07-31 엠텍비젼 주식회사 이미지 센서, 상기 이미지 센서의 프레임 순서 식별 방법, 및 상기 방법의 프로그램을 기록하는 기록 매체
KR100949917B1 (ko) * 2008-05-28 2010-03-30 한국산업기술대학교산학협력단 적응적 인트라 예측을 통한 고속 부호화 방법 및 시스템
WO2011042905A1 (en) * 2009-10-08 2011-04-14 Hd Medix Distributed video compression system
JPWO2019180869A1 (ja) * 2018-03-22 2021-03-11 株式会社光電製作所 画像伝送システム、画像送信装置及び画像受信装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0723377A (ja) * 1993-06-22 1995-01-24 Canon Inc 画像送信装置
JPH07298231A (ja) 1994-04-27 1995-11-10 Canon Inc 多地点動画像通信システム、その制御装置及び動画像通信端末
JPH07312755A (ja) * 1994-05-18 1995-11-28 N T T Idou Tsuushinmou Kk 動画像符号化復号化装置
JPH07322248A (ja) * 1994-05-30 1995-12-08 Matsushita Electric Ind Co Ltd 動画像データの伝送方法および伝送装置
JPH08294123A (ja) * 1995-04-24 1996-11-05 Kokusai Electric Co Ltd 動画像データ伝送装置
US5568200A (en) * 1995-06-07 1996-10-22 Hitachi America, Ltd. Method and apparatus for improved video display of progressively refreshed coded video
JP3630474B2 (ja) * 1995-07-14 2005-03-16 沖電気工業株式会社 動画像伝送システム及び動画像伝送装置
JP3068002B2 (ja) * 1995-09-18 2000-07-24 沖電気工業株式会社 画像符号化装置、画像復号化装置及び画像伝送システム
JP3297293B2 (ja) 1996-03-07 2002-07-02 三菱電機株式会社 動画像復号方法および動画像復号装置
US5793895A (en) * 1996-08-28 1998-08-11 International Business Machines Corporation Intelligent error resilient video encoder
JPH10145794A (ja) 1996-11-11 1998-05-29 Oki Electric Ind Co Ltd 画像符号化方法及び画像符号化装置
JPH10234045A (ja) 1997-02-21 1998-09-02 Oki Electric Ind Co Ltd 動画像通信装置
AR016812A1 (es) * 1997-08-14 2001-08-01 Samsung Electronics Co Ltd Metodo para transmitir informacion de video comprimida, disposiciones de compresion y de grabacion de video y aparato de reproduccion de video
JPH1169355A (ja) * 1997-08-20 1999-03-09 Sharp Corp 画像伝送装置
JPH11169355A (ja) 1997-12-11 1999-06-29 Shimadzu Corp Ｍｒイメージング装置
GB2347038A (en) * 1999-02-18 2000-08-23 Nokia Mobile Phones Ltd A video codec using re-transmission

Also Published As

Publication number Publication date
AU5850900A (en) 2001-02-13
JP3483806B2 (ja) 2004-01-06
EP1119207A4 (en) 2005-12-14
CN1555200A (zh) 2004-12-15
BR0006964A (pt) 2001-08-07
KR20010075389A (ko) 2001-08-09
WO2001008420A1 (en) 2001-02-01
KR100414339B1 (ko) 2004-01-07
US6885704B1 (en) 2005-04-26
CN1317207A (zh) 2001-10-10
EP1119207A1 (en) 2001-07-25
JP2001045490A (ja) 2001-02-16

Similar Documents

Publication Publication Date Title
CN1224268C (zh) 运动图象编码装置及运动图象解码装置
CN1116768C (zh) 图像编码装置和方法
CN108141591B (zh) 用于非4:4:4色度子采样的显示流压缩(dsc)的熵译码技术
KR101001053B1 (ko) 가변 길이 부호화 방법 및 가변 길이 복호화 방법
US20100309977A1 (en) Adaptive Intra Mode Selection
EP2733951A1 (en) Method for decoding moving picture using adaptive scanning
CN101031086A (zh) 视频信息编码方法和视频信息解码方法
CN1791219A (zh) 用于片上系统的双层总线结构
TW201320751A (zh) 利用轉換操作之影音編碼及解碼方法
CN1627824A (zh) 位流控制的后处理过滤
JP2010193509A (ja) 復号化システムおよび復号化装置
JP2017523656A (ja) ディスプレイストリーム圧縮（ｄｓｃ）のためのエントロピーコーディング技法
CN102685478A (zh) 编码方法以及装置、解码方法以及装置
JP2015136173A (ja) 映像復号化装置
CN1825964A (zh) 片上处理视频数据的方法和系统
CN1186943C (zh) 块间预测编码/译码的装置和方法
CN1399472A (zh) 多信道图像编码装置及其编码方法
CN1473434A (zh) 图像编码装置和图像编码方法
CN1175672C (zh) 运动图像信号的编码装置及编码方法
CN101040534A (zh) 运动图像转换方法、设备、系统和服务器设备及程序
CN1164124C (zh) 图像压缩处理方法
CN102685483A (zh) 编码方法以及装置、解码方法以及装置
CN1833446A (zh) 运动图像压缩编码方式转换装置及运动图像通信系统
CN1305315C (zh) 图像编码装置
CN1926862A (zh) 视频信息传输

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20041110