KR100378337B1 - 화상복호화장치 - Google Patents

화상복호화장치 Download PDF

Info

Publication number
KR100378337B1
KR100378337B1 KR10-1998-0004171A KR19980004171A KR100378337B1 KR 100378337 B1 KR100378337 B1 KR 100378337B1 KR 19980004171 A KR19980004171 A KR 19980004171A KR 100378337 B1 KR100378337 B1 KR 100378337B1
Authority
KR
South Korea
Prior art keywords
frame
reference frame
data
decoding
picture
Prior art date
Application number
KR10-1998-0004171A
Other languages
English (en)
Other versions
KR19980079714A (ko
Inventor
시게루 후쿠나가
토시히사 나카이
Original Assignee
오끼 덴끼 고오교 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 오끼 덴끼 고오교 가부시끼가이샤 filed Critical 오끼 덴끼 고오교 가부시끼가이샤
Publication of KR19980079714A publication Critical patent/KR19980079714A/ko
Application granted granted Critical
Publication of KR100378337B1 publication Critical patent/KR100378337B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

화상 복호화 장치는 데이터 손실이 발생한 경우라도, 다음 I 프레임을 기다리지 않고서 P 프레임을 복호화하여, 화질의 열화로부터 빨리 회복될 수 있다. 화상 복호화 장치는 수신된 부호화 데이터에 대해서 복호화 상태 정보를 부호화장치 송신한다. 이에 따라, 화상 부호화장치는 복호화 장치에 의해 성공적으로 복호화된 프레임을 참조프레임으로서 사용하여 부호화를 수행할 수 있다. 또한, 본 발명에 따른 화상 복호화 장치는 참조 프레임으로서 사용될 가능성이 높은 프레임을 프레임 메모리 내에 기억하므로, 어떠한 참조 화상도 프레임 메모리 내에 존재하지 않기 때문에 수신된 부호화 데이터를 복호화할 수 없는 확률을 저하시켜서, 부호화 효율을 향상시킬 수 있다. 이에 따라, 화상 복호화 장치의 참조 프레임 메모리 사이즈를 최소한으로 제한할 수 있다.

Description

화상 복호화 장치
본 발명은 화상복호화 장치에 관한 것으로, 특히 화상 데이터 전송시 발생된 데이터 오류 또는 데이터 손실에 의해 저하된 화질을 개선하는 것에 관한 것이다.
최근, 동화상 전송 시스템의 실현을 위해 화상부호화방법의 표준화가 진행되어 왔다. 이들 시스템은 화상전화 시스템, 화상회의 시스템, 비디오-온-디맨드(Video On Demand: VOD) 시스템을 포함한다. 국제표준 규격으로서 ITU-T 권고 H. 261 및 MPEG(Moving Picture Experts Group) 등이 잘 알려져 있다.
예컨대, ITU-T 권고 H. 263에 의해 채택된 부호화방법은 도 2에 도시한 바와 같이, 시간순로 나열된 프레임에 대해서 규칙적인 간격으로 프레임내 부호화(I 프레임 a, i)를 수행하고, 직전 프레임을 참조하여 P 프레임(프레임간 부호화 프레임 b∼h, j∼)의 각각에 대해서 프레임간 부호화를 수행하여 시간적인 용장도를 제거한다. 이하, 프레임내 부호화방법으로 부호화된 프레임을 I 프레임이라고 칭하고, 프레임간 부호화방법으로 부호화된 프레임을 P 프레임이라고 칭한다.
이러한 기술은 "Standardization of Multimedia Coding" by Hiroshi Yasuda, pp. 84-97, Maruzen, (1991)에 설명되어 있다.
직전 프레임을 참조하여 각 프레임의 프레임간 부호화를 수행하는 권고 H.263에 의해 제안된 방법은, 직전 프레임이 정확한 순서로 전송되는 것을 필요로 한다. 상대방과의 접속을 확립한 후에 데이터가 전송되는 전화회선 또는 ISDN 회선에 대해서, 데이터가 도중에서 결핍되는 일없이 정확한 순서로 도달한다.
그러나, 데이터가 전송되기 전에 작은 단위(패킷 또는 셀이라고 칭함)로 데이터가 분리되는 이더넷 LAN 또는 ATM망에 대해서는 패킷이 도중에 손실되거나, 부정확한 순서로 전송될 가능성이 있다.
일반적으로, 이들 문제점을 해결하기 위해, 네트워크는 송신장치가 일련의 번호를 부가하여 패킷을 전달하고, 수신장치가 정확한 순서로 패킷을 재배열하고 그들의 도착을 확인하며, 도착하지 않은 패킷의 재송요구를 송신장치로 반송하는 프로토콜(예를 들어, TCP: Transmission Control Protocol)을 사용하여, 네트워크의 신뢰성을 향상시킨다.
그러나, 네트워크 동작이 불안정하고 패킷이 자주 드롭되는 경우에, 이러한 형태의 프로토콜을 사용하면 재전송에 의해 지연이 많이 누적되므로, 동화상의 실시간 전송에는 부적절하다. 어떤 경우에는, 특히 새로운 데이터가 즉시 표시될 수 있는 경우에는, 그 수단이 오래된 데이터를 재송하는 것보다는, 프레임을 스킵하더라도 새로운 데이터를 표시하는 것이 바람직하다.
또한, 브로드캐스팅과 멀티캐스팅은 데이터를 동시에 복수의 지점으로 전송하는 방식이다. 그러나, 지점들 중의 하나로 패킷을 전송하는 중에 패킷의 드롭아웃이 발생하는 경우, 상술한 프로토콜은 패킷을 성공적으로 수신한 이들 지점에 대해서도 동일한 패킷이 전송되는 것을 요구하므로, 네트워크 부하가 현저히 상승한다.
따라서, 브로드캐스팅 및 멀티캐스팅은, 패킷을 재송하지 않은 UDP(User Datagram Protocol)과 같은 프로토콜을 사용하여 수행된다. 그 결과, 패킷의 드롭아웃이 발생할 확률은 높아진다.
무선네트워크에서, 데이터가 패킷으로 전송되는 경우뿐만 아니라, 데이터가 전송되기 전에 회선접속을 확립하는 경우에도 데이터 오류 또는 데이터 드롭아웃율이 높아진다. 게다가, 오류가 수신장치의 오류 정정 능력을 초과하는 경우, 다른 일부분의 데이터를 성공적으로 수신하기 위해서 때때로 일련의 데이터 목록을 폐기한다. 따라서, 무선 네트워크에서의 데이터 드롭아웃은 유선 네트워크보다 큰 경향이 있다.
전송장치의 처리속도는 반드시 수신장치의 처리속도와 일치하지 않는다고 하는 문제도 있다. 예컨대, 속도가 느린 수신장치에서 모든 프레임을 복호화하는 경우, 대기상태의 많은 프레임 데이터가 축적되어, 지연이 길어지게 된다. 이러한 경우에는, 수신장치가 계획적으로 프레임을 스킵하는 것이 필요하다. 그러나, 종래기술에 따른 프레임간 부호화방법에서와 같이, 현 프레임의 이전 프레임에 대하여 어떠한 복호화 데이터도 없는 경우, 현 프레임은 복호화될 수 없기 때문에, 프레임은 의도했던 대로 스킵될 수 없다.
도 3은, 프레임의 전송 도중에 발생할 수 있는 데이터 드롭아웃의 일예를 나타낸다. 느린 처리속도 때문에 프레임 e가 드롭아웃되거나 복호화될 수 없는 경우에, 다음 I 프레임 i가 도착할 때까지, P 프레임(f, g, h)이 복호화될 수 없다.
이와 같이, 데이터 드롭아웃 또는 프레임 스킵이 자주 발생하는 네트워크에서 성공적으로 모든 프레임을 전송하기 위해서는, 모든 프레임에 대해서 프레임내 부호화가 더 유효하다. 그러나, 프레임간 부호화를 사용하지 않는 이러한 방식은, 시간적인 용장도가 있다는 것과, 데이터 전송 효율이 저화된다고 하는 문제가 있었다.
따라서, 데이터 드롭아웃이 자주 발생하는 네트워크를 통해 동화상을 성공적으로 전송하기 위해서는, 부호화 효율이 높고, 열화된 화질을 신속히 복구할 수 있는 화상부호화 시스템의 개발에 대한 필요성이 끊임없이 요구되어 왔다.
이러한 문제를 해결하기 위해서, 본 발명에 따른 화상 복호화 장치는, 예측 부호화를 통해서 부호화되는 부호화 데이터와 참조 화상의 참조 프레임 번호(또는 프레임 번호 및 블록번호)를 전송로를 통해 수신하는 수신수단과, 참조 프레임 번호(또는 프레임 번호 및 블록번호)가 나타내는 참조 화상을 사용하여 수신수단에 의해 수신된 부호화 데이터를 복호화하는 복호화수단과, 복호화수단에 의해 복호화된 각 부호화 데이터의 복호화 결과를 나타내는 복호화 상태 신호와, 부호화 데이터와 관련된 프레임 번호(또는 프레임 번호 및 블록번호)를 화상 부호화장치에 출력하는 복호화 상태 신호 송신수단을 구비한다.
즉, 화상 복호화 장치는 최신 참조 프레임 이외의 가장 오래된 프레임(또는 블록)을 기억하는 참조 프레임 선택 및 소거수단을 구비한다.
게다가, 본 발명에 따른 화상 부호화장치는 참조 화상에 근거하여 입력 화상데이터를 예측 부호화를 통해서 한 개의 프레임씩 부호화하는 부호화수단과, 부호화수단에 의해 부호화된 데이터와 참조화상의 프레임 번호(또는 프레임 번호와 블록번호)를 화상 복호화 장치로 송신하는 송신수단과, 화상 복호화 장치로부터 전송된 복호화 상태 신호 및 프레임번호(또는 프레임번호와 블록번호)에 근거하여, 참조화상의 갱신을 제어하는 참조 화상 갱신수단을 구비한다.
본 발명은 본 발명의 바람직한 실시예의 상세한 설명과 상기의 첨부도면으로부터 보다 확실히 이해할 수 있을 것이다.
도 1은 제 1 실시예에 사용된 화상 복호화 장치(수신장치)의 기능구성의 일예를 나타낸 블록도,
도 2는 종래의 부호화 동작을 나타낸 개념도,
도 3은 종래 시스템에서 전송오류가 발생한 경우의 부호화 동작의 일예를 나타낸 개념도,
도 4는 도 1에 나타낸 제 1 실시예에서 참조 프레임 선택 및 소거수단을 이용하지 않은 경우의 동작예를 나타낸 개념도,
도 5는 도 1에 나타낸 제 1 실시예에서 참조 프레임 선택 및 소거수단을 이용한 경우의 동작예를 나타낸 개념도(1),
도 6은 도 1에 나타낸 제 1 실시예에서 참조 프레임 선택 및 소거수단을 이용한 경우의 동작예를 나타낸 개념도(2).
<도면의 주요부분에 대한 부호의 설명>
100 : 동화상 복호화 장치 101 : 부호 데이터 수신부
102 : 참조 프레임 비교부 103 : 참조 프레임 갱신부
104 : 참조 프레임 메모리부 105 : 프레임 메모리부
106 : 참조 프레임 선택소거부 107 : 복호화부
108 : 확인 신호 송신부 109 : 동화상 출력부
110 : 리플레쉬 신호 송신부
(A) 제 1 실시예
이하, 제 1 실시예에 사용된 동화상 복호화 장치(수신장치)의 구성, 동작 및 효과에 관해서, 도면을 참조하면서 설명한다.
본 발명에 따른 화상 복호화 장치는, 프레임 단위 또는 블록 단위로 참조화상을 갱신하고, 여기서 블록은 프레임의 하나의 구획이다. 화상 데이터가 프레임 단위로 처리되는 경우에는, 복호화 상태 신호가 반송되어, 참조화상은 프레임이 갱신될 때마다 갱신되며, 화상 데이터가 블록단위로 처리되는 경우에는, 복호화 상태 신호가 반송되어, 참조화상은 블록이 갱신될 때마다 갱신된다. 상기 일부분의 설명에는 프레임만이 언급되어 있지만, 이하 설명된 동작 및 구성은 프레임 및 블록에 적용된다.
제 1 실시예의 화상 복호화 장치(수신장치)는, 복호화 장치가 참조화상에 사용된 최신 프레임(또는 블록)(이후, 최신 참조 프레임이라고 칭함)을 프레임 메모리 내에 축적하는 것을 특징으로 한다.
제 1 실시예에 사용된 동화상 복호화 장치(수신장치)의 기능구성은 도 1에 도시되어 있다.
도 1에 도시한 바와 같이, 동화상 복호화 장치(수신장치)(100)는, 부호 데이터 수신부(101)와, 참조 프레임 비교부(102)와, 참조 프레임 갱신부(103)와, 참조 프레임 메모리부(104)와, 프레임 메모리부(105)와, 참조 프레임 선택소거부(106)와, 복호화부(107)와, 확인 신호 송신부(108)와, 동화상 출력부(109)와, 리플레쉬 신호 송신부(110)를 구비한다.
부호 데이터 수신부(101)는, 부호화된 동화상 데이터를 송신측의 동화상 부호화장치로부터 수신한다. 부호 데이터 수신부(101)는 입력된 부호 데이터뿐만 아니라 프레임 내 및 프레임 간 부호 식별자 및 참조 프레임 번호 같은 상기 부호 데이터에 다중화되어 있는 데이터를 복호화부(107)로 전달하고, 또 부호 데이터 수신부(101)는 필요에 따라 부호 데이터에 다중화되어 있는 송신장치 정보를 복호화부(107)로 전달한다. 또한, 부호 데이터 수신부(101)는 참조 프레임 번호를 참조 프레임 비교부(102)로 전달한다.
참조 프레임 비교부(102)는, 각 수신된 프레임(또는 블록)을 포함한 참조 프레임 번호와, 참조 프레임 메모리부(104)에 기억된 참조 프레임 번호를 비교한다. 2개의 참조 프레임 번호가 일치하지 않으면, 참조 프레임 비교부(102)는 참조 프레임 갱신부(103)로 참조 프레임 갱신 요구를 통지하고, 새로운 참조 프레임 번호를 전달한다.
참조 프레임 갱신부(103)는, 참조 프레임 비교부(102)로부터 갱신요구를 받으면, 프레임 메모리부(105)로부터 새로운 참조 프레임 번호와 관련된 프레임 데이터(또는 블록 데이터)를 판독하고, 참조 프레임 메모리부(104)로 프레임 번호와 프레임 데이터를 기록 갱신한다. 또한, 참조 프레임 갱신부(103)는, 참조 프레임 번호를 참조 프레임 선택소거부(106)로 전달한다.
참조 프레임 메모리부(104)는, 프레임간 복호에 사용하기 위한 참조 프레임 데이터를 기억하는 메모리 회로와 같은 메모리 매체이고, 참조 프레임 갱신부(103)와 복호화부(107)에 의해서 갱신된다.
참조 프레임 메모리부(105)는, 복호한 프레임 데이터(또는 블록 데이터)를 포함하는 메모리 회로와 같은 매체이다. 복호화부(107)에 의해서 복호된 프레임(또는 블록)데이터가 프레임 메모리부(105) 내에 기록되고, 필요에 따라 참조 프레임 선택소거부(106)에 의해서 데이터가 소거된다. 또한, 프레임 메모리부(105)는 어떤 프레임(또는 블록)이 최신 참조 프레임인가를 관리한다.
참조 프레임 선택 및 소거부(106)는, 최신 참조 프레임을 프레임 메모리부(105)에 축적한다. 즉, 참조 프레임 선택소거부(106)는 참조 프레임 갱신부(103)로부터 받은 참조 프레임 번호를 근거하여 최신 참조 프레임을 보존하고, 최신 참조 프레임보다 오래된 프레임(또는 블록)을 프레임 메모리부(105)로부터 소거한다. 최신 참조 프레임은 갱신될 때까지, 소거되지 않는다.
복호화부(107)는, 입력된 부호 데이터를 복호화하고, 결과의 복호화 데이터를 동화상 출력부(109)로 전달한다. I 프레임의 경우, 복호화부(107)는 복호화 데이터와 프레임 번호를 참조 프레임 메모리부(104)와 프레임 메모리부(105) 내에 기록하여 참조 프레임 화상을 갱신하고, 또 P 프레임의 경우, 복호화부(107)는 참조 프레임 메모리부(104)에 기억된 데이터를 참조하여 데이터를 복호화하고, 복호화 데이터와 프레임 번호를 프레임 메모리부(105) 내에 기록한다. 또한, CRC를 이용하여 전송오류를 검출하는 경우, 또는 어떠한 참조 프레임 데이터도 참조 프레임 메모리(104)에 기억되지 않기 때문에 화상데이터를 복호화할 수 없는 경우, 복호화부(107)는 참조 프레임 메모리부(104) 및 프레임 메모리부(105) 내에 데이터를 기록하지 않는다.
확인 신호 송신부(108)는 확인신호를 동화상 부호화장치(송신장치)로 송신하여 어떤 프레임이 성공적으로 복호화되었는지를 통지한다.
동화상 출력부(109)는 복호화부(107)로부터 받은 복호화 데이터를 모니터용의 표시장치에 출력한다.
리플레쉬 신호 송신부(110)는 사용자로부터의 리플레쉬 요구에 따라서, 동화상 부호화장치(송신장치)로 리플레쉬 신호를 송신한다.
다음에, 제 1 실시예에 사용된 동화상 복호화 장치(수신장치)의 동작을 설명한다.
도 4는 참조 프레임 선택 및 소거수단(106)을 이용하지 않은 경우의 확인 신호(ACK)에 응답하여 실행된 참조 프레임 갱신방법을 나타낸다. 프레임 메모리부(105)가 3개의 프레임을 포함한다고 가정한다.
성공적으로 복호화된 프레임(a, b, c, d)을 프레임 메모리부(105) 내에 기억한다. 프레임 메모리부(105)가 전부 기록되는 경우, 가장 오래된 프레임을 소거하고 나서, 새로운 프레임을 부가한다. 예컨대, 프레임 d를 기억하는 경우, 프레임 a를 소거한다. 프레임 a를 소거하는 대신에, 직접 프레임 a의 위에 프레임 d를 겹쳐서 기록해도 된다. 전송오류 또는 복호화 이상이 발생한 경우, 프레임은 프레임 메모리부(105) 내에 기억되지 않는다.
참조 프레임 선택 및 소거수단(106)을 사용하지 않은 경우, 확인신호(ACK)에 연속해서 오류가 발생하는 문제가 발생한다. 즉, 프레임 f, g가 성공적으로 복호화되어, 프레임 메모리부(105) 내에 기억되는 경우, 그러나 동화상 부호화장치로 반송되어야 할 확인신호(ACK)가 연속해서 반송되지 않은 경우, 프레임 f, g는 참조프레임으로서 이용되지 않는다.
다음 프레임 h도 성공적으로 복호화되어, 프레임 메모리부(105) 내에 기억된다. 그러나, 이 때 프레임 d를 소거한다. 따라서, 참조프레임 d를 이미 프레임 메모리부(105)로부터 소거했기 때문에 성공적으로 수신되는 다음 프레임 i는 복호화할 수 없다.
상술한 바와 같이, 복호화 상태 신호의 오류가 연속해서 필요한 참조 프레임을 소거하여, 부호화 효율이 저하된다.
도 5는 참조 프레임 선택 및 소거수단(106)을 이용한 경우의 확인신호(ACK)에 응답하여 참조 프레임을 갱신하는 방법을 나타낸다. 프레임 메모리부(105)가 3프레임을 포함한다고 가정한다.
성공적으로 복호화된 프레임(a, b, c, d)을 프레임 메모리부(105) 내에 기억한다. 이때, 최신 참조 프레임을 플래그 또는 포인터를 이용하여 관리한다. 도 5에서, 최신 참조 프레임으로서 사용된 프레임 번호에는 원을 부가한다.
전부 기록되어 있는 상태의 프레임 메모리부(105)에 새로운 프레임을 부가하는 경우, 최신 참조 프레임 이외의 가장 오래된 프레임을 소거하고 나서 새로운 프레임을 부가한다. 예컨대, 프레임 d를 기억하는 경우, 프레임 a를 소거한다. 프레임 a를 소거하는 대신에, 직접 프레임 a의 위에 프레임 d를 겹쳐서 기록해도 된다.
전송오류 또는 복호화 이상이 발생한 프레임 e는 프레임 메모리부 내에 기억되지 않는다. 또한, 복호화 이상이 발생한 경우, 최신 참조 프레임을 일시적으로 무효로 한다. 도 5에서, 프레임 e가 처리될 때, 원을 소거한다. 이것은, 복호화 이상이 발생한 경우, 최신 참조 프레임 b가 프레임 메모리부(105) 내에 보존되어 있어야 하는지의 여부를 판정할 수 없기 때문이다. 최신 참조 프레임으로서 프레임 b가 프레임 메모리부(105) 내에 보존되어 있더라도 문제는 발생하지 않을 것이다.
확인신호(ACK)에 오류가 연속해서 발생한 경우라도 문제는 발생하지 않는다. 성공적으로 복호화된 프레임 f, g는 프레임 메모리부(105) 내에 기억된다. 그러나, 오류로 인해 확인신호(ACK)가 동화상 부호화장치로 반송될 수 있기 때문에, 프레임 f, g는 참조프레임으로서 이용되지 않는다. 이 기간동안, 참조 프레임으로서 사용된 프레임 d는 프레임 메모리부(105) 내에 보존된다. 이것에 의해 프레임 h, i를 성공적으로 복호화할 수 있다.
도 6은 제 1 실시예의 참조 프레임 선택 및 소거수단(106)을 이용한 경우의 확인신호(ACK)와 이상 확인 신호(NACK) 양쪽에 응답하여 참조 프레임을 갱신하는방법을 나타낸다. 프레임 메모리부(105)가 3프레임을 포함한다고 가정한다.
프레임 a∼d와 프레임 k 이후는 NACK에 응답하여 처리되고, 프레임 e∼j는 ACK 신호에 응답하여 처리된다. 도 6에서, 부호화장치가 NACK 신호를 수신하거나 어느 쪽의 신호도 수신하지 않은 경우에, 부호화장치는 ACK 모드로 전환되고, ACK 신호를 연속으로 2개 수신한 경우에는 NACK 모드로 전환된다.
확인신호(ACK)에 응답하여 부호화장치가 처리를 수행하는 예에서와 같이, 성공적으로 복호화된 프레임을 프레임 메모리부(105) 내에 기억하고, 최신 참조 프레임을 관리한다. 전송오류가 발생한 프레임 e, h 또는 어떠한 참조 프레임도 없었기 때문에 복호화할 수 없었던 프레임 f는 프레임 메모리부 내에 기억되지 않고, 최신 참조 프레임을 일시적으로 무효로 한다.
확인신호(ACK)에 오류가 연속해서 발생한 경우라도 문제는 발생하지 않는다. 성공적으로 복호화된 프레임 i, j는 프레임 메모리부(105) 내에 기억된다. 그러나, 오류로 인해 동화상 부호화장치로 확인신호(ACK)가 반송되지 않기 때문에, 프레임 i, j는 참조프레임으로서 이용되지 않는다. 이 기간동안, 참조 프레임으로서 사용된 프레임 g는 프레임 메모리부(105) 내에 보존된다. 이것에 의해 프레임 k, l을 성공적으로 복호화할 수 있어, NACK 모드로 이행할 수 있다.
상술한 바와 같이, 최신 참조 프레임(또는 블록)은 프레임 메모리부 내에 보존된다. 따라서, 복호화 상태 신호에 연속해서 오류가 발생하더라도, 필요한 참조 프레임을 소거할 가능성이 낮게 되어, 부호화 효율이 향상된다.
또한, 이 실시예에서 사용된 복호화 장치는 필요한 프레임(또는 블록)만을메모리 내에 기억하기 때문에, 참조 프레임 메모리 사이즈를 최소한까지 제한할 수 있다.
제 1 실시예의 변형예
도 1에서, 참조 프레임 메모리부(104)와 프레임 메모리부(105)를 따로따로 분리한다. 이러한 구성이 항상 필요한 것은 아니다. 메모리부 내에 프레임 데이터를 기억하여, 참조 프레임을 포인터로 나타낼 수도 있다. 이 구성은 참조 프레임 갱신 중에 프레임 메모리부(105)로부터 참조 프레임 메모리부(104)로 데이터를 카피할 필요가 없고, 포인터를 간단히 이동시켜서 참조 프레임을 나타내기 때문에, 회로구성을 간단히 할 수 있다.
(B) 다른 실시예
(1) 상술한 각 실시예에서의 동화상 복호화 장치는 하드웨어 유니트 또는 소프트웨어 프로그램에 의해서 실현될 수도 있다.
(2) 상술한 각 실시예에서, 전송 데이터는 동화상 데이터이다. 전송 데이터는 음성 데이터 또는 2진 데이터일 수도 있다.
본 발명은 바람직한 실시예를 참조하여 설명했지만, 그것의 다양한 변형은 본 발명의 설명을 참조하여 본 발명이 속하는 기술분야의 당업자에게서 분명해질 것이다. 따라서, 이와 같은 모든 변형은 본 발명의 진정한 범주에 속하므로, 첨부된 청구범위는 이들 모든 변형을 포괄하는 것으로 이해되어야 할 것이다.
상술한 바와 같이, 본 발명에 따른 화상 복호화 장치는 참조 프레임으로서사용될 것 같은 프레임(또는 블록)을 메모리 내에 기억하므로, 어떠한 참조 화상도 프레임 메모리 내에 존재하지 않기 때문에 수신된 부호화 데이터를 복호화할 수 없는 확률을 저하시켜서, 부호화 효율을 향상시킬 수 있다.
또한, 필요한 프레임(또는 블록)만을 메모리 내에 기억하기 때문에, 화상 복호화 장치의 참조 프레임 메모리 사이즈를 최소화할 수 있다.
참조 프레임 메모리를 효율적으로 제어하는 화상 복호화 장치는 필요한 프레임(또는 블록)을 소거할 확률을 저하시켜서, 부호화 효율을 향상시킬 수 있다.

Claims (2)

  1. 예측 부호화에 의해 부호화되는 부호화 데이터와 예측 부호화에 사용되는 참조 프레임의 참조 프레임 번호를 전송로를 통해 수신하는 수신수단과, 참조 프레임 번호가 표시된 프레임 데이터를 사용하여 수신수단에 의해 수신된 부호화 데이터를 복호화하는 복호화수단과, 복호화수단에 의해 복호화된 각 부호화 데이터의 복호결과를 나타내는 복호화 상태 신호와, 부호화 데이터와 관련된 프레임 번호를 화상 부호화장치에 출력하는 복호화 상태 신호 송신수단을 구비한 화상 복호화 장치에 있어서,
    복호화수단에 의해 성공적으로 복호화된 복수의 프레임 데이터를 기억하여, 참조 프레임으로서 이전에 사용된 적어도 한 개의 프레임 중에서 최신 프레임을 최신 참조 프레임으로서 관리하는 프레임 데이터 기억수단과,
    프레임 데이터 기억수단으로부터 프레임 데이터를 소거할 필요가 있는 경우에, 최신 참조 프레임 이외의 가장 오래된 프레임을 선택하여 소거하는 참조 프레임 선택 및 소거수단을 구비한 것을 특징으로 하는 화상 복호화 장치.
  2. 프레임을 복수의 블록으로 분할하여, 예측 부호화에 의해 부호화된 부호화 데이터와 예측 부호화에 사용된 참조 프레임의 참조 프레임 번호 및 블록번호를 블록단위로 전송로를 통해 수신하는 수신수단과, 참조 프레임번호 및 블록번호가 표시된 블록 데이터를 사용하여 수신수단에 의해 수신된 부호화 데이터를 복호화하는복호화수단과, 복호화수단에 의해 복호화된 각 부호화 데이터의 복호결과를 나타내는 복호화 상태 신호와, 부호화 데이터와 관련된 프레임 번호 및 블록번호를 화상 부호화장치에 출력하는 복호화 상태 신호 송신수단을 구비한 화상 복호화 장치에 있어서,
    복호화수단에 의해 성공적으로 복호화된 복수의 프레임 데이터를 블록단위로 기억하여, 참조 프레임으로서 이전에 사용된 적어도 한 개의 프레임 중에서 최신 프레임을 최신 참조 프레임으로서 블록단위로 관리하는 프레임 데이터 기억수단과,
    프레임 데이터 기억수단으로부터 프레임 데이터를 소거할 필요가 있는 경우에, 최신 참조 프레임 이외의 가장 오래된 프레임의 블록을 블록단위로 선택하여 소거하는 참조 프레임 선택 및 소거수단을 구비한 것을 특징으로 하는 화상 복호화 장치.
KR10-1998-0004171A 1997-03-24 1998-02-12 화상복호화장치 KR100378337B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP069454 1997-03-24
JP69454 1997-03-24
JP06945497A JP3373130B2 (ja) 1997-03-24 1997-03-24 画像復号化装置

Publications (2)

Publication Number Publication Date
KR19980079714A KR19980079714A (ko) 1998-11-25
KR100378337B1 true KR100378337B1 (ko) 2003-05-16

Family

ID=13403119

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-1998-0004171A KR100378337B1 (ko) 1997-03-24 1998-02-12 화상복호화장치

Country Status (6)

Country Link
US (1) US6111915A (ko)
EP (1) EP0868086B1 (ko)
JP (1) JP3373130B2 (ko)
KR (1) KR100378337B1 (ko)
CN (1) CN1117486C (ko)
DE (1) DE69738176T2 (ko)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0940989A3 (en) 1998-03-02 2003-10-29 Nippon Telegraph and Telephone Corporation Video communication system and method
JP3606306B2 (ja) * 1998-10-08 2005-01-05 沖電気工業株式会社 画像符号化装置、画像復号化装置及び画像伝送システム
US6658618B1 (en) * 1999-09-02 2003-12-02 Polycom, Inc. Error recovery method for video compression coding using multiple reference buffers and a message channel
GB2362531A (en) * 2000-05-15 2001-11-21 Nokia Mobile Phones Ltd Indicating the temporal order of reference frames in a video sequence
EP1176833A3 (en) * 2000-07-25 2012-06-27 Panasonic Corporation Image decoding method, image decoding apparatus, and data storage medium
US6941343B2 (en) 2001-06-02 2005-09-06 Polycom, Inc. System and method for point to point integration of personal computers with videoconferencing systems
AU2008200669B2 (en) * 2002-02-01 2010-05-13 Godo Kaisha Ip Bridge 1 Moving picture coding method and moving picture decoding method
BRPI0302966B1 (pt) 2002-02-01 2018-02-14 Godo Kaisha Ip Bridge 1 Método de codificação de imagem em movimento e método de decodificação de imagem em movimento
JP4355156B2 (ja) 2002-04-16 2009-10-28 パナソニック株式会社 画像復号化方法及び画像復号化装置
JP4562999B2 (ja) * 2002-07-11 2010-10-13 パナソニック株式会社 画像復号化方法および画像復号化装置
KR100959969B1 (ko) 2002-07-11 2010-05-27 파나소닉 주식회사 화상 부호화 방법 및 화상 복호화 방법
JP4414904B2 (ja) * 2004-04-16 2010-02-17 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法、及び動画像復号プログラム
AU2005242348B2 (en) * 2004-04-30 2010-11-25 Worldgate Service, Inc. Adaptive video telephone system
US20060083298A1 (en) * 2004-10-14 2006-04-20 Nokia Corporation Reference picture management in video coding
JP4642075B2 (ja) * 2005-04-13 2011-03-02 シャープ株式会社 動画像再生装置
US7716551B2 (en) * 2005-12-07 2010-05-11 Microsoft Corporation Feedback and frame synchronization between media encoders and decoders
JP2008177907A (ja) 2007-01-19 2008-07-31 Fujitsu Ltd 動画データ復号装置、情報機器、動画データ復号方法および動画データ復号プログラム
US8494049B2 (en) * 2007-04-09 2013-07-23 Cisco Technology, Inc. Long term reference frame management with error video feedback for compressed video communication
US7898443B2 (en) * 2007-12-05 2011-03-01 Qualcomm Incorporated Apparatus and methods using a linear memory model for encoder output buffers
US20090279614A1 (en) * 2008-05-10 2009-11-12 Samsung Electronics Co., Ltd. Apparatus and method for managing reference frame buffer in layered video coding
CN102870416A (zh) * 2011-02-25 2013-01-09 松下电器产业株式会社 运动图像编码装置以及运动图像解码装置
US8867852B2 (en) * 2012-01-19 2014-10-21 Sharp Kabushiki Kaisha Decoding a picture based on a reference picture set on an electronic device
US8693793B2 (en) * 2012-01-19 2014-04-08 Sharp Laboratories Of America, Inc. Reducing reference picture set signal overhead on an electronic device
CN110636333A (zh) * 2019-08-19 2019-12-31 西安万像电子科技有限公司 丢帧处理方法及装置
CN113573063B (zh) * 2021-06-16 2024-06-14 百果园技术(新加坡)有限公司 视频编解码方法及装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ATE22767T1 (de) * 1982-07-23 1986-10-15 British Telecomm Uebertragung von daten.
JPH0490648A (ja) * 1990-08-06 1992-03-24 Fujitsu Ltd 符号化送信方式
JPH04167862A (ja) * 1990-10-31 1992-06-15 Fujitsu Ltd ファクシミリ装置
KR0148130B1 (ko) * 1992-05-18 1998-09-15 강진구 블럭킹아티팩트를 억제시키는 부호화/복호화 방법 및 그 장치
US5497404A (en) * 1992-07-14 1996-03-05 General Instrument Corporation Transmission error recovery for digital communication systems using variable length data packets where data is stored in header locations of memory
US5268961A (en) * 1992-08-20 1993-12-07 General Electric Co. Error control apparatus for a digital video signal processing system
JPH07250196A (ja) * 1994-03-08 1995-09-26 Ricoh Co Ltd ファクシミリ装置の画像蓄積方法
US5623311A (en) * 1994-10-28 1997-04-22 Matsushita Electric Corporation Of America MPEG video decoder having a high bandwidth memory
US5774206A (en) * 1995-05-10 1998-06-30 Cagent Technologies, Inc. Process for controlling an MPEG decoder
US5568200A (en) * 1995-06-07 1996-10-22 Hitachi America, Ltd. Method and apparatus for improved video display of progressively refreshed coded video
JP3068002B2 (ja) * 1995-09-18 2000-07-24 沖電気工業株式会社 画像符号化装置、画像復号化装置及び画像伝送システム
US6038000A (en) * 1997-05-28 2000-03-14 Sarnoff Corporation Information stream syntax for indicating the presence of a splice point

Also Published As

Publication number Publication date
KR19980079714A (ko) 1998-11-25
JP3373130B2 (ja) 2003-02-04
EP0868086B1 (en) 2007-10-03
DE69738176T2 (de) 2008-07-24
JPH10271507A (ja) 1998-10-09
CN1194503A (zh) 1998-09-30
DE69738176D1 (de) 2007-11-15
CN1117486C (zh) 2003-08-06
EP0868086A1 (en) 1998-09-30
US6111915A (en) 2000-08-29

Similar Documents

Publication Publication Date Title
KR100378337B1 (ko) 화상복호화장치
KR100538023B1 (ko) 화상 부호화장치
JP3068002B2 (ja) 画像符号化装置、画像復号化装置及び画像伝送システム
US5768533A (en) Video coding using segmented frames and retransmission to overcome channel errors
US7116714B2 (en) Video coding
JPH1079949A (ja) 画像符号化装置、画像復号化装置及び画像伝送システム
US6891799B1 (en) Data transmission method
US6282240B1 (en) Picture coder, picture decoder, and transmission system
US8259802B2 (en) Reference pictures for inter-frame differential video coding
US9264737B2 (en) Error resilient transmission of random access frames and global coding parameters
EP2680587A1 (en) Video encoding device and video decoding device
KR100374245B1 (ko) 화상부호화장치,화상복호화장치및화상전송시스템
WO2010107663A1 (en) Camera coupled reference frame
JP3323057B2 (ja) 符号化装置、復号化装置及び伝送システム
EP0902593B1 (en) Video coder, decoder and transmission system
JP2005033556A (ja) データ送信装置、データ送信方法、データ受信装置、データ受信方法
JPH1118086A (ja) 画像通信方法および装置
KR100670220B1 (ko) 부호화장치,복호화장치및전송시스템
JP3660513B2 (ja) 画像通信装置およびローカルデコード処理方法
Fukunaga et al. Error resilient video coding controlled by backward channel signaling
CN118175339A (zh) 视频数据恢复方法及其系统

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20110223

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee