KR100374245B1 - 화상부호화장치,화상복호화장치및화상전송시스템 - Google Patents

화상부호화장치,화상복호화장치및화상전송시스템 Download PDF

Info

Publication number
KR100374245B1
KR100374245B1 KR1019970006316A KR19970006316A KR100374245B1 KR 100374245 B1 KR100374245 B1 KR 100374245B1 KR 1019970006316 A KR1019970006316 A KR 1019970006316A KR 19970006316 A KR19970006316 A KR 19970006316A KR 100374245 B1 KR100374245 B1 KR 100374245B1
Authority
KR
South Korea
Prior art keywords
frame
frames
reference frame
encoding
selecting
Prior art date
Application number
KR1019970006316A
Other languages
English (en)
Other versions
KR970073147A (ko
Inventor
시게루 후쿠나가
토시히사 나카이
Original Assignee
오끼 덴끼 고오교 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP9862996A external-priority patent/JP3068002B2/ja
Application filed by 오끼 덴끼 고오교 가부시끼가이샤 filed Critical 오끼 덴끼 고오교 가부시끼가이샤
Publication of KR970073147A publication Critical patent/KR970073147A/ko
Application granted granted Critical
Publication of KR100374245B1 publication Critical patent/KR100374245B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)

Abstract

전송 시스템은 프레임내 부호화와 프레임간 부호화를 이용하여, 송신장치로부터 수신장치에 일련의 부호화된 프레임을 전송한다.
수신장치는 프레임을 복호화하여, 송신장치에 확인 신호를 보낸다.
송신장치는 이들 확인 신호에 따라 프레임간 부호화에 사용된 참조 프레임을 선택한다.
참조 프레임 선택방법은 전송채널의 품질 판정에 따라 변경될 수 있다.
그 자체의 판정 기준 또는 참조 프레임 선택방법은 사용자로부터의 입력에 따라 변경될 수 있다.

Description

화상 부호화 장치, 화상 복호화 장치 및 화상 전송 시스템
본 발명은 프레임 드롭아웃의 높은 허용차와 좋은 데이터 압축 성능을 결합한 화상 부호화 장치, 화상 복호화 장치, 및 화상 전송 시스템에 관한 것이다.
최근, 통신 네트워트, 즉 비디오폰, 비디오 회의 및 VOD(video-on-demand)시스템을 통해서 동화상을 전송하는 시스템이 보급되었다.
송신된 데이터의 볼륨을 줄이기 위해, 화상이 디지탈화되어, 송신장치에서 압축력이 있게 부호화되며, 수신장치에서 복호화된다.
기본적인 2종류의 동화상 부호화는 프레임내 부호화와 프레임간 부호화로 분류된다.
프레임내 부호화는 각 프레임을 따로따로 부호화하고, 또는 한 개의 프레임을 블록들로 분할하며, 각 블록을 따로따로 부호화한다.
프레임내 부호화의 방법은 예컨대, JPEG(Joint Photographic Experts Group)으로 표준화되었다.
프레임내 부호화는 각 프레임내의 공간 용장을 줄임으로써 데이터를 압축한다.
프레임간 부호화는 1개의 프레임과 1개의 전프레임과의 차이만을 부호화함으로써, 공간 및 임시 용장을 줄인다.
프레임내 부호화는 높은 데이터 압축비를 산출하는 모우션 보상을 포함한다.
프레임내 부호화와 프레임간 부호화를 이용하는 방법은 예컨대, MPEG(Moving Picture Experts Group)와 ITU-T(Telecommunication Standardization Sector of the International Telecommunication Union)으로 표준화되었다.
도 21은 ITU-T 권고 H.261에서 채택된 부호화 시스템을 나타낸다.
해칭에 의해 지시된 프레임내 부호화는 일정한 간격으로 행해지고: 다른 때는 프레임간 부호화가 행해진다.
프레임간 부호화시, 각 프레임은 화살표로 표시된 것으로서, 즉시 전프레임에 관해서 부호화된다.
프레임간 부호화로 부호화된 프레임들은 전프레임으로부터 예측되고, P-프레임이라고 칭하지만, 프레임내 부호화에 의해 부호화된 프레임들은 I-프레임이라고 칭한다.
도 21에 있어서, 프레임(a, i)은 I-프레임이지만, 프레임(b-h, j, k)은 P-프레임이다.
도 22는 H. 261등에서 발생하는 문제점의 일례를 나타낸다.
만약 수신장치가 어떤 이유로 프레임(e)을 복호화할 수 없다면, 프레임(f, g, h)도 복호화할 수 없다.
수신장치는 복호화가 재시작 가능하기 전에 다음 I-프레임(프레임 i)을 수신할 때까지 기다려야 한다.
이와 같이, 단일 프레임의 드롭아웃은 수신된 동화상에서 바람직하지 않은 갭을 높게 이끌 수 있다.
프레임 드롭아웃은 다양한 이유로 발생할 수 있다.
예컨대, 복호화 장치가 부호화 장치보다 더 느린 프로세싱 속도를 가지고, 좋은 상태를 유지할 수 없기 때문에, 프레임은 수신단에서 계획적으로 드롭된다.
패킷 또는 셀의 데이터를 전송하는 네트워크에서, 패킷 또는 셀은 네트워크가 오버로드될 때 루트에서 드롭된다.
이것은 공지된 이더네트(Ethernet) 시스템를 사용하는 근거리 네트워크에서,또는 공지된 비동기식 전송 모드를 사용하는 광역 네트워크에서 발생한다.
특히 광역 네트워크에 있어서, 패킷 또는 셀은 다른 네트워크 루트상에 전송되었기 때문에, 시퀀스에서 벗어나게 된다.
예컨대, 이것은 P-프레임의 복호화에서 다시 문제점을 일으킨다.
이들 문제점을 처리하기 위해, 어떤 네트워크는 송신장치가 일련의 번호를 붙인 패킷을 전송하고, 수신장치가 정정 순서 대로 패킷을 재배열하고, 그들 도달을 확인하여, 송신장치에 도착하지 않은 패킷의 재전송 요구를 반송하는 프로토콜을 사용한다.
공지된 이 형태의 프로토콜의 예로서 TCP(Transmission Control Protocol)이 있다.
그러나, 네트워크 동작이 불안정하고, 패킷이 때때로 드롭된 경우, 이 형태의 프로토콜에 의한 재전송에 의해 지연이 축적되기 때문에, 동화상의 실시간 전송에는 부적당하다.
동화상 데이터가 전송되면, 일반적으로 프레임을 스킵하더라도 오래된 데이터의 재전송을 기다리는 것보다는 새로운 데이터를 표시하는 것이 바람직하다.
이들 문제점은 많은 수신지에 동일 데이터를 전송하는 브로드캐스팅 및 멀티캐스팅 등의 다지점 전송에서 일어나게 된다.
송신장치가 1개의 수신지로부터의 재전송 요구를 배려하면, 전송 장치는 종종 이들 다른 지점이 이미 성공적으로 수신했고, 네트워크 로드가 크게 증가되는 패킷을 다른 지점에 강제적으로 전송시킨다.
그러므로, 브로드캐스팅 및 멀티캐스팅은 통상 UDP(User Datagram Protocol) 등의 재전송을 하지 않는 프로토콜하에서 행해지만, 그 결과로서, 프레임 드롭아웃의 가능성이 증가한다.
무선 네트워크에 있어서, 패킷 또는 셀에 의한 변환 대신에 전용 채널상에서 전송이 발생하는 경우라도 프레임 드롭은 심각한 문제이다.
무선 전송은 오류를 일으키기 쉽고, 오류가 수신장치의 오류 정정 능력보다 큰 경우, 통상 유효 데이터 프로세싱을 재확립하기 위해 데이터의 일정한 부분을 버린다.
그러므로, 데이터 드롭아웃은 유선 네트워크보다 더 큰 경향이 있다.
이들 인자는 전화선, 종합 서비스 디지탈 네트워크(ISDNs), 및 송신과 수신장치 사이의 물리적 회선과 같은 신뢰할 수 있는 링크를 주는 다른 기구를 통한 동화상의 전송에서 도 21에 나타낸 부호화의 무익함을 한정한다.
다른 형태의 네트워크를 통한 전송를 위해, 프레임 드롭아웃 또는 스킵은 어느 정도까지 피할 수 없고, 도 23에 나타낸 설계가이 종종 이용되고, 즉 모든 프레임은 JPEG 부호화를 이용하여, I-프레임으로 부호화된다.
모든 프레임이 I-프레임으로 부호화된 경우에, 도 24에서 프레임(e)와 같이, 드롭아웃이 발생하면, 감지한 동화상의 화질에는 거의 영향을 미치지 않는다.
도 24에서, 프레임(e)만 잃고: 연속되는 프레임(f. g. h)은 그들의 복호화가 전프레임에 의존하지 않기 때문에, 성공적으로 복호화될 수 있다.
모든 I-프레임의 문제점은 임시 용장이 제거되지 않기 때문에, 데이터 압축비가 매우 높지 않다는 것이다.
그러므로, 넓은 네트워크 밴드폭를 소비한다.
일본 특허 코카이 공보 번호 95571/1995에는 도 25에 나타낸 양자택일의 설계가 기재되어 있고, 여기에는 P-프레임(b-h)이 전 I-프레임(a)에 관해서 모두 부호화된다.
이 설계하에, P-프레임의 손실이 다른 P-프레임의 부호화에 영향을 미치지 않는다.
이 설계의 단점은 P-프레임을 기준으로 P-프레임과 I-프레임과의 임시 거리가 길어지기 때문에, 데이터 압축비가 연속되는 P-프레임에 의해 감소하는 경향이 있다는 것이다.
따라서, 본 발명의 목적은 다음 I-프레임을 기다리지 않고, 전 P-프레임에 관해서 부호화된 P-프레임을 포함하도록, P-프레임을 프레임 드롭아웃후 복호화하는 것이다.
본 발명의 다른 목적은 화질을 전송채널 상태에 적합시킬 수 있게 하는 것이다.
또 다른 목적은 데이터 압축비를 전송채널 상태에 적합시킬 수 있게 하는 것이다.
또 다른 목적은 서로 다른 전송채널 상태에 적합한 방법으로, 사용자에게 전송된 동화상의 질에 대한 제어를 제공하는 것이다.
도 1은 제 1의 실시예에서의 동화상 부호화 장치의 블록도.
도 2는 제 1의 실시예에서의 동화상 복호화 장치의 블록도.
도 3은 제 1의 실시예에서의 프레임간 부호화 관계의 일례를 나타내는 도면.
도 4는 제 1의 실시예에서의 프레임간 부호화 관계의 다른 예를 나타내는 도면.
도 5는 제 1의 실시예에서의 프레임 드롭아웃의 일례를 나타내는 도면.
도 6은 제 1의 실시예에서의 동화상 부호화 장치의 변형을 나타내는 블록도.
도 7은 제 2의 실시예에서의 동화상 부호화 장치의 참조 프레임 갱신부의 블록도.
도 8은 제 2의 실시예에서의 프레임 드롭아웃의 일례를 나타내는 도면.
도 9는 제 2의 실시예에서의 확인 신호 드롭아웃의 일례를 나타내는 도면.
도 10은 제 3의 실시예에서의 동화상 부호화 장치의 참조 프레임 갱신부의 블록도.
도 11은 제 3의 실시예에서의 프레임 드롭아웃의 일례를 나타내는 도면.
도 12는 제 4의 실시예에서의 동화상 부호화 장치내의 참조 프레임 갱신부의 블록도.
도 13은 제 4의 실시예에서의 프레임 드롭아웃의 일례를 나타내는 도면.
도 14는 제 4의 실시에에서의 확인 신호 드롭아웃에 따른 프레임 드롭아웃의 일례를 나타내는 도면.
도 15는 제 5의 실시예에서의 동화상 부호화 장치의 블록도.
도 16은 제 5의 실시예에서의 동화상 복호화 장치의 블록도.
도 17은 제 5의 실시예에서의 프레임 드롭아웃의 예를 나타내는 도면.
도 18은 제 6의 실시예에서의 동화상 부호화 장치의 블록도.
도 19는 제 7의 실시예에서의 동화상 부호화 장치의 블록도.
도 20은 제 7의 실시예에서의 동화상 복호화 장치의 블록도.
도 21은 제 1의 종래예에서의 프레임간 부호화 관계를 나타내는 도면.
도 22는 제 1의 종래예에서의 프레임 드롭아웃의 일례를 나타내는 도면.
도 23은 제 2의 종래예에서의 프레임내 부호화 관계를 나타내는 도면.
도 24는 제 2의 종래예에서의 프레임 드롭아웃의 일례를 나타내는 도면.
도 25는 제 3의 종래예에서의 프레임간 부호화 관계를 나타내는 도면.
본 발명의 전송 시스템은 송신장치로부터 수신장치에 일련의 프레임을 전송한다.
프레임내 부호화 또는 프레임간 부호화는 각 프레임에 대하여 선택되고, 대응하는 부호화 프로세스는 송신장치에서 실행된다.
프레임간 부호화가 선택되면, 프레임은 참조 프레임에 관해서 부호화된다.
참조 프레임은 전에 부호화되었던 프레임이다.
프레임내 부호화와 프레임간 부호화로 인한 부호 데이터는 수신장치에 전송된다.
수신장치는 복호 데이터를 복호화하고, 송신장치에 확인 신호를 반송한다.
송신장치는 이들 확인 신호에 근거하여 참조 프레임을 선택한다.
제 1의 바람직한 동작 모드에 있어서, 수신장치는 긍정 확인 신호를 송신하고, 송신장치는 참조 프레임으로서 긍정으로 확인 프레임을 선택한다.
제 2의 바람직한 동작 모드에 있어서, 수신장치는 부정 확인 신호를 송신하고, 송신장치는 부정 확인 신호가 수신되는 경우를 제외하고, 참조 프레임으로서 가장 최근에 부호화된 프레임을 선택한다.
부정 확인 신호가 수신된 경우, 참조 프레임은 부정적으로 확인 프레임을 전 프레임으로 돌아오게 설정한다.
부정 확인 신호는 수신장치가 성공적으로 복호화되었던 참조 프레임을 송신장치가 선택할 수 있게 바람직한 참조 프레임 번호를 가지고 있다.
제 3의 바람직한 동작 모드에 있어서, 각 부정 및 긍정 확인 신호가 전송되고, 전송채널 품질이 이들 확인 신호에 따라 판정되며, 참조 프레임 선택방법은 판정 결과에 따라 변경된다.
예컨대, 참조 프레임은 상기 제 1의 바람직한 모드에서처럼, 나쁜 채널 상태하에서, 상기 제 2의 바람직한 모드에서처럼 좋은 채널 상태하에서 선택될 수 있다.
또한, 채널 품질 판정 기준 및 참조 프레임 선택방법은 사용자로부터의 입력에 따라 변경될 수 있다.
본 발명의 실시예는 첨부 도면을 참조하면서 설명한다.
이들 실시예는 예컨대, 반도체 집적회로로 실현될 수 있다.
집적회로를 설계하고 제작하는 방법은 본 발명이 속하는 기술분야의 당업자에게 잘 알려져 있기 때문에, 회선 레벨에 관한 설명은 생략한다.
또한, 본 발명은 소프트웨어 수단을 통해서 실시될 수도 있다.
제 1의 실시예
제 1의 실시예는 본 발명의 동화상 전송 시스템에서의 부호화 장치 및 복호화 장치의 일반적인 구성을 나타내고, 참조 프레임의 선택에 대한 일례를 나타낸다.
다른 예는 후술하는 실시예에서 상세히 설명한다.
도 1은 제 1의 실시예에서의 동화상 부호화 장치(300)의 기본적인 블록도이다.
송신장치에 배치되어 있는 이 부호화 장치는 동화상 입력부(301), 부호화부(302), 복호화부(303), 프레임 메모리부(304), 참조 프레임 메모리부(305), intra/inter 판단부(306), 부호 데이터 송신부(307), 확인 신호 수신부(308), 및 참조 프레임 갱신부(309)로 구성되어 있다.
동화상 입력부(301)는 비디오 카메라로부터 입력된 동화상 데이터를 예컨대, 프레임씩 부호화부(302)에 준다.
부호화부(302)는 입력 프레임 데이터를 부호화하여, 부호 데이터를 복호화부(303)와 부호 데이터 송신부(307)에 준다.
부호화부(302)는 intra/inter 판단부(306)의 지시에 따라 프레임내 부호화와 프레임간 부호화를 행한다.
프레임간 부호화를 위해, 부호화부(302)는 참조 프레임 메모리부(305)내에 기억된 참조 프레임을 참조하여, 바람직하게 모우션 보상으로 현 프레임과 참조 프레임과의 차이만 부호화한다.
복호화부(303)는 부호화부(302)로부터 수신된 부호 데이터를 복호화하고, 프레임 메모리부(304)내에 복호화된 프레임과 그들 프레임 번호를 기록한다.
프레임 메모리부(304)는 이들 복호 프레임을 기억한다.
참조 프레임 메모리부(305)는 참조 프레임 갱신부(309)에 의해 프레임 메모리(304)로부터 카피되는 1개의 참조 프레임을 기억한다.
intra/inter 판단부(306)는 프레임내 부호화 또는 프레임간 부호화를 선택하고, 부호화부(302), 복호화부(303), 및 부호 데이터 송신부(307)에 통지한다.
통상, 프레임내 부호화는 규칙적인 간격으로(예컨대, 30프레임마다) 선택되고, 다른 기간에는 프레임간 부호화가 선택된다.
그러나, intra/inter 판단부(306)에 의해 프레임내 부호화는 강제적으로 선택되는 리플레쉬 신호(RFSH)를 수신한다.
후에 설명된 바와 같이, 복호화 장치로부터 리플레쉬 신호를 수신한다.
프레임내 부호화가 선택되면, 참조 프레임 갱신부(309)에 통지한다.
부호 데이터 송신부(307)는 전송채널을 통해서 부호화된 동화상 데이터를 동화상 복호화 장치 또는 다른 수신 위치에서의 복수의 동화상 복호화 장치에 송신한다.
부호 데이터 송신부(307)는 참조 프레임 번호(P-프레임), intra/inter 플래그, 및 송신 루팅 정보 등의 다른 필요한 정보를 포함하는 헤더 정보를 출력 데이터 스트림상에 다중 송신한다.
확인 신호 수신부(308)는 동화상 복호화 장치로부터 긍정 확인(ACK)신호를 수신하고, 긍정으로 확인었던 프레임의 참조 프레임 갱신부(309)에 통지한다.
다지점 전송시에는, 확인 신호 수신부(308)가 적어도 일정 다수의 수신지에 의해, 바람직하게는 모든 수신지에 의해 긍정으로 확인된 프레임의 참조 프레임 갱신부(309)에 통지한다.
참조 프레임 갱신부(309)는 intra/inter 판단부(306)와 확인 신호 수신부(308)로부터 수신된 지시에 따라 참조 프레임 메모리부(305)를 갱신한다.
intra/inter 판단부(306)로부터 프레임내 부호화의 지시를 수신한 경우, 참조 프레임 갱신부(309)는 부호화부(302)에 의해 부호화되고, 복호화부(303)에 의해 복호화되며, 프레임 메모리부(304)내에 기록되어야 하는 현 프레임를 기다리고, 다음에 현 참조 프레임을 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 카피하여 프레임 메모리부(304)의 전 프레임 데이터를 소거한다.
또한, 확인 신호 수신부(308)로부터 긍정으로 확인된 프레임의 프레임 번호를 수신한 경우, 참조 프레임 갱신부(309)는 참조 프레임 메모리부(305)에 기억된 프레임을 이용하여 현 프레임의 부호화를 끝내기 위해 부호화부(302)를 기다리고, 다음에 긍정으로 확인된 프레임을 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 카피하여 긍정으로 확인된 프레임 데이터를 프레임 메모리부(304)로부터 소거한다.
도 2는 제 1의 실시예에서의 동화상 복호화 장치(400)의 기본적인 블록도이다.
수신장치내에 배치된 이 복호화 장치는 부호 데이터 입력부(401), 참조 프레임 비교부(402), 참조 프레임 갱신부(403), 참조 프레임 메모리부(404), 프레임 메모리부(405), 복호화부(406), 확인 신호 송신부(407), 동화상 출력부(408), 및 리플레쉬 신호 송신부(409)로 구성되어 있다.
부호 데이터 입력부(401)는 동화상 부호화 장치(300)로부터 송신된 헤더 정보와 부호 데이터를 수신하고, 복호화부(406)에 부호 데이터를 준다.
헤더 정보로부터, 부호 데이터 입력부(401)는 intra/inter 플래그와(P-프레임에 대하여)참조 프레임 번호를 추출하고, 복호화부(406)에 intra/inter 플래그를주며, 복호화부(406)와 참조 프레임 비교부(402) 각각에 참조 프레임 번호를 준다.
참조 프레임 비교부(402)는 부호 데이터 입력부(401)로부터 수신된 참조 프레임 번호와 참조 프레임 메모리부(404)내에 기억된 참조 프레임 번호를 비교한다.
수신된 참조 프레임 번호가 기억된 참조 프레임 번호보다 새로운 것이면, 참조 프레임 비교부(402)는 참조 프레임 갱신 요구와 함께, 참조 프레임 갱신부(403)에 수신된 참조 프레임 번호를 준다.
참조 프레임 갱신 요구를 수신한 경우, 참조 프레임 갱신부(403)은 프레임 메모리부(405)내의 수신된 참조 프레임 번호를 가진 프레임을 찾는다.
그 프레임을 찾으면, 참조 프레임 갱신부(403)는 이 프레임과 참조 프레임 메모리부(404)내의 그것의 프레임 번호를 카피하여, 참조 프레임을 갱신한다.
참조 프레임 메모리부(404)는 1개의 참조 프레임과 그것의 프레임 번호를 기억한다.
프레임 메모리부(405)는 복호화된 프레임 데이터와 가장 최근 프레임의 1개의 번호의 프레임 번호를 기억한다.
참조 프레임 갱신부(403)는 프레임 메모리부(405)로부터 참조 프레임 메모리부(404)에 프레임을 카피하여 참조 프레임을 갱신할 때마다, 카피된 프레임과 모든 전프레임이 프레임 메모리부(405)로부터 소거된다.
복호화부(406)는 첨부한 intra/inter 플래그에 관해서, 부호 데이터 입력부(401)로부터 수신된 부호 데이터를 복호화한다.
이 플래그 신호가 프레임간 부호화를 지시하면, 복호화부(406)는 먼저 수신된 참조 프레임 번호가 참조 프레임 메모리부(404)내에 기억된 참조 프레임 번호와 일치한다는 것을 체크하고, 이들 2개의 프레임 번호가 일치한 경우만 데이터를 복호화하며; 이 경우에, 참조 프레임 메모리부(404)내에 기억된 참조 프레임에 관해서 프레임내 복호화을 한다.
복호화 프로세스시, 복호화부(406)는 CRC(cyclic redundancy check) 등의 오류 검사를 행한다.
이 감사가 끝나면, 프레임은 성공적으로 복호화되었고 간주하고, 복호화부(406)는 동화상 출력부(408)에 복호화된 데이터를 전송한다.
이 프레임이 I-프레임이었다면, 복호화부(406)는 참조 프레임 메모리부(404)에 복호화된 데이터 및 프레임 번호를 기록하여, 참조 프레임을 갱신하고, 확인 신호 송신부(407)에 프레임 번호를 준다.
이 프레임이 P-프레임이었다면, 복호화부(406)는 프레임 메모리부(405)에 복호화된 데이터 및 프레임 번호를 기록한다.
또한, 어떤 상태하에서, 복호화부(406)는 확인 신호 송신부(407)에 성공적으로 복호화된 P-프레임의 프레임 번호를 준다.
다양한 상태가 이용될 수 있고, 즉 이하 설명에서, 부호 데이터가 어떤 한계 크기를 넘으면 프레임 번호는 확인 신호 송신부(407)에 제공된다고 가정한다.
복호화부(406)로부터 프레임 번호를 수신할 때, 확인 신호 송신부(407)는 동화상 부호화 장치(300)에 긍정 확신(ACK)신호를 송신한다.
ACK 신호는 복호화부(406)로부터 수신된 프레임 번호를 포함한다.
동화상 출력부(408)는 복호화부(406)로부터 동화상 표시 장치 또는 그와 비슷한 장치에 복호화된 데이터를 출력한다.
리플레쉬 신호 송신부(409)는 사용자 제어 입력 장치(420)로부터 리플레쉬 요구를 수신하여 동화상 부호화 장치(300)에 대응하는 리플레쉬(RFSH) 신호를 준다.
다음에, 제 1의 실시예의 동작을 도 3, 도 4 및 5를 참조하면서 설명한다.
이들 도면 및 다음 도면에서, 확인 신호는 직선 화살표로 표시되고, 참조 관계는 곡선 화살표로 표시된다.
도 3은 부호화 및 복호화 프로세스와 데이터 전송 프로세스를 비교적 고속으로 행하는 경우를 나타낸다.
제 1의 프레임(a)은 제 1의 화살표 ACK로 표시된 것처럼, I-프레임으로 부호화되고, 성공적으로 송신되어 동화상 복호화 장치(400)에 의해 복호화되고, 동와상 복호화 장치(400)는 참조 프레임 메모리부(404)내에 복호화된 데이터를 저장하고, 동화상 부호화 장치(300)에 긍정 확인 신호를 다시 보낸다.
또한, 프레임(a)는 동화상 부호화 장치(300)에서 복호화부(303)에 의해 복호화된다.
복호화된 데이터는 프레임 메모리부(304)에 기록된 후, 참조 프레임 메모리부(305)에 카피되기 때문에, 부호화 장치 및 복호화 장치내의 참조 프레임 메모리부(305, 404)는 참조 프레임으로서 사용하는 복호화된 동일 데이터를 포함한다.
다음 몇 개의 프레임(b, c, d 및 e)은 이 참조 프레임(a)에 관해서 성공적으로 부호화되어 복호화된다.
프레임(b, c 및 d)은 프레임(a)과 많이 다르지 않기 때문에, 부호 데이터 크기는 작고, 동화상 복호화 장치(400)는 확인 신호를 되돌려 보내지 않는다.
그러나, 부호 데이터의 크기를 약간 증가시키는 프레임(e)과는 많이 다르고; 따라서 동화상 복호화(400)는 프레임(e)에 대한 긍정 확신 신호를 되돌려 보낸다.
동화상 부호화 장치(300)는 다음 프레임(f)의 부호화를 시작하기 전에 이 확인 신호를 수신한다.
이와 같이, 참조 프레임 갱신부(309)는 프레임(e)에 관하여 부호화되어야 하는 프레임(f) 시간에 맞게 참조 프레임 메모리부(305)에 프레임(e)의 복호화된 데이터를 카피할 수 있어, 프레임(f)의 부호 데이터의 크기를 줄일 수 있다.
동화상 복호화 장치(400)가 프레임(f)의 부호 데이터를 수신하면, 참조 프레임 비교부(402)는 참조 프레임 메모리부(404)에 기억된 (프레임a의) 프레임 번호보다 최근 것인 (프레임e의)첨부된 참조 프레임 번호를 찾고, 참조 프레임 갱신부(403)에게 프레임 메모리부(405)로부터 참조 프레임 메모리부(404)에 프레임(e)을 카피하도록 명한다.
그래서, 복호화부(406)는 프레임(e)에 관하여 프레임(f)을 성공적으로 복호화한다.
또한, 프레임(g, h)은 프레임(e)에 관하여 부호화되어 성공적으로 복호화된다.
다지점 접속에서, 참조 프레임은 적어도 일정 다수의 수신지, 바람직하게는모든 수신지가 프레임(e)에 대한 긍정 확인 신호를 되돌려 보내는 경우만 참조 프레임을 프레임(a)에서 프레임(e)으로 변경된다.
도 4는 동화상 복호화 장치가 프레임(d)에 대한 긍정 확인 신호를 되돌려 보내는 경우를 나타내지만, 보다 느린 부호화, 보다 느린 복호화, 또는 보다 느린 전송 속도 때문에, 동화상 부호화 장치(300)는 프레임(e)의 부호화가 이미 시작된 후에 이 긍정 확인 신호를 수신한다.
그러므로, 프레임(e)는 현 참조 프레임(a)에 관해서 부호화되고 복호화된다.
그 후, 참조 프레임은 프레임(d)로 변경되고, 다음 프레임(f, g, h)는 프레임(d)에 관해서 부호화되고 복호화된다.
도 5는 프레임 드롭아웃의 경우를 나타낸다.
프레임(b, c, d, e)은 제 1의 I-프레임(a)에 관해서 부호화된다.
프레임(b-d)은 성공적으로 복호화되고, 프레임(d)에 대하여 긍정 확인 신호을 복귀한다.
프레임(e)의 부호 데이터는 전송시에 도면에 X로 표시된 바와 같이 드롭되거나 손상된다.
그 결과, 부호 데이터가 수신되지 않거나 수신되거나, 교차 해칭으로 표시된 바와 같이 성공적으로 복호화될 수 없다.
이것은 확실히 확인된 프레임(d)에 관하여 성공적으로 부호화되고 복호화되는 이하의 프레임(f, g, h)에 영향을 미치지 않는다.
동화상 복호화 장치(400)는 프레임(e)의 드롭아웃후 복호화를 계속하기 위해다음 I-프레임(i)를 기다리지 않아야 한다.
동화상 출력부(408)에 의해 출력된 동화상을 보는 사용자가 바람직하지 않은 화질의 저하를 인지하면, 검출되지 않은 오류 때문에, 예컨대, 사용자는 버트를 누르거나 리플레쉬 신호 송신부(409)에 리플레쉬 명령을 보내는 비슷한 동작을 행할 수 있다.
그래서, 리플레쉬 신호는 다음 프레임이 강제로 I-프레임으로 부호화되도록, 동화상 부호화 장치(300)에 전송되어, 고품질의 화상을 재기억한다.
제 1의 실시예에 있어서, 확실히 확인된 P-프레임만 참조 프레임으로 될 수 있기 때문에, P-프레임의 드롭아웃은 다음 프레임의 복호화를 결코 방해하지 않는다.
도 23의 종래 기술과 다르면, 다음 I-프레임의 도착을 기다리지 않고 복호화를 계속할 수 있다.
동시에, P-프레임이 성공적으로 복호화되고 긍정으로 확인되면, 그것은 다음 프레임을 부호화하는 참조 프레임으로서 이용될 수 있어, 부호 데이터와 참조 프레임과의 일시적인 거리를 줄일 수 있고, 도 26에 나타낸 종래 기술과 비교하여 데이터 압축비를 증가시킬 수 있다.
특히, 시스템 상태에 의해 실질적으로 모든 프레임이 전송되어 성공적으로 복호화된 경우, 확인 신호를 보내는 부호 데이터 크기의 한계가 충분하게 로우 레벨로 설정되면, 제 1의 실시예의 데이터 압축 성능은 도 22에 나타낸 예의 성능에 접근하고, 여기서 모든 프레임은 전 프레임에 관하여 부호화된다.
채널 상태가 좋지 않거나, 한계가 커지면, 긍정 확인 신호는 자주 발생하지 않고, 참조 프레임의 갱신도 자주 발생하지 않으며, 따라서 데이터 압축비는 감소한다.
제 1이 실시예는 도 26의 종래 기술의 예에서보다 높은 데이터 압축비를 달성하지만, 프레임 드롭아웃에 대하여는 같은 보호를 준다.
이와 같이 제 1의 실시예는 데이터 압축이 채널 상태에 따라 변화되게 하기 때문에, 전송 시스템이 좋은 채널 상태를 이용하여 높은 압축비를 달성할 수 있고, 역채널 상태에서 조차도 좋은 화질을 유지할 수 있다.
도 6은 동화상 부호화 장치(500)에 복호화부가 없는 제 1의 실시예의 변형예를 나타낸다.
부호화 장치의 다른 실시예는 도 1에서와 같은 것이고, 동일 참부 부호를 붙인다.
동화상 입력부(301)가 프레임 메모리부(304)내에 직접 수신된 프레임을 기록한다는 점을 제외하고, 이 변형 동작은 상기 설명된 것과 동일한다.
동화상 부호화 장치(500)의 구성 및 동작을 간소화하것 외에도, 이 변형은 모우션 보상의 정밀도에 관한 이점을 갖는다.
동화상 부호화 장치 및 동화상 복호화 장치가 정확하게 동일 데이터에 관하여 P-프레임들을 부호화하지 않고 복호화하지 않는다고 하는 이점이 있다.
다른 변형예로서, 프레임 메모리부(304)내에 먼저 기록된 데이터를 갖는 대신에, 도 1에서의 복호화부(303) 또는 도 6에서의 동화상 입력부(301)는 참조 프레임 메모리부(305)내에 직접 I-프레임 데이터를 기록할 수 있고, 다음에 참조 프레임 갱신부(309)에 의해 참조 프레임 메모리부(305)에 카피된다.
이 배치에 의해 동화상 부호화 장치의 동작이 간소화된다.
또 다른 변형예로서, 참조 프레임 메모리부(305)와 프레임 메모리부(304)는 기억된 프레임이 참조 프레임이다는 것을 지시하기 위해 포인터를 사용하여, 단일 프레임 메모리부와 결합될 수 있다.
1개의 메모리부로부터 또 다른 메모리부에 데이터를 모두 카피하지 않기 때문에, 이 배열에 의해 동화상 부호화 장치의 동작는 더 간소화되고, 메모리 요구를 줄인다.
이 결합된 프레임 메모리부는 메모리가 가득차면 오래된 데이터에 새로운 데이터를 겹쳐쓰기하여, 링 버퍼로서 사용될 수 있어 오래된 데이터를 소거할 필요가 없다.
참조 프레임 메모리부(305)와 결합되지 않은 경우, 프레임 메모리부(304)에는 동일한 예가 적용될 수 있다.
또 다른 변형예로서, 도 2에서의 동화상 복호화 장치(400)내의 복호화부(406)는 복호화 프로세스를 평가하고, 좋지 않은 화질 또는 다른 복호화 문제점의 조짐이 나타나면 언제나 리플레쉬 신호 송신부(409)에 리플레쉬 명령을 줄 수 있다.
그러면, 리플레쉬 신호 송신부(409)는 사용자로부터의 요구가 없더라도 리플레쉬 신호를 송신할 수 있다.
또한, 리플레쉬 신호는 I-프레임이 성공적으로 복호화될 수 없을 때 언제나 송신될 수 있다.
다른 변형예에서, 동화상 부호화 장치(300)는 다수의 블록으로 각 프레임을 분할하고, 각 블록을 따로따로 부호화한다.
P-프레임에서, 각 블록은 참조 프레임내의 대응하는 블록에 관하여 부호화된다.
분리 참조 프레임 번호는 각 블록에 대해서 보유될 수 있기 때문에, 동일 프레임내의 다른 블록들은 다른 참조 프레임들에 관하여 부호화될 수 있고, 분리 확인 신호는 각 블록에 전송될 수 있다.
블록이 프레임보다 작기 때문에, 오류의 확률이 감소하고, 참조 프레임 갱신율이 향상될 수 있으며, 데이터 압축비도 향상될 수 있어, 드롭아웃의 효과가 한 개의 프레임에서의 특별한 블록에 제한될 수 있다.
제 2의 실시예
제 2의 실시예는 동화상 복호화 장치(400)가 모두 성공적으로 복호화된 프레임을 확인한다는 점을 제외하고 제 1의 실시예와 동일하다.
도 7은 프레임 번호 설정부(310)와 데이터 카피부(311)를 포함하는 참조 프레임 갱신부(309A)의 내부 구성을 나타낸다.
이 참조 프레임 갱신부(309A)는 제 1의 실시예에서의 참조 프레임 갱신부(309)의 바람직한 내부 구성을 나타낸다.
프레임 번호 설정부(310)는 확인 신호 수신부(308)에 의해 긍정 확인 신호가수신되는 프레임들의 프레임 번호를 설정한다.
이들 프레임 번호는 내부 동작 메모리 영역(도시하지 않음)내에 설정되고, 데이터 카피부(311)에 설정한 프레임 번호를 준다.
데이터 카피부(311)는 프레임 번호 설정부(310)로부터 전송된 번호의 프레임을 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 카피한다.
다음에 제 2의 실시예의 동작을 설명한다.
이 참조 프레임 갱신부(309A)는 동화상 복호화 장치(400)로부터 전송된 ACK 신호를 바탕으로 참조 프레임을 갱신한다.
도 8에 있어서, 예컨대, 화살표 ACK로 표시된 바와 같이, 동화상 복호화 장치(400)는 프레임(a, b, c)을 확인한다.
이 동화상 부호화 장치(300)는 프레임(c)의 부호화를 시작한 후 프레임(b)에 대한 ACK 신호를 수신하기 때문에, 프레임(c)은 여전히 프레임(a)에 관하여 부호화되지만, 프레임(d)은 프레임(b)에 관하여 부호화된다.
비슷하게, 프레임(e)은 프레임(c)에 관하여 부호화된다.
동화상 복호화 장치(400)는 프레임(a)에 관하여 프레임(b, c)을, 프레임(b)에 관하여 프레임(d)를, 프레임(c)에 관하여 프레임(e)를 복호화한다.
프레임(d)의 복호화를 성공하지 못했기 때문에, 동화상 복호화 장치(400)는 프레임(d)에 대하여 ACK 신호를 송신할 수 없다.
그러므로, 동화상 부호화 장치(300)는 프레임(f)의 부호화시 참조 프레임을 변경하지 않지만, 참조 프레임으로서 프레임(c)를 계속 사용한다.
동화상 복호화 장치(400)는 이와 같이 프레임(f)를 복호화할 수 있다.
프레임(e)는 성공적으로 복호화되고 확인되었기 때문에, 프레임(e)에 관하여 프레임(g)를 부호화한다.
또한, 프레임(g)가 성공적으로 복호화될 수 있다.
제 2의 실시예에 있어서는, 제 1의 실시예에서와 마찬가지로, 프레임(d)의 드롭아웃은 다음 프레임의 복호화에 영향을 주지 않기 때문에, 다음 I-프레임를 기다리지 않고 성공적으로 복호화될 수 있다.
드롭아웃으로 인한 화질의 저하를 최소화한다.
또한, 프레임(c, d, e, g, h)이 모두 2개의 프레임전 프레임에 관하여 부호화되고, 프레임(f)는 단지 3개의 프레임전 프레임에 관하여 부호화되기 때문에 데이터 압축비가 좋다.
프레임(f)에 대하여 참조 프레임으로서 프레임(d)대신 프레임(e)의 사용은 데이터 압축비에만 다소 영향을 미친다.
도 9는 ACK신호를 동화상 복호화 장치(400)로부터 동화상 부호화 장치(300)에 송신함으로써 채널에 드롭아웃이 생긴 경우를 나타낸다.
이 예에서, 프레임(d)은 성공적으로 복호화되지만, 경로 지정에 있어서는 대응하는 ACK신호가 없다.
프레임(c)에 관하여 프레임(f)를, 프레임(e)에 관하여 프레임(g) 등을 부호화함으로써 동화상 부호화 장치(300)는 도 8에 나타낸 것과 같이 작용한다.
이들 모든 프레임은 성공적으로 복호화될 수 있고, 데이터 압축비는 제8도와같다.
따라서, 제 2의 실시예는 신호의 드롭아웃에 대한 높은 허용차를 갖고, 부호화 장치와 복호화 장치의 양 방향으로 이동하는 데이터를 갖는다.
제 3의 실시예
제 3의 실시예는 동화상 복호화 장치(400)가 긍정 확인 신호 대신에 부정 확인 신호(NACK)신호를 송신한다는 점에서 상기 실시예와 다르다.
송신시 프레임이 드롭되거나 회복할 수 없게 손상되면 부정 확인 신호가 송신된다.
부정 확인 신호는 회복할 수 없는 오류가 수신되지 않았거나 수신되었던 프레임의 프레임 번호를 포함한다.
이 차이를 고려하지 않고, 제 3의 실시예에서의 동화상 복호화 장치(400)는 도 2에 나타낸 구성을 포함하는 제 1의 실시예와 같이 동작한다.
동화상 부호화 장치(300)는 도 1에 나타낸 구성을 갖지만, 참조 프레임 갱신부의 동작은 다르다.
도 10은 제 3의 실시예에서의 참조 프레임 갱신부(309B)의 내부 구성을 나타내고, 여기서 B는 이 구조가 제 2의 실시예에서의 구조와 다르다는 것을 나타낸다.
프레임 번호 설정부(310A), 데이터 카피부(311A) 및 프레임 번호 확인부(312)는 구성 요소이고, 여기서 A는 제 2의 실시예와의 차이를 나타낸다.
프레임 번호 설정부(310A)는 확인 신호 수신부(308)로부터 수신된 부정으로 확인된 신호의 프레임 번호를 프레임 번호 확인부(312)에 주고, 프레임 번호 확인부(312)로부터 답신으로 가장 최근 확인된 프레임 번호를 수신한다.
프레임 번호 설정부(310A)는 내부 메모리(도시하지 않음)내의 가장 최근 확인된 프레임 번호를 설정하고, 데이터 카피부(311A)에 이들 가장 최근 확인된 프레임 번호를 보낸다.
프레임 번호 설정부(310A)로부터 부정으로 확인된 프레임 번호를 수신하는 경우, 프레임 번호 확인부(312)는 프레임 번호 설정부(310A)로부터 수신된 프레임 번호보다 오래되고, 부정으로 확인되지 않았던 가장 최근 프레임 번호를 찾기 위해 프레임 메모리부(304)에 기억된 프레임 번호중 하나를 검출한다.
가장 최근 확인된 프레임 번호로서 이 프레임 번호를 프레임 번호 설정부(310A)에 되돌려 보낸다.
데이터 카피부(311A)는 통상 도 1에서 부호화부(302)에 의해 프레임 메모리부(304)에 그 프레임이 기록되자 마자, 부호화부(302)가 다음 프레임을 부호화하기 전에, 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 각 프레임을 카피한다.
그러나, 데이터 카피부(311A)는 프레임 번호 설정부(310A)로부터 가장 최근 확인된 프레임 번호를 수신한 경우, 프레임 번호를 가진 프레임을 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 카피한다.
동화상 부호화 장치(300)의 다른 부분은 새로운 참조 프레임이 참조 프레임 메모리부(305)내에 카피될 때마다 프레임 데이터가 프레임 메모리부(304)로부터 제거된다는 점을 제외하고, 제 1의 실시예에서처럼 동작한다.
부정 확인 신호의 유무에 있어서, 프레임 데이터는 일정 시간 동안, 바람직하게는 가능한 장시간 동안 프레임 메모리부(304)내에 보유된다.
다음에, 제 3의 실시예의 동작을 도 11를 참조하면서 설명한다.
동화상 부호화 장치(300)가 부정확인 신호를 수신하지 않는 동안, 참조 프레임 갱신부(309B)는 모든 전송된 프레임이 성공적으로 복호화되었고 간주하고, 참조 프레임을 가장 최근에 부호화된 프레임으로 갱신한다.
그러므로, 통상, 도 11에서 실선 화살표로 표시된 것처럼, 전 프레임에 대하여 즉시 프레임이 부호화된다.
도 11에서의 프레임(b, c, d, e)은 이 방법으로 부호화된다.
프레임(a, b, c)는 성공적으로 복호화되지만, 프레임(d)는 전송시 드롭되거나 손상된다.
그 동화상 복호화 장치(400)는 부정 확인 신호(NACK)를 되돌려 보낸다.
부호화부(302)가 프레임(d)에 관하여 프레임(e)를 부호화하는 동안 이 NACK 신호는 동화상 부호화 장치(300)에 도달한다.
부호화부(302)가 프레임(d)에 관하여 완료하자마자, 참조 프레임 갱신부(309B)는 부정으로 확인되지 않았던 프레임(d)전 가장 최근 프레임, 여기서는 프레임(c)을 프레임 메모리부(304)에서 참조 프레임 메모리부(305)에 카피함으로써 참조 프레임을 갱신한다.
동화상 복호화 장치(400)가 프레임(d)를 복호화할 수 없었고 프레임(e)을 복호화 할 수 없다는 것을 알기 때문에 프레임(d 및 e)은 이 때 프레임메모리부(304)로부터 소거될 수 있다.
현재, 프레임(f)는 도 11에 나타낸 점선 화살표로 표시된 것처럼, 프레임(c)에 관하여 부호화된다.
그러므로, 동화상 복호화 장치(400)는 프레임(f)를 복호화할 수 있다.
프레임(e)는 프레임(d)에 관하여 부호화되었기 때문에 복호화될 수 없지만, 프레임(e) 자신은 전송시 드롭되거나 손상되지 않는다.
따라서, 동화상 부호화 장치(300)가 프레임(f)을 부호화하는 동안 프레임(e)에 대하여 동화상 복호화 장치(400)에 의해 부정확인 신호 없이 복귀된다.
그러므로, 데이터 카피부(311B)는 프레임 메모리부(304)에서 참조 프레임 메모리부(305)에 프레임(f)을 카피하고, 프레임(g)는 프레임(f)에 관하여 부호화된다.
비슷하게, 프레임(h, i, j, k) 각각은 전 프레임에 대해서 즉시 부호화된다.
2개의 프레임전 프레임 대신에, 각 프레임이 전 프레임에 대하여 즉시 부호화되기 때문에, 제 2의 실시예와 비교하여, 제 3의 실시예는 통상 보다 높은 데이터 압축비를 달성한다.
프레임 드롭아웃이 발생하면, 1이상의 프레임은 복호화될 수 없지만(즉, 도 11에서의 프레임(e)), 다음 I-프레임을 기다릴 필요 없이 다시 복호화를 빨리 할 수 있다.
다지점 전송시, 확인 신호 수신부(308)는 프레임이 적어도 일정 다수의 수신지에서 부정으로 확인되면, 프레임을 부정 확인 신호라고 보고한다.
예컨대, 프레임이 적어도 한 개의 수신지에서 부정으로 확인되면, 프레임을 부정 확인 신호라고 보고할 수 있다.
제 4의 실시예
제 4의 실시예는 제 3의 실시예와 일반적으로 비슷하지만, 동화상 복호화 장치(400)는 프레임 자체에 전송 오류 또는 드롭아웃이 발생했지, 또는 전 프레임에 전송 오류 또는 드롭아웃이 발생했는지에 관계없이 성공적으로 복호화될 수 없는 모든 프레임에 대하여 부정확인(NACK)신호를 송신한다.
확인 신호 채널상에 드롭아웃의 확률이 있으면 이 개요는 바람직하다.
각 NACK 신호는 복호화될 수 없는 프레임의 프레임 번호와 바람직한 참조 프레임 번호를 지정한다.
바람직한 참조 프레임 번호는 성공적으로 복호화되었던 가장 최근 프레임의 프레임 번호이다.
이하 동화상 부호화 장치내의 참조 프레임 갱신부의 구조와 동작을 설명한다.
도 12는 참조 프레임 갱신부(309C)의 내부 구조를 나타내고, 여기서 C는 이 구조가 상기 제 3의 실시예와 다르다는 것을 나타낸다.
프레임 번호 설정부(310C), 데이터 카피부(311B), 프레임 번호 확인부(312A), 후보 번호 소거부(313), 및 부호 번호 기록부(314)는 구성 소자이다.
프레임 번호 설정부(310C)는 부정으로 확인된 프레임 번호를 프레임 번호 확인부(312A)에 보낸다.
프레임 번호 확인부(312A)가 이하 설명된 것처럼 부정으로 확인된 프레임 번호를 확인하면, 프레임 번호 설정부(310C)는 바람직한 참조 프레임 번호를 데이터 카피부(311B)와 후보 번호 소거부(313)에 보낸다.
부정으로 확인된 프레임 번호를 확인하지 않으면, 프레임 번호 설정부(310C)는 동작하지 않는다.
프레임 번호 설정부(310C)로부터 부정확인 프레임 번호를 받으면, 프레임 번호 확인부(312A)는 후보 번호 기록부(314)에 기억된 후보 번호 리스트에서 부정확인 프레임 번호를 검출하고, 부정 확인 프레임 번호가 후보 번호 리스트에 존재하는지에 관해서 프레임 번호 설정부(310C)에 통지한다.
후보 번호 리스트에 존재하도록 기록된 프레임 번호는 확인되었다고 간주한다.
바람직한 참조 프레임 번호를 수신하면, 후보 번호 소거부(313)는 후보 번호 리스트에서 바람직한 참조 프레임 번호보다 더 최근의 모든 프레임 번호를 소거한다.
프레임 번호가 후보 번호 리스트로부터 소거되면, 대응하는 프레임 데이터는 프레임 메모리부(304)로부터 소거될 수 있다.
후보 번호 기록부(314)가 부호 번호 리스트를 기억하고 갱신한다.
각 프레임이 부호화부(302)에 의해 부호화되기 때문에, 그 프레임 번호는 후보 번호 리스트에 추가된다.
프레임이 프레임 메모리부(304)와 참조 프레임 메모리부(305)로부터 소거되었다면, 그 프레임 번호는 부호 번호 리스트로부터 제거된다.
복호화부(303)가 프레임을 복호화 하자마자 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 통상 각 프레임을 카피하도록, 데이터 카피부(311B)가 제 3의 실시예에서 데이터 카피부(311A)처럼 동작한다.
그러나, 프레임 번호 설정부(310C)로부터 바람직한 참조 프레임 번호를 받으면, 데이터 카피부(311B)는 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 그 프레임 번호를 가진 프레임을 카피한다.
다음에, 제 4의 실시예의 동작을 도 13, 도 14를 참조하면서 설명한다.
도 13은 도 11과 동일한 상태를 나타내고, 여기서, 전송시에는 프레임(d)을 잃고, 프레임(d, e)를 복호화할 수 있으며, 이들 2개의 프레임(d, e)에 대해서 NACK 신호를 복귀한다.
NACK 신호는 바람직한 참조 프레임 번호로서 프레임(c)의 프레임 번호를 지정한다.
이들 NACK 신호가 도착할 때까지, 참조 프레임 갱신부(309C)는 모든 프레임이 성공적으로 복호화되었다고 간주하고, 프레임마다 참조 프레임을 갱신한다.
그러므로, 프레임(b-e)은 모두 전 프레임에 관하여 즉시 부호화된다.
참조 프레임 갱신부(309C)가 프레임(d)의 부정 확인을 받으면, 프레임(a-d)은 부호화되어 송신되었고 이미 후보 번호 리스트상에 있었으며, 프레임(e)는 현재 부호화되고 있다.
프레임 번호 확인부(312A)는 프레임(d)가 후보 번호 리스트상에 있다고 확인하고, 그래서 프레임 번호 설정부(310C)는 데이터 카피부(311B)와 후보 번호 소거부(313)에 프레임(c)의 프레임 번호를 보낸다.
프레임(e)의 부호화가 완료되면, 데이터 카피부(311)는 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 프레임(c)를 카피하고, 후보 번호 소거부(313)는 후보 번호 리스트로부터 프레임(d, e)의 프레임 번호를 소거한다.
프레임(d)는 프레임 메모리부(304)로부터 소거된다.
프레임(e)는 프레임 메모리부(304)내에 바람직하게 기록되지 않고; 그러나, 만약 기록되면, 즉시 소거된다.
프레임(f)는 프레임(c)에 관하여 부호화된다.
프레임(f)을 부호화하는 동안, 참조 프레임 갱신부(309C)는 부재 프레임(d)에 관하여 부호화되었기 때문에, 복호화될 수 없는 프레임(e)에 대하여 부정 확인을 받는다.
프레임 번호 확인부(312A)는 후보 리스트상에서 프레임(e)를 검출하지만, 상기 설명된 것처럼 후보 번호 소거부(313)에 의해 소거되었기 때문에 그것을 찾을 수가 없다.
부정 확인된 프레임(e)이 프레임 번호 확인부(312A)에 의해 확인되지 않기 때문에, 프레임 번호 설정부(310C)는 데이터 카피부(311B)와 후보 번호 소거부(313)에 어떠한 프레임 번호도 주지 않는다.
프레임(f)이 부호화되었다면, 프레임(f)는 동화상 복호화 장치(400)에 전송되어 후보 번호 리스트에 추가되며, 데이터 카피부(311B)는 참조 프레임 메모리부(305)내에 프레임(f)를 즉시 카피한다.
그러므로, 프레임(g)은 전 프레임(f)에 관하여 즉시 부호화된다.
이 방법으로 다음 프레임들의 부호화를 계속한다.
도 14는 부정확인 신호를 송신했지만, 도착하지 않는 경우를 나타낸다.
상기처럼, 프레임(d, e)을 복호화할 수 없으면, 프레임(d)는 전송시 드롭되거나 손상된다.
그러나, 이 때, 프레임(d)에 대한 NACK 신호가 전송시 분실되기 때문에, 참조 프레임 갱신부(309C)는 그 프레임(d)를 실현하지 않고 복호화될 수 없으며, 여느 때처럼 계속해서 프로세스를 하여, 프레임(e)에 관하여 프레임(f)를 부호화한다.
프레임(a-e)는 모두 후보 번호 리스트 상에 있다.
동화상 복호화 장치(400)는 바람직한 참조 프레임 번호로서 프레임(c)의 프레임 번호와 함께, 프레임(e)에 대한 또 다른 NACK 신호를 송신하고, 이 NACK 신호는 동화상 부호화 장치(300)에 수신된다.
데이터 카피부(311B)는 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)내에 프레임(c)를 카피하고, 후보 번호 소거부(313)는 후보 번호 리스트로부터 프레임(c)보다 최근의 프레임 번호(프레임 번호 d, e, f)를 모두 소거한다.
프레임(g)는 프레임(c)에 관하여 부호화된다.
동화상 복호화 장치(400)는 바람직한 참조 프레임 번호로서 프레임 번호(c)와 함께, 프레임(f)에 대한 NACK 신호를 전송한다.
그러나, 프레임 번호(f)가 후보 번호 리스트로부터 소거되었기 때문에, 참조 프레임 갱신부(309C)는 이 NACK 신호를 무시하고, 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 프레임(c)보다는 프레임(g)를 카피한다.
이와 같이, 프레임(h)은 프레임(g)에 관하여 부호화될 수 있다.
프레임(d)와 그 부정확인 신호의 손상 때문에, 3개의 프레임(d, e, f)이 복호화될 수 없지만, 그럼에도 불구하고 시스템은 원상태로 된다.
프레임(g)와 다음 프레임들은 모두 성공적으로 복호화될 수 있기 때문에, 화질의 저하를 피할 수 있다.
또한, 프레임(g)를 제외한 모든 프레임은 전 프레임에 관하여 즉시 부호화되기 때문에, 높은 데이터 압축비를 유지한다.
프레임 번호 확인부(312)는 후보 번호 리스트상에 부정 확인된 프레임이 있는지 어떤지 체크하고, 부정 확인된 프레임 번호가 후보 번호 리스트상에 없으면, NACK 신호를 무시한다는 것이 제 3과 제 4의 실시예의 다른 점이고, 제 4의 실시예는 반복된 NACK 신호에 답하여 오래된 참조 프레임을 불필요하게 보유하고 있지 않다.
즉, 도 13에 있어서, 프레임(g)은 프레임(c)에 관하여 부호화되지만, 제 3의 실시예(도 11)에 있어서, 프레임(g)는 프레임(f)에 관하여 부호화되었다.
따라서, 프레임 드롭아웃이 발생하면, 제 4의 실시예는 제 3의 실시예보다 더 좋은 데이터 압축비를 달성할 수 있다.
제 4의 실시예이 이점은 전송시 동화상 부호화 장치(300)와 복호화 장치(400)사이의 왕복을 증가시키는 것이다.
제 4의 실시예의 변형예로서, 동화상 복호화 장치(400)는 NACK 신호로부터 바람직한 참조 프레임 번호를 생략할 수 있고, 동화상 부호화 장치(300)는 바람직한 참조 프레임으로서 부정으로 확인되지 않았던 마지막 전 프레임을 처리할 수 있다.
이 변형예는 NACK 신호 전송채널을 높이 신뢰할 수 있을 때 적합하다.
또 다른 변형예로서, 동화상 복호화 장치(400)는 ACK 신호와 NACK 신호를 전송할 수 있고, 동화상 부호화 장치(300)내의 참조 프레임 갱신부(309C)는 바람직한 참조 프레임 번호로서 ACK 신호가 수신되었던 가장 최근 프레임 번호를 처리할 수 있다.
제 5의 실시예
제 5의 실시예의 전송 시스템은 프레임마다 긍정 또는 부정확인 신호를 보내고, 채널 상태에 따라, 적합하게 참조 프레임 갱신 모드를 조정한다.
알맞은 채널 상태하에, 참조 프레임 번호는 통상 프레임마다 갱신되지만, 제 3 및 제 4의 실시예에서처럼, 부정 확인을 받으면 원래 상태로 설정된다.
이 동작 모드를 NACK 모드라고 칭한다.
적합하지 않은 채널 상태하에, 참조 프레임 번호는 제 1 및 제 2의 실시예에서처럼, 긍정 확인을 받은 경우만 갱신된다.
이 동작 모드를 ACK 모드라고 칭한다.
따라서, 동화상 부호화 장치는 채널 참조 프레임 갱신부에다가, 채널 판정부 및 모드 변환부를 가지고 있다.
도 15는 제 5의 실시예의 동화상 부호화 장치(600)의 구성을 나타내고, 동일한 소자에 대하여는 도 1에서와 같은 참조 부호를 붙이고, 비슷한 소자에 대하여는 영문자를 가진 참조 부호를 붙인다.
이 설명은 제 1의 실시예와 다르거나 제 1의 실시예에 존재하지 않는 소자에 대해서 초점을 맞춘다.
이들 소자는 확인 신호 수신부(308A), 참조 프레임 갱신부(309D), 채널 판정부(315), 갱신 모드 변환부(316)를 포함하고 있다.
확인 신호 수신부(308A)는 확인 신호를 받아, 긍정 또는 부정확인 정보를 참조 프레임 갱신부(309D)와 채널 판정부(315)에 보낸다.
확인 신호가 일정한 시간내에 도착하지 않은 경우에, 확인 신호 수신부(308A)는 그 프레임을 부정확인 신호라고 판정한다.
다지점 전송시, 확인 신호 수신부(308A)는 각 도착지로부터 확인 신호를 수신하여, 적어도 일정 다수의 지점(바람직하게는 전 지점)에서 부정으로 확인되었던 프레임들의 프레임번호를 산출하고, 다른 프레임 번호를 부정확인 신호라고 판정한다.
참조 프레임 갱신부(309D)는 intra/inter 판단부(306)와 확인 신호수신부(308A), 갱신 모드 변환부(316)로부터의 지시에 따라서, 참조 프레임을 갱신한다.
ACK 모드시, 확인 신호 수신부(308A)로부터 특정 프레임 번호에 대하여 긍정 확인을 받을 때, 참조 프레임 갱신부(309D)는 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 대응하는 프레임 데이터를 카피한다.
이 때, 그 번호 이전의 데이터는 프레임 메모리부(304)로부터 소거된다.
부정 확인에 답하여, 어떤 동작도 하지 않는다.
NACK 모드시, 참조 프레임 갱신부(309D)는 통상, 부호화부(302)가 다음 프레임을 부호화하기 전에 각 프레임을 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 카피한다.
그러나, 확인 신호 수신부(308A)로부터 부정 확인을 받은 경우에는, 가장 최근 긍정으로 확인된 프레임을 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 카피하기 때문에, 참조 프레임을 원래 상태로 설정한다.
가장 최근 긍정으로 확인된 프레임을 지정하는 정보는 참조 프레임 갱신부(309D)내에 보유되어 있고, 확인 신호 수신부(308A)로부터 긍정 확인을 받을 때면 언제나 갱신된다.
이 때, 가장 최근 긍정으로 확인된 프레임 번호보다 오래된 프레임 번호를 가진 프레임은 프레임 메모리부(304)로부터 소거되어도 좋다.
intra/inter 판단부(306)로부터 프레임내 부호화의 지시를 받은 경우, 참조 프레임 갱신부(309D)는 현 프레임(I-프레임)의 데이터를 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 카피하고, 프레임 메모리부(304)로부터 모든 프레임 데이터를 소거한다.
채널 판정부(315)는 확인 신호 수신부(308A)에서 받은 확인 신호에 따라, 채널 품질을 판정하고, 판정 결과를 갱신 모드 변환부(316)에 준다.
여기서, 채널 품질에는 양호한 상태와 불량한 상태, 즉 2개의 판정 레벨만 있다.
예컨대, 가장 최근의 N 프레임중 M 프레임이상이 부정으로 확인되었다면, 채널 품질이 불량하다고 판정하고, 이들 N프레임중 M 프레임보다 적은 프레임(N≥M, 여기서 M과 N은 양정수)이 부정으로 확인되었다면 채널 품질이 양호하다고 판정한다.
다른 판정 기준을 사용할 수도 있다.
예컨대, 연속적인 L 프레임이 부정으로 확인되면(여기서 L은 양정수), 채널 품질은 불량이라고 판정된다.
갱신 모드 변환부(316)는 채널 판정부(315)의 판정에 따라 갱신 모드를 변환한다.
예컨대, 판정 결과가 제 1의 다수의 연속적인 프레임에 대해 양호하면, 이 모드는 NACK 모드로 변환될 수 있고, 판정결과가 제 2의 다수의 연속적인 프레임에 대해 불량하면, 이 모드는 ACK 모드로 변환될 수 있다.
도 16은 제 5의 실시예의 동화상 복호화 장치(700)의 구성을 나타내고, 여기서 도 2에서와 동일한 소자에 대해서는 동일한 참조 부호를 붙이고, 비슷한 소자에대해서는 영문자를 가진 참조부호를 붙인다.
본 실시예의 동화상 복호화 장치의 구성은 기본적으로 제 1의 실시예와 같다.
몇몇 소자의 구성과 동작은 다르지만, 이들 차이는 아래에서 설명한다.
참조 프레임 비교부(402A)는 각 프레임에 수신된 참조 프레임 번호와 참조 프레임 메모리부(404)에 기록된 참조 프레임 번호를 비교하고, 참조 프레임 번호가 다른 경우, 참조 프레임 갱신부(403)에 참조 프레임 갱신 요구를 준다.
제 1의 실시예는, 단지 순방향에서의 참조 프레임 번호를 새로운 참조 번호로 갱신하였지만, 제 5의 실시예에서는 역방향에서의 참조 프레임 번호를 오래된 프레임 번호로 갱신할 수 있다.
복호화부(406A)는 제 1의 실시예에서 처럼, 참조 프레임 메모리부(404)내에 복호화된 I-프레임, 프레임 메모리부(405)내에 복호화된 P-프레임을 기록하기 위해, 수신된 프레임 데이터를 복호화한다.
또한, 복호화부(406A)는 CRC(cyclic redundancy check)를 이용하여, 복호이상의 유무를 체크하고, 각 프레임이 성공적으로 수신되었는지 실패되었는지를 확인 신호 송신부(407)에게 알린다.
다음에, 제 5의 실시형태의 동작을 설명한다.
이 설명은 ACK 모드가 선택되는지 NACK 모드가 선택되는지에 따라서 달라지는 동화상 부호화 장치(300)의 동작에 관하여 초점을 맞춘다.
이 설명을 간소화하기 위해, 긍정 확인 신호를 받으면 언제나 채널 품질이양호하다고 판정되고, 부정확인 신호를 받으면 언제나 채널 품질이 불량하다고 판정된다.
1개의 프레임이라도 채널 품질이 불량하다고 판정되면, 동작모드는 NACK에서 ACK로 변환되고, 4개의 연속적인 프레임에 대하여 채널 품질이 양호하다고 판정되면, 동작 모든는 ACK에서 NACK로 변환된다.
도 17를 참조하면, 동화상 부호화 장치(300)는 초기에 NACK 모드에서 동작하여, 각 프레임을 전 프레임에 대하여 부호화한다.
프레임(a, b, c)은 성공적으로 복호화되지만, 프레임(d)에서 드롭아웃이 발생한다.
이 드롭아웃을 보고하는 일점쇄선 화살표로 표시된 NACK 신호를 받으면, 프레임(e)이 프레임(d)에 관하여 부호화되는 것을 방지하는 것은 너무 늦지만, 프레임(f)에 대하여, 참조 프레임 번호가 프레임(c), 즉 긍정으로 확인되었던 가장 최근 프레임으로 되돌려 놓는다.
이와 같이, 프레임(f)가 프레임(c)에 관하여 부호화된다.
동화상 복호화 장치(400)는 프레임(e)를 복호화할 수 없지만, 프레임(f)는 복호화할 수 있다.
그러므로, 동화상 복호화 장치(400)는 프레임(e)에 대하여 도 17에서 다른 일점쇄선 화살표로 표시된 부정 확인을 보내고, 프레임(f)에 대하여, 실선 화살표로 표시된 긍정 확인을 보낸다.
그 동안, 동화상 부호화 장치(300)는 프레임(d)의 부정 확인에 의해, ACK 모드로 변환했다.
그러므로, 프레임(e)에 대한 NACK 신호는 무시된다.
참조 프레임이 왼쪽으로 변경되지 않고, 프레임(g)는 프레임(c)에 관하여 부호화된다.
프레임(g)가 부호화되고 있는 동안, 프레임(f)에 대한 긍정 확인 신호가 수신된다.
그러므로, 다음 프레임(h)는 프레임(f)에 관하여 부호화된다.
비슷하게, 프레임(g)에 대하여 수신된 긍정 확인 신호에 의해 프레임(i)가 프레임(g)에 관하여 부호화된다.
또 다른 드롭아웃이 프레임(h)에서 발생한다.
프레임(h)에 대한 NACK 신호가 프레임(j)의 부호화전에 수신되기 때문에, 참조 프레임 번호는 프레임(j)가 부호화될 때 갱신되지 않는다.
프레임(j)가 프레임(g)에 관하여 부호화되고, 성공적으로 복호화된다.
프레임(j)을 부호화하는 동안, ACK 신호가 프레임(i)에 대하여 수신되기 때문에, 다음 프레임(k)는 프레임(i)에 관하여 부호화된다.
또, 프레임(k)에 드롭아웃이 발생한다.
NACK 신호에 의해 프레임(j)에 관해서는 프레임(m)이 부호화되고, 성공적으로 복호화되지만, 프레임(l)의 긍정 확인 신호에 의해, 프레임(l)에 관해서는 프레임(n)이 부호화되어, 성공적으로 복호화된다.
프레임(l, m, n, o)은 모두 성공적으로 복호화된다.
동화상 부호화 장치(300)는 프레임(q)의 부호화후에 그들 긍정 확인 신호를 다시 NACK 모드로 변환한다.
그러므로, 프레임(q)에 관해서는 프레임(r)이 부호화되고, 프레임(r)에 관해서는 프레임(s)가 부호화된다.
양호한 채널 상태하에, 드롭아웃이 없는 경우, 참조 프레임 번호가 프레임 마다 갱신되기 때문에, 왕복 전송 지연이 큰 경우라도 좋은 데이터 압축비가 달성된다.
때때로 드롭아웃이 발생하면, 시스템이 NACK 모드에서 동작하기 때문에, 다음 프레임이나 프레임들이 복호화될 수 없지만, 전송 이상이 없는 구간에서는 화질이 좋기 때문에, 화질의 열하를 걱정하지 않아도 된다.
채널 상태가 불량하면, 동화상 부호화 장치(300)는 NACK에서 ACK로 변환하고 참조 프레임으로서 오직 긍정 확인 프레임만을 이용하여 시작하기 때문에, 1개의 P-프레임의 드롭아웃은 다른 프레임이 복호화되는 것을 막지 못한다.
이 모드시에, 그러한 드롭아웃에 의한 복호불가능한 프레임의 실행 없이 이 시스템은 연속적인 드롭아웃을 견딜 수 있다.
이와 같이 화질 열화는 드롭아웃에 의해 야기된 피할 수 없는 열화에 제한된다.
채널 상태가 불량한 경우, 제 5의 실시예는 도 22에서의 종래예는 물론, 제 3 및 제 4의 실시예에 관해서 l∼ 5 dB 정도의 화질을 향상시킨다.
ACK 또는 NACK 모드에서의 드롭아웃에 따르면, 다음 I-프레임을 기다리지 않고서 P-프레임의 성공적인 복호화를 할 수 있다.
데이터 압축비는 채널 상태에 민감하게 적응하다.
채널 품질이 감소함에 따라, 동화상 부호화 장치(300)는 ACK 모드시에 시간이 증가하는 부분 동안 동작하기 때문에, 데이터 압축비가 감소하지만, 언제든지 NACK 모드시에 전송되는 동안은 데이터 압축비가 제 1 또는 제 2의 실시에에서 보다 더 좋아진다.
제 5의 실시예의 이점은 현 확인 신호를 이용하여, 채널 품질을 판정하는 것이다.
따라서, 채널 판정을 위해 특별히 새로운 정보를 전송할 필요가 없다.
제 5의 실시예의 또 다른 이점은 수신측상의 동작이 참조 프레임 갱신 모드에 의존하지 않는다는 것이다.
단지 동화상 부호화 장치(300)만이 모드를 변환해야 하고, 수신측에 모드 통지 신호를 송신할 필요는 없다.
이 마지막 관점을 고려하면, 모드 통지 신호가 송신된 경우, 신호가 수신되었다는 것을 보증하기 위해 상당한 오류 검출 및 정정 측정을 받아야 한다.
이와 같이 제 5의 실시예는 오류 보호에 필요한 밴드폭 뿐만 아니라 모드 통지 신호를 송신하는 데 필요한 채널 밴드폭을 절약한다.
다음에, 제 5의 실시예의 몇 개의 변형예를 설명한다.
한개의 변형예에 있어서, 각 프레임은 블록으로 분할되고, 분리 참조 프레임 번호는 각 블록에 제공된다.
이 개요는 이미 제 1의 실시예의 변형예에서 설명했다.
이 개요가 제 5의 실시예에 이용되면, 채널은 연속적인 일련의 프레임에서 동일 위치의 블록에 대해서 수신된 확인 신호를 기초로 하여 판정될 수 있다.
또 다른 변형예에서, 다지점 전송시, 확인 신호 수신부(308A)는 프레임이 모든 지점에서 성공적으로 복호화되었는지에 관해서 단순히 채널 판정부(315)에게 통지하는 대신에, 서로 다른 도착지로부터 수신된 개별적인 확인 신호를 채널 판정부(315)에 보낸다.
이 변형예에 의해 채널 판정부(315)는 더 민감하게 채널 상태를 판정할 수 있다.
또 다른 변형예에 있어서, 2개 이상의 채널 판정 레벨은 각 레벨에 대한 분리 동작 모드를 준다.
예컨대, 매우 불량한 레벨은 상기 설명된 양호한 레벨과 불량한 레벨에 추가될 수 있다.
매우 불량한 레벨이 인식되면, 부호화 프로세스에서의 양자화 공정의 크기가 증가될 수 있어, 프레임마다 부호 데이터량을 삭감하여 성공적으로 복호화될 수 있는 프레임의 비율을 올린다.
또 다른 변형예에 있어서, 동화상 복호화 장치(400)는 ACK 신호만 송신한다.
지정된 시간내에 ACK 신호를 수신하지 않은 경우는 부정확인 신호라고 간주한다.
이 변형은 예상할 수 있는 왕복 전송 시간을 가진 전송채널에 적합하다.
또 다른 변형예에 있어서, 모드 정보는 플래그 정보로서 동화상 부호화 장치(300)에 의해 송신된 데이터에 추가된다.
동화상 복호화 장치(400)는 프레임 메모리부(405)로부터 불필요한 데이터를 소거하기 위해 이 정보를 이용할 수 있다.
예컨대, ACK 모드시, 현 참조 프레임보다 오래된 데이터를 소거할 수 있다.
또 다른 변형예에서, 동화상 복호화 장치(400)는 모드를 변환할 때 결정한다.
확인 신호로부터, 동화상 부호화 장치(300)는 단지 각 프레임(또는 블록)이 정정 불가능한 오류를 가졌는지만 결정할 수 있지만, 동화상 복호화 장치(400)는 정정 가능한 오류율을 결정할 수 있기 때문에, 보다 민감하게 채널 상태를 평가한다.
또 다른 변형예에 있어서, I-프레임은 참조 프레임 갱신부(309D)에 의해 프레임 메모리부(304)로부터 참조 프레임 메모리부(305)에 카피되는 대신에, 복호화부(303)에 의해 참조 프레임 메모리부(305)내에 직접 기록된다.
또 다른 변형예에 있어서, 참조 프레임 메모리부(305)와 프레임 메모리부(304)는 한 개의 메모리부로 결합되고, 여기서 참조 프레임은 포인터에 의해 관리된다.
또 다른 변형예에 있어서, 채널 판정부(315)는 채널 상태를 판정하는 복수의 기준을 가지고 있다.
채널 상태가 이들 모든 기준에 관해서 좋으면, 양호하다고 판정되고, 어떤 1개(그 이상)의 기준에 관해서 나쁘면, 불량하다고 판정된다.
양자택일로, 채널 상태가 어떤 하나의 기준에 관해서 좋으면, 양호하다고 판정되고, 모든 기준에 관해서 나쁘면, 불량하다고 판정되며, 또는 적어도 일정 복수의 기준에 의해 변경을 지시한 경우 그 판정이 변경된다.
제 6의 실시예
제 6의 실시예는 제 5의 실시예와 비슷하지만, 동화상 부호화 장치를 동작시키는 사람에 의해 모드 변환이 제어될 수 있다.
이와 같이 부호화 장치의 구성은 제 5의 실시예와 약간 다르다.
동화상 복호화 장치의 구성 및 동작은 제 5의 실시예와 동일하고, 그것에 관해서는 설명하지 않는다.
도 18은 제 6의 실시예의 동화상 부호화 장치(800)의 블록도이고, 여기서, 제 5의 실시예(도 15)와 동일한 또는 비슷한 소자에 대해서는 동일한 참조부호를 붙인다.
이들 소자의 설명은 생략한다.
기준 변경부(317)는 사람 오퍼레이터로부터 기준 변경 요구를 받아, 이들 요구로부터 적당한 새로운 채널 판정 기준을 결정하고, 채널 판정부(315A)에게 통지한다.
채널 판정부(315A)는 제 5의 실시예에서 설명된 채널 판정부(315)의 기능을 가지고 있는데다가, 기준 변경부(317)에 의해 제공된 기준으로 채널 판정 기준을 변경한다.
모드 변경부(318)는 사람 오퍼레이터로부터 모드 변경 요구를 받아, 갱신 모드 변환부(316A)에게 명령하여 지정된 모드로 변환한다.
갱신 모드 변환부(316A)는 제 5의 실시예에서 설명된 갱신 모드 변환부(316)의 기능을 가지고 있을 뿐만 아니라, 모드 변경부(318)로부터 수신된 요구에 따라 모드를 변환한다.
그 후, 참조 프레임 갱신부(309D)는 예컨대, 리셋 신호가 수신될 때까지 요구된 모드에서 동작하기 때문에, 갱신 모드 변환부(316A)는 채널 상태에 따라 갱신 모드를 변환할 수 있다.
다음에, 제 6의 실시예의 동작을 설명한다.
동화상 부호화 장치(800)의 사람 오퍼레이터로부터의 입력에 따라서 실행된 동작에 관해서만 설명한다.
다른 동작은 제 5의 실시예와 동일하다.
동화상 부호화 장치(800)의 사람 오퍼레이터는 다음 2종류의 동작으로 참조 프레임 갱신 프로세스를 제어할 수 있다.
1개의 동작은 전송채널의 상태를 판정하는 판정기준을 변경한다.
예컨대, 이 형태의 동작은 마지막 10 프레임중 적어도 3프레임이 부정 확인된 경우에 불량이라고 판정하고 있는 기준을 마지막 20 프레임중 적어도 3프레임이 부정 확인된 경우에 불량이라고 판정하고 있는 기준으로 변경한다.
이렇게 하여, 오퍼레이터는 동화상 부호화 장치가 채널 상태를 변경하는 동안 참조 프레임 갱신 모드에 영향을 미칠 수 있다.
다른 형태의 동작은 동화상 부호화 장치(800)가 채널 상태에 관계없이 지정된 모드, 즉 ACK 모드 또는 NACK 모드에서 강제로 동작하게 한다.
제 5의 실시예의 이점을 제공할 뿐만 아니라, 제 6의 실시예는 참조 프레임 생신 모드에 대하여, 여기서는 화질 및 데이터 압축비에 관하여 직접 또는 간접적인 제어의 선택을 사람 오퍼레이터에게 준다.
이것에 의해 오퍼레이터가 사용자의 우선권에 따라, 또는 특정 채널 상태에 따라 동작할 수 있다.
또한, 제 6의 실시예는 다른 판정 기준 및 참조 프레임 갱신 모드를 테스트하고 평가하는 데 유용하다.
제 7의 실시예
제 7의 실시예는 제 5의 실시예와도 비슷하지만, 제 6의 실시예에서의 동화상 부호화 장치의 오퍼레이터에게 받은 선택을 동화상 복호화 장치의 사용자에게 준다.
동화상 부호화 장치 및 동화상 복호화 장치는 제 5의 실시예와 약간 다르다.
도 19는 동화상 부호화 장치(900)의 구성을 나타내고, 여기서, 제 6의 실시예와 동일한 소자에 대해서는 동일한 참조부호를 붙인다.
여기서는 제 6의 실시예와 다른 소자에 대해서만 설명한다.
기준 변경부(317A)는 제 6 실시예의 기준 변경부(317)와 비슷하지만, 동화상 부호화 장치(900)에 부속된 입력장치로부터 입력된 요구보다는 동화상 복호화 장치(1000)로부터 송신된 기준 변경 신호를 수신한다.
모드 변경부(318A)는 제 6의 실시예의 모드 변경부(318)와 비슷하지만, 동화상 부호화 장치(900)에 부속된 입력장치로부터 입력된 요구보다는 동화상 복호화 장치(1000)로부터 송신된 모드 변경 신호를 수신한다.
도 20은 동화상 복호화 장치(1000)의 구성을 나타내지만, 도 16와 동일한 소자에 대해서는 동일한 참조 부호를 붙인다.
여기서는 도 16과 다른 소자에 대해서만 설명한다.
기준 변경 신호 송신부(410)는 입력 장치(420)를 통해서 사용자에 의해 입력된 기준 변경 요구를 수신하고, 전송채널을 통해서 대응하는 기준 변경 신호를 동화상 부호화 장치(900)에 송신한다.
비슷하게, 모드 변경 신호 송신부(411)는 입력 장치(420)를 통해서 사용자에 의해 입력된 모드 변경 요구를 수신하고, 전송채널을 통해서 대응하는 모드 변경 신호를 동화상 부호화 장치에 송신한다.
다음에, 제 7의 실시예의 동작을 설명한다.
동화상 복호화 장치(1000)의 사용자에 의해 입력된 요구에 따라 실행되는 동작에 대해서만 설명한다.
이 사용자는 3종류의 동작을 행할 수 있다.
1개의 동작은 제 1의 실시예에서처럼, 리플레쉬 요구를 입력한다.
다른 2종류의 동작은 기준 변경 요구와 모드 변경 요구를 입력하고, 이들 요구는 제 6의 실시예에서의 동화상 부호화 장치(900)의 오퍼레이터에 의해 입력된 대응하는 요구와 비슷하다.
이들 3종류의 동작 중 어느 하나는 동화상 복호화 장치(1000)로 하여금 대응하는 신호를 동화상 부호화 장치(900)에 전송하게 한다.
리플레쉬 신호에 의해 동화상 부호화 장치(900)는 강제로 I-프레임을 부호화하여 송신한다.
기준 변경 및 모드 변경 신호는 제 6 실시예에서의 기준 변경 및 모드 변경 요구대로 프로세스 된다.
제 7의 실시예는 동화상 복호화 장치(1000)의 사용자에게 화질에 관해서 더 많은 제어를 주는 부가적 이점과 함께, 제 5의 실시예와 같은 이점을 제공한다.
제 7의 실시예의 특별한 이점은 동화상 복호화 장치(1000)의 사용자에 의해 정확히 파악된 화질에 따라 기준 변경 요구 및 모드 변경 요구가 발생될 수 있다는 것이다.
제 6의 실시예에 있어서, 채널 판정 기준 및 참조 프레임 갱신 모드를 지정하는 능력은 다른 기준 및 모드하에 시스템 성능을 테스트하고 평가하는 데 유용하다.
변형예로서, 판정 기준 및 참조 프레임 갱신 모드에 관해서 제어의 선택을 양단의 사용자에게 주도록, 제 6 및 제 7 실시예가 결합될 수 있다.
본 발명은 동화상 데이터의 전송에 관해서 설명했지만, 프레임내 또는 프레임간 부호화 방법을 사용함으로써 부호화된 어떠한 데이터에도 적용할 수 있다.
프레임이 따로따로 부호화된 블록으로 분할되면, 본 발명의 참조 프레임 갱신 방법은 상기 설명된 것처럼, 각 블록에 따로따로 적용될 수 있다.
"프레임"이라는 것은 1개의 블록, 즉 화상의 일부분을 참조하여 설명될 수 있다.
실시예의 다양한 변형예는 상기와 같이 설명되었지만, 발명이 속하는 기술분야의 당업자는 본 발명의 청구범위내에서 더 변형할 수 있다는 것을 알 수 있을 것이다.
이상과 같이 본원 발명에 의하면, 화상부호화장치에서 부호화 때, 프레임내 부호화된 입력화상 중 최근의 것을 참조화상으로 해서 이용해서 프레임간 부호화된 현시점의 입력화상을 제1 계층 째의 부호화 데이터로 해서 송신함과 동시에 당해 제1계층 째의 부호화 데이터를 복호하여 얻어진 중간화상을 이전에 프레임간 부호화된 화상을 참조화상을 이용해서 재차 프레임간 부호화된 현시점의 입력화상을 제2계층 째의 부호화 데이터로 해서 송신하도록 합니다. 그리고, 화상복호화장치에서 복호화 할 때 계층정보에 의해 제1 계층 째의 부호화 데이터라고 판단된 부호화 데이터에 대해서는 이전에 수신한 프레임내 부호화화상 중 최근것을 참조해서 복호하는 것에 의해 중간화상을 얻고, 또한, 제2 계층 째의 부호화 데이터라고 판단된 부호화 데이터에 대해서는 이전 이 부호화 데이터를 부호화하는 때에 사용한 화상을 참조화상으로 해서 이용해서 복호하고, 복호 결과를 중간화상에 부가해서 보다 화질이 좋은 최종적인 화상을 얻도록 합니다. 이와 같이, 부호화처리 및 복호화처리의 각각을 2단계 처리하는 것에 의해, 도중의 P 프레임에 대해 프레임 결락이 생겨도, 다음의 P 프레임에 대해서는 최근의 I 프레임을 참조했던 복호처리에 의해중간 화상의 단계까지는 복호화 할 수 없습니다. 이것에 의해 프레임 결락이 발생해도 후에 보내온 I 프레임을 기다리지 않고 P프레임을 복호 가능하게 할 수 있다.

Claims (59)

  1. 프레임내 부호화와 프레임간 부호화에 의해 일련의 프레임을 부호화하고, 전송채널을 통해서 복호화 장치에 결과의 부호 데이터를 전송하며, 상기 복호화 장치로부터 확인 신호를 수신하는 부호화 장치에 있어서,
    상기 일련의 프레임중 복수의 프레임을 기억하는 메모리 수단과;
    상기 확인 신호에 따라, 참조 프레임으로서 상기 메모리 수단내에 기억된 1개의 프레임을 선택하는 참조 프레임 갱신 수단과;
    상기 일련의 프레임내의 프레임이 프레임내 부호화에 의해 부호화되고, 또는 상기 일련의 프레임내의 프레임이 프레임간 부호화에 의해 부호화되는 것을 지정하는 판단 수단과;
    상기 판단 수단에 의해 지정된 대로, 프레임내 부호화와 상기 참조 프레임 갱신 수단에 의해 지정된 참조 프레임을 참조하여 실행되는 프레임간 부호화를 행하여, 부호 데이터를 생성하는, 상기 메모리 수단과 상기 판단 수단에 접속된 부호화 수단과;
    상기 데이터 복호화 장치에 상기 부호 데이터를 전송하기 위한, 상기 부호화 수단에 접속된 송신 수단을 구비하는 것을 특징으로 하는 부호화 장치.
  2. 제 1 항에 있어서,
    상기 일련의 프레임은 동화상을 구성하는 것을 특징으로 하는 부호화 장치.
  3. 제 1 항에 있어서,
    상기 일련의 프레임에서의 각 프레임은 1개의 화상을 나타내는 것을 특징으로 하는 부호화 장치.
  4. 제 1 항에 있어서,
    상기 일련의 프레임에서의 각 프레임은 1개의 화상의 일부분을 나타내는 것을 특징으로 하는 부호화 장치.
  5. 제 1 항에 있어서,
    상기 부호화 장치는 복수의 복호화 장치에 상기 부호 데이터를 송신하고, 상기 복수의 복호화 장치로부터 상기 확인 신호를 수신하며, 상기 참조 프레임 갱신 수단은 상기 참조 프레임으로서, 적어도 특정한 다수의 상기 복호화 장치에 의해 긍정으로 확인된 1개의 프레임을 선택하는 것을 특징으로 하는 부호화 장치.
  6. 제 1 항에 있어서,
    상기 부호화 장치는 복수의 복호화 장치에 상기 부호 데이터를 송신하고, 상기 복수의 복호화 장치로부터 상기 확인 신호를 수신하며, 상기 참조 프레임 갱신 수단은 상기 참조 프레임으로서, 적어도 특정한 다수의 상기 복호화 장치에 의해 부정으로 확인되지 않은 1개의 프레임을 선택하는 것을 특징으로 하는 부호화 장치.
  7. 제 1 항에 있어서,
    상기 확인 신호는 성공적으로 복호화된 프레임을 지정하는 긍정 확인 신호를 포함하고, 상기 긍정 확인 신호 중 각각이 수신되면, 상기 참조 프레임 갱신 수단은 상기 참조 프레임으로서 상기 긍정 확인 신호중의 하나로 지정된 프레임을 선택하는 것을 특징으로 하는 부호화 장치.
  8. 제 1 항에 있어서,
    상기 확인 신호는 성공적으로 복호화되지 않은 프레임을 지정하는 부정확인 신호를 포함하고, 상기 부정확인 신호 중 각각이 수신되면, 상기 참조 프레임 갱신 수단은 상기 참조 프레임으로서, 상기 부정확인 신호중의 하나로 지정된 프레임 이전에 부호화된 프레임을 선택하는 것을 특징으로 하는 부호화 장치.
  9. 제 1 항에 있어서,
    상기 확인 신호는 성공적으로 복호화되지 않은 프레임과 희망 참조 프레임을 지정하는 부정확인 신호를 포함하고, 상기 부정확인 신호 중 각각이 수신되면, 상기 참조 프레임 갱신 수단은 상기 참조 프레임으로서, 상기 부정확인 신호중의 하나로 지정된 희망 참조 프레임을 선택하는 것을 특징으로 하는 부호화 장치.
  10. 제 1 항에 있어서,
    상기 참조 프레임 갱신 수단은
    후보 참조 프레임 리스트를 보유하고, 상기 후보 참조 프레임의 리스트에 상기 부호화부에 의해 부호화된 프레임을 추가하는 기록부와,
    상기 확인 신호중의 하나가 성공적으로 복호화되지 않은 프레임을 지정할 때, 이와 같이 지정된 프레임과, 상기 후보 참조 프레임의 리스트로부터 상기 일련의 프레임에서의 가장 최근의 모든 프레임을 소거하는 소거부를 구비하고,
    상기 참조 프레임 갱신 수단은 상기 참조 프레임으로서, 상기 후보 참조 프레임의 리스트상의 프레임중의 하나를 선택하는 것을 특징으로 하는 부호화 장치.
  11. 제 10 항에 있어서,
    상기 확인 신호는 성공적으로 복호화 될 수 없는 프레임과 희망 참조 프레임을 지정하는 부정확인 신호를 포함하는 것을 특징으로 하는 부호화 장치.
  12. 제 11 항에 있어서,
    성공적으로 복호화 될 수 없는 상기 프레임과 상기 희망 참조 프레임이 상기 후보 참조 프레임의 리스트상에 있으면, 상기 참조 프레임 갱신 수단은 상기 참조 프레임으로서 상기 희망 참조 프레임을 선택하는 것을 특징으로 하는 부호화 장치.
  13. 제 11 항에 있어서,
    성공적으로 복호화 될 수 없는 상기 프레임이 상기 후보 참조 프레임의 리스트상에 없으면, 상기 참조 프레임 갱신 수단은 상기 참조 프레임으로서 상기 후보 참조 프레임의 리스트상의 가장 최근 프레임을 선택하는 것을 특징으로 하는 부호화 장치.
  14. 제 1 항에 있어서,
    상기 확인 신호에 따라, 상기 전송채널의 품질을 판정하는 판정 수단과,
    상기 품질에 따라, 서로 다른 모드에서 참조 프레임을 선택하도록 상기 참조 프레임 갱신 수단에게 명령하기 위한, 상기 판정 수단에 접속된 모드 변환 수단을 더 구비하는 것을 특징으로 하는 부호화 장치.
  15. 제 14 항에 있어서,
    상기 판정 수단은 가장 최근에 송신된 특정한 다수의 프레임중에서 부정으로 확인된 프레임을 카운트함으로써 상기 품질을 판정하는 것을 특징으로 하는 부호화 장치.
  16. 제 14 항에 있어서,
    상기 판정 수단은 부정으로 확인된 연속적인 프레임을 카운트함으로써 상기 품질을 판정하는 것을 특징으로 하는 부호화 장치.
  17. 제 14 항에 있어서,
    상기 프레임들은 동화상에서의 화상의 부분들을 나타내고, 상기 판정 수단은 특정한 다수의 연속적인 화상에서 동일 위치에서의 부정으로 확인된 프레임을 카운트함으로써 상기 품질을 판정하는 것을 특징으로 하는 부호화 장치.
  18. 제 14 항에 있어서,
    상기 판정 수단은 복수의 기준에 따라 상기 품질을 판정하는 것을 특징으로 하는 부호화 장치.
  19. 제 14 항에 있어서,
    상기 판정 수단은 좋고 나쁨을 판정함으로써 상기 품질을 판정하는 것을 특징으로 하는 부호화 장치.
  20. 제 19 항에 있어서,
    상기 품질이 좋다고 판정된 경우에, 부정확인 신호가 수신되지 않으면, 상기 모드 변환 수단은 상기 참조 프레임 갱신 수단에게 상기 참조 프레임으로서 가장 최근에 부호화된 프레임을 선택하도록 명령하는 것을 특징으로 하는 부호화 장치.
  21. 제 19 항에 있어서,
    상기 품질이 나쁘다고 판정된 경우에, 상기 모드 변환 수단은 상기 참조 프레임 갱신 수단에게 참조 프레임으로서 상기 확인 신호에 의해 확인된 성공적으로 복호화되었던 프레임만 선택하도록 명령하는 것을 특징으로 하는 부호화 장치.
  22. 제 14 항에 있어서,
    사용자로부터 모드 요구를 수신하고, 상기 참조 프레임 갱신 수단으로 하여금 상기 모드 요구에 의해 지정된 모드에서 상기 참조 프레임을 강제로 선택하게 하는 모드 변경 수단을 구비하는 것을 특징으로 하는 부호화 장치.
  23. 제 14 항에 있어서,
    사용자로부터 기준 변경 요구를 수신하고, 상기 기준 변경 요구에 따라, 상기 판정 수단이 상기 품질을 판정하는 기준을 변경하는 기준 변경 수단을 구비하는 것을 특징으로 하는 부호화 장치.
  24. 전송채널을 통해서, 프레임내 부호화와 프레임간 부호화를 행하는 부호화 장치로부터 부호 데이터를 수신하고, 일련의 프레임을 얻기 위해 상기 부호 데이터를 복호화하는 복호화 장치에 있어서,
    각각의 프레임을 확인하는 확인 신호를 상기 부호화 장치에 전송하는 확인 신호 송신 수단을 구비하는 것을 특징으로 하는 복호화 장치.
  25. 제 24 항에 있어서,
    상기 일련의 프레임은 동화상을 구성하는 것을 특징으로 하는 복호화 장치.
  26. 제 24 항에 있어서,
    상기 확인 신호는 각 프레임이 성공적으로 복호화되었다는 것을 나타내는 긍정 확인 신호를 포함하는 것을 특징으로 하는 복호화 장치.
  27. 제 24 항에 있어서,
    상기 확인 신호는 각 프레임이 성공적으로 수신되지 않았다는 것을 나타내는 부정 확인 신호를 포함하는 것을 특징으로 하는 복호화 장치.
  28. 제 24 항에 있어서,
    상기 확인 신호는 각 프레임이 성공적으로 복호화되지 않았다는 것을 나타내는 부정 확인 신호를 포함하는 것을 특징으로 하는 복호화 장치.
  29. 제 24 항에 있어서,
    상기 확인 신호는 각 프레임이 성공적으로 복호화되었다는 것을 나타내는 긍정 확인 신호와, 각 프레임이 성공적으로 수신되지 않았다는 것을 나타내는 부정 확인 신호를 포함하는 것을 특징으로 하는 복호화 장치.
  30. 제 24 항에 있어서,
    상기 확인 신호는 각 프레임이 성공적으로 복호화되지 않았다는 것을 나타내는 부정확인 신호를 포함하고, 상기 각각의 부정확인 신호는 부호화 장치에 의해 다음 프레임들의 프레임간 부호화를 위해 사용될 희망 참조 프레임을 지정하는 것을 특징으로 하는 복호화 장치.
  31. 제 24 항에 있어서,
    상기 부호화 장치는 일정 기준에 따라 상기 전송채널의 품질을 판정하고, 상기 품질에 따른 모드시 프레임간 부호화에서 사용하는 참조 프레임을 선택하며, 상기 복호화 장치는,
    사용자로부터 입력을 받아, 상기 입력에 따라, 상기 기준을 변경하기 위해 상기 부호화 장치에게 요구하는 대응 신호를 상기 부호화 장치에 송신하는 기준 변경 신호 송신 수단을 더 구비한 것을 특징으로 하는 복호화 장치.
  32. 제 24 항에 있어서,
    상기 부호화 장치는 일정 기준에 따라 상기 전송채널의 품질을 판정하고, 상기 품질에 따른 모드시 프레임간 부호화에서 사용하는 참조 프레임을 선택하며, 상기 복호화 장치는,
    사용자로부터 입력을 받아, 상기 입력에 따라, 상기 모드를 변경하기 위해 상기 부호화 장치에게 요구하는 신호를 상기 부호화 장치에 송신하는 모드 변경 신호 송신 수단을 더 구비한 것을 특징으로 하는 복호화 장치.
  33. 송신장치로부터 수신장치에 동화상을 나타내는 일련의 프레임을 전송하는 방법에 있어서,
    프레임내 부호화와 프레임간 부호화를 결정함으로써, 상기 일련의 프레임에서 각 프레임에 대한 부호화 방법을 선택하는 단계와;
    다른 프레임을 참조하지 않고 프레임내 부호화를 위해 선택된 프레임을 부호화하는 단계와;
    사전에 부호화된 프레임인 참조 프레임에 관해서 프레임간 부호화를 위해 선택된 프레임을 부호화하는 단계와;
    상기 송신장치로부터 상기 수신장치에 상기 프레임들의 프레임내 부호화와 프레임간 부호화에 의해 생성된 부호 데이터를 송신하는 단계와;
    상기 수신장치에서 상기 부호 데이터를 복호화하는 단계와;
    상기 수신장치로부터 상기 송신장치에 확인 신호를 송신하는 단계와;
    상기 확인 신호에 따라, 상기 송신장치에서 상기 참조 프레임을 선택하는 단계를 구비한 것을 특징으로 하는 방법.
  34. 제 33 항에 있어서,
    상기 일련의 프레임에서의 각 프레임은 1개의 화상을 나타내는 것을 특징으로 하는 방법.
  35. 제 33 항에 있어서,
    상기 일련의 프레임에서의 각 프레임은 1개의 화상의 일부를 나타내는 것을 특징으로 하는 방법.
  36. 제 33 항에 있어서,
    상기 부호 데이터는 복수의 수신장치에 송신되고, 상기 확인 신호는 상기 복수의 수신장치로부터 수신되는 것을 특징으로 하는 방법.
  37. 제 36 항에 있어서,
    상기 참조 프레임을 선택하는 상기 단계는,
    적어도 특정한 다수의 상기 수신장치에 의해 부정으로 확인되었던 프레임을 선택하는 단계를 구비한 것을 특징으로 하는 방법.
  38. 제 36 항에 있어서,
    상기 참조 프레임을 선택하는 상기 단계는,
    적어도 특정한 다수의 상기 수신장치에 의해 부정으로 확인되지 않았던 프레임을 선택하는 단계를 구비한 것을 특징으로 하는 방법.
  39. 제 33 항에 있어서,
    상기 확인 신호는 성공적으로 복호화된 프레임을 지정하는 긍정 확인 신호를포함하고, 상기 참조 프레임을 선택하는 상기 단계는 상기 긍정 확인 신호중의 하나로 지정된 프레임을 선택하는 단계를 구비한 것을 특징으로 하는 방법.
  40. 제 33 항에 있어서,
    상기 확인 신호는 성공적으로 복호화되지 않은 프레임을 지정하는 부정확인 신호를 포함하고, 상기 참조 프레임을 선택하는 상기 단계는 상기 부정확인 신호중의 하나로 지정된 프레임전에 부호화된 프레임을 선택하는 단계를 구비한 것을 특징으로 하는 방법.
  41. 제 33 항에 있어서,
    상기 확인 신호는 성공적으로 복호화되지 않은 프레임과 희망 참조 프레임을 지정하는 부정확인 신호를 포함하고, 상기 참조 프레임을 선택하는 상기 단계는 상기 참조 프레임으로서 상기 희망 참조 프레임을 선택하는 단계를 구비한 것을 특징으로 하는 방법.
  42. 제 33 항에 있어서,
    상기 참조 프레임을 선택하는 상기 단계는,
    후보 참조 프레임의 리스트를 보유하는 단계와;
    상기 리스트에 프레임내 부호화에 의해 부호화된 프레임과 프레임간 부호화에 의해 부호화된 프레임을 추가하는 단계와;
    부정으로 확인된 각 프레임을 상기 리스트로부터 소거하는 단계와;
    부정으로 확인된 프레임보다 최근의 프레임들을 상기 리스트로부터 동시에 소거하는 단계와;
    상기 리스트로부터 상기 참조 프레임을 선택하는 단계를 더 구비한 것을 특징으로 하는 방법.
  43. 제 42 항에 있어서,
    상기 확인 신호는 성공적으로 복호화될 수 없는 프레임과 희망 참조 프레임을 지정하는 부정확인 신호를 포함하는 것을 특징으로 하는 방법.
  44. 제 43 항에 있어서,
    상기 참조 프레임을 선택하는 상기 단계는,
    성공적으로 복호화될 수 없는 상기 프레임과 상기 희망 참조 프레임이 상기 리스트상에 있는 경우, 상기 희망 참조 프레임을 선택하는 단계를 구비한 것을 특징으로 하는 방법.
  45. 제 43 항에 있어서,
    상기 참조 프레임을 선택하는 상기 단계는,
    성공적으로 복호화될 수 없는 상기 프레임이 상기 리스트상에 없는 경우, 상기 리스트상에서 가장 최근 프레임을 선택하는 단계를 구비한 것을 특징으로 하는방법.
  46. 제 33 항에 있어서,
    상기 전송채널의 품질을 판정하는 단계와,
    상기 품질에 따라, 서로 다른 모드에서 상기 참조 프레임을 선택하는 단계를 더 구비한 것을 특징으로 하는 방법.
  47. 제 46 항에 있어서,
    상기 송신장치는 상기 확인 신호에 따라, 품질을 판정하는 상기 단계를 행하는 것을 특징으로 하는 방법.
  48. 제 47 항에 있어서,
    품질을 판정하는 상기 단계는,
    일정한 간격 동안 부정으로 확인된 신호를 카운트하는 단계를 구비한 것을 특징으로 하는 방법.
  49. 제 47 항에 있어서,
    품질을 판정하는 상기 단계는 부정으로 확인된 연속적인 프레임을 카운트하는 단계를 구비한 것을 특징으로 하는 방법.
  50. 제 47 항에 있어서,
    상기 프레임들은 상기 동화상에서의 화상의 부분들을 나타내고, 품질을 판정하는 상기 단계는,
    특정한 다수의 연속적인 화상에서 동일 위치에서의 부정으로 확인된 프레임을 카운트하는 단계를 구비한 것을 특징으로 하는 방법.
  51. 제 46 항에 있어서,
    품질을 판정하는 상기 단계는 좋고 나쁨을 판정하는 단계를 구비한 것을 특징으로 하는 방법.
  52. 제 51 항에 있어서,
    상기 참조 프레임을 선택하는 상기 단계는,
    상기 품질이 좋다고 판정된 경우에, 부정확인 신호가 수신되지 않으면, 가장 최근에 부호화된 프레임을 선택하는 단계를 구비한 것을 특징으로 하는 방법.
  53. 제 51 항에 있어서,
    상기 참조 프레임을 선택하는 상기 단계는,
    상기 품질이 나쁘다고 판정된 경우에, 상기 확인 신호에 의해 확인된 성공적으로 복호화되었던 프레임들을 선택하는 단계를 구비한 것을 특징으로 하는 방법.
  54. 제 46 항에 있어서,
    사용자로부터 제 1의 요구를 받아, 상기 품질이 판정되는 기준을 지정하는 단계를 더 구비한 것을 특징으로 하는 방법.
  55. 제 54 항에 있어서,
    상기 제 1 요구는 상기 송신장치에서 사용자로부터 수신되는 것을 특징으로 하는 방법.
  56. 제 54 항에 있어서,
    상기 제 1 요구는 상기 수신장치에서 사용자로부터 수신되는 것을 특징으로 하는 방법.
  57. 제 46 항에 있어서,
    사용자로부터 제 2 요구를 받아, 상기 참조 프레임을 선택하는 모드를 지정하는 단계를 더 구비한 것을 특징으로 하는 방법.
  58. 제 57 항에 있어서,
    상기 제 2 요구는 상기 송신장치에서 사용자로부터 수신되는 것을 특징으로 하는 방법.
  59. 제 57 항에 있어서,
    상기 제 2 요구는 상기 수신장치에서 사용자로부터 수신되고,
    상기 수신장치로부터 상기 송신장치에 상기 제 2 요구를 송신하는 단계를 더 구비한 것을 특징으로 하는 방법.
KR1019970006316A 1996-04-19 1997-02-27 화상부호화장치,화상복호화장치및화상전송시스템 KR100374245B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP098629 1996-04-19
JP9862996A JP3068002B2 (ja) 1995-09-18 1996-04-19 画像符号化装置、画像復号化装置及び画像伝送システム

Publications (2)

Publication Number Publication Date
KR970073147A KR970073147A (ko) 1997-11-07
KR100374245B1 true KR100374245B1 (ko) 2003-05-09

Family

ID=14224816

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019970006316A KR100374245B1 (ko) 1996-04-19 1997-02-27 화상부호화장치,화상복호화장치및화상전송시스템

Country Status (3)

Country Link
KR (1) KR100374245B1 (ko)
CN (1) CN1143544C (ko)
HK (1) HK1004975A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101772472B1 (ko) * 2017-04-20 2017-08-30 한화시스템(주) 적응적으로 프레임 압축 모드를 적용한 동영상 압축 장치 및 방법, 그리고, 동영상 복원 장치 및 방법

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100693669B1 (ko) * 2003-03-03 2007-03-09 엘지전자 주식회사 피일드 매크로 블록의 레퍼런스 픽쳐 결정 방법
FI114882B (fi) * 2003-04-30 2005-01-14 Nokia Corp Kuvakehysten päivityksen synkronointi
CN101237587A (zh) * 2007-02-02 2008-08-06 中兴通讯股份有限公司 一种视频序列的编码方法及采用其的差错控制系统
CN101360243A (zh) 2008-09-24 2009-02-04 腾讯科技(深圳)有限公司 基于反馈参考帧的视频通信系统及方法
CN101686358B (zh) * 2008-09-28 2012-07-04 华为技术有限公司 一种视频录制方法、装置和系统
JP5884076B2 (ja) * 2010-12-22 2016-03-15 パナソニックIpマネジメント株式会社 無線伝送端末及び無線伝送方法、それに用いる符号化装置及び符号化方法、並びにコンピュータ・プログラム
CN102870416A (zh) * 2011-02-25 2013-01-09 松下电器产业株式会社 运动图像编码装置以及运动图像解码装置
CN103647657B (zh) * 2013-11-22 2016-12-07 上海瀛联体感智能科技有限公司 一种无误使用压缩算法的分布式监控系统及其方法
CN103957341B (zh) * 2014-04-30 2016-09-28 华为软件技术有限公司 图片传输的方法及其相关设备
US10951954B2 (en) * 2016-07-05 2021-03-16 Vishare Technology Limited Methods and systems for video streaming
CN110166776B (zh) * 2018-02-11 2023-08-04 腾讯科技(深圳)有限公司 视频编码方法、装置及存储介质
US10567756B2 (en) * 2018-05-31 2020-02-18 Agora Lab, Inc. Slice level reference picture reconstruction
CN112929747B (zh) * 2021-01-18 2023-03-31 北京洛塔信息技术有限公司 基于网络反馈的视频编码方法、装置、设备及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06237451A (ja) * 1993-02-10 1994-08-23 Hitachi Ltd 動画通信方式および端末装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06237451A (ja) * 1993-02-10 1994-08-23 Hitachi Ltd 動画通信方式および端末装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101772472B1 (ko) * 2017-04-20 2017-08-30 한화시스템(주) 적응적으로 프레임 압축 모드를 적용한 동영상 압축 장치 및 방법, 그리고, 동영상 복원 장치 및 방법

Also Published As

Publication number Publication date
CN1168055A (zh) 1997-12-17
CN1143544C (zh) 2004-03-24
KR970073147A (ko) 1997-11-07
HK1004975A1 (en) 1998-12-18

Similar Documents

Publication Publication Date Title
US6169821B1 (en) Picture coder, picture decoder, and picture transmission system
KR100538023B1 (ko) 화상 부호화장치
KR100374245B1 (ko) 화상부호화장치,화상복호화장치및화상전송시스템
JP4603695B2 (ja) 映像コーディング
US6421387B1 (en) Methods and systems for forward error correction based loss recovery for interactive video transmission
TWI406572B (zh) 運用即時回傳資訊與封包重傳可適應機制之錯誤復原的視訊傳輸系統
US6282240B1 (en) Picture coder, picture decoder, and transmission system
KR100378337B1 (ko) 화상복호화장치
EP1994764B1 (en) Video coding with reference picture set management
JPH1079949A (ja) 画像符号化装置、画像復号化装置及び画像伝送システム
WO2011038694A1 (zh) 视频数据传输处理、发送处理方法、装置和网络系统
US8340180B2 (en) Camera coupled reference frame
WO2012114774A1 (ja) 動画像符号化装置および動画像復号装置
US9467639B2 (en) Video transmission apparatus and control method for video transmission apparatus
JP3323057B2 (ja) 符号化装置、復号化装置及び伝送システム
JP2005033556A (ja) データ送信装置、データ送信方法、データ受信装置、データ受信方法
EP0902593B1 (en) Video coder, decoder and transmission system
JPH1118086A (ja) 画像通信方法および装置
JPH07193821A (ja) 動画像符号化装置および方法
KR100363550B1 (ko) 동영상 인코딩 장치 및 무선 단말기의 동영상 디코딩 장치
KR100670220B1 (ko) 부호화장치,복호화장치및전송시스템
JP2000253380A (ja) データ伝送装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20110127

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee