KR100570194B1

KR100570194B1 - 동화상 압축 부호화 송수신장치

Info

Publication number: KR100570194B1
Application number: KR20040019656A
Authority: KR
Inventors: 미야지사토시; 다키시마야스히로; 나카지마야스유키
Original assignee: 가부시키가이샤 케이디디아이 겡큐쇼
Priority date: 2003-03-24
Filing date: 2004-03-23
Publication date: 2006-04-11
Also published as: US20040190511A1; JP2004289583A; US7609645B2; JP3838511B2; KR20040084721A

Abstract

본 발명은 리포트 패킷을 사용하여 회선상태를 파악한다고 하는 틀 안에서, 전송로의 실제의 통신속도를 구체적으로 추정하는 것을 가능하게 하는 것이다.

비디오 인코더(1) 및 오디오 인코더(2)로 부호화된 미디어 패킷과 함께, 송신자 리포트 생성부(3)에서 생성된 송신자 리포트 패킷이 전송로에 송출된다. 수신측으로부터 수신자 리포트 패킷이 피드백된다. 송신자 리포트 패킷 및 수신자 리포트 패킷은 각각, 사이즈가 다른 2종류의 리포트 패킷을 포함한다. 레이트 추정부(4)는, 작은 사이즈의 송신자 리포트 패킷과 수신자 리포트 패킷의 왕복 지연시간, 및 큰 사이즈의 송신자 리포트 패킷과 수신자 리포트 패킷의 왕복 지연시간에 의거하여 전송로의 전송속도를 추정한다.

Description

동화상 압축 부호화 송수신장치{DYNAMIC IMAGE COMPRESSION ENCODING TRANSMITTER-RECEIVER}

도 1은 본 발명에 관한 동화상 압축 부호화 송신장치의 일 실시형태를 나타내는 블록 구성도,

도 2는 본 발명에 관한 동화상 압축 부호화 수신장치의 일 실시형태를 나타내는 블록 구성도,

도 3은 송신자 소 리포트 패킷의 일례의 설명도,

도 4는 송신자 대 리포트 패킷의 일례의 설명도,

도 5는 수신자 소 리포트 패킷의 일례의 설명도,

도 6은 수신자 소 리포트 패킷의 일례의 설명도,

도 7은 패킷의 바람직한 송출순서의 설명도,

도 8은 송신버퍼에 있어서의 패킷의 정류의 설명도,

도 9는 패킷의 송출순서의 설명도이다.

본 발명은 동화상 압축 부호화 송수신장치에 관한 것으로, 특히 전송로의 통 신속도가 단계적으로 변경되는 경우에도 전송로의 통신속도를 구체적으로 추정할 수 있는 동화상 압축 부호화 송수신장치에 관한 것이다.

실시간 영상신호나 음성신호를 디지털 데이터로 변환하여 송신하는 실시간 통신에 있어서는, 정보원의 부호화 속도가 전송로의 통신속도를 초과하지 않도록 제어가 행하여지지 않으면 안된다.

예를 들면 휴대전화 등의 무선전송로나 IP 네트워크 등의 베스트 에포트형 전송로에 있어서는 네트워크의 혼잡상황에 의하여 통신속도가 시시각각으로 변동되는 것을 생각할 수 있다. 이 변동에 의하여 전송로의 전송속도가 정보원의 부호화속도를 밑도는 상태가 어느 일정시간 계속되면, 지연의 증대나 수신되는 영상/음성의 도중 끊김이 발생하여 통신품질의 저하를 초래하게 된다.

이 통신품질의 저하를 방지하기 위하여 전송로의 통신속도를 감시하고, 그 결과를 차례로 정보원의 부호화 비트 레이트의 제어에 반영시켜, 앞서 설명한 실시간 통신에 요구되는 조건을 항상 만족시키는 것이 필요하게 된다.

현재 실질적인 국제표준방식으로서 채용되어 있는 IETF(Internet Engineering Task Force) RFC1889로 규정되어 있는 RTCP(Real-time transport control Protocol)에서는, 전송로의 감시를 목적으로 한 리포트 패킷이 사용되고 있고, SR(Sender report : 송신자 리포트) 및 RR(Receiver report : 수신자 리포트)가 정의되어 있다.

송신자 리포트는, 수신측 장치에 있어서 수신자 리포트를 작성하기 위한 기준이 되는 정보를 제공하는 것을 목적으로 하는 것으로, 타임 스탬프, 송출한 미디 어 패킷(영상/음성 패킷)수, 송출한 데이터 바이트수 등을 포함한다. 송신측 장치는, 실제의 미디어 패킷 외에, 송신 리포트를 정기적으로 송신한다.

수신측 장치에서는, 송신측 장치로부터 송신된 송신자 리포트로부터 기준시각을 인출하고, 이것을 기초로 수신자 리포트를 작성하여 송신측 장치로 돌려 보낸다. 수신자 리포트는, 구간 패킷 손실율, 누적 패킷 손실수, 직전에 수신한 미디어 패킷의 시퀀스번호, 미디어 패킷 도착 간격의 지터, 직전에 수신한 송신자 리포트의 타임 스탬프, 직전의 송신자 리포트의 수신으로부터 수신 리포트의 송출까지의 지연시간 등을 포함한다.

이와 같이, 종래의 RTCP를 채용한 미디어(영상/음성) 송수신장치에서는, 송신자 리포트 및 수신자 리포트를 사용하여 송신측 장치가, 수신측 장치로부터 피드백되는 수신자 리포트에 의거하여 송출하는 데이터의 부호화 비트 레이트 등을 제어함으로써, 수신측 장치에서의 수신상태가 최적이 되도록 제어하고 있다.

RTCP에 있어서 송신측 장치로 추정할 수 있는 전송로의 정보는, 장기적으로 발생하고 있는 패킷 손실, 단기적으로 발생하고 있는 패킷 손실, 및 회선의 지터이고, 이것은 일반의 유선 IP 네트워크(인터넷 회선)와 같이 회선의 특성으로서 평상시는 일정 이상의 통신속도가 확보되어 있고, 혼잡시에 있어서 회선의 폭주 등에 의해 패킷 손실이나 지터를 발생한다 라는 것을 전제로 하고 있다.

그러나 휴대전화에서의 무선 IP 네트워크에 있어서는, 이하에 설명하는 이유에 의하여 패킷 손실, 지터의 추정만으로는 불충분하게 되는 경우가 있다. 예를 들면, 제 3 세대 휴대전화(cdma 2000 1xEV-DO)를 송신측 장치에 사용한 데이터 통 신의 경우를 생각하면, 휴대전화의 송신방향에 있어서의 통신속도(속도 모드)는, 단말측의 전파상태나 기지국에서의 폭주상태를 고려하면서 예를 들면, 9.6kpps, 19.2kpbs, 38.4kpbs, 76.8kpbs, 153.6kpbs로 단계적으로 변경된다.

이 전송로의 통신속도의 변경에 의하여 현재 송신 중인 부호화 비트 레이트가 전송로의 통신속도를 웃돌면, 패킷 손실이나 지터가 상대적으로 증대되기 때문에, 송신측 장치는 RTCP의 수신자 리포트에 의하여 현재 송신 중인 부호화 비트 레이트의 변경이 필요하다 라는 것은 판단 가능하다.

그러나, 변동이 있다하여도 일정 통신속도를 전제로 한 인터넷 회선과 달리, 이와 같이 단계적인 통신속도의 변경이 행하여지는 네트워크에 있어서는, 통신속도가 변화된 것을 검지하는 것만으로는 불충분하다. 예를 들면 패킷 손실이나 지터의 증대에 의하여 현재 송신 중인 부호화 비트 레이트의 변경이 필요하다 라는 것 을 알 수 있어도, 그것을 어떤 비트 레이트로 변경하면 좋은 것인지를 알 수 없다. 전송로의 통신속도가 변경된 경우, 현재 어떤 통신속도가 사용되고 있는 것인지를 신속하게 추정하여, 송신 중인 부호화 비트 레이트를 구체적으로 어느 것으로 하면 좋은 것인지를 알 수 있게 할 필요가 있다.

본 발명의 목적은, 리포트 패킷을 사용하여 회선상태를 파악한다고 하는 틀 안에서, 전송로의 실제의 통신속도를 구체적으로 추정할 수 있는 동화상 압축 부호화 송수신장치를 제공하는 것에 있다.

상기한 과제를 해결하기 위하여, 본 발명은 송신측 장치로부터 수신측 장치에 미디어 패킷을 송신함과 동시에, 송신측 장치와 수신측 장치 사이에서 송신자 리포트 패킷 및 수신자 리포트 패킷을 송수신하는 동화상 압축 부호화 송수신장치에 있어서, 송신자 리포트 패킷 및 수신자 리포트 패킷은 각각, 사이즈가 다른 2종류의 리포트 패킷을 포함하고, 상기 송신자측 장치는, 작은 사이즈의 송신자 리포트 패킷과 수신자 리포트 패킷의 왕복 지연시간, 및 큰 사이즈의 송신자 리포트 패킷과 수신자 리포트 패킷의 왕복 지연시간에 의거하여 전송로의 전송속도를 추정하는 전송속도 추정수단을 구비하는 점에 제 1의 특징이 있다.

또, 본 발명은 상기 전송속도 추정수단은, 작은 사이즈의 송신자 리포트 패킷과 수신자 리포트 패킷의 왕복 지연시간을 구하는 식, 및 큰 사이즈의 송신자 리포트 패킷과 수신자 리포트 패킷의 왕복 지연시간을 구하는 식으로 이루어지는 2원 1차 연립방정식에 의하여 전송로의 전송속도를 추정하는 점에 제 2의 특징이 있다.

또, 본 발명은 큰 사이즈의 송신자 리포트 패킷 및 수신자 리포트 패킷은, 작은 사이즈의 송신자 리포트 패킷 및 수신자 리포트 패킷에 각각 더미 데이터를 부가한 것인 점에 제 3의 특징이 있다.

또, 본 발명은 상기 송신측 장치는, 작은 사이즈의 송신자 리포트 패킷, 큰 사이즈의 송신자 리포트 패킷, 미디어 패킷의 순으로 조합시켜 1세트의 패킷으로서 송신하는 점에 제 4의 특징이 있다.

또, 본 발명은 1세트의 패킷의 송수신이 종료되고 나서, 다음의 1세트의 패킷을 송출하는 점에 제 5의 특징이 있다.

또, 본 발명은 상기 더미 데이터는 압축처리가 이루어져 있는 점에 제 6의 특징이 있다.

또, 본 발명은 상기 전송속도 추정수단에 의해 추정된 전송로의 전송속도를 미디어의 부호화에 반영시키는 점에 제 7의 특징이 있다.

또한, 본 발명은 상기 전송속도 추정수단에 의해 추정된 네트워크의 전송속도를 미디어의 부호화에 반영시킬 때, 대상으로 하는 미디어의 우선도에 따른 레이트 제어를 행하는 점에 제 8의 특징이 있다.

본 발명의 특징에 의하면, 리포트 패킷을 사용하여 회선상태를 파악한다고 하는 틀 안에서, 사이즈가 다른 2종류의 리포트 패킷을 사용하여 전송로의 실제의 통신속도를 구체적으로 추정할 수 있다.

또 패킷을, 작은 사이즈의 리포트 패킷, 큰 사이즈의 리포트 패킷, 미디어 패킷의 순으로 송수신함으로써, 송신버퍼 내에서의 패킷의 정류시간을 짧게 할 수 있어, 적은 오차로 전송로의 통신속도를 추정할 수 있다.

또한 작은 사이즈의 송신자 리포트 패킷, 큰 사이즈의 송신자 리포트 패킷, 미디어 패킷의 순으로 조합시켜 1세트의 패킷을 단위로 하고, 1 단위의 송수신이 종료되고 나서, 다음의 1 단위의 패킷을 송출함으로써 미디어 패킷이 송신버퍼 내에 남아 있는 것에 의한 다음 패킷의 송신버퍼 내에서의 정류를 없앨 수 있다.

이하, 도면을 참조하여 본 발명을 상세하게 설명한다. 도 1은 본 발명에 관한 동화상 압축 부호화 송수신장치의 송신측 장치의 일 실시형태를 나타내는 블록 구성도이다. 또한 본 장치는, 수신측 장치로도 될 수 있는 것이나, 도면에는 송신 에 관한 구성부분만을 나타내고 송신측 장치로 하고 있다. 상기 도면에 있어서, 카메라 등의 영상기기로부터 얻어지는 영상신호는, 비디오 인코더(1)에 있어서 압축 부호화된다. 비디오 인코더(1)에 의해 생성된 압축 데이터(비트 스트림)는, IETF RFC1889로 규정되어 있는 RTP 형식 등으로 패킷화된다. 또한 본 발명에서는 패킷화의 형식은 어떠한 것이어도 좋다.

동시에, 마이크로폰 등으로부터의 음성신호는, 오디오 인코더(2)에 있어서 압축 부호화된다. 오디오 인코더(2)에 의해 생성된 압축 데이터(비트 스트림)는, 마찬가지로 일정간격마다 패킷화된다. 이하, 영상 및 음성의 패킷을 미디어 패킷이라 부르기로 한다.

송신자 리포트 생성부(3)는, 송신단말 ID(랜덤 유니크값), 현재시각, 지금까지 송출한 미디어 패킷의 수, 및 지금까지 송출한 미디어 패킷의 총 바이트수로부터 송신자 리포트 패킷을 생성한다. 본 발명에서는 송신자 리포트 패킷은 2종류 존재한다. 하나는 소 리포트 패킷이고, 도 3에 예시하는 바와 같이 헤더, 패킷길이, 송신단말 ID, 타임 스탬프(정수부), 타임 스탬프(소수부), 타임 스탬프의 미디어 타임 스케일에서의 환산값, 지금까지 송출한 미디어 패킷의 수, 지금까지 송출한 미디어 패킷의 총 바이트수를 포함한다. 도시한 가로방향은, 예를 들면 4바이트의 크기이다.

송신자 리포트 패킷의 다른 하나는, 대 리포트 패킷이며, 도 4에 예시하는 바와 같이 소 리포트 패킷에 소정 사이즈의 더미 데이터를 부가한 것이다.

여기서 더미 데이터는 의미를 가지지 않는 데이터로서, 임의의 바이너리 데 이터를 부가할 수 있다. 단, 전송로에 있어서 데이터 압축 프로토콜이 채용되어 있는 경우는, 예를 들면 모두 0 이라는 단순 패턴의 데이터를 더미 데이터로서 부가하면, 전송로에서의 압축에 의해 대 리포트 패킷의 실효 사이즈가 실제와 대폭으로 어긋날 가능성이 있다.

이 때문에, 전송로에 있어서 데이터 압축 프로토콜이 채용되어 있는 경우의 것을 고려하여, 대 리포트 패킷의 더미 데이터는, LZH, ZIP 라는 PC용 압축이 행하여진 데이터, 또는 JPEG, MPEG라는 화상압축이 행하여진 데이터 등의 전송로에 있어서 재압축이 거의 행하여지지 않은 데이터인 것이 바람직하다.

레이트 추정부(4)는, 통신상대인 수신측 장치로부터 보내져 오는 수신자 리포트 패킷 내의 정보 및 송신측 장치에서 알 수 있는 정보(송신자 리포트 패킷의 송출시각, 수신자 리포트 패킷의 수신시각 및 이들 리포트 패킷의 사이즈)에 의거하여 전송로의 통신속도를 추정하고, 추정한 통신속도를 레이트 제어부(5)에 준다. 수신측 장치로부터 보내져 오는 수신자 리포트 및 레이트 추정부(4)에 대해서는 후술한다.

레이트 제어부(5)는, 미리 설정된 우선도, 즉 전송로의 통신속도에 변경이 있었던 경우에 영상신호, 음성신호의 어느 쪽을 레이트 제어의 대상으로 할지의 가중에 따라 비디오 인코더(1) 및 오디오 인코더(2)에 목표 부호화 비트 레이트신호를 출력한다. 비디오 인코더(1) 및 오디오 인코더(2)는, 이 목표 부호화 비트 레이트신호에 따라 목표 부호화 비트 레이트를 설정한다.

이와 같이 우선도를 사용함으로써, 레이트 제어의 대상을 영상신호만으로 하 거나, 음성신호만으로 하거나, 영상신호와 음성신호를 반반으로 하거나 할 수 있고, 또 영상신호와 음성신호를 임의의 비로 레이트 제어의 대상으로 하거나 할 수도 있다.

송신측 장치에 있어서, 각 미디어 패킷 및 송신자 리포트 패킷은, IP 통신 인터페이스(6)를 경유하여 네트워크에 송신된다. 일반적으로 IP의 상위 레이어로서 TCP 또는 UDP가 사용되고, 도 1에 나타내는 바와 같이, 각 패킷에 다른 포트번호(포트 A, B, C)를 할당함으로써 다중화가 행하여진다. 또 수신자 리포트 패킷은, 송신자 리포트 패킷과 동일 포트(도 1의 예에서는 포트 C)를 사용하여 수신된다.

도 2는 본 발명에 관한 동화상 압축 부호화 송수신장치의 수신측 장치의 일 실시형태를 나타내는 블록 구성도이다. 본 장치도 송신측 장치가 될 수 있는 것이나, 도면에는 수신에 관한 구성부분만을 나타내고 수신측 장치로 하고 있다. 네트워크로부터의 미디어 패킷 및 송신자 리포트 패킷은, IP 통신 인터페이스(7)를 경유하여 TCP 또는 UDP의 각 포트(포트 A, B, C)로 분리되어 수신된다. 비디오 미디어 패킷은, 비디오 디코더(8)로 복호되어, 영상신호로서 재생된다. 오디오 미디어 패킷은, 마찬가지로 오디오 디코더(9)로 복호되고, 음성신호로서 재생된다.

수신 리포트 생성부(10)는, 수신단말 ID(랜덤 유니크값), 송신자 리포트 패킷으로부터 얻어지는 송신단말 ID, 구간 미디어 패킷 손실율, 누적 미디어 패킷 손실수, 총 수신 미디어 패킷수, 미디어 패킷 도착 간격의 지터, 직전에 수신한 송신자 리포트 패킷의 타임 스탬프, 및 직전에 수신한 송신자 리포트 패킷의 수신으로 부터 그것에 대한 수신자 리포트 패킷의 송출까지의 지연시간으로부터 수신자 리포트 패킷을 생성한다.

수신자 리포트 패킷도, 송신자 리포트 패킷의 대소에 대응하여 2종류 존재한다. 하나는 소 리포트 패킷이고, 도 5에 예시하는 바와 같이 헤더, 패킷길이, 수신단말 ID, 대응하는 송신단말 ID, 구간 미디어 패킷 손실율, 누적 미디어 패킷 손실수, 총 수신 미디어 패킷수, 미디어 패킷 도착 간격의 지터, 직전에 수신한 송신자 리포트 패킷의 타임 스탬프, 및 직전에 수신한 송신자 리포트 패킷의 수신으로부터 그것에 대한 수신자 리포트 패킷의 송출까지의 지연시간을 포함한다. 도시하는 가로방향도, 송신자 리포트 패킷와 마찬가지로 예를 들면 4바이트이다.

수신자 리포트 패킷의 또 하나는, 대 리포트 패킷이고, 도 6에 예시하는 바와 같이 소 리포트 패킷에, 송신자 대 리포트 패킷에 부가되어 있는 더미 데이터와 동일한 더미 데이터를 부가한 것이다.

또한 수신자 리포트 패킷은, 송신자 리포트 패킷의 대소에 일치하여 생성하는 것으로 한다. 즉, 송신자 소 리포트 패킷에 대해서는 수신자 소 리포트 패킷을 생성하고, 송신자 대 리포트 패킷에 대해서는 수신자 대 리포트 패킷을 생성한다.

수신 리포트 생성부(10)에 의해 생성된 수신자 리포트 패킷은, 송신자 리포트 패킷의 수신에 사용한 포트와 동일 포트(도 2의 예에서는 포트 C)로부터 송신되어, 송신측 장치에 피드백된다.

다음에, 도 1의 레이트 추정부(4)에 대하여 설명한다. 레이트 추정부(4)는, 수신측 장치로부터 보내져 오는 수신자 리포트 패킷 내의 정보 및 송신측 장치에서 알 수 있는 정보에 의거하여 전송로의 통신속도를 추정한다.

송신측 장치에서 보아, 송신방향의 비트 레이트를 Rs, 수신방향의 비트 레이트를 Rr이라 하고, 송신자 소 리포트 패킷의 사이즈를 Sss, 송신자 대 리포트 패킷의 사이즈를 Ssl, 수신자 소 리포트 패킷의 사이즈를 Srs, 수신자 대 리포트 패킷의 사이즈를 Srl, 수신측 장치에 있어서 송신자 소 리포트 패킷을 수신하고 나서 수신자 소 리포트 패킷을 송출하기까지의 지연시간을 Dsrs, 수신측 장치에 있어서 송신자 대 리포트 패킷을 수신하고 나서 수신자 대 리포트 패킷을 송출하기까지의 지연시간을 Dsrl, 송신측 장치에 있어서 송신자 소 리포트 패킷을 송출한 시각을 Tss, 송신측 장치에 있어서 송신자 대 리포트 패킷을 송출한 시각을 Tsl, 송신측 장치에 있어서 대응하는 수신자 소 리포트 패킷을 수신한 시각을 Trs, 송신측 장치에 있어서 대응하는 수신자 대 리포트 패킷을 수신한 시각을 Trl, 소 리포트 패킷(송신자 소 리포트 패킷과 수신자 소 리포트 패킷)의 왕복 지연시간을 Ds, 대 리포트 패킷(송신자 대 리포트 패킷과 수신자 대 리포트 패킷)의 왕복 지연시간을 D1이라 하면, 이하에 나타내는 수학식 (1)과 수학식 (2)로 이루어지는 2원 1차 연립방정식이 성립한다. 단, Sss/Ssl ≠Srs/Srl이고, 이 관계는 소 리포트 패킷을 RTCP에 따른 것으로 하면 일반적으로 성립한다.

여기서, Ds, D1은 각각,

이고, 또한 Sss, Ssl, Srs, Srl은 고정값이다. 또 Tsa, Tsl, Dsrs, Dsrl은 수신자 리포트 패킷에 포함되어 있고, Trs, Tl은 송신측 장치에서 알 수 있는 값이기 때문에, 이들 값을 사용하여 상기 2원 1차 연립방정식을 풀음으로써 송신방향의 비트 레이트(Rs)와 수신방향 비트 레이트(Rr), 즉 전송로의 통신속도를 일의적으로 산출할 수 있다.

다음에, 패킷의 송출순서에 대하여 설명한다. 송신측 장치에 있어서의 패킷의 송출순서는, 도 7에 나타내는 바와 같이, 송신자 소 리포트 패킷(1), 송신자 대 리포트 패킷(2), 미디어 패킷(3)의 순으로 하는 것이 바람직하다. 도 7에서는 송신측 장치에 있어서, 시각 Tss에 송신자 소 리포트 패킷(1)를 송출하고, 시각 Tsl에 송신자 대 리포트 패킷(2)을 송출하고, 수신측 장치에 있어서, 송신자 소 리포트 패킷(1)의 수신시각으로부터 지연시간(Dsrs)을 가지고 수신자 소 리포트 패킷 (1')을 송출하고, 송신자 대 리포트 패킷(2)의 수신시각으로부터 지연시간(Dsrl)을 가지고 수신자 대 리포트 패킷(2')을 송출하고, 다시 송신측 장치에 있어서, 수신자 소 리포트 패킷(1')의 수신 후에 미디어 패킷(3)을 송출하는 모양을 나타내고 있다.

도 7에서는 각 패킷이 송출되고 나서 송신버퍼를 거쳐 실제로 송신되기까지의 시간을 무시하고 있으나, 실제상은 송신측 장치에 있어서, 송신자 대 리포트 패킷(2)은, 송출된 직후, 도 8에 단계적으로 나타내는 바와 같이 송신자 소 리포트 패킷(1)의 송신이 종료하기까지의 시간, 송신버퍼에 정류하게 된다. 이 송신버퍼에 정류하는 시간은 패킷의 왕복 지연시간을 산출할 때의 오차가 된다.

그러나, 송신자 소 리포트 패킷(1)의 사이즈는, 송신자 대 리포트 패킷(2)의 사이즈보다 충분히 작은 것으로 하면, 송신자 소 리포트 패킷(1)이 수신측 장치에 도착하는 데 요하는 시간은 송신자 대 리포트 패킷(2)이 수신자측에 도착하는 데 요하는 시간보다도 충분히 작다. 따라서, 패킷의 송출에 있어서, 우선 송신자 소 리포트 패킷(1)으로부터 송출하도록 함으로써 송신자 대 리포트 패킷(2)이 송신버퍼에 정류하는 시간을 충분히 작게 할 수 있어, 패킷의 왕복 지연시간을 산출할 때의 오차를 작게 할 수 있다.

또, 수신측 장치에 있어서, 송신자 대 리포트 패킷(2)에 대한 수신자 대 리포트 패킷(2')이 송출되는 시점에서는, 송신자 소 리포트 패킷(1)에 대한 수신자 소 리포트 패킷(1')의 송신은 종료되어 있기 때문에, 수신자 소 리포트 패킷(1')이 송신버퍼 내에 존재함에 의한 수신자 대 리포트 패킷(2')의 정류는 없다.

또, 1세트의 패킷, 즉 송신자 소 리포트 패킷(1)과 송신자 대 리포트 패킷 (2)과 미디어 패킷(3)의 1 단위의 송수신이 종료되고 나서, 다음 1 단위의 패킷을 송출하는 것이 바람직하다. 미디어 패킷이 송신버퍼에 남아 있으면, 이에 의하여 다음 세트 패킷의 송신이 기다리게 되기 때문이다.

참고를 위해 패킷의 송출순서를, 송신자 대 리포트 패킷(2), 송신자 소 리포트 패킷(1), 미디어 패킷(3)의 순으로 한 예를, 도 9에 나타낸다. 이 예에서는 송신측 장치에 있어서, 송신자 소 리포트 패킷(1)은, 송출된 직후, 송신자 대 리포트 패킷(2)의 송신이 종료되기까지의 긴 시간, 송신측 장치의 송신버퍼에 정류하게 된다. 또, 수신측 장치에 있어서도, 송신자 소 리포트 패킷(1)에 대한 수신자 소 리포트 패킷(1')이 송출되는 시점에서, 송신자 대 리포트 패킷(2)에 대한 수신자 대 리포트 패킷(2')의 송신은 종료되어 있지 않기 때문에, 그 송신이 종료될 때까지 수신자 소 리포트 패킷(1')은 송신버퍼에 정류하게 된다. 또한 송신자 소 리포트 패킷(1) 및 수신자 소 리포트 패킷(1')은, 송신측 장치 및 수신측 장치의 송신버퍼 내에 정류하는 것이나, 도 9에서는 이해하기 쉽게 하기 위하여, 송신측 및 수신측으로부터 약간 떨어 트려 나타내고 있다.

이상, 실시형태에 대하여 설명하였으나, 본 발명의 동화상 압축 부호화 송수신장치는, 휴대 텔레비전 전화, 인터넷 텔레비전 전화, 그외 실시간 동화상 통신에 널리 적용할 수 있다.

이상의 설명으로부터 분명한 바와 같이, 본 발명에 의하면 동화상 압축 부호화 송수신장치에 있어서, 전송로의 통신속도를 구체적으로 추정하여 이것을 부호화제어에 반영시킬 수 있기 때문에, 전송속도에 적합한 정보원 부호화를 행할 수 있다. 이에 의하여 복수의 속도 모드 사이에서 동적으로 전송속도가 변동되는 전송로에 있어서도 통신품질을 양호하게 유지한 실시간 동화상 통신이 가능하게 된다.

Claims

송신측 장치로부터 수신측 장치에 미디어 패킷을 송신함과 동시에, 송신측 장치와 수신측 장치 사이에서 송신자 리포트 패킷 및 수신자 리포트 패킷을 송수신하는 동화상 압축 부호화 송수신장치에 있어서,

송신자 리포트 패킷 및 수신자 리포트 패킷은 각각, 사이즈가 다른 2종류의 리포트 패킷을 포함하고,

상기 송신자측 장치는, 소 사이즈의 송신자 리포트 패킷과 수신자 리포트 패킷과의 왕복 지연시간, 및 대 사이즈의 송신자 리포트 패킷과 수신자 리포트 패킷과의 왕복 지연시간에 의거하여 전송로의 전송속도를 추정하는 전송속도 추정수단을 구비하는 것을 특징으로 하는 동화상 압축 부호화 송수신장치.
제 1항에 있어서,

상기 전송속도 추정수단은, 소 사이즈의 송신자 리포트 패킷과 수신자 리포트 패킷과의 왕복 지연시간을 구하는 식, 및 대 사이즈의 송신자 리포트 패킷과 수신자 리포트 패킷과의 왕복 지연시간을 구하는 식으로 이루어지는 2원 1차 연립방정식에 의해 전송로의 전송속도를 추정하는 것을 특징으로 하는 동화상 압축 부호화 송수신장치.
제 1항에 있어서,

대 사이즈의 송신자 리포트 패킷 및 수신자 리포트 패킷은, 소 사이즈의 송신자 리포트 패킷 및 수신자 리포트 패킷에 각각 더미 데이터를 부가한 것임을 특징으로 하는 동화상 압축 부호화 송수신장치.
제 3항에 있어서,

상기 송신측 장치는, 소 사이즈의 송신자 리포트 패킷, 대 사이즈의 송신자 리포트 패킷, 미디어 패킷의 순으로 조합시켜 1세트의 패킷으로서 송신하는 것을 특징으로 하는 동화상 압축 부호화 송수신장치.
제 4항에 있어서,

1세트의 패킷의 송수신이 종료되고 나서 다음 1 세트의 패킷을 송출하는 것을 특징으로 하는 동화상 압축 부호화 송수신장치.
제 3항에 있어서,

상기 더미 데이터는 압축처리가 이루어져 있는 것을 특징으로 하는 동화상 압축 부호화 송수신장치.
제 1항에 있어서,

상기 전송속도 추정수단에 의해 추정된 전송로의 전송속도를 미디어의 부호화에 반영시키는 것을 특징으로 하는 동화상 압축 부호화 송수신장치.
제 7항에 있어서,

상기 전송속도 추정수단에 의해 추정된 네트워크의 전송속도를 미디어의 부호화에 반영시킬 때, 대상으로 하는 미디어의 우선도에 따른 레이트 제어를 행하는 것을 특징으로 하는 동화상 압축 부호화 송수신장치.