KR100544262B1 - 화상 데이터 송신 장치 및 화상 데이터 수신 장치 - Google Patents

Abstract

화상을 상황에 따라 적절하게 송수신 및 재생하는 장치를 제공한다.

제어부(12)가 기억부(11)의 전송 상황 테이블을 참조하여 송신부(15)에 의해 송신해야 할 화상 데이터의 양을 제어한다. 따라서, 전송 상황에 따른 양의 화상 데이터를 송신할 수 있고, 수신 장치(20)에 있어서는 송신된 화상 데이터에 의해 적절하게 화상을 표시할 수 있다.

제어부, 송신부, 화상 데이터, 재생부, 기억부, 수신 장치

Description

화상 데이터 송신 장치 및 화상 데이터 수신 장치{IMAGE DATA TRANSMITTING DEVICE AND IMAGE DATA RECEIVING DEVICE}

도 1은 JPEG2000에 의한 부호화 및 복호의 수순을 나타내는 도.

도 2는 본 발명의 제1 실시 형태에 따른 화상 통신 시스템의 구성도.

도 3은 전송 상황 테이블을 나타내는 도.

도 4는 본 발명의 제2 실시 형태에 따른 화상 통신 시스템의 구성도.

도 5는 본 발명의 제3 실시 형태에 따른 화상 통신 시스템의 구성도.

<도면의 주요 부분에 대한 부호의 설명>

10, 40, 60 : 송신 장치

11, 51 : 기억부

12, 42, 52, 62, 74 : 제어부

13, 23, 41, 54, 61, 71 : 수신부

14, 43, 63 : 압축부

15, 44, 53, 64, 75 : 송신부

20, 50, 70 : 수신 장치

21, 56, 73 : 표시부

22, 55, 72 : 재생부

30 : 회선

본 발명은 화상 전송 기술에 관한 것으로, 특히 화상 데이터를 송신 또는 수신하는 장치에 관한 것이다.

최근, PC(퍼스널 컴퓨터)를 대표로 하는 각종 정보 기기의 보급, 디지털 카메라나 컬러 프린터 등의 대중화, 인터넷 인구의 폭발적인 증가 등에 의해 일반인의 일상 생활에 디지털 화상의 문화가 깊게 침투하였다. 이러한 상황 하에서, 정지 화상, 동화상에 대해서는 각각 JPEG(Joint Photographic Expert Group), MPEG(Motion Picture Expert Group) 등의 부호화 압축 기술이 표준화되고, CD-ROM 등의 기록 매체나, 네트워크 또는 방송파 등의 전송 매체를 통한 화상의 배신 및 재생의 편리성이 개선되고 있다. 또, JPEG의 계열에 있어서, 그 진화판이라고 할 수 있는 JPEG2000이 발표되고, 또한 MPEG에 대해서도 중장기에 걸친 목표가 책정되고 있다.

이와 같이, 화상의 배신 및 재생의 편리성이 개선됨에 따라, 네트워크를 통하여 PC 외의 정보 기기 사이에서 화상의 통신이 활발하게 행해지도록 되었다. 또한, 인터넷에 접속 가능한 휴대 전화나 PDA(personal digital assistants)에도 화상이 배신되기 시작하고 있다. 금후, 더욱 다양한 형태의 기기에 대한 실시간의 동화상 배신이 중요한 시장을 형성할 것으로 생각된다.

각종 회선 등의 네트워크를 통하여 화상을 배신하는 경우, 회선의 혼잡에 의해서 수신측에서 화상이 장시간 재생되지 못할 사태가 생길 수 있다. 특히, 동화상을 배신하는 경우, 실시간으로 재생되지 못할 우려가 있다.

또한, 회선은 혼잡하지 않아도, 예를 들면 수신측의 장치가 휴대 전화나 PDA인 경우, 수신측 장치의 처리 속도에 따라 화상이 신속하게 재생되지 못할 우려가 있다.

본 발명자는 이러한 과제를 인식함으로써 본 발명을 구성한 것으로, 그 목적은 화상을 적절하게 재생할 수 있는 기술의 제공에 있다.

본 발명의 일 태양은, 화상 데이터 송신 장치(이하, 송신 장치라고도 한다)에 관한 것이다. 이 송신 장치는 장치 전체를 통괄적으로 제어하는 제어부와, 화상 데이터를 송신하는 송신부를 포함하고, 제어부는 화상 데이터의 전송 속도에 관한 정보를 참조하여, 송신해야 할 화상 데이터의 양을 제어한다. 여기서, 「송신해야 할 화상 데이터의 양」은 주로, 1매 또는 복수매의 화상을 표시하기 위해서 송신해야 할 화상 데이터의 양을 의미한다. 이 구성에 있어서, 제어부가 화상 데이터의 전송 속도에 관한 정보를 참조하여, 송신해야 할 화상 데이터의 양을 제어한다. 예를 들면, 제어부는 전송 속도가 느리면, 화상 데이터의 양을 억제한다. 따라서, 전송 속도에 따라 적절한 양의 화상 데이터를 송신할 수 있고, 수신측에서는 적절한 화상의 재생이 용이해진다.

제어부는 회선 속도에 관한 실적치를 바탕으로 상기 정보를 추측하고, 그 결과에 기초하여 송신해야 할 화상 데이터의 양을 제어하도록 해도 된다. 실적치는 경험치라도 되며 실측치라도 상관없다. 어떻든간에, 예를 들면 테이블에 저장해 둠으로써 참조가 용이해진다. 제어부는 화상 데이터의 송신 중에 전송 속도의 실측치를 취득해도 된다.

본 발명의 다른 태양도 화상 데이터 송신 장치에 관한 것이다. 이 송신 장치는, 장치 전체를 통괄적으로 제어하는 제어부와, 화상 데이터를 송신하는 송신부를 포함하고, 제어부는 화상 데이터의 수신 장치에 관한 정보를 참조하여, 송신해야 할 화상 데이터의 양을 제어한다. 「정보」는 수신 장치의 종별, 메모리 용량 등의 객관적인 정보 외에, 용도 등의 주관적인 정보라도 상관없다. 이 양태에서는 수신 장치측의 상황 또는 요망에 적당한 화상의 배신이 실현된다.

화상 데이터는 동화상 데이터로, 제어부는 정보를 바탕으로, 동화상의 프레임수를 유지한채, 동화상의 데이터 총량을 제어하도록 해도 된다. 이에 따라, 수신측에서는 프레임수가 유지된 동화상, 즉, 원활하게 연결된 동화상을 재생할 수 있다.

제어부는 상기 정보로서 수신 장치에서의 화상 데이터의 처리 능력을 참조해도 되며, 화상의 표시 사양을 참조해도 된다. 「표시 사양」이란, 예를 들면 표시 화면의 화면 사이즈나 표시 가능한 색 수를 말한다. 이에 따라, 수신 장치에서의 표시에 적절한 화상 데이터를 송신할 수 있다.

제어부는 상기 정보를 바탕으로, 화상 데이터의 해상도를 조정하여 화상 데 이터를 압축해도 되며, 화상 데이터의 저주파 성분을 추출함으로써 화상 데이터를 압축해도 된다. 저주파 성분에 의해 원화상의 가장 기본적인 성질을 재현할 수 있다. 제어부는 상기 정보를 바탕으로, 화상 데이터에 포함되는 화소의 표현 비트수를 저감하여 화상 데이터를 압축해도 된다.

본 발명의 다른 태양은, 화상 데이터 수신 장치(이하, 수신 장치라고도 한다)에 관한 것이다. 이 수신 장치는 화상 데이터를 수신하는 수신부와, 화상 데이터의 수신에 관하여 소정의 처리를 행하는 제어부를 포함하고, 상기 제어부는 화상 데이터의 전송 속도에 관한 정보를 참조하여, 수신해야 할 화상 데이터의 양을 제어한다. 예를 들면, 제어부는 전송 속도가 느리면 화상 데이터 양을 억제한다. 수신할 수 없는 데이터는 그대로 무시해도 되며, 송신 장치에 전송의 중단을 지시해도 된다. 어떻든간에, 해당 화상 데이터에 대한 후속의 처리가 원활하게 된다.

제어부는 회선 속도에 관한 실적치를 바탕으로 상기 정보를 추측하고, 그 결과에 기초하여 수신해야 할 화상 데이터의 양을 제어해도 된다. 이에 따라, 회선의 실정에 의거한 양의 화상 데이터를 수신할 수 있다. 제어부는 화상 데이터의 수신 중에 전송 속도의 실측치를 취득하고, 그 값에 기초하여 수신해야 할 화상 데이터의 양을 가변적으로 제어해도 된다.

본 발명의 다른 태양도 화상 데이터 수신 장치에 관한 것이다. 이 수신 장치는 화상 데이터를 수신하는 수신부와, 수신한 화상 데이터에 대하여 표시를 위한 전(前) 처리를 실시하는 재생부와, 장치 전체를 통괄적으로 제어하는 제어부를 포함하고, 상기 제어부는 상기 전 처리의 진행 상황에 관한 정보를 참조하여 수신해 야 할 화상 데이터의 양을 제어한다. 전 처리는 표시를 위해 행해지는 임의의 처리라도 되고, 예를 들면 부호화되어 있던 화상 데이터를 복호하는 처리가 있다. 어떻든간에, 이 구성에 따르면 전 처리를 지체하지 않고 행할 수 있다.

제어부는 표시의 사양에 관한 정보를 참조하여, 수신해야 할 화상 데이터의 양을 제어해도 된다. 이에 따라, 예를 들면 표시할 수 없는 불필요한 데이터의 수신을 없앨 수 있다.

제어부는 수신한 화상 데이터가 상기한 양에 도달했을 때 그 취지를 화상 데이터의 송신 장치로 통지하도록 해도 된다. 「상기한 양에 도달했을 때」란, 수신한 화상 데이터가 수치적인 기준의 양에 도달한 경우뿐만 아니라, 예를 들면 수신한 화상 데이터가 소정의 성분을 수신한 양에 도달한 경우라도 상관없다. 이에 따라, 송신 장치는 후속의 화상 데이터의 송신을 정지시킬 수 있다. 화상 데이터가 동화상 데이터인 경우, 제어부는 동화상의 프레임수를 유지한 채, 그 데이터 총량을 제어해도 된다.

본 발명의 다른 태양은 화상 송신 방법에 관한 것이다. 이 방법은 화상 송신 방법으로써, 화상 데이터를 송신하는 단계와, 화상 데이터의 전송 속도에 관한 정보를 참조하여, 송신해야 할 화상 데이터의 양을 제어하는 단계를 갖는다. 본 발명의 다른 양태도 화상 송신 방법에 관한 것이다. 이 방법은 화상 데이터를 송신하는 단계와, 화상 데이터의 수신 장치에 관한 정보를 참조하여 송신해야 할 화상 데이터의 양을 제어하는 단계를 갖는다.

본 발명의 다른 태양은 화상 수신 방법에 관한 것이다. 이 방법은 화상 데 이터를 수신하는 단계와, 화상 데이터의 전송 속도에 관한 정보를 참조하여 수신해야 할 화상 데이터의 양을 제어하는 단계를 갖는다. 본 발명의 다른 양태도 화상 수신 방법에 관한 것이다. 이 방법은 화상 데이터를 수신하는 단계와, 수신한 화상 데이터에 대하여 표시를 위한 전 처리를 실시하는 단계와, 상기 전 처리의 진행 상황에 관한 정보를 참조하여 수신해야 할 화상 데이터의 양을 제어하는 단계를 갖는다.

본 발명의 다른 태양도 화상 수신 방법에 관한 것이다. 이 방법은 화상 데이터를 수신하는 수신 단계와, 수신한 화상 데이터에 대하여 표시를 위한 전 처리를 실시하는 단계와, 상기 표시의 사양에 관한 정보를 참조하여 수신해야 할 화상 데이터의 양을 제어하는 단계를 갖는다.

또, 이상의 구성 요소를 임의로 조합하고, 본 발명의 표현을 방법, 장치, 시스템, 컴퓨터 프로그램, 기록 매체 등의 사이에서 변환한 것도 또한, 본 발명의 태양으로서 유효하다.

<발명의 실시 형태>

실시 형태에서는, 화상을 부호화하여 송신하고, 이것을 수신한 장치가 복호한 후에 재생한다. 부호화는 JPEG2000에 따른다. 우선 JPEG2000의 부호화와 복호의 개요를 설명한다.

도 1은 JPEG2000에 의한 부호화 및 복호의 수순을 나타내는 도면이다. 부호화에 있어서, 부호화의 대상인 화상(이하, 「대상 화상」이라 함)에 대하여, 우선 1회 웨이블릿 변환이 실시되어, 제1계층의 화상 WI1이 생성된다. JPEG2000에서 이 용되는 웨이블릿 변환의 필터는 Daubechies 필터이고, 그 본질은 화상의 종횡에 대하여 각각 동시에 고역 통과 필터 및 저역 통과 필터를 작용시키는 점에 있다. 따라서, 그 변환 결과로 화상은 x, y의 양 방향에 저주파 성분을 갖는 LL 서브 대역과, x, y의 한 방향으로 저주파 성분을 구비하고, 또한 다른 방향으로 고주파 성분을 갖는 HL 서브 대역 및 LH 서브 대역과, x, y의 양 방향에 고주파 성분을 갖는 HH 서브 대역의 합계 4개의 대역으로 분할된다. 또한 이 필터는 x, y의 양 방향에 대하여 화소수를 1/2로 경감하는 작용도 더불어 갖는다. 따라서, 도 1에 도시한 바와 같이, 제1계층의 화상 WIl에서 모식적으로 나타낸 4개의 서브 대역(여기서는 LL1, HL1, LH1, HH1이라고 표기한다)이 생성된다.

부호화에서의 웨이블릿 변환에서는 소정의 횟수만큼 필터링이 실시된다. 도 1에서는, 웨이블릿 변환은 2회 행해져서, 제2계층의 화상 WI2가 생성된다. 2회째 이후의 웨이블릿 변환은 직전의 계층의 화상 중에, LL 서브 대역 성분에 대해서만 실시된다. 따라서, 제2계층의 화상 WI2에 있어서, 제1계층의 화상 WI1의 LL1 서브 대역이, 4개의 서브 대역인 LL2, HL2, LH2, HH2로 분해되고 있다. 이 후 양자화, 비트 플레인 부호화, 산술 부호화, 비트 스트림 생성 등의 처리를 거쳐서 최종적으로 부호화 화상 데이터 CI(Coded Image)가 얻어진다. 대상 화상에서의 저주파 성분은 도 1에 있어서 보다 좌측 상부에 나타난다. 도 1의 경우, 제2계층의 화상 WI2의 좌측 상부 코너에 있는 LL2 서브 대역이 가장 저주파에 가까운 성분을 포함한다.

한편, 복호에서는 우선 부호화 화상 데이터 CI가 입력되며, 비트 스트림 해 석 및 분해, 산술 복호, 비트 플레인 복호 등의 처리를 거친 후, 역 양자화 처리를 받는다. 이 단계에서 대상 화상에 대하여 2회 웨이블릿 변환이 실시된 것에 상당하는 제2계층의 화상 WI2가 얻어진다. 계속해서 이 화상에 웨이블릿 역 변환이 실시되어 제1계층의 화상 WI1이 생성되며, 한번 더 웨이블릿 역 변환이 실시되어 복호 화상 DI(Decoded Image)가 얻어진다.

도 2는 본 발명의 제1 실시 형태에 따른 화상 통신 시스템의 구성을 나타낸다. 화상 통신 시스템은 화상 데이터 송신 장치의 일례로서의 송신 장치(10)와, 화상 데이터 수신 장치의 일례로서의 수신 장치(20)를 갖는다. 이 송신 장치(10) 및 수신 장치(20) 각각의 구성은 하드웨어적으로는 임의의 컴퓨터의 CPU, 메모리, 그 밖의 LSI에서 실현할 수 있고, 소프트웨어적으로는 메모리에 로드된 화상 데이터 송신 기능 또는 화상 데이터 수신 기능이 있는 프로그램 등에 의해 실현되지만, 여기서는 이들의 제휴에 의해 실현되는 기능 블록을 나타내고 있다. 따라서, 이들의 기능 블록이 하드웨어로만, 소프트웨어로만, 또는 이들이 조합에 의해 다양한 형태로 실현할 수 있는 것은 당업자에게 있어서 이해받을 수 있는 점이다.

송신 장치(10)와 수신 장치(20)는, 예를 들면 인터넷 등의 회선(30)을 통해 접속되어 있다. 송신 장치(10)는 기억부(11)와, 제어부(12)와, 수신부(13)와, 압축부(14)와, 송신부(15)를 갖는다. 기억부(11)는 화상 데이터의 전송 속도에 관한 정보를 저장하는 전송 상황 테이블을 내장한다.

도 3은 그 전송 상황 테이블(16)을 나타낸다. 전송 상황 테이블(16)은 시간 란(17)과, 송신처 지역 란(18)과, 전송 상황 란(19)을 갖는다. 시간 란(17)은 화 상 데이터를 송신하는 대략의 시간대를 기억한다. 송신처 지역 란(18)은 수신 장치(20)가 속하는 지역, 즉 송신처 지역을 기억한다. 송신처 지역은, 예를 들면 IP 어드레스와 그 어드레스를 갖는 장치가 속하는 네트워크의 지역을 대응시켜두고, 수신 장치(20)의 IP 어드레스를 바탕으로 특정된다. 전송 상황 란(19)은 각각 대응하는 시간대 및 송신처 지역에서의 화상 데이터의 전송 속도에 관련하는 회선의 전송 상황을 저장한다. 본 실시 형태에서는 전송 상황으로서 회선 속도에 기초하여, 1, 2, 3, 4, 5 중 어느 하나가 저장되어 있고, 과거의 실적으로부터 전송 속도가 빠르다고 예측되는 것만큼 값이 작다. 본 테이블(16)에 따르면, 예를 들면, 5:00 ∼ 6:00에 있어서, 송신처 지역이 뉴욕이면 전송 속도가 제일 느리다.

제어부(12)는 송신처 지역을 검출하고, 현재의 시각 및 송신처 지역에 대응하는 전송 상황을 전송 상황 테이블(16)로부터 검출한다. 또한, 그 전송 상황에 기초하여 압축부(14)에 의해 압축시킬 화상 데이터의 해상도, 또는 총 화소수를 제어한다. 본 실시 형태에서는 전송 속도가 소정의 속도보다 느린 경우, 예를 들면 전송 상황의 값이 2 이하인 경우, 해상도에 관한 압축을 행한다.

압축부(14)는 송신 대상의 화상 데이터를 수취하고, 제어부(12)로부터 압축의 지시를 수취하였을 때, 화상 데이터의 해상도를 떨어뜨린다. 한편, 압축의 지시를 수취하지 않은 경우, 해상도는 변환하지 않는다.

해상도를 떨어뜨리는 처리로서, 예를 들면 화상의 외주 부분에 속하는 화소를 제거하는 트리밍이나 화상을 복수의 블록으로 나누어서 각각 대표 화소를 추출하는 방법이나, 애버리지 필터를 걸어 화소를 통합하는 방법이나 단순한 픽셀 스키 핑(pixel skipping) 등, 여러가지의 방법이 있다. 대상이 동화상 데이터인 경우, 프레임수는 변화없이 상술한 해상도 저감 처리를 행한다. 일련의 처리에 의해, 전송 상황이 나쁠 때에는 적은 화상 데이터를 보냄으로써, 수신 장치(20)에서의 재생, 특히 동화상의 실시간 재생을 가능한 한 보장한다.

그 후, 압축부(14)는 화상 데이터에 대하여 전술한 JPEG2000에 기초하는 부호화 처리를 행하고, 부호화 화상 데이터 CI를 생성한다. 송신부(15)는 부호화 화상 데이터 CI를 수신 장치(20)로 회선(30)을 통해 송신한다.

수신 장치(20)에 있어서, 회선(30)을 통해 수신부(23)가 부호화 화상 데이터를 수신하고, 재생부(22)로 전달한다. 재생부(22)는 전달받은 부호화 화상 데이터 CI에 대하여, 산술 복호, 비트 플레인 복호 등의 처리를 거친 후에, 역 양자화 처리를 행하고, 또한 2회 웨이블릿 역 변환을 행하여, 복호 화상 데이터를 생성하고, 표시부(21)로 전달한다. 표시부(21)는 전달받은 복호 화상 데이터를 화면에 표시한다.

이와 같이, 회선 속도가 느린 경우에는 송신되는 화상 데이터의 양이 줄어들기 때문에, 수신측에서 실시간의 재생을 보장하기 쉬워진다. 동화상 데이터를 송신하는 경우에도 프레임수는 유지되기 때문에, 어느 정도의 화질을 유지하면서 원활한 동화상을 재생할 수 있다.

또, 송신 장치(10)에 있어서, 수신부(13)는 화상 데이터나 그 밖의 데이터를 송신했을 때에, 송신처의 수신 장치, 송신처 지역에 속하는 도시하지 않은 중계 장치 등으로부터 회선 속도에 관한 실적치를 수신하고 제어부(12)에 통지한다. 제어 부(12)는 수신부(13)로부터 통지된 실적치에 기초하여 전송 상황 테이블(16)의 전송 상황을 적절하게 갱신한다. 이에 의해서, 실제의 회선에서의 전송 상황을 전송 상황 테이블(16)에 반영할 수 있다.

도 4는 본 발명의 제2 실시 형태에 따른 화상 통신 시스템의 구성을 나타낸다. 이 화상 통신 시스템은 송신 장치(40)와 수신 장치(50)를 갖는다.

수신 장치(50)에 있어서, 제어부(52)가 기억부(51)로부터 표시부(56)의 표시 사양을 추출하고 송신부(53)로 전달한다. 표시 사양으로서, 표시부(56)의 화면 사이즈, 컬러 표시의 가부(可否)와 색 수 등이 있다. 송신부(53)는 전달받은 표시 사양을 회선(30)을 통해 송신 장치(40)에 통지한다.

송신 장치(40)에 있어서, 수신부(41)가 수신 장치(50)의 표시 사양을 수신하고, 제어부(42)로 전달한다. 제어부(42)는 표시 사양에 기초하여 압축부(43)에 의해 압축시킬 화상 데이터의 양을 제어한다. 본 실시 형태에서는 표시 사양에서의 화면 사이즈가 압축부(43)에 전달받은 화상 데이터의 사이즈보다 작은 경우, 압축부(43)에 의해 화상 사이즈, 즉 화상 데이터의 화소수를 줄이도록 지시한다. 표시 사양에 따라, 화면이 흑백인 것이 판명되면, 화상 데이터의 색 컴포넌트인 휘도 Y, 색차 Cb, Cr 중에서 휘도 Y 이외의 것을 삭제하도록 지시한다. 표시 사양에 있어서, 색 수가 화상 데이터의 색 수보다 적은 경우, 화상 데이터 중 화소의 표현 비트수를 줄이도록 지시한다.

송신 장치(40)의 압축부(43)는, 송신 대상의 화상 데이터를 수취하고, 제어부(42)로부터의 지시에 따라 필요한 범위에서 화상 데이터를 압축한다. 그리고나 서, 부호화의 일련의 처리를 행한다. 지시를 하지 않은 경우에는 그대로 부호화한다. 송신부(44)는 부호화 화상 데이터를 수신 장치(50)에 회선(30)을 통해 송신한다.

수신 장치(50)에 있어서, 회선(30)을 통해 수신부(54)가 부호화 화상 데이터를 수신하고, 재생부(55)로 전달한다. 재생부(55)는 전달받은 부호화 화상 데이터에 대하여, 산술 복호, 비트 플레인 복호 등의 처리를 거친 후에, 역 양자화 처리를 행하고, 또한 2회 웨이블릿 역 변환을 행하여, 복호 화상 데이터를 생성하고, 표시부(56)로 전달한다. 표시부(56)는 전달받은 복호 화상을 화면에 표시한다.

이상, 송신해야 할 화상 데이터를 표시 사양에 적합하도록 처리함으로써, 전송량을 줄일 수 있고, 회선의 혼잡 완화에 기여할 수 있다. 또한, 수신 장치(50)가 수신하는 화상 데이터가 감소하기 때문에, 재생부(55)의 처리 부하를 경감할 수 있고, 또한 처리나 통신에 필요한 메모리량이 저감되고, 더 나아가서는 제품 비용의 삭감으로도 이어진다. 또한, 수신 장치(50)에서의 표시 품질도 저하되지 않는다. 수신되는 동화상 데이터의 프레임수도 유지할 수 있기 때문에 원활한 동화상을 재생할 수 있다.

도 5는 본 발명의 제3 실시 형태에 따른 화상 통신 시스템의 구성을 나타낸다. 화상 통신 시스템은 송신 장치(60)와 수신 장치(70)를 갖는다.

본 실시 형태에서는, 도 1에 도시한 화상의 가장 저주파에 가까운 성분인 LL2 서브 대역만 얻을 수 있으면, 원화상의 기본적인 성질을 재현할 수 있다는 지견이 이용된다.

송신 장치(60)에 있어서, 압축부(63)는 송신 대상의 화상의 화상 데이터를 수취하고, 해당 화상 데이터에 대하여 2회 웨이블릿 변환을 행하고, 이 후 양자화, 그 밖의 처리를 행하여 부호화 화상 데이터 CI를 생성한다. 송신부(64)는 압축부(63)에 의해 압축된 부호화 화상 데이터를 수신 장치(70)에 회선(30)을 통해 송신한다.

수신 장치(70)에 있어서, 회선(30)을 통해 수신부(71)가 부호화 화상 데이터를 수신하고, 재생부(72)가 도시하지 않은 버퍼에 저장한다. 재생부(72)는 버퍼로부터 부호화 화상 데이터 CI를 추출하고, 해당 부호화 화상 데이터에 대하여 산술 복호, 비트 플레인 복호 등의 처리를 거친 후에, 역 양자화 처리를 행하고, 또한 2회 웨이블릿 역 변환을 행하고, 복호 화상 데이터를 생성하여 표시부(73)로 전달한다. 표시부(73)는 전달받은 복호 화상을 화면에 표시한다.

이 때, 제어부(74)는 재생부(72)에 의한 처리, 즉 복호 처리의 진행 상황을 검출하고, 그에 기초하여 수신부(71)가 수신해야 할 데이터 양을 제어한다. 예를 들면, 제어부(74)는 재생부(72)의 버퍼에 미처리의 부호화 화상 데이터를 저장할 수 없게 되는 상황이면, 수신하는 화상 데이터의 양을 억제한다. 그 때문에 본 실시 형태에서는, 예를 들면 LL2 서브 대역에 상당하는 데이터를 수신한 후, 수신을 정지한다. 이에 따라, 재생 처리의 중단이나 혼란을 회피하기 쉬워진다.

재생부(72)는 LL2 서브 대역의 데이터에 기초하여 복호 화상을 생성한다. 제어부(74)는, 송신부(75)를 통해 화상 데이터가 소정의 양에 도달한 취지를 송신 장치(60)에 통지한다. 송신 장치(60)에서는, 수신부(61)가 그 취지를 수신하고, 이것을 제어부(62)에 통지한다. 제어부(62)는 그 통지를 받은 경우에는 송신 중 화상 데이터가 정지 화상에 관한 것이면 압축부(63)에 의한 화상 데이터에 대한 처리를 정지시키고, 동화상에 관한 것이면 압축부(63)에 지시하여 다음 프레임의 데이터에 대한 처리를 개시시킨다.

이 때문에, 수신 장치(70)측에서 사용되지 않은 화상 데이터의 송신을 방지할 수 있어 회선의 혼잡 완화에 기여할 수 있다. 또한 수신 장치(70)에서는 어느 정도의 화질을 유지하여 적절하게 화상을 표시시킬 수 있다.

이상, 본 발명을 실시 형태를 바탕으로 설명하였다. 이들 실시 형태는 예시로써, 이들의 각 구성 요소나 각 처리 공정의 조합에 여러가지의 변형예가 가능한 것, 또한 그러한 변형예도 본 발명의 범위에 있는 것은 당업자에게 있어서 이해받을 수 있는 점이다. 예를 들면, 제1 실시 형태에 있어서 부호화 전의 화상 데이터의 해상도를 떨어뜨렸지만, 예를 들면 각 화소의 표현 비트수를 줄여도 되며, 화상 데이터의 저주파 성분을 추출하여 송신해도 되며 화상 데이터의 색 컴포넌트의 일부를 삭제해도 된다.

제1 실시 형태에서는 화상 데이터의 송신에 있어서 화상 데이터의 양을 제어하였지만, 수신 장치(20)측에서 전송 속도의 실측치를 취득하고, 해당 실측치에 기초하여 수신 장치(20)에 있어서 가변적으로 화상 데이터의 양을 제어해도 된다.

제2 실시 형태에서는, 수신 장치(50)의 표시 사양에 기초하여 화상 데이터의 양을 제어하였지만, 송신 장치(40)가 수신 장치(50)에서의 화상 데이터의 처리 능력이나 처리의 진행 상황에 관한 정보를 수신하고, 이것에 기초하여 제어해도 된 다.

제3 실시 형태에서는, 재생부(72) 처리의 진행 상황에 기초하여 수신해야 할 화상 데이터의 양을 제어하였지만, 예를 들면 화상 데이터의 전송 속도나 표시 사양에 기초하여 수신해야 할 화상 데이터의 양을 제어해도 된다.

제3 실시 형태에서는, JPEG2000 형식의 부호화 화상 데이터를 예로 들어 LL2 서브 대역까지의 데이터를 수신하고, 그 후 수신하지 않는다고 하였지만, 적절한 화질의 화상을 재생할 수 있을 만큼의 데이터까지를 수신하고, 그 후 수신을 중단해도 된다. MPEG 등의 DCT(Discrete Cosine Transform)를 이용하는 경우, 당연히 보다 저주파측의 DCT 계수를 수신한 단계에서 수신을 중단하는 방법을 채용해도 된다. 어떤 경우라도, 본 발명은 화상 데이터를 프로그레시브하게 전송하는 방식과의 매칭이 좋다.

실시 형태에서 설명한 송신측의 제어 및 수신측의 제어는, 이들 임의의 조합도 또한 유효하다. 예를 들면, 송신측에서는 회선(30)의 실적치에 기초하여 어느 정도 전송량을 최적화하면서, 수신측에서는 자(自) 장치의 처리 능력에 따라서 적절하게 화상 데이터의 수신을 중단하거나 또는 그 취지를 송신측에 통지하는 구성이어도 된다.

회선(30)의 전송 속도에 따른 화상 데이터 양의 제어는 실시간으로 행해도 된다. 즉, 회선(30)의 속도가 빠른 동안은 화상의 고주파 성분까지 전송하고, 느리게 되었을 때는 저주파 성분만을 전송한다는 구성이어도 된다.

송신측은 수신측 장치의 사양이나 처리 능력을 일원 관리하는 도시하지 않은 데이터 베이스를 구비해도 된다. 그 경우, 수신 장치 단위로 아주 미세한 송신 제어를 하는 것도 가능하다.

본 발명에 따르면, 화상을 적절하게 재생시킬 수 있다.

Claims (13)

1. 장치 전체를 통괄적으로 제어하는 제어부와, 화상 데이터를 압축하는 압축부와, 상기 압축된 화상 데이터를 송신하는 송신부를 포함하고,

   상기 제어부는 상기 화상 데이터의 전송 속도에 관한 정보를 참조하여 송신해야 할 화상 데이터의 양을 제어하며,

   상기 압축부는 상기 송신해야 할 화상 데이터의 양에 기초하여 상기 화상 데이터를 압축하는 것으로서,

   상기 제어부는 회선 속도에 관한 실적치를 바탕으로 상기 정보를 추측하고, 그 결과에 기초하여 상기 송신해야 할 화상 데이터의 양을 제어하는 것을 특징으로 하는 화상 데이터 송신 장치.
2. 제1항에 있어서, 상기 압축부는 상기 정보를 바탕으로 상기 화상 데이터의 해상도를 조정하여 상기 화상 데이터를 압축하는 것을 특징으로 하는 화상 데이터 송신 장치.
3. 제1항에 있어서, 상기 압축부는 상기 정보를 바탕으로 상기 화상 데이터의 저주파 성분을 추출함으로써 상기 화상 데이터를 압축하는 것을 특징으로 하는 화상 데이터 송신 장치.
4. 제1항에 있어서, 상기 압축부는 상기 정보를 바탕으로 상기 화상 데이터에 포함되는 화소의 표현 비트수를 저감하여 상기 화상 데이터를 압축하는 것을 특징으로 하는 화상 데이터 송신 장치.
5. 삭제
6. 삭제
7. 삭제
8. 삭제
9. 삭제
10. 삭제
11. 삭제
12. 삭제
13. 삭제

Images