KR100653760B1 - 신호처리장치와 그 제어방법, 프로그램 및 기록매체 - Google Patents

Abstract

복수의 신호처리회로와; 화상데이터의 화소수변환처리를 포함하는 복수의 신호처리를 복수의 신호처리회로가 분담하여 실행하게 하는 프로그램을 기억하고, 복수의 신호처리의 일부신호처리를, 상기 복수의 신호처리회로 중 어느 것이 실행하는 가를, 화소수변환처리의 확대율에 따라서 선택할 수 있는 프로그램이 기억된 기억회로로 이루어진 신호처리장치이다.

Description

신호처리장치와 그 제어방법, 프로그램 및 기록매체{SIGNAL PROCESSING APPARATUS AND CONTROL METHOD THEREFOR, PROGRAM AND RECORDING MEDIUM}

도 1은 본 발명의 제 1실시예에 의한 데코딩처리장치의 구성을 도시하는 블록도.

도 2는 본 발명의 제 1실시예에 의한 스위칭수단에 의해 절환처리동작의 조건을 도시하는 도면.

도 3은 본 발명의 제 1실시예에 의한 데코딩처리장치내의 처리부하의 균형을 도시하는 그래프.

도 4는 본 발명의 제 2실시예에 의한 데코딩처리장치의 구성을 도시하는 블록도.

도 5는 본 발명의 제 2실시예에 의한 스위칭수단에 의한 절환처리동작에 대한 조건을 도시하는 도면.

도 6은 비교예로서 데코딩처리장치의 구성을 도시하는 도면.

도 7a는 비교예의 처리량과 확대율 사이의 관계를 도시하는 그래프.

도 7b는 비교예내의 처리부하의 균형을 도시하는 그래프.

도 8은 종래기술의 데코딩처리장치의 하나의 구성예를 도시하는 블록도.

도 9는 종래기술의 비교예에서 처리량과 확대율 사이의 관계를 도시하는 그 래프.

<부호에 대한 간단한 설명>

102, 302, 502, 502 : 데이터이동수단: 103 : 역직교변환처리

104 : 이동보상처리 105, 305 : 스위칭수단

110, 501 : 예측데코딩수단

111, 310, 313, 320, 602: 예측데코딩처리

112, 314, 321, 604 : 역양자화처리 130 : 제 1프로세서

131 : 제 2프로세서 303 : 역직교변환처리

312 : 현저계수플래그부가처리

330, 331, 510, 511, 610, 611 : 프로세서 500 : 하프만데코딩수단

502 : 데이터이동수단 503 : 양자화처리

504, 605 : 역직교처리 505 : 이동압축처리

601 : 계수솎아내기처리

1301, 1311, 3301, 3311 : 메모리

<발명의 배경>

<발명의 분야>

본 발명은 신호처리장치와 그 장치에 대한 제어방법 및 프로그램과 기록매체에 관한 것이다. 더욱 구체적으로는, 본 발명은, 신호데코딩처리 등의 신호처리를 적어도 두개의 프로세서로 분담하여 실행하는 기술을 적용하는 경우에 적합하다.

<관련된 기술에 대한 설명>

조립시스템은, 특정한 기능에 적합한 하드웨어 아키텍처와 명령을 구비한, 복수의 프로세서를 이용함으로써, 일련의 처리는 파이프라인방식으로 행하도록 설계되는 것이 흔히 있다. 한편, 각각의 프로세서가, 복수의 상이한 처리에 대하여 멀티태스크 (multi-task) 또는 멀티쓰레드(multi-thread)기구인 경우에도, 비용면을 고려하면서, 태스크 또는 쓰레드의 단위에서 복수의 프로세서 사이에 횡단적인 스케링줄기구를 구비하는 것은 거의 없다.

이러한 멀티태스크 및 복수의 프로세서를 이용하여 파이프라인방식으로 처리를 행하는 종래기술의 시스템에 있어서, 동화상부호화데이터의 데코딩처리를 이하와 같은 방식으로 행한다. 이하, 종래예로서, MPEG2동화상압축방법에 적용되는 데코딩처리에 대하여 설명한다.

도 8은 종래기술의 데코딩처리장치의 일구성예에 대하여 도시한다. 먼저, 가변장데코딩처리에 적합한 프로세서(510)에 있어서, 허프만데코딩수단(500)은 각각의 매크로블록에 입력된 부호화 데이터를 데코드하고, 예측데코딩수단(501)은 DC성분과 운동벡터에 대한 예측데코딩처리를 행한다. 데이터이동수단(502)은, 프로세서(510)로부터 일반적인 화상처리에 적합한 프로세서(511)로 매크로블록마다 데이터를 전송한다.

일반적인 화상처리에 적합한 프로세서(511)에서, 데이터는, 역양자화처리 (503), 역직교처리(504) 및 이동보상처리(505)를 행하며, 최종데이터를 출력한다.

데코딩처리와 동시에 확대/축소처리를 행하는 방법에 대하여 일반적으로 공지되어 있다. 이러한 확장/감축처리에서, 데코딩처리가 역직교변환을 행하는 경우, 주파수영역에서 계수를 작게하거나 부가해서 소망하는 크기로 역직교변환하여 공간영역에 양호한 화질을 얻을 수 있다. 데코딩후에 해상도변환을 행하는 경우에 비하여, 처리량을 더 많이 절약할 수 있다.

그러나, 전술한 데코딩시에 확대/축소처리를 도 8에 도시된 데코딩처리장치에 적용한다. 다음, 도 9에 도시한 바와 같이, 데코딩처리의 선행단계인 하프만데코딩처리는, 확대율에 관계없이 거의 일정하지만, 데코딩처리의 다음단계인 역직교변환처리 또는 이동보상처리는 확대률에 따라서 변화한다. 구체적으로, 축소처리시에는 데코딩처리의 선행단계를 행하는 프로세서(510)의 처리가 증가하고, 확대처리시에는 데코딩처리의 다음단계를 행하는 프로세서(511)의 처리가 증가하여, 처리부하의 균형이 열화되어 총처리효율성이 낮아진다.

<발명의 요약>

본 발명의 목적은, 복수의 프로세서 중에서 처리부하의 균형을 향상시킬 수 있고, 및/또는 각각의 프로세서에 대하여 요구되는 최대처리능력을 저감할 수 있는 신호처리장치와 그 장치의 제어방법 및 프로그램과 기록매체를 제공하는데 있다.

본 발명의 제 1측면에 의하면, 복수의 신호처리회로와; 화상데이터의 화소수변환처리를 포함하는 복수의 신호처리를 상기 복수의 신호처리회로가, 분담하여 실행하게 하고, 상기 복수의 신호처리 중 일부신호처리를 복수의 신호처리회로 중 어느 것을 실행하게 할 것인가를 화소수변환처리의 확대율에 따라서 선택할 수 있는 프로그램이 기억된 기억회로로 이루어진 신호처리장치를 제공한다.

여기에서, 또한, 프로그램을 기억하는 기억회로는 제 1기억회로와 제 2기억회로 등의 복수의 기억회로로 구성될 수 있다(각각 "서브기억회로"라고 칭한다.). 이런 경우에 있어서, 프로그램은, 각각의 서브기억회로내에 기억된 프로그램으로 구성되는 것으로 가정한다. 또한, 기억회로 또는 서브기억회로는 신호처리회로의 것과 동일한 반도체기판 위에 집적될 수도 있다. 또한, 기억회로 또는 서브기억회로는 공통밀봉패키지에 배치될 수도 있다. 또한, 기억회로가 복수의 서브기억회로로 구성되는 경우에 있어서, 몇몇의 서브기억회로는 신호처리회로와 함께 집적회로를 구성할 수 있으며, 그 나머지 서브기억회로는, 복수의 신호처리회로로 집적화되지 않는 것 처럼 배열될 수 있다.

여기에서, 예를 들면, 화소수변환 전의 화소수에 대한 화소수변환 후의 화소수의 비로서, 화소수변환처리의 확대율을 결정한다. 이러한 비율은 1이하일 수 있다. 이런 경우에 있어서, 화소수변환 후의 화소수는 변환전의 것보다 작다. 여기에서, 확대율에 의한 선택은, 상기 비율로서 주어진 값에 따라서 선택할 수 있는 구성에 한정되는 것은 아니다. 예를 들면, 화소수에 대한 변화처리시, 비율 그 자체의 값이 아니라, 솎아내는 처리에 의해 감소되거나 보간처리에 의해 증가되는 화소수(즉, 주파수영역에서 이러한 처리를 행하는 경우에 있어서 솎아내거나 보간되는 주파수성분의 수)를 지시하는 구성을 이용할 수 있다. 화상의 화소수가 조건에 의거한 신호처리의 결과로서 변화하는 경우의 몇몇의 조건에 따라서 선택되는 구성은, 확대률에 따라서 선택가능한 식을 포함한다.

또한, 전술한 일부신호처리는 화상데이터의 확대처리에 대하여 실시되는 신호처리의 구성을 적절하게 이용할 수 있다. 여기에서, 복수의 신호처리의 일부신호처리는, 복수의 신호처리에서 하나의 신호처리의 경우이거나, 복수의 신호처리 중 복수의 신호처리인 경우의 어느 것이어도 된다. 바꿔말하자면, 어떠한 신호처리회로로 실행할 것인지를 결정하기 위해 선택되는 신호처리는 단수이거나 복수이어도 된다.

또한, 복수의 신호처리는, 복수의 신호처리를 연속하여 실행함으로써 복수의 신호처리의 구성을 적절하게 이용할 수 있으며, 화상데이터의 확대처리를 행한다. 여기에서, 연속적으로 실행될 복수의 신호처리는, 어느 신호처리와 그 신호처리 후(여기에서, "그 신호처리 후"는 단지 신호처리 직후 뿐만 아니라 복수의 신호처리에 포함되지 않는 다른 신호처리 후도 포함함)에 그 신호처리의 결과로서 얻어지는 신호(다른 신호처리를 부가하여 실행하는 결과로 얻어진 신호도 포함)에 대하여 실행되어야 할 신호처리로 구성된다.

또한, 전술한 신호처리장치는, 상기 복수의 신호처리회로는: 제 1신호처리회로와; 신호처리가 제 1신호처리회로에서 실행되는 결과로서 얻어진 신호에 대하여, 복수의 신호처리중 다른 신호처리를 실행하는 제 2신호처리회로를 포함하며, 상기, 프로그램은, 일부신호처리를, 확대률이 소정값보다 큰 경우에 있어서, 제 1신호처리회로에서 실행하게 되고, 확대률이 소정값 보다 작은 경우에 있어서, 제 2신호처리회로에서 실행하게 되는 구성을 채택할 수 있다.

여기에서, 신호처리를 제 1신호처리에서 실행한 결과로서 얻은 신호는, 제 1신호처리회로로부터의 출력직후 신호만을 의미하는 것은 아니다. 이렇게 얻은 신호는 제 1신호처리회로에서 신호처리를 실행하는 결과로서 얻어진 신호에 대하여 다른 처리를 실행한 결과로서 얻어지는 신호도 포함한다.

또한, 상기 복수의 신호처리회로는: 제 1신호처리회로와; 신호처리를 제 1신호처리회로에서 실행한 결과로서 얻어지는 신호에 대하여 복수의 신호처리중 다른 신호처리를 실행하는 제 2신호처리회로를 포함하며, 상기 프로그램은: 확대률이 소정값보다 큰 경우, 또는 소정값으로 되지 않는 경우에 있어서 제 1신호처리와 제 2신호처리가, 제 1신호처리회로에서 실행되게 하며, 확대율이 소정값 보다 작은 경우, 또는 소정값으로 되지 않는 경우에 있어서, 제 2신호처리에서 실행되게 하며; 확대율이 소정값과 동등한 값인 경우, 제 1신호처리회로에서 제 1신호처리를 실행하게 하며, 제 2신호처리회로에서 제 2신호처리를 실행하게 하는 구성을 적절하게 채택할 수 있다.

또한, 상기 복수신호처리회로는: 제 1신호처리회로와; 신호처리가 제 1신호처리회로에서 실행되는 결과로서 얻은 신호에 복수의 신호처리중 다른 신호처리를 실행하는 제 2신호처리회로를 포함하며, 상기 프로그램은: 확대률이 소정값보다 큰 경우에 있어서, 제 1신호처리와 제 2신호처리를, 제 1신호처리회로에서 실행하게 하며, 확대율이 소정값 보다 작은 경우에 있어서, 제 2신호처리회로에서 실행하게 하며; 확대율이 소정값과 다른 소정값 사이에 있는 경우, 제 1신호처리회로에서 제 1신호처리를 실행하게 하며, 제 2신호처리회로에서 제 2신호처리를 실행하게 하는 구성을 적절하게 채택할 수 있다.

또한, 상기 복수의 신호처리회로는: 제 1신호처리회로와; 신호처리가 제 1신호처리회로에서 실행되는 결과로서 얻어지는 신호에 대해서 복수의 신호처리중 다른 신호처리를 실행하는 제 2신호처리회로를 포함하며, 상기 프로그램은, 제 2신호처리회로에서 처리될 신호를 한정하기 위한 정보를 설정하는 처리를 실행하는지의 여부를 화소수변환처리의 확대율에 따라서 선택하는 구성을 적절하게 채택할 수 있다.

본 발명의 다른 측면에 의하면, 제 1신호처리회로와; 신호처리가 제 1신호처리회로에서 실행되는 결과로서 얻어진 신호에 대한 다른 신호처리를 실행하는 제 2신호처리회로와; 화상데이터화소수변환처리를 포함하는 복수의 신호처리를 제 1 및 제 2신호처리회로가 분담하여 실행하게 하는 프로그램을 기억하는 기억회로를 포함하며, 상기 프로그램이, 제 2신호처리회로에서 처리될 신호를 한정하기 위한 정보를 설정하는 처리를 실행하는지의 여부를 화소수변환처리의 확대율에 따라서 선택할 수 있는 신호처리장치를 제공한다.

본 발명의 또 다른 측면에 의하면, 화상데이터의 신호처리 방법으로서, 화상데이터화소수변환처리를 포함하는 복수의 신호처리중에서 일부신호처리를, 복수의 신호처리회로 중 어느 것이 실행에 이용되는 지를 화소수변환처리의 확대율에 따라서 설정하는 단계와; 복수의 신호처리회로로 복수의 신호처리를 분담하고 실행하는 단계를 포함하고, 상기 일부신호처리는 설정단계에서 설정된 신호처리회로에 의해 실행되는 신호처리방법을 제공한다.

본 발명의 또 다른 측면에 의하면, 화상데이터의 화소수변환처리를 실행하는 신호처리방법으로서,

제 1신호처리회로에서 소정의 신호처리를 실행하는 단계와;

제 1신호처리회로에서 신호처리가 실행되는 결과로서 얻어진 제 2신호처리회로에서의 신호를 처리하는 단계를 포함하고, 소정의 신호처리가, 제 2신호처리회로에서 처리될 신호를 한정하기 위한 정보를 설정하는 설정처리를 포함하는지 여부를 화소수변환처리의 확대율에 따라서 선택하는 신호처리방법을 제공한다.

삭제

본 발명의 또 다른 측면에 의하면, 화상데이터의 화소수변환처리를 포함하는 복수의 신호처리를 복수의 신호처리회로가 분담하여 실행하도록 구성되며, 복수의 신호처리의 일부의 신호처리를, 복수의 신호처리회로 중 어느 것을 실행에 이용하는 지를 선택할 수 있도록 구성되는 화상데이터신호처리용 프로그램을 제공한다.

본 발명의 다른 측면에 의하면, 화상데이터의 화소수변환처리를 실행하는 프로그램으로서, 제 1신호처리회로를 소정의 신호처리를 실행하게 하고, 제 2신호처리회로를, 신호처리가 제 1신호처리회로에서 실행된 결과로서 얻어진 신호를 처리하게 하도록 구성되며, 소정의 신호처리가 제 2신호처리회로에서 처리될 신호를 한정하기 위한 정보를 설정하는 설정처리를 포함하는지의 여부를 화소수변환처리의 확대율에 따라서 선택하는 화상데이터의 화소수변환처리를 실행하는 프로그램을 제공한다.

<바람직한 실시예에 대한 설명>

본 발명의 실시예에 대하여 첨부한 도면을 참조하면서 설명한다.

[제 1실시예]

먼저, 본 발명의 제 1실시예에 대하여 다음과 같이 설명한다. 도 1은 본 발명의 제 1실시예에 의한 데코딩처리장치에 있어서의 처리의 구성에 대하여 도시한다.

본 실시예에 있어서, 화상데이터를 확장하여 연속적으로 실행될 복수의 신호처리동작으로서 허프만디코딩처리, 솎아내기처리, 예측디코딩처리, 역양자화처리, 역직교처리 및 이동보상처리를 실행한다. 입력될 화상데이터는 주파수범위신호로 변환되는 신호이다. 여기에서,특히, MPEG2에 의해 압축된 화상데이터를 입력하는 구성으로 되어 있다.

본 제 1실시예는, 복수의 신호처리회로를 구성하는 두개의 신호처리회로로서 제 1프로세서(130)과 제 2프로세서(131)을 이용한다. 이들 프로세서는 서로 개별적으로 패키지 되어 있다. 또한, 제 1프로세서(130)에서 신호처리된 결과로서 얻어진 신호는, 다른 제2프로세서(131)에서 또한 신호처리가 행해지도록 구성되어 있다. 또한, 상기 구성에 있어서, 제 1프로세서(130)로부터 출력된 신호는, 데이터버스 또는 신호루트로 구성된 데이터이동수단을 개재하여 제 2프로세서(131)로 입력된다. 여기 제 1실시예에 있어서, 데이터이동수단은 또한 메모리를 구비한 구성을 채택한다. 제 1프로세서(130)로부터 출력된 신호를 메모리에 일단 기억시킨 후, 필요한 타이밍에서 판독해서 제 2프로세서에 공급된다.

여기에서, 이용될 제 1프로세서(130)는 제 2프로세서(131)보다 하프만데코딩처리에 대하여 더욱 적합하다. 또한, 제 2프로세서(131)는 제 1프로세서(130)보다 역직교처리 및/또는 이동보상처리에 대하여 더욱 적절하다.

도 1은, 제 1실시예에 있어서, 제 1프로세서(130)와, 제 2프로세서(131)와 데이터이동수단(102)의 구성개념도에 대하여 도시한다. 도 1은, 각각의 프로세서에서 실행될 신호처리의 흐름을 도시하는 도면이기도 하다.

제 1실시예에서 프로그램을 기억하는 기억회로는 메모리(1301)등의 서브기억회로이며, 메모리(1311)등의 서브기억회로이다. 메모리(1301)는, 제 1프로세서에 배치되며, 메모리(1311)는 제 2프로세서(131)에 배치된다.

이들 메모리(1301)과 (1311)는 다음의 신호처리를 실행하는 프로그램이 기억되어 있다. 확대율을 지정하기 위한 신호는 각각의 프로세서에 공급되고 이하에서 설명될 신호처리흐름은, 그 신호에 의거한 프로그램에 따라서 동작을 각각의 프로세서가 실행하게 함으로써 실현된다. 여기에서, 메모리는, 각각의 프로세서의 패키지에 배치될 필요성은 없지만, 패키지의 외측에 배치될 수 있다. 또한, 프로그램을 각각 기억하는 메모리는 각각의 프로세서에 대응하여 배치될 필요성은 없지만, 하나의 메모리는 각각의 프로세서를 제어하는 프로그램을 기억시킬 수 있다. 또한, 여기에서 프로그램은 신호처리회로로서 프로그램이 무엇을 실행할 것인지를 구체화되는 것을 의미한다.

가변길이디코딩처리에 적합한 가변길이디코딩프로세서(130)에 있어서, 도 1에 도시한 바와 같이, 입력된 부호화데이터는, 각각의 마이크로블록에 대하여 하프만디코딩처리(100)를 행하며, 또한 외부측으로부터 확대율제어신호가 축소된 신호인 경우에 솎아내기 처리(101)를 행하여 소망하는 크기로 변환된다.

이 후, 처리는 외부로부터, 확대율제어신호에 의하여 이하의 3개의 처리로 스위칭수단(105)에서 절환된다. 구체적으로, 이들 절환처리는 프로그램에 따른 처리의 결과이다. 각각의 처리의 흐름을 이해하기 쉽게 위하여, 도 1은, 스위칭수단(105)에 의해 절환될 수 있는 가상의 스위치를 개략적으로 프로세서의 블록도내에 도시한다.

본 실시예에 있어서, 각각의 프로세서에 의해 실행될 신호처리의 분담은, 화상이 확대되고, 축소되고, 또한 확대하지 않거나 축소되지 않는 경우에 상이하다. 여기에서, 각각의 경우는, 화소수변환처리 전후의 화소의 비율 S는 확대률 S로서 정의되도록 정의된다. 각각의 프로세서에서 실행될 처리의 확대률 S에 의해 선택된 상태는 도 2에 도표화된다. 여기에서, 소정값 1 및 확대률 1 보다 크거나 적은 확대률의 경우에 대하여 두개의 신호처리, 즉, 제 1처리 또는 예측디코딩처리 및 제 2신호처리 즉, 역양자회처리를 어느 프로세서가 실행하게 하는지를 별도로 설정한다. 또는, 임의적으로 한쪽의 소정값으로서 1. 1을 채택하고 다른쪽의 소정값으로서 0.9를 채택한다. 다음, 1. 1 이상인 확대율인 경우와, 1.1과 0.9 사이 및 0.9 미만인 경우에 대하여, 두개의 신호처리를 어느 프로세서가 실행하게 할 것인지를 선택할 수 있다.

이 경우에, 한쪽의 소정값 또는 다른쪽 소정값과 확대율(S)이 동등한 경우를 상부범위 및 하부범위의 어느쪽이 포함시키는 지는 적절하게 설정할 수 있다. 바꿔말하자면, "확대률이 어느값보다 큰 경우"와 "확대률이 어느값 보다 작은 경우"라는 어구는, 그 자체로는, 확대률이 어느값의 큰 범위와 낮은 범위에 속하는 경우를 특정하지 않는다.

본 실시예에 있어서는, 도 2에 도시한 바와 같이, 외부로부터의 확대율제어신호에 따라서, 허프만디코딩처리를 하는 데이터("입력데이터"라고 칭함)가 축소변환처리로 처리되는 경우, 입력데이터는 그대로 데이터이동수단(102)에 공급된다.

입력데이터가 등배변환처리를 행하는 경우, 입력데이터는 제 1신호처리로서 DC성분과 운동벡터에 대한 예측디코딩처리(110)를 행한 다음, 데이터이동수단(102)에 공급된다.

한편, 입력데이터가 확대변환처리를 행하는 경우, 입력데이터는, 제 1신호처리로서 DC구성성분과 운동벡터에 대한 예측데코딩처리(111)를 행한다. 외부로부터 확대율제어신호에 응해서, 입력데이터는 외부로부터 확대율제어신호에 의해 제 2신호처리로서 소망하는 역양자화처리를 계속해서 행한 후, 데이터이동수단(102)에 공급된다. 또한 이런 경우에 있어서, 확대변환처리에 대하여 필수적인 보간처리를 예측디코딩처리(111)에서 행한다. 이러한 보간처리는 역양자화처리(112)에서 또한 행할 수 있다.

임의의 처리를 행한 후, 데이터이동수단(102)에 의해 제 1정보처리수단으로서 가변길이디코딩프로세서(130)로부터 일반적인 화상처리에 적합한 제 2정보처리수단인 화상처리프로세서(131)로 각각의 마이크로블록에 대하여 데이터의 이동을 행한다. 화상처리에 적합한 화상처리프로세서(131)에 있어서, 이하의 처리는, 외부로부터 확대율제어신호에 의해 스위칭수단(105)에서 절환된다.

먼저, 입력데이터가 축소변환처리를 행하는 경우에 있어서, DC성분과 이동벡터에 대한 제 1신호처리로서 예측디코딩처리(120)를 행한다. 이어서, 입력데이터는, 외부로부터 확대율제어신호에 의해 제 2신호처리로서 확대율에 따른 소망의 역양자화처리(121)를 행하며, 처리는 역직교변환처리(103)로 이동한다.

한편, 입력데이터가 등배의 변환처리를 행하는 경우, 제 2신호처리인 역양자화처리(122)를 행하며, 처리는 역직교변환처리(103)로 이동한다.

반면에, 입력데이터가 확대변환처리를 행하는 경우, 입력데이터에 실행되는 처리는 없지만, 그대로 역직교변환처리(103)로 이동한다.

임의의 전술한 축소변환처리, 등배의 변환처리 및 확대변환처리중의 어느 처리를 행한 후에 입력데이터는 외부로부터 확대율제어신호에 의해 확대율에 따른 역직교변환처리를 행한다.

이 후, 이동보상처리(104)는 외부로부터 확대율제어신호에 의해 확대율에 따라서 실행한다.

이러한 제 1실시예에 있어서, 전술한 바와 같이, 각각의 프로세서가 부담해야할 처리의 부담이 확대율에 따라서 변화한다. 도 3에 도시한 바와 같이, 각각의 프로세서가 실행할 신호처리를 분배할 수 있으므로, 가변길이디코딩프로세서 (130)(도A에 도시됨)와 화상처리프로세서(131)(도 3B에 도시됨)에 걸리는 부하를 확대율과 상관없이 서로 실질적으로 동일하게 할 수 있다. 결과로서, 복수의 프로세서의 각각에 대하여 요구되는 최대처리능력을 저감시킬 수 있다. 또한, 복수의 프로세서를 이용하는 화상처리에서 전체처리의 효율성을 향상시킬 수 있다.

[제 2실시예]

다음, 이하에서, 본 발명의 제 2실시예에 대하여 설명한다. 도 4는 제 2실시예에 의한 신호처리장치의 처리구성도이다. 제 1실시예와 같이, 본 실시예는 두개의 신호처리회로로서 두개의 프로세서(330)과 (331)을 이용한다. 이러한 각각의 프로세서는, 메모리(3301)과 (3311)에 기억된 프로그램에 따라서 신호처리를 행한다.

제 1실시예에 있어서, 두개의 프로세서에 대한 신호처리의 분담은 확대율에 따라서 3개의 경우로 분할된다. 이러한 실시예에 있어서, 분담은 네개의 경우로 분할된다. 구체적으로, 화소수를 증가시킬 수 있는 경우의 처리흐름처럼, 후행단계에서 프로세서에서 처리될 신호를 한정하는 정보를 설정하는 처리를 선행단계에서 프로세서에서 실행되는지의 여부를 선택할 수 있다. 설정처리가 선행단계에서 프로세서에서 실행되는 경우에 있어서, 후행단계에서 프로세서가 설정된 정보에 따라서 특정 신호에만 필요한 처리를 행할 수 있다.

이하에서, 본 실시예의 구성에 대하여 상세하게 설명한다.

제 2실시예에 있어서, 도 4에서 도시한 바와 같이, 제 1신호처리로서 가변길이데코딩처리에 적합한 가변길이데코딩프로세서(330)는, 각각의 마이크로블록마다 입력된 부호화데이터를 허프만디코딩처리(300)한다. 이후, 외부로부터 확대율제어신호가 솎아내기처리(300)에서 축소되는 경우에, 입력데이터는 계수솎아내기처리를 하여 소망하는 크기로 변환한다.

이후, 처리는, 스위칭수단(305)에서 외부로부터 확대율제어신호에 의해 이하의 4개의 처리가 절환된다. 상기 확대율(S)에 의하면, 처리는 각각의 조건에 따라서 스위칭수단에 의해 절환된다. 각각의 프로세서(330),(331)에서 실행될 처리의 선택된 상태를 도 5에서 도시한다.

도 5에 도시한 바와 같이, 허프만디코딩처리가 행해지는 데이터(즉 입력데이터)에 대해서 축소변환처리가 실행되는 경우에, 외부로부터 확대율제어신호에 따라서, 입력데이터는 신호처리를 행하지 않고 데이터 이동수단(302)에 공급된다. 데이터이동수단 (302)의 구성은 제 1실시에에서 이용되는 데이터이동수단(102)의 것과 동일하다.

한편, 입력데이터가 등배의 변환처리를 행하는 경우에 있어서, 예측디코딩처리(310)는 DC성분과 운동벡터에 대한 제 1신호처리로서 실행된다. 이후, 입력데이터는 데이터이동수단(302)에 공급된다.

한편, 1배를 초과하고 소정의 배수, 예를들면 1.5배이하의 확대율(S)(1 < S ≤ 1.5)의 확대변환처리가 입력데이터에 대해 실행될 경우, 예측디코딩처리(311)는 DC구성성분과 운동벡터에 대한 제 1신호처리로서 실행된다. 다음에, 입력데이터는 외부로부터 확대율제어신호에 의한 제 3신호처리로서 유의계수플래그부가처리(312)를 행하여, 플래그가 입력데이터의 유의계수에 대해서 설정된다. 여기에서, 유의계수플래그부가처리(312)에 있어서는, 플래그는 허프만디코딩처리(300)와 예측디코딩처리(311)을 행한 데이터에서 유의계수를 설정한다. 이 후, 입력데이터를 데이터이동수단(302)에 공급한다. 여기서, 예측디코딩처리(311)에 있어서는, 확대변환처리에 필요한 보간처리를 함께 행한다.

한편, 1.5배이상(1.5 < S)의 확대율(S)의 확대변환처리가 입력데이터에 대해 실행되는 경우, 예측디코딩처리(313)를 DC구성성분과 운동벡터에 대한 제 1신호처리로서 실행한다. 이어서, 외부로부터 확대율제어신호에 의해 제 2신호처리로서, 입력데이터는 확대율에 의한 소망의 역양자화처리(314)를 행한 다음, 데이터이동수단(302)에 공급된다.

여기에서, 데이터를 확대변환처리행하면, 예측디코딩처리(313)에서, 확대변환처리에 필요한 보간처리도 함께 행한다. 이러한 보간처리는 역양자화처리(314)에서 행할 수도 있다.

이후, 데이터는 제 2정보처리수단인 화상처리프로세서(331)에 마이크로블록마다 공급된다. 일반적인 화상처리에 적합한 이러한 화상처리프로세서(331)에 있어서, 외부로부터 확대율제어신호에 따라서, 도 5에 도시한 바와 같이, 스위칭수단 (305)에 의해 다음의 4개 처리로 처리가 절환된다.

구체적으로, 입력데이터가 축소변환처리를 행하는 경우, 그들은 DC구성성분과 운동벡터에 대한 제 1신호처리로서 예측디코딩처리(320)를 행한다. 이 후, 입력데이터는, 외부로부터 확대율제어신호에 의한 확대율에 따라서 소망의 역양자화처리(321)를 행하며, 처리는 역직교변환처리(303)로 이동한다.

한편, 입력데이터가 등배변환처리를 행하는 경우, 입력데이터, 그 자체가 역양자화처리(322)를 행하면서, 처리를 역직교처리(303)로 이동한다.

한편, 1배를 초과하면, 소정의 배율이하 예를들면 1.5배 이하의 확대율(1 < S ≤1.5)의 확대변환처리가 입력데이터에 대해서 실행된 경우, 입력데이터에 대해서, 외부로부터의 확대율 제어신호에 의한 확대율에 따라서, 상술한 유의계수 플래그부가처리에 의해 플래그가 부가된 유의계수에 대해서만, 제4신호처리로서 유의계수에 대한 제 2신호처리, 즉 유의계수역양화처리(323)가 실행된 후, 상기 처리는 역직교변환처리(303)으로 이동된다. 화소수를 증가시키는 처리의 경우, 후단계의 프로세서상의 처리부담은 화소수증가에 따라서 증가한다. 그러나, 제 1프로세서(330)에서 화소수를 확대하기 위한 보간처리의 실행에 따라서, 후단계의 프로세서인 제 2프로세서(331)에서 신호처리대상을 한정하는 정보를 설정하는 처리, 즉, 유의계수플래그를 부가하는 처리를 선단계의 프로세서인 제 1프로세서(330)에서 실행함으로써, 화소수를 증가시키는 처리를 행하지만, 후단계의 프로세서상의 부하의 증가를 억제할 수 있다. 구체적으로 선단계의 프로세서(303)에 의해 설정된, 신호처리대상을 한정하기 위한 정보인 유의계수플래그(즉, 본 실시예에서는 주파수영역의 신호(즉, 각 주파수 성분의 계수로 구성된 신호군)을 취급하기 때문에, 유의한 주파수 구성 성분이 어느 것인지를 나타내는 정보임)를, 제 2프로세서(331)에 의해 참조함으로써, 제 2프로세서의 유의하지 않은 신호에 대한 처리를 줄일 수 있다. 여기에서, 신호처리대상을 한정하기 위한 정보는, 특정신호가 유의하다고 나타내는 정보이어도 특정신호가 유의하지 않다고 나타내는 정보이어도 된다. 한편, 1.5배를 초과하는 소정배수 이상인 확대율(1.5 ≤ S)의 확대변환처리가 입력데이터에 대해 실행하는 경우, 입력데이터는 어떠한 처리도 행하지 않지만 역직교처리(303)에 공급된다.

전술한 4개의 처리중의 어떠한 처리를 입력데이터에 실행한 후, 상기 처리는 역직교처리(303)로 이동한다. 입력데이터에 대해서, 외부로부터 확대율제어신호에 의해 확대율에 의한 역직교처리(303)는 실행된다. 이후, 입력데이터는 외부로부터 확대율제어신호에 의한 확대율에 따라서 이동보상처리(304)를 행하여 최종적인 출력을 생성한다.

전술한 바와 같이, 이러한 제 2실시예에서, 각각의 프로세서가 부담하는 처리를 확대율에 의해 변경함으로써 각각의 프로세서에 의해 실행되는 신호처리를 분산한다. 그러므로, 확대율과 상관없이, 가변길이디코딩프로세서(330)와 화상처리프로세서(331)의 처리에 걸리는 부하를 거의 동등하게 할 수 있다. 그러므로, 각각의 복수의 프로세서에 대하여 요구되는 최대처리능력을 감소시킬 수 있으며 복수의 프로세서를 이용하는 화상처리에서 전체처리의 효율성을 향상시킬 수 있다.

한편, 화소수를 증가시키는 신호처리의 경우에 있어서, 후단계의 프로세서가 실행될 신호처리의 대상을 한정하기 위한 정보를 설정하는 신호처리를 선단계에서 프로세서에 의해 행한다. 그러므로, 각각의 프로세서 사이의 처리부하의 바란스를 향상시키고 적응성이 높은 처리를 실행할 수 있다.

[비교예]

다음, 이하에서, 제 2실시예에 의한 디코딩처리장치에 대한 비교예에 대하여 설명한다. 본 비교예의 구성에 대하여 도 6에 도시한다.

먼저, 도 6에 도시한 바와 같이, 입력된 부호화데이터는 각각의 마이크로블록마다, 가변길이데코딩처리에 적합한 프로세서(610)에서 허프만디코딩처리(600)를 행한다. 다음, 외부로부터의 확대율제어신호를 축소하는 경우, 계수솎아내기처리(601)를 행하여 입력데이터를 소망하는 크기로 변환한다.

다음, 예측디코딩처리(602)를 DC성분과 운동벡터에 대하여 실행하고, 데이터이동수단(603)에 의해 데이터를 프로세서(610)로부터 일반적인 화상처리에 적합한 프로세서(611)로 각각의 마이크로블록마다 공급된다.

일반적인 화상처리에 적합한 프로세서(611)에 있어서, 입력데이터에 대해서, 외부로부터 확대율제어신호에 의한 확대율에 따라서 역양자화처리(604)는 실행된다. 이어서, 이 입력데이터는 외부로부터 확대율제어신호에 의거한 확대율에 따라서 역직교처리(605)을 행한다. 또한, 외부로부터 확대율제어신호에 의거한 확대율에 따라서, 입력데이터에 대하여 이동보상처리(606)가 실행되어 최종적인 출력을 생성한다.

이와 같이, 비교예에 의한 디코딩처리장치의 프로세서가 구성되는 경우, 처리를 확대하고 축소하는 기능 및 디코딩 기능을 가지고 있으므로, 각각의 프로세서에 의해 실행될 처리가 고정되어 있다.

그러므로, 도 7a에 도시한 바와 같이, 보다 축소시에 데코딩처리의 선단계를 실행하는 프로세서(610)(도 7a에서 A로 도시함)에서 실행되는 처리가 프로세서(611)에서 실행되는 처리 보다 많은 처리를 실행한다. 확대변환처리시에, 디코딩처리의 후단계를 실행하는 프로세서(611)(도 7a에서의 A로 도시함)에서 더 많은 처리를 실행한다. 또한, 도 7b에 도시한 바와 같이, 처리부하의 바관소가 악화되어 전체 처리효율성을 저감시킨다. 특히 축소시에, 처리량은 등배확대시의 경우의 처리량과 종합적으로 동일하게 한다.

이에 대하여, 제 1 및 제 2실시예에 의한 전술한 디코딩처리장치는, 각각의 프로세서에 의해 실행될 기능블록을 확대율에 따라서 변경하도록 구성된다. 그러므로, 확대율에 상관없이, 각각의 프로세서에 대한 처리부하의 바란스를 만족스럽게 유지하여 전체처리효율성을 매우 양호하게 유지할 수 있다. 그러므로, 고속의 디코딩처리를 실현가능하고, 따라서 각각의 프로세서에 대하여 요구되는 최대처리능력을 축소시킬 수 있다.

여기에서, 메모리(1301), (1311), (3301) 및 (3311)에 기억된 프로그램은, 개인용 컴퓨터 등을 이용하여 작성된 프로그램을 각각의 메모리(1301), (1311), (3301) 및 (3311)에 기입함으로써 작성될 수 있다. 또는, 외부에서 작성된 프로그램은 기억매체에 기억될 수 있으며, 기록매체를 개재하여 각각의 메모리(1301), (1311), (3301) 및 (3311)에 공급된다.

프로그램을 공급하기 위한 기억매체는 플렉시블디스크, 하드디스크, 광디스크, 광자기디스크, CD-ROM, CD-R, DVD, DVD±R, DVD-RAM, 자기테이프, 비활성메모리카드 및 ROM등을 예로 들 수 있다.

본 발명에 의하면, 복수의 신호처리회로를 이용해서 신호처리를 적합하게 실행할 수 있다.

Claims (19)

1. 삭제
2. 삭제
3. 삭제
4. 신호처리장치로서,

   제 1신호처리회로와;

   상기 제 1신호처리회로에서 신호처리가 행해진 결과로서 얻어진 신호에 대해서, 다른 신호처리를 실행하는 제 2신호처리회로와;

   화상데이터의 화소수변환처리를 포함하는 복수의 신호처리를 제 1 및 제 2의 신호처리회로에 분담해서 실행시키는 프로그램으로서, 상기 복수의 신호처리 중 일부의 신호처리를 상기 제 1 및 제 2의 신호처리회로 중 어느 것에서 실행하는가를 상기 화소수변환처리의 확대율에 따라서 선택할 수 있는 프로그램이 기억된 기억회로를 구비하고,

   상기 프로그램은, 상기 확대율이 소정값보다 큰 경우에, 상기 일부의 신호처리를 상기 제 1신호처리회로에서 실행하게 할 수 있으며, 상기 확대율이 상기소정값보다 작은 경우에는, 상기 일부의 신호처리를 상기 제 2신호처리회로에서 실행하게 할 수 있는 것을 특징으로 하는 신호처리장치.
5. 신호처리장치로서,

   제 1신호처리회로와;

   상기 제 1신호처리회로에서 신호처리가 실행된 결과로서 얻어진 신호에 대해서, 다른 신호처리를 실행하는 제 2신호처리회로와;

   화상데이터의 화소수변환처리를 포함하는 복수의 신호처리를 제 1 및 제 2의 신호처리회로에 분담해서 실행시키는 프로그램으로서, 상기 복수의 신호처리 중 일부의 신호처리를 상기 제 1 및 제 2의 신호처리회로 중 어느 것에서 실행하는가를 상기 화소수변환처리의 확대율에 따라서 선택할 수 있는 프로그램이 기억된 기억회로를 구비하고,

   상기 프로그램은, 상기 제 1신호처리와 상기 제 2신호처리를,

   상기 확대율이 소정의 값 보다 크고 또한 해당 소정의 값을 포함하지 않는 경우에는, 상기 제 1신호처리회로에서 실행시키고,

   상기 제 1신호처리와 상기 제 2신호처리를, 상기 확대율이 상기 소정의 값 보다 작고 또한 해당 소정의 값을 포함하지 않는 경우에는, 상기 제 2신호처리회로에서 실행시키고,

   상기 확대율이 상기 소정의 값과 동등한 값으로 되는 경우, 상기 제 1신호처리를 상기 제 1신호처리회로에서 실행시키고, 상기 제 2신호처리를 상기 제 2신호처리회로에서 실행하게 할 수 있는 것을 특징으로 하는 신호처리장치.
6. 신호처리장치로서,

   제 1신호처리회로와;

   신호처리가 상기 제 1신호처리회로에서 실행된 결과로서 얻은 신호에 대해서, 다른 신호처리를 실행하는 제 2신호처리회로와;

   화상데이터의 화소수변환처리를 포함하는 복수의 신호처리를 제 1 및 제 2의 신호처리회로에 분담해서 실행시키는 프로그램으로서, 상기 복수의 신호처리 중 일부의 신호처리를 상기 제 1 및 제 2의 신호처리회로 중 어느 것에서 실행하는가를 상기 화소수변환처리의 확대율에 따라서 선택할 수 있는 프로그램이 기억된 기억회로를 구비하고,

   상기 프로그램은,

   상기 제 1신호처리와 상기 제 2신호처리를,

   상기 확대율이 소정값 보다 큰 경우에는, 상기 제 1신호처리회로에서 실행시키고,

   상기 제1신호처리와 상기 제2신호처리를, 상기 확대율이 상기 소정값 보다 작은 다른 소정값보다도 작은 경우에는, 상기 제 2신호처리회로에서 실행시키고,

   상기 확대율이 상기 소정값과 상기 다른 소정값 사이의 값으로 되는 경우에 는, 상기 제 1신호처리회로에서 상기 제 1신호처리를 실행시키고, 상기 제 2신호처리회로에서는 상기 제 2신호처리를 실행하게 할 수 있는 것을 특징으로 하는 신호처리장치.
7. 제 4항에 있어서,

   상기 일부의 신호처리는 예측디코딩처리와 역양자화처리이거나, 예측디코딩처리 또는 역양자화처리인 것을 특징으로 하는 신호처리장치.
8. 삭제
9. 제 5항 또는 제 6항에 있어서,

   상기 제 1신호처리가 예측디코딩처리이고, 상기 제 2신호처리는 역양자화처리인 것을 특징으로 하는 신호처리장치.
10. 삭제
11. 제 4항 내지 제 6항 중 어느 한 항에 기재된 신호처리장치로서,

    상기 프로그램은, 상기 제 2신호처리회로에서 처리될 신호를 제한하기 위한 정보를 설정하는 처리를 실행할 것인지의 여부를 상기 화소수변환처리의 확대율에 따라서 선택할 수 있는 것을 특징으로 하는 신호처리장치.
12. 제 4항 내지 제 6항 중 어느 한 항에 기재된 신호처리장치로서,

    상기 복수의 신호처리는, 주파수영역신호로 변환된 화상데이터에 대해서 실행될 신호처리를 포함하는 것을 특징으로 하는 신호처리장치.
13. 신호처리장치는,

    제 1신호처리회로와;

    상기 제 1신호처리회로에서 신호처리가 실행된 결과로서 얻어진 신호에 대해서, 다른 신호처리를 실행하는 제 2신호처리회로와;

    화상데이터화소수변환처리를 포함하는 복수의 신호처리를, 상기 제 1 및 제 2신호처리회로가 분담해서 시키는 프로그램을 기억하는 기억회로로 이루어지며,

    상기 프로그램은, 상기 제 2신호처리회로에서 처리될 신호를 제한하기 위한 정보를 설정하는 처리를 실행할 것인지의 여부를 상기 화소수변환처리의 확대율에 따라서 선택할 수 있는 것을 특징으로 하는 신호처리장치.
14. 화상데이터의 신호처리방법으로서,

    화상데이터의 화소수변환처리를 포함하는 복수의 신호처리중의 일부의 신호처리를 복수의 신호처리회로중의 어느 것에서 실행하는가를 상기 화소수변환처리의 확대율에 따라서 설정하는 단계와;

    상기 복수의 신호처리를 상기 복수의 신호처리회로에서 분담하여 실행하는 단계로 이루어지며,

    상기 일부의 신호처리는 상기 설정단계에서 설정된 상기 신호처리회로에 의해 실행되는 것을 특징으로 하는 신호처리방법.
15. 화상데이터의 화소수변환처리를 실행하는 신호처리방법으로서,

    제 1신호처리회로에서 소정의 신호처리를 행하는 단계와;

    신호처리가 상기 제 1신호처리회로에서 실행된 결과로서 얻어진 신호를 제 2신호처리회로에서 처리하는 단계로 이루어지며,

    상기 소정의 신호처리가 상기 제 2신호처리회로에서 처리될 신호를 제한하기 위한 정보를 설정하는 설정처리를 포함하는지의 여부를 상기 화소수변환처리의 확대율에 따라서 선택하는 것을 특징으로 하는 신호처리방법.
16. 신호처리화상데이터를 위한 프로그램으로서,

    화상데이터의 화소수변환처리를 포함하는 복수의 신호처리를 복수의 신호처리회로에서 분담하여 실행하게 하도록 구성되며,

    상기 복수의 신호처리회로 중 어느 것이, 상기 복수의 신호처리중 일부의 신호처리를 실행시키기 위해 이용되는 가를 선택하기 위해 구성되는 것을 특징으로 하는 프로그램.
17. 화상데이터의 화소수변환처리를 실행하는 프로그램으로서,

    제 1신호처리회로가 소정의 신호처리를 실행하게 하고, 상기 제 1신호처리회로에서 신호처리가 실행된 결과로서 얻은 신호를 제 2신호처리회로가 처리하게 하도록 구성되며,

    상기 소정의 신호처리는, 상기 제 2신호처리회로에서 처리될 신호를 제한하기 위한 정보를 설정하는 설정처리를 포함하는지의 여부를 상기 화소수변환처리의 확대율에 따라서 선택하도록 구성되는 것을 특징으로 하는 프로그램.
18. 기록매체는,

    제 16항에 기재된 프로그램이 기억되어 있는 것을 특징으로 하는 기록매체.
19. 기록매체는,

    제 17항에 기재된 프로그램이 기억되어 있는 것을 특징으로 하는 기록매체.

Images