KR20010095106A - 화상 인코딩 장치 및 방법, 비디오 카메라, 화상 기록장치, 및 화상 전송 장치 - Google Patents

화상 인코딩 장치 및 방법, 비디오 카메라, 화상 기록장치, 및 화상 전송 장치 Download PDF

Info

Publication number
KR20010095106A
KR20010095106A KR1020010016521A KR20010016521A KR20010095106A KR 20010095106 A KR20010095106 A KR 20010095106A KR 1020010016521 A KR1020010016521 A KR 1020010016521A KR 20010016521 A KR20010016521 A KR 20010016521A KR 20010095106 A KR20010095106 A KR 20010095106A
Authority
KR
South Korea
Prior art keywords
encoding
image
picture
signal
boundary
Prior art date
Application number
KR1020010016521A
Other languages
English (en)
Inventor
하시모또야스히로
다까시마마사또시
나리따히데유끼
히라나까다이스께
Original Assignee
이데이 노부유끼
소니 가부시끼 가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이데이 노부유끼, 소니 가부시끼 가이샤 filed Critical 이데이 노부유끼
Publication of KR20010095106A publication Critical patent/KR20010095106A/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements

Abstract

화상 인코딩 장치가 제공된다.
본 발명의 화상 인코딩 장치는, 입력 화상을 N개의 영역으로 분할하여 이 영역들에 대응하는 N 개의 분할 화상 신호를 생성하는 분할 수단과; 상기 생성된 N개의 분할 화상 신호 각각을 인코딩하여 N개의 인코드된 화상 신호를 생성하는 인코딩 수단을 포함하되, 상기 인코딩 수단은 소정의 인코딩 방법 및/또는 다른 영역의 화상 신호에 비해 보다 적은 화질 저하를 제공하는 분할 화상 신호들 중의 신호와 동일한 소정의 인코딩 조건으로 분할 경계에 근접한 영역의 화상 신호를 인코딩하며; 상기 생성된 N 개의 인코드된 화상 신호를 통합하고 입력 화상에 응답하여 하나의 인코드된 화상 신호를 생성하는 통합 수단을 포함하고 있다.

Description

화상 인코딩 장치 및 방법, 비디오 카메라, 화상 기록 장치, 및 화상 전송 장치{IMAGE ENCODING APPARATUS AND METHOD OF SAME, VIDEO CAMERA, IMAGE RECORDING APPARATUS, AND IMAGE TRANSMISSION APPARATUS}
본 발명은 고화질 TV(HDTV) 신호와 같은 동영상 신호를 압축 및 인코딩하는 화상 인코딩 장치 및 방법, 원하는 화상을 촬영하고, 화상 신호를 생성하고, 이 화상 신호를 인코딩하고 기록하는 비디오 카메라, 상기 인코딩된 화상 신호를 기록하는 화상 기록 장치, 및 상기 인코딩된 화상 신호를 전송하는 화상 전송 장치에 관한 것이다.
동영상 인코딩 방법으로서, MPEG-2 규격(ISO/IEC13818)이 널리 확산되어 있다. 이 MPEG-2는 주로 기능의 분류(신택스의 차이)를 정의하기 위한 "프로파일"과 화상 크기와 같은 처리량의 차이를 정의하기 위한 "레벨"의 개념을 소개하고 지원가능한 인코딩 성능을 분류한다. 예를 들어, MP@ML(Main Profile at Main Level)은 보통 720 ×480 픽셀 및 60 필드/초의 ITU-R601 화상에 사용되고 MP@HL(Main Profile at High Level)은 보통 1920 ×1080 픽셀 및 60 필드/초의 HDTV 화상에 사용된다.
HDTV 신호와 같은 많은 수의 픽셀을 갖는 프레임 구조를 갖는 동영상 신호를 인코딩 및/또는 디코딩하는 장치, 즉 예를 들면 MP@HL의 인코딩 및/또는 디코딩을 실행하는 장치에는 초고속 처리가 요구되므로, 그 실현이 어렵고 장치는 매우 비싸진다. 이 MP@HL 장치에 비해, MP@ML 인코딩 및/또는 디코딩을 위한 장치는 크기가 더 작고 더 낮은 속도에서 동작할 수 있다. 또한, 이것은 이미 LSI로 만들어져서 널리 확산되어 있어서, 매우 싸게 실현될 수 있다.
따라서, 예를 들어 일본 미심사 특허 공보(Kokai) 제10-234043호에 개시되어있는 동영상 인코딩 및/또는 디코딩 장치에서, HDTV 신호와 같은 많은 수의 픽셀을 갖는 프레임 구조의 동영상을 다수의 화면으로 분할하고, 이 분할된 화상의 신호들을 MP@ML 장치에 의해 인코딩 및/또는 디코딩하고, MP@HL 인코딩 및/또는 디코딩을 행하기 위한 처리의 결과를 통합하는 방법이 제안되었다.
본 발명에 의해 해결될 문제점들을 요약하면, 일본 미심사 특허 공보(Kokai) 제10-234043호에 개시되어 있는 방법에 의해 인코딩된 화상 신호에서, 상기 분할 화면 각각에 대한 처리가 한 화면에 대한 처리로서 행해지기 때문에, 화질은 화면의 경계에서 불연속으로 되고 적절한 고품질 인코딩가 행해질 수 없다.
이 문제점은 도 13을 참조하여 구체적으로 설명될 것이다. 예를 들면 MPEG-2의 P 화면에서, 대상이 화면의 좌측에서 우측으로 이동하고 있거나 대상이 분할 경계를 가로지를 때, 만약 좌측 분할 화면이 참조되지 않는다면 우측 분할 화면 내의 분할 경계를 터치하는 매크로 블록의 정확한 모션 벡터는 얻어질 수 없다. 결과적으로, 화질의 저하 또는 다른 매크로 블록들이 갖는 화질의 차이는 경계 영역 내의 매크로 블록에서 발생하고 화면은 컷 앤 페이스트(cut-and-paste)형 화면이 된다, 즉 적절한 인코딩가 행해질 수 없다.
이와 같은 문제점을 해결하기 위해, 어떤 모션 벡터가 또다른 분할 화상에 대해 정의될 때, 화상 데이터가 인코더들 사이에서 전송되어 정확한 모션 벡터를 얻는 인코딩 장치가 있다. 만약 이 처리가 행해지면, 분할 경계에서의 화질의 불연속성은 발생하지 않고, 하나의 인코더에 의한 인코딩로부터의 결과인 비디오 스트림과 동일한 비디오 스트림이 출력될 수 있다.
그런데, 이와 같은 인코더는 화상 데이터가 다수의 인코더들 사이에서 전송되므로 대규모의 하드웨어를 필요로 하고 비싸진다. 또한, 이와 같은 인코더의 응용의 범위는 오직 사업용에만 제한된다.
또한, 최종적으로 출력된 비디오 스트림에서, 모션 벡터는 분할 화상들을 스트래들(straddle)한다. 이것은 특히 MP@HL용으로 설계된 디코더에 의해 디코딩될 수 있지만, 비디오 스트림은 다수의 MP@ML 디코더에 의해 분할 및 디코딩될 수 없다.
또한, 화질의 불연속성이 발생하지 않도록 종래의 MP@ML 인코더 및 MP@ML 디코더를 사용하여 HDTV용 동영상 신호를 인코딩 및 디코딩하는 장치로서, 일본 미심사 특허 공보(Kokai) 제 10-234043호에 개시된 장치가 있다. 이 장치에서는, 화상들이 중첩 및 분할되고 인코더로부터 출력된 다수의 비디오 스트림이 시스템 다중화에 의해 시스템 다중화 스트림에 통합된다. 따라서, 이 장치에 의하면, 비디오 스트림을 HDTV 화상으로 디코딩하는 것이 가능하다.
그런데, 이 장치에서 처리된 비디오 스트림은 기본적으로 MP@HL 비디오 스트림과는 다르고, 따라서 이 장치는 범용 인코더/디코더라 할 수 없다. 예를 들면, 생성된 비디오 스트림은 통상의 MP@HL 디코더에 의해 재생될 수 없다.
본 발명의 목적은 기존의 소형, 저가, 저전력 및 간단한 구조의 인코딩 수단을 조합함으로써 화질의 상당한 저하 없이도 HDTV 신호와 같은 많은 픽셀을 갖는 동영상 신호를 인코딩할 수 있는 소형 및 저가의 화상 인코딩 장치 및 이를 위한화상 인코딩 방법을 제공하는 것이다.
본 발명의 또다른 목적은 화질의 상당한 저하 없이도 소망의 화상을 촬영함으로써 얻어진 HDTV 신호와 같은 촬영된 화상 신호를 인코딩하고 기록할 수 있는 소형 및 저가의 비디오 카메라를 제공하는 것이다.
본 발명의 또다른 목적은 화질의 상당한 저하 없이도 HDTV 신호와 같은 동영상 신호를 인코딩하고 기록할 수 있는 소형 및 저가의 화상 기록 장치를 제공하는 것이다.
본 발명의 또다른 목적은 화질의 상당한 저하 없이도 HDTV 신호와 같은 동영상 신호를 인코딩하고 전송할 수 있는 소형 및 저가의 화상 전송 장치를 제공하는 것이다.
도 1은 본 발명의 제1 실시예의 동영상 인코딩 장치의 구성의 블럭도.
도 2는 도 1에 도시된 동영상 인코딩 장치로의 HDTV 비디오 신호 입력 및 화상의 분할 방법을 설명하는 도면.
도 3은 도 1에 도시된 동영상 인코딩 장치의 분할된 화상 인코딩 장치의 구성의 블럭도.
도 4는 P 화상의 화상 신호의 수직 분할 경계에 대한 내부 매크로블럭 형성의 상태도.
도 5는 도 3에 도시된 분할 화상 인코딩 장치에서 정량화 스케일 코드를 정정하는 프로세싱에서의 영역을 분할하는 방법을 설명하는 도면.
도 6은 도 3에 도시된 분할 화상 인코딩 장치에서 정량화 스케일을 정정하는 프로세싱의 정정값의 도면.
도 7은 슬라이스 단위로 나눠진 비디오 스트림의 배열을 설명하는 도면.
도 8은 도 5에 도시된 분할 화상 인코딩 장치에서 정량화 스케일 코드를 정정하는 프로세싱에서의 영역을 분할하는 다른 방법을 설명하는 도면.
도 9는 도 5에 도시된 분할 화상 인코딩 장치에서의 정량화 스케일 코드를 정정하는 프로세싱에서의 영역을 분할하는 또 다른 방법을 설명하는 도면.
도 10은 도 1에 도시된 동영상 인코딩 장치가 적용되는 비디오 카메라의 구성 도면
도 11은 도 1에 도시된 동영상 인코딩 장치가 적용되는 화상 기록 장치의 구성 도면.
도 12는 도 1에 도시된 동영상 인코딩 장치가 적용되는 화상 전송 장치의 구성 도면.
도 13은 분할된 영역과 모션 벡터 사이의 관계를 설명하는 도면.
<도면의 주요부분에 대한 부호 설명>
100 : 화상 인코딩 장치
110 : 화상 분할 장치
120-1 : 분할 화상 인코딩 장치 A
120-2 : 분할 화상 인코딩 장치 B
120-3 : 분할 화상 인코딩 장치 C
120-4 : 분할 화상 인코딩 장치 D
140 : 비디오 스트림 통합장치
150 : 제어장치
본 발명의 제1 양상에 의하면, 입력 화상을 N개의 영역으로 분할하여 이 영역에 대응하는 N개의 분할 화상 신호를 생성하는 분할 수단과, 상기 생성된 N개의 분할 화상 신호를 각각 인코딩하여 N개의 인코딩 화상 신호를 생성하는 인코딩 수단-이 인코딩 수단은 다른 영역들의 화상 신호들에 비해 화질의 보다 적은 저하를 제공하는 분할 화상들 중 분할의 경계에 가까운 영역의 화상 신호들을 소정의 인코딩 방법 및/또는 소정의 인코딩 조건에 의해 동일하게 인코딩함-과, 입력 화상에 응답하여 상기 생성된 N개의 인코딩 화상 신호들을 통합하여 단일 인코딩 화상 신호를 생성하는 통합 수단을 포함하는 화상 인코딩 장치가 제공된다.
바람직하게는, 인코딩 수단은 화질의 저하도가 서서히 변화하여 화질의 저하도가 상기 경계로부터의 거리가 짧을수록 더 작아지도록 분할 영역의 화상 신호를 인코딩한다.
또한, 인코딩 수단은 정량화 스케일을 낮게함으로써 경계에 가까운 다른 영역들내에 포함된 화상의 화상 신호를 인코딩한다. 바람직하게는, 상기 인코딩 수단은 정량화 스케일을 높게함으로써 분할 영역의 경계로부터 먼 영역들내에 포함된 화상의 화상 신호를 인코딩한다.
또한, 상기 인코딩 수단은 동일한 인코딩 조건 하에서 경계에 가까운 상이한 영역들내에 포함된 매크로 블록을 인코딩한다. 바람직하게는, 상기 인코딩 수단은 내부 매크로 블록들로서 경계에 가까운 상이한 영역들 내에 포함된 매크로 블록들을 인코딩한다. 더 바람직하게는, 상기 인코딩 수단은 정량화 스케일을 낮게함으로써 경계에 가까운 상이한 영역들내에 포함된 화상의 화상 신호를 인코딩한다.
또한, 바람직하게는 상기 인코딩 수단은 실질적으로 모션 보상 예측을 포함하지 않는 모드에 의해 경계에 가까운 상이한 영역들내에 포함된 매크로 블록들을 인코딩한다. 더 바람직하게는, 상기 인코딩 수단은 모션 벡터의 크기를 소정값보다 크지 않도록 함으로써 경계에 가까운 상이한 영역들내에 포함된 매크로 블록들을 인코딩한다.
또한, 인코딩 수단은 병렬로 동작할 수 있는 N개의 인코딩 장치들에 의해 N개의 분할 화상 신호를 인코딩한다. 바람직하게는, 입력 화상은 HDTV 화상이고, 상기 인코딩 장치는 SDTV 신호용 인코딩장치따르면, 입력 화상을 N개의 영역으로 분할하여 영역에 대응하는 N개의 분할된 화상 신호를 발생하는 단계; 발생된 N개의화상 신호를 인코딩하여 N개의 인코딩된 화상 신호를 발생하는 단계; 발생된 N개의 인코딩된 화상 신호를 통합하여 입력 화상에 대응하는 단일의 인코딩된 화상 신호를 발생하는 단계를 포함하고, 인코딩은 분할된 화상 신호 사이에서 동일한 선정된 인코딩 방법 및/또는 선정된 인코딩 조건에 의해 분할 경계에 가까운 영역의 화상 신호에서 수행되어, 다른 영역의 화상 신호와 비교해서 화질을 덜 저하하는 인코딩 방법이 제공된다.
화질의 저하 정도는 점차 변화하여 경계로부터 거리가 더 짧을수록 화질의 저하 정도가 더 작아지도록 인코딩이 수행되는 것이 바람직하다.
대안적으로, 정량화 스케일을 낮춤으로써 경계에 가까운 다른 영역에 포함되는 화상의 화상 신호에서 인코딩이 수행된다. 정량화 스케일을 높임으로써 분할된 영역의 경계로부터 떨어진 영역에 포함된 화상의 화상 신호에서 인코딩이 수행되는 것이 바람직하다.
대안적으로, 동일한 인코딩 조건하에서 경계에 가까운 다른 영역에 포함된 매크로블럭에서 인코딩이 수행된다. 내부 매크로블럭으로서 경계에 가까운 다른 영역에 포함된 매크로블럭에서 인코딩이 수행되는 것이 바람직하다. 대안적으로, 정량화 스케일을 낮춤으로써 경계에 가까운 다른 분할된 영역에 포함된 화상의 화상 신호에서 인코딩이 수행된다. 대안적으로, 모션 보상 예측을 실질적으로 포함하지 않은 모드로 경계에 가까운 다른 영역에 포함된 매크로블럭에서 인코딩이 수행된다. 대안적으로, 선정된 값 이하로 모션 벡터의 크기를 만듬으로써 경계에 가까운 다른 영역에 포함된 매크로블럭에서 인코딩이 수행된다.
대안적으로, N개의 인코딩 장치로 N개의 분할된 화상 신호에서 병렬로 인코딩이 수행된다. 입력 화상이 HDTV 화상이고, 인코딩 장치가 SDTV 신호 이용 인코딩 장치인 것이 바람직하다.
본 발명의 제3 양상에 따르면, 어떤 화상을 촬영하여 화상 신호를 발생하는 카메라; 촬영된 화상을 N개의 영역으로 분할하여 발생된 화상 신호에 기초된 영역에 대응하는 N개의 분할된 화상 신호를 발생하는 분할 수단; 발생된 N개의 분할된 화상 신호를 각각 인코딩하여 N개의 인코딩된 화상 신호를 발생하며, 분할된 화상 신호 사이에서 동일한 선정된 인코딩 방법 및/또는 선정된 인코딩 조건에 의해 분할 경계에 가까운 영역의 화상 신호를 인코딩하여 다른 영역의 화상 신호와 비교해서 화질을 덜 저하시키는 인코딩 수단; 발생된 N개의 인코딩된 화상 신호를 통합하여 입력 화상에 응답하여 단일의 인코딩된 화상 신호를 발생하는 통합 수단; 및 통합된 인코딩된 화상 신호를 기록 매체에 기록하는 기록 수단을 포함하는 비디오 카메라가 제공된다.
본 발명의 제4 양상에 따르면, N개의 영역으로 입력 화상을 분할하여 영역에 대응하는 N개의 분할된 화상 신호를 발생시키는 분할 수단; 발생된 N개의 분할된 화상 신호를 각각 인코딩하여 N개의 인코딩된 화상 신호를 발생하며, 분할된 화상 신호 사이에서 동일한 선정된 인코딩 방법 및/또는 선정된 인코딩 조건에 의해 분할 경계에 가까운 영역의 화상 신호를 인코딩하여 다른 영역의 화상 신호와 비교해서 화질을 덜 저하시키는 인코딩 수단; 발생된 N개의 인코딩된 화상 신호를 통합하여 입력 화상에 응답하여 단일의 인코딩된 화상 신호를 발생하는 통합 수단; 및 통합된 인코딩된 화상 신호를 기록 매체에 기록하는 기록 수단을 포함하는 화상 기록 장치가 제공된다.
본 발명의 제5 양상에 따르면, 입력 화상을 N개의 영역으로 분할하여 영역에 대응하는 N개의 분할된 화상 신호를 발생하는 분할 수단; 발생된 N개의 분할된 화상 신호를 각각 인코딩하여 인코딩된 N개의 화상 신호를 발생하며, 분할된 화상 신호 사이에서 동일한 선정된 인코딩 방법 및/또는 선정된 인코딩 조건에 의해 분할 경계에 가까운 영역의 화상 신호를 인코딩하여 다른 영역의 화상 신호와 비교하여 화질을 덜 저하시키는 인코딩 수단; 발생된 N개의 인코딩된 화상 신호를 통합하여 입력 화상에 응답하여 단일의 인코딩된 화상 신호를 발생하는 통합 수단; 및 통합된 인코딩된 화상 신호를 전송하는 전송 수단을 포함하는 화상 전송 장치가 제공된다.
이들과 본 발명의 다른 목적 및 특징은 다음의 도면을 참조하여 주어진 양호한 실시예의 다음의 설명으로부터 더욱 명확해질 것이다
본 발명의 양호한 실시예의 동영상 인코딩 장치가 도 1 내지 도 12를 참조하여 설명될 것이다.
먼저, 동영상 인코딩 장치의 구성에 대해 설명할 것이다.
도 1은 본 발명의 동영상 인코딩 장치(100)의 구성의 블럭도이다.
동영상 인코딩 장치(100)는 화상 분할 장치(110), 제1 내지 제4 분할 화상 인코딩 장치(120-1내지 120-4), 비디오 스트림 통합 장치(140) 및 제어 장치(150)를포함한다.
화상 분할 장치(110)는 입력 동영상 신호의 모든 프레임을 선정된 4개의 영역에 대응하는 4개의 화상 신호로 분할하고, 이들 신호를 제1 내지 제4 분할 화상 인코딩 장치(120-1내지 120-4)로 출력한다.
동영상 화상 인코딩 장치(101)로의 동영상 화상 신호 입력은 도 2에 도시된 HDTV 신호 즉, 수평 1920 픽셀 × 수직 1080 라인의 휘도 신호 및 수평 960 픽셀 × 수직 1080 라인의 색차 신호로 구성되는 4:2:2의 인터레이스 신호를 수신한다. 더욱이, 프레임 레이트는 30 frames/sec이다.
먼저, 화상 분할 장치(110)는 그러한 신호를 처리하여 필터링에 의해서 휘도 신호를 수평 방향에서 1440 픽셀로 그리고 색차 신호를 수평방향에서 720 픽셀로 변환한다.
다음으로, MPEG-2 표준은 수직 방향에서 인터레이스 화상에서의 라인의 수가 다중의 32 라인이어야 하기 때문에, 휘도 신호 및 색차 신호 모두는 1088 라인을 얻기 위한 화상 하에서 주어진 8개 라인의 더미 데이터이다.
그런 다음, 화상 분할 장치(110)는 도 2에 도시된 바와 같이, 이 방법으로 크기에서 변환된 화상을 4개 영역 A, B, C 및 D로 분할하고, 각각은 수직 720 픽셀 × 수평 544 라인으로 구성된 휘도 신호를 갖게 되며, 분할된 영역의 화상 신호를 제1 내지 제4의 분할 화상 인코딩 장치(120-1내지 120-4)로 출력한다.
제1 내지 제4 분할 화상 인코딩 장치(120-1내지 120-4)는 MPEG-2에 의해 각각 화상 신호 입력을 인코딩하여 MPEG-2 비디오 스트림을 발생시키고, 이들을 비디오 스트림 통합 장치(140)에 출력한다.
이 시점에서, 각각의 분할 화상 인코딩 장치(120-i, i는 1 내지 4)는 매크로블럭 및 분할 경계 사이의 위치 관계에 기초한 각각의 매크로블럭의 인코딩 조건을 결정하여 인코딩한다.
구체적으로, 분할 화상 인코딩 장치 120-i는 상기 관계에 기초하여 매크로블럭 타입 및/또는 정량화 스케일 코드를 결정한다.
분할 화상 인코딩 장치 120-i(i=1 내지 4)의 구성이 도 3에 도시되어 있다.
도 3에 도시된 바와 같이, 분할 화상 인코딩 장치 120-i는 화상 재배열부(121), 가산기 및/또는 감산기(122), DCT부(123), 정량화부(123), 변수 길이 코딩부(125), 버퍼(126), 레이트 제어부(127), 역 정량화부(128), 역 DCT부(129), 가산기 및/또는 감산기(130), 프레임 메모리(131), 모션 보상 예측부(132), 및 제어부(133)를 포함한다.
이러한 분할 화상 인코딩 장치 120-i의 기본 구성은 다음에 설명한다.
분할 화상 인코딩 장치 120-i에서, 우선 도시되지 않은 포맷 변환부는 각각의 연속적인 입력 화상의 화상 신호를 4:2:2 포맷에서 4:2:0 포맷으로 변환시키고, 화상 재배열부(121)는 인코딩 화상 타입에 기초하여 각 화상의 변환 신호를 재배열하며, DCT부는 이산 코사인 변환(DCT)을 인코딩 순으로 수행한다. 이 때, 만약 화상이 P-화상 또는 B-화상중 하나로 단일하고, 매크로블럭이 내부블럭이 아니면, 가산기 및/또는 감산기(122)는 모션 보상 예측 화상을 통해 예상 에러를 검출하고 DCT부는 예상 에러에 DCT를 적용한다.
다음, 정량화부(124)는 DCT부(123)에서 얻어진 DCT 계수를 정량화하고, 변수 길이 코딩부(125)는 모션벡터 및 인코딩 모드 정보를 갖는 정량화된 DCT 계수를 변수 길이 코드로 인코딩하고, 버퍼(126)는 상기 코드를 저장한다.
I-화상 또는 P-화상은 모션 보상 예측시 기준 화상으로서 후에 사용되어야 하며, 역 정량화부(128)는 정량화된 DCT 계수를 역 정량화하며, 역 DCT부(129)는 역 DCT를 역 정량화 DCT 계수에 적용하여 화상 신호를 발생시키고, 가산기 및/또는 감산기(130)는 부분 디코딩 동안 화상 신호에 대한 모션보상 처리를 수행함으로써, 디코딩 장치에서의 화상과 동일한 화상이 복원된다. 복원된 화상은 프레임 메모리(131)에 저장된다. 프레임 메모리(131)에 저장된 화상은 모션 보상 예측부(132)에서의 모션 보상 예측을 위해 적절하게 이용된다.
버퍼(126)의 비트량은 레이트 제어부(127)에 의해 계속적으로 감시된다. 정량화부(124)에서의 정량화는 이에 기초하여 타겟 비트와 매치하도록 제어된다.
본 실시예에서, 이러한 기본 동작을 수행하는 각각의 분할 화상 인코딩 장치 120-i는 다음 방법에 의해 인코딩 매크로블럭 타입 및 정량화 스케일 코드를 결정한다.
우선, 인코딩 매크로블럭 타입에 있어서, 원래의 입력 화상을 분할하는 경계와 접촉하는 매크로블럭중 인코딩 매크로블럭 타입이 강제적으로 내부 매크로블럭화된다.
또한, 경계로부터 더 멀어진 매크로블럭에서, 내부 매크로블럭의 비율이 강제적으로 감소하지만, 매크로블럭의 선정된 비율이 내부 매크로블럭화된다.
매크로블럭의 인코딩 타입이 이러한 방식으로 강제 내부 매크로블럭화되는 상태의 예가 도 4에 도시되어 있다.
도 4는 P-화상의 화상 신호의 수직 분할 경계에 대해 내부 매크로블럭의 형성 상태에 대한 도면이다.
도 4에 도시된 바와 같이, 분할 경계에 한 줄로 접촉하고 있는 모든 매크로블럭과 분할 경계로부터 더 멀어져 다음에 줄지어 있는 매크로블럭이 내부 매크로블럭화된다. 또한, 경계로부터 두 방향으로 떨어져 있는 모든 행에서, 이러한 행의 매크로블럭은 70%, 50%, 35%, 25%, 15%, 13%, 9%, 및 6%의 비율로 내부 매크로블럭으로 변환된다.
또한, 도 4에 도시된 실시예가 수직 분할 경계에 대한 상태를 도시하지만, 수평 분할 경계에 대해서도 유사한 처리가 수행된다.
또한, 도 4에 도시된 예가 P-화상을 도시하지만, B-화상에 대해서도 유사한 처리가 수행된다. 즉, I-화상에서의 모든 매크로블럭이 내부 매크로블럭이기 때문에, 이러한 처리는 I-화상에 대해서는 실제 수행되지 않는다.
상기 방법에 있어서, 내부 매크로블럭화되는 매크로블럭의 위치는 고정되어 있지 않고 각 화상에 대해 랜덤하게 변경된다.
또한, 내부 매크로블럭의 위치를 랜덤하게 변경할 때, 완전한 무작위는 필요없다. 매크로블럭의 파라미터로서 구해진 ME 잔량 또는 활동과 같은 하위 비트의 값에 대해 내부 매크로블럭화될 매크로블럭을 선택하는 것처럼 무작위가 시청자에게 일정한 인상을 주지 않을 범위를 가지는 한 문제는 없다.
또한, 내부 매크로블럭이 되는 매크로블럭의 위치가 하드웨어의 동작 시험시 미리 발견될 수 있기 때문에 파라미터의 하위 비트를 이용하는 것이 바람직하다.
또한, 정량화 스케일 코드의 결정에 있어서, 분할 경계의 양측에 있는 매크로블럭의 정량화 스케일 코드(Q 스케일 코드) 또는 정량화 스케일(Q 스케일)이 보다 작아진다.
또한, 분할 경계로부터 떨어져 줄지은 매크로블럭에서도, Q 스케일 코드 또는 Q 스케일이 보다 작아지지만, 이웃 행 간의 차이는 분할 경계로부터 떨어진 것보다 더 작게 된다.
또한, 분할 경계로부터 임의의 거리에 있는 매크로블럭에서, Q 스케일 코드 또는 Q 스케일은 반대로 더 커지게 된다.
상기 언급된 처리가 도 5 및 6을 참조하여 설명될 것이다.
우선, 도 5에 도시된 바와 같이, a 내지 g의 7개 영역이 분할 화상의 위치, 즉 분할 경계와 접촉하는 측의 위치의 관계에 기초하여 매크로블럭의 단위로 각각의 분할 화상 A 내지 D에 할당된다.
다음, 통상적인 인코딩이 수행되고 Q 스케일 코드가 모든 매크로블럭에 대해 결정된 다음, 모든 매크로블럭의 Q 스케일 코드가 도 6에 도시된 바와 같이 화상타입 및 매크로블럭이 포함되는 영역에 기초하여 보정된다. 또한, 만약 Q 스케일 코드가 보정으로 인해 MPEG-2 표준에 규정된 1의 최대값 미만이 되면, Q 스케일 코드의 값은 1로 설정된다.
또한, 정량화는 보정된 Q 스케일 코드에 기초하여 수행된다.
또한, 모든 처리는 분할 화상 인코딩 장치 120-i의 부분을 제어하는 제어부에 의해 수행된다.
분할 화상 인코딩 장치 120-1내지 120-4각각은 일반적인 MPEG-2 MP@ML 인코더를 포함함을 주지한다. 그러나, NTSC 시스템을 통해 때때로 수직 480 라인까지 취급할 수 있다. 그러므로, 본 실시예의 분할 화상 인코딩 장치 120-i에서, 수직 576 라인까지 취급할 수 있는 PAL 모드하에 인코딩이 수행된다. 이 때, PAL 모드의 프레임 비율이 25 프레임/초이며, 클럭 주파수는 30 프레임/초에서 인코딩하기 위해 상승된다.
비디오 스트림 통합 장치(140)는 제1 내지 제4 분할 화상 인코딩 장치 120-1내지 120-4로부터 출력된 네개의 MPEG-2 MP@ML 비디오 스트림을 조합하여 단일 MPEG-2 MP@ML 비디오 스트림을 발생시킨다.
즉, 네개의 MPEG-2 MP@ML 비디오 스트림은 슬라이스 단위로 쪼개져서 단일 비디오 스트림으로 재구성되어 단일 MPEG-2 MP@ML 비디오 스트림을 얻는다. 이 때, 시퀀스, GOP, 화상 레벨의 헤더 데이타, 확장 데이타, 및 슬라이스 유닛보다높은 사용자 데이타중 하나이면 충분하다. 그러므로, 제1 분할 화상 인코딩 장치 120-1(분할 화상 인코딩 장치 A)로부터 출력된 비디오 스트림만이 사용되고, 제2 내지 제4 분할 화상 인코딩 장치 120-2내지 120-4(분할 화상 인코딩 장치 B 내지 D)로부터 출력된 비디오 스트림은 버려진다.
보다 구체적으로, 비디오 스트림 통합 장치(140)는 제1 내지 제4 분할 화상 인코딩 장치 120-1내지 120-4에서 인코딩의 시작후 네개의 분할 화상 인코딩 장치 120-1내지 120-4로부터 출력된 네개의 비디오 스트림 각각에서 제1 슬라이스 시작 코드가 나타날 때까지 제1 분할 화상 인코딩 장치 120-1(분할 화상 인코딩 장치 A)로부터 출력된 비디오 스트림만을 출력하고, 제2 내지 제4 분할 화상 인코딩 장치 120-2내지 120-4(분할 화상 인코딩 장치 B 내지 D)로부터 출력된 비디오 스트림을 버린다.
또한, 동시에 단일 MPEG-2 MP@ML 비디오 스트림에 대해 재기록할 필요가 있는 파라미터, 예를 들면 수평 화소 크기, 수직 화소 크기, 애스텍트비 정보, 비트율, VBV, 버퍼 크기, 및 VBV 지연을 제어 장치(170)의 제어 유닛(172)으로부터의 명령에 따라, 또는 가능하다면, 분할 화상 인코딩 장치 120-1(i=1 내지 4)로부터 출력된 비디오 스트림의 값으로부터의 계산에 의해 알려진 값에 따라 재기록한다.
모션벡터의 검색 범위를 표현하는 F 코드를 제1 내지 제4 분할 화상 인코딩 장치 120-1내지 120-4에서의 화상 단위의 동일 값으로 재기록하는 것으로 의도될때, 모션벡터 값의 변환 및 재기록 또한 필요하게 되어 처리가 복잡해진다. 그러므로, 바람직하게는 각 화상의 인코딩 전의 제어 유닛(172)으로부터 각각의 분할 화상 인코딩 장치 120-i(i=1 내지 4)에 동일 값이 미리 설정된다.
슬라이스 개시 코드가 슬라이스의 단위로 쪼개진 후의 비디오 스트림은 도 7에 도시된 바와 같이, A1, B1, A2, B2, …, A34, B34, C1, D1, C2, D2, …, C34, D34의 순서로 재배열 출력된다.
이 때, 슬라이스의 수직 위치 정보를 표현하는 슬라이스 헤더의 값은 필요에 따라 보정 값으로 재기록된다. 또한, 슬라이스의 제1 매크로 블럭에서의 수평 위치 정보를 나타내는 매크로 블럭 어드레스 증가가 필요에 따라 보정 값으로 재기록된다.
비디오 스트림 통합 장치(140)가 슬라이스 D34의 비디오 스트림을 출력한 후에 시퀀스 종료 코드가 분할 화상 인코딩 장치로부터 출력되는 경우에, 비디오 스트림 통합 장치는 하나의 시퀀스 종료 코드를 출력하고 합성을 종료하거나 그 다음 시퀀스 시작 코드의 입력을 기다린다.
제어 장치(150)는 구성 요소들을 제어하여 동영상 인코딩 장치(100)가 목적한 동작을 수행하도록 한다.
다음에, 동영상 인코딩 장치(100)의 동작에 대해 설명한다.
예를 들어, 수평 1920 픽셀 × 수직 1080 라인의 휘도 신호와 수평 960 픽셀 × 수직 1080 라인의 색차 신호를 갖는 HDTV 비디오 신호가 동영상 인코딩장치(100)에 입력될 때, 먼저 화상 분할 장치(110)는 휘도 신호를 수평 방향으로 1440 픽셀로 변환하고, 색차 신호를 수평 방향으로 720 픽셀로 변환한다. 또한, 화상 분할 장치(110)는 휘도 신호 및 색차 신호 양자에 대해 화상의 하부에 수직 방향으로 8 라인의 더미 데이터를 첨부시켜 1088 라인을 얻는다.
그 다음에, 화상 분할 장치(110)는 이와 같이 변환된 화상 신호를 도 2에 도시한 바와 같이 4개의 영역 A, B, C, D로 분할하여 이들을 제1 내지 제4 분할 화상 인코딩 장치(120-1 내지 120-4)로 출력한다.
제1 내지 제4 분할 화상 인코딩 장치(120-1 내지 120-4)는 각각 수직 720 픽셀 × 수평 544 라인을 갖는 입력 화상 신호를 인코딩하여 MPEG-2 비디오 스트림을 생성시켜 비디오 스트림 통합 장치(140)에 출력한다.
이 때, 분할 화상 인코딩 장치(120-i) 각각은 어떤 매크로 블럭을 내부 매크로블럭(intra macroblock)으로 강제로 인코딩한다. 구체적으로는, 예를 들면 도 4에 도시한 바와 같이, 분할 경계에 접촉하는 매크로블럭 및 행(row)이 분할 경계로부터 멀어질수록 내부 매크로블럭의 비율이 점차적으로 감소하도록 모든 행으로부터 랜덤하게 선택된 소정의 수의 매크로블럭을 내부 매크로블럭으로 인코딩한다.
또한, 분할 화상 인코딩 장치(120-i) 각각은 정량화시의 화질의 저하를 저감시키기 위해 도 5의 영역 a 내지 e(I-화상 및 P-화상) 및 영역 a 내지 c(B-화상)로 도시한 바와 같이 분할 경계에 가까운 매크로블럭에 대해서는 도 6에 도시한 값보다 정량화 스케일 코드를 감소시킨다. 또한, 정량화시에 영역 g 등의 분할 영역에서 일정 거리 이상 떨어진 매크로블럭에 대해서는 역으로 정량화 스케일 코드를 증가시킨다.
그 다음에, 비디오 스트림 통합 장치(140)는 제1 내지 제4 분할 화상 인코딩 장치(20-1 내지 120-4)로부터 출력된 4개의 비디오 스트림을 하나의 MPEG2 MP@HL 비디오 스트림으로 통합한다. 즉, 슬라이스 단위로 쪼갠 다음 도 3에 도시한 바와 같이 A1, B1, A2, B2, ..., A34, B34, C1,D1, C2, D2, ..., C34, 및 D34의 순서로 재배열한다.
그 다음에, 이와 같이 생성된 MPEG-2 MP@HL 비디오 스트림은 비디오 스트림 통합 장치(140)에서 출력되고, 필요에 따라 오디오 신호와 멀티플렉스된 다음에, 전송되거나 또는 도 1에 도시한 바와 같은 비디오 테이프(300) 등의 기록 매체에 기록된다.
이와 같이, 본 발명의 동영상 인코딩 장치(100)는 분할 경계의 양측에 존재하는 2개의 매크로블럭의 인코딩 조건을 동일하게 하기 위하여 분할 화상 인코딩 장치(120-i)가 MPEG-2 MP@ML 인코딩을 수행할 때, 분할 영역에 접촉하는 매크로블럭을 내부 매크로블럭으로 변환함으로써, 분할 경계에서의 화질의 불연속성을 회피할 수 있다.
또한, 분할 경계로부터 멀어질수록 내부 매크로블럭으로 변환되는 매크로블럭의 비율이 더 적어지도록 분할 경계로부터 더 멀리 있는 행의 매크로블럭을 선택적으로 내부 매크로블럭으로 변환시킨다. 그 결과, 상이한 화질을 갖는 매크로블럭이 직선으로 배열되어 사람이 눈으로 인지하게 되는 것을 회피할 수 있게 된다.
또한, 강제적으로 내부 매크로블럭으로 변환된 매크로블럭의 위치가 고정되어 있지 않고 각 화상에 대해 랜덤하게 변하므로, 내부 매크로블럭만으로 이루어진 영역과 다른 영역간의 경계를 사람의 눈으로 인지하기가 어렵게 된다, 즉 화질의 저하를 실질적으로 회피할 수 있게 된다.
또한, 분할 경계의 양측의 2개의 매크로블럭의 Q 스케일 코드 또는 Q 스케일을 더 낮춘다. 따라서, 인코딩에 따른 화질의 저하가 감소되고, 분할 영역의 양측의 2개의 매크로블럭의 화질이 원래의 화상의 화질에 가깝게 된다. 그 결과, 분할 경계의 양측의 매크로블럭의 인코딩 조건이 서로 다르고 매크로블럭들간의 화질의 저하에 있어 차이가 있을지라도, 그 저하가 작기 때문에, 사람이 인지할 수 있을 정도의 화질의 저하가 일어나지 않으며, 따라서 화질의 저하를 실질적으로 회피할 수 있다.
또한, 분할 경계로부터 멀리 있는 행의 매크로블럭에 대해서는, 분할 경계로부터 멀어질수록 Q 스케일 코드 또는 Q 스케일의 크기가 점차적으로 감소하도록 하기 위해 Q 스케일 코드 또는 Q 스케일을 더 작게 한다. 이렇게 함으로써, 화질의 새로운 경계, 즉 화질의 불연속성을 회피할 수 있다
게다가, 본 발명의 동영상 인코딩 장치(100)는 분할 경계로부터 일정 거리 이상 떨어져 있는 매크로블럭의 Q 스케일 코드 또는 Q 스케일을 더 크게 하고 있다. 이렇게 함으로써, 매크로블럭으로부터 발생되는 비트량이 저감되고, 분할 경계 근처에서 발생된 비트량의 증가를 상쇄시킬 수 있게 됨으로써, 하나의 화상에서 발생된 비트의 증가를 회피할 수 있다.
이와 같이, 동영상 인코딩 장치(100)는 복수의 분할 화상 인코딩 장치(120)에 의해 입력 HDTV 신호를 분할하여 그 결과물을 인코딩할 때, 시각으로 인지할 수 있을 정도의 화질의 불연속성을 실질적으로 회피할 수 있게 된다. 즉, HDTV 동영상 신호의 분할 경계에서의 화질의 불연속성의 단점을 제거할 수 있다.
그 결과, 기존의 소형, 저가 및 저전력 소모 MPEG-2 MP@ML 인코더를 사용하여 HDTV 동영상 신호를 압축 및 인코딩하여 MPEG-2 MP@HL 비디오 스트림을 생성할 수 있게 된다.
이렇게 함으로써, 기존의 소형, 저가 및 저전력 소모 MPEG-2 MP@ML 인코더를 사용하여 실용적 화질을 제공하는 HDTV 동영상 신호용 압축 및 인코딩 장치를 실현할 수 있게 된다.
게다가, HDTV 동영상 신호용 디코딩 장치도 기존의 소형, 저가 및 저전력 소모 MPEG-2 MP@ML 디코더를 사용하여 실현할 수 있다.
본 발명의 동영상 인코딩 장치(100)는 각종 장치에 적용할 수 있다는 것을 알아야 한다.
예를 들면, 도 10에 도시한 비디오 카메라 장치(210)에 적용할 수 있다.
도 10에 도시한 비디오 카메라 장치(210)에서, HDTV 화상 신호는 광학 시스템(카메라)(211)에서의 촬영에 의해 생성된 전기 신호에 응답하여 화상 신호 발생부(212)에서 생성된다. 이 HDTV 화상 신호는 본 발명에 따른 동영상 인코딩 장치(100)에서 인코딩되어 HDTV MP@ML 비디오 스트림을 생성하게 된다. 그 다음에, 생성된 MPEG-2 MP@HL 비디오 스트림은 기록부(213)에 의해 기록 매체(300)상에 기록된다.
이와 같이, HDTV 신호용의 저가, 소형 및 저전력 소모 비디오 카메라 장치를 제공할 수 있다.
게다가, 본 발명은 도11에 도시한 입력 HDTV 화상 신호를 간단히 인코딩 및 기록하는 화상 기록 장치에 적용할 수 있다.
도 11에 도시한 화상 기록 장치(220)에서, 화상 신호 입력부(221)는 외부로부터 입력된 HDTV 신호를 수신하고, 본 발명에 따른 동영상 인코딩 장치(100)는 이 HDTV 신호를 인코딩하고, 기록부(213)는 생성된 HDTV MP@HL 비디오 스트림을 기록 매체(300)상에 기록한다.
이와 같이, HDTV 신호용의 저가, 소형 및 저전력 소모 화상 기록 장치를 제공할 수 있다.
게다가, 본 발명은 도 12에 도시한 전송선을 통해 입력된 HDTV 화상 신호를 전송하는 화상 전송 장치에 적용할 수 있다.
도 12에 도시한 화상 전송 장치에서, 화상 신호 입력부(221)는 외부로부터 입력된 HDTV 신호를 수신한 다음에, 본 발명에 따른 동영상 인코딩 장치(100)는 이 HDTV 신호를 인코딩하여 MPEG-2 MP@HL 비디오 스트림을 생성한다. 그 다음에, 전송부(231)는 HDTV MP@HL 비디오 스트림에 대해 인코딩, 변조 등을 행하여 전송에 적합한 형태의 신호를 생성하여 이를 임의의 전송선(232)을 통해 소망의 목적지로 전송한다.
이렇게 하여, HDTV 신호용의 저가, 소형 및 저전력 소모 화상 전송 장치를 제공할 수 있다.
본 발명은 상기한 실시예들에 한정되는 것은 아니며, 청구항들의 범위내에서 이루어진 변형들로 포함한다는 것을 알아야 한다.
예를 들면, 상기의 분할 화상 인코딩 장치(120)에서, 인코딩시에 매크로블럭을 강제로 내부 매크로블럭으로 변환하는 방법은 이상에서 설명한 실시예들의 방법들에 한정되는 것이 아니고, 임의의 방법들을 사용해도 좋다.
예를 들어, 매크로블럭을 강제로 내부 매크로블럭으로 변환하는 처리도 수직 분할 경계 또는 수평 분할 경계 중 하나에서만 수행해도 좋다.
게다가, 분할 경계로부터의 거리에 따라 내부 매크로블럭으로 변환되는 매크로블럭의 비율 및 내부 매크로블럭으로 변환되는 매크로블럭의 패턴은 도 4에 도시한 일례에 한정되는 것은 아니다.
상기예들은 각각의 화상에 따라 그리고 경계선의 위치에 따라 바뀔 수 있다. 또한 그 과정은 부분적으로 정지할 수 있다. 바로 그때, ME잉여,활동도, 평탄도 등과 같은 인코더의 매크로블록에서 나온 변수에 기초한 경계선에서 화질 불연속의 가능성 또는 정도를 예측하고 매크로블록의 비율과 패턴을 자연스럽게 내부 매크로블록으로 이에 대응하여 변환시키는 것이 가능해진다.
또한 분할 화상 인코딩 장치(120)의 정량화 스케일 코드 보정 방법은 어떤 방식이라도 가능하다.
예를 들어 도 6의 보정가 외의 다른 어떤 보정가라도 보정시 이용할 수있다.
그 외에도 화상 B의 보정가는 화상I와 화상P의 보정가와 같아질 수 있다.
또한 정량화 스케일 코드를 보정하기 위한 면적 분할 방법은 도5의 예에 제한되어 있는 것은 아니다. 예를 들어 면적은 도8과 같이 수직분할 경계선상에서만 나눌 수도 있다. 반대로 도9에서처럼 수평분할 경계선상으로만 나눌 수도 있다.
또한 그 과정의 범위는 경계선의 한쪽 끝에서 다른 쪽 끝까지일 필요도 없다. 부분 또는 몇 개의 부분을 포함할 수도 있다. 즉 처리되지 않은 부분이 있을 수도 있다.
또한 분할된 면적수 즉, 보정가가 바뀐 면적의 수는 어떤수라도 가능하다.
또한 면적분할방법과 보정가는 고정되어 있지 않고 매 화상마다 변할 수 있다. 바로 그때, ME잉여, 활동도, 평탄도 등과 같은 인코더의 매크로블록에서 나온 변수에 기초한 경계선에서 화상 불연속의 가능성 또는 정도를 예측하고 매크로블록의 비율과 패턴을 자연스럽게 내부 매크로블록으로 이에 대응하여 변환시키는 것이 가능해진다.
그리고 본 발명의 동영상 인코딩 장치 (100)에서는 2개의 과정 즉, 매크로블록의 타입을 내부 매크로블록으로 바꾸는 과정과 정량화 스케일 코드를 보정하는 과정이 동시에 수행된다.
그러나 어느 과정이라도 경계선상의 화질차이 발생을 막는데 효과적이다. 따라서 이 장치는 둘중 하나의 과정만을 수행할 수도 있다.
물론 매크로블록을 내부 매크로블록으로 강제로 바꾸는 과정에서는 경계선상의 화질은 떨어지는 경향이 있어서 본 설명에서처럼 정량화 스케일 코드 변환과정을 동시에 수행하는 장치가 더 효과적이다.
또한 본 발명의 요지는 화질 저하로 인한 차, 다시 말하면 경계선 근처의 화질 차이를 없애기 위해 인코딩 조건을 같게하고 결과적으로 HDTV신호의 분할 인코딩을 구현하는 것이다.
이에 따라 만약 인코딩 조건을 본질적으로 같게 한다면 즉 인코딩 결과 화상 질 수준을 같게 한다면 위에서 설명한 매크로타입 변환장치나 정량화 스케일 코드 보정방법외의 어떤 방법이라도 쓰여질 수 있다.
예를 들면, 예측과정에서는 모션보상 예측과정을 통제함으로써 P화상에 대한 모션보상 예측을 강제로 무효화하고 모션 벡터(0,0)를 만들게 된다.
또한 모션 벡터 값을 제한함으로써 매크로블록이 경계선에 가까워 지면 모션 벡터는 강제적으로 (0,0)이 된다. 경계선에서 거리가 멀어질수록 모션벡터 값의 제한은 +-1, +-2씩 줄어든다. 그래서 경계선상 화질의 불연속성과 불연속성 제거과정으로 인한 화질의 부자연스러움이 제거될 것이다.
그리고 본 발명의 동영상 인코딩 장치는 비디오 카메라, 화상 기록 장치, 화면 전송 장치뿐만 아니라 그외 다른 기기들에도 응용될 수 있다.
지금까지의 본 발명에 의한 발명의 효과를 요약해 보면, 기존의 소형, 저가, 저전력, 단순구조 인코딩기와 화상 인코딩 방법을 조합함으로써 HDTV신호처럼 픽셀수가 아주 많은 동 화상 신호를 화질의 상당한 저하없이 인코드할 수 있는 작고 싼 화상 인코딩기를 제공한다는 것이다.
또한 원하는 화면을 촬영하고 와 HDTV신호와 같은 촬영된 화상 신호를 화질저하없이 인코딩, 리코딩하는 소형 저가의 비디오 카메라를 제공할 수 있다.
또한 HDTV신호와 같은 동영상 신호를 화질저하없이 인코딩, 리코딩하는 소형 저가의 녹화기기를 제공할 수 있다.
또한 HDTV신호와 같은 동영상 신호를 화질저하없이 인코딩, 리코딩하는 소형 저가의 화면 전송기기를 제공할 수 있다.

Claims (25)

  1. 화상 인코딩 장치에 있어서,
    입력 화상을 N개의 영역으로 분할하여 이 영역들에 대응하는 N개의 분할된 화상 신호를 생성하는 분할 수단;
    생성된 상기 N개의 분할 화상 신호 각각을 인코딩하여 N개의 인코드된 화상 신호를 생성하는 인코딩 수단 - 상기 인코딩 수단은 소정의 인코딩 방법 및/또는 다른 영역의 화상 신호에 비해 보다 적은 화질 저하를 제공하는 분할 화상 신호들 중의 신호와 동일한 소정의 인코딩 조건으로 분할 경계에 근접한 영역의 화상 신호를 인코딩함 -;
    생성된 상기 N개의 인코드된 화상 신호를 통합하고 상기 입력 화상에 응답하여 하나의 인코드된 화상 신호를 발생시키는 통합 수단
    을 포함하는 것을 특징으로 하는 화상 인코딩 장치.
  2. 제1항에 있어서,
    상기 인코딩 수단은 상기 화질의 저하도가 점진적으로 변화하여 상기 화질의 저하도가 경계로부터의 거리보다 더욱 짧아지도록 상기 분할된 영역의 화상 신호를 인코딩하는 것을 특징으로 하는 화상 인코딩 장치.
  3. 제1항에 있어서,
    상기 인코딩 수단은 정량화 비율(quantization scale)을 낮춤으로써 상기 경계에 가까운 상이한 영역들에 포함되는 화상들의 화상 신호를 인코드하는 것을 특징으로 하는 화상 인코딩 장치.
  4. 제3항에 있어서,
    상기 인코딩 수단은 정량화 비율을 높임으로써 상기 분할된 영역의 경계로부터 떨어져 있는 영역들에 포함되는 화상들의 화상 신호를 인코드하는 것을 특징으로 하는 화상 인코딩 장치.
  5. 제1항에 있어서,
    상기 인코딩 수단은 동일 인코딩 조건하에서 상기 경계에 가까운 상이한 영역들에 포함되는 매크로 블록들을 인코딩하는 것을 특징으로 하는 화상 인코딩 장치.
  6. 제5항에 있어서,
    상기 인코딩 수단은 내부 매크로 블록으로서 상기 경계에 가까운 상이한 영역들에 포함되는 매크로 블록들을 인코딩하는 것을 특징으로 하는 화상 인코딩 장치.
  7. 제6항에 있어서,
    상기 인코딩 수단은 정량화 비율을 낮춤으로써 상기 경계에 가까운 상이한 영역들에 포함되는 화상들의 화상 신호를 인코딩하는 것을 특징으로 하는 화상 인코딩 장치.
  8. 제5항에 있어서,
    상기 인코딩 수단은 동작 보상 예측을 실질적으로 포함하지 않는 모드로 상기 경계에 가까운 상이한 영역들에 포함되는 매크로 블록들을 인코딩하는 것을 특징으로 하는 화상 인코딩 장치.
  9. 제5항에 있어서,
    상기 인코딩 수단은 동작 벡터의 크기가 소정값 이하가 되도록 함으로써 상기 경계에 가까운 상이한 영역들에 포함되는 매크로 블록들을 인코딩하는 것을 특징으로 하는 화상 인코딩 장치.
  10. 제1항에 있어서,
    상기 인코딩 수단은 상기 N개의 분할 화상 신호를 N개의 인코딩 장치로 인코딩하여 병렬로 동작할 수 있도록 하는 것을 특징으로 하는 화상 인코딩 장치.
  11. 제10항에 있어서,
    상기 입력 화상은 HDTV 화상이고,
    상기 인코딩 장치는 SDTV 신호 사용 인코딩 장치인 것을 특징으로 하는 화상 인코딩 장치.
  12. 화상 인코딩 방법에 있어서,
    입력 화상을 N개의 영역으로 분할하여 이 영역들에 대응하는 N개의 분활 화상 신호를 생성하는 단계;
    상기 생성된 N개의 화상 신호를 인코딩하여 N개의 인코드된 화상 신호를 생성하는 단계;
    상기 생성된 N개의 인코드된 화상 신호를 통합하여 상기 입력 화상에 대응하는 하나의 인코드된 화상 신호를 생성하는 단계
    를 포함하되,
    상기 인코딩은 소정의 인코딩 방법 및/또는 다른 영역의 화상 신호에 비해 보다 적은 화질 저하를 제공하는 분할 화상 신호들 중의 신호와 동일한 소정의 인코딩 조건으로 분할 경계에 근접한 영역의 화상 신호에 대해 수행되는 것을 특징으로 하는 화상 인코딩 방법.
  13. 제12항에 있어서,
    상기 인코딩 단계는 화질의 저하도가 점진적으로 변화하여 화질의 저하도가 상기 경계로부터의 거리가 짧을수록 더 작아지도록 수행되는 것을 특징으로 하는 화상 인코딩 방법.
  14. 제12항에 있어서,
    상기 인코딩 단계는 정량화 비율을 낮춤으로써 상기 경계에 가까운 상이한 영역들에 포함되는 화상들의 화상 신호에 대해 수행되는 것을 특징으로 하는 화상 인코딩 방법.
  15. 제14항에 있어서,
    상기 인코딩 단계는 정량화 비율을 높임으로써 상기 분할 영역들의 경계로부터 떨어져 있는 영역에 포함된 화상들의 화상 신호에 대해 수행되는 것을 특징으로 하는 화상 인코딩 방법.
  16. 제12항에 있어서,
    상기 인코딩 단계는 동일 인코딩 조건 하에서 상기 경계에 가까운 상이한 영역들에 포함된 매크로 블록들에 대해 수행되는 것을 특징으로 하는 화상 인코딩 방법.
  17. 제16항에 있어서,
    상기 인코딩 단계는 내부 매크로 블록들로서 상기 경계에 가까운 상이한 영역들에 포함되는 매크로 블록들에 대해 수행되는 것을 특징으로 하는 화상 인코딩 방법.
  18. 제17항에 있어서,
    상기 인코딩 단계는 정량화 비율을 낮춤으로써 상기 경계에 가까운 상이한 분할 영역들에 포함되는 화상들의 화상 신호에 대해 수행되는 것을 특징으로 하는 화상 인코딩 방법.
  19. 제16항에 있어서,
    상기 인코딩 단계는 동작 보상 예측을 실질적으로 포함하지 않는 모드에 의해 상기 경계에 가까운 상이한 영역들에 포함되는 매크로 블록들에 대해 수행되는 것을 특징으로 하는 화상 인코딩 방법.
  20. 제16항에 있어서,
    상기 인코딩 단계는 상기 동작 벡터의 크기가 소정의 값 이하가 되도록 함으로써 상기 경계에 가까운 상이한 영역들에 포함되는 매크로 블록들에 대해 수행되는 것을 특징으로 하는 화상 인코딩 방법.
  21. 제12항에 있어서,
    상기 인코딩 단계는 분할된 상기 N개의 화상 신호에 대해 N개의 인코딩 장치에 의해 병렬로 수행되는 것을 특징으로 하는 화상 인코딩 방법.
  22. 제21항에 있어서,
    상기 입력 화상은 HDTV 화상이고,
    상기 인코딩 장치는 SDTV 신호 사용 인코딩 장치인 것을 특징으로 하는 화상 인코딩 방법.
  23. 비디오 카메라에 있어서,
    어느 화상이든 촬영하여 화상 신호를 생성하기 위한 카메라;
    상기 촬영된 화상을 N개의 영역으로 분할하여 상기 생성된 화상 신호에 기초한 영역들에 대응하는 N개의 분할 화상 신호를 생성하는 분할 수단;
    상기 생성된 N개의 분할 화상 신호 각각을 인코딩하여 N개의 인코드된 화상 신호를 생성하는 인코딩 수단 ;- 상기 인코딩 수단은 소정의 인코딩 방법 및/또는 다른 영역의 화상 신호에 비해 보다 적은 화질 저하를 제공하는 분할 화상 신호들 중의 신호와 동일한 소정의 인코딩 조건으로 분할 경계에 근접한 영역들의 화상 신호를 인코딩함 -;
    상기 생성된 N개의 인코드된 화상 신호를 통합하고 상기 입력 화상에 응답하여 하나의 인코드된 화상 신호를 생성하는 통합 수단; 및
    상기 통합된 인코드 화상 신호를 기록 매체에 기록하는 기록 수단
    을 포함하는 것을 특징으로 하는 비디오 카메라.
  24. 화상 기록 장치에 있어서,
    입력 화상을 N개의 영역으로 분할하여 이 영역들에 대응하는 N개의 분할된 화상 신호를 생성하는 분할 수단;
    상기 생성된 N개의 분할 화상 신호 각각을 인코딩하여 N개의 인코드된 화상 신호를 생성하는 인코딩 수단 - 상기 인코딩 수단은 소정의 인코딩 방법 및/또는 다른 영역의 화상 신호에 비해 보다 적은 화질 저하를 제공하는 분할 화상 신호들 중의 신호와 동일한 소정의 인코딩 조건으로 분할 경계에 근접한 영역의 화상 신호를 인코딩함 - ;
    상기 생성된 N개의 인코드된 화상 신호를 통합하고 상기 입력 화상에 응답하여 하나의 인코드된 화상 신호를 생성하는 통합 수단; 및
    상기 통합된 인코드 화상 신호를 기록 매체에 기록하는 기록 수단
    을 포함하는 것을 특징으로 하는 화상 기록 장치.
  25. 화상 전송 장치에 있어서,
    입력 화상을 N개의 영역으로 분할하고 이 영역들에 대응하는 N개의 분할된 화상 신호를 생성하는 분할 수단;
    상기 생성된 N개의 분할 화상 신호 각각을 인코딩하여 N개의 인코드된 화상 신호를 생성하는 인코딩 수단 - 상기 인코딩 수단은 소정의 인코딩 방법 및/또는 다른 영역의 화상 신호에 비해 보다 적은 화질 저하를 제공하는 분할 화상 신호들 중의 신호와 동일한 소정의 인코딩 조건으로 분할 경계에 근접한 영역의 화상 신호를 인코딩함 - ;
    상기 생성된 N개의 인코드된 화상 신호를 통합하고 상기 입력 화상에 응답하여 하나의 인코드된 화상 신호를 생성하는 통합 수단; 및
    상기 통합된 인코드된 화상 신호를 전송하기 위한 전송 수단
    을 포함하는 것을 특징으로 하는 화상 전송 장치
KR1020010016521A 2000-03-30 2001-03-29 화상 인코딩 장치 및 방법, 비디오 카메라, 화상 기록장치, 및 화상 전송 장치 KR20010095106A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2000-097947 2000-03-30
JP2000097947A JP2001285876A (ja) 2000-03-30 2000-03-30 画像符号化装置とその方法、ビデオカメラ、画像記録装置、画像伝送装置

Publications (1)

Publication Number Publication Date
KR20010095106A true KR20010095106A (ko) 2001-11-03

Family

ID=18612504

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020010016521A KR20010095106A (ko) 2000-03-30 2001-03-29 화상 인코딩 장치 및 방법, 비디오 카메라, 화상 기록장치, 및 화상 전송 장치

Country Status (5)

Country Link
US (1) US20010026587A1 (ko)
EP (1) EP1143737A3 (ko)
JP (1) JP2001285876A (ko)
KR (1) KR20010095106A (ko)
CN (1) CN1318950A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101353165B1 (ko) * 2009-12-21 2014-01-27 알까뗄 루슨트 복수의 비디오 스트림을 공동 인코딩하는 방법 및 장치

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8284844B2 (en) 2002-04-01 2012-10-09 Broadcom Corporation Video decoding system supporting multiple standards
KR100747879B1 (ko) * 2004-06-10 2007-08-08 캐논 가부시끼가이샤 화상 처리 장치, 제어 방법 및 기록 매체
JP4516874B2 (ja) * 2005-03-30 2010-08-04 Ｎｅｃパーソナルプロダクツ株式会社 画像データ符号化装置及び画像データ符号化方法
US20070011604A1 (en) * 2005-07-05 2007-01-11 Fu-Sheng Chiu Content integration with format and protocol conversion system
JP4616135B2 (ja) * 2005-09-21 2011-01-19 オリンパス株式会社 撮像装置および画像記録装置
US20090052536A1 (en) * 2006-02-09 2009-02-26 Nec Corporation Video Decoding Device, Decoded Image Recording Device, Their Method and Program
JP4770704B2 (ja) * 2006-11-09 2011-09-14 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
JP4770711B2 (ja) * 2006-11-15 2011-09-14 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
JP4264666B2 (ja) 2007-02-07 2009-05-20 ソニー株式会社 画像処理装置および方法、並びにプログラム
KR101339785B1 (ko) * 2007-10-29 2013-12-11 삼성전자주식회사 분할 영상 처리 장치 및 방법 그리고 제어 인자 계산 장치
JPWO2009063554A1 (ja) * 2007-11-13 2011-03-31 富士通株式会社 符号化装置および復号装置
JP4945533B2 (ja) * 2008-09-09 2012-06-06 株式会社東芝 画像処理装置及び画像処理方法
JP5321009B2 (ja) 2008-11-21 2013-10-23 ソニー株式会社 画像信号処理装置、画像信号処理方法および画像投射装置
JP5321011B2 (ja) 2008-11-25 2013-10-23 ソニー株式会社 画像信号処理装置、画像信号処理方法および画像投射装置
JP5685682B2 (ja) * 2011-10-24 2015-03-18 株式会社Gnzo 映像信号の符号化システム及び符号化方法
RU2716060C1 (ru) * 2012-04-06 2020-03-05 Сони Корпорейшн Устройство декодирования и способ декодирования и устройство кодирования и способ кодирования
JP5894063B2 (ja) * 2012-12-11 2016-03-23 日本電信電話株式会社 映像符号化装置及び映像符号化プログラム
US20160165246A1 (en) * 2013-07-17 2016-06-09 Sony Corporation Image processing device and method
CN103763556B (zh) * 2014-01-29 2018-03-06 广东威创视讯科技股份有限公司 视频图像编解码装置及其方法、传输系统及其方法
EP3107297A4 (en) 2014-02-10 2017-09-06 Nec Corporation Video encoding device, video encoding method, and program
JP2015226263A (ja) * 2014-05-29 2015-12-14 富士通株式会社 動画像符号化装置、動画像符号化方法及び動画像符号化用コンピュータプログラム
JP2019087850A (ja) * 2017-11-06 2019-06-06 日本放送協会 領域分割装置、分割領域合成装置、符号化装置、復号装置、及びプログラム
US20210350581A1 (en) * 2018-10-18 2021-11-11 Sony Corporation Encoding device, encoding method, and decoding device
CN110933436A (zh) * 2019-12-17 2020-03-27 展讯通信（上海）有限公司 图像编码方法、装置、计算机设备及存储介质

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5216503A (en) * 1991-12-24 1993-06-01 General Instrument Corporation Statistical multiplexer for a multichannel image compression system
US6160846A (en) * 1995-10-25 2000-12-12 Sarnoff Corporation Apparatus and method for optimizing the rate control in a coding system
US6233017B1 (en) * 1996-09-16 2001-05-15 Microsoft Corporation Multimedia compression system with adaptive block sizes
US5818975A (en) * 1996-10-28 1998-10-06 Eastman Kodak Company Method and apparatus for area selective exposure adjustment
US6111991A (en) * 1998-01-16 2000-08-29 Sharp Laboratories Of America Method and apparatus for optimizing quantizer values in an image encoder
US6618444B1 (en) * 1997-02-14 2003-09-09 At&T Corp. Scene description nodes to support improved chroma-key shape representation of coded arbitrary images and video objects
JPH10234043A (ja) * 1997-02-20 1998-09-02 Toshiba Corp 動画像符号化／復号化装置
US5920359A (en) * 1997-05-19 1999-07-06 International Business Machines Corporation Video encoding method, system and computer program product for optimizing center of picture quality
US6101279A (en) * 1997-06-05 2000-08-08 Wisconsin Alumni Research Foundation Image compression system using block transforms and tree-type coefficient truncation
AU2337099A (en) * 1998-01-26 1999-08-09 Tiernan Communications, Inc. Method and apparatus for advanced television signal encoding and decoding
JP3413721B2 (ja) * 1998-06-26 2003-06-09 ソニー株式会社 画像符号化方法及び装置、並びに画像復号方法及び装置
WO2000004725A1 (en) * 1998-07-15 2000-01-27 Koninklijke Philips Electronics N.V. Recording and editing hdtv signals
JP2000209580A (ja) * 1999-01-13 2000-07-28 Canon Inc 画像処理装置およびその方法
US6577679B1 (en) * 1999-09-30 2003-06-10 Hewlett-Packard Development Company Lp Method and apparatus for transcoding coded picture signals from object-based coding to block-based coding
US6404814B1 (en) * 2000-04-28 2002-06-11 Hewlett-Packard Company Transcoding method and transcoder for transcoding a predictively-coded object-based picture signal to a predictively-coded block-based picture signal

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101353165B1 (ko) * 2009-12-21 2014-01-27 알까뗄 루슨트 복수의 비디오 스트림을 공동 인코딩하는 방법 및 장치

Also Published As

Publication number Publication date
US20010026587A1 (en) 2001-10-04
EP1143737A2 (en) 2001-10-10
CN1318950A (zh) 2001-10-24
JP2001285876A (ja) 2001-10-12
EP1143737A3 (en) 2004-06-16

Similar Documents

Publication Publication Date Title
KR20010095106A (ko) 화상 인코딩 장치 및 방법, 비디오 카메라, 화상 기록장치, 및 화상 전송 장치
JP3552811B2 (ja) ディジタル映像信号符号化装置および復号化装置
KR100954609B1 (ko) 비디오 부호화 시스템에서 양자화 변수들을 표시하는 방법및 장치
KR100323489B1 (ko) 비디오데이타를가지는비트스트림의트랜스코딩방법및장치
US6920175B2 (en) Video coding architecture and methods for using same
JP4440640B2 (ja) 画像ブロックの復号方法
US6587509B1 (en) Reducing undesirable effects of an emphasis processing operation performed on a moving image by adding a noise signal to a decoded uncompressed signal
KR101187550B1 (ko) 입체적 3ｄ-비디오 이미지 디지털 코딩 시스템 및 방법
US20020122491A1 (en) Video decoder architecture and method for using same
KR100504641B1 (ko) 화상 부호화 장치 및 화상 부호화 방법
US7787541B2 (en) Dynamic pre-filter control with subjective noise detector for video compression
US20070230574A1 (en) Method and Device for Encoding Digital Video Data
KR100227298B1 (ko) 부호화 화상의 부호량 제어 방법
JPH11234668A (ja) 映像符号化装置
US6907071B2 (en) Selective prediction for intra-coding video data block
JP3852366B2 (ja) 符号化装置および方法、復号装置および方法、並びにプログラム
JP2003348597A (ja) 画像符号化装置および画像符号化方法
JP2933561B2 (ja) 動画符号変換装置
JPH06217281A (ja) 画像符号化装置、画像復号化装置、画像記録媒体、画像符号化方法、画像復号化方法及び画像信号伝送方法
JP3818819B2 (ja) 画像符号化方式変換装置、画像符号化方式変換方法および記録媒体
JP4906197B2 (ja) 復号装置および方法、並びに記録媒体
JP2001148852A (ja) 画像情報変換装置及び画像情報変換方法
JPH07107464A (ja) 画像符号化装置および復号化装置
JPH0993537A (ja) ディジタル映像信号記録再生装置及びディジタル映像信号符号化方法
JPH10145788A (ja) 映像再生装置

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid