KR100958253B1 - Scalable encoder, decoder of block unit and method thereof - Google Patents
Scalable encoder, decoder of block unit and method thereof Download PDFInfo
- Publication number
- KR100958253B1 KR100958253B1 KR1020080103226A KR20080103226A KR100958253B1 KR 100958253 B1 KR100958253 B1 KR 100958253B1 KR 1020080103226 A KR1020080103226 A KR 1020080103226A KR 20080103226 A KR20080103226 A KR 20080103226A KR 100958253 B1 KR100958253 B1 KR 100958253B1
- Authority
- KR
- South Korea
- Prior art keywords
- high resolution
- block
- video
- resolution
- low resolution
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
Abstract
블록 단위 스케러블 부호화기, 복호화기 및 그 방법이 개시된다. 블록 단위 스케러블 부호화기는 고해상도 입력 동영상의 해상도를 변환하여 저해상도 동영상을 생성하는 축소 변환부; 상기 저해상도 동영상을 부호화하여 저해상도 부호화 동영상을 생성하는 저해상도 부호화부; 상기 저해상도 부호화 동영상을 복호화한 복호화 영상을 참조로 상기 고해상도 입력 동영상의 일부를 부호화하여 고해상도 부호화 동영상을 생성하는 고해상도 부호화부; 및, 상기 고해상도 부호화 동영상과 상기 저해상도 부호화 동영상을 통합하여 전송하는 멀티 플렉서를 포함한다.Disclosed are a block-based scalable encoder, a decoder, and a method thereof. The block-based scalable encoder includes a reduction converter that converts a resolution of a high resolution input video to generate a low resolution video; A low resolution encoder to generate a low resolution encoded video by encoding the low resolution video; A high resolution encoder configured to generate a high resolution encoded video by encoding a portion of the high resolution input video based on the decoded video obtained by decoding the low resolution encoded video; And a multiplexer which integrates and transmits the high resolution encoded video and the low resolution encoded video.
해상도, 블록, 복잡도, 차 블록, 동영상. Resolution, block, complexity, secondary block, video.
Description
본 발명의 일실시예들은 블록 단위 스케러블 부호화기, 복호화기 및 그 방법에 관한 것으로, 특히 동영상의 블록별로 복잡도를 판단하고, 복잡도가 일정 이상일 경우에만 고해상도로 부호화함으로써 부호화 효율을 증가시키는 장치 및 방법에 관한 것이다.Embodiments of the present invention relate to a block-based scalable encoder, a decoder, and a method thereof. In particular, an apparatus and method for increasing coding efficiency by determining a complexity for each block of a video and encoding at high resolution only when the complexity is a certain level or more It is about.
동영상을 재생하는 장치는 MPEG 등으로 압축된 동영상을 보다 높은 해상도로 스케일링(scaling)하여 표시하는 경우가 많다. 일례로 Full HDTV의 경우 HD 720p나 1080i 영상 스트림이 입력되면 복호화 후 1080p로 확장하여 표시하며 480i나 480p를 1080p로 확장하는 경우도 있다. In many cases, a device for playing a video displays a video compressed with MPEG at a higher resolution. In the case of Full HDTV, for example, when an HD 720p or 1080i video stream is input, it is decoded and displayed as 1080p, and in some cases, 480i or 480p is extended to 1080p.
또한, PVR같은 경우에는 저장 공간을 고려하여 HD영상을 SD급이나 원 해상도보다 낮은 해상도로 변환 후 압축 저장하는 경우가 있다. In addition, in case of PVR, in consideration of storage space, HD video may be compressed and stored after being converted to SD or lower resolution than the original resolution.
그러나, 동영상을 보다 높은 해상도로 스케일링(scaling)하여 표시하는 장치는 재생 시에 좋은 스케일러(scaler)를 사용하더라도 화질이 떨어지는 문제가 있는 실정이다.However, a device that scales and displays a video at a higher resolution has a problem of deteriorating image quality even when using a good scaler.
그에 따라 복합 레이어(layer) 코딩을 사용하여 다양한 해상도의 영상 재생이 가능한 부호화 방법도 개발되었으나. 복합 레이어 코딩은 단일 레이어 코딩보다는 절대적으로 정보량이 많아서 저장 정보량이 증가한다는 문제가 있었다.Accordingly, a coding method capable of reproducing images of various resolutions using complex layer coding has been developed. Complex layer coding has a problem in that the amount of stored information increases due to the greater amount of information than the single layer coding.
따라서, 저장 정보량이 많이 증가하지 않으면서 화질의 감소 없이 고해상도 영상을 부호화하는 방법이 필요한 실정이다.Accordingly, there is a need for a method of encoding a high resolution image without a decrease in image quality without increasing the amount of stored information.
본 발명의 일실시예들은 동영상에서 해상도 변환 시 정보 손실의 가능성이 큰 영역만을 선택하여 고해상도로 부호화하고 다른 영역은 저해상도로 부호화함으로써 저해상도로 부호화한 것과 비슷한 용량으로 고화질 고해상도 영상을 복원할 수 있는 블록 단위 스케러블 부호화기와 복호화기를 제공한다.According to an embodiment of the present invention, a block capable of reconstructing a high definition high resolution image with a capacity similar to that of a low resolution encoding by selecting only a region having a high probability of information loss during resolution conversion in a video and encoding the other region at a low resolution A unit scalable encoder and decoder are provided.
본 발명의 일실시예에 따른 블록 단위 스케러블 부호화기는 고해상도 입력 동영상의 해상도를 변환하여 저해상도 동영상을 생성하는 축소 변환부; 상기 저해상도 동영상을 부호화하여 저해상도 부호화 동영상을 생성하는 저해상도 부호화부; 상기 저해상도 부호화 동영상을 복호화한 복호화 영상을 참조로 상기 고해상도 입력 동영상의 일부를 부호화하여 고해상도 부호화 동영상을 생성하는 고해상도 부호화부; 및, 상기 고해상도 부호화 동영상과 상기 저해상도 부호화 동영상을 통합하여 전송하는 멀티 플렉서를 포함한다.Block-based scalable encoder according to an embodiment of the present invention comprises a reduced conversion unit for generating a low-resolution video by converting the resolution of the high-resolution input video; A low resolution encoder to generate a low resolution encoded video by encoding the low resolution video; A high resolution encoder configured to generate a high resolution encoded video by encoding a portion of the high resolution input video based on the decoded video obtained by decoding the low resolution encoded video; And a multiplexer which integrates and transmits the high resolution encoded video and the low resolution encoded video.
또한, 본 발명의 일실시예에 따른 블록 단위 스케러블 복호화기는 고해상도 부호화 동영상과 상기 저해상도 부호화 동영상이 통합된 정보를 수신하고, 상기 고해상도 부호화 동영상과 상기 저해상도 부호화 동영상을 분리하는 디멀티 플렉서; 상기 저해상도 부호화 동영상을 복호화하여 저해상도 동영상을 생성하는 저해상도 복호화부; 및, 상기 고해상도 부호화 동영상을 복호화하고, 고해상도 부호화 동영상이 생성되지 않은 블록은 상기 저해상도 동영상을 참조하여 고해상도 동영상을 생성하는 고해상도 복호화부를 포함한다.In addition, the block-based scalable decoder according to an embodiment of the present invention includes a demultiplexer for receiving information in which a high resolution encoded video and the low resolution encoded video are integrated, and separating the high resolution encoded video and the low resolution encoded video; A low resolution decoder configured to decode the low resolution encoded video to generate a low resolution video; And a high resolution decoder configured to decode the high resolution encoded video and generate a high resolution video with reference to the low resolution video.
또한, 본 발명의 일실시예에 따른 블록 단위 스케러블 부호화기는 고해상도 입력 동영상의 해상도를 변환하여 저해상도 동영상을 생성하는 축소 변환부; 상기 저해상도 동영상을 참조하여 상기 고해상도 입력 동영상에서 고해상도로 보상할 고해상도 블록을 선택하는 복잡도 판단부; 상기 고해상도 입력 동영상 중에 상기 고해상도 블록이 아닌 저해상도 블록을 보상하는 저해상도 보상부; 상기 고해상도 블록을 보상하는 고해상도 보상부; 및 상기 저해상도 보상부와 상기 고해상도 보상부에서 보상된 블록들을 부호화하여 부호화 동영상을 생성하는 부호화부를 포함한다.In addition, the block-based scalable encoder according to an embodiment of the present invention includes a reduced conversion unit for generating a low-resolution video by converting the resolution of the high-resolution input video; A complexity determining unit for selecting a high resolution block to be compensated with a high resolution in the high resolution input video by referring to the low resolution video; A low resolution compensator for compensating a low resolution block instead of the high resolution block in the high resolution input video; A high resolution compensator for compensating the high resolution block; And an encoder to generate an encoded video by encoding the blocks compensated by the low resolution compensator and the high resolution compensator.
또한, 본 발명의 일실시예에 따른 블록 단위 스케러블 복호화기는 부호화 동영상을 복호화하여 복호화 동영상을 생성하는 복호화부; 상기 복호화 동영상 중에 저해상도 블록을 고해상도로 변환하는 변환부; 상기 복호화 동영상 중에 고해상도 블록을 보상하는 보상부; 상기 저해상도 블록과 상기 고해상도 블록을 결합하는 결합부; 및, 결합된 상기 저해상도 블록과 상기 고해상도 블록의 해상도를 보정하는 블록 스케일러를 포함한다.In addition, the block unit scalable decoder according to an embodiment of the present invention includes a decoding unit for decoding the encoded video to generate a decoded video; A converter that converts a low resolution block into a high resolution in the decoded video; A compensator for compensating a high resolution block in the decoded video; A coupling unit coupling the low resolution block and the high resolution block; And a block scaler for correcting the resolution of the combined low resolution block and the high resolution block.
본 발명의 일실시예들은 동영상에서 해상도 변환 시 정보 손실의 가능성이 큰 영역만을 선택하여 고해상도로 부호화하고 다른 영역은 저해상도로 부호화함으로써 저해상도로 부호화한 것과 비슷한 용량으로 고화질 고해상도 영상을 복원할 수 있다.According to an exemplary embodiment of the present invention, only a region having a high probability of information loss during resolution conversion in a video is selected and encoded in a high resolution, and another region is encoded in a low resolution to restore a high quality high resolution image with a capacity similar to that encoded in a low resolution.
이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 바람직한 실시예들을 상세하게 설명하지만, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings and the contents described in the accompanying drawings, but the present invention is not limited or limited to the embodiments.
도 1은 본 발명의 일실시예에 따른 블록 단위 스케러블 부호화기의 개괄적인 모습을 도시한 도면이다. 1 is a diagram illustrating an overview of a block-based scalable encoder according to an embodiment of the present invention.
도 1을 참조하면 저해상도 레이어 스트림과 고해상도 레이어 스트림이 분리되는 블록 단위 스케러블 부호화기에 고해상도 동영상이 입력될 경우에, 축소 변환부(101)는 고해상도 입력 동영상의 해상도를 변환하여 저해상도 동영상을 생성하고, 저해상도 부호화부(102)는 상기 저해상도 동영상을 부호화하여 저해상도 부호화 동영상을 생성하며, 고해상도 부호화부(103)는 상기 저해상도 부호화 동영상을 복호화한 복호화 영상을 참조로 상기 고해상도 입력 동영상의 일부를 부호화하여 고해상도 부호화 동영상을 생성하고, 멀티 플렉서(104)는 상기 고해상도 부호화 동영상과 상기 저해상도 부호화 동영상을 통합하여 전송한다.Referring to FIG. 1, when a high resolution video is input to a block-based scalable encoder that separates a low resolution layer stream and a high resolution layer stream, the
이때, 저해상도 부호화부(102)는 싱글 레이어 비디오 코딩(single layer video coding)으로 부호화하는 부호화부일 수 있다. 일례로 저해상도 부호화부(102)에는 MPEG2, MPEG4, H.264, VC1같은 블록기반 동영상 부호화기(encoder)가 사용될 수 있다. 또한, 저해상도 부호화부(102)는 일반적인 부호화기와 같이 상기 저해상도 부호화 동영상을 복호화한 복호화 영상을 생성할 수 있다. In this case, the
또한, 고해상도 부호화부(103)는 상기 고해상도 입력 동영상을 블록 단위로 각 블록의 차이를 코딩하여 부호화할 수 있으며, 고해상도 부호화부(103)의 구성에 대해서는 도 2를 통해 더욱 자세히 설명한다.In addition, the
도 2는 본 발명의 일실시예에 따른 고해상도 부호화부(103)의 개괄적인 모습을 도시한 도면이다. 2 is a diagram illustrating an overview of the
고해상도 부호화부(103)는 도 2에 도시된 바와 같이 상기 복호화 영상을 고해상도 복호화 영상으로 변환하는 확대 변환부(201)와, 상기 고해상도 복호화 영상을 참조하여 상기 고해상도 입력 동영상에서 고해상도로 부호화할 블록을 선택하는 복잡도 판단부(202)와, 복잡도 판단부(202)에서 선택된 상기 블록을 부호화하여 고해상도 부호화 동영상을 생성하는 부호화부(203) 및, 부호화부(203)에서 부호화된 블록에 대한 정보와 상기 고해상도 부호화 동영상을 전송하는 전송부(204)를 포함할 수 있다.As illustrated in FIG. 2, the
이때, 복잡도 판단부(202)는 상기 고해상도 입력 동영상의 블록들과 상기 고해상도 입력 동영상의 블록에 대응하는 상기 고해상도 복호화 영상의 블록들을 수신할 수 있다.In this case, the
또한, 복잡도 판단부(202)는 상기 고해상도 입력 동영상의 블록들과 상기 고해상도 복호화 영상의 블록들의 복잡도를 확인하고, 상기 복잡도가 일정량보다 큰 상기 고해상도 입력 동영상의 블록들만 부호화할 블록으로 선택할 수 있다. 이때, 상기 복잡도는 차 블록의 에너지 크기이고, 상기 차 블록의 에너지 크기는 상기 차 블록에 포함된 각 화소의 절대값의 합이나 상기 차 블록에 포함된 각 화소의 제곱의 합일 수 있다.In addition, the
또한, 복잡도 판단부(202)는 부호화할 블록으로 선택되지 않은 상기 고해상 도 입력 동영상의 블록들은 스킵하여 부호화하지 않고 스킵한 블록에 연결된 다음 블록의 복잡도를 판단할 수 있다.In addition, the
도 3은 본 발명에 따른 고해상도 부호화부에서 부호화되는 블록들을 선택한 상태의 일례이다.3 is an example of a state in which blocks to be encoded in the high resolution encoder according to the present invention are selected.
도 3에 도시된 바와 같이 고해상도 부호화부(103)에 입력된 상기 고해상도 입력 동영상의 블록(310)은 동일한 위치의 고해상도 복호화 영상의 블록과 비교하여 일정 이상의 복잡도를 가진 블록(301)과 일정 이하의 복잡도를 가진 블록(302)로 구분될 수 있다.As shown in FIG. 3, the
고해상도를 저해상도로 변환하였다가 고해상도로 복원할 경우에 문제가 되는 것은 고해상도의 화소가 밀집하여 복잡한 영역에 대한 정보가 손실되는 것이므로, 고해상도 부호화부(103)는 일정 이상의 복잡도를 가진 블록(301)만을 부호화할 블록으로 선택하여 고해상도 복원에 필요한 정보가 손실되는 것을 방지하면서 고해상도로 부호화하는 정보의 량을 감소하여 효율적인 부호화가 가능하도록 할 수 있다.When converting a high resolution to a low resolution and restoring it to a high resolution, a problem is that pixels of a high resolution are concentrated and information on a complicated region is lost. Therefore, the
도 4는 본 발명의 일실시예에 따른 블록 단위 스케러블 복호화기의 개괄적인 모습을 도시한 도면이다. 4 is a diagram illustrating an overview of a block-based scalable decoder according to an embodiment of the present invention.
도 4를 참조하면 저해상도 레이어 스트림과 고해상도 레이어 스트림이 분리되는 블록 단위 스케러블 부호화기에 고해상도 동영상이 입력될 경우에, 디멀티 플렉서(401)는 고해상도 부호화 동영상과 상기 저해상도 부호화 동영상이 통합된 정보를 수신하고, 상기 고해상도 부호화 동영상과 상기 저해상도 부호화 동영상을 분리하며, 저해상도 복호화부(402)는 상기 저해상도 부호화 동영상을 복호화하여 저 해상도 동영상을 생성하고, 고해상도 복호화부(403)는 상기 고해상도 부호화 동영상을 복호화하고, 고해상도 부호화 동영상이 생성되지 않은 블록은 상기 저해상도 동영상을 참조하여 고해상도 동영상을 생성한다.Referring to FIG. 4, when a high resolution video is input to a block-based scalable encoder that separates a low resolution layer stream and a high resolution layer stream, the
이때, 상기 고해상도 부호화 동영상과 상기 저해상도 부호화 동영상이 통합된 정보에는 전송부(204)에서 전송된 부호화된 블록에 대한 정보가 더 포함될 수 있다. 또한, 디멀티 플렉서(401)는 상기 부호화된 블록에 대한 정보를 상기 고해상도 부호화 동영상과 함께 고해상도 복호화부(403)로 전송할 수 있다.In this case, the integrated information of the high resolution encoded video and the low resolution encoded video may further include information on the encoded block transmitted from the
이때, 고해상도 복호화부(403)는 상기 고해상도 부호화 동영상을 복호화하고, 복호화된 고해상도 동영상과 상기 저해상도 동영상을 조합하여 고해상도 동영상을 생성할 수 있다. 이러한, 고해상도 복호화부(403)의 구성에 대해서는 도 2를 통해 더욱 자세히 설명한다.In this case, the
도 5는 본 발명의 일실시예에 따른 고해상도 복호화부의 개괄적인 모습을 도시한 도면이다. 5 is a diagram illustrating an overview of a high resolution decoder according to an embodiment of the present invention.
고해상도 복호화부(403)는 도 5에 도시된 바와 같이 상기 부호화된 블록에 대한 정보를 추가부(504)로 전송하고, 상기 고해상도 부호화 동영상을 복호화부(502)로 전송하는 수신부(501)와, 상기 고해상도 부호화 동영상을 복호화하여 고해상도 블록을 생성하는 부호화부(502)와, 상기 저해상도 동영상을 고해상도 복호화 영상으로 변환하는 확대 변환부(503) 및, 상기 고해상도 블록을 고해상도 복호화 영상에 결합하여 고해상도 동영상을 생성하는 추가부(504)를 포함할 수 있다. As shown in FIG. 5, the
이때, 추가부(504)는 상기 부호화된 블록에 대한 정보를 사용하여 상기 고해 상도 복호화 영상에서 상기 고해상도 블록에 대응하는 상기 고해상도 복호화 영상의 대응 블록을 확인하고, 상기 대응 블록을 상기 고해상도 블록으로 대체하여 고해상도 동영상을 생성할 수 있다.In this case, the
도 6은 본 발명의 다른 실시예에 따른 블록 단위 스케러블 부호화기의 개괄적인 모습을 도시한 도면이다. FIG. 6 is a diagram illustrating an overview of a block-based scalable encoder according to another embodiment of the present invention.
도 6을 참조하면 싱글 레이어의 블록 단위 스케러블 부호화기에 고해상도 동영상이 입력될 경우에, 축소 변환부(601)는 고해상도 입력 동영상의 해상도를 변환하여 저해상도 동영상을 생성하고, 복잡도 판단부(602)는 상기 저해상도 동영상을 참조하여 상기 고해상도 입력 동영상에서 고해상도로 보상할 고해상도 블록을 선택하며, 저해상도 보상부(603)는 상기 고해상도 입력 동영상 중에 상기 고해상도 블록이 아닌 저해상도 블록을 보상하고, 고해상도 보상부(604)는 상기 고해상도 블록을 보상하며, 부호화부(605)는 저해상도 보상부(603)와 고해상도 보상부(604)에서 보상된 블록들을 부호화하여 부호화 동영상을 생성한다.Referring to FIG. 6, when a high resolution video is input to a single layer block scalable encoder, the
이때, 복잡도 판단부(602)는 고해상도 입력 동영상에서 고해상도로 보상하여 부호화할 블록을 선별하여 하나의 동영상을 고해상도와 저해상도로 분할하여 부호화하도록 할 수 있다. 이러한, 복잡도 판단부(602)의 구성에 대해서는 도 7을 통해 더욱 자세히 설명한다.In this case, the
또한, 저해상도 보상부(603)는 상기 저해상도 블록의 주변 블록 중에서 고해상도 블록이 있으면 저해상도로 변환하고, 상기 주변 블록이 모두 저해상도가 되면, 상기 주변 블록을 사용하여 상기 저해상도 블록을 보상할 수 있다. 이러한 저해상도 보상부(603)가 저해상도 블록을 보상하는 방법에 대해서는 도 8을 통해 더욱 자세히 설명한다.In addition, the
또한, 고해상도 보상부(604)는, 상기 고해상도 블록의 주변 화소 중에서 저해상도 블록이 있으면 고해상도로 변환하고, 상기 주변 블록이 모두 고해상도가 되면, 상기 주변 블록을 사용하여 상기 고해상도 블록을 보상할 수 있다. 이러한, 고해상도 보상부(604)가 상기 고해상도 블록을 보상하는 방법에 대해서는 도 9를 통해 더욱 자세히 설명한다.In addition, the
도 7은 본 발명의 다른 실시예에 따른 복잡도 판단부(602)의 개괄적인 모습을 도시한 도면이다. 7 is a view showing an overview of the
복잡도 판단부(602)는 도 7에 도시된 바와 같이 상기 저해상도 동영상을 고해상도 변환 영상으로 변환하는 확대 변환부(701)와, 상기 고해상도 입력 동영상의 블록들과 상기 고해상도 변환 동영상의 블록에 대응하는 상기 고해상도 변환 영상의 블록들의 복잡도를 비교하는 비교부(702) 및, 상기 복잡도가 일정량보다 큰 상기 고해상도 입력 동영상의 블록들만 부호화할 블록으로 선택하는 선택부(703)를 포함할 수 있다.The
이때, 상기 복잡도는 차 블록의 에너지 크기이고, 상기 차 블록의 에너지 크기는 상기 차 블록에 포함된 각 화소의 절대값의 합이나 상기 차 블록에 포함된 각 화소의 제곱의 합일 수 있다. 또한, 화소 간 차는 ABS일 수도 있고, 스퀘어의 차이(square of difference)일 수도 있으며 그 외 다양한 차를 구하는 방식을 모두 사용할 수 있다.In this case, the complexity is the energy size of the difference block, and the energy size of the difference block may be the sum of the absolute values of each pixel included in the difference block or the sum of the squares of the pixels included in the difference block. In addition, the difference between pixels may be ABS, a square of difference, and all other methods of obtaining various differences may be used.
도 8은 본 발명의 다른 실시예에 따른 저해상도 보상부(603)에서 저해상도 블록을 보상하는 상태의 일례이다.8 is an example of a state in which a low resolution block is compensated by the low
도 8에 도시된 바와 같이 보상할 저해상도 블록(801)의 주변 블록은 고해상도 블록(802)과 저해상도 블록(803)으로 구분될 수 있다.As shown in FIG. 8, neighboring blocks of the
이때, 저해상도 보상부(603)는 보상할 저해상도 블록(801)과 해상도가 다른 고해상도 블록(802)을 저해상도로 변화시킨다.In this case, the
그 다음에, 저해상도 보상부(603)는 저해상도로 변화된 고해상도 블록(802)과 저해상도 블록(803)을 사용하여 보상할 저해상도 블록(801)을 보상할 수 있다.Next, the
이때, 저해상도 보상부(603)가 보상에 사용하는 저해상도로 변화된 고해상도 블록(802)과 저해상도 블록(803)의 정보는 각 블록의 화소가 부호화된 후에 복원화된 복원 화소이다.In this case, the information of the
도 9는 본 발명의 다른 실시예에 따른 고해상도 보상부(604)에서 저해상도 블록을 보상하는 상태의 일례이다.9 is an example of a state in which a high
도 9에 도시된 바와 같이 보상할 고해상도 블록(901)의 주변 블록은 저해상도 블록(902)과 고해상도 블록(903)으로 구분될 수 있다.As shown in FIG. 9, neighboring blocks of the
이때, 고해상도 보상부(604)는 보상할 고해상도 블록(901)과 해상도가 다른 저해상도 블록(902)을 고해상도로 변화시킨다.In this case, the
그 다음에, 고해상도 보상부(604)는 고해상도로 변화된 저해상도 블록(902)과 고해상도 블록(903)을 사용하여 보상할 고해상도 블록(901)을 보상할 수 있다.Next, the
이때, 고해상도 보상부(604)가 보상에 사용하는 고해상도로 변화된 저해상도 블록(902)과 고해상도 블록(903)의 정보는 각 블록의 화소가 부호화된 후에 복원화된 복원 화소이다.In this case, the information of the
도 10은 본 발명의 다른 실시예에 따른 블록 단위 스케러블 복호화기의 개괄적인 모습을 도시한 도면이다. FIG. 10 is a diagram illustrating an overview of a block unit scalable decoder according to another embodiment of the present invention.
도 10을 참조하면 싱글 레이어의 블록 단위 스케러블 부호화기에 고해상도 동영상이 입력될 경우에, 복호화부(1001)는 부호화 동영상을 복호화하여 복호화 동영상을 생성하고, 변환부(1002)는 상기 복호화 동영상 중에 저해상도 블록을 고해상도로 변환하며, 보상부(1003)는 상기 복호화 동영상 중에 고해상도 블록을 보상하고, 결합부(1004)는 상기 저해상도 블록과 상기 고해상도 블록을 결합하며, 블록 스케일러(1005)는 결합된 상기 저해상도 블록과 상기 고해상도 블록의 해상도를 보정한다.Referring to FIG. 10, when a high resolution video is input to a block-level scalable encoder of a single layer, the
이때, 보상부(1003)는 결합부(1004)에서 결합된 상기 저해상도 블록과 상기 고해상도 블록을 참조 블록으로 사용하여 보상할 수 있다.In this case, the
이와 같이, 본 발명의 일실시예에 따른 블록 단위 스케러블 부호화, 복호화 방법은 동영상에서 해상도 변환 시 정보 손실의 가능성이 큰 영역만을 선택하여 고해상도로 부호화하고 다른 영역은 저해상도로 부호화함으로써 저해상도로 부호화한 것과 비슷한 용량으로 고화질 고해상도 영상을 복원할 수 있다. As described above, the block-based scalable coding and decoding method according to an embodiment of the present invention selects only a region having a high possibility of information loss during resolution conversion and encodes at high resolution and encodes another region at low resolution by encoding at a low resolution. You can reconstruct high definition images with high capacity.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined not only by the claims below but also by the equivalents of the claims.
도 1은 본 발명의 일실시예에 따른 블록 단위 스케러블 부호화기의 개괄적인 모습을 도시한 도면이다. 1 is a diagram illustrating an overview of a block-based scalable encoder according to an embodiment of the present invention.
도 2는 본 발명의 일실시예에 따른 고해상도 부호화부의 개괄적인 모습을 도시한 도면이다. 2 is a diagram illustrating an overview of a high resolution encoder according to an embodiment of the present invention.
도 3은 본 발명에 따른 고해상도 부호화부에서 부호화되는 블록들을 선택한 상태의 일례이다.3 is an example of a state in which blocks to be encoded in the high resolution encoder according to the present invention are selected.
도 4는 본 발명의 일실시예에 따른 블록 단위 스케러블 복호화기의 개괄적인 모습을 도시한 도면이다. 4 is a diagram illustrating an overview of a block-based scalable decoder according to an embodiment of the present invention.
도 5는 본 발명의 일실시예에 따른 고해상도 복호화부의 개괄적인 모습을 도시한 도면이다. 5 is a diagram illustrating an overview of a high resolution decoder according to an embodiment of the present invention.
도 6은 본 발명의 다른 실시예에 따른 블록 단위 스케러블 부호화기의 개괄적인 모습을 도시한 도면이다. FIG. 6 is a diagram illustrating an overview of a block-based scalable encoder according to another embodiment of the present invention.
도 7은 본 발명의 다른 실시예에 따른 복잡도 판단부의 개괄적인 모습을 도시한 도면이다. 7 is a view showing an overview of the complexity determination unit according to another embodiment of the present invention.
도 8은 본 발명의 다른 실시예에 따른 저해상도 보상부에서 저해상도 블록을 보상하는 상태의 일례이다.8 is an example of a state in which a low resolution block is compensated by a low resolution compensation unit according to another exemplary embodiment of the present invention.
도 9는 본 발명의 다른 실시예에 따른 고해상도 보상부에서 저해상도 블록을 보상하는 상태의 일례이다.9 is an example of a state in which a high resolution compensation unit compensates for a low resolution block according to another embodiment of the present invention.
도 10은 본 발명의 다른 실시예에 따른 블록 단위 스케러블 복호화기의 개괄 적인 모습을 도시한 도면이다.FIG. 10 is a diagram illustrating an overview of a block unit scalable decoder according to another embodiment of the present invention.
Claims (12)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080103226A KR100958253B1 (en) | 2008-10-21 | 2008-10-21 | Scalable encoder, decoder of block unit and method thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080103226A KR100958253B1 (en) | 2008-10-21 | 2008-10-21 | Scalable encoder, decoder of block unit and method thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20100043955A KR20100043955A (en) | 2010-04-29 |
KR100958253B1 true KR100958253B1 (en) | 2010-05-17 |
Family
ID=42218864
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020080103226A KR100958253B1 (en) | 2008-10-21 | 2008-10-21 | Scalable encoder, decoder of block unit and method thereof |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100958253B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019059721A1 (en) * | 2017-09-21 | 2019-03-28 | 에스케이텔레콤 주식회사 | Image encoding and decoding using resolution enhancement technique |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040252767A1 (en) | 2001-10-26 | 2004-12-16 | Bruls Wilhelmus Hendrikus Alfonsus | Coding |
KR20060108887A (en) * | 2005-04-14 | 2006-10-18 | 삼성전자주식회사 | Apparatus and method of video encoding and decoding for minimizing random access delay |
KR20070031327A (en) * | 2004-06-11 | 2007-03-19 | 닛본 덴끼 가부시끼가이샤 | Moving image encoder and moving image decoder, and its method and program |
JP2008022531A (en) | 2006-06-15 | 2008-01-31 | Victor Co Of Japan Ltd | Video signal hierarchic decoder, decoding method and decoding program |
-
2008
- 2008-10-21 KR KR1020080103226A patent/KR100958253B1/en not_active IP Right Cessation
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040252767A1 (en) | 2001-10-26 | 2004-12-16 | Bruls Wilhelmus Hendrikus Alfonsus | Coding |
KR20070031327A (en) * | 2004-06-11 | 2007-03-19 | 닛본 덴끼 가부시끼가이샤 | Moving image encoder and moving image decoder, and its method and program |
KR20060108887A (en) * | 2005-04-14 | 2006-10-18 | 삼성전자주식회사 | Apparatus and method of video encoding and decoding for minimizing random access delay |
JP2008022531A (en) | 2006-06-15 | 2008-01-31 | Victor Co Of Japan Ltd | Video signal hierarchic decoder, decoding method and decoding program |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019059721A1 (en) * | 2017-09-21 | 2019-03-28 | 에스케이텔레콤 주식회사 | Image encoding and decoding using resolution enhancement technique |
Also Published As
Publication number | Publication date |
---|---|
KR20100043955A (en) | 2010-04-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20240056611A1 (en) | Image processing device and image processing method | |
KR101632598B1 (en) | Backward-compatible coding for ultra high definition video signals with enhanced dynamic range | |
CN105915900B (en) | Image processing apparatus and method | |
US7899115B2 (en) | Method for scalably encoding and decoding video signal | |
KR101056096B1 (en) | Method and system for motion compensated frame rate up-conversion for both compression and decompression video bitstreams | |
US8073269B2 (en) | Image decoding apparatus and image decoding method | |
US9438849B2 (en) | Systems and methods for transmitting video frames | |
KR20150140842A (en) | Hybrid backward-compatible signal encoding and decoding | |
US20130243089A1 (en) | Device for encoding ultra-high definition image and method thereof, and decoding device and method thereof | |
KR20060085157A (en) | Method and apparatus for encoding/decoding video signal using prediction information of intra-mode macro blocks of base layer | |
US8638393B2 (en) | Apparatus and method for converting image in an image processing system | |
CN106973295B (en) | Video encoding method/apparatus and video decoding method/apparatus | |
KR101158437B1 (en) | Method for scalably encoding and decoding video signal | |
US20140269920A1 (en) | Motion Estimation Guidance in Transcoding Operation | |
JPH07212761A (en) | Hierarchical coder and hierarchical decoder | |
KR100883604B1 (en) | Method for scalably encoding and decoding video signal | |
US20130077886A1 (en) | Image decoding apparatus, image coding apparatus, image decoding method, image coding method, and program | |
JP2009296300A (en) | Image encoding device and method | |
KR100999818B1 (en) | Scalable encoder, decoder and the thereof method using frame sorting | |
JP2016208281A (en) | Video encoding device, video decoding device, video encoding method, video decoding method, video encoding program and video decoding program | |
KR100958253B1 (en) | Scalable encoder, decoder of block unit and method thereof | |
JP6379036B2 (en) | Transmission device, image transmission method, and image transmission / reception method | |
US20080181314A1 (en) | Image coding apparatus and image coding method | |
KR101711650B1 (en) | Apparatus and method for converting image in an image processing system | |
KR100708209B1 (en) | Scalable encoding and decoding method of color video, and apparatus thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20130325 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20140303 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20150216 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20160404 Year of fee payment: 7 |
|
LAPS | Lapse due to unpaid annual fee |