WO2017047901A1 - 스크린 콘텐츠 코딩을 위한 메모리 관리 방법 및 장치 - Google Patents

스크린 콘텐츠 코딩을 위한 메모리 관리 방법 및 장치 Download PDF

Info

Publication number
WO2017047901A1
WO2017047901A1 PCT/KR2016/005144 KR2016005144W WO2017047901A1 WO 2017047901 A1 WO2017047901 A1 WO 2017047901A1 KR 2016005144 W KR2016005144 W KR 2016005144W WO 2017047901 A1 WO2017047901 A1 WO 2017047901A1
Authority
WO
WIPO (PCT)
Prior art keywords
ibc
present
screen content
storage unit
video
Prior art date
Application number
PCT/KR2016/005144
Other languages
English (en)
French (fr)
Inventor
류호찬
Original Assignee
디지털인사이트주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 디지털인사이트주식회사 filed Critical 디지털인사이트주식회사
Publication of WO2017047901A1 publication Critical patent/WO2017047901A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder

Definitions

  • the present invention relates to video encoding and decoding technology, and more particularly, to a memory management method and technology for screen content coding.
  • Screen content refers to an image or video created through a computer or electronic device. Screen content is mainly composed of straight lines, figures, text information, etc., and it is characterized by not many kinds of colors represented on one screen.
  • the image decoding apparatus performs an efficient decoding by using a separate memory for performing IBC (Intra Block Copy) during the decoding process.
  • IBC Intra Block Copy
  • a memory for storing an unfiltered image is required, and an image for which no filtering is performed may be additionally stored in the reconstructed image storage unit.
  • the additional memory space for the IBC of the reconstructed image storage unit may vary according to the search range of the IBC.
  • FIG. 1 illustrates a decoding apparatus including an IBC unit according to an embodiment of the present invention.
  • FIG. 2 is a diagram illustrating a restoration area to be stored for performing IBC in screen content coding according to an embodiment of the present invention.
  • FIG. 3 is a diagram illustrating a restoration area to be stored according to an IBC search range in screen content coding according to an embodiment of the present invention.
  • FIG. 4 is a diagram illustrating a restoration area to be stored according to tile division and IBC search range in screen content coding according to an embodiment of the present invention.
  • FIG. 5 is a diagram illustrating a reconstructed image storage unit according to an embodiment of the present invention.
  • FIG. 6 is a flowchart illustrating a decoding order of an IBC mode according to an embodiment of the present invention.
  • a part when a part is connected to another part, this includes not only the case where the part is directly connected, but also the case where the part is electrically connected with another element in between.
  • a part when a part includes a certain component, this means that it may further include other components, without excluding other components unless otherwise stated.
  • first and second may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another.
  • each component shown in the embodiments of the present invention are shown independently to represent different characteristic functions, and do not mean that each component is composed of separate hardware or one software unit. That is, each component is described by listing each component for convenience of description, and at least two of the components may be combined to form one component, or one component may be divided into a plurality of components to perform a function. The integrated and separated embodiments of each of these components are also included within the scope of the present invention without departing from the spirit of the invention.
  • the video decoding apparatus (Video Decoding Apparatus) to be described below is a personal computer (PC), a notebook computer, a portable multimedia player (PMP), a wireless communication terminal (Wireless Communication Terminal), a smart phone (Smart Phone) , A device included in a server terminal such as a TV application server and a service server, and a user terminal such as various devices, a communication device such as a communication modem for performing communication with a wired / wireless communication network, or between screens for decoding or decoding an image.
  • Various devices may include various programs for predicting the screen and a memory for storing data, a microprocessor for executing and controlling a program, and the like.
  • the image encoded in the bitstream by the encoder is real-time or non-real-time through the wired or wireless communication network, such as the Internet, local area wireless communication network, wireless LAN network, WiBro network, mobile communication network or the like, cable, universal serial bus (USB, It may be transmitted to a video decoding apparatus through various communication interfaces such as a universal serial bus), decoded, reconstructed, and played back.
  • wired or wireless communication network such as the Internet, local area wireless communication network, wireless LAN network, WiBro network, mobile communication network or the like, cable, universal serial bus (USB, It may be transmitted to a video decoding apparatus through various communication interfaces such as a universal serial bus), decoded, reconstructed, and played back.
  • Screen content refers to an image or video made through a computer or electronic device.
  • SCC Screen Contents Coding
  • IBC Intra Block Copy
  • a video may be composed of a series of pictures, and each picture may be divided into a coding unit such as a block.
  • a coding unit such as a block.
  • FIG. 1 illustrates a decoding apparatus including an IBC unit according to an embodiment of the present invention.
  • the decoding apparatus supporting decoding of the screen content image includes an entropy decoder 120, an inverse quantizer 130, an inverse transform unit 140, an intra prediction unit 150, an inter prediction unit 160, and an IBC unit ( 170, a loop filter unit 180, and a reconstructed image storage unit 190.
  • the residual signal may be obtained through the entropy decoder 120, the inverse quantizer 130, and the inverse transformer 140.
  • the residual signal is reconstructed by adding the prediction block generated by the intra prediction unit 150, the inter prediction unit 160, and the IBC unit 170.
  • the filter is stored in the reconstructed image storage unit 190 to be used as a reference image or output as a reconstructed image 195.
  • the IBC unit 170 is a device for performing IBC, which is a technique of screen content coding. In the case of a block that performs IBC, the IBC unit 170 stores values before the loop filter is performed because it refers to values before the loop filter in the same picture is not performed. Memory required The restored values may be stored in the restored image storage unit 190.
  • a part when a part is connected to another part, this includes not only the case where the part is directly connected, but also the case where the part is electrically connected with another element in between.
  • a part when a part includes a certain component, this means that it may further include other components, without excluding other components unless otherwise stated.
  • first and second may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another.
  • each component shown in the embodiments of the present invention are shown independently to represent different characteristic functions, and do not mean that each component is composed of separate hardware or one software unit. That is, each component is described by listing each component for convenience of description, and at least two of the components may be combined to form one component, or one component may be divided into a plurality of components to perform a function. The integrated and separated embodiments of each of these components are also included within the scope of the present invention without departing from the spirit of the invention.
  • the video decoding apparatus (Video Decoding Apparatus) to be described below is a personal computer (PC), a notebook computer, a portable multimedia player (PMP), a wireless communication terminal (Wireless Communication Terminal), a smart phone (Smart Phone) , A device included in a server terminal such as a TV application server and a service server, and a user terminal such as various devices, a communication device such as a communication modem for performing communication with a wired / wireless communication network, or between screens for decoding or decoding an image.
  • Various devices may include various programs for predicting the screen and a memory for storing data, a microprocessor for executing and controlling a program, and the like.
  • the image encoded in the bitstream by the encoder is real-time or non-real-time through the wired or wireless communication network, such as the Internet, local area wireless communication network, wireless LAN network, WiBro network, mobile communication network or the like, cable, universal serial bus (USB, It may be transmitted to a video decoding apparatus through various communication interfaces such as a universal serial bus), decoded, reconstructed, and played back.
  • wired or wireless communication network such as the Internet, local area wireless communication network, wireless LAN network, WiBro network, mobile communication network or the like, cable, universal serial bus (USB, It may be transmitted to a video decoding apparatus through various communication interfaces such as a universal serial bus), decoded, reconstructed, and played back.
  • Screen content refers to an image or video made through a computer or electronic device.
  • SCC Screen Contents Coding
  • IBC Intra Block Copy
  • a video may be composed of a series of pictures, and each picture may be divided into a coding unit such as a block.
  • a coding unit such as a block.
  • FIG. 2 is a diagram illustrating a restoration area to be stored for performing IBC in screen content coding according to an embodiment of the present invention.
  • the loop filter is applied to the reconstructed region before the current block 220. It must be saved before it is run.
  • FIG. 3 is a diagram illustrating a restoration area to be stored according to an IBC search range in screen content coding according to an embodiment of the present invention.
  • the current block 320 is a block using IBC
  • the current block 320 is restored by referring to the reference block 310 in the restored area.
  • the search range for determining the reference block may vary according to a profile, a level, or the like
  • the recovery area 330 to be stored according to the IBC search range may be variable.
  • FIG. 4 is a diagram illustrating a restoration area to be stored according to tile division and IBC search range in screen content coding according to an embodiment of the present invention.
  • the current block 415 to be coded in the first tile 401, the current block 430 to be coded in the second tile 402, and the coding of the third tile 403 are to be coded.
  • the current block 445 to be coded and the current block 460 to be coded of the fourth tile 404 refer to blocks 410, 425, 440, and 455, respectively, and may be decoded in parallel.
  • the restored values to be stored in the IBC storage may be values in the areas 420, 430, 450, and 465 according to the search range.
  • FIG. 5 is a diagram illustrating a reconstructed image storage unit according to an embodiment of the present invention.
  • the reconstructed image storage unit 510 may be divided into a long-term picture storage unit 520 and a short-term picture storage unit 530.
  • the storage unit 540 for the IBC may be located in the long-term picture storage unit 520 of the reconstructed image storage unit 540, and the memory size 550 may be variable.
  • FIG. 6 is a flowchart illustrating a decoding order of an IBC mode according to an embodiment of the present invention.
  • the current block is decoded using the reference block of the IBC storage unit (610), and whether the block outside the search range of the current block is found in the IBC storage unit (620). If there is a block exceeding the search range of the current block, the block is removed from the IBC storage unit (630). If the block does not exceed the search range of the current block, the IBC storage unit is maintained. When decoding of the current block is completed, the current block is stored in the IBC storage 640 to be used as a reference block of the next block.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 스크린 콘텐츠 영상의 복호화에 있어, 인트라 블록 카피(IBC)의 탐색 범위에 따라 크기가 가변적인 IBC 저장부를 사용함으로써, 스크린 콘텐츠 영상 복호화를 효율적으로 수행하는 비디오 복호화 장치를 포함한다.

Description

스크린 콘텐츠 코딩을 위한 메모리 관리 방법 및 장치
본 발명은 영상 부호화 및 복호화 기술에 관한 것으로, 더욱 상세하게는 스크린 콘텐츠 코딩을 위한 메모리 관리 방법 및 기술에 관한 것이다.
4K-UHD, 8K-UHD급의 고해상도 비디오에 대한 시장의 수요가 늘어남에 따라, 고해상도 비디오를 효율적으로 압축할 수 있는 압축 표준이 필요하게 되었다. 이러한 시장의 요구에 따라 ISO/IEC의 MPEG (Moving Picture Expert Group)과 ITU-T의 VCEG (Video Coding Expert Group)이 공동으로 JCT-VC (Joint Collaborative Team on Video Coding)를 결성하여, HEVC (High Efficiency Video Coding)이라는 차세대 비디오 압축 표준이 2013년 1월 개발이 완료되었다. 또한, 확장된 포맷 및 높은 비트심도를 지원하기 위한 RExt (Range Extension), 계층적 영상 부호화를 위한 SHVC (Scalable HEVC), MV-HEVC (Multi-view HEVC)가 제정되었으며, 스크린 콘텐츠 (Screen Contents)를 위한 압축방법에 대한 표준이 진행되고 있다.
스크린 콘텐츠란 컴퓨터나 전자장비 등을 통해 만들어진 이미지 또는 영상을 의미한다. 스크린 콘텐츠는 주로 직선, 도형, 텍스트 정보 등으로 이루어져있으며, 한 화면에서 표현되는 색의 종류가 많지 않은 것이 특징이다.
본 발명의 일부 실시예는 효과적인 스크린 콘텐츠 영상 복호화를 위한 메모리 관리 방법 및 장치를 제공하는 것을 그 목적으로 한다.
다만 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예에 따른 영상 복호화 장치는 복호화 과정에서 IBC (Intra Block Copy) 수행을 위한 별도의 메모리를 사용하여 효율적인 복호화를 수행한다. IBC 모드 수행을 위해서는 필터링되지 않은 영상을 저장할 메모리가 필요하며, 복원 영상 저장부에 필터링이 수행되지 않은 영상을 추가로 저장할 수 있다. 복원 영상 저장부의 IBC를 위한 추가적인 메모리 공간은 IBC의 탐색범위에 따라 가변적일 수 있다.
전술한 본 발명의 과제 해결 수단에 의하면, 복호화기에서 IBC 수행에 필요한 추가적인 메모리를 효과적으로 사용할 수 있다.
도 1은 본 발명의 일 실시예에 따른 IBC 부를 포함하는 복호화 장치를 도시한다.
도 2는 본 발명의 일 실시예에 따른 스크린 콘텐츠 코딩에서 IBC 수행을 위해 저장되어야 하는 복원 영역을 도시한 도면이다.
도 3은 본 발명의 일 실시예에 따른 스크린 콘텐츠 코딩에서 IBC 탐색범위에 따라 저장되어야 하는 복원 영역을 도시한 도면이다.
도 4는 본 발명의 일 실시예에 따른 스크린 콘텐츠 코딩에서 타일 분할 및 IBC 탐색범위에 따라 저장되어야 하는 복원 영역을 도시한 도면이다.
도 5는 본 발명의 일 실시예에 따른 복원영상 저장부를 도시한 도면이다.
도 6은 본 발명의 일 실시예에 따른 IBC 모드의 복호화 순서를 나타낸 순서도이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 연결되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 전기적으로 연결되어 있는 경우도 포함한다. 또한, 어떤 부분이 어떤 구성요소를 포함한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
본원 명세서 전체에서, 어떤 부분이 어떤 구성요소를 포함한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다. 본원 명세서 전체에서 사용되는 정도의 용어 ~(하는) 단계 또는 ~의 단계는 ~를 위한 단계를 의미하지 않는다.
또한, 제 1, 제 2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
덧붙여, 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 기술되고, 각 구성부 중 적어도 두 개의 구성부가 합쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있다. 이러한 각 구성부의 통합된 실시 예 및 분리된 실시 예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리 범위에 포함된다.
먼저, 본 출원에서 사용되는 용어를 간략히 설명하면 다음과 같다.
이하에서 후술할 복호화 장치(Video Decoding Apparatus)는 개인용 컴퓨터(PC, Personal Computer), 노트북 컴퓨터, 휴대형 멀티미디어 플레이어(PMP, Portable Multimedia Player), 무선 통신 단말기(Wireless Communication Terminal), 스마트 폰(Smart Phone), TV 응용 서버와 서비스 서버 등 서버 단말기에 포함된 장치일 수 있으며, 각종 기기 등과 같은 사용자 단말기, 유무선 통신망과 통신을 수행하기 위한 통신 모뎀 등의 통신 장치, 영상을 복호화하거나 복호화를 위해 화면 간 또는 화면 내 예측하기 위한 각종 프로그램과 데이터를 저장하기 위한 메모리, 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하는 다양한 장치를 의미할 수 있다.
또한, 부호화기에 의해 비트스트림(bitstream)으로 부호화된 영상은 실시간 또는 비실시간으로 인터넷, 근거리 무선 통신망, 무선랜망, 와이브로망, 이동통신망 등의 유무선 통신망 등을 통하거나 케이블, 범용 직렬 버스(USB, Universal Serial Bus) 등과 같은 다양한 통신 인터페이스를 통해 영상 복호화 장치로 전송되어 복호화되어 영상으로 복원되고 재생될 수 있다.
스크린 콘텐츠(Screen Contents)란 컴퓨터나 전자장비 등을 통해 만들어진 이미지 또는 영상을 의미한다.
스크린 콘텐츠 코딩(SCC, Screen Contents Coding)은 컴퓨터나 전자장비 등을 통해 만들어진 이미지 또는 영상을 부호화 또는 복호화하는 방법이다.
IBC (Intra Block Copy)는 SCC 기술 중 하나로, 코딩하려는 블록과 같은 픽쳐내의 블록을 참조하여 코딩하는 방법이다.
통상적으로 동영상은 일련의 픽쳐(Picture)들로 구성될 수 있으며, 각 픽쳐들은 블록(Block)과 같은 코딩 유닛(coding unit)으로 분할될 수 있다. 또한, 이하에 기재된 픽쳐라는 용어는 영상(Image), 프레임(Frame) 등과 같은 동등한 의미를 갖는 다른 용어로 대치되어 사용될 수 있음을 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 이해할 수 있을 것이다.
이하, 첨부한 도면들을 참조하여, 본 발명의 실시 예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명의 일 실시예에 따른 IBC 부를 포함하는 복호화 장치를 도시한다.
스크린 콘텐츠 영상의 복호화를 지원하는 복호화 장치는 엔트로피 복호화부(120), 역양자화부(130), 역변환부(140), 화면 내 예측부(150), 화면 간 예측부(160), IBC 부(170), 루프 필터부(180), 복원 영상 저장부(190)를 포함한다.
복호화기의 입력으로 비트스트림(110)이 주어지면 엔트로피 복호화부(120), 역양자화부(130), 역변환부(140)를 통해 잔차신호를 얻을 수 있다. 이 잔차신호는 화면 내 예측부(150), 화면 간 예측부(160), IBC부(170)에서 생성된 예측블록과 더해져 복원된다. 이후, 루프 필터부(180)를 통해 필터링이 수행된 후 복원 영상 저장부(190)에 저장되어 참조영상으로 쓰이거나 복원영상(195)으로 출력된다.
IBC 부(170)는 스크린 콘텐츠 코딩의 한 기술인 IBC를 수행하기 위한 장치로, IBC를 수행하는 블록일 경우 동일 픽쳐내의 루프 필터가 수행되지 전의 값들을 참조하기 때문에 루프필터가 수행되기 전의 값들을 저장할 메모리가 필요하다. 여기서 복원된 값들은 복원 영상 저장부(190)에 저장될 수 있다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 연결되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 전기적으로 연결되어 있는 경우도 포함한다. 또한, 어떤 부분이 어떤 구성요소를 포함한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
본원 명세서 전체에서, 어떤 부분이 어떤 구성요소를 포함한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다. 본원 명세서 전체에서 사용되는 정도의 용어 ~(하는) 단계 또는 ~의 단계는 ~를 위한 단계를 의미하지 않는다.
또한, 제 1, 제 2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
덧붙여, 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 기술되고, 각 구성부 중 적어도 두 개의 구성부가 합쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있다. 이러한 각 구성부의 통합된 실시 예 및 분리된 실시 예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리 범위에 포함된다.
먼저, 본 출원에서 사용되는 용어를 간략히 설명하면 다음과 같다.
이하에서 후술할 복호화 장치(Video Decoding Apparatus)는 개인용 컴퓨터(PC, Personal Computer), 노트북 컴퓨터, 휴대형 멀티미디어 플레이어(PMP, Portable Multimedia Player), 무선 통신 단말기(Wireless Communication Terminal), 스마트 폰(Smart Phone), TV 응용 서버와 서비스 서버 등 서버 단말기에 포함된 장치일 수 있으며, 각종 기기 등과 같은 사용자 단말기, 유무선 통신망과 통신을 수행하기 위한 통신 모뎀 등의 통신 장치, 영상을 복호화하거나 복호화를 위해 화면 간 또는 화면 내 예측하기 위한 각종 프로그램과 데이터를 저장하기 위한 메모리, 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하는 다양한 장치를 의미할 수 있다.
또한, 부호화기에 의해 비트스트림(bitstream)으로 부호화된 영상은 실시간 또는 비실시간으로 인터넷, 근거리 무선 통신망, 무선랜망, 와이브로망, 이동통신망 등의 유무선 통신망 등을 통하거나 케이블, 범용 직렬 버스(USB, Universal Serial Bus) 등과 같은 다양한 통신 인터페이스를 통해 영상 복호화 장치로 전송되어 복호화되어 영상으로 복원되고 재생될 수 있다.
스크린 콘텐츠(Screen Contents)란 컴퓨터나 전자장비 등을 통해 만들어진 이미지 또는 영상을 의미한다.
스크린 콘텐츠 코딩(SCC, Screen Contents Coding)은 컴퓨터나 전자장비 등을 통해 만들어진 이미지 또는 영상을 부호화 또는 복호화하는 방법이다.
IBC (Intra Block Copy)는 SCC 기술 중 하나로, 코딩하려는 블록과 같은 픽쳐내의 블록을 참조하여 코딩하는 방법이다.
통상적으로 동영상은 일련의 픽쳐(Picture)들로 구성될 수 있으며, 각 픽쳐들은 블록(Block)과 같은 코딩 유닛(coding unit)으로 분할될 수 있다. 또한, 이하에 기재된 픽쳐라는 용어는 영상(Image), 프레임(Frame) 등과 같은 동등한 의미를 갖는 다른 용어로 대치되어 사용될 수 있음을 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 이해할 수 있을 것이다.
이하, 첨부한 도면들을 참조하여, 본 발명의 실시 예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 2는 본 발명의 일 실시예에 따른 스크린 콘텐츠 코딩에서 IBC 수행을 위해 저장되어야 하는 복원 영역을 도시한 도면이다.
현재 블록(220)이 IBC를 사용하는 블록일 경우, 현재 픽쳐(200) 내의 복원된 영역(230)에서 참조 블록(210)이 결정되므로, 현재 블록(220) 이전에 복원된 영역은 루프필터가 수행되기 전에 저장되어야 한다.
도 3은 본 발명의 일 실시예에 따른 스크린 콘텐츠 코딩에서 IBC 탐색범위에 따라 저장되어야 하는 복원 영역을 도시한 도면이다.
현재 블록(320)이 IBC를 사용하는 블록일 경우, 복원된 영역 내에서 참조 블록(310)을 참조하여 현재 블록(320)을 복원한다. 이 경우, 참조 블록을 결정하기 위한 탐색범위는 프로파일이나 레벨 등에 따라 가변적일 수 있으므로, IBC 탐색범위에 따라 저장되어야 하는 복원 영역(330)은 가변적일 수 있다.
도 4는 본 발명의 일 실시예에 따른 스크린 콘텐츠 코딩에서 타일 분할 및 IBC 탐색범위에 따라 저장되어야 하는 복원 영역을 도시한 도면이다.
하나의 픽쳐가 4개의 타일로 분할되었을 경우, 첫 번째 타일(401)의 코딩하려는 현재블록(415), 두 번째 타일(402)의 코딩하려는 현재블록(430), 세 번째 타일(403)의 코딩하려는 현재블록(445), 네 번째 타일(404)의 코딩하려는 현재블록(460)이 각각 410, 425, 440, 455 블록을 참조하며, 병렬적으로 복호화 될 수 있다. 이러한 경우, IBC 저장부에 저장되어야 하는 복원된 값들은 탐색 범위에 따라 420, 430, 450, 465 영역의 값들일 수 있다.
도 5는 본 발명의 일 실시예에 따른 복원영상 저장부를 도시한 도면이다.
복원영상 저장부(510)은 Long-term picture 저장부(520)와 Short-term picture 저장부(530)로 나눌 수 있다. IBC를 위한 저장부(540)는 복원영상 저장부(540)의 Long-term picture 저장부(520)에 위치할 수 있으며, 메모리 크기(550)가 가변적일 수 있다.
도 6은 본 발명의 일 실시예에 따른 IBC 모드의 복호화 순서를 나타낸 순서도이다.
IBC 저장부의 참조블록을 이용해 현재 블록의 복호화를 수행(610)하고, IBC 저장부에 현재 블록의 탐색 범위를 벗어나는 블록이 있는지 확인(620)을 한다. 현재 블록의 탐색 범위를 넘아가는 블록이 있으면 IBC 저장부에서 해당 블록을 제거(630)하며, 현재 블록의 탐색 범위를 넘어가지 않는다면 IBC 저장부는 그대로 유지한다. 현재 블록이 복호화가 완료되면 현재 블록을 IBC 저장부에 저장(640)하여 다음 블록의 참조블록으로 사용될 수 있게 한다.
비디오 부/복호화 관련산업으로 방송장비 제조, 단말제조 등 제조업체나 원천기술 관련 산업에서 이용가능.
해당없음.

Claims (3)

  1. 비디오 복호화 장치에 있어서.
    스크린 콘텐츠 영상의 복호화를 위해 IBC저장부를 사용하는 비디오 복호화 장치.
  2. 제 1항에 있어서.
    비디오 복호화 장치에서 복원영상 저장부의 Long-term picture 저장부에 위치하는 IBC 저장부.
  3. 제 2항에 있어서.
    IBC의 탐색 범위에 따라 크기가 가변적인 IBC 저장부.
PCT/KR2016/005144 2015-09-15 2016-05-16 스크린 콘텐츠 코딩을 위한 메모리 관리 방법 및 장치 WO2017047901A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0130114 2015-09-15
KR1020150130114A KR20170032598A (ko) 2015-09-15 2015-09-15 스크린 콘텐츠 코딩을 위한 메모리 관리 방법 및 장치

Publications (1)

Publication Number Publication Date
WO2017047901A1 true WO2017047901A1 (ko) 2017-03-23

Family

ID=58289450

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/005144 WO2017047901A1 (ko) 2015-09-15 2016-05-16 스크린 콘텐츠 코딩을 위한 메모리 관리 방법 및 장치

Country Status (2)

Country Link
KR (1) KR20170032598A (ko)
WO (1) WO2017047901A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100226439A1 (en) * 2009-03-06 2010-09-09 Tatsuro Juri Image decoding apparatus and image decoding method
US20140301465A1 (en) * 2013-04-05 2014-10-09 Texas Instruments Incorporated Video Coding Using Intra Block Copy
US20150055703A1 (en) * 2013-08-26 2015-02-26 Qualcomm Incorporated Determining regions when performing intra block copying
US20150063440A1 (en) * 2013-08-30 2015-03-05 Qualcomm Incorporated Constrained intra prediction in video coding
KR20150043221A (ko) * 2013-10-12 2015-04-22 삼성전자주식회사 인트라 블록 복사 예측을 이용한 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100226439A1 (en) * 2009-03-06 2010-09-09 Tatsuro Juri Image decoding apparatus and image decoding method
US20140301465A1 (en) * 2013-04-05 2014-10-09 Texas Instruments Incorporated Video Coding Using Intra Block Copy
US20150055703A1 (en) * 2013-08-26 2015-02-26 Qualcomm Incorporated Determining regions when performing intra block copying
US20150063440A1 (en) * 2013-08-30 2015-03-05 Qualcomm Incorporated Constrained intra prediction in video coding
KR20150043221A (ko) * 2013-10-12 2015-04-22 삼성전자주식회사 인트라 블록 복사 예측을 이용한 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치

Also Published As

Publication number Publication date
KR20170032598A (ko) 2017-03-23

Similar Documents

Publication Publication Date Title
CN113016180B (zh) 用于视频编码和解码的虚拟管线
CN113840143A (zh) 编码器、解码器以及使用ibc专用缓冲区的对应方法
WO2013070006A1 (ko) 스킵모드를 이용한 동영상 부호화 및 복호화 방법 및 장치
CN115665408B (zh) 用于跨分量线性模型预测的滤波方法和装置
WO2012033344A2 (ko) 효과적인 화면내 예측모드 집합 선택을 이용한 영상 부호화/복호화 방법 및 장치
WO2011126288A2 (en) Method and apparatus for encoding and decoding image and method and apparatus for decoding image using adaptive coefficient scan order
WO2012091461A2 (ko) 주변블록의 특징벡터를 이용한 영상 부호화/복호화 방법 및 장치
EP2556673A2 (en) Method and apparatus for encoding and decoding image and method and apparatus for decoding image using adaptive coefficient scan order
WO2018070556A1 (ko) 정방형 또는 직방형 블록의 화면 내 예측모드 정보 추출 방법 및 장치
WO2011010857A2 (en) Method and apparatus for coding and decoding color channels in layered video coding and decoding
CN113508592A (zh) 编码器、解码器及相应的帧间预测方法
CN113170210B (zh) 视频编码和解码中的仿射模式信令
WO2016114539A1 (ko) 영상의 부호화 및 복호화 방법 및 장치
WO2011005063A2 (en) Spatial prediction method and apparatus in layered video coding
WO2018074626A1 (ko) 적응적 보간 필터를 사용하는 비디오 코딩 방법 및 장치
CN114026864A (zh) 用于几何分割模式的色度样本权重推导
CN114846789B (zh) 用于指示条带的图像分割信息的解码器及对应方法
KR20170125154A (ko) 곡선 화면 내 예측을 사용하는 비디오 복호화 방법 및 장치
CN112740703B (zh) 编码器、解码器和用于变换处理的对应方法
WO2010147429A2 (ko) 의사 난수 필터를 이용한 영상 필터링 방법 및 장치
CN118264805A (zh) 视频译码中进行色度帧内预测的方法及装置
WO2017047901A1 (ko) 스크린 콘텐츠 코딩을 위한 메모리 관리 방법 및 장치
WO2010047492A2 (ko) 동영상 부호화 장치 및 이를 위한 영상 신호의 2차원 정렬 변환 장치 및 방법, 및 이를 위한 기록 매체
WO2012119571A1 (zh) 一种帧内预测方法和装置
WO2017204398A1 (ko) 정방형 또는 직방형 블록 분할을 사용하는 비디오 복호화 방법 및 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16846723

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16846723

Country of ref document: EP

Kind code of ref document: A1