KR101512833B1 - 비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치 - Google Patents

비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치 Download PDF

Info

Publication number
KR101512833B1
KR101512833B1 KR1020107010573A KR20107010573A KR101512833B1 KR 101512833 B1 KR101512833 B1 KR 101512833B1 KR 1020107010573 A KR1020107010573 A KR 1020107010573A KR 20107010573 A KR20107010573 A KR 20107010573A KR 101512833 B1 KR101512833 B1 KR 101512833B1
Authority
KR
South Korea
Prior art keywords
block
tone mapping
enhancement layer
deblocking filter
mapping
Prior art date
Application number
KR1020107010573A
Other languages
English (en)
Other versions
KR20100081348A (ko
Inventor
펑 인
지앙총 루오
용 잉 가오
유 웬 우
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20100081348A publication Critical patent/KR20100081348A/ko
Application granted granted Critical
Publication of KR101512833B1 publication Critical patent/KR101512833B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/36—Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치가 제공된다. 상기 방법 및 장치는 화상의 적어도 일부분에 대하여 강화층을 인코딩하기 위한 인코더(100)를 이용한다. 비트 깊이 확장성을 위해 디블러킹 필터가 강화층에 적용된다(500). 화상의 적어도 일부분에 대하여 강화층을 디코딩하기 위한 디코딩 방법 및 장치가 기재되며, 디코딩 프로세스 동안 디블러킹 필터가 비트 깊이 확장성을 위해 상기 강화층에 적용된다(600). 또한, 화상의 적어도 한 블럭에 대한 이미지 데이터를 인코딩하기 위한 인코더 및 방법이 기재되며, 디블러킹 필터(117)가 비트 깊이 확장성을 위해 인트라-층 텍스처 예측을 위한 로컬 역톤 맵핑에 의해 발생되는 코딩 아티팩트를 제거한다. 화상의 적어도 한 블럭에 대한 이미지 데이터를 디코딩하기 위한 디코딩 방법 및 장치가 기재되며, 디블러킹 필터(230, 237, 435)가 비트 깊이 확장성을 위해 인트라-층 텍스처 예측을 위한 로컬 역톤 맵핑에 의해 발생되는 코딩 아티팩트를 제거한다.

Description

비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치{Methods and Apparatus for Artifact Removal for Bit Depth Scalability}
본 출원은 U.S. Provisional Application Serial No. 60/980,322, filed October 16, 2007에 대한 권리를 주장하며, 이것은 여기서 그 전체가 참조로서 통합된다. 나아가, 본 출원은 비-가출원(non-provisional application), Attorney Docket No. PU080158, entitled "METHOD AND APPARATUS FOR ARTIFACT REMOVAL FOR BIT DEPTH SCALABILITY"에 관련되며, 이 또한 U.S. Provisional Application Serial No. 60/980,322, filed October 16, 2007의 권리를 주장하며, 통상 여기서 참조로서 지정, 통합되고 이와 함께 동시에 제출된다.
본 발명 사상은 일반적으로 비디오 인코딩 및 디코딩에 관련되고, 더욱 구체적으로는 비트 깊이 확장성(bit depth scalability)을 위한 아티팩트 제거(artifact removal)를 위한 방법 및 장치에 관련된다.
비트 깊이(bit depth)는 한 픽셀을 유지하는 데 사용되는 비트 수를 말한다. 때때로 "컬러 깊이" 및/또는 "픽셀 깊이"라고도 불리는, 비트 깊이는 한번에 디스플레이될 수 있는 컬러의 최대 수를 결정한다. 최근, 의료 이미지 프로세싱, 영화제장 및 제작후 편집에서의 디지털 영화 작업흐름 및 홈 시어터 관련 애플리케이션을 포함하되 이에 한정되지 않는 많은 적용 분야에 있어, 8보다 큰 비트 깊이를 갖는 디지털 이미지 및 디지털 비디오(이하 통칭하여 "디지털 이미지"라고 함)가 더욱 더 바람직하다.
비트 깊이 확장성은 미래 언젠가 기존 8 비트 깊이 및 고 비트 깊이 디지털 이미징 시스템이 시장에 동시에 존재할 것이라는 사실과 관련하여 잠재적으로 유용하다.
8-비트 비디오 및 10-비트 비디오의 공존을 처리하는 몇몇 방법이 있다. 제 1 해결책으로, 10-비트 코딩된 비트스트림(bit-stream)만 전송되고, 8-비트 디스플레이 장치를 위한 8-비트 표현은 10-비트 표현에 톤 맵핑방법(tone mapping methods)을 적용함으로써 얻어진다. 톤 맵핑은 높은 비트 깊이에서 낮은 비트 깊이로 변환하기 위해, 그리고 때때로 보다 제한된 동적 범위(dynamic range)를 갖는 미디어에서 높은 동적 범위 이미지의 형상을 근사화하기 위해, 널리 알려진 기술이다. 제 2 해결책으로, 8-비트 코딩된 표현(presentation)과 10-비트 코딩된 표현을 포함하는 시멀캐스트 비트스트림이 전송된다. 어떤 비트 깊이를 디코딩할지를 선택하는 것은 디코더의 선택사항이다. 예를 들어, 8-비트 비디오만을 지원하는 일반 디코더는 8-비트 비디오만을 출력할 수 있는 반면, 10-비트 용량 디코더는 10-비트 비디오를 디코딩 및 출력할 수 있다. 상기 제 1 해결책은 International Organization for Standardization/International Electrotechnical Commision(ISO/IEC) Moving Picture Experts Group-4(MPEG-4) Part 10 Advanced Video Coding(AVC) standard/International Telecommunication Union, Telecommunication Sector(ITU-T) H.264 Recommendation(이하, "MPEG-4 AVC 표준")의 8-비트 프로파일과 본질적으로 일치하지 않는다. 상기 제 2 해결책은 현재 모든 표준들에 적용가능하지만 더 많은 부가적인 것들이 필요하다.
종래 기술의 단점이 본 발명에 의해 언급된 바, 본 발명은 비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치에 관련된다.
본 발명의 일 형태에 따르면, 일 장치가 제공된다. 상기 장치는 화상의 적어도 일부분에 대하여 강화층(enhancement layer)을 인코딩하기 위한 인코더를 포함한다. 디블러킹 필터(deblocking filter)가 비트 깊이 확장성을 위해 상기 강화층에 적용된다.
본 발명의 다른 형태에 따르면, 일 방법이 제공된다. 상기 방법은 화상의 적어도 일부분에 대하여 강화층을 인코딩하는 단계를 포함한다. 상기 인코딩 단계는 비트 깊이 확장성을 위해 상기 강화층에 디블러킹 필터링을 적용하는 단계를 포함한다.
본 발명의 또 다른 형태에 따르면, 일 장치가 제공된다. 상기 장치는 화상의 적어도 일부분에 대하여 강화층을 디코딩하기 위한 디코더를 포함한다. 디블러킹 필터가 비트 깊이 확장성을 위해 상기 강화층에 적용된다.
본 발명의 또 다른 형태에 따르면, 일 방법이 제공된다. 상기 방법은 화상의 적어도 일부분에 대하여 강화층을 디코딩하는 단계를 포함한다. 상기 디코딩 단계는 비트 깊이 확장성을 위해 상기 강화층에 디블러킹 필터링을 적용하는 단계를 포함한다.
본 발명의 또 다른 일 형태에 따르면, 일 장치가 제공된다. 상기 장치는 화상의 적어도 하나의 블럭에 대한 이미지 데이터를 인코딩하기 위한 인코더를 포함한다. 디블러킹 필터가 비트 깊이 확장성을 위해 인트라-층 텍스처 예측(intra-layer texture prediction)을 위한 로컬 역-톤맵핑(local inverse tone mapping)에 의해 발생된 코딩 아티팩트를 제거한다.
본 발명의 또 다른 형태에 따르면, 일 방법이 제공된다. 상기 방법은 화상의 적어도 하나의 블럭에 대한 이미지 데이터를 인코딩하는 단계를 포함한다. 상기 인코딩 단계는 비트 깊이 확장성을 위해 인트라-층 텍스처 예측을 위한 로컬 역-톤맵핑에 의해 발생된 코딩 아티팩트를 제거하기 위하여 디블러킹 필터링을 적용하는 단계를 포함한다.
본 발명의 또 다른 일 형태에 따르면, 일 장치가 제공된다. 상기 장치는 화상의 적어도 하나의 블럭에 대한 이미지 데이터를 디코딩하기 위한 디코더를 포함한다. 디블러킹 필터가 비트 깊이 확장성을 위해 인트라-층 텍스처 예측을 위한 로컬 역-톤맵핑에 의해 발생된 코딩 아티팩트를 제거한다.
본 발명의 또 다른 형태에 따르면, 일 방법이 제공된다. 상기 방법은 화상의 적어도 하나의 블럭에 대한 이미지 데이터를 디코딩하는 단계를 포함한다. 상기 디코딩 단계는 비트 깊이 확장성을 위해 인트라-층 텍스처 예측을 위한 로컬 역-톤맵핑에 의해 발생된 코딩 아티팩트를 제거하기 위하여 디블러킹 필터링을 적용하는 단계를 포함한다.
본 발명의 장치 및 특징은 실시예에 대한 이하의 상세한 설명으로부터 명백해질 것이며, 상기 실시예는 첨부된 도면과 관련하여 기재될 것이다.
본 발명에 따르면, 종래의 문제점을 효과적으로 개선하여 비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치를 제공할 수 있다.
본 발명은 이하의 실시예적인 도면에 따라 더욱 잘 이해될 수 있을 것이다.
도 1은, 본 발명의 일 실시예에 따라, 본 발명이 적용될 수 있는 예시적인 비트 깊이 스케일러블 인코더(bit depth scalable encoder)에 대한 블럭도이다.
도 2는 본 발명의 일 실시예에 따라, 본 발명이 적용될 수 있는 예시적인 비트 깊이 스케일러블 디코더(bit depth scalable decoder)에 대한 블럭도이다.
도 3은, 본 발명의 일 실시예에 따라, 본 발명이 적용될 수 있는 또 다른 예시적인 비트 깊이 스케일러블 인코더에 대한 블럭도이다.
도 4는 본 발명의 일 실시예에 따라, 본 발명이 적용될 수 있는 또 다른 예시적인 비트 깊이 스케일러블 디코더에 대한 블럭도이다.
도 5는 본 발명의 일 실시예에 따라, 비트 깊이 확장성에 있어서의 코딩 아티팩트를 제거하기 위한 디블러킹 필터링에 대한 예시적인 방법에 관한 흐름도이다.
도 6은 본 발명의 일 실시예에 따라, 비트 깊이 확장성에 있어서의 코딩 아티팩트를 제거하기 위한 디블러킹 필터링에 대한 또 다른 예시적인 방법에 관한 흐름도이다.
도 7은 본 발명의 일실시예에 따라, 후치 필터(post filter)로서 디블러킹 필터를 사용하는 예시적인 비디오 디코딩 방법에 관한 흐름도이다.
도 8은 본 발명의 일실시예에 따라, 인루프 필터(in-loop filter)로서 디블러킹 필터를 사용하는 예시적인 비디오 인코딩 방법에 관한 흐름도이다.
도 9는 본 발명의 일실시예에 따라, 인루프 필터로서 디블러킹 필터를 사용하는 예시적인 비디오 디코딩 방법에 관한 흐름도이다.
도 10은 본 발명의 일실시예에 따라, 베이스층 및 강화층 상에서 디블러킹 필터를 공동으로 인에이블 또는 디스에이블시킬 수 있는 예시적인 비디오 인코딩 방법에 관한 흐름도이다.
도 11은 본 발명의 일실시예에 따라, 베이스층 및 강화층 상에서 디블러킹 필터를 공동으로 인에이블 또는 디스에이블시킬 수 있는 예시적인 비디오 디코딩 방법에 관한 흐름도이다.
도 12는 본 발명의 일실시예에 따라, 베이스층 및 강화층 상에서 디블러킹 필터를 개별적으로 인에이블 또는 디스에이블시킬 수 있는 예시적인 비디오 인코딩 방법에 관한 흐름도이다.
도 13은 본 발명의 일실시예에 따라, 베이스층 및 강화층 상에서 디블러킹 필터를 개별적으로 인에이블 또는 디스에이블시킬 수 있는 예시적인 비디오 디코딩 방법에 관한 흐름도이다.
본 발명은 비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치에 관련된다.
본 기재 내용은 본 발명 사상을 설명한다. 여기에 명시적으로 기재되거나 도시되지는 않았다 할지라도, 본 발명을 구체화하고 본 발명의 사상 및 범위 내에 포함되는 다양한 장치들을 당업자라면 고안할 수 있을 것이라는 점을 이해할 수 있을 것이다.
여기에 언급된 모든 실시예 및 조건적인 언어는, 발명자에 의하여 본 기술분야를 발전시키는 데에 제공된 본 발명 사상 및 개념을 독자가 이해하는 것을 돕기 위한 교육적인 목적을 위해 사용되며, 이러한 명시적으로 언급된 실시예와 조건에 한정되지 않는 것으로 해석된다.
또한, 구체적인 실시예뿐만 아니라, 본 발명의 사상, 측면 및 실시예를 설명하는 모든 기재내용은 그에 대한 구조적 및 기능적 균등물을 포함하도록 의도된다. 또한, 상기 균등물은 현재 알려진 균등물뿐만 아니라 동일 기능을 수행하는 미래에 개발될 균등물 모두를 포함하도록 의도되며, 즉 구조에 상관없이 동일한 기능을 수행하는 개발된 어떠한 구성요소도 모두 포함하도록 의도된다.
이에 따라, 예를 들어, 여기에 제공된 블럭도들이 본 발명 사상을 구체화하는 예시적인 회로의 개념도를 나타낸다는 점을 당업자라면 이해할 수 있을 것이다. 마찬가지로, 컴퓨터나 프로세서가 명시적으로 도시되어 있는지 여부에 상관없이, 모든 흐름차트, 흐름도, 상태 천이도, 의사코드(pseudocode) 등등은, 컴퓨터 판독가능 매체에서 실질적으로 제공될 수 있고 컴퓨터나 프로세서에 의해 실행될 수 있는 다양한 프로세스를, 나타낸다는 점을 이해할 수 있을 것이다.
도면에 나타난 다양한 구성요소의 기능들은 적정 소프트웨어와 관련하여 소프트웨어를 실행할 수 있는 하드웨어뿐만 아니라 전용 하드웨어의 사용을 통하여 제공될 수 있다. 프로세어에 의해 제공되는 경우, 상기 기능들은 단일 전용 프로세서에 의해, 단일 공유 프로세서에 의해, 또는 일부는 공유될 수도 있는 복수의 개별 프로세서에 의해 제공될 수 있다. 또한, "프로세서" 또는 "제어기"의 명시적인 사용은 소프트웨어를 실행할 수 있는 하드웨어를 배타적으로 언급하는 것으로 해석되어서는 안 되고, 제한없이 디지털 신호 프로세서(digital signal processor, DSP) 하드웨어, 소프트웨어 저장을 위한 ROM(read only memory), RAM(random access memory) 및 비휘발성 저장매체를 암시적으로 포함할 수 있다.
종래 및/또는 통상의 다른 하드웨어도 또한 포함될 수 있다. 마찬가지로, 도면에 도시된 어떠한 스위치들도 단지 개념적인 것이다. 그것들의 기능은 프로그램 로직의 동작을 통해, 전용 로직을 통해, 프로그래 제어 및 전용 로직의 상호작용을 통해, 또는 심지어는 수동으로 수행될 수 있고, 그 구체적인 기술은 문맥을 통해 더욱 명확하게 이해될 수 있는 바와 같이 실행자에 의해 선택될 수 있다.
여기서의 청구항에서, 특정 기능을 수행하기 위한 수단으로서 표현된 모든 구성요소는 상기 기능을 수행하는 어떠한 방법이라도 포함하도록 의도되고, 이는 예를 들어 a) 상기 기능을 수행하는 회로 구성요소들의 조합 또는 b) 기능을 수행하기 위해 소프트웨어를 실행하기 위한 적정 회로와 결합된 어떤 형태의 소프트웨어라도 포함하며, 이 소프트웨어는 펌웨어, 마이크로코드 등등을 포함한다. 상기 청구항에 의해 정의되는 본 발명의 사상은, 다양한 언급된 수단들에 의해 제공되는 기능들이 상기 청구항이 청구하는 바에 따라 통합되고 결합된다는 사실에 귀속된다. 따라서, 상기 기능들을 제공할 수 있는 어떠한 수단들도 여기에 설명되는 수단들과 균등하다고 여겨진다.
본 명세서에서 본 발명의 사상에 따른 "일 실시예" 또는 "어떤 실시예"라고 언급된 것 및 그에 관한 다른 변형예는, 상기 실시예와 관련하여 기재된 특정의 특징, 구조, 특성 등등이 본 발명의 적어도 일 실시예에 포함된다는 것을 의미한다. 이와 같이, 명세서를 통하여 다양한 곳에서 나타나는 "일 실시예에서" 또는 "어떤 실시예에서"라는 문구 및 또 다른 변형 형태의 사용은 모두 반드시 동일 실시예를 언급하는 것은 아니다.
예를 들어 "A 및/또는 B" 및 "A와 B 중의 적어도 하나"와 같이, "및/또는"과 "적어도 하나"라는 용어의 사용은 첫번째로 나열된 옵션 (A)만의 선택 또는 두번째로 나열된 옵션 (B)만의 선택, 또는 옵션 (A와 B) 모두의 선택을 포함하도록 의도된다. 또 다른 예로서 "A, B 및/또는 C" 및 "A, B 및 C 중의 적어도 하나"의 경우, 이러한 문구는 첫번째로 나열된 옵션 (A)만의 선택 또는 두번째로 나열된 옵션 (B)만의 선택, 또는 세번째로 나열된 옵션 (C)만의 선택, 또는 첫번째와 두번째로 나열된 옵션 (A와 B)만의 선택, 또는 첫번째와 세번째로 나열된 옵션 (A와 C)만의 선택, 또는 두번째와 세번째로 나열된 옵션 (B와 C)만의 선택, 또는 3개의 옵션 모두 (A와 B와 C)의 선택을 포함하도록 의도된다. 이것은, 본 기술분야 및 관련기술분야의 당업자에게 명확한 바와 같이, 많은 항목이 나열된 경우에 대해 확장될 수 있다.
또한, 스케일러블 비디오 코딩 또는 SVC라고 알려지고 여기서 호환적으로 언급된 MPEG-4 AVC 표준의 스케일러블 확장과 관련하여, 본 발명의 하나 또는 그 이상의 실시예가 기재되어 있지만, 본 발명은 상기 표준에만 한정되지는 않으며, 따라서 본 발명의 사상을 유지하는 한 다른 비디오 코딩표준, 권고 및 그 확장과 관련하여 이용될 수 있다는 것을 알아야 한다.
또한, 본 발명의 하나 또는 그 이상의 실시예가 고 비트 비디오(high bit video)에 대한 예로서 10-비트 비디오와 관련하여 여기서 기재되어 있지만, 본 발명은 이와 관련하여 10-비트 비디오에만 한정되지 않으며, 따라서 본 발명 사상을 유지하는 한 12-비트, 14-비트, 16-비트 등등을 포함하되 이에 한정되지 않는 다른 비트 깊이에 이용될 수 있다.
8-비트 비디오와 10-비트 비디오의 공존을 처리하는 것과 관련해 상기에서 언급된 제 1 해결책과 제 2 해결책과 관련하여 및 특히 상기 두 해결책의 결함과 관련하여, 역행의 표준 호환성과 비트 감소 간의 수용가능한 교섭이 적정한 해결책이 될 수 있다. 스케일러블 비디오 코딩 또는 SVC로 알려지고 또한 여기서 호환적으로 언급된 MPEG-4 AVC 표준의 적정 확장은 비트-깊이 확장성의 지원을 고려하고 있다.
후처리 또는 시멀캐스트를 넘어서, 비트-깊이 스케일러블 코딩은 적어도 3가지의 장점이 있다. 첫번째 장점은, 비트-깊이 스케일러블 코딩(bit-depth scalable coding)은 고-프로파일의 MPEG-4 AVC 표준과 역행-호환적 방식의 10-비트 비디오를 가능하게 한다는 것이다. 두번째 장점은, 비트-깊이 스케일러블 코딩은 상이한 네트워크 대역이나 장치 용량으로의 적응을 가능하게 한다는 것이다. 세번째 장점은, 비트-깊이 스케일러블 코딩은 저복잡성, 고효율성 및 고융통성을 제공한다는 것이다.
스케일러블 비디오 코딩에 있어, 단일 루프 디코딩이 디코딩 복잡성을 감소시키기 위해 지원된다. 모션 보상 예측(motion-compensated prediction) 및 인터-코딩된 매크로블럭의 디블러킹을 포함하여, 전체 디코딩은 현재 공간적 또는 CGS 층(current spatial or CSG layer)에 대하여 요구된다. 이것은, 인트라 매크로블럭으로 코딩된 하위계층 화상(lower layer picture)의 부분으로 층간 인트라 텍스처 예측(inter-layer intra texture prediction)을 제약함으로써 구현된다.
비트 깊이 확장성에 있어, 로컬 역-톤맵핑(local inverse tone mapping)이 적용될 수 있다. 로컬 역-톤맵핑의 특수한 경우로서 블럭/매크로블럭 기반 역-톤맵핑이 있다. 만약 블럭/매크로블럭 기반 역-톤맵핑이 층간 텍스처 예측에 적용되면, 심지어 디블러킹 필터링이 스케일러블 비디오 코딩에 사용된 후 그럼에도 불구하고 코딩 아티팩트가 존재할 수 있다. 이것은, 스케일러블 비디오 코딩에 있어 현재의 디블러킹 필터는 블럭/매크로블럭 기반 역-톤 맵핑을 고려하지 않도록 설계되기 때문이다.
본 발명은 비트 깊이 확장성에 관련된다. 본 발명은 비트 깊이 확장성을 위해 예를 들어 로컬 역-톤 맵핑(예를 들어, 로컬 역-톤 맵핑의 특수한 경우가 블럭/매크로블럭 기반 역-톤 맵핑이다)에 기인한 코딩 아티팩트를 제거하기 위한 방법 및 장치를 제공한다. 일실시예에 있어, 우리는 강화층(enhancement layer)에 대한 스케일러블 비디오 코딩에 있어 디블러킹 필터를 조정하는 것을 제안한다.
층간 인트라 텍스처 예측에 관련된 특정 모드는 INTRA_BL 모드로 불린다. INTRA-BL 모드에 관련된 디블러킹 필터링에 대하여, 경계 강도(boundary strength, BS)는 그 블럭이 0이 아닌 변환계수(transform coefficients)를 포함하는지 여부에 기초하여서만 조정된다.
MPEG-4 AVC 표준에서, 두 개의 상이한 구성이 연구된다.
제 1 구성은 도 1에 도시되어 있다. 도 1에서, 비트 깊이 스케일러블 인코더가 참조번호 100에 의해 일반적으로 지시되어 있다.
인코더(100)는 트랜스포머(110)의 입력과 신호 통신적으로 연결된 출력을 갖는 결합기(combiner)를 포함한다. 트랜스포머(110)의 출력은 양자화기(quantizer, 115)의 입력과 신호 통신적으로 연결된다. 양자화기(115)의 출력은 엔트로피 코더(120)의 입력과 신호통신적으로 연결된다. 엔트로피 코더(120)의 출력은, 멀티플렉서(135)에 10-비트 강화층을 제공하기 위하여, 멀티플렉서(135)의 제 1 입력과 신호 통신적으로 연결된다.
톤 맵퍼(tone mapper, 130)의 출력은 결합기(175)의 비반전 입력과 신호 통신적으로 연결된다. 결합기(175)의 출력은 트랜스포머(170)의 입력과 신호통신적으로 연결된다. 트랜스포머(170)의 출력은 양자화기(165)의 입력과 신호통신적으로 연결된다. 양자화기(165)의 출력은 엔트로피 코더(160)의 입력 및 역트랜스포머(inverse transformer, 155)의 입력과 신호통신적으로 연결된다. 엔트로피 코더(160)의 출력은, 멀티플렉서(135)에 8-비트 베이스층을 제공하기 위하여, 멀티플렉서(135)의 제 2 입력과 신호통신적으로 연결된다. 역트랜스포머(155)의 출력은 결합기(150)의 제 1 비반전 입력과 신호통신적으로 연결된다. 결합기(150)의 출력은 디블러킹 필터(145)의 입력과 신호통신적으로 연결된다. 디블러킹 필터(145)의 출력은 역톤 맵퍼(inverse tone mapper, 125)의 입력 및 예측기(predictor, 140)의 입력과 신호통신적으로 연결된다. 예측기(140)의 출력은 결합기(175)의 반전 입력 및 결합기(150)의 제 2 비반전 입력과 신호통신적으로 연결된다.
역톤 맵퍼(125)의 출력은 디블러킹 필터(117)의 입력과 신호통신적으로 연결된다. 디블러킹 필터(117)의 출력은 결합기(105)의 반전 입력과 신호통신적으로 연결된다.
결합기(105)의 입력과 톤맵퍼(130)의 입력은, 10-비트 소스 시퀀스를 수신하기 위하여, 인코더(100)의 입력으로서 사용가능하다. 멀티플렉서(135)의 출력은, 비트스트림을 출력하기 위하여, 인코더(100)의 출력으로서 사용가능하다.
상기 제 1 구성에 대응하는 디코더가 도 2에 도시되어 있다. 도 2에서, 비트 깊이 스케일러블 디코더(bit depth scalable decoder)가 참조번호 200에 의해 지시되어 있다.
디코더(200)는 엔트로피 디코더(210)의 입력과 신호통신적으로 연결된 제 1 출력을 갖는 디-멀티플렉서(de-multiplexer, 205)를 포함한다. 엔트로피 디코더(210)의 출력은 역양자화기(inverse quantizer, 215)의 입력과 신호통신적으로 연결된다. 역양자화기(215)의 출력은 역트랜스포머(220)의 입력과 신호통신적으로 연결된다. 역트랜스포머(220)의 출력은 결합기(225)의 제 1 비반전 입력과 신호통신적으로 연결된다. 결합기(225)의 출력은 디블러킹 필터(230)의 입력과 신호통신적으로 연결된다.
디-멀티플렉서(205)의 제 2 출력은 엔트로피 디코더(250)의 입력과 신호통신적으로 연결된다. 엔트로피 디코더(250)의 제 1 출력은 역양자화기(255)의 입력과 신호통신적으로 연결된다. 역양자화기(255)의 출력은 역트랜스포머(260)의 입력과 신호통신적으로 연결된다. 역트랜스포머(260)의 출력은 결합기(265)의 제 2 비반전 입력과 신호통신적으로 연결된다. 엔트로피 디코더(250)의 제 2 출력은 예측기(predictor, 245)의 제 1 입력과 신호통신적으로 연결된다. 예측기(245)의 출력은 결합기(265)의 제 1 비반전 입력과 신호통신적으로 연결된다.
디블러킹 필터(233)의 출력은 역톤 맵퍼(235)의 입력 및 예측기(245)의 제 2 입력과 신호통신적으로 연결된다. 역톤 맵퍼(235)의 출력은 디블러킹 필터(237)의 입력과 신호통신적으로 연결된다. 디블러킹 필터(237)의 출력은 결합기(225)의 제 2 비반전 입력과 신호통신적으로 연결된다.
디-멀티플렉서(205)의 입력은, 비트스트림을 수신하기 위하여, 디코더(200)의 입력으로서 사용가능하다. 결합기(265)의 출력은 디블러킹 필터(233)의 입력과 신호통신적으로 연결된다. 결합기(265)의 출력은, 화상을 출력하기 위하여, 디코더(200)의 출력으로서 또한 사용가능하다.
인코더(100)와 관련된 구성에서, 모션 보상 루프(motion compensation loop)는 베이스층에서 수행되고, 여기서 INTRA_BL 모드가 비트 깊이 확장성을 추가로 지원하기 위하여 확장된다. 10-비트 소스 신호로부터 8-비트 표현을 생성하기 위하여 채용된 톤 맵핑 프로세스를 역으로 실행하는 역톤 맵핑(inverse tone mapping)이 채용된다. 인코더에서 강화층에는 어떠한 디플러킹 필터링도 적용되지 않는다. 선택적 단계로서, 디블러킹 필터링은 디코더(200)에 의하여 강화층에 대한 후처리(post-processing)에서 적용될 수 있다. 역톤 맵핑은 전역적으로 또는 매크로블럭 수준으로 신호화될 수 있으며, 여기서 각 컬러 채널의 각 매크로블럭에 대한 스케일 인자(scale factor) 및 오프셋값과 같은 역톤 맵핑 파라미터가 적용된다.
제 2 구성은 강화층에서 모션 보상을 수행하는 것을 포함하는데, 여기서 디블러킹 필터는 사용되지만 로컬 역톤 맵핑(local inverse tone mapping)은 고려하지 않는다. 상기 제 2 구성은 도 3에 도시되어 있다. 도 3에서, 또 다른 비트 깊이 스케일러블 인코더가 참조번호 300에 의해 지시되어 있다. 인코더(300)는 "비트 시프팅(bit shifting)"으로 불리는 역톤 맵핑의 간단한 방법을 이용한다. 비트 시프팅은 어떠한 역톤 맵핑 방법에도 일반화될 수 있다.
인코더(300)는 트랜스포머(310)의 입력과 신호통신적으로 연결된 출력을 갖는 결합기(305)를 포함한다. 트랜스포머(310)의 출력은 양자화기(315)의 입력과 신호통신적으로 연결된다. 양자화기(315)의 출력은 엔트로피 코더(320)의 제 1 입력 및 역양자화기(325)의 입력과 신호통신적으로 연결된다. 역양자화기(325)의 출력은 역트랜스포머(330)의 입력과 신호통신적으로 연결된다. 역트랜스포머(330)의 출력은 결합기(335)의 비반전 입력과 신호통신적으로 연결된다. 결합기(335)의 출력은 디블러킹 필터(340)의 입력과 신호통신적으로 연결된다. 디블러킹 필터(340)의 출력은 모션추정기 및 층간 모션 예측 결정장치(motion estimator and inter-layer motion prediction determination device, 345)의 제 1 입력과 신호통신적으로 연결된다. 모션추정기 및 층간 모션 예측 결정장치(345)의 출력은 모션보상기(350)의 입력 및 엔트로피 코더(320)의 제 2 입력과 신호통신적으로 연결된다. 모션 보상기(350)의 출력은 결합기(360)의 제 1 비반전 입력과 신호통신적으로 연결된다. 결합기(360)의 출력은 결합기(305)의 반전 입력과 신호통신적으로 연결된다.
비트 시프터(355)의 출력은 결합기(360)의 제 2 비반전 입력과 신호통신적으로 연결된다.
결합기(305)의 입력은, 고비트 깊이 강화층 레지듀얼(high bit depth enhancement layer residual)을 수신하기 위하여, 인코더(100)의 입력으로서 사용가능하다. 비트 시프터(355)의 입력은, 저비트 깊이 베이스층 레지듀얼(low bit depth base layer residual)을 수신하기 위하여, 인코더(100)의 입력으로서 사용가능하다. 모션 추정기 및 층간 모션 예측 결정장치(345)의 제 2 입력은, 베이스층 모션 정보를 수신하기 위하여, 인코더(100)의 입력으로서 사용가능하다.
상기 제 2 구성에 대응하는 디코더가 도 4에 도시되어 있다. 도 4에서, 또 다른 비트 깊이 스케일러블 디코더가 참조번호 400에 의하여 지시되어 있다.
디코더(400)는 역양자화기(410)의 입력과 신호통신적으로 연결된 제 1 출력을 갖는 엔트로피 디코더(405)를 포함한다. 역양자화기(410)의 출력은 역트랜스포머(415)의 입력과 신호통신적으로 연결된다. 역트랜스포머(415)의 출력은 결합기(420)의 제 1 비반전 입력과 신호통신적으로 연결된다.
디블러킹 필터(445)의 출력은 모션 보상기(440)의 제 1 입력과 신호통신적으로 연결된다. 모션 보상기(440)의 출력은 결합기(425)의 제 1 비반전 입력과 신호통신적으로 연결된다. 결합기(425)의 출력은 결합기(420)의 제 2 비반전 입력과 신호통신적으로 연결된다.
엔트로피 디코더(405)의 제 2 출력은 모션 보상기(440)의 제 2 입력과 신호통신적으로 연결된다.
결합기(420)의 출력은 디블러킹 필터의 입력과 신호통신적으로 연결된다. 비트 시프터(430)의 출력은 결합기(425)의 제 2 비반전 입력과 신호통신적으로 연결된다.
결합기(420)의 출력은, 화상을 출력하기 위해, 디코더(400)의 출력으로서 또한 사용가능하다. 엔트로피 디코더(405)의 입력은, 강화층 비트스트림(enhancement layer bitstream)을 수신하기 위하여, 디코더(400)의 입력으로서 사용가능하다. 모션 보상기(440)의 제 3 입력은, 베이스층 모션 정보를 수신하기 위하여, 디코더(400)의 입력으로서 사용가능하다. 비트 시프터(430)의 입력은, 저비트 깊이 베이스 레지듀얼(low bit depth base residual)을 수신하기 위해, 디코더(400)의 입력으로서 사용가능하다.
매크로블럭 수준 역톤 맵핑이 사용될 때, 코딩 아티팩트(coding artifacts)가 관측될 수 있다. 비트 깊이 확장성은 아직 JVT(Joint Video Team)에서 개발 중이기 때문에, 강화층에 대한 매크로블럭 수준 역톤 맵핑에 의해 발생되는 코딩 아티팩트를 구체적으로 지적하는 어떤 선행기술도 존재하지 않는다.
본 발명에 따르면, INTRA_BL 모드에서의 로컬 역톤 맵핑(T-1)에 의해 발생되는 코딩 아티팩트가 제거된다. 상기 제 1 구성에 대한 일 실시예에 있어, 우리는 도 2에 도시된 바와 같이 강화층 디코더에 디블러킹 필터(230)를 추가한다. 디블러킹 필터(230)는 후처리(postprocessing)를 위해 사용된다. 도 4에 도시된 바와 같이 디블러킹 필터(435)가 루프 내에 위치하고 있는 상기 제 2 구성에 대한 일 실시예에 있어서, 우리는 로컬 역톤 맵핑을 처리하기 위하여 디블러킹 필터(435)를 조정할 수 있다. 디블러킹 필터(435)는 베이스층에 적용된 디블러킹 필터와는 다른 것이 될 수도 있다. 또한, 두 디블러킹 필터 모두는 개별적으로 또는 공동으로 스위치 온 및 오프될 수 있다.
또한, 특정한 일 실시예에 있어서, 우리는 강화층에서의 매크로블럭 수준 로컬 역톤 맵핑을 고려하여 디블러킹 필터를 조정하는 것을 제안한다.
추가적인 일 실시예에 있어서, 이웃하는 두 블럭이 모두 INTRA_BL 모드이고 역톤 맵핑 파라미터가 상이하거나, 역톤 맵핑이 단 하나의 블럭에만 적용되면, 경계강도(BS)를 조정한다. 경계강도(BS)는 이웃하는 블럭에 대한 역톤 맵핑의 차에 따라 설정된다. 일실시예에 있어, 경계강도(BS)를 다음과 같이 변경할 수 있다:
디블러킹 필터에 대한 원래 MPEG-4 AVC 표준 경계 조건이 BS=0을 만족하는 경우,
만약 (1) T-1이 이웃하는 두 블럭 모두에 적용되고 그들의 파라미터가 동일하지 않거나 (2) T-1이 단 한 블럭에만 적용되면(나머지 한 블럭은 INTRA_BL 모드에 의해 코딩되지 않음), T-1의 차 >= 임계값 이면 BS=K2 로 설정(강한 디블러킹)하되 그렇지 않으면 BS=K1로 설정(약한 디블러킹)하며,
그 외에는 BS=0 으로 설정한다.
물론 본 발명은 BS를 변화시키기 위한 상술한 접근법에만 한정되지 않으며, 따라서 본 발명 사상을 유지하는 한 BS를 변화시키는 것에 대한 다른 접근법도 본 발명에 따라 채용될 수 있다.
도 5에서, 비트 깊이 확장성에 있어 코딩 아티팩트를 제거하기 위한 디블러킹 필터링에 관한 예시적인 방법이 참조번호 500에 의하여 지시되어 있다.
상기 방법(500)은 결정 블럭(510)에 제어를 넘기는 시작 블럭(505)를 포함한다. 결정블럭(510)은 BS가 0과 같은지 여부를 결정한다. 만약 그렇다면 기능블럭(515)으로 넘어가도록 제어된다. 그렇지 않다면 기능블럭(540)으로 넘어가도록 제어된다.
기능블럭(515)은 이웃하는 블럭 톤 맵핑 파라미터를 획득하며, 결정블럭(520)으로 넘어가도록 제어된다. 결정블럭(520)은 로컬 역톤 맵핑(T-1)이 이웃하는 두 블럭 모두에 적용되고 그들의 파라미터가 동일하지 않은지 여부를 결정한다. 만약 그렇다면 결정블럭(525)으로 넘어가도록 제어된다. 그렇지 않다면 기능블럭(535)으로 넘어가도록 제어된다.
기능블럭(525)은 T-1의 차가 임계값(threshold)보다 작은지 아닌지 여부를 결정한다. 만약 그렇다면 기능블럭(530)으로 넘어가도록 제어된다. 그렇지 않다면 기능블럭(545)으로 넘어가도록 제어된다.
기능블럭(530)은 BS를 상수 K2와 같도록 설정하며(강한 디블러킹), 종료블럭(599)으로 넘어가도록 제어된다.
결정블럭(535)은 T-1이 단 한 블럭에만 적용되는지 여부를 결정한다(다른 한 블럭은 INTRA_BL 모드에 의해 코딩되지 않음). 만약 그렇다면, 기능블럭(525)으로 넘어가도록 제어된다. 그렇지 않다면, 기능블럭(540)으로 넘어가도록 제어된다.
기능블럭(540)은 BS를 0과 같도록 설정하며, 종료블럭(599)으로 넘어가도록 제어된다.
기능블럭(545)은 BS를 상수 K1과 같도록 설정하며(약한 디블러킹), 종료블럭(599)으로 넘어가도록 제어된다.
도 6에서, 비트 깊이 확장성에 있어 코딩 아티팩트를 제거하기 위한 디블러킹 필터링에 관한 또 다른 예시적인 방법이 참조번호 600에 의하여 지시되어 있다.
상기 방법(600)은 결정 블럭(610)에 제어를 넘기는 시작 블럭(605)을 포함한다. 결정블럭(610)은 BS가 0과 같은지 여부를 결정한다. 만약 그렇다면 기능블럭(615)으로 넘어가도록 제어된다. 그렇지 않다면 기능블럭(640)으로 넘어가도록 제어된다.
기능블럭(615)은 이웃하는 블럭 톤 맵핑 파라미터를 판독 및 디코딩하며, 결정블럭(620)으로 넘어가도록 제어된다. 결정블럭(620)은 로컬 역톤 맵핑(T-1)이 이웃하는 두 블럭 모두에 적용되고 그들의 파라미터가 동일하지 않은지 여부를 결정한다. 만약 그렇다면 결정블럭(625)으로 넘어가도록 제어된다. 그렇지 않다면 기능블럭(635)으로 넘어가도록 제어된다.
기능블럭(625)은 T-1의 차가 임계값보다 작은지 아닌지 여부를 결정한다. 만약 그렇다면 기능블럭(630)으로 넘어가도록 제어된다. 그렇지 않다면 기능블럭(645)으로 넘어가도록 제어된다.
기능블럭(630)은 BS를 상수 K2와 같도록 설정하며(강한 디블러킹), 종료블럭(699)으로 넘어가도록 제어된다.
결정블럭(635)은 T-1이 단 한 블럭에만 적용되는지 여부를 결정한다(다른 한 블럭은 INTRA_BL 모드에 의해 코딩되지 않음). 만약 그렇다면, 기능블럭(625)으로 넘어가도록 제어된다. 그렇지 않다면, 기능블럭(640)으로 넘어가도록 제어된다.
기능블럭(640)은 BS를 0과 같도록 설정하며, 종료블럭(699)으로 넘어가도록 제어된다.
기능블럭(645)은 BS를 상수 K1과 같도록 설정하며(약한 디블러킹), 종료블럭(699)으로 넘어가도록 제어된다.
도 7에서, 후치 필터(post filter)로서 디블러킹 필터를 사용하는 예시적인 비디오 디코딩 방법이 참조번호 700에 의해 도시되어 있다.
상기 방법(700)은 기능블럭(710)에 제어를 넘기는 시작 블럭(705)을 포함한다. 기능블럭(710)은 강화층 디코딩(enhancement layer decoding)을 수행하며, 기능블럭(715)으로 넘어가도록 제어된다. 기능블럭(715)은 디블러킹 필터링을 수행하며, 종료블럭(799)으로 넘어가도록 제어된다.
도 8에서, 인루프 필터(in-loop filter)로서 디블러킹 필터를 사용하는 예시적인 비디오 인코딩 방법이 참조번호 800에 의해 도시되어 있다.
상기 방법(800)은 기능블럭(810)에 제어를 넘기는 시작 블럭(805)을 포함한다. 기능블럭(810)은 강화층 인코딩에 고 비트 깊이 이미지(high bit depth image)를 입력하며, 기능블럭(815)으로 넘어가도록 제어된다. 기능블럭(815)은 하위층(lower layer)에서 모션 보상 예측(motion compensated prediction) 및 레지듀(residue)를 감산하여 강화층을 획득하며, 기능블럭(820)으로 넘어가도록 제어된다. 기능블럭(820)은 강화층 레지듀얼(enhancement layer residual)을 트랜스폼 및 양자화하며, 기능블럭(825)으로 넘어가도록 제어된다. 기능블럭(825)은 강화층 레지듀를 역양자화(de-quantize) 및 역트랜스폼(inverse transform)하며, 기능블럭(830)으로 넘어가도록 제어된다. 기능블럭(830)은 하위층으로부터의 모션 보상 예측 및 레지듀 예측을 재구성된 레지듀 상에 추가하여 강화층 이미지를 재구성하며, 기능블럭(835)으로 넘어가도록 제어된다. 기능블럭(835)은 디블러킹 필터링을 수행하며, 기능블럭(840)으로 넘어가도록 제어된다. 기능블럭(840)은 다음 강화층 이미지에 대한 모션 추정 및 보상을 위한 기준 프레임으로서 디블러킹 필터의 출력을 이용하며, 종료블럭(899)으로 넘어가도록 제어된다.
도 9에서, 인루프 필터(in-loop filter)로서 디블러킹 필터를 사용하는 예시적인 비디오 디코딩 방법이 참조번호 900에 의해 도시되어 있다.
상기 방법(900)은 기능블럭(910)에 제어를 넘기는 시작 블럭(905)을 포함한다. 기능블럭(910)은 강화층 비트스트림을 분석하며, 기능블럭(915)으로 넘어가도록 제어된다. 기능블럭(915)은 강화층 레지듀 계수(residue coefficients)와 모션 벡터를 획득하기 위하여 엔트로피 디코딩을 하며, 기능블럭(920)으로 넘어가도록 제어된다. 기능블럭(920)은 강화층 레지듀얼을 획득하기 위해 레지듀얼 계수를 역양자화(de-quantize)하고 역트랜스폼을 수행하며, 기능블럭(955)으로 넘어가도록 제어된다. 기능블럭(925)은 모션 보상을 수행하며, 기능블럭(930)으로 넘어가도록 제어된다. 기능블럭(930)은 하위층으로부터의 모션 보상 예측 및 층간 레지듀 예측(inter-layer residue prediction)을 강화층 레지듀 상에 추가하며, 기능블럭(935)으로 넘어가도록 제어된다. 기능블럭(935)은 디블러킹 필터링을 수행하며, 기능블럭(940)으로 넘어가도록 제어된다. 기능블럭(940)은 다음 강화층 이미지에 대한 모션 보상을 위한 기준 프레임으로서 디블러킹 필터링의 출력을 이용하며, 종료블럭(999)으로 넘어가도록 제어된다.
도 10에서, 베이스층과 강화층 상에서 디블러킹 필터를 공동으로 인에이블 또는 디스에이블시킬 수 있는 예시적인 비디오 인코딩 방법이 참조번호 1000에 의해 도시되어 있다.
상기 방법(1000)은 기능블럭(1010)에 제어를 넘기는 시작 블럭(1005)을 포함한다. 기능블럭(1010)은 베이스층 및 강화층 디블러킹 필터링을 모두 인에이블 또는 디스에이블시키기 위하여 디블러킹 필터 제어 플래그(deblocking filter control flag)를 기입하며, 종료블럭(1099)으로 넘어가도록 제어된다.
도 11에서, 베이스층 및 강화층 상에서 디블러킹 필터를 공동으로 인에이블 또는 디스에이블시킬 수 있는 예시적인 비디오 디코딩 방법이 참조번호 1100에 의해 도시되어 있다.
상기 방법(1100)은 기능블럭(1110)에 제어를 넘기는 시작 블럭(1105)을 포함한다. 기능블럭(1110)은 디블러킹 필터 제어 플래그를 판독하며, 기능블럭(1115)으로 넘어가도록 제어된다. 기능블럭(1115)은 디블러킹 필터 제어 플래그에 기초하여 베이스층 및 강화층 모두의 디블러킹 필터링을 인에이블 또는 디스에이블하며, 종료블럭(1199)으로 넘어가도록 제어된다.
도 12에서, 베이스층과 강화층 상에서 디블러킹 필터를 개별적으로 인에이블 또는 디스에이블시킬 수 있는 예시적인 비디오 인코딩 방법이 참조번호 1200에 의해 도시되어 있다.
상기 방법(1200)은 기능블럭(1210)에 제어를 넘기는 시작 블럭(1205)을 포함한다. 기능블럭(1210)은 베이스층 디블러킹 필터링을 인에이블 또는 디스에이블하기 위해 베이스층 디블러킹 필터 제어 플래그를 기입하며, 기능블럭(1215)으로 넘어가도록 제어된다. 기능블럭(1215)은 강화층 디블러킹 필터를 인에이블 또는 디스에이블하기 위해 강화층 디블러킹 필터 제어 플래그를 기입하며, 종료블럭(1299)으로 넘어가도록 제어된다.
도 13에서, 베이스층 및 강화층 상에서 디블러킹 필터를 개별적으로 인에이블 또는 디스에이블시킬 수 있는 예시적인 비디오 디코딩 방법이 참조번호 1300에 의해 도시되어 있다.
상기 방법(1300)은 기능블럭(1310)에 제어를 넘기는 시작 블럭(1305)을 포함한다. 기능블럭(1310)은 베이스층 디블러킹 필터 제어 플래그를 판독하며, 기능블럭(1315)으로 넘어가도록 제어된다. 기능블럭(1315)은 베이스층 디블러킹 필터 제어 플래그에 기초하여 베이스층 디블러킹 필터링을 인에이블 또는 디스에이블하며, 기능블럭(1320)으로 넘어가도록 제어된다. 기능블럭(1320)은 강화층 디블러킹 디블러킹 필터 제어 플래그를 판독하며, 기능블럭(1325)으로 넘어가도록 제어된다. 기능블럭(1325)은 강화층 디블러킹 필터 제어 플래그에 기초하여 강화층 디블러킹 필터링을 인에이블 또는 디스에이블하며, 종료블럭(1399)으로 넘어가도록 제어된다.
이하 본 발명의 부수적인 많은 장점/특징에 관하여 기재되며, 이 중 일부는 상기에서 언급되어 있다. 예를 들어, 하나의 장점/특징으로서, 화상의 적어도 일부분에 대하여 강화층을 인코딩하기 위한 인코더를 구비한 장치가 제공된다. 디블러킹 필터가 비트 깊이 확장성을 위해 상기 강화층에 적용된다.
또 다른 장점/특징으로서, 상기 기재된 바와 같은 인코더를 구비한 장치가 제공되며, 여기서 디블러킹 필터는 비트 깊이 확장성을 위해 인트라-층 텍스처 예측을 위한 로컬 역톤 맵핑에 의해 발생되는 코딩 아티팩트를 제거하도록 조정된다.
또 다른 장점/특징으로서, 디블러킹 필터가 상기 기재한 바와 같이 코딩 아티팩트를 제거하도록 조정되는 인코더를 구비한 장치가 제공되며, 여기서 로컬 역톤 맵핑은 블럭기반(block-based)이고, 블럭기반 로컬 역톤 맵핑의 블럭 크기는 매크로블럭 크기일 수 있다.
또 다른 장점/특징으로서, 로컬 역톤 맵핑이 상기 기재한 바와 같이 블럭기반인 인코더를 구비한 장치가 제공되며, 여기서 디블러킹 필터의 경계 강도(boundary strength)는 임계값에 기초하여 조정되고, 그 임계값은 적어도 하나의 블럭 및 그 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대한 역톤 맵핑 파라미터의 차에 기초한다.
또한, 또 다른 장점/특징으로서, 디블러킹 필터가 상기 기재된 바와 같이 코딩 아티팩트를 제거하기 위해 조정되는, 인코더를 구비한 장치가 제공된다. 여기서, 매크로블럭 기반 역톤 맵핑이 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 사용될 때, 또는 역톤 맵핑 파라미터가 적어도 하나의 블럭 및 그 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 상이할 때, 디블러킹 필터의 경계 강도는 조정된다.
나아가, 또 다른 장점/특징으로서, 상술한 바와 같은 인코더를 구비한 장치가 제공되며, 여기서 인코더는 또한 화상의 적어도 일부분에 대하여 베이스층을 인코딩하고, 디블러킹 필터는 강화층 및 베이스층에 개별적으로 또는 공동으로 적용되거나 또는 안 될 수 있다.
또한, 또 다른 장점/특징으로서, 화상의 적어도 한 블럭에 대한 이미지 데이터를 인코딩하기 위한 인코더를 구비한 장치가 제공된다. 디블러킹 필터는 비트 깊이 확장성을 위해 인트라-층 텍스처 예측을 위한 로컬 역톤 맵핑에 의해 발생되는 코딩 아티팩트를 제거한다.
추가적으로, 또 다른 장점/특징으로서, 상술한 바와 같은 인코더를 구비한 장치가 제공되며, 여기서 로컬 역톤 맵핑은 블럭기반이고, 블럭기반 로컬 역톤 맵핑의 블럭 크기는 매크로블럭 크기일 수 있다.
또한, 또 다른 장점/특징으로서, 로컬 역톤 맵핑이 상술한 바와 같이 블럭기반인 인코더를 구비한 장치가 제공되며, 여기서 디블러킹 필터의 경계 강도는 임계값에 기초하여 조정되고, 그 임계값은 적어도 하나의 블럭 및 그 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대한 역톤 맵핑 파라미터의 차에 기초한다.
또한, 또 다른 장점/특징으로서, 상술한 바와 같은 인코더를 구비한 장치가 제공되며, 여기서 디블러킹 필터의 경계 강도는, 매크로블럭 기반 역톤 맵핑이 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 사용될 때, 조정된다.
또한, 또 다른 장점/특징으로서, 상술한 바와 같은 인코더를 구비한 장치가 제공되며, 여기서 디블러킹 필터의 경계 강도는, 역톤 맵핑 파라미터가 적어도 하나의 블럭 및 그 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 상이할 때, 조정된다.
본 발명의 여러 특징과 장점은 관련 기술분야의 통상의 지식을 가진 자에 의해 상기 기재내용에 기초하여 쉽게 확인될 수 있다. 본 발명에 관한 상기 기재내용은 하드웨어, 소프트웨어, 펌웨어, 특수 목적 프로세서 또는 그들의 조합의 다양한 형태로 실행될 수 있다는 점을 이해해야 한다.
매우 바람직하게는, 본 발명의 상기 기재내용은 하드웨어 및 소프트웨어의 조합으로서 실행된다. 나아가, 소프트웨어는 프로그램 저장유닛 상에 실재적으로 구체화되는 애플리케이션 프로그램으로서 실행될 수 있다. 그 애플리케이션 프로그램은 어떤 적당한 아키텍쳐를 포함하는 장치에 업로드되고 그 장치에 의해 실행될 수 있다. 바람직하게는, 그 장치는 하나 또는 그 이상의 중앙처리유닛("CPU"), 램덤 액세스 메모리("RAM") 및 입력/출력("I/O") 인터페이스와 같은 하드웨어를 갖는 컴퓨터 플랫폼 상에서 실행된다. 상기 컴퓨터 플랫폼은 또한 운영시스템(operating system) 및 마이크로명령 코드를 포함할 수 있다. 여기에 기재된 다양한 프로세스 및 기능은 마이크로명령 코드의 일부, 응용 프로그램의 일부 또는 그들의 조합일 수 있으며, 그것은 CPU에 의해 실행될 수 있다. 또한, 부가적 데이터 저장유닛 및 프린팅 유닛과 같은 다양한 다른 주변 장치가 컴퓨터 플랫폼에 연결될 수 있다.
첨부된 도면에 도시된 구성적 시스템 요소 및 방법의 몇몇은 바람직하게는 소프트웨어에서 실행되기 때문에, 시스템 요소 간 또는 프로세스 기능블럭 간의 실제 연결은 본 발명이 프로그램되는 방식에 따라 달라질 수 있다. 여기에 기재된 내용이 일단 제공되면, 관련분야의 통상의 지식을 가진 자라면 본 발명의 상기 및 이와 유사한 실행예 또는 구성을 생각해 낼 수 있을 것이다.
첨부된 도면을 참조하여 예시적인 실시예가 여기에 기재되었지만, 본 발명은 그러한 구체적인 실시예에 한정되지 않으며, 본 발명의 범위 또는 사상을 벗어나지 않는 한 관련 기술분야의 통상의 지식을 가진 자에 의하여 다양한 변경 및 수정이 거기에 행해질 수 있다는 점을 이해해야 한다. 그러한 모든 변경 및 수정은 첨부된 청구범위에 기재된 바와 같은 본 발명의 범위에 포함되도록 의도된다.
100 : 비트 깊이 스케일러블 인코더 105 : 결합기
110 : 트랜스포머 115 : 양자화기
117 : 디블러킹 필터 120 : 엔트로피 코더
125 : 역톤 맵퍼 130 : 톤 맵퍼
140 : 예측기 145 : 디블러킹 필터
150 : 결합기 155 : 역트랜스포머
160 : 엔트로피 코더 165 : 양자화기
170 : 트랜스포머
200 : 비트 깊이 스케일러블 디코더
205 : 디-멀티플렉서 210 : 엔트로피 코더
215 : 역양자화기 220 : 역트랜스포머
225 : 결합기 230 : 디블러킹 필터
233 : 디블러킹 필터 235 : 역톤 맵퍼
237 : 디블러킹 필터 245 : 예측기
250 : 엔트로피 코더 255 : 역양자화기
260 : 역트랜스포머 265 : 결합기
300 : 비트 깊이 스케일러블 인코더
305 : 결합기 310 : 트랜스포머
315 : 양자화기 320 : 엔트로피 코더
325 : 역양자화기 330 : 역트랜스포머
335 : 결합기 340 : 디블러킹 필터
345 : 모션추정기 및 층간 모션예측 결정장치
350 : 모션 보상기 355 : 비트 시프터
360 : 결합기
400 : 비트 깊이 스케일러블 디코더
405 : 엔트로피 디코더 410 : 역양자화기
415 : 역트랜스포머 420 : 결합기
425 : 결합기 430 : 비트 시프터
435 : 디블러킹 필터 440 : 모션 보상기

Claims (28)

  1. 인코딩 장치로서,
    화상의 적어도 일부분에 대하여 강화층을 인코딩하기 위한 인코더(100, 300)를 포함하되,
    상기 인코더는 적어도 상기 일부분에 대하여 비트 깊이 확장성을 위해 인터-층 인트라 텍스처 예측을 위한 블럭기반(block-based) 로컬 역톤 맵핑(local inverse tone mapping)을 수행하기 위한 역톤 맵퍼(inverse tone mapper, 125), 및 상기 강화층을 필터링하기 위하여 상기 역톤 맵퍼(125)의 출력에 응답 및 직접 연결되어 상기 블럭기반 로컬 역톤 맵핑에 의해 발생되는 코딩 아티팩트를 제거하는 디블러킹 필터(117, 340)를 포함하고,
    상기 인코더(100, 300)는 또한 적어도 상기 일부분에 대하여 베이스층을 인코딩하고 상기 디블러킹 필터(117, 340)는 상기 강화층에 적용되거나 또는 안 될 수 있는, 인코딩 장치.
  2. 삭제
  3. 제 1항에 있어서,
    상기 블럭기반 로컬 역톤 맵핑은 매크로블럭 블럭크기에 적용되는, 인코딩 장치.
  4. 제 3항에 있어서,
    상기 디블러킹 필터(117, 340)의 경계 강도가 임계값에 기초하여 조정되고, 상기 임계값은 적어도 하나의 블럭 및 상기 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대한 역톤 맵핑 파라미터의 차에 기초하는, 인코딩 장치.
  5. 제 1항에 있어서,
    매크로블럭 기반 역톤 맵핑이 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 사용될 때, 또는 역톤 맵핑 파라미터가 적어도 하나의 블럭 및그 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 상이할 때, 상기 디블러킹 필터(117, 340)의 경계 강도가 조정되는, 인코딩 장치.
  6. 삭제
  7. 인코딩 방법으로서,
    화상의 적어도 일부분에 대하여 강화층을 인코딩하는 단계를 포함하되,
    상기 인코딩하는 단계는
    적어도 상기 일부분에 대하여 비트 깊이 확장성을 위해 인터-층 인트라 텍스처 예측을 위한 블럭기반 로컬 역톤 맵핑을 수행하는 단계,
    적어도 상기 일부분에 대하여 베이스층을 인코딩하는 단계, 및
    상기 강화층에 대응하는 상기 로컬 역톤 맵핑의 출력에 디블러킹 필터링을 직접 적용하여 상기 블럭기반 로컬 역톤 맵핑에 의해 발생되는 코딩 아티팩트를 제거하는 단계(500, 800)를 포함하고,
    상기 디블러킹 필터링은 상기 강화층에 적용되거나 또는 안 될 수 있는, 인코딩 방법(1000, 1200).
  8. 삭제
  9. 제 7항에 있어서,
    상기 블럭기반 로컬 역톤 맵핑은 매크로블럭 블럭크기에 적용되는, 인코딩 방법(500).
  10. 제 9항에 있어서,
    상기 디블러킹 필터링의 경계 강도가 임계값(525)에 기초하여 조정되고(530, 540, 545), 상기 임계값은 적어도 하나의 블럭 및 상기 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대한 역톤 맵핑 파라미터(515)의 차에 기초하는, 인코딩 방법(520, 525, 535).
  11. 제 7항에 있어서,
    매크로블럭 기반 역톤 맵핑이 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 사용될 때(535), 또는 역톤 맵핑 파라미터가 적어도 하나의 블럭 및 그 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 상이할 때(520), 상기 디블러킹 필터링의 경계 강도가 조정되는(530, 540, 545), 인코딩 방법.
  12. 삭제
  13. 디코딩 장치로서,
    화상의 적어도 일부분에 대하여 강화층을 디코딩하기 위한 디코더(200, 400)를 포함하되,
    상기 디코더는 적어도 상기 일부분에 대하여 비트 깊이 확장성을 위해 인터-층 인트라 텍스처 예측을 위한 블럭기반 로컬 역톤 맵핑을 수행하기 위한 역톤 맵퍼(235), 및 상기 강화층을 필터링하기 위하여 상기 역톤 맵퍼(235)의 출력에 응답 및 직접 연결되어 상기 블럭기반 로컬 역톤 맵핑에 의해 발생되는 코딩 아티팩트를 제거하는 디블러킹 필터(230, 237, 435)를 포함하고,
    상기 디코더(200, 237, 400)는 또한 적어도 상기 일부분에 대하여 베이스층을 디코딩하고 상기 디블러킹 필터(230, 435)는 상기 강화층에 적용되거나 또는 안 될 수 있고,
    상기 디블러킹 필터(230, 237, 435)의 경계 강도가 임계값에 기초하여 조정되고, 상기 임계값은 적어도 하나의 블럭 및 상기 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대한 역톤 맵핑 파라미터의 차에 기초하는, 디코딩 장치.
  14. 삭제
  15. 제 13항에 있어서,
    상기 블럭기반 로컬 역톤 맵핑은 매크로블럭 블럭크기에 적용되는, 디코딩 장치.
  16. 삭제
  17. 제 13항에 있어서,
    매크로블럭 기반 역톤 맵핑이 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 사용될 때, 또는 역톤 맵핑 파라미터가 적어도 하나의 블럭 및 그 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 상이할 때, 상기 디블러킹 필터(230, 237, 435)의 경계 강도가 조정되는, 디코딩 장치.
  18. 삭제
  19. 제 13항에 있어서,
    상기 디코더는 모션 보상 루프를 포함하고, 상기 디블러킹 필터는 상기 모션 보상 루프의 외부(230, 237)에 적용되는, 디코딩 장치.
  20. 디코딩 방법으로서,
    화상의 적어도 일부분에 대하여 강화층을 디코딩하는 단계를 포함하되,
    상기 디코딩하는 단계는
    적어도 상기 일부분에 대하여 비트 깊이 확장성을 위해 인터-층 인트라 텍스처 예측을 위한 블럭기반 로컬 역톤 맵핑을 수행하는 단계,
    적어도 상기 일부분에 대하여 베이스층을 디코딩하는 단계, 및
    상기 강화층에 대응하는 상기 로컬 역톤 맵핑의 출력에 디블러킹 필터링을 직접 적용하여 상기 블럭기반 로컬 역톤 맵핑에 의해 발생되는 코딩 아티팩트를 제거하는 단계(600, 900)를 포함하고,
    상기 디블러킹 필터링은 상기 강화층에 적용되거나 또는 안 될 수 있고(1100, 1300),
    상기 디블러킹 필터링의 경계 강도가 임계값(625)에 기초하여 조정되고(630, 640, 645), 상기 임계값은 적어도 하나의 블럭 및 상기 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대한 역톤 맵핑 파라미터(615)의 차에 기초하는, 디코딩 방법(620, 625, 635).
  21. 삭제
  22. 제 20항에 있어서,
    상기 블럭기반 로컬 역톤 맵핑은 매크로블럭 블럭크기에 적용되는, 디코딩 방법(600).
  23. 삭제
  24. 제 20항에 있어서,
    매크로블럭 기반 역톤 맵핑이 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 사용될 때(635), 또는 역톤 맵핑 파라미터가 적어도 하나의 블럭 및 그 적어도 하나의 블럭에 대해 이웃한 적어도 하나의 블럭에 대하여 상이할 때(620), 상기 디블러킹 필터링의 경계 강도가 조정되는(630, 640, 645), 디코딩 방법.
  25. 삭제
  26. 제 20항에 있어서,
    상기 디블러킹 필터는 모션 보상 루프의 외부(715)에 적용되는, 디코딩 방법.
  27. 삭제
  28. 삭제
KR1020107010573A 2007-10-16 2008-10-14 비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치 KR101512833B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US98032207P 2007-10-16 2007-10-16
US60/980,322 2007-10-16
PCT/US2008/011708 WO2009051690A1 (en) 2007-10-16 2008-10-14 Methods and apparatus for artifact removal for bit depth scalability

Publications (2)

Publication Number Publication Date
KR20100081348A KR20100081348A (ko) 2010-07-14
KR101512833B1 true KR101512833B1 (ko) 2015-04-16

Family

ID=40361751

Family Applications (2)

Application Number Title Priority Date Filing Date
KR20107008111A KR101509070B1 (ko) 2007-10-16 2008-10-14 비트 깊이 크기 조정 능력에 관한 아티팩트 제거 방법 및 장치
KR1020107010573A KR101512833B1 (ko) 2007-10-16 2008-10-14 비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR20107008111A KR101509070B1 (ko) 2007-10-16 2008-10-14 비트 깊이 크기 조정 능력에 관한 아티팩트 제거 방법 및 장치

Country Status (8)

Country Link
US (2) US8369422B2 (ko)
EP (2) EP2204047B1 (ko)
JP (2) JP5411147B2 (ko)
KR (2) KR101509070B1 (ko)
CN (2) CN101828402B (ko)
BR (2) BRPI0817767A2 (ko)
TW (2) TWI387346B (ko)
WO (2) WO2009051690A1 (ko)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5411147B2 (ja) 2007-10-16 2014-02-12 トムソン ライセンシング ビット深さスケーラビリティのためのアーチファクト除去のための方法および装置
US8184693B2 (en) * 2008-04-11 2012-05-22 Intel Corporation Adaptive filtering for bit-depth scalable video codec
KR101740741B1 (ko) * 2009-02-11 2017-06-08 톰슨 라이센싱 톤 매핑 및 톤 역매핑을 이용하는 비트 심도 스케일링 가능 비디오 인코딩 및 디코딩을 위한 방법 및 장치
CN102450010A (zh) 2009-04-20 2012-05-09 杜比实验室特许公司 定向内插和数据后处理
US8611414B2 (en) 2010-02-17 2013-12-17 University-Industry Cooperation Group Of Kyung Hee University Video signal processing and encoding
KR20120003147A (ko) * 2010-07-02 2012-01-10 삼성전자주식회사 루프 필터를 이용한 깊이 영상 부호화 장치 및 복호화 장치
US9438881B2 (en) 2010-07-19 2016-09-06 Dolby Laboratories Licensing Corporation Enhancement methods for sampled and multiplexed image and video data
GB2500835B (en) 2010-12-10 2014-02-12 Ibm High-dynamic range video tone mapping
CN102081795B (zh) * 2011-01-14 2012-05-23 天津大学 基于稀疏表示的自动去块效应方法
JP2012213134A (ja) * 2011-03-24 2012-11-01 Sony Corp 画像処理装置および方法
CN107105229B9 (zh) 2011-04-14 2020-03-31 杜比实验室特许公司 图像解码方法、视频解码器和非暂态计算机可读存储介质
BR112013028556B1 (pt) * 2011-05-10 2022-01-04 Koninklijke Philips N.V. Aparelho e método para gerar um sinal de imagem e aparelho e método para processar um sinal de imagem
AU2012267007B2 (en) * 2011-06-10 2016-03-17 Mediatek Inc. Method and apparatus of scalable video coding
US8891863B2 (en) * 2011-06-13 2014-11-18 Dolby Laboratories Licensing Corporation High dynamic range, backwards-compatible, digital cinema
US9374576B2 (en) 2011-06-13 2016-06-21 Dolby Laboratories Licensing Corporation Fused region-based VDR prediction
WO2013006310A1 (en) * 2011-07-01 2013-01-10 Vidyo, Inc. Loop filter techniques for cross-layer prediction
US9838701B2 (en) 2011-08-03 2017-12-05 Mediatek Inc. Method and video decoder for decoding scalable video stream using inter-layer racing scheme
TWI575933B (zh) 2011-11-04 2017-03-21 杜比實驗室特許公司 階層式視覺動態範圍編碼中之層分解技術
WO2013068548A2 (en) 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Efficient multi-view coding using depth-map estimate for a dependent view
KR20240027889A (ko) 2011-11-11 2024-03-04 지이 비디오 컴프레션, 엘엘씨 깊이-맵 추정 및 업데이트를 사용한 효율적인 멀티-뷰 코딩
EP2781091B1 (en) 2011-11-18 2020-04-08 GE Video Compression, LLC Multi-view coding with efficient residual handling
US9111376B2 (en) 2012-01-26 2015-08-18 Samsung Electronics Co., Ltd. Image processing method and apparatus for 3D video
US9596463B2 (en) * 2012-02-22 2017-03-14 Qualcomm Incorporated Coding of loop filter parameters using a codebook in video coding
TWI486908B (zh) * 2012-05-11 2015-06-01 Mstar Semiconductor Inc 影像編碼的方法與相關裝置
CN103686165B (zh) * 2012-09-05 2018-01-09 乐金电子(中国)研究开发中心有限公司 深度图像帧内编解码方法及视频编解码器
CN104685878B (zh) * 2012-09-24 2018-11-30 华为技术有限公司 具有颜色空间缩放性的视频压缩
EP2903281A4 (en) * 2012-09-28 2016-04-27 Sony Corp ENCLOSURE DEVICE, ENCRYPTION METHOD, DECOMPOSITION DEVICE AND DECOMPOSITION METHOD
US20150237376A1 (en) * 2012-09-28 2015-08-20 Samsung Electronics Co., Ltd. Method for sao compensation for encoding inter-layer prediction error and apparatus therefor
CN110996100B (zh) * 2012-10-01 2022-11-25 Ge视频压缩有限责任公司 解码器、解码方法、编码器和编码方法
EP2904792B1 (en) * 2012-10-04 2021-08-25 Telefonaktiebolaget LM Ericsson (publ) Hierarchical deblocking parameter adaptation
MX342466B (es) 2012-11-27 2016-09-30 Lg Electronics Inc Aparato de transmision-recepcion de señal y metodo de transmision-recepcion de señal.
US9979985B2 (en) * 2012-12-13 2018-05-22 Saturn Licensing Llc Transmission device, transmitting method, reception device, and receiving method
US9596465B2 (en) * 2013-01-04 2017-03-14 Intel Corporation Refining filter for inter layer prediction of scalable video coding
US20140254659A1 (en) 2013-03-11 2014-09-11 Mediatek Inc. Video coding method using at least evaluated visual quality and related video coding apparatus
WO2015056953A1 (ko) * 2013-10-14 2015-04-23 삼성전자 주식회사 뎁스 인터 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
WO2015056566A1 (ja) * 2013-10-15 2015-04-23 ソニー株式会社 画像処理装置および方法
CN105850114B (zh) * 2013-12-27 2019-05-21 汤姆逊许可公司 用于图像的逆色调映射的方法
US9432696B2 (en) 2014-03-17 2016-08-30 Qualcomm Incorporated Systems and methods for low complexity forward transforms using zeroed-out coefficients
US9516345B2 (en) * 2014-03-17 2016-12-06 Qualcomm Incorporated Systems and methods for low complexity forward transforms using mesh-based calculations
AU2014202921B2 (en) * 2014-05-29 2017-02-02 Canon Kabushiki Kaisha Method, apparatus and system for de-blocking a block of video samples
JP6476057B2 (ja) * 2015-04-28 2019-02-27 日本放送協会 量子化テーブル補正装置、階調削減装置、及びプログラム
EP3329676B1 (en) 2015-07-28 2020-07-29 Dolby Laboratories Licensing Corporation Sdr bit depth enhancement via codeword range amplification in a codec with inverse display management

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1827024A1 (en) * 2006-02-24 2007-08-29 Sharp Kabushiki Kaisha High dynamic range video coding

Family Cites Families (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5748763A (en) * 1993-11-18 1998-05-05 Digimarc Corporation Image steganography system featuring perceptually adaptive and globally scalable signal embedding
US5754704A (en) * 1995-03-10 1998-05-19 Interated Systems, Inc. Method and apparatus for compressing and decompressing three-dimensional digital data using fractal transform
US5940089A (en) * 1995-11-13 1999-08-17 Ati Technologies Method and apparatus for displaying multiple windows on a display monitor
US6957350B1 (en) * 1996-01-30 2005-10-18 Dolby Laboratories Licensing Corporation Encrypted and watermarked temporal and resolution layering in advanced television
US6711297B1 (en) * 1998-07-03 2004-03-23 University Of Pittsburgh - Of The Commonwealth System Of Higher Education Methods and apparatus for dynamic transfer of image data
US6804403B1 (en) * 1998-07-15 2004-10-12 Digital Accelerator Corporation Region-based scalable image coding
US7339595B2 (en) * 1998-10-19 2008-03-04 Lightsurf Technologies, Inc. Method and system for improved internet color
AUPP702498A0 (en) * 1998-11-09 1998-12-03 Silverbrook Research Pty Ltd Image creation method and apparatus (ART77)
US7136062B1 (en) * 1999-09-14 2006-11-14 Microsoft Corporation Scalable multiparty conferencing and collaboration system and method of dynamically allocating system resources and providing true color support in same
US6549674B1 (en) * 2000-10-12 2003-04-15 Picsurf, Inc. Image compression based on tiled wavelet-like transform using edge and non-edge filters
WO2001080561A1 (en) * 2000-04-18 2001-10-25 Rtimage Inc. System and method for the lossless progressive streaming of images over a communication network
WO2002048966A1 (en) * 2000-12-14 2002-06-20 Rtimage Inc. Three-dimensional image streaming system and method for medical images
US6898323B2 (en) * 2001-02-15 2005-05-24 Ricoh Company, Ltd. Memory usage scheme for performing wavelet processing
US7929610B2 (en) * 2001-03-26 2011-04-19 Sharp Kabushiki Kaisha Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding
KR100936635B1 (ko) * 2001-06-11 2010-01-14 톰슨 라이센싱 에스.에이. 미세 입자 스케일 가능한 비디오에 대한 움직임 보상
PT1978747E (pt) 2001-11-29 2014-07-24 Panasonic Ip Corp America Método de remoção de distorção de codificação
US7003166B2 (en) * 2002-01-29 2006-02-21 Eastman Kodak Company Method of encoding data in a monochrome media
US6803922B2 (en) * 2002-02-14 2004-10-12 International Business Machines Corporation Pixel formatter for two-dimensional graphics engine of set-top box system
US7324695B2 (en) * 2002-03-18 2008-01-29 Seimens Medical Solutions Usa, Inc. Prioritized image visualization from scalable compressed data
US7209599B2 (en) * 2002-07-12 2007-04-24 Hewlett-Packard Development Company, L.P. System and method for scanned image bleedthrough processing
US7365877B2 (en) * 2002-07-19 2008-04-29 Imaging Solutions A.G. Optimization of image data by color management
US7421129B2 (en) * 2002-09-04 2008-09-02 Microsoft Corporation Image compression and synthesis for video effects
US7308146B2 (en) * 2002-09-30 2007-12-11 Canon Kabushiki Kaisha Digital video compression
CN101651831B (zh) * 2003-01-08 2013-07-17 苹果公司 用于改进的编码模式选择的方法和装置
KR20050105268A (ko) * 2003-03-03 2005-11-03 코닌클리케 필립스 일렉트로닉스 엔.브이. 비디오 인코딩
US20050024651A1 (en) * 2003-07-29 2005-02-03 Zhenghua Yu Adaptive complexity scalable post-processing method
TWI237995B (en) * 2004-03-05 2005-08-11 Ali Corp Method and apparatus for removing blocking artifact of video picture via loop filtering using perceptual threshold
KR101014667B1 (ko) * 2004-05-27 2011-02-16 삼성전자주식회사 스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법
KR100679035B1 (ko) * 2005-01-04 2007-02-06 삼성전자주식회사 인트라 ｂｌ 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
JP4191729B2 (ja) 2005-01-04 2008-12-03 三星電子株式会社 イントラｂｌモードを考慮したデブロックフィルタリング方法、及び該方法を用いる多階層ビデオエンコーダ／デコーダ
KR100763178B1 (ko) * 2005-03-04 2007-10-04 삼성전자주식회사 색 공간 스케일러블 비디오 코딩 및 디코딩 방법, 이를위한 장치
US7502501B2 (en) * 2005-12-22 2009-03-10 Carestream Health, Inc. System and method for rendering an oblique slice through volumetric data accessed via a client-server architecture
CN101001383A (zh) * 2006-01-12 2007-07-18 三星电子株式会社 基于多层的视频编码/解码方法和编码器/解码器
EP2041983B1 (en) * 2006-07-17 2010-12-15 Thomson Licensing Method and apparatus for encoding video color enhancement data, and method and apparatus for decoding video color enhancement data
US8306107B2 (en) * 2006-10-25 2012-11-06 Thomson Licensing Syntax elements to SVC to support color bit depth scalability
CN101589625B (zh) * 2006-10-25 2011-09-21 弗劳恩霍夫应用研究促进协会 质量可缩放编码
EP1933563A1 (en) * 2006-12-14 2008-06-18 Thomson Licensing Method and apparatus for encoding and/or decoding bit depth scalable video data using adaptive enhancement layer residual prediction
EP2092747B1 (en) * 2006-12-14 2015-08-12 Thomson Licensing Method and apparatus for encoding and/or decoding bit depth scalable video data using adaptive enhancement layer prediction
EP1933564A1 (en) * 2006-12-14 2008-06-18 Thomson Licensing Method and apparatus for encoding and/or decoding video data using adaptive prediction order for spatial and bit depth prediction
CN101601299A (zh) * 2006-12-14 2009-12-09 汤姆逊许可公司 用位深度可分级性的增强层残差预测对视频数据进行编码和/或解码的方法和设备
EP2127395B1 (en) * 2007-01-10 2016-08-17 Thomson Licensing Video encoding method and video decoding method for enabling bit depth scalability
US8014613B2 (en) * 2007-04-16 2011-09-06 Sharp Laboratories Of America, Inc. Methods and systems for inter-layer image parameter prediction
TW200845723A (en) * 2007-04-23 2008-11-16 Thomson Licensing Method and apparatus for encoding video data, method and apparatus for decoding encoded video data and encoded video signal
US7983496B2 (en) * 2007-06-26 2011-07-19 Mitsubishi Electric Research Laboratories, Inc. Inverse tone mapping for bit-depth scalable image coding adapted to variable block sizes
US8085852B2 (en) * 2007-06-26 2011-12-27 Mitsubishi Electric Research Laboratories, Inc. Inverse tone mapping for bit-depth scalable image coding
CN101796841B (zh) * 2007-06-27 2012-07-18 汤姆逊许可公司 用增强层残差预测对视频数据编码/解码的方法和设备
EP2172025A1 (en) * 2007-06-27 2010-04-07 Thomson Licensing Enhancing image quality
WO2009003499A1 (en) 2007-06-29 2009-01-08 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Scalable video coding supporting pixel value refinement scalability
EP2051527A1 (en) * 2007-10-15 2009-04-22 Thomson Licensing Enhancement layer residual prediction for bit depth scalability using hierarchical LUTs
JP5411147B2 (ja) * 2007-10-16 2014-02-12 トムソン ライセンシング ビット深さスケーラビリティのためのアーチファクト除去のための方法および装置
WO2009054920A2 (en) * 2007-10-19 2009-04-30 Thomson Licensing Combined spatial and bit-depth scalability
US20110091130A1 (en) * 2008-06-09 2011-04-21 Universite De Montreal Method and module for improving image fidelity
US8750632B2 (en) * 2008-12-26 2014-06-10 JVC Kenwood Corporation Apparatus and method for encoding images from multiple viewpoints and associated depth information
KR101740741B1 (ko) * 2009-02-11 2017-06-08 톰슨 라이센싱 톤 매핑 및 톤 역매핑을 이용하는 비트 심도 스케일링 가능 비디오 인코딩 및 디코딩을 위한 방법 및 장치
US20100220786A1 (en) * 2009-02-27 2010-09-02 Hong Kong Applied Science and Technology Research Institute Company Limited Method and apparatus for multiple reference picture motion estimation
JP2011091577A (ja) * 2009-10-21 2011-05-06 Sony Corp 符号化装置および方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1827024A1 (en) * 2006-02-24 2007-08-29 Sharp Kabushiki Kaisha High dynamic range video coding

Also Published As

Publication number Publication date
TWI412283B (zh) 2013-10-11
US8369422B2 (en) 2013-02-05
JP5411147B2 (ja) 2014-02-12
TWI387346B (zh) 2013-02-21
US20100220796A1 (en) 2010-09-02
WO2009051704A1 (en) 2009-04-23
TW200935921A (en) 2009-08-16
EP2204046A1 (en) 2010-07-07
EP2204046B1 (en) 2019-12-04
JP5409640B2 (ja) 2014-02-05
BRPI0817770A2 (pt) 2015-03-24
CN101828401B (zh) 2013-07-17
KR101509070B1 (ko) 2015-04-06
BRPI0817767A2 (pt) 2020-01-28
US20100220795A1 (en) 2010-09-02
WO2009051690A1 (en) 2009-04-23
KR20100074186A (ko) 2010-07-01
EP2204047A1 (en) 2010-07-07
BRPI0817770B1 (pt) 2020-11-10
CN101828402B (zh) 2013-09-11
TW200935915A (en) 2009-08-16
EP2204047B1 (en) 2018-04-25
JP2011501561A (ja) 2011-01-06
JP2011501565A (ja) 2011-01-06
CN101828401A (zh) 2010-09-08
US8391353B2 (en) 2013-03-05
KR20100081348A (ko) 2010-07-14
CN101828402A (zh) 2010-09-08

Similar Documents

Publication Publication Date Title
KR101512833B1 (ko) 비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치
JP6630988B2 (ja) 複数の隣接する量子化パラメータから量子化パラメータ予測子を決定する方法及び装置
JP6111295B2 (ja) 符号化及び復号化のための装置
KR101490534B1 (ko) 멀티 뷰 코딩된 비디오에서 조도 보상 및/또는 컬러 보상에 대한 코딩 아티팩트 감소 방법 및 장치
JP2011501561A5 (ko)
JP6538488B2 (ja) 映像符号化のためのｄｃイントラ予測モードのための方法
JP6425609B2 (ja) 空間変化残差符号化を行う方法および装置
JP2011517230A (ja) 変位イントラ予測およびテンプレート・マッチングのためのデブロッキング・フィルタリング
JP2015146643A (ja) アーティファクト除去フィルタリングのための領域ベースのフィルタ・パラメータの選択を行う方法および装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
FPAY Annual fee payment

Payment date: 20190401

Year of fee payment: 5