KR102291835B1 - 교차 평면 필터링을 이용한 향상된 크로마 코딩 - Google Patents

교차 평면 필터링을 이용한 향상된 크로마 코딩 Download PDF

Info

Publication number
KR102291835B1
KR102291835B1 KR1020187002181A KR20187002181A KR102291835B1 KR 102291835 B1 KR102291835 B1 KR 102291835B1 KR 1020187002181 A KR1020187002181 A KR 1020187002181A KR 20187002181 A KR20187002181 A KR 20187002181A KR 102291835 B1 KR102291835 B1 KR 102291835B1
Authority
KR
South Korea
Prior art keywords
luma
sample
samples
chroma
cross
Prior art date
Application number
KR1020187002181A
Other languages
English (en)
Other versions
KR20180039052A (ko
Inventor
용 히
우웬 헤
얀 예
샤오우 씨우
Original Assignee
인터디지털 매디슨 페턴트 홀딩스 에스에이에스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인터디지털 매디슨 페턴트 홀딩스 에스에이에스 filed Critical 인터디지털 매디슨 페턴트 홀딩스 에스에이에스
Priority to KR1020217025704A priority Critical patent/KR102460912B1/ko
Publication of KR20180039052A publication Critical patent/KR20180039052A/ko
Application granted granted Critical
Publication of KR102291835B1 publication Critical patent/KR102291835B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Abstract

교차 평면 필터링이 향상된 크로마 코딩을 위해 사용될 수 있다. 현재 픽처과 연관된 교차 평면 필터의 표시가 수신될 수 있다. 현재 픽처는 인트라 코딩된 비디오 블록 및 복수의 기준 샘플들을 포함할 수 있다. 복수의 기준 샘플들은 인트라 코딩된 비디오 블록을 예측하기 위해 사용될 수 있다. 루마 샘플 영역이 현재 픽처에서 결정될 수 있다. 루마 샘플 영역은 현재 픽처에서 대응하는 크로마 샘플을 향상시키기 위해 결정될 수 있다. 교차 평면 필터는 오프셋을 결정하기 위해 루마 샘플 영역 내의 복수의 루마 샘플들에 적용될 수 있다. 교차 평면 필터는 하이 패스 필터일 수 있다. 오프셋은 대응하는 크로마 샘플에 적용되어 향상된 크로마 샘플을 결정할 수 있다.

Description

교차 평면 필터링을 이용한 향상된 크로마 코딩
관련 출원에 대한 상호 참조
본 출원은 2015년 7월 8일자에 출원된 미국 가특허 출원 제62/190,008호의 우선권을 주장하며, 이는 그 전체가 참조로써 본 출원에 포함된다.
비디오 코딩 시스템은 디지털 비디오 신호를 압축하기 위해 사용될 수 있다. 예를 들어, 비디오 코딩 시스템은 소모되는 저장 공간을 감소 및/또는 비디오 신호와 연관된 전송 대역폭 소비를 감소시킬 수 있다. 예를 들어, 블록 기반 하이브리드 비디오 코딩 시스템이 사용될 수 있다.
디지털 비디오 신호는 세 개의 컬러 평면을 포함할 수 있다. 세 개의 컬러 평면은 루마 평면, 블루-차이 크로마 평면 및 레드-차이 크로마 평면을 포함할 수 있다. 크로마 평면들의 픽셀은 루마 평면의 픽셀보다 작은 동적 범위를 가질 수 있다. 예를 들어, 비디오 이미지의 크로마 평면들은 비디오 이미지의 루마 평면보다 매끄럽고/매끄럽거나 덜 상세할 수 있다. 비디오 이미지의 크로마 블록은 예측(예를 들어, 정확하게 예측)하는 것이 용이할 수 있다. 예를 들어, 크로마 블록의 예측은 더 적은 리소스를 소비 및/또는 더 적은 예측 에러를 야기할 수 있다.
높은 동적 범위(high dynamic range; HDR) 비디오는 표준 동적 범위(standard dynamic range; SDR) 비디오보다 더 넓은 동적 범위를 제공할 수 있다. HDR 비디오의 동적 범위는 사람 눈의 능력에 더 가까울 수 있다. HDR 비디오에서의 크로마 아티팩트(chroma artifacts)는 SDR 비디오에서의 크로마 아티팩트보다 밝은 배경에서 더 잘 보일 수 있다. HDR 비디오 코딩은 전처리, 코딩, 디코딩 및/또는 후처리를 포함할 수 있다.
교차 평면 필터링을 사용하는 향상된 크로마 코딩을 위한 시스템, 방법 및 도구가 개시된다. 현재 픽처와 연관된 교차 평면 필터의 표시가 수신될 수 있다. 표시는 교차 평면 필터와 연관된 하나 이상의 필터 계수를 포함할 수 있다. 현재 픽처는 인트라 코딩된 비디오 블록 및 복수의 기준 샘플들을 포함할 수 있다. 복수의 기준 샘플들은 인트라 코딩된 비디오 블록을 예측하기 위해 사용될 수 있다. 루마 샘플 영역이 현재 픽처에서 결정될 수 있다. 루마 샘플 영역은 복수의 루마 샘플들을 포함할 수 있다. 예를 들어, 루마 샘플 영역은 3x3 블록의 루마 샘플들일 수 있다. 복수의 루마 샘플들은 예측된 루마 샘플들 - 예측된 루마 샘플들에 교차 평면 필터가 루마 샘플들의 재구성 이전에 적용됨 - 을 포함할 수 있다. 복수의 루마 샘플들은 재구성된 루마 샘플들 - 재구성된 루마 샘플들에 교차 평면 필터가 재구성 이후에 적용됨 - 을 포함할 수 있다. 루마 샘플 영역은 선택된 인트라 예측 모드에 기초하여 결정될 수 있다.
루마 샘플 영역은 현재 픽처에서의 대응하는 크로마 샘플을 향상시키기 위해 결정될 수 있다. 대응하는 크로마 샘플은 예측된 크로마 샘플 또는 재구성된 크로마 샘플일 수 있다. 대응하는 크로마 샘플이 인트라 코딩된 비디오 블록에서의 예측된 크로마 샘플인 경우, 향상된 크로마 샘플이 예측을 위해 사용될 수 있다. 대응하는 크로마 샘플이 인-루프(in-loop) 필터링 전의 재구성된 크로마 샘플인 경우, 인-루프 필터링이 적용되기 이전에 향상된 크로마 샘플이 대응하는 크로마 샘플을 대체하기 위해 사용될 수 있다. 대응하는 크로마 샘플은 인트라 코딩된 비디오 블록에서 하나 이상의 크로마 샘플을 예측하기 위해 사용되는 기준 크로마 샘플일 수 있다. 수신된 크로마 향상 표시자에 기초하여 교차 평면 필터를 적용할지 여부가 결정된다. 수신된 크로마 향상 표시자는 블록 레벨에서 수신될 수 있다. 교차 평면 필터는 오프셋을 결정하기 위해 루마 샘플 영역 내의 복수의 루마 샘플들에 적용될 수 있다. 교차 평면 필터는 하이 패스 필터일 수 있다. 오프셋은 대응하는 크로마 샘플에 적용되어 향상된 크로마 샘플을 결정할 수 있다. 루마 샘플 영역은 이용 불가능한 루마 샘플을 포함할 수 있다. 이용 불가능한 루마 샘플은, 예를 들어, 교차 평면 필터를 복수의 루마 샘플들에 적용하기 전에 이웃하는 이용 가능한 루마 샘플로 대체될 수 있다. 적용할 교차 평면 필터는 선택된 인트라 예측 모드에 기초하여 결정될 수 있다.
복수의 루마 샘플 영역들이 현재 픽처에 대해 결정될 수 있다. 예를 들어, 제 1 루마 샘플 영역 및 제 2 루마 샘플 영역이 결정될 수 있다. 제 1 루마 샘플 영역은 제 1의 복수의 루마 샘플들을 포함할 수 있다. 제 2 루마 샘플 영역은 제 2의 복수의 루마 샘플들을 포함할 수 있다. 제 1 루마 샘플 영역은 현재 픽처에서 제 1의 대응하는 크로마 샘플과 이웃할 수 있다. 제 2 루마 샘플 영역은 현재 픽처에서 제 2의 대응하는 크로마 샘플과 이웃할 수 있다. 교차 평면 필터는 제 1 오프셋 및 제 2 오프셋을 결정하기 위해 제 1의 복수의 루마 샘플들 및 제 2의 복수의 루마 샘플들에 각각 적용될 수 있다. 제 1 오프셋은 제 1의 대응하는 크로마 샘플에 적용되어 제 1의 향상된 크로마 샘플을 결정할 수 있다. 제 2 오프셋은 제 2의 대응하는 크로마 샘플에 적용되어 제 2의 향상된 크로마 샘플을 결정할 수 있다.
특허 또는 출원서는 컬러로 제작된 적어도 하나의 도면을 포함한다. 컬러 도면(들)과 이 특허 또는 특허 출원 공개의 사본은 요청시 및 필요한 수수료 지불시 사무소가 제공한다.
도 1은 블록 기반 하이브리드 비디오 인코더의 일례를 도시한다.
도 2는 블록 기반 하이브리드 비디오 디코더의 일례를 도시한다.
도 3은 블록 크기 NxN 샘플들에 대한 예측된 샘플들 Px , y를 획득하기 위해 예측에 사용되는 기준 샘플들 Rx, y의 일례를 도시한다.
도 4는 인트라 예측 유닛에 대한 분할 모드의 일례를 도시한다.
도 5는 각도 인트라 예측 모드의 일례를 도시한다.
도 6은 인트라 경계 필터의 일례를 도시한다.
도 7은 HEVC 인터 예측 코딩을 위한 상이한 분할의 일례를 도시한다.
도 8a는 모션 벡터를 사용하는 모션 보상 예측의 일례를 도시한다.
도 8b는 부분 샘플 보간의 일례를 도시한다.
도 9는 현재 블록으로부터 재구성된 루마 샘플들을 사용하지 않는 교차 평면 필터링을 사용하는 크로마 기준 샘플 향상의 일례를 도시한다.
도 10은 현재 블록으로부터 재구성된 루마 샘플들을 사용하는 교차 평면 필터링을 사용하는 크로마 기준 샘플 향상의 일례를 도시한다.
도 11은 예측된 크로마 샘플 향상을 갖는 블록 기반 하이브리드 인코더의 일례를 도시한다.
도 12는 교차 평면 필터링을 사용하여 예측된 크로마 샘플을 향상시키는 일례를 도시한다.
도 13은 재구성된 크로마 샘플들 상에 크로마 향상을 갖는 블록 기반 하이브리드 인코더의 일례를 도시한다.
도 14는 교차 평면 필터링을 사용하는 크로마 재구성된 샘플 향상의 일례를 도시한다.
도 15a는 하나 이상의 개시된 실시예가 구현될 수 있는 예시적인 통신 시스템의 시스템 다이어그램이다.
도 15b는 도 15a에 예시된 통신 시스템 내에서 사용될 수 있는 예시적인 무선 송수신 유닛(wireless transmit/receive unit; WTRU)의 시스템 다이어그램이다.
도 15c는 도 15a에 예시된 통신 시스템 내에서 사용될 수 있는 예시적인 무선 액세스 네트워크 및 예시적인 코어 네트워크의 시스템 다이어그램이다.
도 15d는 도 15a에 예시된 통신 시스템 내에서 사용될 수 있는 다른 예시적인 무선 액세스 네트워크 및 예시적인 코어 네트워크의 시스템 다이어그램이다.
도 15e는 도 15a에 예시된 통신 시스템 내에서 사용될 수 있는 다른 예시적인 무선 액세스 네트워크 및 예시적인 코어 네트워크의 시스템 다이어그램이다.
예시적인 실시예들의 상세한 설명이 이제 다양한 도면들을 참조하여 설명될 것이다. 이러한 설명은 가능한 구현예들의 상세한 예시를 제공하지만, 이러한 상세한 설명은 예시적인 것으로, 결코 애플리케이션의 범위를 한정하기 위한 것이 아님을 유념해야 한다.
비디오 코딩 시스템은, 예를 들어, 디지털 비디오 신호의 저장 및/또는 전송 대역폭을 감소시키기 위해 디지털 비디오 신호를 압축할 수 있다. 블록 기반, 웨이브릿 기반, 객체 기반 시스템 및 블록 기반 하이브리드 비디오 코딩 시스템과 같은 다양한 비디오 코딩 시스템이 있다. 블록 기반 비디오 코딩 시스템의 예에는 H.261, MPEG(Moving Picture Experts Group; 동영상 전문가 그룹)-1, MPEG-2, H.263, H.264/AVC(Advanced Video Coding; 고급 비디오 코딩) 및 H.265/HEVC(High Efficiency Video Coding; 고효율 비디오 코딩)이 있다.
도 1은 블록 기반 하이브리드 비디오 인코더의 일례를 도시한다. 예를 들어, (예를 들어, 각각의) 비디오 블록에 대해, 예를 들어, 비디오 블록의 공간 및 시간 리던던시를 감소시키기 위해, 공간 예측 (예를 들어, 인트라 예측) 또는 시간 예측 (예를 들어, 인터 예측)이 수행될 수 있다. 인트라 또는 인터 예측으로부터 생성된 예측 블록이 현재 비디오 블록으로부터 감산될 수 있다. 결과적인 예측 잔차가 변환되고 양자화될 수 있다. 잔차는, 예를 들어, 양자화된 잔차 계수를 역양자화 및 역변환함으로써 재구성될 수 있다. 재구성된 잔차는, 예를 들어, 재구성 비디오 블록을 형성하기 위해 예측 블록에 가산될 수 있다. 인-루프 필터링이 재구성된 비디오 블록에 적용될 수 있다. 필터링된 재구성된 비디오 블록은 디코딩 픽처 버퍼에 저장될 수 있으며, 하나 이상의 다음 비디오 블록을 코딩하기 위해 사용될 수 있다.
도 2는 블록 기반 하이브리드 비디오 디코더의 일례를 도시한다. 도 2의 디코더는 도 1의 인코더에 대응할 수 있다. 인코딩된 비디오 비트스트림이 파싱되어 엔트로피 디코딩될 수 있다. 코딩 모드 및 연관된 예측 정보가, 예를 들어, 예측 블록을 형성하기 위해, 예를 들어, 공간 예측 또는 모션 보상 예측에 전달될 수 있다. 잔차 변환 계수가, 예를 들어, 잔차 블록을 재구성하기 위해, 역양자화 및 역변환될 수 있다. 예측 블록 및 재구성된 잔차 블록이 함께 가산되어, 예를 들어, 재구성된 비디오 블록을 형성할 수 있다. 인-루프 필터링이 재구성된 비디오 블록에 적용될 수 있다. 필터링된 재구성된 비디오 블록은 기준 픽처 버퍼에 저장될 수 있으며, 미래의 비디오 블록을 예측하기 위해 사용될 수 있다.
예를 들어, JPEG(Joint Photographic Experts Group; 공동 영상 전문가 그룹), H.261, MPEG-1, MPEG-2, H.263, H.264/AVC 및 H.265/HEVC과 같은 일부 이미지 및 비디오 코딩 기술로 공간 상관관계를 제거하기 위해, 인트라 코딩이 사용될 수 있다. 예를 들어, H.264/AVC 및 H.265/HEVC에서, 예를 들어, 코딩 효율을 개선하기 위해, 방향성 인트라 예측이 사용될 수 있다. 인트라 예측 모드가, 예를 들어, 예측될 현재 블록의 상부 및 좌측으로부터의 기준 샘플들의 세트를 사용할 수 있다. 기준 샘플들은 Rx , y로 표시될 수 있다. 예를 들어, 위치(x, y)의 원점은 블록의 좌측 상단 코너의 상부 및 좌측에 있는 하나의 픽셀일 수 있다. 위치(x, y)에서 예측된 샘플 값은 Px , y로 표시될 수 있다.
도 3은 블록 크기 NxN 샘플들에 대한 예측된 샘플들 Px , y를 획득하기 위해 예측에 사용되는 기준 샘플들 Rx , y의 일례를 도시한다.
도 4는 인트라 예측 유닛(prediction unit; PU)에 대한 분할 모드의 일례를 도시한다. HEVC 인트라 코딩은 여러 유형의 PU 분할, 예를 들어 PART_2Nx2N 및 PART_NxN을 지원할 수 있으며, 이들은 코딩 유닛(coding unit; CU)을 각각 1개 또는 4개의 동일한 크기의 PU로 분할할 수 있다. CU 크기가 구성된 최소 CU 크기인 경우, PART_2Nx2N을 사용할 수 있다.
예를 들어, 4:2:0 크로마 포맷의 경우, 4개의 4x4 PU로 분할된 8x8 CU는 4개의 루마 예측 블록(prediction block; PB)을 가질 수 있다. 예를 들어, 2x2 크로마 인트라 예측 블록들에 의해 야기되는 높은 처리량을 피하기 위해, 인트라 코딩된 블록들에 대해 크로마 채널마다 하나의 4x4 PB가 있을 수 있다.
CU는 다수의 변환 유닛(transform units; TU)으로 분할될 수 있다. 인트라 예측은 TU에 순차적으로 적용될 수 있다. 예를 들어, PU 레벨에서 인트라 예측을 적용하는 것에 비해, 순차적 인트라 예측은 현재 TU 샘플에 더 가까운 이전의 재구성된 TU로부터의 이웃하는 기준 샘플들의 인트라 예측의 사용을 허용할 수 있다.
도 5는 각도 인트라 예측 모드의 일례를 도시한다. HEVC는 하나 이상의 (예를 들어, 35개) 인트라 예측 모드를 지원할 수 있다. 하나 이상의 인트라 예측 모드는 DC 모드, 평면 모드 및/또는 33개의 방향성 또는 '각도' 인트라 예측 모드를 포함할 수 있다.
각도 인트라 예측은 비디오 및 이미지 콘텐츠에서 상이한 방향성 구조를 효율적으로 모델링하기 위해 사용될 수 있다. 예측 방향의 수 및 각상(angularity)은 인코딩 복잡도와 코딩 효율 사이의 트레이드 오프에 기초하여 선택될 수 있다.
예측된 샘플 Px , y는, 예를 들어, 그 위치를 픽셀의 기준 행 또는 열에 투영하고, 선택된 예측 방향을 적용하며, 샘플에 대한 예측된 값을 1/32 픽셀 정확도로 보간함으로써 획득될 수 있다. 보간은 2개의 가장 가까운 기준 샘플들, 예컨대 수직 예측(예를 들어, 도 5에 도시된 바와 같은 모드 18 내지 34)에 대해 Ri,0 및 Ri+1,0, 그리고 수평 예측(예컨대, 도 5에 도시된 바와 같은 모드 2 내지 17)에 대해 R0,i 및 R0,i+1을 사용하여 선형적으로 수행될 수 있다.
HEVC는 다양한 (예를 들어, 모든) PU 크기에 대한 루마 인트라 예측을 위해 하나 이상의 인트라 예측 모드를 지원할 수 있다. HEVC는, 예를 들어, 하나 이상의 이웃하는 PU들의 모드에 기초하여, (예를 들어, 각각의) PU에 대해 다수의 (예를 들어, 3개의) 가장 가능성 있는 모드(most probable mode; MPM)를 정의할 수 있다. 현재의 인트라 예측 모드는 MPM들의 세트 내의 요소들 중 하나의 요소와 동일할 수 있다. 세트 내의 인덱스는 디코더에 전송될 수 있다. 코드(예를 들어, 5 비트 고정 길이 코드)가 MPM들의 세트 이외의 선택 모드를 결정하기 위해 사용될 수 있다.
기준 샘플들은 평활화될 수 있다. 일 예에서, 3-탭 평활화 필터가 하나 이상의 기준 샘플에 적용될 수 있다. 평활화는, 예를 들어, intra _smoothing_disabled_flag가 0으로 설정된 경우에 적용될 수 있다. 필터링은, 예를 들어, 주어진 인트라 예측 모드 및/또는 변환 블록 크기에 의해 제어될 수 있다. 일 예에서, 32x32 블록에 대해, 수평 및 수직 각도 모드를 제외한 각도 모드가 필터링된 기준 샘플들을 사용할 수 있다. 다른 예에서, 예를 들어, 16x16 블록에 대해, 필터링된 기준 샘플들을 사용하지 않는 모드가, 도 5에 도시된 바와 같이 수평 및 수직에 가장 가까운 4개의 모드(예를 들어, 9, 11, 25, 27)에 확장될 수 있다. 다른 예에서, 예를 들어, 8x8 블록에 대해, 대각선 모드(2, 18, 34)가 필터링된 기준 샘플들을 사용할 수 있다.
인트라 예측은 크로마 성분에 적용될 수 있다. 일 예에서, 인트라 예측 모드가, 예를 들어, 크로마와 연관된 하나 이상의 예측 블록(PB)에 대해, 예를 들어, 평면, DC, 수평, 수직, 'DM_CHROMA' 모드, 대각선 모드(34)로서 지정될 수 있다.
표 1은 크로마에 대한 인트라 예측 모드와 인트라 예측 방향 간의 예시적인 매핑을 도시한다. 크로마 컬러 채널 인트라 예측 모드는 대응하는 루마 PB 인트라 예측 모드 및/또는 intra _ chroma _ pred _mode 구문 요소에 기초할 수 있다.
Figure 112018021329279-pct00001
표 2는, 예를 들어, DM_CHROMA 모드가 선택되고 4:2:2 크로마 포맷이 사용되는 경우, 4:2:2 크로마 포맷에 대한 인트라 예측 모드의 예시적인 사양을 도시한다. 크로마 PB에 대한 인트라 예측 모드는, 예를 들어, 표 2에서 지정된 바와 같이, 대응하는 루마 PB에 대한 인트라 예측 모드로부터 도출될 수 있다.
Figure 112018021329279-pct00002
도 6은 인트라 경계 필터의 일례를 도시한다. 예를 들어, 인트라 예측된 변환 블록(transform block; TB)을 재구성할 때, 인트라 경계 필터가 사용될 수 있다. 예를 들어, 도 6에 도시된 바와 같이, 수평, 수직 및/또는 DC 인트라 예측 모드를 사용하는 PB들에 대해 TB의 좌측 및/또는 상부 에지들을 따라 예측된 루마 샘플들을 필터링하기 위해 인트라 경계 필터가 사용될 수 있다.
인트라 경계 필터는, 예를 들어, 입력으로서 예측된 샘플 p 및/또는 출력으로서 predSample의 어레이에 기초하여 정의될 수 있다.
수학식(1)에 의해 제공되는 인트라 경계 필터링은, 예를 들어, 32x32보다 작은 루마 변환 블록 크기(nTbS), 0과 동일한 disableIntraBoundaryFilter에 적용되는 수평 인트라 예측을 위해, 출력으로 predSamples를 생성하기 위해 사용될 수 있고, 여기서 x = 0...nTbS-1, y = 0이다:
Figure 112018021329279-pct00003
수학식(2)에 의해 제공되는 인트라 경계 필터링은, 예를 들어, 32x32보다 작은 루마 변환 블록 크기(nTbS), 0과 동일한 disableIntraBoundaryFilter에 적용되는 수직 인트라 예측을 위해, 출력으로 predSamples를 생성하기 위해 사용될 수 있고, 여기서 x = 0...nTbS-1, y = 0이다:
Figure 112018021329279-pct00004
수학식(3), 수학식(4) 및 수학식(5)에 의해 제공되는 인트라 경계 필터링은, 예를 들어, 32x32보다 작은 루마 변환 블록 크기(nTbS) 및 DC 예측자 dcVal에 적용되는 DC 인트라 예측을 위해, 출력으로 predSamples를 생성하기 위해 사용될 수 있다:
Figure 112018021329279-pct00005
Figure 112018021329279-pct00006
Figure 112018021329279-pct00007
경계 평활화에 의한 개선, 예를 들어, 0.4% 평균 개선이 제공될 수 있다. 인트라 경계 필터는 루마 성분에 적용될 수 있다. 인트라 경계 필터는, 예를 들어, 크로마 성분에 대한 예측이 매끄럽게 되는 경향이 있기 때문에, 크로마 성분에는 적용될 수 없다.
HEVC 인트라 모드 잔차 코딩이 잔차 정보를 코딩하기 위해 인트라 모드 종속적 변환 및/또는 계수 스캐닝을 사용할 수 있다. 이산 사인 변환(discrete sine transform; DST)이 4x4 루마 블록에 대해 선택될 수 있다. 이산 코사인 변환(discrete cosine transform; DCT)이 다른 유형의 블록에 대해 선택/사용될 수 있다.
예를 들어, 선형 모델(linear-model; LM) 기반 크로마 인트라 예측 모드가, 예를 들어, 수학식(6)에 따라, 선형 모델(LM)을 사용하여 병치된(collocated) 재구성된 루마 샘플로부터 크로마 샘플을 예측하기 위해 사용될 수 있다:
Figure 112018021329279-pct00008
여기서 PredC는 블록 내의 예측된 크로마 샘플을 나타낼 수 있고, RecL은 블록 내의 대응하는 재구성된 루마 샘플을 나타낼 수 있다. 파라미터 α 및 β는 현재 블록 주위의 인과 관계의 재구성된 루마 및 크로마 샘플로부터 도출될 수 있다.
선형 모델 크로마 인트라 예측은 코딩 효율을 개선할 수 있다. 예를 들어, 테스트 구성에서의 실험 결과는 Y, Cb, Cr 성분의 평균 BD(Bjøntegaard delta)-레이트 감소가 각각 1.3%, 6.5% 및 5.5%를 포함한다는 것을 나타낸다. 일 예에서, 크로마 성분의 유사한 수준의 코딩 효율 개선이 테스트 구성에서 제공될 수 있다.
도 7은 HEVC 인터 예측 코딩을 위한 상이한 분할의 일례를 도시한다. 예를 들어, 시간 리던던시를 제거 또는 감소시키기 위해 인터 코딩이 사용될 수 있다. HEVC 인터 예측 코딩은 인트라 예측 코딩(예를 들어, 인트라 코딩)보다 많은 PB 분할 형상을 지원할 수 있다. 인트라 예측은, 예를 들어, 분할 PART_2Nx2N, PART_2NxN, PART_Nx2N, PART_NxN을 지원할 수 있다. 인터 픽처 예측은, 예를 들어, 분할 PART_2Nx2N, PART_2NxN, PART_Nx2N, PART_NxN 및 비대칭 모션 분할 PART_2NxnU, PART_2NxnD, PART_nLx2N 및 PART_nRx2N을 지원할 수 있다.
(예를 들어, 각각의) 인터 예측된 PU는 하나 이상의 모션 벡터 및 하나 이상의 기준 픽처 인덱스를 포함하는 모션 파라미터 세트를 가질 수 있다. P 슬라이스는, 예를 들어, 하나의 기준 픽처 리스트를 사용할 수 있고, B 슬라이스는, 예를 들어, 2개의 기준 픽처 리스트를 사용할 수 있다. PB의 인터 예측 샘플은 기준 픽처 인덱스에 의해 식별되는 기준 픽처에서 대응하는 블록 영역의 하나 이상의 샘플로부터 결정될 수 있다. 기준 픽처 인덱스는 모션 벡터(motion vector; MV)의 수평 및 수직 성분에 의해 변위된 위치에 있을 수 있다.
도 8a는 모션 벡터(MV)를 사용하는 모션 보상 예측의 일례를 도시한다. 수평 및 수직 모션 벡터가 각각 dx 및 dy로 표시될 수 있다.
도 8b는 부분 샘플 보간의 일례를 도시한다. 예를 들어, 모션 벡터가 분수 값을 갖는 경우, 부분 샘플 보간이 사용될 수 있다. 부분 샘플 보간은 비정수 샘플 위치에 예측 샘플을 생성할 수 있다. HEVC는 예를 들어, 루마 샘플들 사이의 거리의 1/4 단위로 MV를 지원할 수 있다. HEVC는 예를 들어, 4:2:0 포맷에서, 예를 들어, 크로마 샘플들 사이의 거리의 1/8 단위로 MV를 지원할 수 있다.
모션 벡터 예측은 이웃하는 PU들과 모션 벡터의 공간-시간 상관관계를 이용할 수 있다. 병합 모드가, 예를 들어, 모션 벡터 시그널링 비용을 감소시키기 위해, 사용될 수 있다. 병합 모드의 병합 후보 리스트가 이웃하는 PU 위치들(예컨대, 공간 이웃들 및/또는 시간적 이웃들) 및/또는 제로 벡터들로부터 모션 벡터 후보들의 리스트를 포함할 수 있다. 인코더는 병합 후보 리스트로부터 (예를 들어, 최상의) 예측자를 선택할 수 있고, 병합 후보 리스트로부터 선택된 예측자를 나타내는 대응하는 인덱스를 전송할 수 있다.
교차 평면 필터링이, 예를 들어, 크로마 품질을 개선하고 향상시키기 위해, 루마의 고주파수 정보를 이용할 수 있다. 고주파수 정보는, 예를 들어, 루마 성분에 하이 패스 필터를 적용하여 루마로부터 추출될 수 있다.
루마 및 크로마 성분은 객체 윤곽 및 에지 영역과 같은 일부 상관관계를 가질 수 있다. 크로마 향상을 위한 교차 평면 필터링은 루마 성분에 하이 패스 필터링을 적용하는 것을 포함할 수 있다. 하이 패스 필터링의 출력이 향상된 크로마 성분을 결정하기 위해 크로마 성분에 가산될 수 있다. 하이 패스 필터링의 출력은 오프셋일 수 있다. 수학식(7) 및 수학식(8)은 크로마 향상의 일례를 나타낸다:
Figure 112018021329279-pct00009
Figure 112018021329279-pct00010
여기서 Y는 루마, C는 크로마, cross_plane_filter는 루마 신호에 적용된 필터, Yrec는 재구성된 루마 신호, Yoffset는 필터링의 출력, Crec는 재구성된 크로마 신호로서 Cb 또는 Cr 성분일 수 있으며, Cenh은 향상된 크로마 신호이다. 필터는 1D 또는 2D 필터일 수 있다. 교차 평면 필터는, 예를 들어, 최소 제곱법(Least Square method)을 이용하여 원래의 크로마 및 루마 및/또는 재구성된 크로마 및 루마에 기초하여, 도출될 수 있다.
예를 들어, 크로마 예측 모드의 시그널링 오버헤드를 감소시키는 크로마 예측 모드를 도출하기 위해, 인트라 예측을 위한 DM_CHROMA 모드에서 루마 예측 모드가 사용될 수 있다. 예를 들어, 크로마 예측 블록(PB)이 대응하는 루마 PB와 동일한 예측 모드를 이용하는 경우, 크로마 예측 모드는 DM_CHROMA로서 시그널링될 수 있다. 선형 모델(LM) 크로마 예측 모드가, 예를 들어, 선형 모델로, 병치된 재구성된 루마 샘플로부터 하나 이상의 크로마 샘플을 예측할 수 있다.
기준 크로마 샘플(Rx,y), 대응하는 크로마 예측 샘플(Px,y) 및 재구성된 크로마 샘플은 자신들의 대응하는 루마 성분(들)과 독립적으로 처리될 수 있다. 예를 들어, 인터 예측의 경우, 크로마 예측 샘플 및 크로마 재구성된 샘플은 자신들의 대응하는 루마 성분(들)과 독립적으로 생성될 수 있다. 교차 평면 필터링이 인트라 코딩 프로세스의 상이한 단계들에서 적용될 수 있다.
교차 평면 필터링은 하나 이상의 이웃하는 크로마 샘플들을 향상시키기 위해 사용될 수 있다. 하나 이상의 이웃하는 크로마 샘플들은 현재 비디오 블록에 이웃할 수 있다. 이웃하는 크로마 샘플들은 기준 크로마 샘플, 재구성된 크로마 샘플 및/또는 예측된 크로마 샘플을 포함할 수 있다. 예를 들어, 예측된 크로마 샘플이 예측을 위해 사용될 수 있다. 이웃하는 기준 크로마 샘플들 Rx,y는, 예를 들어, 도 3에 도시된 바와 같이, 인트라 코딩을 위해 예측된 크로마 샘플들 Px,y를 생성하기 위해 사용될 수 있다. 교차 평면 크로마 필터링이, 예를 들어, 코딩 컬러 공간에서 크로마를 개선하기 위해, 하나 이상의 이웃하는 크로마 샘플들의 크로마 샘플에 대응하는 하나 이상의 루마 샘플로부터 높은 충실도 정보를 도출할 수 있다.
교차 평면 필터가 하나 이상의 이웃하는 루마 샘플들에 적용될 수 있다. 이웃하는 루마 샘플(들)은 기준 루마 샘플, 재구성된 루마 샘플 및/또는 예측된 루마 샘플을 포함할 수 있다. 예를 들어, 크로마 기준 샘플의 품질을 향상시키기 위해, 도출된 하이 패스 정보가 사용될 수 있다. 향상된 기준 크로마 샘플은 예측된 크로마 샘플을 생성하기 위해 사용될 수 있다.
하나 이상의 향상된 크로마 샘플은 교차 평면 필터링을 사용하여 결정될 수 있다. 예를 들어, 교차 평면 필터가 하나 이상의 이웃하는 루마 샘플들에 적용될 수 있다. 교차 평면 필터는 하이 패스 필터일 수 있다. 하나 이상의 이웃하는 루마 샘플들은 향상될 크로마 샘플에 대응할 수 있다. 교차 평면 필터는 이용 가능한 및/또는 이용 불가능한 루마 샘플에 적용될 수 있다. 예측된 루마 샘플 및/또는 재구성된 루마 샘플(예를 들어, 루프 필터링 전후)은 이용 가능한 루마 샘플일 수 있다. 비재구성된 루마 샘플 및/또는 비예측된 루마 샘플은 이용 불가능한 루마 샘플일 수 있다.
도 9는 현재 비디오 블록으로부터 재구성된 루마 샘플들을 사용하지 않는 교차 평면 필터링을 사용하는 크로마 기준 샘플 향상(900)의 일례이다. 현재 비디오 블록은, 예를 들어, 도 9의 실선에 의해 정의된 바와 같이 샘플들의 4x4 블록을 포함할 수 있다.
902A, 902B와 같은 하나 이상의 루마 샘플 영역들이 현재 픽처에 대해 결정될 수 있다. 도시된 바와 같이, 902A, 902B와 같은 루마 샘플 영역은 대응하는 크로마 샘플 및/또는 대응하는 크로마 샘플과 병치된 루마 샘플에 이웃하는 복수의 루마 샘플들을 포함할 수 있다. 샘플은 다른 샘플의 위, 아래, 왼쪽, 오른쪽 및/또는 대각선에 있으면 다른 샘플과 이웃할 수 있다. 예를 들어, 이웃하는 샘플은 대응하는 샘플 옆에 있을 수 있다. 병치된 샘플들은 크로마 샘플과 동일한 위치에 루마 샘플을 포함할 수 있다. 루마 샘플 영역(902A)은 하나 이상의 이웃하는 루마 샘플들 및/또는 병치된 루마 샘플을 포함하도록 결정될 수 있다. 루마 샘플 영역(902A)은, 향상을 위한 크로마 샘플(예를 들어, 향상된 크로마 샘플(912A))이 하나 이상의 루마 샘플 영역들(902A, 902B) 각각의 중심에 각각 존재하도록 결정될 수 있다. 예를 들어, 루마 샘플 영역의 중심에 위치하는 크로마 샘플은 교차 평면 필터링을 사용하여 향상될 수 있다.
902A와 같은 루마 샘플 영역 내의 루마 샘플들은, 하나 이상의 루마 샘플(들)(904A), 기준 루마 샘플(들)(906A) 및/또는 예측된 루마 샘플(들)(908A)을 포함할 수 있다. 기준 루마 샘플들(906A)은 예측된 루마 샘플(들)(908A)을 대체하기 위해 사용되는 재구성된 루마 샘플들일 수 있다. 예를 들어, 하나 이상의 예측된 루마 샘플들(908A, 908B) 각각은, 하나 이상의 재구성된 루마 샘플들(906) 중 개개의 이웃하는 재구성된 루마 샘플에 의해 대체(예를 들어, 패딩)될 수 있다. 예를 들어, 루마 샘플 영역(902A, 902B)은, 예를 들어, 도 9에서 점선 박스로 강조 표시된 3x3 윈도우와 같은 루마 샘플들의 MxN 윈도우일 수 있다. MxN 윈도우 내의 루마 샘플들은 크로마 샘플 위치에 대응할 수 있다. 교차 평면 필터가 루마 샘플 영역(902A, 902B)의 복수의 루마 샘플들에 적용될 수 있다. 오프셋이 루마 샘플 영역(902A, 902B)의 복수의 루마 샘플들에 교차 평면 필터를 적용한 출력으로서 결정될 수 있다. 예를 들어, 912A, 912B와 같은 향상된 크로마 샘플을 결정하기 위해, 오프셋은 대응하는 크로마 샘플(910A, 910B)에 적용(예를 들어, 가산)될 수 있다. 교차 평면 필터는 복수의 향상된 크로마 샘플들(912A, 912B)을 결정하기 위해 현재 픽처의 902A, 902B와 같은 복수의 루마 샘플 영역들에 적용될 수 있다. 향상된 크로마 샘플들(912A, 912B)과 같은 향상된 크로마 샘플이 현재 비디오 블록의 인트라 예측을 위한 기준 샘플로서 사용될 수 있다.
일 예에서, MxN 루마 샘플 영역, 예를 들어, 3x3 윈도우에서의 복수의 루마 샘플들은 인-루프 필터링 이전 또는 이후의 (예컨대, 유일하게) 재구성된 루마 샘플들을 포함할 수 있다. 예를 들어, MxN 루마 샘플 영역 내의 복수의 루마 샘플들은 이용 가능할 수 있다. 다른 예에서, MxN 루마 샘플 영역 내의 하나 이상의 루마 샘플들은, 예를 들어, 도 9에 도시된 바와 같이 재구성되지 않을 수 있다. 재구성되지 않은 루마 샘플들은 이용 불가능한 루마 샘플들일 수 있다. 이용 불가능한 루마 샘플들은 이웃하는 이용 가능한 (예를 들어, 재구성된) 루마 샘플로 대체(예를 들어, 패딩)될 수 있다. 현재 블록에서의 루마 및 크로마 샘플들의 예측 및 재구성은 병렬로 수행될 수 있다.
도 10은 현재 블록으로부터 재구성된 루마 샘플들을 사용하는 교차 평면 필터링을 사용하는 크로마 기준 샘플 향상(1000)의 일례이다. 일 예에서, 현재 블록의 루마 샘플들은, 예를 들어, 상이한 컬러 채널 사이에 더 높은 레이턴시가 허용될 수 있는 경우, 개개의 대응하는 크로마 샘플들 이전에 재구성될 수 있다. MxN(예를 들어, 3x3) 루마 샘플 영역(1002A, 1002B)에서의 재구성된 루마 샘플들이, 예를 들어, 교차 평면 필터가 적용될 때 패딩 없이 이용 가능할 수 있다. 루마 샘플 영역(1002A, 1002B)은 MxN (예를 들어, 3x3) 윈도우일 수 있다.
예를 들어, 1002A, 1002B와 같은 루마 샘플 영역이 현재 픽처에 대해 결정될 수 있다. 1002A, 1002B와 같은 루마 샘플 영역은 대응하는 크로마 샘플 및/또는 대응하는 크로마 샘플과 병치된 루마 샘플에 이웃하는 복수의 루마 샘플들을 포함할 수 있다. 루마 샘플 영역들(1002A, 1002B) 각각의 복수의 루마 샘플들은 현재 블록 외부에 있는 하나 이상의 재구성된 루마 샘플들(1004A, 1004B) 및/또는 현재 블록 내에 있는 하나 이상의 재구성된 루마 샘플들(1008A, 1008B)을 포함할 수 있다.
교차 평면 필터링이 하나 이상의 루마 샘플 영역들(1002A, 1002B) 내의 복수의 루마 샘플들에 적용될 수 있다. 하나 이상의 루마 샘플 영역들(1002A, 1002B) 내의 루마 샘플들은 (예를 들어, 도 9에 도시된 바와 같이) 현재 블록 내의 일부 루마 샘플들을 포함할 수 있다. 현재 블록 내의 루마 샘플들은, 예를 들어, 루프 필터링 전후의 하나 이상의 재구성된 루마 샘플들을 포함할 수 있다.
하나 이상의 향상된 기준 크로마 샘플들(1012A, 1012B)이, 예를 들어, 수학식(9)에 따라 생성될 수 있다:
Figure 112018021329279-pct00011
여기서, Rc[x][y]는 향상 이전의 재구성된 기준 크로마 샘플들일 수 있고, RC_enh[x][y]는 향상된 기준 크로마 샘플들일 수 있으며, SL(xL, yL)은 위치(xL, yL)를 중심으로 하는 재구성된 루마 샘플들의 어레이일 수 있다. 하나 이상의 향상 기준 크로마 샘플들(1012A, 1012B)은 하나 이상의 루마 샘플 영역들(1002A, 1002B)의 중심에 대응할 수 있다.
대응하는 크로마 샘플 위치(x, y)의 루마 샘플 위치(xL, yL)는, 예를 들어, 수학식 10에 따라 크로마 포맷에 기초하여 계산될 수 있다:
Figure 112018021329279-pct00012
여기서 scaleX 및 scaleY는 크로마 포맷 4:2:0, 4:2:2 및 4:4:4에 대해 각각 (2, 2), (2, 1), (1, 1)일 수 있다. 향상된 크로마 기준 샘플 RC _ enh[x][y]는, 예를 들어, 도 5에 도시된 바와 같은 방향성/DC/평면 인트라 예측 모드를 사용하여 인트라 예측 프로세스에서 사용될 수 있다.
2 차원(2D) 교차 평면 필터가 루마 샘플 영역(예컨대, 도 9 및 도 10에 도시된 바와 같이 루마 샘플들의 NxN 영역)에 적용될 수 있다. 1 차원(1D) 교차 평면 필터가 1xN 또는 Nx1 루마 샘플 영역에서 하나 이상의 루마 샘플에 적용될 수 있다. 예를 들어, Nx1 루마 샘플 영역이 교차 평면 필터링에 사용될 때, 현재 블록 위의 N개의 수평 루마 기준 샘플들이 필터링될 수 있다. 예를 들어, 1xN 루마 샘플 영역이 교차 평면 필터링에 사용될 때, 현재 블록의 좌측의 N개의 수직 루마 기준 샘플들이 필터링될 수 있다.
일 예시에서, 루마 샘플 영역은, 예를 들어, 인트라 예측 모드에 기초하여 적응적으로 선택될 수 있다. 인트라 예측 모드는 방향성 (예를 들어, 수직, 수평 등) 인트라 예측 모드, DC 인트라 예측 모드, 평면 인트라 예측 모드, 또는 임의의 다른 인트라 예측 모드일 수 있다. 적용할 교차 평면 필터는 어떤 인트라 예측 모드가 선택되는지에 기초하여 결정될 수 있다. 예를 들어, 다양한 상이한 모드들의 에지 및/또는 경계 특성에 매칭시키기 위해, 상이한 교차 평면 필터 세트가 선택될 수 있다. 예를 들어, 수직 예측 모드는 기준 샘플의 상단 행을 사용할 수 있다. 수직 예측 모드가 선택될 때, 현재 비디오 블록 위의 하나 이상의 크로마 기준 샘플이 향상될 수 있다. 예를 들어, 루마 샘플 영역이 현재 비디오 블록 위의 대응하는 크로마 기준 샘플에 이웃하는 하나 이상의 루마 샘플을 포함하도록 선택될 수 있다. 루마 샘플 영역은 현재 비디오 블록 위의 대응하는 크로마 기준 샘플과 병치된 루마 샘플을 포함할 수 있다. 다른 예로서, 수평 예측 모드가 선택될 때, 현재 비디오 블록의 좌측 또는 우측의 하나 이상의 크로마 기준 샘플이 향상될 수 있다. 루마 샘플 영역이 현재 비디오 블록의 좌측 또는 우측의 대응하는 크로마 기준 샘플들에 이웃하는 하나 이상의 루마 샘플들을 포함하도록 선택될 수 있다. 루마 샘플 영역은 현재 비디오 블록의 좌측 또는 우측의 대응하는 크로마 기준 샘플과 병치된 루마 샘플을 포함할 수 있다. 예를 들어, 수직 예측 모드가 선택될 때, 에지가 수직으로 발생할 수 있다.
루마 샘플 영역은, 예를 들어, 도 9 및 도 10에 도시된 예시들에 도시된 정사각형 2D 루마 샘플 영역과 비교하여, 수평 직사각형 형태로 선택될 수 있다. 예를 들어, 1D 수평 루마 샘플 영역이 수직 선택 모드를 위해 선택 및/또는 적용될 수 있다. 예를 들어, 수직 하이 패스 에지 정보를 보다 효과적으로 검색 및/또는 필터링 복잡성을 감소시키기 위해, (예를 들어, 상단의 이웃하는 루마 샘플들을 이용하는) 1D 수평 필터링이 사용될 수 있다. 수평 예측 모드를 위한 적응 필터링의 예에서, 기준 샘플의 좌측 열이 사용될 수 있다. 예를 들어, 수평 예측 모드가 선택될 때, 에지가 수평으로 발생할 수 있다. 수직 직사각형 형태를 갖는 루마 샘플 영역이 사용될 수 있다. 예를 들어, 1D 수직 루마 샘플 영역이 선택 및/또는 적용될 수 있다. (예를 들어, 좌측의 이웃하는 루마 샘플들을 이용하는) 1D 수직 필터링이 수평 하이 패스 에지 정보를 보다 효과적으로 검색 및/또는 필터링 복잡성을 감소시킬 수 있다.
루마 샘플 영역이 현재 비디오 블록 내의 크로마 샘플들에 대응하도록 루마 샘플 영역은 'L' 형태로 선택될 수 있다. 예를 들어, DC 인트라 예측 모드가 선택되는 경우, 현재 비디오 블록의 좌측 및 위의 하나 이상의 기준 샘플들의 평균이 현재 비디오 블록에서의 하나 이상의 샘플을 예측하기 위해 사용될 수 있다. 다른 예로서, 평면 인트라 예측 모드가 선택되는 경우, 현재 비디오 블록의 좌측 및 위의 하나 이상의 기준 샘플들의 선형 함수가 현재 비디오 블록에서의 하나 이상의 샘플을 예측하기 위해 사용될 수 있다. DC 인트라 예측 모드 및/또는 평면 인트라 예측 모드가 선택되는 경우, 루마 샘플 영역은 현재 비디오 블록의 좌측 및 위의 하나 이상의 기준 크로마 샘플들이 향상되도록 선택될 수 있다.
예를 들어, 크로마 향상을 인에이블 또는 디스에이블할지 여부를 표시하기 위해, 크로마 향상 표시자가 시그널링될 수 있다. 크로마 향상 표시자는, 예를 들어, 슬라이스 레벨, 픽처 레벨, 픽처 레벨의 그룹, 또는 시퀀스 레벨에서 시그널링될 수 있다.
예를 들어, 크로마 향상 처리가 현재 코딩 블록에 적용되는지 여부를 표시하기 위해, 크로마 향상 표시자가 블록 레벨에서 시그널링될 수 있다. 예를 들어, 현재 블록이 인트라 코딩된 블록인 경우, 크로마 향상 표시자가 시그널링될 수 있다.
하나 이상의 교차 평면 필터 계수가 인코더에서 유도되어 디코더에 전송될 수 있다. 예를 들어, 기준 샘플들을 개선하기 위해 인트라 코딩된 블록들에 적용되는 향상 필터들에 대한 필터 계수 트레이닝은 인트라 코딩된 샘플들을 사용할 수 있다. 하나 이상의 교차 평면 필터 계수가, 예를 들어, 슬라이스 레벨, 픽처 레벨, 픽처 레벨의 그룹, 또는 시퀀스 레벨에서 전송될 수 있다. 하나 이상의 교차 평면 필터 계수는 블록 레벨에서 전송될 수 있다.
도 11은 예측된 크로마 샘플 향상을 갖는 블록 기반 하이브리드 비디오 코딩 디바이스(1100)(예를 들어, 인코더 또는 디코더)의 일례이다. 예측(예를 들어, 인트라 예측(1104) 및/또는 인터 예측(1106))이 입력 비디오(1102) 상에 수행될 수 있다. 예측 잔차(1108)가, 예를 들어, 입력 비디오(1102)의 원래 블록으로부터 예측 블록(1114)을 감산함으로써 결정될 수 있다. 예측 잔차(1108)는, 예를 들어, DCT 및/또는 DST 블록 변환을 사용하여 변환 및/또는 양자화(1110)될 수 있다. 예측 잔차(1108)가 입력 비디오(1102)의 루마 및/또는 크로마 성분에 대해 변환될 수 있다. 예측된 크로마 샘플들의 정확도를 개선하면 코딩 효율을 개선시킬 수 있다. 크로마 향상(1112)이, 예를 들어, 하나 이상의 예측된 크로마 샘플을 향상시키기 위해, 교차 평면 (예를 들어, 하이 패스) 필터를 사용함으로써 구현될 수 있다. 예를 들어, 객체 윤곽 및/또는 에지 영역에 대해 크로마 샘플들이 향상될 수 있다.
교차 평면 필터가, 예를 들어, 동일 및 이웃하는 블록들의 재구성된 루마 샘플들을 사용하여, 현재 블록의 하나 이상의 (예를 들어, 모든) 예측된 크로마 샘플에 사용될 수 있다. 예를 들어, 현재 블록의 하나 이상의 예측된 크로마 샘플은 하나 이상의 예측된 크로마 샘플에 대응하는 복수의 루마 샘플들에 교차 평면 필터를 적용함으로써 향상될 수 있다. 현재 블록은 인트라 코딩된 비디오 블록일 수 있다. 예를 들어, 수학식(11)에 나타난 바와 같이, 향상된 예측된 크로마 샘플이 생성될 수 있다:
Figure 112018021329279-pct00013
여기서, PC[x][y]는 크로마 위치(x, y)에서 생성되는 예측된 크로마 샘플일 수 있다. 예측된 크로마 샘플 PC[x][y]는 인트라 예측 또는 인터 예측을 사용하여 예측될 수 있다. 수학식(11)에 도시되지는 않았지만, 크로마 향상에 사용되는 교차 평면 필터는, 예를 들어, 현재 블록에 대한 코딩 모드(예를 들어, 인트라 또는 인터)에 따라 변할 수 있다. 한 예에서, 복수(예를 들어, 2개)의 교차 평면 필터 세트가 개별적으로 트레이닝될 수 있다. 제 1 세트의 교차 평면 필터가 하나 이상의 인트라 예측된 크로마 샘플에 적용될 수 있다. 제 2 세트의 교차 평면 필터가 하나 이상의 인터 예측된 크로마 샘플에 적용될 수 있다.
SL(xL, yL)은 위치(xL, yL)에서의 재구성된 루마 샘플들일 수 있으며, 여기서 (xL, yL)은 수학식(12)에 나타난 바와 같이 크로마 포맷에 기초하여 계산될 수 있다:
Figure 112018021329279-pct00014
여기서 (scaleX, scaleY)는 크로마 포맷 4:2:0, 4:2:2 및 4:4:4에 대해 각각 (2, 2), (2, 1), (1, 1)일 수 있다.
교차 평면 필터가, 예를 들어, 하나 이상의 예측된 크로마 샘플의 정확도를 개선시키기 위해, 하나 이상의 이웃하는 대응하는 기준 루마 샘플들에 적용될 수 있다.
교차 평면 필터는 하나 이상의 예측된 크로마 샘플의 품질을 향상시킬 수 있다. 예측 잔차 정보가 더 작을 수 있으며, 이는 예를 들어, 향상된 예측된 크로마 샘플들이 예측 잔차를 생성하기 위해 사용될 때, 개선된 코딩 성능으로 이어질 수 있다.
교차 평면 필터링이 하나 이상의 향상된 크로마 샘플을 도출하기 위해 사용될 수 있다. 예를 들어, 교차 평면 필터가 현재 크로마 샘플 위치에 대응하는 루마 샘플들의 이웃(예를 들어, 루마 샘플 영역)에 적용될 수 있다.
도 12는 교차 평면 필터링을 사용하여 예측된 크로마 샘플을 향상시키는 일례이다. 복수의 루마 샘플 영역들(1202A, 1202B, 1202C)이 결정될 수 있다. 복수의 루마 샘플 영역들(1202A, 1202B, 1202C) 각각은 예측된 크로마 샘플에 대응할 수 있다. 교차 평면 필터가 루마 샘플 영역(1202A, 1202B, 1202C) 내의 복수의 루마 샘플들(예를 들어, 도 12에 도시된 점선 박스 내의 3x3 윈도우의 루마 샘플들)에 적용될 수 있다. 교차 평면 필터는 현재 블록 내의 재구성된 루마 샘플들(예를 들어, 수직 줄무늬 원으로 표시됨)에 적용될 수 있다. 현재 블록은 인트라 코딩된 비디오 블록일 수 있다. 출력이 결정될 수 있다. 교차 평면 필터를 적용한 출력은, 예를 들어, 수학식(11)에 의해 주어진 오프셋일 수 있다. 향상된 크로마 샘플(1206A, 1206B, 1206C)을 결정하기 위해 대응하는 크로마 샘플에 오프셋(1204A, 1204B, 1204C)을 적용(예를 들어, 가산)함으로써, 향상된 예측된 크로마 샘플(1206A, 1206B, 1206C)이 결정될 수 있다. 예측된 크로마 샘플들을 향상시키는 데 사용하기 위한 필터링될 현재 블록의 대응하는 재구성된 루마 샘플들의 이용 가능성이 특정 블록 상의 루마 및 크로마 성분들 사이에 코딩 레이턴시를 도입할 수 있다.
교차 평면 필터가 아직 재구성되지 않은 루마 샘플들(1208) 상에 적용될 수 있다. 아직 재구성되지 않은 루마 샘플들(1208)은, 예를 들어, 아직 재구성되지 않은 루마 샘플들(1208)에 이웃하는 (예를 들어, 좌측 또는 상단의) 재구성된 루마 샘플들을 사용하여 패딩될 수 있다. 예를 들어, 이용 불가능한 루마 샘플은 이웃하는 재구성된 루마 샘플로 대체될 수 있다.
예를 들어, 예측 모드(예를 들어, 인트라 또는 인터 예측)에 의존하여 별개의 (예를 들어, 상이한) 필터들이 적용될 수 있다. 상이한 기술(예를 들어, 절차)이 상이한 교차 평면 필터를 분류하고 적용하기 위해 사용될 수 있다. 예를 들어, 교차 평면 필터가, 예를 들어, 정수 또는 부분(예를 들어, 1/2 또는 1/4) 픽셀 모션 벡터가 사용되는지 여부에 따라, 적용 가능성을 위해 추가 분류되거나 하위 분류될 수 있다. 교차 평면 필터는, 예를 들어, 어떤 기준 픽처가 인터 예측에서 사용되는지에 따라, 적용 가능성을 위해 분류 및/또는 하위 분류될 수 있다. 교차 평면 필터는 이들 및 다른 코딩 파라미터에 적응적으로 선택 및/또는 적용될 수 있다.
도 13은 재구성된 크로마 샘플들에 대한 크로마 향상을 갖는 블록 기반 하이브리드 비디오 코딩 디바이스(1300)(예를 들어, 인코더 또는 디코더)의 일례이다. 예를 들어, 예측 및 재구성 후에 크로마 향상이 적용될 수 있다. 예를 들어, 역양자화/역변환(1306)으로부터의 재구성된 잔차 블록을 예측 블록(1308)에 가산함으로써, 입력 비디오(1302)의 (예를 들어, 인-루프 필터링 이전의) 재구성된 블록(1304)이 생성될 수 있다. 재구성된 크로마 샘플들의 향상이 전체적인 픽처 품질을 개선 및/또는 다음 블록들 또는 픽처들의 코딩 효율을 개선할 수 있다. 크로마 향상(1312)이, 예를 들어, 교차 평면 필터를 적용함으로써 구현될 수 있다. 교차 평면 필터를 적용하는 것은, 예를 들어, 객체 윤곽 및/또는 에지 영역에서 하나 이상의 재구성된 크로마 샘플을 향상시킬 수 있다. 하나 이상의 재구성된 크로마 샘플은 인-루프 필터링 이전 또는 이후에 향상될 수 있다.
한 예에서, 교차 평면 필터가, 예를 들어, 현재 블록의 재구성된 크로마 샘플을 향상시키기 위해, 재구성된 루마 샘플들 SL[x][y]에 적용될 수 있다. 향상된 재구성된 크로마 샘플들은, 예를 들어, 수학식(13)에 따라 계산될 수 있다:
Figure 112018021329279-pct00015
여기서 SC[x][y]는 재구성된 크로마 샘플들일 수 있고, SC_ enh[x][y]는 향상된 재구성된 크로마 샘플들일 수 있다.
도 14는 교차 평면 필터링을 사용하여 하나 이상의 재구성된 크로마 샘플을 향상시키는 일례이다.
복수의 루마 샘플 영역들(1402, 1404)이 결정될 수 있다. 제 1 루마 샘플 영역(1402)은 현재 블록(1410)으로부터의 복수의 재구성된 루마 샘플들을 포함할 수 있다. 제 2 루마 샘플 영역(1404)은 현재 블록(1410)으로부터의 복수의 재구성된 루마 샘플들 및 하나 이상의 이전 블록으로부터의 복수의 재구성된 루마 샘플들을 포함할 수 있다.
교차 평면 필터가 하나 이상의 재구성된 루마 샘플들 SL(xL, yL)에 적용될 수 있다. 현재 블록(1410)의 하나 이상의 재구성된 크로마 샘플들 SC[x][y]는, 예를 들어, 선택되고 적용된 교차 평면 필터의 출력을 대응하는 재구성된 크로마 샘플에 적용(예들 들어, 가산)(1406, 1408)하여 하나 이상의 향상된 재구성된 크로마 샘플들(1412, 1414, SC_ enh[x][y])을 생성함으로써 향상될 수 있다. 예를 들어, 루마 샘플 영역(1402)과 같은 루마 샘플 영역은 현재 블록(1410)으로부터의 하나 이상의 재구성된 루마 샘플 및 하나 이상의 이전 블록으로부터의 하나 이상의 재구성된 루마 샘플을 포함할 수 있다.
예를 들어, 본 명세서에 기재된 바와 같은, 교차 평면 필터 분류, 적응 선택, 및 적용이 재구성된 크로마 샘플의 향상에 적용 가능할 수 있다. 교차 평면 필터 분류는, 예를 들어, 블록 예측 모드 (예를 들어, 인트라 또는 인터), 모션 벡터 정밀도 및/또는 기준 픽처 등에 의존할 수 있다.
필터 계수들의 시그널링은, 예를 들어, 본 명세서에 설명된 바와 같이 수행될 수 있다. 하나 이상의 교차 평면 필터 세트가 비트스트림에서 시그널링될 수 있다. 하나 이상의 교차 평면 필터 세트는 사용된 필터 분류 방법에 기초하여 시그널링될 수 있다. 시그널링될 다수의 필터 세트가 N으로 표시될 수 있다. N 세트의 교차 평면 필터의 필터 계수는 슬라이스 레벨, 픽처 레벨, 픽처 레벨의 그룹 또는 시퀀스 레벨을 통해 전송될 수 있다. 디코더는 코딩 모드, 모션 벡터 정밀도 및/또는 현재 블록의 기준 픽처에 기초하여 하나 이상의 적절한 교차 평면 필터를 선택할 수 있다. 디코더는, 예를 들어, 현재 블록의 코딩 모드, 모션 벡터 정밀도 및/또는 기준 픽처에 기초하여 하나 이상의 적절한 교차 평면 필터를 적용할 수 있다.
도 15a는 하나 이상의 개시된 실시예가 구현될 수 있는 예시적인 통신 시스템(100)의 다이어그램이다. 통신 시스템(100)은 음성, 데이터, 비디오, 메시징, 방송 등과 같은 콘텐츠를 다수의 무선 사용자들에게 제공하는 다중 액세스 시스템일 수 있다. 통신 시스템(100)은 다수의 무선 사용자들이 무선 대역폭을 비롯한 시스템 리소스의 공유를 통해 이와 같은 콘텐츠에 액세스하는 것을 가능하게 할 수 있다. 예를 들어, 통신 시스템(100)은 코드 분할 다중 접속(code division multiple access; CDMA), 시분할 다중 접속(time division multiple access; TDMA), 주파수 분할 다중 접속(frequency division multiple access; FDMA), 직교 FDMA(orthogonal FDMA; OFDMA), 단일 반송파 FDMA(single-carrier FDMA; SC-FDMA) 등과 같은 하나 이상의 채널 액세스 방법을 이용할 수 있다.
도 15a에 도시된 바와 같이, 통신 시스템(100)은 무선 송수신 유닛(WTRU)들(102a, 102b, 102c, 및/또는 102d)[일반적으로 또는 총괄하여 WTRU(102)로 언급될 수 있음], 무선 액세스 네트워크(radio access network; RAN)(103/104/105), 코어 네트워크(106/107/109), 공중 교환식 전화망(public switched telephone network; PSTN)(108), 인터넷(110), 및 다른 네트워크(112)를 포함할 수 있지만, 개시된 실시예들은 임의의 수의 WTRU, 기지국, 네트워크 및/또는 네트워크 요소를 고려한다는 것이 이해될 것이다. WTRU들(102a, 102b, 102c, 102d) 각각은 무선 환경에서 동작 및/또는 통신하도록 구성된 임의의 타입의 디바이스일 수 있다. 예로서, WTRU들(102a, 102b, 102c, 102d)은 무선 신호를 송신 및/또는 수신하도록 구성될 수 있고, 사용자 장비(user equipment; UE), 이동국, 고정 또는 이동 가입자 유닛, 페이저, 셀룰러 전화, 개인 휴대 정보 단말기(personal digital assistant; PDA), 스마트폰, 랩톱, 네트북, 퍼스널 컴퓨터, 무선 센서, 가전제품 등을 포함할 수 있다.
통신 시스템(100)은 또한 기지국(114a) 및 기지국(114b)을 포함할 수 있다. 기지국들(114a, 114b) 각각은 코어 네트워크(106/107/109), 인터넷(110) 및/또는 네트워크(112)와 같은 하나 이상의 통신 네트워크에 대한 액세스를 용이하게 하기 위해서, WTRU들(102a, 102b, 102c, 102d) 중 적어도 하나와 무선으로 인터페이스하도록 구성된 임의의 타입의 디바이스일 수 있다. 예로서, 기지국들(114a, 114b)은 베이스 트랜스시버 스테이션(base transceiver station; BTS), 노드 B, e노드 B, 홈 노드 B, 홈 e노드 B, 사이트 제어기, 액세스 포인트(access point; AP), 무선 라우터 등일 수 있다. 기지국들(114a, 114b)이 단일 요소로서 각각 도시되었지만, 기지국들(114a, 114b)은 임의의 수의 상호접속된 기지국들 및/또는 네트워크 요소들을 포함할 수 있다는 것이 이해될 것이다.
기지국(114a)은 RAN(103/104/105)의 일부일 수 있고, RAN(103/104/105)는 또한 기지국 제어기(base station controller; BSC), 무선 네트워크 제어기(radio network controller; RNC), 중계 노드 등과 같은 네트워크 요소들(도시되지 않음) 및/또는 다른 기지국을 포함할 수 있다. 기지국(114a) 및/또는 기지국(114b)은 셀(도시되지 않음)로서 언급되는 특정한 지리적 영역 내에서 무선 신호를 송신 및/또는 수신하도록 구성될 수 있다. 셀은 셀 섹터로 더욱 분할될 수 있다. 예를 들어, 기지국(114a)과 연관된 셀은 3개의 셀 섹터로 분할될 수 있다. 따라서, 일 실시예에서, 기지국(114a)은 3개의 트랜스시버, 즉, 셀의 각 섹터에 대해 한 개씩을 포함할 수 있다. 다른 실시예에서, 기지국(114a)은 다중 입력 다중 출력(multiple input multiple output; MIMO) 기술을 이용할 수 있으므로, 셀의 각 섹터에 대해 다수의 트랜스시버를 이용할 수 있다.
기지국(114a, 114b)은 임의의 적합한 무선 통신 링크(예를 들어, 무선 주파수(RF), 마이크로웨이브, 적외선(IR), 자외선(UV), 가시광 등)일 수 있는 무선 인터페이스(115/116/117)를 통해 WTRU들(102a, 102b, 102c, 102d) 중 하나 이상과 통신할 수 있다. 무선 인터페이스(115/116/117)는 임의의 적합한 무선 액세스 기술(radio access technology; RAT)을 사용하여 확립될 수 있다.
보다 구체적으로, 앞서 언급한 바와 같이, 통신 시스템(100)은 다중 액세스 시스템일 수 있고, CDMA, TDMA, FDMA, OFDMA, SC-FDMA 등과 같은 하나 이상의 채널 액세스 방식을 이용할 수 있다. 예를 들어, RAN(103/104/105) 내의 기지국(114a) 및 WTRU들(102a, 102b, 102c)은 광대역 CDMA(wideband CDMA; WCDMA)를 사용하여 무선 인터페이스(115/116/117)를 확립할 수 있는 범용 이동 통신 시스템(universal mobile telecommunications system; UMTS) 지상 무선 액세스(terrestrial radio access; UTRA)와 같은 무선 기술을 구현할 수 있다. WCDMA는 고속 패킷 액세스(high-speed packet access; HSPA) 및/또는 진화된 HSPA(evolved HSPA; HSPA+)와 같은 통신 프로토콜을 포함할 수 있다. HSPA는 고속 다운링크 패킷 액세스(high-speed downlink packet access; HSDPA) 및/또는 고속 업링크 패킷 액세스(high-speed uplink packet access; HSUPA)를 포함할 수 있다.
다른 실시예에서, 기지국(114a) 및 WTRU들(102a, 102b, 102c)은 롱 텀 에볼루션(long term evolution; LTE) 및/또는 LTE-A(LTE-advanced)를 이용하여 무선 인터페이스(115/116/117)를 확립할 수 있는 E-UTRA(evolved UMTS terrestrial radio access)와 같은 무선 기술을 구현할 수 있다.
다른 실시예에서, 기지국(114a) 및 WTRU들(102a, 102b, 102c)은 IEEE 802.16(즉, WiMAX(Worldwide Interoperability for Microwave Access)), CDMA2000, CDMA2000 1X, CDMA2000 EV-DO, IS-2000(Interim Standard 2000), IS-95, IS-856, GSM(Global System for Mobile Communication), EDGE(Enhanced Data rates for GSM Evolution), GERAN(GSM EDGE) 등과 같은 무선 기술을 구현할 수 있다.
도 15a의 기지국(114b)은 예를 들어 무선 라우터, 홈 노드 B, 홈 e노드 B 또는 액세스 포인트일 수 있고, 사업장, 집, 차량, 캠퍼스 등과 같은 로컬 영역에서의 무선 접속을 용이하게 하는 임의의 적합한 RAT를 이용할 수 있다. 일 실시예에서, 기지국(114b) 및 WTRU들(102c, 102d)은 IEEE 802.11과 같은 무선 기술을 구현하여, 무선 근거리 네트워크(wireless local area network; WLAN)를 확립할 수 있다. 다른 실시예에서, 기지국(114b) 및 WTRU들(102c, 102d)은 IEEE 802.15와 같은 무선 기술을 구현하여, 무선 사설 네트워크(wireless personal area network; WPAN)를 확립할 수 있다. 또 다른 실시예에서, 기지국(114b) 및 WTRU들(102c, 102d)은 셀룰러 기반 RAT(예컨대, WCDMA, CDMA2000, GSM, LTE, LTE-A 등)을 이용하여 피코셀 또는 펨토셀을 확립할 수 있다. 도 15a에서 도시된 바와 같이, 기지국(114b)은 인터넷(110)에 직접 접속될 수 있다. 따라서, 기지국(114b)은 코어 네트워크(106/107/109)를 통해 인터넷(110)에 액세스하기 위해 사용될 수 없다.
RAN(103/104/105)은 코어 네트워크(106/107/109)와 통신할 수 있고, 코어 네트워크(106/107/109)는 WTRU들(102a, 102b, 102c, 102d) 중 하나 이상에 음성, 데이터, 애플리케이션, 및/또는 VoIP(voice over internet protocol) 서비스를 제공하도록 구성된 임의의 타입의 네트워크일 수 있다. 예를 들어, 코어 네트워크(106/107/109)는 호 제어, 요금 서비스, 모바일 위치 기반 서비스, 선불 전화(pre-paid calling), 인터넷 접속, 비디오 분배 등을 제공 및/또는 사용자 인증과 같은 높은 레벨 보안 기능을 수행할 수 있다. 도 15a에 도시되지 않았지만, RAN(103/104/105) 및/또는 코어 네트워크(106/107/109)는 RAN(103/104/105)과 동일한 RAT를 이용하거나 상이한 RAT를 이용하는 다른 RAN들과 직접 또는 간접 통신할 수 있다는 것이 이해될 것이다. 예를 들어, E-UTRA 무선 기술을 사용할 수 있는 RAN(103/104/105)에 접속되는 것 이외에, 코어 네트워크(106/107/109)는 또한 GSM 무선 기술을 이용하는 다른 RAN(도시되지 않음)과 통신할 수 있다.
코어 네트워크(106/107/109)는 또한 WTRU들(102a, 102b, 102c, 102d)이 PSTN(108), 인터넷(110) 및/또는 다른 네트워크들(112)에 액세스하게 하는 게이트웨이의 역할을 할 수도 있다. PSTN(108)은 기존 전화 서비스(plain old telephone service; POTS)를 제공하는 회선 교환 전화 네트워크를 포함할 수 있다. 인터넷(110)은 TCP/IP 인터넷 프로토콜 스위트에서의 전송 제어 프로토콜(transmission control protocol; TCP), 사용자 데이터그램 프로토콜(user datagram protocol; UDP) 및 인터넷 프로토콜(internet protocol; IP)과 같은 공통 통신 프로토콜들을 이용하는 상호접속 컴퓨터 네트워크 및 장치의 글로벌 시스템을 포함할 수 있다. 네트워크(112)는 다른 서비스 제공자들에 의해 동작 및/또는 소유되는 유선 또는 무선 통신 네트워크를 포함할 수 있다. 예를 들어, 네트워크(112)는 RAN(103/104/105)과 동일한 RAT를 이용하거나 상이한 RAT를 이용할 수 있는 하나 이상의 RAN에 접속되는 다른 코어 네트워크를 포함할 수 있다.
통신 시스템(100) 내의 WTRU들(102a, 102b, 102c, 102d) 중 하나 이상은 다중 모드 능력을 포함할 수 있고, 예를 들어, WTRU들(102a, 102b, 102c, 102d)은 상이한 무선 링크를 통해 상이한 무선 네트워크들과 통신하는 다수의 트랜스시버를 포함할 수 있다. 예를 들어, 도 15a에 도시된 WTRU(102c)는 셀 기반 무선 기술을 이용할 수 있는 기지국(114a) 및 IEEE 802 무선 기술을 이용할 수 있는 기지국(114b)과 통신하도록 구성될 수도 있다.
도 15b는 예시적인 WTRU(102)의 시스템 다이어그램이다. 도 15b에 도시된 바와 같이, WTRU(102)는 프로세서(118), 트랜스시버(120), 송수신 요소(122), 스피커/마이크로폰(124), 키패드(126), 디스플레이/터치패드(128), 비분리형 메모리(130), 분리형 메모리(132), 전원(134), 글로벌 위치 시스템(global positioning system; GPS) 칩셋(136), 및 다른 주변 장치(138)를 포함할 수 있다. WTRU(102)는 본 실시예와 일치관성을 유지하면서 앞서 말한 요소들의 임의의 하위 조합을 포함할 수 있음을 이해할 것이다. 또한, 기지국들(114a, 114b)은 비제한적으로, 무엇보다 베이스 트랜스시버 스테이션(BTS), 노드 B, 사이트 제어기, 액세스 포인트(AP), 홈 노드 B, 진화된 홈 노드 B(eNodeB), 홈 진화된 노드 B(home evolved node-B; HeNB), 홈 진화된 노드 B 게이트웨이 및 프록시 노드 등을 나타낼 수 있고, 기지국들(114a, 114b) 및/또는 노드들은 도 15b에 도시되고 본 명세서에 기술된 요소들 중 하나 이상을 포함할 수 있다는 것을 실시예들은 고려한다.
프로세서(118)는 범용 프로세서, 특수 목적 프로세서, 종래의 프로세서, 디지털 신호 프로세서(digital signal processor; DSP), 복수의 마이크로 프로세서, DSP 코어와 관련된 하나 이상의 마이크로 프로세서, 컨트롤러, 마이크로 컨트롤러, 주문형 반도체(Application Specific Integrated Circuit; ASIC), 필드 프로그래머블 게이트 어레이(Field Programmable Gate Array; FPGA) 회로, 임의의 다른 타입의 집적 회로(IC), 상태 머신(state machine) 등일 수 있다. 프로세서(118)는 WTRU(102)가 무선 환경에서 동작하는 것을 가능하게 하는 신호 코딩, 데이터 처리, 전력 제어, 입출력 처리 및/또는 임의의 다른 기능을 수행할 수 있다. 프로세서(118)는 송수신 요소(122)에 결합될 수 있는 트랜스시버(120)에 결합될 수 있다. 도 15b는 프로세서(118)와 트랜스시버(120)를 별도의 구성 요소로서 도시하였지만, 프로세서(118)와 트랜스시버(120)는 전자 패키지 또는 칩 내에 함께 통합될 수 있음을 이해할 것이다.
송수신 요소(122)는 무선 인터페이스(115/116/117)를 통해 기지국(예컨대, 기지국(114a))에 신호를 송신하거나 기지국으로부터 신호를 수신하도록 구성될 수 있다. 예를 들어, 일 실시예에서, 송수신 요소(122)는 RF 신호를 송신 및/또는 수신하도록 구성된 안테나일 수 있다. 다른 실시예에서, 송수신 요소(122)는 예를 들어 IR, UV, 또는 가시광 신호를 송신 및/또는 수신하도록 구성된 에미터/검출기일 수 있다. 또 다른 실시예에서, 송수신 요소(122)는 RF와 광 신호 모두를 송신 및 수신하도록 구성될 수 있다. 송수신 요소(122)는 무선 신호의 임의의 조합을 송신 및/또는 수신하도록 구성될 수 있음을 이해할 것이다.
또한, 송수신 요소(122)가 도 15b에서 단일 요소로서 도시되어 있지만, WTRU(102)는 임의의 수의 송수신 요소(122)를 포함할 수 있다. 보다 구체적으로, WTRU(102)는 MIMO 기술을 이용할 수 있다. 따라서, 일 실시예에서, WTRU(102)는 무선 인터페이스(115/116/117)를 통해 무선 신호를 송신 및 수신하기 위한 2개 이상의 송수신 요소(122)(예컨대, 다중 안테나)를 포함할 수 있다.
트랜스시버(120)는 송수신 요소(122)에 의해 송신될 신호를 변조하고, 송수신 요소(122)에 의해 수신되는 신호를 복조하도록 구성될 수 있다. 앞서 언급한 바와 같이, WTRU(102)는 다중 모드 능력을 가질 수 있다. 따라서, 트랜스시버(120)는 WTRU(102)가 예를 들어 UTRA 및 IEEE 802.11와 같은 다중 RAT들을 통해 통신하는 것을 가능하게 하는 다중 트랜스시버를 포함할 수 있다.
WTRU(102)의 프로세서(118)는 스피커/마이크로폰(124), 키패드(126) 및/또는 디스플레이/터치패드(128)(예컨대, 액정 디스플레이(liquid crystal display; LCD) 디스플레이 유닛 또는 유기 발광 다이오드(organic light-emitting diode; OLED) 디스플레이 유닛)에 결합될 수 있고, 이들로부터 사용자 입력 데이터를 수신할 수 있다. 프로세서(118)는 또한 스피커/마이크로폰(124), 키패드(126) 및/또는 디스플레이/터치패드(128)에 사용자 데이터를 출력할 수도 있다. 게다가, 프로세서(118)는 비분리형 메모리(130) 및/또는 분리형 메모리(132)와 같은 임의의 타입의 적합한 메모리로부터 정보를 액세스하고, 이 메모리에 데이터를 저장할 수 있다. 비분리형 메모리(130)는 랜덤 액세스 메모리(random-access memory; RAM), 판독 전용 메모리(read-only memory; ROM), 하드 디스크 또는 임의의 다른 타입의 메모리 저장 디바이스를 포함할 수 있다. 분리형 메모리(132)는 가입자 식별 모듈(subscriber identity module; SIM) 카드, 메모리 스틱, 보안 디지털(Secure Digital; SD) 메모리 카드 등을 포함할 수 있다. 다른 실시예들에서, 프로세서(118)는 서버 또는 홈 컴퓨터(도시되지 않음)와 같이 WTRU(102) 상에 물리적으로 위치하지 않는 메모리로부터 정보를 액세스하고 이 메모리에 데이터를 저장할 수 있다.
프로세서(118)는 전원(134)로부터 전력을 수신할 수 있고, WTRU(102) 내의 다른 구성 요소에 전력을 분배 및/또는 제어하도록 구성될 수 있다. 전원(134)은 WTRU(102)에 전력을 공급하기 위한 임의의 적합한 디바이스일 수 있다. 예를 들어, 전원(134)은 하나 이상의 건전지 배터리(예를 들어, 니켈-카드뮴(NiCd), 니켈-아연(NiZn), 니켈 금속 하이드라이드(NiMH), 리튬 이온(Li-ion) 등), 태양 전지, 연료 전지 등을 포함할 수 있다.
프로세서(118)는 또한 WTRU(102)의 현재 위치에 관한 위치 정보(예를 들어, 경도 및 위도)를 제공하도록 구성될 수 있는 GPS 칩셋(136)에 결합될 수 있다. GPS 칩셋(136)으로부터의 정보에 더하여 또는 대신에, WTRU(102)는 기지국(예를 들어, 기지국(114a, 114b))으로부터 무선 인터페이스(115/116/117)를 통해 위치 정보를 수신 및/또는 2개 이상의 인접 기지국들로부터 수신된 신호들의 타이밍에 기초하여 자신의 위치를 결정할 수 있다. WTRU(102)는 실시예와 일관성을 유지하면서 임의의 적합한 위치 결정 방법에 의해 위치 정보를 획득할 수 있다는 것이 이해될 것이다.
프로세서(118)는 추가의 특징, 기능 및/또는 유무선 연결을 제공하는 하나 이상의 소프트웨어 및/또는 하드웨어 모듈을 포함할 수 있는 다른 주변 장치(138)에 더욱 결합될 수 있다. 예를 들어, 주변 장치(138)는 가속도계, 전자 나침판, 위성 트랜스시버, 디지털 카메라(사진 또는 비디오용), 범용 직렬 버스(Universal Serial Bus; USB) 포트, 진동 디바이스, 텔레비전 트랜스시버, 핸즈프리 헤드셋, 블루투스® 모듈, 주파수 변조(frequency modulated; FM) 무선 유닛, 디지털 뮤직 플레이어, 미디어 플레이어, 비디오 게임 플레이어 모듈, 인터넷 브라우저 등을 포함할 수 있다.
도 15c는 실시예에 따른 RAN(103) 및 코어 네트워크(106)의 시스템 다이어그램이다. 앞서 언급한 바와 같이, RAN(103)은 무선 인터페이스(115)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위해 UTRA 무선 기술을 이용할 수 있다. RAN(103)은 또한 코어 네트워크(106)와 통신할 수 있다. 도 15c에 도시된 바와 같이, RAN(103)는 노드 B들(140a, 140b, 140c)을 포함할 수 있고, 노드 B들(140a, 140b, 140c)은 무선 인터페이스(115)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위한 하나 이상의 트랜스시버를 각각 포함할 수 있다. 노드 B들(140a, 140b, 140c)은 RAN(103) 내의 특정한 셀(도시되지 않음)과 각각 연관될 수 있다. RAN(103)은 또한 RNC들(142a, 142b)을 포함할 수 있다. RAN(103)은 실시예와 일관성을 유지하면서 임의의 수의 노드 B들 및 RNC들을 포함할 수 있음을 이해할 것이다.
도 15c에 도시된 바와 같이, 노드 B들(140a, 140b)은 RNC(142a)와 통신할 수 있다. 부가적으로, 노드 B(140c)는 RNC(142b)와 통신할 수 있다. 노드 B들(140a, 140b, 140c)은 Iub 인터페이스를 통해 각각의 RNC들(142a, 142b)과 통신할 수 있다. RNC들(142a, 142b)은 Iur 인터페이스를 통해 서로 통신할 수 있다. RNC들(142a, 142b) 각각은 그 자신에 접속된 각각의 노드 B들(140a, 140b, 140c)을 제어하도록 구성될 수 있다. 게다가, RNC들(142a, 142b) 각각은 외부 루프 전력 제어, 부하 제어, 허가 제어, 패킷 스케줄링, 핸드오버 제어, 매크로 다이버시티, 보안 기능, 데이터 암호화 등과 같은 다른 기능을 수행 또는 지원하도록 구성될 수 있다.
도 15c에 도시된 코어 네트워크(106)는 미디어 게이트웨이(media gateway; MGW)(144), 모바일 스위칭 센터(mobile switching center; MSC)(146), 서빙 GPRS 지원 노드(serving GPRS support node; SGSN)(148), 및/또는 게이트웨이 GPRS 지원 노드(gateway GPRS support node; GGSN)(150)를 포함할 수 있다. 상술한 요소 각각은 코어 네트워크(106)의 일부로서 도시되지만, 이들 요소의 임의의 하나는 코어 네트워크 오퍼레이터 이외의 엔티티에 의해 소유 및/또는 동작될 수 있다는 것이 이해될 것이다.
RAN(103) 내의 RNC(142a)는 IuCS 인터페이스를 통해 코어 네트워크(106) 내의 MSC(146)에 접속될 수 있다. MSC(146)는 MGW(144)에 접속될 수 있다. MSC(146) 및 MGW(144)는 지상 라인 통신 디바이스들 및 WTRU들(102a, 102b, 102c) 간의 통신을 용이하게 하기 위해 PSTN(108)과 같은 회선 교환 네트워크들에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다.
RAN(103) 내의 RNC(142a)는 또한 IuPS 인터페이스를 통해 코어 네트워크(106) 내의 SGSN(148)에 접속될 수 있다. SGSN(148)은 GGSN(150)에 접속될 수 있다. SGSN(148) 및 GGSN(150)는 종래의 IP 이용 가능 디바이스들 및 WTRU들(102a, 102b, 102c) 간의 통신을 용이하게 하기 위해 인터넷(110)과 같은 패킷 교환 네트워크들에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다.
앞서 언급한 바와 같이, 코어 네트워크(106)는 또한 다른 서비스 제공자들에 의해 소유 및/또는 동작되는 다른 유선 또는 무선 네트워크들을 포함할 수 있는 네트워크들(112)에 접속될 수 있다.
도 15d는 실시예에 따른 RAN(104) 및 코어 네트워크(107)의 시스템 다이어그램이다. 앞서 언급한 바와 같이, RAN(104)은 무선 인터페이스(116)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위해 E-UTRA 무선 기술을 이용할 수 있다. RAN(104)은 또한 코어 네트워크(107)와 통신할 수 있다
RAN(104)은 e노드 B들(160a, 160b, 160c)을 포함할 수 있지만, RAN(104)은 본 실시예와 일관성을 유지하면서 임의의 수의 e노드 B들을 포함할 수 있음을 이해할 것이다. e노드 B들(160a, 160b, 160c)은 무선 인터페이스(116)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위한 하나 이상의 트랜스시버를 각각 포함할 수 있다. 일 실시예에서, e노드 B들(160a, 160b, 160c)은 MIMO 기술을 구현할 수 있다. 따라서, e노드 B(160a)는, 예를 들어, WTRU(102a)에 무선 신호를 송신하고 WTRU(102a)로부터 무선 신호를 수신하기 위해 다수의 안테나를 사용할 수 있다.
e노드 B들(160a, 160b, 160c) 각각은 특정한 셀(도시되지 않음)과 연관될 수 있고, 업링크 및/또는 다운링크에서 사용자들의 스케줄링, 무선 자원 관리 결정, 핸드오버 결정 등을 다루도록 구성될 수 있다. 도 15d에 도시된 바와 같이, e노드 B들(160a, 140b, 140c)은 X2 인터페이스를 통해 서로 통신할 수 있다.
도 15d에 도시된 코어 네트워크(107)는 이동성 관리 게이트웨이(mobility management gateway; MME)(162), 서빙 게이트웨이(164) 및 패킷 데이터 네트워크(packet data network; PDN) 게이트웨이(166)를 포함할 수 있다. 상술한 요소 각각은 코어 네트워크(107)의 일부로서 도시되지만, 이들 요소의 임의의 하나는 코어 네트워크 오퍼레이터 이외의 엔티티에 의해 소유 및/또는 동작될 수 있다는 것이 이해될 것이다.
MME(162)는 S1 인터페이스를 통해 RAN(104) 내의 e노드 B들(160a, 160b, 160c)의 각각에 접속될 수 있고, 제어 노드로서 기능할 수 있다. 예를 들어, MME(162)는 WTRU들(102a, 102b, 102c)의 사용자 인증, 베어러 활성화/비활성화, WTRU들(102a, 102b, 102c)의 초기 부착 동안 특정한 서빙 게이트웨이의 선택 등을 담당할 수 있다. MME(162)는 또한 GSM 또는 WCDMA와 같은 다른 무선 기술을 이용하는 다른 RAN(도시되지 않음)와 RAN(104) 사이를 스위칭하는 제어 평면 기능을 제공할 수 있다.
서빙 게이트웨이(164)는 S1 인터페이스를 통해 RAN(104) 내의 e노드 B들(160a, 160b, 160c) 각각에 접속될 수 있다. 서빙 게이트웨이(164)는 일반적으로 WTRU들(102a, 102b, 102c)로/로부터 사용자 데이터 패킷을 라우팅 및 포워딩할 수 있다. 서빙 게이트웨이(164)는 또한 e노드 B들 간의 핸드오버 동안 사용자 평면의 앵커(anchoring), 다운링크 데이터가 WTRU들(102a, 102b, 102c)에 사용될 때의 페이징 트리거링, WTRU들(102a, 102b, 102c)의 콘텍스트의 관리 및 저장 등과 같은 다른 기능을 수행할 수 있다.
서빙 게이트웨이(164)는 또한 IP 이용 가능 디바이스들과 WTRU들(102a, 102b, 102c) 간의 통신을 용이하게 하기 위해, 인터넷(110)과 같은 패킷 교환 네트워크에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있는 PDN 게이트웨이(166)에 접속될 수 있다.
코어 네트워크(107)는 다른 네트워크들과의 통신을 용이하게 할 수 있다. 예를 들어, 코어 네트워크(107)는 WTRU들(102a, 102b, 102c)과 지상 라인 통신 디바이스들 사이의 통신을 용이하게 하기 위해서, PSTN(108)과 같은 회선 교환 네트워크에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다. 예를 들어, 코어 네트워크(107)는 코어 네트워크(107)와 PSTN(108) 사이에서 인터페이스의 역할을 하는 IP 게이트웨이(예컨대, IP 멀티미디어 서브시스템(IP multimedia subsystem; IMS) 서버)를 포함하거나, 이 IP 게이트웨이와 통신할 수 있다. 게다가, 코어 네트워크(107)는 다른 서비스 제공자들에 의해 운영 및/또는 소유되는 다른 유선 또는 무선 네트워크를 포함할 수 있는 네트워크(112)에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다.
도 15e는 실시예에 따른 RAN(105) 및 코어 네트워크(109)의 시스템 다이어그램이다. RAN(105)은 무선 인터페이스(117)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위해 IEEE 802.16 무선 기술을 이용하는 액세스 서비스 네트워크(access service network; ASN)일 수 있다. 이하에 더욱 논의되는 바와 같이, WTRU들(102a, 102b, 102c), RAN(105), 및 코어 네트워크(109)의 상이한 기능 엔티티들 간의 통신 링크는 참조점으로 정의될 수 있다.
도 15e에 도시된 바와 같이, RAN(105)은 기지국들(180a, 180b, 180c) 및 ANS 게이트웨이(182)를 포함할 수 있지만, 실시예와 일관성을 유지하면서 RAN(105)은 임의의 수의 기지국 및 ASN 게이트웨이를 포함할 수 있음을 이해할 것이다. 기지국들(180a, 180b, 180c)은 RAN(105) 내의 특정한 셀(도시되지 않음)과 각각 연관될 수 있고, 무선 인터페이스(117)를 통해 WTRU들(102a, 102b, 102c)과 통신하기 위한 하나 이상의 트랜스시버를 각각 포함할 수 있다. 일 실시예에서, 기지국들(180a, 180b, 180c)은 MIMO 기술을 구현할 수 있다. 따라서, 기지국(180a)은, 예를 들어, WTRU(102a)에 무선 신호를 송신하고 WTRU(102a)로부터 무선 신호를 수신하기 위해 다수의 안테나를 사용할 수 있다. 기지국들(180a, 180b, 180c)은 또한 핸드오프 트리거링, 터널 확립, 무선 자원 관리, 트래픽 분류, 서비스 품질(QoS) 정책 시행 등과 같은 이동성 관리 기능을 제공할 수 있다. ASN 게이트웨이(182)는 트래픽 집합점의 역할을 할 수도 있고, 페이징, 가입자 프로파일의 캐싱, 코어 네트워크(109)로의 라우팅 등을 담당할 수 있다.
WTRU들(102a, 102b, 102c)과 RAN(105) 간의 무선 인터페이스(117)는 IEEE 802.16 사양을 구현하는 R1 참조점으로 정의될 수 있다. 게다가, WTRU들(102a, 102b, 102c) 각각은 코어 네트워크(109)와 논리적 인터페이스(도시되지 않음)를 확립할 수 있다. WTRU들(102a, 102b, 102c)과 코어 네트워크(109) 간의 논리적 인터페이스는 R2 참조점으로 정의될 수 있고, 이것은 인증, 인가, IP 호스트 구성 관리, 및/또는 이동성 관리에 이용될 수 있다.
기지국들(180a, 180b, 180c) 각각 간의 통신 링크는 R8 참조점으로 정의될 수 있고, 이것은 기지국들 간의 데이터 전달 및 WTRU 핸드오버를 용이하게 하기 위한 프로토콜을 포함한다. 기지국들(180a, 180b, 180c)과 ASN 게이트웨이(182) 간의 통신 링크는 R6 참조점으로 정의될 수 있다. R6 참조점은 WTRU들(102a, 102b, 102c) 각각과 연관된 이동성 이벤트에 기초하여 이동성 관리를 용이하게 하기 위한 프로토콜을 포함할 수 있다.
도 15e에 도시된 바와 같이, RAN(105)은 코어 네트워크(109)에 접속될 수 있다. RAN(105)과 코어 네트워크(109) 간의 통신 링크는 R3 참조점으로 정의될 수 있고, 이것은 예를 들어 데이터 전달 및 이동성 관리 능력을 용이하게 하는 프로토콜을 포함할 수 있다. 코어 네트워크(109)는 모바일 IP 홈 에이전트(mobile IP home agent; MIP-HA)(184), 인증, 인가, 계정(authentication, authorization, accounting; AAA) 서버(186) 및 게이트웨이(188)를 포함할 수 있다. 상술한 요소 각각은 코어 네트워크(109)의 일부로서 도시되지만, 이들 요소의 임의의 하나는 코어 네트워크 운용자 이외의 엔티티에 의해 소유 및/또는 동작될 수 있다는 것이 이해될 것이다.
MIP-HA는 IP 어드레스 관리를 담당할 수 있고, WTRU들(102a, 102b, 102c)이 상이한 ASN들 및/또는 상이한 코어 네트워크들 간에 로밍하는 것을 가능하게 할 수 있다. MIP-HA(184)는 IP 이용 가능 디바이스들과 WTRU들(102a, 102b, 102c) 간의 통신을 용이하게 하기 위해, 인터넷(110)과 같은 패킷 교환 네트워크들에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다. AAA 서버(186)는 사용자 인증 및 사용자 서비스 지원을 담당할 수 있다. 게이트웨이(188)는 다른 네트워크들과의 상호 연동(interworking)을 용이하게 할 수 있다. 예를 들어, 게이트웨이(188)는 WTRU들(102a, 102b, 102c)과 지상 라인 통신 디바이스들 사이의 통신을 용이하게 하기 위해서, PSTN(108)과 같은 회선 교환 네트워크에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다. 게다가, 게이트웨이(188)는 다른 서비스 제공자들에 의해 동작 및/또는 소유되는 다른 유선 또는 무선 네트워크를 포함할 수 있는 네트워크(112)에 대한 액세스를 WTRU들(102a, 102b, 102c)에 제공할 수 있다.
도 15e에 도시되지 않았지만, RAN(105)은 다른 ASN들에 접속될 수 있고, 코어 네트워크(109)는 다른 코어 네트워크들에 접속될 수 있다는 것이 이해될 것이다. RAN(105)와 다른 ASN들 간의 통신 링크는 R4 참조점으로 정의될 수 있고, 이것은 RAN(105)와 다른 ASN 간에 WTRU들(102a, 102b, 102c)의 이동성을 조정하는 프로토콜을 포함할 수 있다. 코어 네트워크(109)와 다른 코어 네트워크들 간의 통신 링크는 R5 참조점으로 정의될 수 있고, 이것은 홈 코어 네트워크와 방문 코어 네트워크 간의 상호연동을 용이하게 하는 프로토콜을 포함할 수 있다.
교차 평면 필터링을 사용하는 향상된 크로마 코딩을 위한 시스템, 방법 및 도구가 개시되었다. 기준, 예측된 및/또는 재구성된 크로마 샘플이, 예를 들어, 기준, 예측된 또는 재구성된 크로마 샘플에 각각 대응하는 1D 또는 2D MxN 윈도우의 루마 샘플들(필터 지원 영역)의 교차 평면 필터링으로부터 도출된 정보를 이용하여 향상될 수 있다. 루마 샘플들은 재구성되거나 패딩될 수 있다. 필터 지원 영역은 예를 들어, 방향성 인트라 예측 모드에 기초하여 적응적으로 선택될 수 있다. 교차 평면 필터는 예를 들어 적용 가능성으로 분류될 수 있고, 예를 들어 필터 지원 영역, 현재 블록에 대해 인트라 또는 인터 예측 모드가 사용되는지 여부, 정수 또는 분수 픽셀 모션 벡터가 사용되는지 여부 및/또는 기준 픽처가 인터 예측에서 사용되는지 여부에 기초하여 적응적으로 선택될 수 있다. 예를 들어, 크로마 향상이 인에이블되는지 여부, 크로마 향상이 현재 블록에 적용되는지 여부, 교차 평면 필터 타입, 교차 평면 필터 (예를 들어, 필터 세트) 및 대응하는 교차 평면 필터 계수 중 적어도 하나를 나타내기 위해 시그널링이 디코더에 제공될 수 있다. 디코더는 수신된 시그널링에 기초하여 필터 지원 영역에 적용할 교차 평면 필터를 선택할 수 있다.
특징들 및 요소들이 특정한 조합으로 앞서 설명되었지만, 각각의 특징 또는 요소는 단독으로 사용될 수 있거나, 또는 다른 특징들 및 요소들과 임의의 조합으로 사용될 수 있다는 것을 관련 기술 분야의 당업자는 이해할 것이다. 게다가, 본 명세서에서 설명된 방법은, 컴퓨터 또는 프로세서에 의한 실행을 위해 컴퓨터 판독 가능 매체에 통합된 컴퓨터 프로그램, 소프트웨어 또는 펌웨어로 구현될 수 있다. 컴퓨터 판독 가능 매체의 예로, 전자 신호(유무선 접속에 의해 송신됨) 및 컴퓨터 판독 가능 저장 매체를 들 수 있다. 컴퓨터 판독 가능 저장 매체의 예에는 판독 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 레지스터, 캐시 메모리, 반도체 메모리 장치, 내부 하드 디스크와 제거형 디스크와 같은 자기 매체, 광자기 매체, 및 CD-ROM 디스크, 디지털 다용도 디스크(digital versatile disk; DVD)와 같은 광학 매체가 포함될 수 있지만, 이에 한정되는 것은 아니다. WTRU, UE, 단말기, 기지국, RNC, 또는 임의의 호스트 컴퓨터에서 이용하기 위한 무선 주파수 트랜스시버를 구현하기 위해 소프트웨어와 관련된 프로세서가 사용될 수 있다.

Claims (26)

  1. 비디오 코딩 방법에 있어서,
    현재 픽처와 연관된 교차 평면 필터의 표시를 획득하는 단계 - 상기 현재 픽처는 비디오 블록을 포함함 - ;
    상기 비디오 블록을 예측하기 위해 사용되는 복수의 기준 샘플들(reference samples)을 획득하는 단계;
    상기 복수의 기준 샘플들 중 대응하는 크로마 샘플을 향상시키기 위해 상기 현재 픽처에서 루마 샘플 영역을 결정하는 단계 - 상기 루마 샘플 영역은 상기 비디오 블록 내의 예측된 루마 샘플들을 포함함 - ;
    상기 예측된 루마 샘플들의 재구성 전에, 오프셋을 결정하기 위해 상기 루마 샘플 영역 내의 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하는 단계 - 상기 교차 평면 필터는 하이 패스 필터를 포함함 - ;
    향상된 크로마 샘플을 결정하기 위해 상기 대응하는 크로마 샘플에 상기 오프셋을 적용하는 단계; 및
    상기 향상된 크로마 샘플을 사용하여 상기 비디오 블록을 예측하는 단계
    를 포함하는, 비디오 코딩 방법.
  2. 제 1 항에 있어서, 상기 루마 샘플 영역은 이용 불가능한 루마 샘플을 포함하고, 상기 방법은,
    상기 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하는 단계 이전에, 상기 이용 불가능한 루마 샘플을 이웃하는 이용 가능한 루마 샘플로 대체하는 단계를 더 포함하는, 비디오 코딩 방법.
  3. 제 1 항에 있어서,
    크로마 향상 표시자에 기초하여, 상기 교차 평면 필터를 적용할지 여부를 결정하는 단계를 더 포함하고,
    상기 크로마 향상 표시자는 블록 레벨에서 획득되는 것인, 비디오 코딩 방법.
  4. 제 1 항에 있어서, 상기 루마 샘플 영역은 제 1 루마 샘플 영역이고, 상기 복수의 루마 샘플들은 제 1 의 복수의 루마 샘플들이고, 상기 예측된 루마 샘플들은 제 1 의 예측된 루마 샘플들이고, 상기 오프셋은 제 1 오프셋이고, 상기 대응하는 크로마 샘플은 제 1 의 대응하는 크로마 샘플이며, 상기 향상된 크로마 샘플은 제 1 의 향상된 크로마 샘플이고,
    상기 방법은,
    제 2 의 복수의 기준 샘플들 중 제 2 의 대응하는 크로마 샘플을 향상시키기 위해 상기 현재 픽처에서 제 2 루마 샘플 영역을 결정하는 단계 - 상기 제 2 루마 샘플 영역은 상기 비디오 블록 내의 제 2 의 예측된 루마 샘플들을 포함함 - ;
    상기 제 2 의 예측된 루마 샘플들의 재구성 전에, 제 2 오프셋을 결정하기 위해 상기 제 2 루마 샘플 영역 내의 제 2 의 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하는 단계;
    제 2 의 향상된 크로마 샘플을 결정하기 위해 상기 제 2 의 대응하는 크로마 샘플에 상기 제 2 오프셋을 적용하는 단계; 및
    상기 제 2 의 향상된 크로마 샘플을 사용하여 상기 비디오 블록을 예측하는 단계
    를 더 포함하는, 비디오 코딩 방법.
  5. 제 1 항에 있어서, 상기 루마 샘플 영역은 선택된 인트라 예측 모드 또는 선택된 인터 예측 모드 중 적어도 하나에 기초하여 결정되는 것인, 비디오 코딩 방법.
  6. 제 1 항에 있어서,
    선택된 인트라 예측 모드 또는 선택된 인터 예측 모드 중 적어도 하나에 기초하여 적용할 상기 교차 평면 필터를 결정하는 단계를 더 포함하는, 비디오 코딩 방법.
  7. 제 1 항에 있어서, 상기 대응하는 크로마 샘플은 상기 비디오 블록 내의 예측된 크로마 샘플인 것인, 비디오 코딩 방법.
  8. 삭제
  9. 제 1 항에 있어서, 상기 대응하는 크로마 샘플은 인-루프(in-loop) 필터링 이전의 재구성된 크로마 샘플이며, 상기 향상된 크로마 샘플은 상기 인-루프 필터링이 적용되기 이전에 상기 대응하는 크로마 샘플을 대체하기 위해 사용되는 것인, 비디오 코딩 방법.
  10. 제 1 항에 있어서, 상기 대응하는 크로마 샘플은 상기 비디오 블록에서 하나 이상의 샘플을 예측하기 위해 사용되는 기준 크로마 샘플인 것인, 비디오 코딩 방법.
  11. 비디오 코딩 디바이스에 있어서,
    프로세서를 포함하고, 상기 프로세서는:
    현재 픽처와 연관된 교차 평면 필터의 표시를 획득하고 - 상기 현재 픽처는 비디오 블록을 포함함 - ;
    상기 비디오 블록을 예측하기 위해 사용되는 복수의 기준 샘플들을 획득하고;
    상기 복수의 기준 샘플들 중 대응하는 크로마 샘플을 향상시키기 위해 상기 현재 픽처에서 루마 샘플 영역을 결정하고 - 상기 루마 샘플 영역은 상기 비디오 블록 내의 예측된 루마 샘플들을 포함함 - ;
    상기 예측된 루마 샘플들의 재구성 전에, 오프셋을 결정하기 위해 상기 루마 샘플 영역 내의 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하고 - 상기 교차 평면 필터는 하이 패스 필터를 포함함 - ;
    향상된 크로마 샘플을 결정하기 위해 상기 대응하는 크로마 샘플에 상기 오프셋을 적용하고; 및
    상기 향상된 크로마 샘플을 사용하여 상기 비디오 블록을 예측하도록 구성되는 것인, 비디오 코딩 디바이스.
  12. 제 11 항에 있어서, 상기 루마 샘플 영역은 이용 불가능한 루마 샘플을 포함하고, 상기 프로세서는 또한, 상기 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하기 이전에, 상기 이용 불가능한 루마 샘플을 이웃하는 재구성된 루마 샘플로 대체하도록 구성되는 것인, 비디오 코딩 디바이스.
  13. 제 11 항에 있어서, 상기 프로세서는 또한, 크로마 향상 표시자에 기초하여, 상기 교차 평면 필터를 적용할지 여부를 결정하도록 구성되고,
    상기 크로마 향상 표시자는 블록 레벨에서 획득되는 것인, 비디오 코딩 디바이스.
  14. 제 11 항에 있어서, 상기 루마 샘플 영역은 제 1 루마 샘플 영역이고, 상기 복수의 루마 샘플들은 제 1 의 복수의 루마 샘플들이고, 상기 예측된 루마 샘플들은 제 1 의 예측된 루마 샘플들이고, 상기 오프셋은 제 1 오프셋이고, 상기 대응하는 크로마 샘플은 제 1 의 대응하는 크로마 샘플이며, 상기 향상된 크로마 샘플은 제 1 의 향상된 크로마 샘플이고,
    상기 프로세서는 또한,
    제 2 의 복수의 기준 샘플들 중 제 2 의 대응하는 크로마 샘플을 향상시키기 위해 상기 현재 픽처에서 제 2 루마 샘플 영역을 결정하고 - 상기 제 2 루마 샘플 영역은 상기 비디오 블록 내의 제 2 의 예측된 루마 샘플들을 포함함 - ;
    상기 제 2 의 예측된 루마 샘플들의 재구성 전에, 제 2 오프셋을 결정하기 위해 상기 제 2 루마 샘플 영역 내의 제 2 의 복수의 루마 샘플들에 상기 교차 평면 필터를 적용하고;
    제 2 의 향상된 크로마 샘플을 결정하기 위해 상기 제 2 의 대응하는 크로마 샘플에 상기 제 2 오프셋을 적용하고; 및
    상기 제 2 의 향상된 크로마 샘플을 사용하여 상기 비디오 블록을 예측하도록 구성되는 것인, 비디오 코딩 디바이스.
  15. 제 11 항에 있어서, 상기 프로세서는 또한,
    선택된 인트라 예측 모드 또는 선택된 인터 예측 모드 중 적어도 하나에 기초하여 적용할 상기 교차 평면 필터를 결정하고,
    상기 선택된 인트라 예측 모드 또는 상기 선택된 인터 예측 모드 중 적어도 하나에 기초하여 상기 루마 샘플 영역을 결정하도록 구성되는 것인, 비디오 코딩 디바이스.
  16. 제 1 항에 있어서,
    상기 예측된 루마 샘플들은 상기 루마 샘플 영역 내의 패딩된(padded) 루마 샘플들을 포함하는 것인, 비디오 코딩 방법.
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
  21. 삭제
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
KR1020187002181A 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩 KR102291835B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020217025704A KR102460912B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562190008P 2015-07-08 2015-07-08
US62/190,008 2015-07-08
PCT/US2016/041445 WO2017007989A1 (en) 2015-07-08 2016-07-08 Enhanced chroma coding using cross plane filtering

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020217025704A Division KR102460912B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩

Publications (2)

Publication Number Publication Date
KR20180039052A KR20180039052A (ko) 2018-04-17
KR102291835B1 true KR102291835B1 (ko) 2021-08-23

Family

ID=56555775

Family Applications (4)

Application Number Title Priority Date Filing Date
KR1020227037335A KR102570911B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩
KR1020237028450A KR20230128138A (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩
KR1020217025704A KR102460912B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩
KR1020187002181A KR102291835B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩

Family Applications Before (3)

Application Number Title Priority Date Filing Date
KR1020227037335A KR102570911B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩
KR1020237028450A KR20230128138A (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩
KR1020217025704A KR102460912B1 (ko) 2015-07-08 2016-07-08 교차 평면 필터링을 이용한 향상된 크로마 코딩

Country Status (7)

Country Link
US (2) US11438605B2 (ko)
EP (1) EP3320684A1 (ko)
JP (3) JP2018527784A (ko)
KR (4) KR102570911B1 (ko)
CN (2) CN107836116B (ko)
TW (1) TWI715598B (ko)
WO (1) WO2017007989A1 (ko)

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10368107B2 (en) 2016-08-15 2019-07-30 Qualcomm Incorporated Intra video coding using a decoupled tree structure
US10999602B2 (en) 2016-12-23 2021-05-04 Apple Inc. Sphere projected motion estimation/compensation and mode decision
US11259046B2 (en) 2017-02-15 2022-02-22 Apple Inc. Processing of equirectangular object data to compensate for distortion by spherical projections
US10924747B2 (en) 2017-02-27 2021-02-16 Apple Inc. Video coding techniques for multi-view video
US11093752B2 (en) 2017-06-02 2021-08-17 Apple Inc. Object tracking in multi-view video
WO2019059107A1 (ja) * 2017-09-20 2019-03-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
KR20200047563A (ko) * 2017-09-26 2020-05-07 삼성전자주식회사 크로스-성분 예측에 의한 비디오 복호화 방법 및 장치, 크로스-성분 예측에 의한 비디오 부호화 방법 및 장치
CN117176958A (zh) * 2017-11-28 2023-12-05 Lx 半导体科技有限公司 图像编码/解码方法、图像数据的传输方法和存储介质
CN115695789A (zh) * 2018-01-15 2023-02-03 三星电子株式会社 编码方法及其设备以及解码方法及其设备
EP4221201A1 (en) 2018-01-29 2023-08-02 InterDigital VC Holdings, Inc. Encoding and decoding with refinement of the reconstructed picture
AU2019342803B2 (en) * 2018-09-21 2023-07-13 Huawei Technologies Co., Ltd. Apparatus and method for inverse quantization
WO2020057506A1 (zh) * 2018-09-21 2020-03-26 华为技术有限公司 色度块预测方法及装置
MX2021003853A (es) * 2018-10-05 2021-09-08 Huawei Tech Co Ltd Método y dispositivo de intrapredicción.
KR20210089133A (ko) 2018-11-06 2021-07-15 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 인트라 예측에 대한 단순화된 파라미터 유도
WO2020108591A1 (en) 2018-12-01 2020-06-04 Beijing Bytedance Network Technology Co., Ltd. Parameter derivation for intra prediction
MX2021006562A (es) * 2018-12-07 2021-08-16 Fraunhofer Ges Forschung Codificador, decodificador y métodos para mejorar una robustez para el cálculo de los parámetros de modelo lineal de componentes cruzados.
CA3121671A1 (en) 2018-12-07 2020-06-11 Beijing Bytedance Network Technology Co., Ltd. Context-based intra prediction
CA3222255A1 (en) * 2018-12-25 2020-07-02 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Decoding prediction method and apparatus, and computer storage medium
JP2022521698A (ja) 2019-02-22 2022-04-12 北京字節跳動網絡技術有限公司 イントラ予測のための隣接サンプル選択
CA3128769C (en) 2019-02-24 2023-01-24 Beijing Bytedance Network Technology Co., Ltd. Parameter derivation for intra prediction
WO2020192642A1 (en) * 2019-03-24 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Conditions in parameter derivation for intra prediction
CN115720268A (zh) * 2019-03-26 2023-02-28 北京字节跳动网络技术有限公司 用于帧间预测的参数推导
CN113647102A (zh) * 2019-04-09 2021-11-12 北京达佳互联信息技术有限公司 用于在视频编解码中用信号发送合并模式的方法和装置
AU2020256658A1 (en) 2019-04-12 2021-10-28 Beijing Bytedance Network Technology Co., Ltd. Most probable mode list construction for matrix-based intra prediction
WO2020211807A1 (en) 2019-04-16 2020-10-22 Beijing Bytedance Network Technology Co., Ltd. Matrix derivation in intra coding mode
WO2020221373A1 (en) 2019-05-01 2020-11-05 Beijing Bytedance Network Technology Co., Ltd. Matrix-based intra prediction using filtering
WO2020221372A1 (en) 2019-05-01 2020-11-05 Beijing Bytedance Network Technology Co., Ltd. Context coding for matrix-based intra prediction
WO2020233663A1 (en) 2019-05-22 2020-11-26 Beijing Bytedance Network Technology Co., Ltd. Matrix-based intra prediction using upsampling
CN114051735A (zh) 2019-05-31 2022-02-15 北京字节跳动网络技术有限公司 基于矩阵的帧内预测中的一步下采样过程
EP3963885A4 (en) 2019-06-05 2022-12-14 Beijing Bytedance Network Technology Co., Ltd. DETERMINING CONTEXT FOR MATRIX-BASED INTRAPREDICTION
EP3987778B1 (en) * 2019-06-21 2023-11-22 Vid Scale, Inc. Precision refinement for motion compensation with optical flow
CN114270850A (zh) 2019-08-08 2022-04-01 松下电器（美国）知识产权公司 用于视频编码的系统和方法
WO2021025168A1 (en) * 2019-08-08 2021-02-11 Panasonic Intellectual Property Corporation Of America System and method for video coding
WO2021025165A1 (en) * 2019-08-08 2021-02-11 Panasonic Intellectual Property Corporation Of America System and method for video coding
EP4011086A1 (en) * 2019-08-08 2022-06-15 Panasonic Intellectual Property Corporation of America System and method for video coding
WO2021025167A1 (en) * 2019-08-08 2021-02-11 Panasonic Intellectual Property Corporation Of America System and method for video coding
GB2586484B (en) * 2019-08-20 2023-03-08 Canon Kk A filter
KR20210027173A (ko) * 2019-08-28 2021-03-10 주식회사 케이티 비디오 신호 처리 방법 및 장치
US11962767B2 (en) 2019-08-29 2024-04-16 Lg Electronics Inc. Apparatus and method for coding image
WO2021049593A1 (en) 2019-09-11 2021-03-18 Panasonic Intellectual Property Corporation Of America System and method for video coding
EP4018671A4 (en) 2019-09-19 2022-12-07 Beijing Bytedance Network Technology Co., Ltd. DERIVING REFERENCE SAMPLE POSITIONS IN VIDEO CODING
JP2022548936A (ja) 2019-09-20 2022-11-22 北京字節跳動網絡技術有限公司 クロマ・スケーリングを行うルマ・マッピング
CN114586352A (zh) * 2019-09-23 2022-06-03 Vid拓展公司 联合分量视频帧滤波
KR20220082847A (ko) 2019-10-28 2022-06-17 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 색상 성분에 기초한 신택스 시그널링 및 파싱
JP7389252B2 (ja) * 2019-10-29 2023-11-29 北京字節跳動網絡技術有限公司 クロスコンポーネント適応ループフィルタ
CN113132739B (zh) * 2019-12-31 2022-11-01 杭州海康威视数字技术股份有限公司 边界强度确定、编解码方法、装置及其设备
US11303936B2 (en) * 2020-02-21 2022-04-12 Tencent America LLC Method and apparatus for filtering
US11575909B2 (en) * 2020-04-07 2023-02-07 Tencent America LLC Method and apparatus for video coding
CN116366859A (zh) * 2020-07-28 2023-06-30 北京达佳互联信息技术有限公司 对视频信号进行解码的方法、设备和介质
WO2022035687A1 (en) * 2020-08-13 2022-02-17 Beijing Dajia Internet Information Technology Co., Ltd. Chroma coding enhancement in cross-component sample adaptive offset
WO2023097064A1 (en) * 2021-11-25 2023-06-01 Beijing Dajia Internet Information Technology Co., Ltd. Cross-component sample adaptive offset

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130114696A1 (en) * 2011-11-07 2013-05-09 Futurewei Technologies, Co. Angular Table for Improving Intra Prediction
US20140092999A1 (en) * 2012-09-28 2014-04-03 Vid Scale, Inc. Cross-plane filtering for chroma signal enhancement in video coding
US20140185680A1 (en) * 2012-12-28 2014-07-03 Qualcomm Incorporated Device and method for scalable and multiview/3d coding of video information

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4701783A (en) 1982-09-14 1987-10-20 New York Institute Of Technology Technique for encoding and decoding video with improved separation of chrominance and luminance
US5450216A (en) * 1994-08-12 1995-09-12 International Business Machines Corporation Color image gamut-mapping system with chroma enhancement at human-insensitive spatial frequencies
US6462790B1 (en) * 1999-03-12 2002-10-08 Fortel Dtv, Inc. Digital comb filter for decoding composite video signals
US7102669B2 (en) 2002-04-02 2006-09-05 Freescale Semiconductor, Inc. Digital color image pre-processing
US7333544B2 (en) 2003-07-16 2008-02-19 Samsung Electronics Co., Ltd. Lossless image encoding/decoding method and apparatus using inter-color plane prediction
US7822286B2 (en) * 2003-11-07 2010-10-26 Mitsubishi Electric Research Laboratories, Inc. Filtering artifacts in images with 3D spatio-temporal fuzzy filters
US7397515B2 (en) 2004-01-30 2008-07-08 Broadcom Corporation Method and system for cross-chrominance removal using motion detection
US7724949B2 (en) * 2004-06-10 2010-05-25 Qualcomm Incorporated Advanced chroma enhancement
EP1886502A2 (en) 2005-04-13 2008-02-13 Universität Hannover Method and apparatus for enhanced video coding
TWI314720B (en) 2005-05-31 2009-09-11 Himax Tech Inc 2d yc separation device and yc separation system
CN101009842B (zh) 2006-01-11 2012-02-01 华为技术有限公司 可分级视频压缩中插值的方法与装置
KR101266168B1 (ko) 2006-08-16 2013-05-21 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US8270472B2 (en) 2007-11-09 2012-09-18 Thomson Licensing Methods and apparatus for adaptive reference filtering (ARF) of bi-predictive pictures in multi-view coded video
MX2010014289A (es) 2008-07-04 2011-01-21 Toshiba Kk Metodo y dispositivo para codificar/descodificar imagen dinamica.
US8270466B2 (en) 2008-10-03 2012-09-18 Sony Corporation Adaptive decimation filter
CN101778371B (zh) 2009-01-09 2012-08-29 电信科学技术研究院 寻呼方法及装置
CN102484713A (zh) 2009-09-17 2012-05-30 株式会社东芝 运动图像编码方法以及运动图像解码方法
US8638342B2 (en) * 2009-10-20 2014-01-28 Apple Inc. System and method for demosaicing image data using weighted gradients
EP2502115A4 (en) * 2009-11-20 2013-11-06 Pelican Imaging Corp RECORDING AND PROCESSING IMAGES THROUGH A MONOLITHIC CAMERA ARRAY WITH HETEROGENIC IMAGE CONVERTER
KR101682147B1 (ko) * 2010-04-05 2016-12-05 삼성전자주식회사 변환 및 역변환에 기초한 보간 방법 및 장치
CN201726499U (zh) 2010-05-04 2011-01-26 武汉光华芯科技有限公司 复合视频信号亮色分离系统
CN101902653B (zh) 2010-06-25 2013-04-24 杭州爱威芯科技有限公司 一种基于亮度样本的方向预测的场内yc分离方法
US20120008687A1 (en) 2010-07-06 2012-01-12 Apple Inc. Video coding using vector quantized deblocking filters
WO2012164939A1 (ja) 2011-06-03 2012-12-06 パナソニック株式会社 画像符号化方法および画像復号化方法
US9693070B2 (en) * 2011-06-24 2017-06-27 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
CN105049864A (zh) * 2011-06-28 2015-11-11 三星电子株式会社 根据像素分类使用偏移调整的视频解码方法及其设备
US9641866B2 (en) 2011-08-18 2017-05-02 Qualcomm Incorporated Applying partition-based filters
KR20130049526A (ko) * 2011-11-04 2013-05-14 오수미 복원 블록 생성 방법
KR101768401B1 (ko) * 2012-01-13 2017-08-14 샤프 가부시키가이샤 화상 복호 장치
WO2013155662A1 (en) 2012-04-16 2013-10-24 Mediatek Singapore Pte. Ltd. Methods and apparatuses of simplification for intra chroma lm mode
JPWO2013164922A1 (ja) 2012-05-02 2015-12-24 ソニー株式会社 画像処理装置及び画像処理方法
US20140086316A1 (en) 2012-09-24 2014-03-27 Louis Joseph Kerofsky Video compression with color space scalability
CN108401157B (zh) * 2012-10-01 2022-06-24 Ge视频压缩有限责任公司 可伸缩视频解码器、编码器及可伸缩视频解码、编码方法
US9300964B2 (en) * 2013-01-24 2016-03-29 Sharp Kabushiki Kaisha Image decoding apparatus and image coding apparatus
CN105009585B (zh) * 2013-04-02 2018-09-25 明达半导体股份有限公司 视频处理方法及视频处理装置
US9503733B2 (en) 2013-04-10 2016-11-22 ARRIS Enterprises, LLC Re-sampling with phase offset adjustment for luma and chroma to signal adaptive filters in scalable video coding
US8810727B1 (en) * 2013-05-07 2014-08-19 Qualcomm Technologies, Inc. Method for scaling channel of an image
US9686561B2 (en) * 2013-06-17 2017-06-20 Qualcomm Incorporated Inter-component filtering
WO2015003753A1 (en) 2013-07-12 2015-01-15 Nokia Solutions And Networks Oy Redirection of m2m devices
WO2015057947A1 (en) * 2013-10-17 2015-04-23 Huawei Technologies Co., Ltd. Improved reference pixel selection and filtering for intra coding of depth map
RU2633526C1 (ru) 2013-11-01 2017-10-13 Хуавэй Текнолоджиз Ко., Лтд. Способ выбора сети и основное сетевое устройство
JP6750234B2 (ja) 2016-01-28 2020-09-02 横浜ゴム株式会社 タイヤ運用サービスシステムおよび方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130114696A1 (en) * 2011-11-07 2013-05-09 Futurewei Technologies, Co. Angular Table for Improving Intra Prediction
US20140092999A1 (en) * 2012-09-28 2014-04-03 Vid Scale, Inc. Cross-plane filtering for chroma signal enhancement in video coding
US20140185680A1 (en) * 2012-12-28 2014-07-03 Qualcomm Incorporated Device and method for scalable and multiview/3d coding of video information

Also Published As

Publication number Publication date
KR20230128138A (ko) 2023-09-01
JP7208288B2 (ja) 2023-01-18
JP2021103889A (ja) 2021-07-15
KR20210104929A (ko) 2021-08-25
KR102460912B1 (ko) 2022-10-28
KR20220146717A (ko) 2022-11-01
KR102570911B1 (ko) 2023-08-24
JP2018527784A (ja) 2018-09-20
CN107836116A (zh) 2018-03-23
CN107836116B (zh) 2021-08-06
TWI715598B (zh) 2021-01-11
JP2023030205A (ja) 2023-03-07
WO2017007989A1 (en) 2017-01-12
CN113810691A (zh) 2021-12-17
US20220329831A1 (en) 2022-10-13
US11438605B2 (en) 2022-09-06
TW201724854A (zh) 2017-07-01
US20180220138A1 (en) 2018-08-02
EP3320684A1 (en) 2018-05-16
KR20180039052A (ko) 2018-04-17

Similar Documents

Publication Publication Date Title
JP7208288B2 (ja) クロスプレーンフィルタリングを使用する強化されたクロマコーディング
JP7253519B2 (ja) スクリーンコンテンツ符号化のためのイントラブロックコピーモード
US10484686B2 (en) Palette coding modes and palette flipping
EP3251350B1 (en) Intra-block copy searching
KR101840915B1 (ko) 스케일러블 비디오 코딩을 위한 모션 정보 시그널링
KR101812860B1 (ko) Ｈｄｒ 비디오를 디노이징하기 위한 시간적 필터
JP7307184B2 (ja) オプティカルフローを用いたインター予測リファインメントのためのシステム、装置、および方法
US20150103898A1 (en) Weighted prediction parameter signaling for video coding
TW201637448A (zh) 非4:4:4螢幕內容視訊調色盤編碼
KR102658290B1 (ko) 스크린 콘텐츠 코딩을 위한 인트라 블록 카피 모드

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right