KR102497153B1 - 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩 - Google Patents

안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩 Download PDF

Info

Publication number
KR102497153B1
KR102497153B1 KR1020217035293A KR20217035293A KR102497153B1 KR 102497153 B1 KR102497153 B1 KR 102497153B1 KR 1020217035293 A KR1020217035293 A KR 1020217035293A KR 20217035293 A KR20217035293 A KR 20217035293A KR 102497153 B1 KR102497153 B1 KR 102497153B1
Authority
KR
South Korea
Prior art keywords
signal
image signal
encoded
transient image
parameters
Prior art date
Application number
KR1020217035293A
Other languages
English (en)
Other versions
KR20210134992A (ko
Inventor
루카 로사토
귀도 메아르디
Original Assignee
브이-노바 인터내셔널 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 브이-노바 인터내셔널 리미티드 filed Critical 브이-노바 인터내셔널 리미티드
Publication of KR20210134992A publication Critical patent/KR20210134992A/ko
Application granted granted Critical
Publication of KR102497153B1 publication Critical patent/KR102497153B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/37—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability with arrangements for assigning different transmission priorities to video input data or to video coded data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression

Abstract

인코딩된 데이터의 적어도 2개의 구별되는 세트들을 포함하는 데이터 스트림을 수신하기 위한 방법 및 신호 프로세서는 그 중 적어도 하나의 세트가 신호의 트랜션트/확률적 컴포넌트들에 관련된다. 인코딩된 데이터의 구별되는 세트들에 적어도 부분적으로 기초하여, 신호 프로세서는 인코딩된 데이터의 각 세트에 대한 신호의 대응하는 렌디션을 디코딩하며 그리고 복원한다. 신호의 렌디션들의 구별되는 세트들은 그 후에 복원된 신호의 단일 렌디션으로 결합된다.

Description

안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩{DISTINCT ENCODING AND DECODING OF STABLE INFORMATION AND TRANSIENT/STOCHASTIC INFORMATION}
본원의 실시예들은 신호 프로세싱에 관한 것으로, 더 구체적으로 다차원 신호들의 인코딩 및 디코딩에 관한 것이다.
디지털화된 신호는 (비-제한 예들로서 2D 이미지, 3D 체적 이미지 또는 심지어 3차원들보다 많이 피처링하는 엘리먼트들의 평면일 수 있는) 동일한 하부 정보의 여러 후속적인 샘플들을 피처링하여, 시간 차원과 같은 차원들 중 하나에 대해, 여러 후속하는 샘플들에 걸쳐 일부 정도의 신호 안정성이 존재하는 경우에 다차원 신호(예를 들어, 비-제한 예들로서 후속하는 2D 이미지들의 시퀀스를 나타내는 3D 신호, 또는 3D/체적 이미지들의 시퀀스를 나타내는 4D 신호 등)를 생성하는 것이 종종 발생한다. 비-제한 실생활 예들은 컴퓨터 토모그래피(Computer Tomography) 스캔에서의 후속하는 슬라이스들(slices), MRI 스캔에서의 후속하는 체적 이미지들, 동화상들(motion pictures)에서의 후속하는 프레임들 등일 것이다.
실생활 센서들 및 전송 채널들의 본질로 인해, 유사하거나 심지어 동일한 하부 정보의 서로 다른 샘플들이 서로 다른 특성들을 피처링하는 경향이 크다. 예를 들어, 특정 샘플은 다른 샘플들에 존재하지 않는 모션 블러(motion blur), 또는 샘플링 시에 약간 다른 방사선 강도들 또는 광 조건들, 또는 센서에서의 열적 잡음들, 또는 채널에서의 전송 에러들, 또는 다른 타입들의 잡음들 등으로 인해 이전 및/또는 후속하는 샘플들보다는 동일한 하부 정보의 약간 다른 값들을 피처링할 수 있다. 최종 결과는 바람직한 것보다 더 높은 신호 엘리먼트들의 통계적 가변성이다. 이것은 신호의 "실제" 및 필요한 상세들로부터 구별하기 힘들고, 그리고 추가적인 신호 프로세싱(예를 들어, 모션 추정, 컨텐츠 식별, 인코딩/디코딩 등)을 난해하게 할 수 있는 대량의 정보(예를 들어, 불필요한 강도/컬러 변화들, 잘못된 컬러의 평면 엘리먼트들 등)를 발생시킨다. 추가로, 그와 같은 변화들은 하나의 엘리먼트로부터 다음으로의 비교적 안정한 정보의 미묘한 변화들을 적절하게 나타낼 가능성을 제한하기 때문에, 비교적 많은 양자화 단계들로 양자화의 이용을 막는다.
여러 기존의 신호 프로세싱 방법들은 신호를 인코딩/디코딩하기 전에 트랜션트(transient)/확률적 정보("트랜션트 층 신호")로부터 안정성/관련 정보("코어 신호")를 분리하는 단계를 포함한다. 안정성 정보는 대개 상세되며 전형적으로 이웃하는 샘플들로부터 적어도 부분적으로 예측될 수 있다. 반대로, 트랜션트 정보는 전형적으로 이웃하는 샘플들의 트랜션트 정보로부터 예측불가능하다.
여러 기존의 종래 방법들은 신호의 트랜션트 층 컴포넌트들을 필터링/감소/톤 다운하며, 그리고 무엇보다도, 트랜션트 정보의 정보 엔트로피(entropy)의 양이 안정성 정보의 양보다 더 많은 경향이 있기 때문에 데이터 압축의 효율성을 개선시키는 것을 목적으로 한다. 그 방법들에서의 문제점은 실제 신호들이 특정량의 트랜션트 엘리먼트들을 피처링하기 때문에, 일부 상황들에서 제한된 잡음 및/또는 제한된 트랜션트 컴포넌트들을 갖는 디코딩된 신호가 원본에 대한 제한된 충실성(fidelity)을 갖는 신호로서 사용자들에 의해 인지되는 것이다. 다시 말해, 특정 정도의 트랜션트/확률적 엘리먼트들이 복원된(reconstructed) 신호에서 바람직하다.
종래의 방법들의 다른 특성은 전체적으로 필터링 아웃되지 않을 때, 트랜션트 층 엘리먼트들이 동일한 신호 인코딩 방법들로, 코어 신호 컴포넌트들과 함께 인코딩되며, 따라서 필요한 것보다 더 많은 상세들을 인코딩하는 것이다.
본원의 실시예들은 종래의 시스템들 및 방법들에서 벗어나서, 신호("코어 신호")의 안정성 정보 및 그의 트랜션트/확률적 컴포넌트들("트랜션트 층 신호") 둘 다를 인코딩하며 그리고 디코딩하기 위해 새롭고 독특한 방법들을 제공한다.
본원에 설명되는 혁신적이고 독특한 방법들은 (코어 신호 및 트랜션트 층 신호와 같은) 2개의 서로 다른 세트들의 정보로의 신호의 분리 및 그 후에 독립적으로 2개의 세트들의 정보를 인코딩하며 그리고 디코딩하는 것을 허용한다. 이러한 방식으로, 매우 다른 인코딩/디코딩 방식들이 원래 신호에 대해 엄격하게 고수하는 복원 방식을 요구하는 코어 신호에, 그리고 단지 동일한 확률적 특성들을 갖지만, 원래 신호에 포함되는 트랜션트 층와 동일한 필요는 없는 복원 방식을 전형적으로 요구하는 트랜션트 층 신호에 적용될 수 있다.
추가로, 네트워크 혼잡의 경우에, 본원에 설명되는 실시예들은 코어 신호에 대해 그리고 트랜션트 층 신호에 대해 필요한 비트레이트들(bitrates)을 독립적으로 변조함으로써 신호의 렌디션(rendition)을 전송하기 위해 요구되는 비트레이트들의 감소를 허용한다. 예를 들어, 코어 신호를 전송하기 위해, 그리고 따라서 신호의 인코딩이 트랜션트 층 신호로부터 코어 신호 컴포넌트를 구별하는 것과 관련하지 않는 방법들에 비교하여 더 평활한 품질 저하를 허용하기 위해 더 높은 우선순위가 제공될 수 있다.
본원의 일 실시예는 신호의 통계적 특성에 대응하는 수신된 파라미터들에 적어도 부분적으로 기초하여 복원되는 정보와 결합함으로써 신호의 제 1 디코딩된 렌디션을 조정하며, 따라서 상기 디코딩된 렌디션의 인지된 품질을 증가시키기 위한 방법을 포함한다.
더 구체적으로, 비-제한 예시적 실시예에서, 디코더로서 구성되는 신호 프로세서는 복원 데이터의 2개의 세트들을 수신한다. 복원 데이터의 제 1 세트는 제 1 디코딩 방법에 따라 디코딩되어 신호의 제 1 렌디션("코어 신호 층")을 복원한다. 복원 데이터의 제 2 세트는 (제 1 디코딩 방법과 다른) 제 2 디코딩 방법에 따라 디코딩되어 신호의 제 2 렌디션("트랜션트 층")을 복원한다. 디코더는 그 후에 2개의 렌디션들을 결합하여, 신호의 최종 렌디션을 획득한다.
일부 비-제한 실시예들에서, 복원 데이터의 상기 제 2 세트는 신호의 통계적 특성들에 대응하는 적어도 하나의 파라미터를 포함한다. 다른 비-제한 실시예들에서, 신호의 상기 제 2 렌디션은 또한 신호의 상기 제 1 렌디션을 디코딩하기 위해 이용되는 양자화 파라미터들에 적어도 부분적으로 기초하여 복원되어, 디더링(dithering)을 통해 효율적으로 양자화 에러들을 랜덤화한다.
다른 비-제한 실시예들에서, 디코더는 인코더 측 및 디코더 측 둘 다에 알려지는 정보를 레버리징(leveraging)하면서(즉, 인코더가 디코더 측에서의 신호의 제 2 렌디션의 복원의 결과들을 정밀하게 시뮬레이팅하게 허용하면서), 숫자들의 랜덤 발생에 따라 값들의 발생을 시뮬레이팅하는 방법에 따라 신호의 상기 제 2 렌디션을 복원한다. 추가적인 비-제한 실시예에서, 디코더는 숫자들의 하나 또는 그 초과의 기준 테이블들에 기초하여 숫자들의 랜덤 발생을 시뮬레이팅하여, 인코딩 및 디코딩 측 둘 다에서 이용가능한 파라미터들에 따라 테이블에서의 시작 포지션(position)을 선택한다.
다른 비-제한 실시예들에서, 디코더는 랜덤 숫자들의 발생 또는 외견상으로 랜덤 숫자들을 위해 이용되어야 하는 기준 테이블에 대응하는 파라미터뿐 아니라, 그와 같은 숫자들 상에 수행하기 위한 변경들에 대응하는 하나 또는 그 초과의 파라미터들(예를 들어, 스케일링 파라미터에 따른 강도의 변화, 그에 의해 정해진 통계적 분포 및 정해진 표준 편차로 랜덤 숫자 발생을 시뮬레이팅함)을 수신한다.
다른 비-제한 실시예들에서, 복원 데이터의 제 2 세트 내에서 디코더는 신호의 서로 다른 부분들에 대응하는 서로 다른 파라미터들을 수신하며, 신호의 일부분에 기초한 서로 다른 동작들 및 서로 다른 기준 테이블들에 따라 신호의 제 2 렌디션을 대응적으로 복원한다. 비-제한 실시예에서, 이것은 (신호의 각 정해진 부분에 대한 파라미터 값을 표시하는) 파라미터들의 보조 맵을 수신함으로써, 그리고 그 후에―각 부분에 대해―대응하는 파라미터에 적어도 부분적으로 기초하여 신호의 제 2 렌디션을 복원함으로써 달성된다.
이들 및 다른 실시예 변화들은 이하에서 더 상세하게 논의된다.
상기에 언급된 바와 같이, 본원의 실시예들은 소프트웨어 또는 하드웨어로, 또는 둘 다의 결합으로 구현될 수 있으며, 그리고 본원에 개시되는 방법들 및/또는 동작들 중 임의의 것 또는 전부를 실행하고 및/또는 지원하기 위해 하나 또는 그 초과의 컴퓨팅 디바이스들, 인코더 디바이스들, 디코더 디바이스들, 프로세서 디바이스들, 라우터들, 네트워크, 워크스테이션들, 휴대용 또는 랩톱 컴퓨터들, 셋-톱 박스들 등의 구성을 포함할 수 있다는 것이 주목된다. 다시 말해, 하나 또는 그 초과의 컴퓨터화된 디바이스들 또는 프로세서들이 서로 다른 실시예들을 구현하기 위해 본원에 설명된 바와 같이 동작하도록 구성되고 및/또는 프로그램될 수 있다.
상기에 논의된 바와 같은 기술들에 더하여, 본원의 또 다른 실시예들은 상기에 요약되며 이하에 상세하게 개시되는 단계들 및 동작들을 수행하기 위한 소프트웨어 프로그램들을 포함한다. 하나의 그와 같은 실시예는 프로세서 및 대응하는 메모리 및/또는 프로그램들을 갖는 컴퓨터화된 디바이스에서 수행될 때, 프로세서로 하여금 본원에 개시되는 동작들 중 임의의 것을 수행하게 하도록, 그 위에 인코딩되는 컴퓨터 프로그램 로직, 명령들 등을 포함하는 비-일시적 컴퓨터 판독가능한 매체를 포함한다. 그와 같은 배치들은 소프트웨어, 및/또는 코드의 형태들로, 및/또는 광학 매체(예를 들어, CD-ROM, 또는 DVD-ROM), 플로피 또는 하드 디스크 또는 하나 또는 그 초과의 ROM 또는 RAM 또는 PROM 칩들에서 또는 응용 주문형 집적 회로(ASIC)에서의 펌웨어 또는 마이크로코드와 같은 컴퓨터 판독가능한 명령들을 저장할 수 있는 임의의 다른 매체와 같은 컴퓨터 판독가능한 매체 상에 배치되거나 인코딩되는 다른 데이터(예를 들어, 데이터 구조들)로서 제공될 수 있다. 소프트웨어 또는 펌웨어 또는 임의의 다른 그와 같은 구성들은 컴퓨터화된 디바이스에 설치될 수 있으며 상기 컴퓨터화된 디바이스로 하여금 본원에 설명된 바와 같은 기술들 및/또는 동작들을 수행하게 한다.
따라서, 본 개시물의 하나의 특정 실시예는 신호 프로세싱 동작들을 지원하기 위해 그 후에 저장되는 명령들을 갖는 컴퓨터-판독가능한 하드웨어 스토리지 매체를 포함하는 컴퓨터 프로그램 물건에 관한 것이다. 단계들의 시퀀스는 명확성을 위해 추가되었다. 이들 단계들은 임의의 적합한 순서로 수행될 수 있음이 주목될 것이다.
본 개시물의 다른 실시예들은 상기에 요약되고 이하에 상세하게 개시되는 방법 실시예 단계들 및 동작들 중 임의의 것을 수행하기 위해 소프트웨어 프로그램들, 펌웨어, 및/또는 각각의 하드웨어를 포함한다.
또한, 본원에 논의된 바와 같은 시스템, 방법, 장치, 컴퓨터 판독가능한 스토리지 매체 상의 명령들 등이 소프트웨어 프로그램으로서, 소프트웨어, 펌웨어 및/또는 하드웨어의 하이브리드로서, 또는 프로세서 내에, 또는 운영 시스템 내에 또는 소프트웨어 애플리케이션 내에 등과 같이 하드웨어 단독으로서 엄격하게 구체화될 수 있음이 이해될 것이다.
상기에 논의된 바와 같이, 본원의 기술들은 신호들을 인코딩, 디코딩 및 프로세싱하는 소프트웨어, 펌웨어, 및/또는 하드웨어 애플리케이션들에서의 이용을 위해 적합하다. 그러나, 본원의 실시예들은 그와 같은 애플리케이션들에서의 이용에 제한되지 않으며 본원에 논의된 기술들은 다른 애플리케이션들을 위해 또한 적합함이 주목되어야 한다. 추가로, 본원의 서로 다른 피처들, 기술들, 구성들 등의 각각이 본 개시물의 서로 다른 곳들에서 논의되더라도, 그 개념들의 각각은 서로 독립적으로 또는 서로 결합하여 실행될 수 있도록 의도됨을 주목한다. 따라서, 본원에 설명된 바와 같은 하나 또는 그 초과의 본 발명들, 실시예들 등은 많은 서로 다른 방식들로 구체화될 수 있으며 그리고 생각될 수 있다.
본 발명의 전술한 바 및 다른 목적들, 피처들 및 장점들은 유사 참조 문자들이 서로 다른 각도들 전반으로 동일한 부분들을 지칭하는 수반하는 도면들에 예시된 바와 같이, 바람직한 실시예들의 후속하는 더 특정한 설명으로부터 명백해질 것이다.
도 1a는 본원의 발명의 실시예들에 따른 복원 데이터를 제공하는 인코더를 예시하는 예시도이다.
도 1b는 도 1a에 예시되는 인코더에 의해 수행되는 인코딩 방법의 흐름도이다.
도 2는 본원에 설명된 실시예들에 따른 디코더로의 데이터 스트림의 발생 및 전송을 예시하는 예시도이다.
도 3a는 본원에 설명되는 실시예들에 따른 인코딩된 코어 신호 데이터 및 인코딩된 트랜션트 층 신호 데이터 둘 다를 포함하는 데이터 스트림의 디코딩을 예시하는 예시도이다.
도 3b는 도 3a에 예시되는 디코더에 의해 수행되는 디코딩 방법의 흐름도이다.
도 4는 인코딩 및 디코딩 측 둘 다에서 알려지는 정보에 따른 트랜션트 층의 디코딩 및 복원의 흐름도이다.
도 5는 본원에 설명되는 실시예들에 따른, 컴퓨터 코드들, 명령들, 애플리케이션들, 소프트웨어 및/또는 펌웨어 등을 실행하기 위한 컴퓨터 아키텍처의 경우를 예시하는 도면이다.
도 6은 본원의 실시예들에 따른 신호의 이미지에서의 잡음의 서로 다른 분포들을 예시하는 예시도이다.
도 7은 본원의 실시예들에 따른 시간을 통한 디스플레이 스크린의 서로 다른 구역들에서의 잡음의 분포에서의 변경들을 예시하는 예시도이다.
본원에 예시되는 방법들은 제한없이, 사운드 신호들, 멀티채널 사운드 신호들, 픽처들(pictures), 2차원 이미지들, 비디오 신호들, 멀티-뷰(multi-view) 비디오 신호들, 3D 비디오 신호들, 체적 신호들, 체적 비디오 신호들, 의료 이미징 신호들, 4차원 이상을 갖는 신호들 등을 포함하는 임의의 타입의 다차원 신호들을 위해 적합하다.
간략화를 위해, 예시된 실시예들이 대개 2D 이미지들(인터레이스된(interlaced) 비디오 신호들의 경우에 공통으로 칭해지는 "프레임들", 또는 "필드들")의 시퀀스로 이루어지는 비디오 시퀀스의 사용 경우를 채택하는 설명을 따라, 각 엘리먼트(그와 같은 비-제한 예시 경우에 전형적으로 "픽셀"로서 또는 "평면 엘리먼트" 또는 "pel"로 지칭됨)는 적합한 컬러 공간에서의 컬러 세팅들의 세트(예를 들어, YUV, RGB, HSV 등)에 의해 특성화된다. 그러나, 동일한 개념들이 시간-기반 신호들에 제한되지 않지만, 적어도 1차원 T가 안정성 가설을 위해 적합한 임의의 다른 타입들의 다차원 신호에 적용가능하다. 본질적으로, 신호는 차원 T를 따른 특정 정도의 예측가능성을 갖는 것으로 추정된다. 안정성 가설을 수행하기 위해 적합하지 않은 차원들에 대해, 정보가 매우 로컬하며 및/또는 그들 차원들을 따라 신호의 다른 부분들과 비-상관되더라도, 상세한 정보를 소실하는 것은 바람직하지 않은 것으로 추정된다(예를 들어, 비-제한 예로서, 단지 하나의 프레임에 대해 픽쳐에서 머무르는 백색 배경 상의 랜덤 도트는 제한된 중요도를 갖는 통계적 요동으로 고려되는 한편, 20개의 연속적인 프레임들에 대한 픽쳐에서 머무르는 유사한 랜덤 도트는 관련 정보인 것으로 고려되며, 그리고 오로지 그 이웃하는 픽셀들이 모두 백색이기 때문에 통계적 요동으로서 고려되어서는 안 된다). 당업자는 동일한 방법들을 또한 다른 타입들의 신호들에 적용하는 방법을 용이하게 이해할 수 있다.
본원에 예시되는 방법들 및 실시예들은 서로 함께 및/또는 다른 방법들과 함께 이용될 수 있다. 본원에 예시되는 바람직한 실시예들의 다수는 압축, 즉 최소량의 비트들로 신호의 적합한 렌디션을 인코딩하는 것을 달성할 목표를 갖는 기술들 및 알고리즘들을 설명한다. 이것은 또한 비-제한 예이다: 다른 비-제한 실시예들은 견고하고 효율적인 필터링, 신호 품질 강화, 이미지 잡음제거(denosing) 등과 같은 다른 목적들을 달성한다. 도 1 및 2는 전송되는 다차원 신호의 인코딩을 예시한다. 이 신호는 차원들 중 적어도 하나에 대해, 안정성 가설을 지원하며, 따라서―그와 같은 차원을 따라 그리고 정해진 수의 인접하는 엘리먼트들에 대해―신호의 더 관련되는 정보 컴포넌트를 포함하는 안정성 정보("코어 신호")는 잡음 및 다른 고도로 휘발성인 정보("트랜션트 층 신호")를 포함하는 트랜션트 정보로부터 분리될 수 있다.
인코더 디바이스와 같은 인코더(110)에서, 신호 프로세서 디바이스는 단계(110B) 동안 신호(100)를 수신하도록 그리고 단계(120B)에서 잡음제거기(120)로 프로세싱하도록 구성된다. 그 명칭이 제시하듯이, 잡음제거기는 신호(100)로부터의 잡음 또는 트랜션트들을 제거하며 코어 신호(130-1)를 출력한다. 잡음제거기(120)는 임의의 적합한 잡음제거 방법에 따라 구현될 수 있다.
단계(125B)에서, 코어 신호(130-1)는 감산기(125)에 의해 신호(100)로부터 감산되며, (예를 들어, 잡음, 트랜션트들 등을 포함하는) 트랜션트 층 신호(130-2)의 출력을 발생시킨다. 상술한 바와 같이, 코어 신호(130-1) 및 트랜션트 층 신호(130-2)는 서로 다른 특성들 및 속성들을 피처링한다. 설명된 예에서, 일 실시예에서, 트랜션트 층 신호(130-2)는 백색 잡음처럼 행동하는데, 즉, T=t에서의 정해진 경우에 트랜션트 층 신호(130-2)의 각 엘리먼트는 제로의 예상된 값을 갖는 확률적 특성들을 피처링하며 그리고 차원 T에 걸쳐 신호의 이전 또는 후속적인 샘플들에서의 임의의 대응하는 값들과 상관되지 않는다.
단계(140B)에서, 코어 신호(130-1)는 코어 신호 인코더(140)에 의해 인코딩되는 한편, 단계(150B)에서, 트랜션트 층 신호(130-2)는 트랜션트 층 신호 인코더(150)에 의해 인코딩된다. 인코더들(140 및 150)은 집합적으로 "인코딩된 복원 데이터"로 칭해지는, 인코딩된 코어 신호 데이터(160) 및 인코딩된 트랜션트 층 신호 데이터(170)를 발생시킨다.
설명된 예에서, 구별되는 인코딩 방법들은 필수적인 정보를 포함하기 때문에 높은 충실도로 복원되어야 하는 코어 신호(130-1), 및 일반적으로 높은 충실도로 복원될 필요는 없지만, 원본과 통계적 유사성만을 갖는 트랜션트 층 신호(130-2)를 인코딩하기 위해 이용될 수 있다. 단계들(160B 및 170B)에서, 인코딩된 복원 데이터의 세트들이 리포지터리들(repositories)(160 및 170)에 저장된다.
설명되는 비-제한 실시예에서, 인코더들(140 및 150)은 신호 해상도 및 원래 신호에 대한 고수 둘 다의 관점에서 서로 다른 품질의 레벨들에서 서로 다른 신호들의 복원을 허용하는 인코딩된 복원 데이터(예를 들어, 코어 신호(130-1)를 위한 복원 데이터(160-1), ..., 복원 데이터(160-N); 및 트랜션트 신호(130-2)를 위한 복원 데이터(170-1), ..., 복원 데이터(170-N))를 생성한다. 특정 비-제한 예시적 실시예에서, 코어 신호 및 트랜션트 층 신호가 별개로 인코딩됨에 따라, 그들 신호들은 품질의 레벨들의 서로 다른 계층들(hierarchies)로 인코딩될 수 있다. 도 1에 예시된 바와 같이, 코어 신호는 N개의 품질의 레벨들로 인코딩되는 한편 트랜션트 층 신호는 M개의 품질의 레벨들로 인코딩된다.
다른 비-제한 실시예에서, 트랜션트 층 신호 인코더(150)는 종래의 신호 인코딩 기술들(즉, 트랜션트 층의 정확한 복원을 위해 신호 ""를 인코딩), 및 트랜션트 층의 키(key) 통계적 특성들(예를 들어, 스펙트럼 분포들 등)을 추출하고 인코딩하는데 관련하는 인코딩 기술들 둘 다로 트랜션트 층 신호(130-2)를 인코딩하여, 원래의 트랜션트 층에서와 반드시 동일할 필요는 없으면서, 유사한 특성들을 갖는 트랜션트 층의 복원을 여전히 허용하는 제한된 양의 인코딩된 데이터를 디코더에 전송할 수 있다. 다시 말해, 수신된 신호(100)에서의 트랜션트 정보가 식별될 수 있으며 특성화될 수 있다. 신호(100)의 렌디션을 재생성할 때, 신호에서의 정확한, 원래의 잡음(예를 들어, 캡처하는데 많은 대역폭을 요구하는 트랜션트 신호(130-2))을 이용할 필요는 없는데 그 이유는 잡음이 영향을 제공하는 범위에 관련되지 않으며 중요하지 않기 때문이다. 트랜션트 층 신호 데이터(170)에 저장되는 잡음 신호 정보는 서로 다른 품질의 레벨들에서 인코딩되는 신호(100)에서의 원래 잡음을 나타낼 수 있고 및/또는 서로 다른 품질의 레벨들에서 인코딩되는 원래 잡음을 위한 치환을 나타낼 수 있다.
일 실시예에서, 인코더(110)는 수신된 신호(100)에서 존재하는 잡음량을 결정하기 위해 수신된 신호(100)에서의 원래 잡음 신호 컴포넌트를 분석한다. 인코더(110)는 원래 잡음 신호 컴포넌트 대신의 이용을 위해 치환 잡음 신호 컴포넌트를 발생시킨다. 치환 잡음 신호 컴포넌트는 수신된 신호(100)에 존재하는 잡음량에서와 실질적으로 유사한 잡음량을 가질 수 있다.
본원의 실시예들에 따르면, 대역폭의 이용가능성, 또는 전송된 렌디션의 타겟 충실도와 같은 파라미터들에 따라, 스트리밍 서버로서 구성되는 신호 프로세서는 (더 많은 양의 전송된 정보를 희생하여) 정밀한 충실도로 또는 단지 (즉, 원래 신호로의 복원의 고수를 감소시키지만, 또한 전송되는 정보량을 감소시키는) 통계적 충실도로 트랜션트 층을 전송할지 여부를 선택할 수 있다. 따라서, 대역폭이 이용가능한 경우에, 본원의 실시예들은 원상복구를 위한 원래 잡음을 포함하는 원래 신호를 전송하는 단계를 포함할 수 있다. 정확한 잡음이 원상복구에 중요하지 않더라도, 원래 잡음을 포함하는 신호를 전송하는 것은 실질적 대역폭을 요구할 수 있다. 타겟 수신자에게 데이터를 전송하기 위해 더 적은 대역폭이 이용가능할 때, (즉, 원래 잡음의 통계적 특성들을 갖는) 치환 잡음 정보는 실질적 추가 대역폭을 요구하는 원래 잡음을 전송하는 대신에 타겟 수신자에게 전송될 수 있다.
하나의 비-제한 예시적 실시예에서, 신호에서 식별되는 잡음의 통계적 특성들이 식별될 수 있으며 타이어(tier)-기반된 계층적 인코딩된 방법에 따른 치환 잡음으로서 인코딩될 수 있다.
다른 실시예에 따르면, 인코더(110)는 신호를 수신할 수 있다. 인코더(110)는 (신호(130-2)와 같은) 잡음 신호 컴포넌트 및 (코어 신호(130-1)와 같은) 비-잡음 신호 컴포넌트를 포함하는 다수의 컴포넌트들로 신호(100)를 파싱하도록 구성될 수 있다. 인코더는 비-잡음 신호 컴포넌트를 인코딩하는 것과 독립적으로 잡음 신호 컴포넌트를 인코딩하며 그리고 하나 또는 그 초과의 레포지토리들에 인코딩된 비-잡음 신호 컴포넌트 및 인코딩된 잡음 신호 컴포넌트를 저장한다.
인코더는 또한 다수의 원상복구 품질의 레벨들에서 원래의 잡음 신호 컴포넌트를 인코딩하면서, 다수의 원상복구 품질의 레벨들에서 신호의 원래 비-잡음 신호 컴포넌트를 인코딩할 수 있다.
도 2에서 나중에 논의되는 바와 같이, 신호(100)에 의해 표현된 바와 같은 컨텐츠를 위한 요청을 수신하는데 응답하여, 각각의 서버 자원은 원격 디코더에 각각의 통신 링크를 통해 변화하는 품질의 레벨들에서 인코딩된 원래 비-잡음 신호 컴포넌트 및 인코딩된 원래 잡음 신호 컴포넌트를 적응적으로 전송한다.
본원의 일 실시예는 통신 링크에서 이용가능한 대역폭에서의 감소를 검출하는 단계를 포함한다. 그와 같은 조건에 응답하여, 서버 자원은 특정의 품질의 레벨에서 인코딩된 비-잡음 신호 컴포넌트의 전송을 유지하도록 그리고 이용가능한 대역폭에서의 감소를 수용하기 위해 통신 링크를 통해 디코더 디바이스에 원래 잡음 신호 컴포넌트가 전송되는 품질의 레벨을 감소시키도록 구성될 수 있다. 다시 말해, 본원의 실시예들은 디코더에서 양호한 품질 원상복구를 제공하기 위해 (신호(100)와 관련되는) 적절한 인코딩된 신호 데이터를 전송하는 단계를 포함할 수 있다. 본원의 실시예들은 원래 잡음의 품질의 레벨을 감소시키는 단계 및/또는 혼잡을 검출하는데 응답하여 타겟 디바이스에 치환 잡음을 제공하는 단계를 포함할 수 있다. 따라서, (컨텐츠의 플레이 백 버전에 약간의 영향을 가질 수 있는) 잡음의 품질을 감소시키는 것으로부터 절감된 대역폭은 신호(100)의 압축된 비-잡음 부분과 같은 인코딩된 것을 송신하기 위해 이용될 수 있다.
도 1을 다시 참조하여, 또 다른 실시예들에 따르면, 인코더는 신호(100)를 수신하도록 그리고 (신호(130-2)와 같은) 원래 잡음 신호 컴포넌트 및 (코어 신호(130-1)와 같은) 원래 비-잡음 신호 컴포넌트를 포함하는 다수의 컴포넌트들로 신호(100)를 파싱하도록 구성될 수 있다. 인코더(110)는 원래 잡음 신호 컴포넌트를 치환 잡음 신호 컴포넌트로 변환한다. 치환 잡음 신호 컴포넌트는 수신된 신호에서의 잡음을 나타내지만 동일하지는 않다. 인코더(110)는 원래 잡음 신호 컴포넌트에 대한 교체로서 치환 잡음 신호 컴포넌트를 저장하는 것과 같이 제공한다. 일 실시예에서, 인코더(110)는 서로 다른 품질의 레벨들에서 치환 잡음 신호 컴포넌트를 생성한다.
일 실시예에서, 인코더(110)는 원래 잡음 신호 컴포넌트에서의 잡음의 분포로서 실질적으로 유사한 잡음 분포를 갖기 위해 치환 잡음 신호 컴포넌트를 발생시킨다. 또 다른 실시예들에서, 인코더(110)는 원래 잡음 신호 컴포넌트보다 실질적으로 더 적은 데이터의 비트들이도록 신호(100)와 관련되는 치환 잡음 신호 컴포넌트를 생성한다.
인코더(110)는 원래 잡음 신호 컴포넌트와 인지가능하게 동등하게 치환 잡음 신호 컴포넌트를 발생시키도록 구성될 수 있다. 즉, 치환 잡음 컴포넌트 및 비-잡음 신호 컴포넌트의 원상복구가 비-잡음 신호 컴포넌트 및 원래 잡음 신호 컴포넌트의 원상복구와 인지가능하게 동일하거나 실질적으로 유사할 수 있다. 그러나, 치환 잡음 컴포넌트는 원래 신호(100)에서의 원래 잡음 신호 컴포넌트를 캡처하기 위해 필요한 실질적으로 더 적은 비트들에서 캡처될 수 있다.
본원의 추가적인 실시예들은: 치환 잡음 신호 컴포넌트를 인코딩하는 단계; 레포지토리에 인코딩된 치환 잡음 신호 컴포넌트를 저장하는 단계; 원래의 비-잡음 신호 컴포넌트를 압축하는 단계; 레포지토리에서의 수신된 신호의 압축된 원래 비-잡음 신호 컴포넌트를 저장하는 단계; 및 원상복구를 위한 인코딩된 치환 잡음 신호 컴포넌트 및 압축된 원래 비-잡음 신호를 분배하는 단계를 포함한다.
도 2는 본 발명에 따라 인코딩된 신호의 전송을 예시한다. 레포지토리들(160 및 170)이 액세스되고 데이터가 추출되며 그리고 예를 들어, 신호 프로세서를 포함하는 스트리밍 서버(250)에 의해 프로세싱된다. 스트리밍 서버(250)는 데이터 스트림(260)을 어셈블링하며 그리고 (원격 위치에서 네트워크를 통해 위치되는 디코더 디바이스와 같은) 원격 디코더(280)에 전송하며, 원격 디코더(280)는 그 후에 복원된 신호(290)의 렌디션을 복원하며 그리고 그것을 원상복구를 위해 원상복구 디바이스(295)에 송신한다.
비-제한 예로서, 일 실시예에서, 스트리밍 서버(250)는 인코딩된 코어 신호 데이터 및 인코딩된 트랜션트 층 신호 데이터를 하나의 신호 데이터 스트림으로 결합함으로써 데이터 스트림(260)을 어셈블링한다.
본원에 설명되는 비-제한 예시적인 실시예에서, 스트리밍 서버(250)는 또한 디코더(280)로의 전송 채널의 데이터 트래픽 조건들을 나타내는 정보(255)를 수신한다. 원격 위치에서 디코더에 전송되는 디지털 데이터 스트림의 운반을 지원하는 통신 링크의 혼잡과 같은 트래픽 조건들에 기초하여, 스트리밍 서버(250)는 데이터 스트림(260)을 어셈블링하기 위해 다른 데이터를 선택하도록 구성된다.
더 정밀하게, 본 실시예에서, 스트리밍 서버(250)는 레포지토리(160)에서의 인코딩된 코어 신호 데이터에 그리고 레포지토리(170)에서의 인코딩된 트랜션트 층 신호 데이터에 서로 다른 우선순위들을 할당하도록 구성될 수 있다. 이것은 스트리밍 서버(250)가 예를 들어, 코어 신호의 비교적 더 높은 품질의 레벨을 트랜션트 층 신호의 비교적 더 낮은 품질의 레벨과 결합하게 허용한다. 특정 경우들에서, 전형적으로 원래 신호(100)의 가장 중요한 부분이기 때문에 높은 품질의 레벨에서 코어 신호를 나타내는 인코딩된 데이터를 전송하는 것이 바람직하다. 언급된 바와 같이, 혼잡을 검출하는데 응답하여, 트랜션트 층 신호 또는 동일한 것에 대한 치환은 더 낮은 품질의 레벨에서 전송될 수 있다.
타이어-기반된 또는 멀티-스케일 방법에 따라 인코딩되는 복원 데이터의 경우에, 인코딩된 코어 신호 데이터(160-1 내지 160-N)는 단지 인코딩된 트랜션트 층 데이터(170-1)와 함께 전송되거나, 종래의 인코딩 방법에 따라 인코딩되는 복원 데이터의 경우에, 인코딩되는 코어 신호 데이터(160-N)는 대신에 인코딩된 트랜션트 데이터와 함께 전송될 수 있다. 원래, 트랜션트 층의 품질의 레벨들로부터 다르게 코어 신호의 품질의 레벨들을 변조하는 것은 스트리밍 서버(250)가 데이터 스트림(260)의 크기/비트스트림을 감소시키도록 강제될 때 복원된 신호(290)의 전체 품질의 덜 인지가능한 품질저하를 허용한다. 신호의 품질저하는 더 진행할 수 있으며 더 평활한 시청 경험을 사용자에게 제공할 수 있다.
추가적인 실시예들에 따르면, 코어 신호(130-1)에 대한 높은 품질의 레벨을 전송하는데 지지하여 더 낮은 품질의 레벨에서 검출된 트랜션트 층 신호(130-2)를 송신하는 것은 혼잡 동안 더 양호한 시청 경험을 제공한다.
도 3a 및 3b는 인코딩된 코어 신호 데이터 및 인코딩된 트랜션트 층 신호 데이터 둘 다를 포함하는 데이터 스트림(260)의 디코딩을 예시한다.
비-제한 예에 의해, 데이터 스트림(260)은 코어 신호 정보 및 트랜션트 층 정보를 포함하는 데이터의 단일 스트림으로서 수신될 수 있다. 데이터 스트림(260)은 디코더(280)에 의해 단계(300B)에서 수신되며, 상기 디코더는 이전에 논의된 바와 같이 복원된 신호(290)를 생성한다.
설명된 예에서, 단계(310B)에서, 데이터 스트림(260)은 분리기(310)에 의해 2개의 서로 다른 데이터의 세트들로 분리된다: 즉, 인코딩된 코어 신호(310-1) 및 인코딩된 트랜션트 층 신호(310-2).
각 데이터의 세트(즉, 코어 신호(310-1) 및 트랜션트 층 신호(310-2))는 그 후에 그들 각각의 인코딩 방법들의 특정 요건들에 따라 독립적으로 디코딩된다. 도 3a 및 3b에 예시되는 특정 실시예에서, 단계(330B)에서 인코딩된 코어 신호(310-1)가 코어 신호 디코더(330)에 의해 디코딩되어, (잡음 없는 코어 정보와 같은) 신호(350-1)의 안정성 컴포넌트들의 렌디션을 생성한다. 단계(340B)에서, 인코딩된 트랜션트 층 신호(310-2)는 트랜션트 층 신호 디코더(340)에 의해 디코딩되어, 신호(350-2)의 다른 트랜션트 컴포넌트들 및 잡음 정보의 렌디션을 생성한다.
정보(350-2)의 렌디션은 트랜션트 층 복원기(360)에 송신되며, 단계(360B)에서 트랜션트 층 신호(350-3)의 렌디션을 생성한다. 렌디션들(350-1 및 350-3)은 복원된 신호(290)를 발생시키기 위해 단계(370B) 동안 결합기(370)에 의해 결합된다.
일 실시예에서, 렌디션들(350-1 및 350-3)은 서로 다른 해상도들을 가지며 그리고 결합은 동일한 해상도의 렌디션들을 획득하기 위해 렌디션들을 재샘플링하는 단계 및 엘리먼트 단위로 렌디션들을 합산하는 단계를 포함한다. 전형적으로, 더 낮은 해상도의 렌디션들은 모든 렌디션들이 동일한 해상도를 갖도록 업샘플링된다.
다른 실시예에서, 신호(350-2)의 다른 트랜션트 컴포넌트들 및 잡음 정보의 렌디션은 원래 트랜션트 층 신호(130-2)의 스펙트럼 분포 속성들을 표시하는 파라미터들을 포함할 수 있다. 이 경우에, 인코딩된 데이터는 트랜션트 층 신호(130-2)의 정확한 복원을 위한 정보를 포함하지 않지만, 트랜션트 층 신호(130-2)의 프록시의 복원을 위한 정보를 포함한다. 따라서, 트랜션트 층 복원기(360)는 원래 트랜션트 층 신호(130-2)의 속성들과 실질적으로 유사한 스펙트럼 분포 속성들을 갖는 트랜션트 층 신호(350-3)의 렌디션을 발생시킨다.
도 4는 복원 단계(360B)의 비-제한 실시예를 예시하며 트랜션트 층은 인코딩 및 디코딩 측 둘 다에서 알려지는 정보에 따라 복원된다.
단계(4.01)에서, 디코더는 트랜션트 층의 엘리먼트들의 값들을 발생시키기 위해 레버리징되어야 하는 기준 테이블에 대응하는 하나 또는 그 초과의 파라미터들을 수신한다. 대체적으로, 상기 기준 테이블은 (예를 들어, 비-제한 예로서, 라플라시안(Laplacian) 분포에 따라 분포되는 값들을 피처링하는) 트랜션트 층의 확률적 속성들에 대응하며, 상기 통계적 속성들에 따라 외견상으로 랜덤 숫자들을 발생시키도록 허용한다. 본 비-제한 실시예에서, 동일한 기준 테이블이 인코딩 및 디코딩 양쪽에서 이용가능하여, 인코더가 디코더에 의해 발생될 동일한 외견상으로 랜덤 숫자들을 정밀하게 발생시키게 허용하여, 따라서 트랜션트 층의 디코딩 프로세스를 정밀하게 시뮬레이팅한다.
단계(4.02)에서, 디코더는 상기 테이블에서의 시작 포지션, 즉 상기 테이블에 대응하는 통계적 속성들에 따라 외견상으로 랜덤 숫자들을 발생시키기 위해 시작하는 테이블에 포함되는 숫자들의 시퀀스에서의 포지션을 표시하는 파라미터를 수신한다. 본 비-제한 실시예에서, 디코더는 인코더가 시작 포지션을 디코더에 송신할 필요 없이, 인코딩 및 디코딩 둘 다에 알려지는 정보(예를 들어, 이미지의 특정 속성들)에 기초하여 시작 포지션을 계산한다.
단계(4.03)에서, 디코더는 기준 테이블에 의해 발생되는 숫자들에 대해 수행하기 위한 변경들에 대응하는 적어도 하나의 파라미터를 수신한다. 본 비-제한 실시예에서, 상기 파라미터들은 Y 컴포넌트(휘도)에 대한 스케일링 파라미터 및 U 및 V 컴포넌트들에 대한 스케일링 파라미터를 포함한다.
단계(4.04)에서, 디코더는 (상기 시작 위치로부터 시작하는) 상기 기준 테이블의 값들의 시퀀스에서 값들을 선택함으로써 그리고 상기 파라미터들에 따라 그 값들을 변경함으로써, 트랜션트 층의 엘리먼트들을 발생시킨다.
다른 비-제한 실시예들에서, 디코더는 신호의 서로 다른 부분들에 대한 서로 다른 파라미터들을 수신하며, 따라서 서로 다른 기준 테이블들을 선택함으로써 및/또는 트랜션트 층에서의 상기 정해진 엘리먼트의 위치에 따라 서로 다른 방식들로 기준 테이블들의 숫자들을 변경함으로써 트랜션트 층의 각 정해진 엘리먼트에 대한 값들을 발생시킨다. 그와 같은 비-제한 실시예의 일부에서, 디코더는 더 낮은 품질의 레벨에서 파라미터들의 보조 맵을 수신하고, 복원되어야 하는 트랜션트 층의 품질의 레벨로 업스케일하며(따라서 복원되어야 하는 트랜션트 층의 각 엘리먼트를 위한 파라미터들을 발생시킴), 그리고 그 후에 상기 정해진 엘리먼트의 대응하는 파라미터들에 따라 트랜션트 층의 각 정해진 엘리먼트의 값들을 발생시킨다.
다른 비-제한 실시예에서, 정해진 코어 신호에 대응하는 트랜션트 층을 발생시키기 위해, 디코더는 기준 테이블을 선택하며 그리고 상기 트랜션트 층에 대응하는 코어 신호를 디코딩하기 위해 이용되는 하나 또는 그 초과의 양자화 파라미터들에 적어도 부분적으로 기초하여 기준 테이블의 값들을 변경하기 위해 적합한 파라미터들을 발생시킨다.
다른 비-제한 실시예에서, 디코더는 동일한 코어 신호에 대응하는 복수의 트랜션트 층들을 발생시키며 그리고 그 후에 상기 코어 신호에 대응하는 단일 트랜션트 층을 복원하기 위해 그 층들을 결합한다.
도 5는 디코딩 및/또는 본원에 설명되는 실시예들에 따른 디코딩과 같은 신호 프로세싱을 구현하는 컴퓨터 시스템(800)의 예시적인 블록도이다.
구체적으로 달리 서술되지 않는 한, 다음의 논의로부터 명백한 바와 같이, 본 명세서 전반에 "프로세싱", "컴퓨팅", "계산하는", "결정하는" 등과 같은 용어들을 활용하는 논의들은 메모리들, 레지스터들 또는 다른 정보 스토리지 디바이스들 내의 물리적 전자 또는 자기 수량들로서 표현되는 데이터를 조작하거나 변환하는 컴퓨터 또는 유사한 전자 컴퓨팅 디바이스와 같은 컴퓨팅 플랫폼, 전송 디바이스들, 또는 컴퓨팅 플랫폼의 디스플레이 디바이스들의 동작들 또는 프로세스들을 지칭한다는 것이 인식된다.
본원에 설명되는 서로 다른 실시예들에 따르면, 컴퓨터 시스템(800)은 퍼스널 컴퓨터 시스템, 데스크톱 컴퓨터, 랩톱, 노트북, 넷북 컴퓨터, 메인프레임(mainframe) 컴퓨터 시스템, 핸드헬드 컴퓨터, 태블릿, 스마트폰, 워크스테이션, 네트워크 컴퓨터, 애플리케이션 서버, 스토리지 디바이스, 카메라, 캠코더, 셋탑 박스, 이동 디바이스, 비디오 게임 콘솔, 핸드헬드 비디오 게임 디바이스, 스위치, 모뎀, 라우터 또는 일반적으로 임의의 타입의 컴퓨팅 또는 전자 디바이스와 같은 가전 제품 디바이스를 포함하는(그러나 이들로 제한되지 않음) 다양한 타입들의 디바이스들 중 임의의 것일 수 있다.
도면에 도시된 바와 같이, 본 예의 컴퓨터 시스템(800)은 디지털 정보가 저장될 수 있으며 그리고 리트리브될 수 있는 컴퓨터 판독가능한 스토리지 매체(812)와 커플링하는 상호접속부(811)를 포함한다. 컴퓨터 시스템(800)은 프로세서(813), I/O 인터페이스(814) 및 통신들 인터페이스(817)를 더 포함할 수 있다.
I/O 인터페이스(814)는 레포지토리(180) 및 존재하는 경우에, 디스플레이 스크린 및 키보드, 및/또는 컴퓨터 마우스 등과 같은 주변 디바이스들(816)에 대한 접속성을 제공한다. 통신들 인터페이스(817)는 원격 소스들로부터 정보를 리트리브하고 다른 컴퓨터들, 스위치들, 클라이언트들, 서버들 등과 통신하기 위해 컴퓨터 시스템(800)이 네트워크(190)를 통해 통신하게 할 수 있다. I/O 인터페이스(814)는 또한 신호 프로세서(813)가 레포지토리(180)로부터 저장된 정보를 리트리브하거나 리트리브하도록 시도하게 할 수 있다.
컴퓨터 시스템(800) 또는 인코더(110) 또는 스트리밍 서버(250) 또는 디코더(280)는 또한 데이터 및/또는 로직 명령들을 저장하기 위한 컴퓨터 판독가능한 스토리지 매체(812)를 포함하기 위해 구체화될 수 있음을 주목한다.
상기 컴퓨터 판독가능한 스토리지 매체(812)는 메모리, 광학 스토리지, 하드 드라이브, 플로피 디스크 등과 같은 임의의 적합한 디바이스 및/또는 하드웨어일 수 있다. 컴퓨터 판독가능한 스토리지 매체는 또한 신호 프로세서들(110, 250 및/또는 280)과 관련되는 명령들을 저장하기 위한 비-일시적 스토리지 매체일 수 있다. 명령들은 본원에 논의된 바와 같은 동작들 중 임의의 것을 수행하기 위해 신호 프로세서(813)와 같은 각각의 자원에 의해 실행된다. 도시된 바와 같이, 컴퓨터 판독가능한 스토리지 매체(812)는 프로세싱(840-2) 동안 신호 프로세서(813)에 의해 실행되는 신호 프로세서 애플리케이션(840-1)으로 인코딩될 수 있다.
컴퓨터 시스템(800)은 그와 같은 명령들을 실행하며 그리고 본원에 논의된 바와 같은 동작들을 실행하기 위한 신호 프로세서(813)를 포함할 수 있다. 따라서, 실행될 때, 신호 프로세서 애플리케이션(840-1)과 관련되는 코드는 본원에 논의된 바와 같은 프로세싱 기능을 지원할 수 있다. 언급된 바와 같이, 신호 프로세서(813)는 인코딩 및/또는 디코딩을 지원하도록 구성될 수 있다. 비-제한 실시예에서, 신호 프로세서(813)는 컴퓨터 판독가능한 스토리지 매체(812)에 저장되는 신호 프로세서 애플리케이션(840-1)의 명령들을 런칭, 실행(run), 실행(execute), 번역 또는 그렇지 않으면 수행하기 위해 상호접속부(811)의 이용을 통해 컴퓨터 판독가능한 스토리지 매체(812)를 액세스한다. 신호 프로세서 애플리케이션(840-1)의 실행은 신호 프로세서(813)에서의 프로세싱 기능을 생성한다. 다시 말해, 프로세서(813)와 관련되는 프로세스(840-2)는 컴퓨터 시스템(800)에서의 신호 프로세서(813) 내에 또는 그 위에 신호 프로세서 애플리케이션(840-1)을 실행하는 하나 또는 그 초과의 양상들을 나타낸다.
상기 논의는 신호 프로세서(813)와 관련되는 기능을 실행하는 방법을 표시하는 기본 실시예를 제공함을 주목한다. 그러나, 본원에 설명된 바와 같은 동작들을 실행하기 위한 실제 구성이 애플리케이션들에 따라 변화할 수 있음이 주목되어야 한다.
당업자는 컴퓨터 시스템(800)이 신호 프로세서 애플리케이션(840-1)을 실행하기 위해 하드웨어 프로세싱 자원들의 할당 및 이용을 제어하는 운영 시스템과 같은, 소프트웨어 및 하드웨어 컴포넌트들 및/또는 다른 프로세스들을 포함할 수 있다.
도 6은 본원의 실시예들에 따른 신호의 이미지(예를 들어, 제한없이, 프레임)에서의 트랜션트 정보(예를 들어, 제한없이, 잡음)의 서로 다른 분포들을 예시하는 예시도이다.
이전에 논의된 바와 같이, 인코더(110)와 같은 적합한 프로세싱 자원은 신호(100)를 프로세싱하고 원래의 트랜션트(예를 들어, 잡음) 신호 컴포넌트(610-1) 및 원래 코어(예를 들어, 비-잡음) 신호 컴포넌트(620)로 파싱한다.
신호(100)는 디스플레이 스크린(630) 상에 시간을 통해 플레이가능한 시간-기반 디스플레이 신호일 수 있다. 예를 들어, 신호(100)는 시간을 통해 디스플레이 스크린(630) 상에 각 픽셀의 세팅들을 특정할 수 있다.
프로세싱 자원은 원래의 잡음 신호 컴포넌트(610-1)를 치환 잡음 신호 컴포넌트(620-2)로 변환한다. 이것은: 디스플레이 스크린(630) 상에 디스플레이되는 디스플레이 정보의 프레임에 대응하는 원래의 잡음 신호의 일부분에 대해, 디스플레이 스크린의 다수의 구역들에 존재하는 잡음의 서로 다른 레벨들을 식별하기 위해 원래의 잡음 신호 컴포넌트(610-1)의 일부분을 분석하는 단계를 포함할 수 있다. 예를 들어, 프로세싱 자원은 구역(650-1)이 대응하는 잡음 분포 #1을 갖는 것을 검출한다; 프로세싱 자원은 구역(650-2)이 대응하는 잡음 분포 #3을 갖는 것을 검출한다; 프로세싱 자원은 구역(650-3)이 대응하는 잡음 분포 #2를 갖는 것을 검출한다; 등이다. 각 구역은 다른 잡음의 레벨을 가질 수 있다.
구역들(650)에서 검출된 잡음의 양에 기초하여, 프로세싱 자원은 다수의 서로 다른 구역들에서 이용되는 잡음의 치환 분포들을 반영하거나 특정하기 위해 치환 잡음 신호 컴포넌트(620-2)를 생성한다.
도 7은 본원의 실시예들에 따른 시간을 통해 디스플레이 스크린의 서로 다른 구역들에서 잡음의 분포의 변경들을 예시하는 예시도이다. 이전에 언급된 바와 같이, 신호(100)는 플레이가능한 이미지들 및/또는 오디오의 (이미지들의 시퀀스, 또는 프레임들과 같은) 시간-기반 신호일 수 있다. 서로 다른 구역들에서의 트랜션트 정보량(예를 들어, 본 비-제한 예에서, 잡음)은 시간을 통해 변화할 수 있다. 일 실시예에서, 프로세싱 자원은 서로 다른 구역들을 분석하며 그리고 신호(100)에 존재하는 트랜션트 정보량을 결정한다. 예를 들어, 인코더(110)와 같은 프로세싱 자원은 프레임(1)에 대한 픽셀들(730)의 필드에서 원래 트랜션트 신호 컴포넌트(620-1)에서의 세팅들을 분석하며 그리고 구역(711-1)에 존재하는 잡음 A의 레벨을 결정한다; 잡음 B의 레벨은 구역(711-2)에 존재한다; 잡음 F의 레벨은 구역(711-3)에 존재한다. 프로세싱 자원은 이들 검출된 잡음량들을 반영하기 위해 프레임(1)에 대한 치환 잡음 신호 컴포넌트(620-2)를 생성한다. 인코더(110)와 같은 프로세싱 자원은 프레임(2)에 대한 픽셀들(730)의 필드에서 원래의 잡음 신호 컴포넌트(620-1)에서의 세팅들을 분석하며 그리고 구역(712-1)에 존재하는 잡음 B의 레벨 및 구역(712-2)에 존재하는 잡음 C의 레벨을 결정한다. 프로세싱 자원은 이들 검출된 잡음량들을 반영하기 위해 프레임(2)에 대한 치환 잡음 신호 컴포넌트(620-2)를 생성한다.
인코더(110)와 같은 프로세싱 자원은 프레임(3)에 대한 픽셀들(730)의 필드에서 원래 잡음 신호 컴포넌트(620-1)에서의 세팅들을 분석하며 그리고 구역(713-1)에 존재하는 잡음 C의 레벨 및 구역(713-2)에 존재하는 잡음 A의 레벨을 결정한다. 프로세싱 자원은 이들 검출된 잡음량들을 반영하기 위해 프레임(3)에 대한 치환 잡음 신호 컴포넌트(620-2)를 생성한다.
본 발명은 그 바람직한 실시예들을 참조하여 특히 도시되고 설명되었지만, 형태 및 상세들에서의 다양한 변경들이 첨부되는 청구범위에 의해 정의된 바와 같은 본 출원의 정신 및 범위로부터 이탈하지 않고서 그 안에서 이루어질 수 있음이 당업자에 의해 이해될 것이다. 그와 같은 변화들은 본 출원의 범위에 의해 커버되도록 의도된다. 그와 같이, 본 출원의 실시예들의 전술한 설명은 제한하도록 의도되지 않는다. 오히려, 본 발명에 대한 임의의 제한들이 다음의 청구범위에서 제시된다.

Claims (20)

  1. 인코더로서,
    코어 이미지 신호를 출력하기 위해 입력 이미지 신호로부터 잡음 또는 트랜션트(transient)들을 제거하도록 구성된 잡음제거기;
    트랜션트 이미지 신호를 출력하기 위해 상기 입력 이미지 신호로부터 상기 코어 이미지 신호를 감산하도록 구성된 감산기;
    인코딩된 코어 신호 데이터를 생성하기 위해 상기 트랜션트 이미지 신호와는 독립적으로 상기 코어 이미지 신호를 인코딩하도록 구성된 코어 이미지 신호 인코더; 및
    재생 품질의 다수의 상이한 레벨들에서 상기 트랜션트 이미지 신호를 인코딩함으로써 복수의 결과적인 인코딩된 트랜션트 이미지 신호들을 생성 ― 상기 복수의 결과적인 인코딩된 트랜션트 이미지 신호들은 이후 레포지토리(repository)에 저장되고 그리고 네트워크를 통한 송신을 위해 이용가능함 ― 하도록 구성된 트랜션트 이미지 신호 인코더를 포함하고,
    상기 복수의 결과적인 인코딩된 트랜션트 이미지 신호들 중에 포함된 제1 인코딩된 트랜션트 이미지 신호는 상기 레포지토리로부터 선택되어 상기 네트워크를 통해 송신되고, 그리고
    상기 네트워크의 조건의 검출된 변경에 응답하여, 상기 복수의 결과적인 인코딩된 트랜션트 이미지 신호들 중에 포함된 제2 인코딩된 트랜션트 이미지 신호가 상기 제1 인코딩된 트랜션트 이미지 신호를 대체하도록, 상기 제1 인코딩된 트랜션트 이미지 신호 대신에 상기 제2 인코딩된 트랜션트 이미지 신호가 상기 레포지토리로부터 선택되어 상기 네트워크를 통해 송신되고; 그리고
    상기 네트워크를 통해 송신되고 그리고 상기 제1 인코딩된 트랜션트 이미지 신호와 연관되는 파라미터들은 상기 제1 인코딩된 트랜션트 이미지 신호의 하나 이상의 통계적 속성들을 표시하고, 상기 파라미터들은 상기 하나 이상의 통계적 속성들에 따라 외견상(seemingly) 랜덤 숫자들을 발생시키도록 사용가능한, 인코더.
  2. 제1항에 있어서,
    상기 제1 인코딩된 트랜션트 이미지 신호는 상기 인코딩된 코어 신호 데이터보다 더 적은 데이터의 비트들을 갖는, 인코더.
  3. 제1항에 있어서,
    상기 네트워크의 조건은 상기 네트워크의 대역폭 조건인, 인코더.
  4. 제1항에 있어서,
    상기 트랜션트 이미지 신호 인코더는 상기 제1 인코딩된 트랜션트 이미지 신호의 상이한 부분들에 대해 상이한 파라미터들을 인코딩하는, 인코더.
  5. 제1항에 있어서,
    상기 인코더는 상기 인코딩된 코어 신호 데이터 및 상기 제1 인코딩된 트랜션트 이미지 신호를 단일 데이터 스트림으로 결합하도록 구성되는, 인코더.
  6. 제1항에 있어서,
    상이 코어 이미지 신호는 상기 제1 인코딩된 트랜션트 이미지 신호와는 상이한 해상도로 인코딩되는, 인코더.
  7. 제1항에 있어서,
    상기 파라미터들은 상기 제1 인코딩된 트랜션트 이미지 신호의 스펙트럼 분포 속성들을 표시하는, 인코더.
  8. 삭제
  9. 제7항에 있어서,
    상기 파라미터들은 확률 분포를 정의하도록 사용가능하고, 상기 파라미터들은 상기 인코더 및 디코더 양자 모두로 하여금 상기 확률 분포에 따라 외견상 랜덤 숫자들을 발생시키게 허용하는, 인코더.
  10. 제7항에 있어서,
    상기 파라미터들은, 디코더에서의 외견상 랜덤 숫자들의 발생을 위한 숫자들의 시퀀스에서의 시작 포지션을 표시하는 파라미터를 포함하는, 인코더.
  11. 제7항에 있어서,
    초기 세트의 파라미터들은 랜덤 숫자 발생 프로세스에 기초하여 발생되고, 그리고 상기 파라미터들은 휘도 및 채도 컴포넌트들에 대한 개개의 스케일링 파라미터들을 포함하고, 상기 스케일링 파라미터들은 상기 초기 세트의 파라미터들을 스케일링하는, 인코더.
  12. 제1항에 있어서,
    상기 입력 이미지 신호는 비디오 신호이고, 그리고 상기 트랜션트 이미지 신호 인코더는 상기 비디오 신호의 프레임의 상이한 구역들에 상이한 잡음 표현들을 적용하는 방법을 표시하는 파라미터들의 세트를 결정하기 위해 상기 프레임을 분석하는, 인코더.
  13. 제1항에 있어서,
    상기 입력 이미지 신호는 비디오 신호이고, 그리고 상기 트랜션트 이미지 신호 인코더는 상기 비디오 신호의 다수의 프레임들을 순서대로 분석하고 그리고 상기 다수의 프레임들 중 상이한 프레임들에 대한 상이한 파라미터들을 결정하는, 인코더.
  14. 제1항에 있어서,
    상기 입력 이미지 신호는 비디오 신호이고, 그리고 상기 트랜션트 이미지 신호 인코더는 상기 비디오 신호의 다수의 프레임들을 순서대로 분석하고 그리고 상기 다수의 프레임들 중 상이한 프레임들에 대한 상이한 파라미터들을 결정하고, 각각의 프레임에 대한 파라미터들은 상기 프레임의 상이한 구역들에 상이한 잡음 표현들을 적용하는 방법을 표시하는, 인코더.
  15. 입력 비디오 신호를 인코딩하는 방법으로서,
    코어 이미지 신호를 출력하기 위해 입력 이미지 신호로부터 잡음 또는 트랜션트들을 제거하는 단계;
    트랜션트 이미지 신호를 출력하기 위해 상기 입력 이미지 신호로부터 상기 코어 이미지 신호를 감산하는 단계;
    인코딩된 코어 신호 데이터를 생성하기 위해 상기 트랜션트 이미지 신호와는 독립적으로 상기 코어 이미지 신호를 인코딩하는 단계;
    재생 품질의 다수의 상이한 레벨들에서 상기 트랜션트 이미지 신호를 인코딩함으로써 복수의 결과적인 인코딩된 트랜션트 이미지 신호들을 생성 ― 상기 복수의 결과적인 인코딩된 트랜션트 이미지 신호들은 이후 레포지토리에 저장되고 그리고 네트워크를 통한 송신을 위해 이용가능함 ― 하는 단계;
    디코더에 상기 네트워크를 통해 단일 데이터 스트림을 송신하는 단계를 포함하고,
    상기 단일 데이터 스트림은 상기 인코딩된 코어 신호 데이터를 포함하고, 그리고
    상기 복수의 결과적인 인코딩된 트랜션트 이미지 신호들 중에 포함된 제1 인코딩된 트랜션트 이미지 신호는 상기 레포지토리로부터 선택되어 상기 단일 데이터 스트림에서 상기 인코딩된 코어 신호 데이터와 함께 상기 네트워크를 통해 송신되고, 그리고
    상기 네트워크의 조건의 검출된 변경에 응답하여, 상기 복수의 결과적인 인코딩된 트랜션트 이미지 신호들 중에 포함된 제2 인코딩된 트랜션트 이미지 신호가 상기 단일 데이터 스트림에서 상기 제1 인코딩된 트랜션트 이미지 신호를 대체하도록, 상기 제1 인코딩된 트랜션트 이미지 신호 대신에 상기 제2 인코딩된 트랜션트 이미지 신호가 상기 레포지토리로부터 선택되어 상기 네트워크를 통해 송신되고; 그리고
    상기 네트워크를 통해 송신되고 그리고 상기 제1 인코딩된 트랜션트 이미지 신호와 연관되는 파라미터들은 상기 제1 인코딩된 트랜션트 이미지 신호의 하나 이상의 통계적 속성들을 표시하고, 상기 파라미터들은 상기 하나 이상의 통계적 속성들에 따라 외견상 랜덤 숫자들을 발생시키도록 사용가능한, 입력 비디오 신호를 인코딩하는 방법.
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
KR1020217035293A 2012-01-18 2013-01-18 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩 KR102497153B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201261587989P 2012-01-18 2012-01-18
US61/587,989 2012-01-18
PCT/IB2013/050486 WO2013108230A1 (en) 2012-01-18 2013-01-18 Distinct encoding and decoding of stable information and transient/stochastic information
KR1020147022676A KR20140123071A (ko) 2012-01-18 2013-01-18 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020147022676A Division KR20140123071A (ko) 2012-01-18 2013-01-18 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩

Publications (2)

Publication Number Publication Date
KR20210134992A KR20210134992A (ko) 2021-11-11
KR102497153B1 true KR102497153B1 (ko) 2023-02-07

Family

ID=47844409

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020217035293A KR102497153B1 (ko) 2012-01-18 2013-01-18 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩
KR1020147022676A KR20140123071A (ko) 2012-01-18 2013-01-18 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020147022676A KR20140123071A (ko) 2012-01-18 2013-01-18 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩

Country Status (7)

Country Link
US (3) US9626772B2 (ko)
EP (1) EP2805504A1 (ko)
JP (1) JP6303176B2 (ko)
KR (2) KR102497153B1 (ko)
CN (1) CN104303504B (ko)
CA (1) CA2861967A1 (ko)
WO (1) WO2013108230A1 (ko)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102497153B1 (ko) 2012-01-18 2023-02-07 브이-노바 인터내셔널 리미티드 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩
EP3284255B1 (en) 2015-04-13 2023-06-07 V-Nova International Limited Encoding a plurality of signals with data rate target of a signal depending on xomplexity information
US11003811B2 (en) * 2018-02-09 2021-05-11 International Business Machines Corporation Generating samples of outcomes from a quantum simulator
US20220400270A1 (en) 2019-03-20 2022-12-15 V-Nova International Limited Low complexity enhancement video coding
US20220360779A1 (en) 2019-07-05 2022-11-10 V-Nova International Limited Quantization of residuals in video coding
CN110767243A (zh) * 2019-11-04 2020-02-07 重庆百瑞互联电子技术有限公司 一种音频编码方法、装置及设备
GB2598701B (en) 2020-05-25 2023-01-25 V Nova Int Ltd Wireless data communication system and method
US11800056B2 (en) 2021-02-11 2023-10-24 Logitech Europe S.A. Smart webcam system
US11800048B2 (en) 2021-02-24 2023-10-24 Logitech Europe S.A. Image generating system with background replacement or modification capabilities
US11930222B1 (en) * 2021-03-30 2024-03-12 Amazon Technologies, Inc. Encoding video for film grain synthesis

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006047138A2 (en) 2004-10-21 2006-05-04 Thomson Licensing Technique for adaptive de-blocking of block-based film grain patterns

Family Cites Families (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3703727A (en) * 1971-06-18 1972-11-21 Bell Telephone Labor Inc Method for generating random numerical quantities
US5321520A (en) * 1992-07-20 1994-06-14 Automated Medical Access Corporation Automated high definition/resolution image storage, retrieval and transmission system
BE1007490A3 (nl) * 1993-09-10 1995-07-11 Philips Electronics Nv Inrichting voor het overdragen van een pluraliteit van televisie signalen over een transmissie kanaal.
US6798834B1 (en) * 1996-08-15 2004-09-28 Mitsubishi Denki Kabushiki Kaisha Image coding apparatus with segment classification and segmentation-type motion prediction circuit
US6587505B1 (en) * 1998-08-31 2003-07-01 Canon Kabushiki Kaisha Image processing apparatus and method
KR100359821B1 (ko) * 2000-01-20 2002-11-07 엘지전자 주식회사 움직임 보상 적응형 영상 압축과 복원방법 및 그 장치와디코더
US6868190B1 (en) * 2000-10-19 2005-03-15 Eastman Kodak Company Methods for automatically and semi-automatically transforming digital image data to provide a desired image look
US7020335B1 (en) * 2000-11-21 2006-03-28 General Dynamics Decision Systems, Inc. Methods and apparatus for object recognition and compression
JP4521708B2 (ja) * 2001-03-12 2010-08-11 ルネサスエレクトロニクス株式会社 乱数生成装置
US7079692B2 (en) * 2001-07-24 2006-07-18 Koninklijke Philips Electronics N.V. Reduced complexity video decoding by reducing the IDCT computation in B-frames
US20030128970A1 (en) * 2002-01-10 2003-07-10 Koninklijke Philips Electronics N.V. System and method for providing high definition material on a standard definition compatible medium
US7599835B2 (en) * 2002-03-08 2009-10-06 Nippon Telegraph And Telephone Corporation Digital signal encoding method, decoding method, encoding device, decoding device, digital signal encoding program, and decoding program
JP4657570B2 (ja) * 2002-11-13 2011-03-23 ソニー株式会社 音楽情報符号化装置及び方法、音楽情報復号装置及び方法、並びにプログラム及び記録媒体
EP1565878A1 (en) * 2002-11-19 2005-08-24 Koninklijke Philips Electronics N.V. A unit for and method of image conversion
WO2004052017A1 (en) * 2002-12-04 2004-06-17 Koninklijke Philips Electronics N.V. Video coding method and device
JP2006510275A (ja) * 2002-12-10 2006-03-23 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ Ｍｐｅｇ−２ｍｐ＠ｍｌ圧縮ビデオから高精細度視覚効果を生成するシステムおよび方法
US7245783B2 (en) * 2003-06-24 2007-07-17 Eastman Kodak Company System and method for estimating, synthesizing and matching noise in digital images and image sequences
US20050065824A1 (en) * 2003-07-15 2005-03-24 Mark Kohan Data privacy management systems and methods
US7898951B2 (en) * 2003-08-13 2011-03-01 Jones Farm Technology 2, Llc Encoding and transmitting variable bit streams with utilization of a constrained bit-rate channel
EP1511319A1 (en) * 2003-09-01 2005-03-02 Matsushita Electric Industrial Co., Ltd. Film Grain Extraction Filter
JP2005080301A (ja) * 2003-09-01 2005-03-24 Matsushita Electric Ind Co Ltd 動画像符号化方法および動画像復号化方法
US7680356B2 (en) 2003-10-14 2010-03-16 Thomson Licensing Technique for bit-accurate comfort noise addition
ES2749373T3 (es) * 2003-10-14 2020-03-20 Interdigital Vc Holdings Inc Técnica para una simulación del grano de película exacta de bits
JP4543873B2 (ja) * 2004-10-18 2010-09-15 ソニー株式会社 画像処理装置および処理方法
KR101270755B1 (ko) * 2004-11-16 2013-06-03 톰슨 라이센싱 비디오 시스템에서 비트-정확한 시뮬레이션을 위한 필름 그레인 ｓｅｉ 메시지 삽입
CA2587117C (en) * 2004-11-17 2014-02-11 Thomson Licensing Bit-accurate film grain simulation method based on pre-computed transformed coefficients
US7432986B2 (en) * 2005-02-16 2008-10-07 Lsi Corporation Method and apparatus for masking of video artifacts and/or insertion of film grain in a video decoder
US7974341B2 (en) * 2005-05-03 2011-07-05 Qualcomm, Incorporated Rate control for multi-layer video design
US7634290B2 (en) * 2005-05-31 2009-12-15 Vixs Systems, Inc. Adjusting transmit power of a wireless communication device
US20070014484A1 (en) * 2005-07-18 2007-01-18 Alexander Maclnnis Method and system for adaptive film grain noise processing
US7684626B1 (en) * 2005-12-01 2010-03-23 Maxim Integrated Products Method and apparatus for image decoder post-processing using image pre-processing and image encoding information
DE112005003791T5 (de) * 2005-12-28 2008-09-25 Intel Corporation, Santa Clara Ein neues, auf benutzersensitive Informationen anpassungsfähiges Videotranscodierungsrahmenwerk
US9047496B1 (en) * 2006-04-21 2015-06-02 Hewlett-Packard Development Company, L.P. Method and system for finding data objects within large data-object libraries
EP2036036B1 (en) * 2006-06-21 2018-10-31 Thomson Licensing Automatic film grain adjustment
JP2008011177A (ja) * 2006-06-29 2008-01-17 Nec Corp ストリーミング配信における動的品質制御方法およびネットワーク・システム
US20080144821A1 (en) * 2006-10-26 2008-06-19 Marvell International Ltd. Secure video distribution
JP4211838B2 (ja) * 2006-11-09 2009-01-21 ソニー株式会社 撮像装置および画像処理方法
US8213500B2 (en) * 2006-12-21 2012-07-03 Sharp Laboratories Of America, Inc. Methods and systems for processing film grain noise
JP2008219163A (ja) * 2007-02-28 2008-09-18 Toshiba Corp 情報符号化方法、情報再生方法、及び情報記憶媒体
US8982744B2 (en) * 2007-06-06 2015-03-17 Broadcom Corporation Method and system for a subband acoustic echo canceller with integrated voice activity detection
CN101320559B (zh) * 2007-06-07 2011-05-18 华为技术有限公司 一种声音激活检测装置及方法
US8305497B2 (en) * 2007-07-27 2012-11-06 Lsi Corporation Joint mosquito and aliasing noise reduction in video signals
US20090125636A1 (en) * 2007-11-13 2009-05-14 Qiong Li Payload allocation methods for scalable multimedia servers
US7882134B2 (en) * 2008-04-28 2011-02-01 Oracle International Corporation Non-repeating random values in user specified formats and character sets
US8325800B2 (en) * 2008-05-07 2012-12-04 Microsoft Corporation Encoding streaming media as a high bit rate layer, a low bit rate layer, and one or more intermediate bit rate layers
US8379851B2 (en) * 2008-05-12 2013-02-19 Microsoft Corporation Optimized client side rate control and indexed file layout for streaming media
EP2146343A1 (en) 2008-07-16 2010-01-20 Deutsche Thomson OHG Method and apparatus for synchronizing highly compressed enhancement layer data
JP2010041654A (ja) * 2008-08-08 2010-02-18 Toshiba Corp 動画像符号化方法および装置
US8826351B2 (en) * 2008-09-11 2014-09-02 At&T Intellectual Property I, Lp System and method for managing storage capacity on a digital video recorder
US8265140B2 (en) * 2008-09-30 2012-09-11 Microsoft Corporation Fine-grained client-side control of scalable media delivery
RU2504011C2 (ru) * 2009-03-13 2014-01-10 Долби Лабораторис Лайсэнзин Корпорейшн Многоуровневое сжатие видеоизображения с расширенным динамическим диапазоном, визуальным динамическим диапазоном и широкой цветовой гаммой
US20100287402A1 (en) * 2009-05-11 2010-11-11 Electronics And Telecommunications Research Institute Timestamping apparatus and method
US8332651B2 (en) * 2010-02-18 2012-12-11 King Fahd University Of Petroleum And Minerals Method of generating a password protocol using elliptic polynomial cryptography
JP5730303B2 (ja) * 2010-06-21 2015-06-10 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 復号装置、符号化装置およびこれらの方法
US20120063597A1 (en) * 2010-09-15 2012-03-15 Uponus Technologies, Llc. Apparatus and associated methodology for managing content control keys
US8948248B2 (en) 2011-07-21 2015-02-03 Luca Rossato Tiered signal decoding and signal reconstruction
KR102497153B1 (ko) * 2012-01-18 2023-02-07 브이-노바 인터내셔널 리미티드 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006047138A2 (en) 2004-10-21 2006-05-04 Thomson Licensing Technique for adaptive de-blocking of block-based film grain patterns

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
CHEE, Y.-Kheong. Survey of progressive image transmission methods. International journal of imaging systems and technology, 1999.01.06.*
Heiko Schwarz, et al. Overview of the scalable video coding extension of the H. 264/AVC standard. IEEE Transactions on Circuits and Systems for Video Technology, 2007.09., Vol.17,No.9, pp.1103-1120.*
WIEN, Mathias; SCHWARZ, Heiko; OELBAUM, Tobias. Performance analysis of SVC. IEEE Transactions on Circuits and Systems for Video Technology, 2007, 17.9: 1194-1203.

Also Published As

Publication number Publication date
WO2013108230A1 (en) 2013-07-25
US9626772B2 (en) 2017-04-18
US20170186187A1 (en) 2017-06-29
KR20140123071A (ko) 2014-10-21
JP6303176B2 (ja) 2018-04-04
CA2861967A1 (en) 2013-07-25
US20200175724A1 (en) 2020-06-04
US20130182965A1 (en) 2013-07-18
EP2805504A1 (en) 2014-11-26
JP2015507902A (ja) 2015-03-12
KR20210134992A (ko) 2021-11-11
CN104303504A (zh) 2015-01-21
CN104303504B (zh) 2019-04-16
US11232598B2 (en) 2022-01-25
US10504246B2 (en) 2019-12-10

Similar Documents

Publication Publication Date Title
KR102497153B1 (ko) 안정성 정보 및 트랜션트/확률적 정보의 구별되는 인코딩 및 디코딩
CN111837390B (zh) 用于视频编码、解码的方法和相关装置
CN113168718B (zh) 视频解码方法、装置和存储介质
CN110024398B (zh) 针对屏幕远程处理场景的局部的基于散列的运动估计
CN113678441B (zh) 视频编解码的方法和装置
CN112055971B (zh) 视频编解码方法、编解码器以及存储介质
CN113767633A (zh) 用于解码器侧帧内模式导出和自适应帧内预测模式之间的交互的方法和装置
JPWO2008084745A1 (ja) 画像符号化装置および画像復号化装置
AU2012285359A1 (en) Signal processing and inheritance in a tiered signal quality hierarchy
CN113228659A (zh) 帧内模式编码的方法和装置
CN113366847B (zh) 用于视频编解码的方法、装置及可读介质
WO2016040255A1 (en) Self-adaptive prediction method for multi-layer codec
CN113301333A (zh) 视频解码的方法和装置
KR20220100991A (ko) 비디오 필터링 방법 및 장치
CN115428453A (zh) 具有预定滤波器的样本偏移
CN115398899A (zh) 视频滤波方法和装置
JP2023519818A (ja) ビデオフィルタリングのための方法及び装置
CN114930852A (zh) 用于视频编解码的方法和装置
JP2023512898A (ja) ビデオフィルタリングにおけるオフセットの方法及び装置
CN116391355A (zh) 视频编码中边界处理的方法和设备
CN113748678B (zh) 视频编解码方法、装置和存储介质
CN117044203A (zh) 用于一维变换跳过的eob的信令
CN115699774A (zh) 用于视频编码的方法和装置
KR20230107885A (ko) 교차-성분 레벨 재구성을 위한 1차 변환
CN116547966A (zh) 用于帧间帧内联合预测模式的二次变换

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant