KR20090040288A - 멀티 패스 비디오 인코더에서 성능 향상을 위한 방법 및 장치 - Google Patents

멀티 패스 비디오 인코더에서 성능 향상을 위한 방법 및 장치 Download PDF

Info

Publication number
KR20090040288A
KR20090040288A KR1020097000519A KR20097000519A KR20090040288A KR 20090040288 A KR20090040288 A KR 20090040288A KR 1020097000519 A KR1020097000519 A KR 1020097000519A KR 20097000519 A KR20097000519 A KR 20097000519A KR 20090040288 A KR20090040288 A KR 20090040288A
Authority
KR
South Korea
Prior art keywords
encoding
video
scenes
encoder
video bitstream
Prior art date
Application number
KR1020097000519A
Other languages
English (en)
Other versions
KR101373934B1 (ko
Inventor
크리스티나 고밀라
시아오안 루
고크세 다네
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20090040288A publication Critical patent/KR20090040288A/ko
Application granted granted Critical
Publication of KR101373934B1 publication Critical patent/KR101373934B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115Selection of the code volume for a coding unit prior to coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162User input
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/179Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/192Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding the adaptation method, adaptation tool or adaptation type being iterative or recursive
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

멀티 패스 비디오 인코더에서 성능 향상을 위한 방법 및 장치가 제공된다. 장치는 비디오 비트스트림을 인코딩하는 비디오 인코더(300)를 포함한다. 이 장치는, 이 인코더와 신호통신하여, 상기 비디오 비트스트림에서 인코더 압축 가공물을 검출하기 위해 주어진 인코딩 패스에 대한 상기 비디오 비트스트림의 비디오 품질 분석을 수행하고, 상기 인코더의 리인코딩 설정을 가능하게 하여 차후의 리인코딩 패스에서 인코더 압축 가공물의 발생을 줄이기 위하여 상기 인코더 압축 가공물에 대한 정보를 상기 인코더로 제공하는 비디오 품질 분석기(300)를 포함한다. 상기 비디오 품질 분석과 상기 리인코딩 설정 중 적어도 하나는 자동화된다.
비디오, 인코더, 비트스트림, 압축, 압축 가공물

Description

멀티 패스 비디오 인코더에서 성능 향상을 위한 방법 및 장치{METHOD AND APPARATUS FOR ENHANCED PERFORMANCE IN A MULTI-PASS VIDEO ENCODER}
관련 출원에 대한 상호 참조
본 출원은 2006년 7월 10일 출원된 미국 가출원번호 60/806,862의 우선권을 주장하며, 그 전체가 본 명세서에서 참조로서 인용된다.
본 발명은 비디오 인코딩에 관한 것으로, 특히 멀티 패스 비디오 인코더에서 성능 향상을 위한 방법 및 장치에 관한 것이다.
비디오 코딩 방법은 디지털 비디오에 대한 효과적인 코딩 표현을 찾기 위해 사용된다. 불행히도, 이것은 대량의 데이터가 관련되면 품질의 손실없이 달성되기 어려울 수 있다. 품질의 손실은 종종 디테일의 손실로 변한다. 예컨대, 텍스처 영역은 더 부드럽게 인식되고 작은 디테일은 압축해제된 픽처에서 희미해지는 경향이 있다. 고압축율에서, 압축해제된 픽처는 "가공물(artifact)"이라고도 하는 눈에 보이는 오류를 포함할 수도 있다. 가공물은 일반적으로 손실있는 비디오 압축에서 양자화의 결과이다. 압축 가공물은 픽처의 일부, 특히 빨리 움직이는 부분이 왜곡되거나 손실되어 나타나게 할 수 있다.
압축 가공물의 발생을 감소시키기 위하여, 고화질을 추구하는 비 실시간 (non real-time) 인코딩 애플리케이션 (예컨대 DVD 저작)은 종종 조작자가 수동으로 인코더 파라미터를 미세조정할 것을 요한다. 인코딩 파라미터를 수동으로 미세 조정하는 이러한 프로세스는 보조 리인코딩 (assisted re-encoding)으로 알려져 있다.
현재의 DVD 생산 워크플로에서, 보조 리인코딩은 영화 제목의 인코딩을 완료하는 데 필요한 총 시간의 60퍼센트 이상을 소비할 수 있다. 또한, 고화질 포맷 및 고해상도 디스플레이의 도입으로, 거의 손실없는 압축이 요구되는 동안에 압축 가공물은 더 잘 눈에 띄게 된다.
도 1을 참조하면, 보조 리인코딩과 함께 비 실시간 비디오 인코딩을 위한 방법이 전체적으로 참조번호(100)로 표시된다. 이 방법(100)은 기능 블록(110)으로 제어를 이전하는 시작블록(105)을 포함한다. 기능 블록(110)은 인코딩 설정을 수행하고, 제어를 기능 블록(120)으로 이전한다. 기능 블록(120)은 비디오 시퀀스에서 현재 픽처에 대해 인코딩을 수행하고, 제어를 기능 블록(190) 및 루프 리미트 (loop limit) 블록(130)으로 이전한다.
기능 블록(190)은 버퍼에 비트스트림을 저장하고 제어를 기능 블록(140)으로 이전한다.
루프 리미트 블록(130)은 비디오 시퀀스에서 각 픽처에 대해 루프(loop)하는 품질 검사 루프를 시작하고, 제어를 기능 블록(140)으로 이전한다.
기능 블록(140)은 품질 평가를 위해 비디오 시퀀스에서 각 픽처를 디스플레이하고, 제어를 결정 블록(150)으로 이전한다. 결정 블록(150)은 시각적 품질이 만족스러운지 여부를 결정한다. 만족스러우면, 제어는 루프 리미트 블록(160)으로 이전된다. 그렇지 않으면, 제어는 기능 블록(180)으로 이전된다.
기능 블록(160)은 비디오 시퀀스에서 각 픽처에 대한 루프를 종료하고, 제어를 종료 블록(170)으로 이전한다.
기능 블록(180)은 리인코딩 설정을 수행하고, 제어를 기능 블록(120)으로 반환한다.
도 1의 방법(100)의 다양한 요소들에 대해 이하에서 더 설명하기로 한다. 인코더 설정은 일반적으로 조작자의 도움으로 기능 블록(110)에서 수행된다. 인코더 설정은 대상 비트율 (target bit-rate)의 설정 뿐만 아니라 인코딩 프로세스에 포함된 임의의 파라미터 세트의 내역을 포함할 수 있다. 기능 블록(120)은 자동화된 인코딩 프로세스를 나타낸다. 이것은 단일 또는 멀티 패스 인코딩일 수 있고, 일부 경우에, 예컨대, ISO/IEC (International Organization for Standardization/International Electrotechnical Commission) MPEG-4 (Moving Picture Experts Group-4) Part 10 AVC (Advanced Video Coding) 표준/ITU-T (International Telecommunication Union, Telecommunication Sector) H.264 권고 (이하 "MPEG-4 AVC 표준"), ISO/IEC MPEG-2 표준, ITU-T H.263 권고 등과 같은 기존의 비디오 코딩 표준에 따를 수 있다. 인코딩 프로세스의 결과는 기능 블록(190)에서 메모리에 저장된다. 인코딩 후, 조작자는 인코딩된 스트림의 시각적 품질을 검사하는 단계로 진행할 것이다 (기능 블록(130) 내지 (160)). 시각적 품질 평가는 대부분의 경우 그래픽 디스플레이를 통해 이루어지고 (기능 블록(140)) 인코딩된 스트림에서 픽처의 디코딩을 포함할 수 있다. 조작자가 픽처 또는 픽처 세트가 만족스럽지 않다고 간주하면, 그는 다른 인코딩 설정 (기능 블록(180))을 수동으로 테스트하기로 결정하고 기능 블록(120)을 통해 다시 인코딩하는 것으로 진행할 수 있다. 이 프로세스는 조작자의 간섭을 필요로 하므로 보조 리인코딩이라고 한다. 이 프로세스는 시각적 품질이 만족스러운 것으로 간주될 때까지 필요한 만큼 반복된다.
도 1에 의해 표시된 워크플로를 따르는 대부분의 애플리케이션은 기능 블록(100)에서 기능 블록(170)까지 가는 데 걸리는 시간의 60 퍼센트 이상을 리인코딩 프로세스에 할애한다.
종래 기술의 상기 및 다른 단점 및 불리한 점은 멀티 패스 비디오 인코더에서 성능 향상을 위한 방법 및 장치에 관한 본 발명에 의해 해결된다.
본 발명의 일양태에 따르면, 멀티 패스 비디오 인코딩을 위한 장치가 제공된다. 이 장치는 비디오 비트스트림을 인코딩하기 위한 비디오 인코더를 포함한다. 이 장치는, 상기 인코더와 신호교신하여, 상기 비디오 비트스트림에서 인코더 압축 가공물(artifacts)을 검출하기 위해 주어진 인코딩 패스에 대한 상기 비디오 비트스트림의 비디오 품질 분석을 수행하고, 상기 인코더의 리인코딩 설정을 가능하게 하여 차후의 리인코딩(re-encoding) 패스에서 인코더 압축 가공물의 발생을 줄이기 위하여 상기 인코더 압축 가공물에 대한 정보를 상기 인코더로 제공하는 비디오 품질 분석기를 더 포함한다. 상기 비디오 품질 분석과 상기 리인코딩 설정 중 적어도 하나는 자동화된다.
본 발명의 다른 양태에 따르면, 멀티 패스 비디오 인코더와 함께 사용하기 위한 장치가 제공된다. 이 장치는, 주어진 인코딩 패스에 대한 비디오 비트스트림의 비디오 품질 분석을 수행하여 상기 비디오 비트스트림에서 인코더 압축 가공물을 검출하고, 상기 비디오 인코더의 리인코딩 설정을 가능하게 하여 차후의 리인코딩 패스에서 상기 인코더 압축 가공물의 발생을 줄이기 위하여 상기 인코더 압축 가공물에 관한 정보를 상기 비디오 인코더에 제공하는 비디오 품질 분석기를 포함한다. 상기 비디오 품질 분석과 상기 리인코딩 설정 중 적어도 하나는 자동화된다.
본 발명의 또다른 양태에 따르면, 멀티 패스 비디오 인코딩을 위한 방법이 제공된다. 이 방법은 주어진 인코딩 패스에서 비디오 비트스트림을 인코딩하는 단계를 포함한다. 이 방법은 또한 주어진 인코딩 패스에서 인코딩된 비디오 비트스트림의 비디오 품질 분석을 수행하여 내부에 인코더 압축 가공물을 검출하는 단계를 포함한다. 이 방법은, 상기 인코더 압축 가공물에 관한 상기 비디오 품질 분석으로부터 얻어진 정보에 기초하여, 차후의 리인코딩 패스에서 상기 인코더 압축 가공물의 발생을 줄이기 위해 상기 비디오 비트스트림에 대한 리인코딩 설정을 수행하는 단계를 포함한다. 상기 비디오 품질 분석 및 상기 리인코딩 설정 중 적어도 하나는 자동화된다.
본 발명의 또다른 양태에 따르면, 멀티 패스 비디오 인코더와 함께 사용하기 위한 방법이 제공된다. 이 방법은 주어진 인코딩 패스에 대한 비디오 비트스트림의 비디오 품질 분석을 수행하여 상기 비디오 비트스트림에서 인코더 압축 가공물을 검출하는 단계를 포함한다. 이 방법은 또한 상기 비디오 인코더의 리인코딩 설정을 가능하게 하여 차후의 리인코딩 패스에서 상기 인코더 압축 가공물의 발생을 줄이기 위해 상기 인코더 압축 가공물에 관한 정보를 상기 비디오 인코더에 제공하는 단계를 포함한다. 상기 비디오 품질 분석 및 상기 리인코딩 설정 중 적어도 하나는 자동화된다.
본 발명의 상기 및 다른 양태, 특징 및 이점은 첨부 도면을 참조하여 이하의 바람직한 실시예들에 대한 상세한 설명으로부터 분명해질 것이다.
본 발명은 다음 바람직한 도면을 참조하여 더 잘 이해될 수 있다.
도 1은 종래 기술에 따라 보조 리인코딩과 함께 비 실시간 비디오 인코딩을 위한 방법의 흐름도이다.
도 2는 본 발명의 일실시예에 따라 본 발명이 적용될 수 있는 바람직한 비디오 인코더의 블록도이다.
도 3은 본 발명의 일실시예에 따라 본 발명이 적용될 수 있는 바람직한 비디오 품질 분석 시스템의 블록도이다.
도 4는 본 발명의 일실시예에 따라 보조 리인코딩과 함께 비 실시간 멀티 패스 비디오 인코딩을 위한 바람직한 방법의 흐름도이다.
도 5는 본 발명의 일실시예에 따라 보조 리인코딩과 함께 비 실시간 멀티 패스 비디오 인코딩을 위한 바람직한 방법의 흐름도이다.
도 6은 본 발명의 일실시예에 따라 보조 리인코딩과 함께 비 실시간 멀티 패스 비디오 인코딩을 위한 바람직한 방법의 흐름도이다.
본 발명은 멀티 패스 비디오 인코더에서 성능 향상을 위한 방법 및 장치에 대한 것이다.
본 설명은 본 발명의 원리를 예시한다. 따라서 여기 명시적으로 설명하거나 도시되지는 않았지만 당업자라면 본 발명의 원리를 구현하고 본 발명의 사상과 범위 내에 포함되는 다양한 구성들을 고안할 수 있을 것이다.
여기 언급된 모든 예들과 조건부의 표현법은 독자들이 본 발명의 원리와 발명자에 의해 제공된 개념을 이해하는 데 도움을 줄 목적으로 한 것이며, 이러한 특정적으로 언급된 예들과 조건들에 제한되지 않는 것으로 해석되어야 한다.
또한, 본 발명의 원리, 양태 및 실시예 뿐만 아니라 특정 예를 언급하는 모든 진술은 구조적 및 기능적 균등물을 포함하는 것이다. 또한, 이러한 균등물은 현재 알려진 균등물 뿐만 아니라 미래에 개발되는 균등물, 즉 구조에 상관없이 동일한 기능을 수행하도록 개발되는 임의의 요소들도 모두 포함한다.
따라서, 예컨대, 당업자라면 여기 제시된 블록도들이 본 발명의 원리를 구현하는 예시적 회로의 개념도를 나타내는 것임을 알 수 있을 것이다. 마찬가지로, 임의의 흐름도, 상태 전이도, 의사코드 등은 컴퓨터 판독 매체에서 실질적으로 표현되고 컴퓨터 또는 프로세서에 의해 실행될 수 있는 다양한 프로세스를 나타내는 것이며, 이러한 컴퓨터 또는 프로세서가 명시적으로 도시되어 있는지 여부와는 상 관없다.
도면에 도시된 다양한 요소들의 기능은 전용 하드웨어는 물론 적절한 소프트웨어와 함께 소프트웨어를 실행할 수 있는 하드웨어의 사용을 통해 제공될 수 있다. 프로세서에 의해 제공될 때, 기능들은 단일의 전용 프로세서, 단일의 공유 프로세서, 또는 일부가 공유될 수 있는 복수의 개별 프로세서들에 의해 제공될 수 있다. 또한, "프로세서"나 "제어기"라는 용어의 명시적 사용은 소프트웨어를 실행할 수 있는 하드웨어에 한정하는 것으로 해석되지 않아야 하고, 제한없이, 디지털 신호 프로세서 (DPS) 하드웨어, 소프트웨어 저장을 위한 ROM (read-only memory), RAM (random access memory), 및 비휘발성 저장장치를 함축적으로 포함할 수 있다.
종래 및/또는 주문형 다른 하드웨어가 포함될 수 있다. 마찬가지로, 도면에 도시된 임의의 스위치는 단지 개념적인 것이다. 이것의 기능은 프로그램 논리의 동작을 통해, 전용 논리를 통해, 프로그램 제어 및 전용 논리의 상호작용을 통해, 또는 수동으로 수행될 수도 있고, 특정 기술은 내용으로부터 보다 구체적으로 이해되는 바와 같이 구현자에 의해 선택가능하다.
이 청구범위에서, 특정 기능을 수행하는 수단으로서 표현된 임의의 요소는, 예컨대, a) 그 기능을 수행하는 회로 요소들의 조합 또는 b) 이 기능을 수행하도록 이 소프트웨어를 실행하는 적절한 회로와 조합된 펌웨어, 마이크로코드 등을 포함한 임의의 형태의 소프트웨어를 포함하는 기능을 수행하는 임의의 방법을 포함하는 것이다. 이러한 청구범위에 의해 정의된 본 발명은 다양한 언급된 수단에 의해 제공된 기능들이 청구범위가 청구하는 방식으로 조합되고 합쳐진 것이라는 사실에 있 다. 따라서, 이 기능들을 제공할 수 있는 임의의 수단은 여기 도시된 것들과 균등한 것으로 간주된다.
본 명세서에서 본 발명의 "일실시예"에 대한 언급은 이 실시예와 관련하여 설명된 특정 특징, 구조, 특성이 본 발명의 적어도 하나의 실시예에 포함됨을 의미한다. 따라서, 본 명세서에서 다양한 곳에서 기재되는 "일실시예에서"라는 표현은 반드시 동일한 실시예를 가리키는 것은 아니다. 또한, 여기 제공된 본 발명의 교시내용을 고려하면, 당업자에 의해 결정되는 대로, 본 발명의 범위를 유지하면서, 둘 이상의 실시예 및/또는 그 부분들이 용이하게 조합될 수 있다.
본 발명에 따르면, 방법 및 장치는 멀티 패스 비디오 인코더에서 성능 향상을 위해 제공된다. DVD 저작(authoring)과 같은 고화질을 추구하는 비 실시간 (non-real-time) 비디오 인코딩 애플리케이션은 종종 조작자가 압축 가공물 (compression artifacts)의 출현을 감소시키기 위해 인코더 파라미터를 수동으로 미세조정할 필요가 있다. 이러한 프로세스는 보조 리인코딩 (assisted re-encoding)으로 알려져 있다. 유리한 점으로는, 본 발명의 실시예들은 보조 리인코딩을 요하는 경우의 수를 최소화한다. 일실시예에서, 보조 리인코딩을 필요로 하는 경우의 수는 시각적 화질 분석기의 도움으로 압축 가공물의 검출을 자동화함으로써 및/또는 이러한 가공물의 출현을 방지하도록 인코더 구성에서 조정을 자동화함으로써 최소화된다.
도 2를 참조하면, 본 발명이 적용될 수 있는 바람직한 비디오 인코더는 전체적으로 참조번호(200)로 표시된다. 인코더(200)는 프레임 오더링(ordering) 버 퍼(205)를 포함한다. 프레임 오더링 버퍼(205)의 제1 입력은 인코더(200)로의 입력으로서 이용가능하다. 프레임 오더링 버퍼(205)의 출력은 조합기(210)의 제1 비반전 입력과 신호 통신으로 연결된다. 조합기(210)의 출력은 변환기 및 양자화기(215)의 제1 입력과 신호 통신으로 연결된다. 변환기 및 양자화기(215)의 출력은 엔트로피 코더(220)의 제1 입력 및 인버스 변환기 및 양자화기(235)의 입력과 신호 통신으로 연결된다. 엔트로피 코더의 출력은 조합기(225)의 제1 비반전 입력과 신호 통신으로 연결된다. 조합기(225)의 출력은 출력 버퍼(230)의 입력과 신호 통신으로 연결된다. 출력 버퍼(230)의 제1 출력은 속도 제어기(275)의 입력과 신호 통신으로 연결된다. 속도 제어기(275)의 출력은 변환기 및 양자화기(215)의 제2 입력, 픽처형 및 매크로블록(MB)형 결정 모듈(270)의 입력, 및 시퀀스 파라미터 세트 (SPS) 및 픽처 파라미터 세트 (PPS) 삽입기(285)의 입력과 신호 통신으로 연결된다. 픽처형 및 매크로블록형 결정 모듈(270)의 제1 출력은 프레임 오더링 버퍼(205)의 제2 입력과 신호 통신으로 연결된다. 픽처형 및 매크로블록형 결정 모듈(270)의 제2 출력은 조합기(240)의 제1 비반전 입력 및 스위치(265)의 출력과 신호 통신으로 연결된다. 스위치(265)의 입력은 움직임 보상기/움직임 추정기(255)의 제2 출력 또는 인트라(intra) 예측 모듈(260)의 출력과 신호 통신으로 연결된다. 조합기(240)의 출력은 인트라 예측 모듈(260)의 입력과 디블로킹 필터(245)의 입력과 신호 통신으로 연결된다. 디블로킹 필터(245)의 출력은 기준 픽처 버퍼(250)의 입력과 신호 통신으로 연결된다. 기준 픽처 버퍼(250)의 출력은 움직임 보상기/움직임 추정기(255)의 입력과 신호 통신으로 연결된다. 움직임 보상기/움 직임 추정기(255)의 제1 출력은 엔트로피 코더(220)의 제2 입력과 신호 통신으로 연결된다. SPS 및 PPS 삽입기(285)의 출력은 조합기(225)의 제2 비반전 입력과 신호 통신으로 연결된다. SEI (Supplemental Enhancement Information) 삽입기(280)는 조합기(225)의 제3 비반전 입력과 신호 통신으로 연결된다. SEI 삽입기(280)의 입력은 메타데이터 수신을 위해 인코더(200)로의 입력으로서 이용가능하다. 출력 버퍼(230)의 제2 출력은 인코더(200)의 출력으로서 이용가능하다.
도 3을 참조하면, 본 발명이 적용될 수 있는 바람직한 비디오 품질 분석 시스템이 전체적으로 참조번호(300)로 표시된다. 품질 분석 시스템(300)은 프레임 오더링 버퍼(320) 및 품질 분석기(330)를 포함한다. 프레임 오더링 버퍼(320)의 입력은 입력 비트스트림을 수신하기 위해 품질 분석 시스템(300)으로의 입력으로서 이용가능하다. 품질 분석기(330)의 제1 입력은 품질 분석 시스템(300)으로의 입력으로서 이용가능하다. 프레임 오더링 버퍼(320)의 출력은 품질 분석기(330)의 제2 입력과 신호 통신으로 연결된다. 품질 분석기(330)의 제3 입력은 품질 메트릭스 모듈(310)의 출력과 신호 통신으로 연결된다. 품질 분석기(330)의 출력은 품질 분석 시스템(300)의 출력으로서 이용가능하다.
유리한 점으로는, 본 발명에 따른 방법 및 장치는 보조 리인코딩을 필요로하는 경우의 수를 최소화할 수 있다. 일실시예에서, 이것은 비디오 품질 분석기의 도움으로 압축 가공물의 검출을 자동화함으로써 이루어진다. 일실시예에서, 비디오 품질 분석기에 의한 압축 가공물의 자동화된 검출에서 생긴 정보는 인코더에 제공되고 차후 인코딩 패스에서 이러한 가공물의 출현을 최소화하는 인코더 구성에서 자동화된 조정을 허용한다.
도 4를 참조하면, 보조 리인코딩과 함께 비 실시간, 멀티 패스 비디오 인코딩을 위한 바람직한 방법은 전체적으로 참조번호(400)으로 표시된다. 방법(400)은 기능 블록(410)으로 제어를 이전하는 시작 블록(405)을 포함한다. 기능 블록(410)은 인코딩 설정을 수행하고, 기능 블록(420)으로 제어를 이전한다. 기능 블록(420)은 비디오 시퀀스에서 현재 픽처에 대해 인코딩을 수행하고, 기능 블록(490) 및 루프 리미트 블록(430)으로 제어를 이전한다.
기능 블록(490)은 버퍼에 비트스트림을 저장하고, 기능 블록(440)으로 제어를 이전한다.
루프 리미트 블록(430)은 비디오 시퀀스에서 각 픽처에 대해 루프하는 품질 검사 루프를 시작하고, 기능 블록(440)으로 제어를 이전한다.
기능 블록(440)은 비디오 품질 분석을 수행하고, 결정 블록(450)으로 제어를 이전한다. 결정 블록(450)은 리인코딩이 수행되어야 하는지 여부를 결정한다. 수행되어야 한다면, 제어는 기능 블록(480)으로 이전된다. 그렇지 않으면, 제어는 루프 리미트 블록(460)으로 이전된다.
기능 블록(460)은 비디오 시퀀스에서 각 픽처에 대해 루프를 종료하고 종료 블록(470)으로 제어를 이전한다.
기능 블록(480)은 리인코딩 설정을 수행하고, 기능 블록(420)으로 제어를 반환한다. 기능 블록(480)에 대해, 이에 의해 수행된 리인코딩 설정은 예컨대 대상 비트율, 디블로킹 필터의 세기, 및/또는 다른 인코딩 파라미터를 조정하고, 및/또 는 리인코딩될 장면을 제한하는 것을 포함할 수 있다. 예를 들면, 기능 블록(480)은 리인코딩될 장면들을 최대수 N개의 장면 (예컨대, 최저 품질을 갖는 N개의 장면)으로 제한할 수 있고, 임계값 미만의 시각적 품질 메트릭스를 갖는 장면들만이 리인코딩되게 제한할 수 있고, 및/또는 X%의 장면들 (예컨대, 최저 품질을 갖는 것부터 시작하여)이 리인코딩되게 제한할 수 있다. 기능 블록(480)에 대해 주어진 상기 예들에서, 변수 X는 선택된 백분율을 나타내고, 정수값 또는 비정수값으로 표현될 수 있다.
도 1의 방법(100)과 비교할 때, 도 4의 방법(400)의 보조 품질 검사 프로세스 (기능 블록 430 내지 460)는 완전히 자동화된다.
이 새로운 프로세스의 일부로서, 비디오 품질 분석기 (기능 블록(440))는 적어도 하나의 시각적 품질 메트릭스의 계산을 담당한다. 본 발명의 일부로서 사용될 수 있는 시각적 품질 메트릭스의 예들은 JND (Just Noticeable Distortion) 또는 PPNR (Peak Power Noise Ratio)를 포함할 수 있지만 이에 한정되는 것은 아니다. 즉, 본 발명이 시각적 품질 메트릭스로서 JND 및 PPNR에 대해 여기 설명되었지만, 본 발명은 이 시각적 품질 메트릭스에만 한정되지 않고, 당업자에 의해 용이하게 결정되는 바와 같이, 다른 시각적 품질 메트릭스가 본 발명의 범위를 유지하면서, 본 발명에 따라 사용될 수 있다.
JND는 신호 왜곡의 지각 하한 (perceptual lower bound)을 측정한다. 이 측정은 사람의 시각 시스템이 절대 세기 보다는 휘도 차를 검출할 수 있다는 관측에 기초한다. 또한, 휘도 대비(contrast)의 민감도는 평균 배경 세기에 의존한다. JND는 그 미만에서는 왜곡이 감지불가능한 임계값을 나타낸다. JND는 다음과 같이 표현될 수 있다:
Figure 112009001496137-PCT00001
여기서, bgij 및 mgij 는 각각 (i,j)에 있는 픽셀 주위에서 평균 배경 휘도 및 휘도차의 최대 가중 평균이다. 함수 f1 및 f2는 다음과 같이 표현될 수 있다:
Figure 112009001496137-PCT00002
Figure 112009001496137-PCT00003
수학식(2)에 대해서,
Figure 112009001496137-PCT00004
() 및
Figure 112009001496137-PCT00005
()는 다음과 같이 표현될 수 있다:
Figure 112009001496137-PCT00006
여기서, T0=17,
Figure 112009001496137-PCT00007
=3/128,
Figure 112009001496137-PCT00008
=1/2 이다.
JND를 이용하여, PPNR은 다음과 같이 정의된다:
Figure 112009001496137-PCT00009
여기서,
Figure 112009001496137-PCT00010
여기서, M 및 N은 각각 픽처의 폭 및 픽처의 높이를 나타내고, xij는 (i,j)에서 픽셀의 값을 나타내고 ^xij는 (i,j)에서 재구성된 픽셀을 나타낸다.
일실시예에서, 비디오 품질 분석기는 입력으로서 압축된 비트스트림을 취하고 압축된 도메인에서 동작할 수 있다. 다른 실시예에서, 비디오 품질 분석기는 더 정확한 측정을 얻기 위해 압축해제된 비디오와 원래 시퀀스를 입력으로 취할 수 있다.
비디오 품질 분석기로부터 발생하는 품질 메트릭스는 리인코딩 필요성을 평가하기 위해 사용된다. 적어도 하나의 메트릭스, 및/또는 메트릭스의 조합이 특정된 또는 계산된 임계값 미만이면 (기능 블록(450)), 시스템은 이 픽처나 픽처 그룹을 리인코딩하도록 진행한다.
일실시예에서, 기능 블록(480)에서의 리인코딩 설정은 완전히 자동화된다. 이 프로세스는 입력으로서 이전의 인코딩 파라미터와 비디오 품질 분석기로부터 생기는 데이터를 취한다. 리인코딩 설정은 지각된 시각적 품질에 영향을 미칠 수 있는 임의의 인코딩 파라미터에 대한 비트율 변경 및 변화를 이용할 수 있다.
일실시예에서, 이 시스템은 품질 메트릭스가 특정 임계값 미만인 픽처들에서 평균 비트율을 증가시킬 수 있다. 다른 실시예에서, 이 시스템은 블로킹현 상(blockiness)이 압축해제된 픽처에서 측정될 때 디블로킹 필터의 강도를 증가시킬 수 있다. 인코딩 프로세스가 MPEG-4 AVC 표준에 따를 또다른 실시예에서, 시스템은 저품질 메트릭스가 단계적인 전이에서 측정될 때 가중 예측을 가능하게 할 수 있다. 상기 변화는 전체 픽처에 영향을 미칠 수 있고 또는 선택적으로 모든 인코딩 파라미터에 대해 매크로블록 레벨에서 설정될 수 있다.
리인코딩은 측정된 비디오 품질 메트릭스가 특정 또는 계산된 임계값을 초과할 때까지 반복될 수 있다.
도 5를 참조하면, 보조 리인코딩과 함께 비 실시간, 멀티 패스 비디오 인코딩을 위한 바람직한 방법이 전체적으로 참조번호(500)으로 나타낸다. 방법(500)은 기능 블록(510)으로 제어를 이전하는 시작 블록(505)을 포함한다. 기능 블록(510)은 인코딩 설정을 수행하고, 기능 블록(520)으로 제어를 이전한다. 기능 블록(520)은 비디오 시퀀스에서 현재 픽처에 대해 인코딩을 수행하고, 기능 블록(590) 및 루프 리미트 블록(530)으로 제어를 이전한다.
기능 블록(590)은 버퍼에 비트스트림을 저장하고, 기능 블록(540)으로 제어를 이전한다.
루프 리미트 블록(530)은 비디오 시퀀스에서 각 픽처에 대해 루프하는 품질 검사 루프를 시작하고, 기능 블록(540)으로 제어를 이전한다.
기능 블록(540)은 비디오 품질 분석을 수행하고, 결정 블록(550) 및 기능 블록(580)으로 제어를 이전한다. 결정 블록(550)은 리인코딩이 수행되어야 하는지 여부를 결정한다. 수행되어야 한다면, 제어는 기능 블록(565)으로 이전된다. 그 렇지 않으면, 제어는 루프 리미트 블록(560)으로 이전된다.
기능 블록(560)은 비디오 시퀀스에서 각 픽처에 대해 루프를 종료하고, 종료 블록(570)으로 제어를 이전한다.
기능 블록(565)은 리인코딩 카운터를 1만큼씩 증가시키고, 결정 블록(575)으로 제어를 이전한다. 결정 블록(575)은 리인코딩 카운터가 임계값 초과인지 여부를 결정한다. 초과라면, 제어는 기능 블록(585)으로 이전된다. 그렇지 않으면, 제어는 기능 블록(580)으로 이전된다.
기능 블록(585)은 로그 파일을 출력하고, 종료 블록(570)으로 제어를 이전한다.
기능 블록(580)은 리인코딩 설정을 수행하고, 제어를 기능 블록(520)으로 반환한다. 기능 블록(580)에 대해, 이에 의해 수행된 리인코딩 설정은 예컨대 대상 비트율, 디블로킹 필터의 강도, 및/또는 다른 인코딩 파라미터를 조정하고, 및/또는 리인코딩될 장면을 제한하는 것을 포함할 수 있다. 예컨대, 기능 블록(580)은 리인코딩될 장면들을 최대수 N개의 장면 (예컨대, 최저 품질을 갖는 N개의 장면)으로 제한할 수 있고, 임계값 미만의 시각적 품질 메트릭스를 갖는 장면들만이 리인코딩되게 제한할 수 있고, 및/또는 X%의 장면들 (예컨대, 최저 품질을 갖는 것부터 시작하여)이 리인코딩되게 제한할 수 있다. 기능 블록(580)에 대해 주어진 상기 예들에서, 변수 X는 선택된 백분율을 나타내고, 정수값 또는 비정수값으로 표현될 수 있다.
도 5의 방법(500)으로 표현된 워크플로에서, 자동화된 리인코딩 프로세스는 임의 갯수의 리인코딩 패스가 완료된 때 (기능 블록(575)) 정지할 것이다. 리인코딩 프로세스가 예상된 픽처 품질 레벨에 도달하지 않고서 정지하도록 강제될 때, 출력 리포트가 선택적으로 생성될 수 있다. 출력 리포트는 보조 리인코딩이 필요한지 여부를 결정하기 위해 조작자에 의해 사용될 수 있다.
도 5의 방법(500)에 대한 일실시예에서, 시각적 품질 메트릭스의 계산에 기초한 자동화된 리인코딩 방법은, 보조 리인코딩 필요성을 억제하는 체하는 것이 아니라, 사람의 보조를 필요로 하는 경우의 수를 감소시키는 것이다. 종래 방법에 대해 이 방법의 한가지 장점은 전체 처리 시간이 제한된다는 점이다.
도 6은 2-패스 (two-pass) 인코딩 알고리즘이 사용되는 경우의 일실시예를 도시한다.
도 6을 참조하면, 보조 리인코딩과 함께 비 실시간, 2-패스 비디오 인코딩에 대한 바람직한 방법이 전체적으로 참조번호(600)으로 나타낸다. 방법(600)은 제어를 기능 블록(610)으로 이전하는 시작 블록(605)을 포함한다. 기능 블록(610)은 인코딩 설정을 수행하고, 제어를 기능 블록(621)으로 이전한다. 기능 블록(621)은 비디오 시퀀스에서 현재 픽처에 대해 제1 인코딩 패스를 수행하고, 기능 블록(623)으로 제어를 이전한다. 기능 블록(623)은 복잡도 분석을 수행하고, 기능 블록(625)으로 제어를 이전한다. 기능 블록(625)은 제2 인코딩 패스를 수행하고, 제어를 기능 블록(690) 및 루프 리미트 블록(630)으로 이전한다.
기능 블록(690)은 버퍼에 비트스트림을 저장하고, 제어를 기능 블록(640)으로 이전한다.
루프 리미트 블록(630)은 비디오 시퀀스에서 각 픽처에 대해 루프하는 품질 검사 루프를 시작하고, 제어를 기능 블록(640)으로 이전한다.
기능 블록(640)은 비디오 품질 분석을 수행하고, 제어를 결정 블록(650) 및 기능 블록(680)으로 이전한다. 결정 블록(650)은 리인코딩이 수행되어야 하는지 여부를 결정한다. 수행되어야 한다면, 제어는 기능 블록(665)으로 이전된다. 그렇지 않으면, 제어는 루프 리미트 블록(660)으로 이전된다.
기능 블록(660)은 비디오 시퀀스에서 각 픽처에 대해 루프를 종료하고, 제어를 종료 블록(670)으로 이전한다.
기능 블록(665)는 리인코딩 카운터를 1만큼씩 증가시키고, 제어를 결정 블록(675)로 이전한다. 결정 블록(675)은 리인코딩 카운터가 임계값을 초과하는지 여부를 결정한다. 초과하면, 제어는 기능 블록(685)로 이전된다. 그렇지 않으면, 제어는 기능 블록(680)으로 이전된다.
기능 블록(685)는 로그 파일을 출력하고, 제어를 종료 블록(670)으로 이전한다.
기능 블록(680)은 리인코딩 설정을 수행하고, 제어를 기능 블록(625)으로 반환한다. 기능 블록(680)에 대해, 이에 의해 수행된 리인코딩 설정은 예컨대 대상 비트율, 디블로킹 필터의 강도, 및/또는 다른 인코딩 파라미터를 조정하고, 및/또는 리인코딩될 장면들을 제한하는 것을 포함할 수 있다. 예컨대, 기능 블록(680)은 리인코딩될 장면들을 최대수 N개의 장면 (예컨대, 최저 품질을 갖는 N개의 장면)으로 제한할 수 있고, 임계값 미만의 시각적 품질 메트릭스를 갖는 장면들만이 리인코딩되게 제한할 수 있고, 및/또는 X%의 장면들 (예컨대, 최저 품질을 갖는 것부터 시작하여)이 리인코딩되게 제한할 수 있다. 기능 블록(480)에 대해 주어진 상기 예들에서, 변수 X는 선택된 백분율을 나타내고, 정수값 또는 비정수값으로 표현될 수 있다.
도 6의 방법(600)의 다양한 요소들은 본 발명의 일실시예에 대해 더 설명하기로 한다. 기능 블록(621)은 제1 인코딩 패스를 나타내고, 이것은 고정된 양자화 지점 (QP), 일정 비트율에서 실행될 수 있고, 또는 사전 분석 패스로 제한될 수도 있다. 기능 블록(623)은 제1 패스로부터의 데이터에 기초하여 최종 비트율 할당을 결정하는 복잡도 분석기 프로세스를 나타낸다. 기능 블록(625)은 출력 비트스트림을 생성하는 제2 인코딩 패스를 나타낸다. 리인코딩은 기능 블록(625)에서 제2 인코딩 패스의 실행만을 필요로 함에 유의한다. 도 6의 방법(600)은, 당업자에게 분명하듯이, 본 발명의 범위를 유지하면서, 셋 이상의 패스를 갖는 인코딩 알고리즘을 지원하도록 용이하게 확장될 수 있다.
비디오 품질 분석 및 리인코딩 설정 중 하나 또는 모두가 자동화될 수 있음은 물론이다. 예컨대, 도 4, 5 및 6에서 각각 기능 블록(440, 540 및 640)에 의해 수행된 비디오 품질 분석이 자동화될 수 있고, 및/또는 도 4, 5 및 6에서 각각 기능 블록(480, 580 및 680)에 의해 수행된 리인코딩 설정이 자동화될 수 있다. 여기 제공된 본 발명의 교시내용을 고려하면, 본 발명의 상기 및 다른 변경 및 구현이 본 발명의 범위를 유지하면서 당업자에 의해 용이하게 구현된다.
이하 본 발명의 많은 부수적인 장점/특징의 일부에 대해 설명하는데 이중 일 부는 앞서 언급되었다. 예를 들면, 한가지 장점/특징은 비디오 인코더 및 이 인코더와 신호 통신하는 비디오 품질 분석기를 포함하는 멀티 패스 비디오 인코딩을 위한 장치이다. 비디오 인코더는 비디오 비트스트림을 인코딩하기 위한 것이다. 비디오 품질 분석기는 비디오 비트스트림에서 인코더 압축 가공물을 검출하기 위해 주어진 인코딩 패스에 대해 비디오 비트스트림의 비디오 품질 분석을 수행하고 상기 인코더의 리인코딩 설정을 가능하게 하여 차후 리인코딩 패스에서 인코더 압축 가공물의 발생을 줄이도록 인코더 압축 가공물에 관한 정보를 상기 인코더에 제공하기 위한 것이다. 비디오 품질 분석 및 리인코딩 설정 중 적어도 하나는 자동화된다.
다른 장점/특징은 상기한 바와 같이 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 비디오 품질 분석기는 시각적 품질 메트릭스를 계산함으로써 인코더 압축 가공물을 검출한다.
또다른 장점/특징은 상기한 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 리인코딩 설정은 대상 비트율을 조정하는 것을 포함한다.
또다른 장점/특징은 상기한 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 비디오 인코더는 디블로킹 필터를 포함하고 리인코딩 설정은 디블로킹 필터의 세기를 조정하는 것을 포함한다.
또한, 다른 장점/특징은 상기한 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 리인코딩 설정은 인코딩 파라미터를 조정하는 것을 포함한다.
또한, 또다른 장점/특징은 상기한 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 리인코딩 패스의 전체 수는 최대값으로 제한된다.
또다른 장점/특징은 상기한 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 비디오 품질 분석기는 보조 리인코딩 동안 조작자를 보조하기 위한 데이터와 함께 로그 파일을 출력한다.
또한, 다른 장점/특징은 상기한 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 비디오 인코더는 ISO/IEC MPEG-4 파트 10 AVC 표준/ITU-T H.264 권고에 따른다.
또한, 다른 장점/특징은 상기한 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 비디오 비트스트림의 인코딩은 다수의 패스에서 수행되어, 비디오 비트스트림의 리인코딩은 최종 인코딩 패스만을 필요로 한다.
또한, 또다른 장점/특징은 상기한 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 복수의 장면의 수를 임계값 보다 작은 인코더 가공물을 갖는 복수의 장면 중 임의의 것 중에서 최대 수 N개의 장면으로 제한하는 것을 포함한다.
또한, 또다른 장점/특징은 상기한 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 복수의 장면의 수를 복수의 장면 중에서 임계값 보다 작은 인코더 압축 가공물을 갖는 장면들만이 리인코딩되도록 제한하는 것을 포함한다.
또한, 또다른 장점/특징은 상기한 비디오 인코더 및 비디오 품질 분석기를 구비한 장치로서, 상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 복수의 장면의 수를 임계값 보다 작은 인코더 압축 가공물을 갖는 복수의 장면들의 X% 만이 리인코딩되도록 제한하는 것을 포함한다. X는 정수 및 비 정수값 중 하나를 나타낸다.
또한, 또다른 장점/특징은 비디오 품질 분석기를 구비한 멀티 패스 비디오 인코더와 함께 사용하기 위한 장치이다. 비디오 품질 분석기는, 비디오 비트스트림에서 인코더 압축 가공물을 검출하기 위해 주어진 인코딩 패스에 대해 비디오 비트스트림의 비디오 품질 분석을 수행하고, 상기 인코더의 리인코딩 설정을 가능하게 하여 차후 리인코딩 패스에서 인코더 압축 가공물의 발생을 줄이도록 인코더 압축 가공물에 관한 정보를 상기 인코더에 제공하기 위한 것이다. 비디오 품질 분석 및 리인코딩 설정 중 적어도 하나는 자동화된다.
다른 장점/특징은 상기한 바와 같은 비디오 품질 분석기를 구비한 장치로서, 비디오 품질 분석기는 시각적 품질 메트릭스를 계산함으로써 비디오 품질 분석을 수행한다.
또한, 또다른 장점/특징은 상기한 비디오 품질 분석기를 구비한 장치로서, 리인코딩 설정은 대상 비트율을 조정하는 것을 포함한다.
또한, 또다른 장점/특징은 상기한 비디오 품질 분석기를 구비한 장치로서, 비디오 인코더는 디블로킹 필터를 포함하고 리인코딩 설정은 디블로킹 필터의 세기를 조정하는 것을 포함한다.
또한, 다른 장점/특징은 상기한 비디오 품질 분석기를 구비한 장치로서, 리 인코딩 설정은 인코딩 파라미터를 조정하는 것을 포함한다.
또한, 또다른 장점/특징은 상기한 비디오 품질 분석기를 구비한 장치로서, 리인코딩 패스의 전체 수는 최대값으로 제한된다.
또다른 장점/특징은 상기한 비디오 품질 분석기를 구비한 장치로서, 비디오 품질 분석기는 보조 리인코딩 동안 조작자를 보조하기 위한 데이터와 함께 로그 파일을 출력한다.
또한, 또다른 장점/특징은 상기한 비디오 품질 분석기를 구비한 장치로서, 비디오 인코더는 ISO/IEC MPEG-4 파트 10 AVC 표준/ITU-T H.264 권고에 따른다.
또한, 다른 장점/특징은 상기한 비디오 품질 분석기를 구비한 장치로서, 비디오 비트스트림의 인코딩은 다수의 패스에서 수행되어, 비디오 비트스트림의 리인코딩은 최종 인코딩 패스만을 필요로 한다.
또한, 또다른 장점/특징은 상기한 비디오 품질 분석기를 구비한 장치로서, 상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 복수의 장면의 수를 임계값 보다 작은 인코더 가공물을 갖는 복수의 장면 중 임의의 것 중에서 최대 수 N개의 장면으로 제한하는 것을 포함한다.
또한, 또다른 장점/특징은 상기한 비디오 품질 분석기를 구비한 장치로서, 상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 복수의 장면의 수를 복수의 장면 중에서 임계값 보다 작은 인코더 압축 가공물을 갖는 장면들만이 리인코딩되도록 제한하는 것을 포함한다.
또한, 또다른 장점/특징은 상기한 비디오 품질 분석기를 구비한 장치로서, 상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 복수의 장면의 수를 임계값 보다 작은 인코더 압축 가공물을 갖는 복수의 장면들의 X% 만이 리인코딩되도록 제한하는 것을 포함한다. X는 정수 및 비 정수값 중 하나를 나타낸다.
본 발명의 상기 및 다른 특징 및 장점은 여기 교시내용에 기초하여 당업자에 의해 용이하게 확인될 수 있다. 본 발명의 교시는 다양한 형태의 하드웨어, 소프트웨어, 펌웨어, 특별목적의 프로세서, 또는 그 조합으로 구현될 수 있다.
가장 바람직하게는, 본 발명의 교시는 하드웨어 및 소프트웨어의 조합으로서 구현된다. 또한, 소프트웨어는 프로그램 저장장치에서 명백히 실시된 애플리케이션 프로그램으로서 구현될 수 있다. 애플리케이션 프로그램은 임의의 적절한 아키텍처를 포함하는 기계로 업로드되고 이에 의해 실행될 수 있다. 바람직하게는, 이 기계는 하나 이상의 중앙처리장치 ("CPU"), RAM (random access memory), 및 I/O (input/output) 인터페이스와 같은 하드웨어를 갖는 컴퓨터 플랫폼에서 구현된다. 컴퓨터 플랫폼은 운영체제 및 마이크로 명령 코드를 포함할 수 있다. 여기 설명된 다양한 프로세스 및 기능은 CPU에 의해 실행될 수 있는 마이크로 명령 코드의 일부 또는 애플리케이션 프로그램의 일부, 또는 그 임의의 조합일 수 있다. 또한, 다양한 다른 주변장치들은 별도의 데이터 저장장치 및 인쇄장치와 같은 컴퓨터 플랫폼에 연결될 수 있다.
첨부 도면에 도시된 시스템 구성요소들 및 방법들 중 일부는 소프트웨어로 구현되는 것이 바람직하기 때문에, 시스템 구성요소들 또는 프로세스 기능 블록들 사이의 실제 접속은 본 발명이 프로그래밍되는 방식에 따라 다를 수 있음은 물론이다. 여기 교시내용을 고려하면, 당업자라면 본 발명의 상기 및 유사한 구현예 또는 구성을 예기할 수 있을 것이다.
상기 실시예들이 첨부 도면을 참조하여 여기 설명되었지만, 본 발명은 이 실시예들에 한정되는 것이 아니고 본 발명의 범위나 사상에 벗어남 없이 다양한 변경과 수정이 당업자에 의해 달성될 수 있음은 물론이다. 이러한 모든 변경과 수정은 첨부된 청구범위에서 설명되는 바와 같이 본 발명의 범위에 포함되는 것이다.

Claims (48)

  1. 멀티 패스 (multi-pass) 비디오 인코딩을 위한 장치에 있어서,
    비디오 비트스트림을 인코딩하는 비디오 인코더(200); 및
    상기 인코더와 신호교신하여, 상기 비디오 비트스트림에서 인코더 압축 가공물(artifacts)을 검출하기 위해 주어진 인코딩 패스에 대한 상기 비디오 비트스트림의 비디오 품질 분석을 수행하고, 상기 인코더의 리인코딩 설정을 가능하게 하여 차후의 리인코딩(re-encoding) 패스에서 인코더 압축 가공물의 발생을 줄이기 위하여 상기 인코더 압축 가공물에 대한 정보를 상기 인코더로 제공하는 비디오 품질 분석기(300)를 포함하고,
    상기 비디오 품질 분석과 상기 리인코딩 설정 중 적어도 하나는 자동화되는 멀티 패스 비디오 인코딩 장치.
  2. 제1항에 있어서,
    상기 비디오 품질 분석기(300)는 시각적 품질 메트릭스(metrics)를 계산함으로써 인코더 압축 가공물을 검출하는 멀티 패스 비디오 인코딩 장치.
  3. 제1항에 있어서,
    상기 리인코딩 설정은 대상(target) 비트율을 조정하는 것을 포함하는 멀티 패스 비디오 인코딩 장치.
  4. 제1항에 있어서,
    상기 비디오 인코더(200)는 디블로킹(deblocking) 필터를 포함하고, 상기 리인코딩 설정은 상기 디블로킹 필터의 세기를 조정하는 것을 포함하는 멀티 패스 비디오 인코딩 장치.
  5. 제1항에 있어서,
    상기 리인코딩 설정은 인코딩 파라미터를 조정하는 것을 포함하는 멀티 패스 비디오 인코딩 장치.
  6. 제1항에 있어서,
    리인코딩 패스의 총 수는 최대값으로 제한되는 멀티 패스 비디오 인코딩 장치.
  7. 제1항에 있어서,
    상기 비디오 품질 분석기(300)는 보조 리인코딩 (assisted re-encoding) 동안 조작자를 보조하기 위한 데이터와 함께 로그 파일을 출력하는 멀티 패스 비디오 인코딩 장치.
  8. 제1항에 있어서,
    상기 비디오 인코더(200)는 ISO/IEC MPEG-4 파트 10 AVC 표준/ITU-T H.264 권고 (International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendation)에 따르는 멀티 패스 비디오 인코딩 장치.
  9. 제1항에 있어서,
    상기 비디오 비트스트림의 인코딩은 다수의 패스들(passes)에서 수행되어서, 상기 비디오 비트스트림의 리인코딩이 최종 인코딩 패스만을 필요로 하는 멀티 패스 비디오 인코딩 장치.
  10. 제1항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 최대수 N개의 장면으로 제한하는 것을 포함하는 멀티 패스 비디오 인코딩 장치.
  11. 제1항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 제한하여 상기 복수의 장면 중에서 소정의 임 계값 보다 작은 상기 인코더 압축 가공물을 갖는 장면만이 리인코딩되도록 하는 것을 포함하는 멀티 패스 비디오 인코딩 장치.
  12. 제1항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 상기 복수의 장면의 X%로 제한하는 것을 포함하고, 여기서 X는 정수 및 비정수 값 중 하나를 나타내는 멀티 패스 비디오 인코딩 장치.
  13. 멀티 패스 비디오 인코더와 사용하기 위한 장치에 있어서,
    주어진 인코딩 패스에 대한 비디오 비트스트림의 비디오 품질 분석을 수행하여 상기 비디오 비트스트림에서 인코더 압축 가공물을 검출하고, 상기 비디오 인코더의 리인코딩 설정을 가능하게 하여 차후의 리인코딩 패스에서 상기 인코더 압축 가공물의 발생을 줄이기 위하여 상기 인코더 압축 가공물에 관한 정보를 상기 비디오 인코더에 제공하는 비디오 품질 분석기(300)를 포함하고,
    상기 비디오 품질 분석과 상기 리인코딩 설정 중 적어도 하나는 자동화되는 장치.
  14. 제13항에 있어서,
    상기 비디오 품질 분석기(300)는 시각적 품질 메트릭스를 계산함으로써 상기 비디오 품질 분석을 수행하는 장치.
  15. 제13항에 있어서,
    상기 리인코딩 설정은 대상 비트율을 조정하는 것을 포함하는 장치.
  16. 제13항에 있어서,
    상기 비디오 인코더는 디블로킹 필터를 포함하고, 상기 리인코딩 설정은 상기 디블로킹 필터의 세기를 조정하는 것을 포함하는 장치.
  17. 제13항에 있어서,
    상기 리인코딩 설정은 인코딩 파라미터를 조정하는 것을 포함하는 장치.
  18. 제13항에 있어서,
    리인코딩 패스의 총 수는 최대값으로 제한되는 장치.
  19. 제13항에 있어서,
    상기 비디오 품질 분석기(300)는 보조 리인코딩 동안 조작자를 보조하기 위한 데이터와 함께 로그 파일을 출력하는 장치.
  20. 제13항에 있어서,
    상기 비디오 인코더는 ISO/IEC MPEG-4 파트 10 AVC 표준/ITU-T H.264 권고 (International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendation)에 따르는 장치.
  21. 제13항에 있어서,
    상기 비디오 비트스트림의 인코딩은 다수의 패스들(passes)에서 수행되어서, 상기 비디오 비트스트림의 리인코딩이 최종 인코딩 패스만을 필요로 하는 장치.
  22. 제13항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 최대수 N개의 장면으로 제한하는 것을 포함하는 장치.
  23. 제13항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 제한하여 상기 복수의 장면 중에서 임계값 보다 작은 상기 인코더 압축 가공물을 갖는 장면만이 리인코딩되도록 하는 것을 포함하는 장치.
  24. 제13항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 상기 복수의 장면의 X%로 제한하는 것을 포함하고, 여기서 X는 정수 및 비정수 값 중 하나를 나타내는 장치.
  25. 멀티 패스 비디오 인코딩을 위한 방법에 있어서,
    주어진 인코딩 패스에서 비디오 비트스트림을 인코딩하는 단계(420, 520, 621);
    상기 비트스트림 내의 인코더 압축 가공물을 검출하기 위해, 상기 주어진 인코딩 패스에서 인코딩된 상기 비디오 비트스트림의 비디오 품질 분석을 수행하는 단계(440, 540, 640);
    상기 인코더 압축 가공물에 관한 상기 비디오 품질 분석으로부터 얻어진 정보에 기초하여, 차후의 리인코딩 패스에서 상기 인코더 압축 가공물의 발생을 줄이기 위해 상기 비디오 비트스트림에 대한 리인코딩 설정을 수행하는 단계(480, 580, 680)를 포함하고,
    상기 비디오 품질 분석 및 상기 리인코딩 설정 중 적어도 하나는 자동화되는 멀티 패스 비디오 인코딩 방법.
  26. 제25항에 있어서,
    상기 비디오 품질 분석을 수행하는 단계는 시각적 품질 메트릭스를 계산하는 단계(450, 550, 650)를 포함하는 멀티 패스 비디오 인코딩 방법.
  27. 제25항에 있어서,
    상기 리인코딩 설정은 대상 비트율을 조정하는 단계(480, 580, 680)를 포함하는 멀티 패스 비디오 인코딩 방법.
  28. 제25항에 있어서,
    상기 인코더는 디블로킹 필터를 포함하고, 상기 리인코딩 설정은 상기 디블로킹 필터의 세기를 조정하는 단계(480, 580, 680)를 포함하는 멀티 패스 비디오 인코딩 방법.
  29. 제25항에 있어서,
    상기 리인코딩 설정은 인코딩 파라미터를 조정하는 단계(480, 580, 680)를 포함하는 멀티 패스 비디오 인코딩 방법.
  30. 제25항에 있어서,
    리인코딩 패스의 총 수는 최대값으로 제한되는 멀티 패스 비디오 인코딩 방법.
  31. 제25항에 있어서,
    상기 비디오 품질 분석을 수행하는 단계는 보조 리인코딩 동안 조작자를 보조하기 위한 데이터와 함께 로그 파일을 출력하는 단계(585, 685)를 포함하는 멀티 패스 비디오 인코딩 방법.
  32. 제25항에 있어서,
    상기 비디오 인코더는 ISO/IEC MPEG-4 파트 10 AVC 표준/ITU-T H.264 권고 (International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendation)에 따르는 멀티 패스 비디오 인코딩 방법.
  33. 제25항에 있어서,
    상기 비디오 비트스트림의 인코딩은 다수의 패스들(passes)에서 수행되어서, 상기 비디오 비트스트림의 리인코딩이 최종 인코딩 패스만을 필요로 하는 멀티 패스 비디오 인코딩 방법.
  34. 제25항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 최대수 N개의 장면으로 제한하는 것(480, 580, 680)을 포함하는 멀티 패스 비디오 인코딩 방법.
  35. 제25항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 제한하여 상기 복수의 장면 중에서 임계값 보다 작은 상기 인코더 압축 가공물을 갖는 장면만이 리인코딩되도록 하는 것(480, 580, 680)을 포함하는 멀티 패스 비디오 인코딩 방법.
  36. 제25항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 상기 복수의 장면의 X%로 제한하는 것을 포함하고, 여기서 X는 정수 및 비정수 값 중 하나를 나타내는(480, 580, 680) 멀티 패스 비디오 인코딩 방법.
  37. 멀티 패스 비디오 인코더와 사용하기 위한 방법에 있어서,
    주어진 인코딩 패스에 대한 비디오 비트스트림의 비디오 품질 분석을 수행하여 상기 비디오 비트스트림에서 인코더 압축 가공물을 검출하는 수행 단계(440, 540, 640); 및
    상기 비디오 인코더의 리인코딩 설정을 가능하게 하여 차후의 리인코딩 패스 에서 상기 인코더 압축 가공물의 발생을 줄이기 위해 상기 인코더 압축 가공물에 관한 정보를 상기 비디오 인코더에 제공하는 단계(480, 580, 680)를 포함하고,
    상기 비디오 품질 분석 및 상기 리인코딩 설정 중 적어도 하나는 자동화되는 방법.
  38. 제37항에 있어서,
    상기 수행 단계는 시각적 품질 메트릭스를 계산하는 단계(450, 550, 650)를 포함하는 방법.
  39. 제37항에 있어서,
    상기 리인코딩 설정은 대상 비트율을 조정하는 단계(480, 580, 680)를 포함하는 방법.
  40. 제37항에 있어서,
    상기 인코더는 디블로킹 필터를 포함하고, 상기 리인코딩 설정은 상기 디블로킹 필터의 세기를 조정하는 단계(480, 580, 680)를 포함하는 방법.
  41. 제37항에 있어서,
    상기 리인코딩 설정은 인코딩 파라미터를 조정하는 단계(480, 580, 680)를 포함하는 방법.
  42. 제37항에 있어서,
    리인코딩 패스의 총 수는 최대값으로 제한되는 방법.
  43. 제37항에 있어서,
    상기 수행 단계는 보조 리인코딩 동안 조작자를 보조하기 위한 데이터와 함께 로그 파일을 출력하는 단계(585, 685)를 포함하는 방법.
  44. 제37항에 있어서,
    상기 비디오 인코더는 ISO/IEC MPEG-4 파트 10 AVC 표준/ITU-T H.264 권고 (International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendation)에 따르는 방법.
  45. 제37항에 있어서,
    상기 비디오 비트스트림의 인코딩은 다수의 패스들(passes)에서 수행되어서, 상기 비디오 비트스트림의 리인코딩이 최종 인코딩 패스만을 필요로 하는 방법.
  46. 제37항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 최대수 N개의 장면으로 제한하는 것(480, 580, 680)을 포함하는 방법.
  47. 제37항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 제한하여 상기 복수의 장면 중에서 임계값 보다 작은 상기 인코더 압축 가공물을 갖는 장면만이 리인코딩되도록 하는 것(480, 580, 680)을 포함하는 방법.
  48. 제37항에 있어서,
    상기 비디오 비트스트림은 복수의 장면을 포함하고, 상기 리인코딩 설정은 리인코딩될 상기 복수의 장면의 수를 상기 복수의 장면의 X%로 제한하는 것을 포함하고, 여기서 X는 정수 및 비정수 값 중 하나를 나타내는(480, 580, 680) 방법.
KR1020097000519A 2006-07-10 2007-06-15 멀티 패스 비디오 인코더에서 성능 향상을 위한 방법 및 장치 KR101373934B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US80686206P 2006-07-10 2006-07-10
US60/806,862 2006-07-10
PCT/US2007/014019 WO2008008150A2 (en) 2006-07-10 2007-06-15 Methods and apparatus for enhanced performance in a multi-pass video encoder

Publications (2)

Publication Number Publication Date
KR20090040288A true KR20090040288A (ko) 2009-04-23
KR101373934B1 KR101373934B1 (ko) 2014-03-12

Family

ID=38923736

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020097000519A KR101373934B1 (ko) 2006-07-10 2007-06-15 멀티 패스 비디오 인코더에서 성능 향상을 위한 방법 및 장치

Country Status (7)

Country Link
US (1) US9204173B2 (ko)
EP (1) EP2041980A2 (ko)
JP (1) JP5437066B2 (ko)
KR (1) KR101373934B1 (ko)
CN (1) CN101485209B (ko)
BR (1) BRPI0713916A2 (ko)
WO (1) WO2008008150A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180046217A (ko) * 2016-10-27 2018-05-08 주식회사 에스원 계산-율-왜곡을 최적화하는 방법 및 장치, 그리고 이를 이용해 영상 프레임을 부호화하는 방법 및 장치

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2160900A1 (en) * 2007-06-12 2010-03-10 Thomson Licensing Methods and apparatus supporting multi-pass video syntax structure for slice data
US9304994B2 (en) * 2007-08-30 2016-04-05 At&T Intellectual Property Ii, L.P. Media management based on derived quantitative data of quality
US20120020415A1 (en) * 2008-01-18 2012-01-26 Hua Yang Method for assessing perceptual quality
US8780988B2 (en) * 2008-02-28 2014-07-15 Vixs Systems, Inc. Hierarchical video analysis-based real-time perceptual video coding
US8798137B2 (en) * 2008-02-29 2014-08-05 City University Of Hong Kong Bit rate estimation in data or video compression
US8942215B2 (en) 2010-07-15 2015-01-27 Dejero Labs Inc. System and method for transmission of data from a wireless mobile device over a multipath wireless router
US10033779B2 (en) 2009-07-08 2018-07-24 Dejero Labs Inc. Multipath data streaming over multiple wireless networks
US10117055B2 (en) 2009-07-08 2018-10-30 Dejero Labs Inc. System and method for providing data services on vehicles
US10165286B2 (en) 2009-07-08 2018-12-25 Dejero Labs Inc. System and method for automatic encoder adjustment based on transport data
US9756468B2 (en) 2009-07-08 2017-09-05 Dejero Labs Inc. System and method for providing data services on vehicles
CN102428705B (zh) 2010-03-18 2014-12-24 松下电器(美国)知识产权公司 数据处理装置以及数据处理方法
WO2013074365A1 (en) * 2011-11-18 2013-05-23 Dolby Laboratories Licensing Corporation Subjective based post-filter optimization
WO2013075318A1 (en) * 2011-11-24 2013-05-30 Thomson Licensing Video quality measurement
CN102685482A (zh) * 2011-12-12 2012-09-19 苏州科雷芯电子科技有限公司 混合式编解码方法及装置
US8675731B2 (en) * 2012-08-13 2014-03-18 Gurulogic Microsystems Oy Encoder and method
KR20150052049A (ko) * 2012-08-27 2015-05-13 톰슨 라이센싱 비디오 품질 평가를 위해 모션 균일성을 추정하기 위한 방법 및 장치
US20140254659A1 (en) 2013-03-11 2014-09-11 Mediatek Inc. Video coding method using at least evaluated visual quality and related video coding apparatus
US9495526B2 (en) * 2013-03-15 2016-11-15 Eyelock Llc Efficient prevention of fraud
CA2955979C (en) * 2014-07-31 2023-01-10 Dejero Labs Inc. System and method for automatic encoder adjustment based on transport data
US10313675B1 (en) 2015-01-30 2019-06-04 Google Llc Adaptive multi-pass video encoder control
US10631012B2 (en) * 2016-12-02 2020-04-21 Centurylink Intellectual Property Llc Method and system for implementing detection and visual enhancement of video encoding artifacts
KR102282455B1 (ko) * 2017-07-11 2021-07-28 한화테크윈 주식회사 영상 처리 장치 및 영상 처리 방법
KR102347598B1 (ko) 2017-10-16 2022-01-05 삼성전자주식회사 영상 부호화 장치 및 인코더
US11259040B1 (en) * 2019-04-25 2022-02-22 Amazon Technologies, Inc. Adaptive multi-pass risk-based video encoding

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5249053A (en) * 1991-02-05 1993-09-28 Dycam Inc. Filmless digital camera with selective image compression
US5640208A (en) * 1991-06-27 1997-06-17 Sony Corporation Video signal encoding in accordance with stored parameters
JP3644056B2 (ja) * 1994-11-01 2005-04-27 ソニー株式会社 符号化装置および符号化方法
US5640298A (en) * 1995-07-28 1997-06-17 Imation Corp. Recording disc cartridge having centrally-located, integral, raised wear surface
US6529631B1 (en) * 1996-03-29 2003-03-04 Sarnoff Corporation Apparatus and method for optimizing encoding and performing automated steerable image compression in an image coding system using a perceptual metric
US6591058B1 (en) * 1997-12-23 2003-07-08 Intel Corporation Time shifting by concurrently recording and playing a data stream
JP3825615B2 (ja) 2000-08-11 2006-09-27 株式会社東芝 動画像符号化装置および動画像符号化方法およびプログラムを記録した媒体
US20060204115A1 (en) * 2003-03-03 2006-09-14 Dzevdet Burazerovic Video encoding
CN1843038B (zh) * 2003-08-26 2010-09-22 汤姆森特许公司 用于解码混合内部-相互编码块的方法和装置
US8625680B2 (en) * 2003-09-07 2014-01-07 Microsoft Corporation Bitstream-controlled post-processing filtering
JP2006101321A (ja) 2004-09-30 2006-04-13 Toshiba Corp 情報処理装置および同装置で用いられるプログラム
EP1646243B1 (en) * 2004-09-30 2009-06-24 Kabushiki Kaisha Toshiba Information processing apparatus and program for use in the same
US7555715B2 (en) * 2005-10-25 2009-06-30 Sonic Solutions Methods and systems for use in maintaining media data quality upon conversion to a different data format

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180046217A (ko) * 2016-10-27 2018-05-08 주식회사 에스원 계산-율-왜곡을 최적화하는 방법 및 장치, 그리고 이를 이용해 영상 프레임을 부호화하는 방법 및 장치

Also Published As

Publication number Publication date
BRPI0713916A2 (pt) 2012-11-06
JP2009543515A (ja) 2009-12-03
WO2008008150A2 (en) 2008-01-17
US20090323803A1 (en) 2009-12-31
CN101485209B (zh) 2011-12-14
CN101485209A (zh) 2009-07-15
WO2008008150A3 (en) 2008-05-08
EP2041980A2 (en) 2009-04-01
JP5437066B2 (ja) 2014-03-12
US9204173B2 (en) 2015-12-01
KR101373934B1 (ko) 2014-03-12

Similar Documents

Publication Publication Date Title
KR101373934B1 (ko) 멀티 패스 비디오 인코더에서 성능 향상을 위한 방법 및 장치
US9942557B2 (en) Method and system of video encoding optimization
US8340182B2 (en) Video decoding apparatus and video decoding method
CN108769693B (zh) 质量感知视频优化中的宏块级自适应量化
US9794597B2 (en) Methods and apparatus for deblocking filtering of non-local intra prediction
US9756326B2 (en) Video coding method using at least evaluated visual quality and related video coding apparatus
KR101320260B1 (ko) 비디오 신호 데이터를 인코딩 및 디코딩하기 위한 방법 및 장치
US8718138B2 (en) Image encoding apparatus and image encoding method that determine an encoding method, to be used for a block to be encoded, on the basis of an intra-frame-prediction evaluation value calculated using prediction errors between selected reference pixels and an input image
US20110255589A1 (en) Methods of compressing data and methods of assessing the same
KR101810263B1 (ko) 분류-기반 루프 필터에 대한 방법들 및 장치
JP2010509842A (ja) インループのアーチファクト除去フィルタリングのための方法および装置
JP5805097B2 (ja) 映像符号化及び復号化のためのdcイントラ予測モードのための方法及び装置
US20100290524A1 (en) Method and apparatus for joint quantization parameter adjustment
US9736500B2 (en) Methods and apparatus for spatially varying residue coding
CN104041035A (zh) 用于复合视频的无损编码及相关信号表示方法
KR101603747B1 (ko) 비디오 인코딩에서 속도 제어 정확성을 위한 방법 및 장치
US10368071B2 (en) Encoding data arrays
JP2012527160A (ja) 映像符号化及び復号化のための、改善された量子化の丸めのオフセットを調節する方法及び装置
TW201933868A (zh) 視訊編解碼方法/裝置和相應地非易失性計算機可讀介質
CN102439975A (zh) 用于在基于稀疏性的去伪影滤波中响应于可变变换的滤波器参数的确定和选择的方法和设备
KR102631837B1 (ko) 픽처 시퀀스를 인코딩 및 디코딩하기 위한 방법들 및 디바이스들, 및 대응하는 컴퓨터 프로그램 제품들 및 컴퓨터 판독가능 매체들
US20170105012A1 (en) Method and Apparatus for Cross Color Space Mode Decision
TWI383685B (zh) 編碼系統與解碼系統以及編碼方法與解碼方法
Le Pendu et al. Template based inter-layer prediction for high dynamic range scalable compression
KR101193790B1 (ko) 비디오 코덱 양자화를 위한 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee