KR20150023323A - 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보의 재사용을 위한 시스템들 및 방법들 - Google Patents

비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보의 재사용을 위한 시스템들 및 방법들 Download PDF

Info

Publication number
KR20150023323A
KR20150023323A KR1020147033593A KR20147033593A KR20150023323A KR 20150023323 A KR20150023323 A KR 20150023323A KR 1020147033593 A KR1020147033593 A KR 1020147033593A KR 20147033593 A KR20147033593 A KR 20147033593A KR 20150023323 A KR20150023323 A KR 20150023323A
Authority
KR
South Korea
Prior art keywords
encoding
video data
stream
resolution
bit rate
Prior art date
Application number
KR1020147033593A
Other languages
English (en)
Other versions
KR102144557B1 (ko
Inventor
세르제이 주르팔
레오니드 볼닌
Original Assignee
쏘닉 아이피, 아이엔씨.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 쏘닉 아이피, 아이엔씨. filed Critical 쏘닉 아이피, 아이엔씨.
Publication of KR20150023323A publication Critical patent/KR20150023323A/ko
Application granted granted Critical
Publication of KR102144557B1 publication Critical patent/KR102144557B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/39—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability involving multiple description coding [MDC], i.e. with separate layers being structured as independently decodable descriptions of input picture data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/53—Multi-resolution motion estimation; Hierarchical motion estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/87—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving scene cut or scene change detection in combination with video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명의 실시예들에 따른 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보를 재사용하기 위한 시스템들 및 방법들이 개시된다 본 발명의 일 실시예에서, 적응식 스트리밍 시스템들에서 사용을 위한 멀티미디어 콘텐트의 인코딩은, 미디어 서버를 사용하여 복수의 인코딩 레벨들로부터 제 1 인코딩 레벨을 선택하는 단계, 제 1 인코딩 레벨 및 미디어 서버를 사용하여 비디오 데이터의 제 1 스트림에 대한 인코딩 정보를 결정하는 단계, 미디어 서버를 사용하여 비디오 데이터의 제 1 스트림을 인코딩하는 단계로서, 상기 비디오 데이터의 제 1 스트림은 제 1 해상도 및 제 1 비트레이트를 포함하는, 상기 비디오 데이터의 제 1 스트림을 인코딩하는 단계, 미디어 서버를 사용하여 복수의 인코딩 레벨들로부터 제 2 인코딩 레벨을 선택하는 단계, 및 인코딩 정보 및 미디어 서버를 사용하여 비디오 데이터의 제 2 스트림을 인코딩하는 단계로서, 상기 비디오 데이터의 제 2 스트림은 제 2 해상도 및 제 2 비트레이트를 포함하는, 상기 비디오 데이터의 제 2 스트림을 인코딩하는 단계를 포함한다.

Description

비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보의 재사용을 위한 시스템들 및 방법들{SYSTEMS AND METHODS FOR THE REUSE OF ENCODING INFORMATION IN ENCODING ALTERNATIVE STREAMS OF VIDEO DATA}
본 발명은 일반적으로, 적응식 스트리밍 시스템들을 위한 시스템들 및 방법들에 관한 것이고, 더 구체적으로 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보를 재사용하기 위한 시스템들 및 방법들에 관한 것이다.
용어 스트리밍 미디어는 재생 디바이스상에 미디어의 재생을 기술하고, 미디어는 서버상에 저장되고 재생 동안 네트워크를 통해 재생 디바이스에 연속적으로 전송된다. 일반적으로, 재생 디바이스는 미디어의 다음 부분의 수신 전에 모든 버퍼링된 미디어의 재생을 완료하는 재생 디바이스로 인한 재생의 중단을 방지하기 위해 재생 동안 임의의 주어진 시간에서 버퍼에 충분한 양의 미디어를 저장한다. 적응식 비트레이트 스트리밍, 또는 적응식 스트리밍은 실시간으로 현재 스트리밍 상태들(예를 들면, 사용자의 네트워크 대역폭 및 CPU 용량)을 검출하는 것 및 스트리밍된 미디어의 양을 적절하게 조정하는 것을 포함한다. 인터넷을 통해 비디오를 스트리밍하는 것은 현시대의 하나의 현상이 되었다. 캘리포니아, 마운틴 뷰의 구글사의 서비스인, 유튜브, 및 코네티컷, 브리스톨의 ESPN의 서비스인, WatchESPN와 같은 많은 인기있는 웹사이트들은 인터넷을 통해 고객들에게 비디오 및 텔레비전 프로그래밍을 제공하기 위해 스트리밍 비디오를 이용한다.
스케일러블 비디오 코딩(SVC)은 스위스 제네바의 국제 통신 협회 통신 표준 섹터에 의한 ITU-T H.264 표준에 의해 특정되는 H.264/MPEG-4 AVC 비디오 압축 표준의 확장이다. SVC는 추가적으로 하나 이상의 서브-비트스트림들을 포함하는 비디오 비트스트림의 인코딩을 가능케 한다. 서브-비트스트림들은 비디오 비트스트림으로부터의 데이터 패킷들의 드롭핑에 의해 비디오 비트스트림으로부터 도출되어 원래의 비디오 비트스트림보다 낮은 품질 및 낮은 대역폭의 서브-비트스트림을 초래한다. SVC는 비디오 비트스트림을 서브-비트스트림들로 크기 조정하는 세 개의 형태들, 시간적 크기 조정, 공간적 크기 조정, 및 품질 크기 조정을 지원한다. 이들 크기 조정 기술들의 각각은 개별적으로 사용되거나 특정 비디오 스트림에 의존하여 조합될 수 있다.
적응식 스트리밍 시스템들에서, 소스 미디어는 일반적으로 실제 비디오 및 오디오 데이터를 포함하는 다수의 다른 스트림을 가르키는 상부 레벨 인덱스 파일로서 미디어 서버상에 저장된다. 각각의 스트림은 일반적으로 하나 이상의 컨테이너 파일들로 저장된다. 상이한 적응식 스트리밍 해결책들은 일반적으로 상이한 인덱스 및 미디어 컨테이너들을 이용한다. 마트로스카 컨테이너는 프랑스, 오소네의 마트로스카 비영리 기관에 의해 개방 표준 프로젝트로서 개발된 미디어 컨테이너이다. 마트로스카 컨테이너는 확장성 마크업 언어(XML)의 이진 파생물인 확장성 이진 메타 언어(EBML)에 기초한다. 마트로스카 컨테이너의 디코딩은 많은 가전 제품(CE) 디바이스들에 의해 지원된다. 캘리포니아 샌디에이고 DivX, LLC에 의해 개발된 DivX Plus 파일 포맷은 마트로스카 포맷 내에 특정되지 않은 요소들을 포함하는 마트로스카 컨테이너 포맷의 확장을 이용한다.
본 발명의 실시예들에 따른 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보를 재사용하기 위한 시스템들 및 방법들이 개시된다.
본 발명의 일 실시예에서, 적응식 스트리밍 시스템들에서 사용을 위한 멀티미디어 콘텐트를 인코딩하는 단계는 미디어 서버를 사용하여 복수의 인코딩 레벨들로부터 제 1 인코딩 레벨을 선택하는 단계, 제 1 인코딩 레벨 및 미디어 서버를 사용하여 비디오 데이터의 제 1 스트림에 대한 인코딩 정보를 결정하는 단계, 미디어 서버를 사용하여 비디오 데이터의 제 1 스트림을 인코딩하는 단계로서, 비디오 데이터의 제 1 스트림은 제 1 해상도 및 제 1 비트레이트를 포함하는, 상기 비디오 데이터의 상기 제 1 스트림을 인코딩하는 단계, 미디어 서버를 사용하여 복수의 인코딩 레벨들로부터 제 2 인코딩 레벨을 선택하는 단계, 및 인코딩 정보 및 미디어 서버를 사용하여 비디오 데이터의 제 2 스트림을 인코딩하는 단계로서, 상기 비디오 데이터의 제 2 스트림은 제 2 해상도 및 제 2 비트레이트를 포함하는, 상기 비디오 데이터의 상기 제 2 스트림을 인코딩하는 단계를 포함한다.
본 발명의 다른 실시예에서, 제 1 해상도 및 제 2 해상도는 동일하다.
본 발명의 추가의 실시예에서, 제 1 비트레이트는 제 2 비트레이트보다 낮다.
본 발명의 또 다른 추가의 실시예에서, 제 1 비트레이트는 제 2 비트레이트보다 높다.
본 발명의 또 다른 추가의 실시예에서, 제 1 해상도는 제 2 해상도보다 낮다.
본 발명의 또 다른 추가의 실시예에서, 제 1 해상도는 제 2 해상도보다 높다.
본 발명의 또 다른 실시예에서, 인코딩 정보를 결정하는 단계는 움직임 추정 결과들을 추정하는 단계, 가중된 예측 가중치들을 선택하는 단계, 및 장면 변경들을 결정하는 단계로 구성되는 그룹으로부터 선택된 인코딩 정보를 결정하는 단계를 포함한다.
본 발명의 또 다른 실시예에서, 멀티미디어 콘텐트를 인코딩하는 단계는 제 1 인코딩 레벨 및 미디어 서버를 사용하여 비디오 데이터의 제 1 스트림에 대한 움직임 추정을 결정하는 단계 및 제 2 인코딩 레벨 및 미디어 서버를 사용하여 비디오 데이터의 제 2 스트림에 대하여 결정된 움직임 추정 결과들을 크기 조정하는 단계를 추가로 포함한다.
본 발명의 또 다른 추가의 실시예에서, 움직임 추정을 결정하는 단계는 미디어 서버를 사용하는 계층적인 움직임 추정들을 포함한다.
본 발명의 또 다른 추가의 실시예에서, 멀티미디어 콘텐트를 인코딩하는 단계는 비디오 데이터의 제 1 스트림 및 비디오 데이터의 제 2 스트림을 미디어 서버를 사용하여 컨테이너 파일로 저장하는 단계를 추가로 포함한다.
본 발명의 또 다른 추가의 실시예에서, 컨테이너 파일은 마트로스카 컨테이너 파일이다.
본 발명의 또 다른 추가의 실시예에서, 멀티미디어 콘텐트를 인코딩하는 단계는 비디오 데이터의 제 1 스트림 및 비디오 데이터의 제 2 스트림을 미디어 서버를 사용하여 개별적인 컨테이너 파일들로 저장하는 단계를 추가로 포함한다.
본 발명의 또 다른 추가의 실시예에서, 비디오 데이터의 제 1 스트림 및 비디오 데이터의 제 2 스트림을 인코딩하는 단계는 스케일러블 비디오 코딩을 이용한다.
본 발명의 또 다른 추가의 실시예는 멀티미디어 콘텐트를 저장하도록 구성된 메모리로서, 멀티미디어 콘텐트는 소스 비디오를 포함하는 메모리 및 프로세서를 포함하는 미디어 서버를 포함하고, 프로세서는 미디어 인코더 애플리케이션에 의해 복수의 인코딩 레벨들로부터 제 1 인코딩 레벨을 선택하고, 제 1 인코딩 레벨을 사용하여 비디오 데이터의 제 1 스트림에 대한 인코딩 정보를 결정하고, 제 1 해상도 및 제 1 비트레이트를 포함하는 비디오 데이터의 제 1 스트림을 인코딩하고, 복수의 인코딩 레벨들로부터 제 2 인코딩 레벨을 선택하고, 인코딩 정보를 사용하여 제 1 해상도 및 제 2 비트레이트를 포함하는 비디오 스트림의 제 2 스트림을 인코딩하도록 구성된다.
본 발명의 또 다른 추가의 실시예에서, 제 1 해상도 및 제 2 해상도는 동일하다.
본 발명의 또 다른 추가의 실시예에서, 제 1 비트레이트는 제 2 비트레이트보다 낮다.
본 발명의 또 다른 추가의 실시예에서, 제 1 비트레이트는 제 2 비트레이트보다 크다.
본 발명의 또 다른 추가의 실시예에서, 제 1 해상도는 제 2 해상도보다 낮다.
본 발명의 또 다른 추가의 실시예에서, 제 1 해상도는 제 2 해상도보다 높다.
본 발명의 또 다른 추가의 실시예에서, 결정된 인코딩 정보는 감정 추정 결과들, 가중된 예측 가중치들, 및 장면 변경들로 구성된 그룹으로부터 선택된다.
본 발명의 또 다른 추가의 실시예에서, 프로세서는 또한 제 1 인코딩 레벨을 사용하여 비디오 데이터의 제 1 스트림에 대한 움직임 추정들을 결정하고 제 2 인코딩 레벨을 사용하여 비디오 데이터의 제 2 스트림에 대한 결정된 움직임 추정 결과들을 크기 조정하도록 구성된다.
본 발명의 또 다른 추가의 실시예에서, 결정된 움직임 추정은 계층적 움직임 추정들을 포함한다.
본 발명의 또 다른 추가의 실시예에서, 프로세서는 또한 비디오 데이터의 제 1 스트림 및 비디오 데이터의 제 2 스트림을 컨테이너 파일로 저장하도록 구성된다.
본 발명의 또 다른 추가의 실시예에서, 컨테이너 파일은 마트로스카 컨테이너 파일이다.
본 발명의 또 다른 추가의 실시예에서, 프로세서는 또한 비디오 데이터의 제 1 스트림 및 비디오 데이터의 제 2 스트림을 개별적인 컨테이너 파일들로 저장하도록 구성된다.
본 발명의 또 다른 추가의 실시예에서, 비디오 데이터의 제 1 스트림 및 비디오 데이터의 제 2 스트림은 스케일러블 비디오 코딩을 사용하여 인코딩된다.
본 발명의 또 다른 추가의 실시예는 프로세서 명령들을 포함하는 머신 판독가능 매체를 포함하고, 프로세서에 의한 명령들의 실행은 프로세서가 복수의 인코딩 레벨들로부터 제 1 인코딩 레벨을 선택하는 것, 제 1 인코딩 레벨을 사용하여 비디오 데이터의 제 1 스트림에 대한 인코딩 정보를 결정하는 것, 제 1 해상도 및 제 1 비트레이트를 포함하는 비디오 데이터의 제 1 스트림을 인코딩을 하는 것, 복수의 인코딩 레벨들로부터 제 2 인코딩 레벨을 선택하는 것, 및 인코딩 정보를 사용하여 제 2 해상도 및 제 2 비트레이트를 포함하는 비디오 데이터의 제 2 스트림을 인코딩하는 것을 포함하는 프로세스를 수행하게 한다.
본 발명은 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보를 재사용하기 위한 시스템들 및 방법들을 제공한다.
도 1은 본 발명의 일 실시예에 따른 적응식 스트리밍 시스템의 시스템도.
도 2는 본 발명의 일 실시예에 따른 적응식 스트리밍 시스템들에서 사용을 위한 비디오 데이터의 스트림들을 인코딩하도록 구성된 미디어 서버의 블록도.
도 3은 본 발명의 일 실시예에 따른 적응식 스트리밍 시스템들에서 사용을 위한 비디오 데이터의 스트림들을 인코딩하도록 구성된 미디어 서버를 개념적으로 도시하는 도면.
도 4는 본 발명의 일 실시예에 따른 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보를 재사용하기 위한 프로세스를 도시하는 플로차트.
도 5는 본 발명의 일 실시예에 따른 매칭하는 매크로블록들을 갖는 비디오 데이터의 다른 스트림들의 인코딩들 사이의 움직임 추정들을 재사용하기 위한 프로세스를 도시하는 플로차트.
도 6은 본 발명의 일 실시예에 따른 비디오 데이터의 프레임에서 매크로블록들의 계층적인 움직임 추정을 수행하기 위한 프로세스를 도시하는 플로차트.
지금 도면들로 돌아와서, 본 발명의 실시예들에 따른 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보를 재사용하기 위한 시스템들 및 방법들이 개시된다. 본 발명은 적응식 스트리밍 시스템들 및 블록 기반 비디오 인코딩 기술들에 관하여 이하에 기술되지만, 기술된 시스템들 및 방법들은 종래의 스트리밍 시스템들에 동등하게 적용가능하고, 비디오 데이터의 상이한 스트림들은 네트워크 클라이언트의 접속 품질 및 블록 기반이 아닌 비디오 인코딩 기술들에 기초하여 선택된다.
적응식 스트리밍 시스템들에서, 멀티미디어 콘텐트는 비디오 데이터의 일 세트의 다른 스트림들로서 인코딩된다. 비디오 데이터의 각각의 다른 스트림이 동일한 소스 멀티미디어 콘텐트를 사용하여 인코딩되기 때문에, 유사한 인코딩 정보가 비디오 데이터의 각각의 다른 스트림의 인코딩시 결정된다. 인코딩 정보는 움직임 추정 결과들, 가중된 예측 가중치(들)의 선택, 및 장면 변경들을 결정하는 것을 포함하지만, 그로 한정되지 않는다. 본 발명의 다수의 실시예들에 따른 시스템들 및 방법들은 비디오 데이터의 적어도 하나의 또 다른 스트림의 인코딩시 비디오 데이터의 하나의 다른 스트림의 인코딩시 결정된 인코딩 정보를 재사용한다. 비디오 데이터의 수 개의 다른 스트림들의 인코딩시 인코딩 정보를 재사용함으로써, 비디오 데이터의 다른 스트림들의 인코딩시 중요한 개선들이 달성될 수 있고, 특히 상당한 시간 절약들이 본 발명의 실시예들에 따라 실현될 수 있다.
적응식 스트리밍 시스템들은 인터넷과 같은 네트워크를 통해 상이한 최대 비트레이트들 및 해상도들로 인코딩된 멀티미디어 콘텐트를 스트리밍하도록 구성된다. 적응식 스트리밍 시스템들은 현재 스트리밍 상태들에 기초하여 지원될 수 있는 최상의 품질의 멀티미디어 콘텐트를 스트리밍한다. 멀티미디어 콘텐트는 일반적으로 비디오 및 오디오 데이터, 서브타이틀들, 및 다른 관련된 메타데이터를 포함한다. 네트워크 데이터 레이트에 관계없이 최상 품질 비디오 경험을 제공하기 위하여, 적응식 스트리밍 시스템들은 이용 가능한 네트워크 데이터 레이트 및 비디오 디코더 성능을 포함하지만 그로 제한하지 않는 다양한 팩터들에 따른 비디오 데이터의 전달을 통해 비디오 데이터의 이용 가능한 소스들 사이를 스위칭하도록 구성된다. 스트리밍 상태들이 악화될 때, 적응식 스트리밍 시스템은 일반적으로 더 낮은 최대 비트레이트들로 인코딩된 멀티미디어 스트림들로 스위칭하기를 시도한다. 이용가능한 네트워크 데이터 레이트가 가장 낮은 최대 비트레이트로 인코딩된 스트림의 스트리밍을 지원할 수 없는 경우에, 재생은 종종 충분한 양의 콘텐트가 재생을 재시작하도록 버퍼링될 수 있을 때까지 중단된다. 본 발명의 실시예들에 따른 적응식 스트리밍 시스템에서 이용될 수 있는 재생 동안 비디오 스트림들간에 스위칭하기 위한 시스템들 및 방법들은, 그 전체가 참조로서 통합되는, 발명의 명칭이 "Systems and Methods for Adaptive Bitrate Streaming of Media Stored in Matroska Container Files Using Hypertext Transfer Protocol"인 미국 특허 출원 번호 제 13/221,682 호(브래네스 외에 의해, 2011년 8월 30일에 출원됨)에 기술된다.
적응식 스트리밍 시스템들에서 이용된 비디오 데이터의 다수의 소스들을 생성하기 위해, 소스 인코더는 멀티미디어 콘텐트의 일부에 포함된 소스 비디오로부터 비디오 데이터의 복수의 다른 스트림들을 인코딩하도록 구성될 수 있다. 적응식 스트리밍 시스템들에서 사용을 위한 소스 비디오를 인코딩하기 위한 시스템들 및 방법은, 그의 전체가 참조로서 통합되는, 발명의 명칭이 "Systems and Methods for Encoding Source Media in Matroska Container Files for Adaptive Bitrate Streaming Using Hypertext Transfer Protocol"인 미국 특허 출원 번호 제 13/221,794 호(브래네스 외에 의해, 2011년 8월 30일에 출원됨)에 개시된다. 본 발명의 실시예들에 따라, 소스 인코더는 미디어 소스 및/또는 미디어 서버를 사용하여 구현될 수 있다.
상기 언급된 바와 같이, 동일한 소스 비디오에 기초하여 비디오 데이터의 다른 스트림들은 유사한 콘텐트를 포함하고; 그러므로, 소스 비디오에 대한 비디오 데이터의 하나의 다른 스트림의 인코딩시 결정된 인코딩 정보는 비디오 데이터의 하나 이상의 또 다른 스트림들의 인코딩시 재사용될 수 있다. 본 발명의 실시예들에 따라, 동일한 소스 비디오에 기초하여 비디오 데이터의 일 세트의 다른 스트림들이 동일한 해상도이지만 상이한 비트레이트들인 비디오 데이터를 포함할 수 있다. 본 발명의 다수의 실시예들에서, 비디오 데이터의 특정한 다른 스트림의 인코딩에 대해 계산된 움직임 추정 결과들이 비디오 데이터의 모든 다른 스트림들 중에서 재사용될 수 있다. 이하에 논의되는 바와 같이, 비디오 데이터의 다른 스트림들의 인코딩시 결정된 다양한 인코딩 정보는 비디오 데이터의 다른 스트림들 중에서 재사용될 수 있다. 본 발명의 실시예들에 따른 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보를 재사용하기 위한 시스템들 및 방법들이 이하에 더 논의된다.
시스템 개요
본 발명의 실시예들에 따른 적응식 스트리밍 시스템들은 스트리밍 상태들에 기초하여 네트워크 클라이언트들로 송신된 비디오를 적응시키도록 구성된다. 본 발명의 일 실시예에 따른 적응식 스트리밍 시스템이 도 1에 도시된다. 도시된 적응식 스트리밍 시스템(10)은 멀티미디어 콘텐트를 포함하는 미디어 소스(100)를 포함한다. 본 발명의 다수의 실시예들에서, 미디어 소스(100)에 저장된 멀티미디어 콘텐트는 적응식 스트리밍에 대한 다수의 비트레이트들 및 해상도들로 인코딩된 비디오 데이터의 복수의 이전에 인코딩된 스트림들을 포함하고, 비디오 데이터의 복수의 스트림들에서 비디오 데이터의 스트림들 중 적어도 하나의 인코딩은 비디오 데이터의 제 2 스트림의 인코딩시 결정된 인코딩 정보를 재사용한다. 본 발명의 수 개의 실시예들에서, 미디어 소스(100)는 실시간으로 비디오 데이터의 복수의 스트림들을 인코딩하고, 비디오 데이터의 복수의 스트림들에서 비디오 데이터의 스트림들 중 적어도 하나의 인코딩은 비디오 데이터의 제 2 스트림의 인코딩시 결정된 인코딩 정보를 재사용한다. 본 발명의 다수의 실시예들에서, 미디어 소스(100)에 저장된 멀티미디어 콘텐트는 스케일러블 비디오 코딩(SVC)을 이용하여 인코딩된 비디오 데이터를 포함한다. 다수의 실시예들에서, 미디어 소스(100)는 비디오 데이터의 다른 스트림들로서 동일한 타임라인들을 갖는 비디오 데이터의 다수의 스트림들을 포함한다. 미디어 소스(100)는 네트워크 렌더러(102)에 연결된다. 다수의 실시예들에서, 미디어 소스(100) 및 네트워크 렌더러(102)는 미디어 서버를 사용하여 실행된다. 네트워크 렌더러(102)는 네트워크(110)를 통해 복수의 네트워크 클라이언트들(104)에 연결된다. 네트워크 렌더러(102)는 하나 이상의 네트워크 클라이언트들(104)에 비디오 데이터를 스트리밍하도록 구성된다. 네트워크 클라이언트들(104)은 네트워크 렌더러(102)를 사용하여 미디어 소스(100)로부터 스트리밍된 미디어를 디코딩하도록 구성된 미디어 디코더(106)를 각각 포함한다.
본 발명의 다수의 실시예들은, 미디어 소스(100) 및/또는 네트워크 렌더러(102)는 단일 머신을 사용하여 실행된다. 본 발명의 몇몇 실시예들에서, 미디어 소스(100) 및/또는 네트워크 렌더러(102)는 복수의 머신들을 사용하여 실행된다. 본 발명의 다수의 실시예들에서, 미디어 소스(100) 및/또는 네트워크 렌더러(102)는 미디어 서버를 사용하여 실행된다. 다수의 실시예들에서, 네트워크(110)는 인터넷이다. 몇몇 실시예들에서, 네트워크(110)는 임의의 IP 네트워크이다. 다수의 실시예들에서, 네트워크(110)는 셀룰러 데이터 네트워크이다.
적응식 스트리밍 시스템의 특정 아키텍처가 도 1에 도시되지만, 특정 애플리케이션에 적합한 다른 구현들이 본 발명의 실시예들에 따라 이용될 수 있다. 본 발명의 실시예들에 따른 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보의 재사용을 위한 시스템들 및 방법들이 이하에 더 논의된다.
적응식 스트리밍에 대한 미디어를 인코딩할 수 있는 미디어 서버들
본 발명의 실시예들에 따라, 미디어 서버들은 멀티미디어 콘텐트에 포함된 소스 비디오에 대한 비디오 데이터의 복수의 다른 스트림들을 인코딩하도록 구성된다. 도 2는 본 발명의 일 실시예에 따른 미디어 서버의 블록도이다. 미디어 서버(200)는 프로세서(210) 및 비디오 인코더(212)를 포함한다. 프로세서는 소스 비디오에 주어진 비디오 데이터의 복수의 스트림들을 인코딩하도록 구성된다. 다수의 실시예들에서, 비디오 인코더(212)는 하드웨어에서 실행된다. 몇몇 실시예들에서, 비디오 인코더(212)는 그래픽 처리 유닛을 이용하여 실행된다. 다수의 실시예들에서, 비디오 인코더(212)는 비디오 데이터의 다른 스트림들을 인코딩하기 위한 프로세서(210)를 구성하는 소프트웨어 애플리케이션이다.
다수의 실시예들에서, 미디어 서버(200)는 멀티미디어 콘텐트 및/또는 비디오 데이터의 다른 스트림들을 저장하도록 구성된 프로세서(210)에 연결된 저장 디바이스(220)를 포함한다. 본 발명의 다수의 실시예들에서, 프로세스(400)는 스케일러블 비디오 코딩을 사용하여 멀티미디어 콘텐트를 인코딩한다. 몇몇 실시예들에서, 비디오 데이터의 다른 스트림들은 마트로스카 컨테이너 포맷을 이용하는 컨테이너에 저장된다. 본 발명의 실시예들에 따라, 비디오 데이터의 다른 스트림들은 화상 구조의 적응식 그룹을 갖는다.
다수의 실시예들에서, 미디어 서버(200)는 프로세서(210)에 연결된 디스플레이 디바이스(224)를 포함하고, 디스플레이 디바이스는 비디오 데이터의 다른 스트림들 및/또는 비디오 데이터의 다른 스트림들의 인코딩에 관한 정보를 디스플레이하기 위해 사용될 수 있다. 본 발명의 실시예들에 따라, 미디어 서버(200)는 멀티미디어 콘텐트를 인코딩 및/또는 스트리밍하기에 적합한 소프트웨어 애플리케이션들로 구성된 하나 이상의 서버들을 사용하여 구현된다. 미디어 서버(200)는 프로세서(210)에 연결된 네트워크 디바이스(222)를 선택적으로 포함한다. 다수의 실시예들에서, 네트워크 디바이스(222)는 네트워크 연결을 확립하도록 구성되고 프로세서(210)는 적응식 스트리밍 시스템들에서 사용을 위해 네트워크 접속을 사용하여 멀티미디어 콘텐트를 스트리밍하도록 구성된다.
본 발명의 일 실시예에 따른 미디어 서버의 기본적인 아키텍처가 도 3에 도시된다. 미디어 서버(300)는 비휘발성 메모리(330) 및 휘발성 메모리(320)와 통신하는 프로세서(310)를 포함한다. 예시된 실시예에서, 비휘발성 메모리는 프로세서가 소스 비디오에 대한 비디오 데이터의 복수의 다른 스트림들을 인코딩하도록 구성하는 비디오 인코더(332)를 포함하고, 비디오 데이터의 다른 스트림들 중 적어도 하나의 인코딩은 비디오 데이터의 제 2 다른 스트림의 인코딩시 결정된 인코딩 정보를 재사용한다. 몇몇 실시예들에서, 비디오 인코더(332)는 프로세서(310)를 사용하여 실행된다. 네트워크 클라이언트(300)는 또한 네트워크 연결을 통해 데이터를 전송 및 수신하도록 구성된 네트워크 인터페이스(340)를 포함한다. 다수의 실시예들에서, 네트워크 인터페이스(340)는 프로세서(310), 비휘발성 메모리(330), 및 휘발성 메모리(320)와 통신한다.
본 발명의 다수의 실시예들에서, 미디어 서버(300)는 다수의 프로세서들을 포함한다. 다수의 실시예들에서, 비디오 인코더(332)는 전용 하드웨어를 사용하여 실행된다. 미디어 서버에 대한 특정 아키텍처가 도 3에 도시되지만, 비디오 인코더(332)가 디스크 또는 몇몇 다른 형태의 저장 장치상에 위치하고 실행 시간에 휘발성 메모리(320)로 로딩되는 아키텍처들을 포함하는 다수의 아키텍처들 중 어느 하나가 본 발명의 실시예들에 따른 적응식 스트리밍 시스템들에서 사용을 위한 미디어 서버들을 실행하기 위해 이용될 수 있다.
미디어 서버의 특정 구현이 도 2에 도시되었지만, 특정 애플리케이션에 적합한 다른 구현들이 본 발명의 실시예들에 따라 이용될 수 있다. 본 발명의 실시예들에 따른 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보의 재사용을 위한 시스템들 및 방법들이 이하에 더 논의된다.
비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보의 재사용
멀티미디어 콘텐트의 적응식 스트리밍에 이용된 비디오 데이터의 스트림들을 제공하기 위하여, 미디어 서버는 멀티미디어 콘텐트를 비디오 데이터의 다른 스트림들로서 인코딩할 수 있다. 미디어 서버는 비디오 데이터의 나머지 스트림들 중 하나 이상의 인코딩에서 비디오 데이터의 하나의 스트림의 인코딩시 결정된 인코딩 정보를 재사용함으로써 비디오 데이터의 다른 스트림들을 인코딩의 속도 및 성능을 개선할 수 있다. 소스 비디오에 대한 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보를 재사용하기 위한 프로세스가 도 4에 도시된다. 프로세스(400)는 소스 비디오를 포함하는 멀티미디어 콘텐트를 수신하는 단계(410)를 포함한다. 몇몇 실시예들에서, 인코딩 레벨들은 소스 비디오에 대하여 결정된다(412). 인코딩 레벨이 선택된다(414). 인코딩 정보는 선택된 인코딩 레벨에 대하여 결정된다(416). 인코딩 정보는 선택되지 않은 인코딩 레벨들의 하나 이상에 걸쳐 재사용된다(418).
몇몇 실시예들에서, 인코딩 레벨들은 예상된 네트워크 데이터 레이트들, 네트워크 클라이언트들의 예상된 스크린 해상도들, 및/또는 소스 비디오의 해상도 및/또는 비트레이트를 포함하지만 그에 한정되지 않은 팩터들에 기초하여 결정된다(412). 다수의 실시예들에서, 인코딩 레벨들은 저장된 값들을 검색함으로써 결정된다(412). 본 발명의 실시예들에 따라, 해상도 및 비트레이트를 갖는 비디오 데이터의 다른 스트림은 각각의 인코딩 레벨에 대해 인코딩된다. 다수의 실시예들에서, 비디오 데이터의 다른 스트림들은 동일한 해상도 및 다양한 비트레이트들을 갖는다. 다수의 실시예들에서, 선택된(414) 인코딩 레벨은 가장 낮은 비트레이트를 갖는 비디오 데이터의 다른 스트림에 대응한다. 몇몇 실시예들에서, 선택된(414) 인코딩 레벨은 가장 높은 비트레이트를 갖는 비디오 데이터의 다른 스트림에 대응한다. 다수의 실시예들에서, 다수의 결정된(416) 인코딩 정보는, 동일한 해상도 및 변하는 비트레이트들의 비디오 데이터를 갖고, 움직임 추정 결과들, 가중된 예측 가중치(들)의 선택, 및 장면 변경들의 결정을 포함하지만 그로 한정하지 않는 인코딩 레벨들에 걸쳐 재사용될 수 있다(418). 본 발명의 실시예들에 따라, 인코딩 정보는 인코딩 레벨들에 걸쳐 재사용될 수 있고(418), 계산 복잡성에서 상당한 절약들을 초래한다.
몇몇 실시예들에서, 결정된(412) 인코딩 레벨들에 기초하여 인코딩된 비디오 데이터의 다른 스트림들은 다양한 해상도들 및 비트레이트들을 갖는다. 다수의 실시예들에서, 선택된(414) 인코딩 레벨은 가장 낮은 해상도를 갖는 비디오 데이터의 다른 스트림에 대응한다. 다수의 실시예들에서, 선택된(414) 인코딩 레벨은 가장 높은 해상도를 갖는 비디오 데이터의 다른 스트림에 대응한다. 다수의 실시예들에서, 결정된(416) 인코딩 정보는 상이한 해상도들을 갖는 비디오 데이터의 스트림들에 걸쳐 재사용된다(418). 본 발명의 다수의 실시예들에 따라, 재사용된(418) 인코딩 정보는 인코딩 레벨들에 걸쳐 다를 수 있다. 예를 들면, 재사용된(418) 인코딩 정보가 움직임 벡터인 경우, 움직임 벡터는 비디오 데이터의 다른 스트림들의 상이한 해상도들에 관하여 크기 조정될 수 있다. 유사하게, 상기 나열된 정보와 같은 다른 인코딩 정보는 상이한 해상도들을 갖는 비디오 데이터의 다른 스트림들에 대응하는 인코딩 레벨들간에 크기 조정될 수 있다.
본 발명의 일 실시예에 따른 비디오 데이터의 다른 스트림들의 인코딩시 인코딩 정보의 재사용을 위한 특정 프로세스가 상기에 논의되었지만, 특별히 나열되지 않은 인코딩 정보를 재사용하는 단계 및 인코딩 정보의 초기 결정에 따라 나중에 생성된 비디오 데이터의 다른 스트림들에서 인코딩 정보를 재사용하는 단계를 포함하는 다양한 프로세스들이 본 발명의 실시예들에 따라 이용될 수 있다. 본 발명의 일 실시예에 따른 비디오 데이터의 다른 스트림들의 인코딩시 사용된 움직임 추정들을 재사용하기 위한 프로세스가 이하에 논의된다.
비디오 데이터의 다른 스트림들의 인코딩시 움직임 추정들의 재사용
H.264와 같은 다양한 비디오 압축 표준들은 적응식 스트리밍 시스템들에서 사용을 위한 비디오 데이터의 다른 스트림들을 인코딩하기 위해 이용될 수 있다. 많은 비디오 압축 표준들은 매크로블록들을 포함하는 비디오의 프레임들을 이용하고, 비디오 데이터의 스트림의 인코딩은 비디오의 프레임들 사이의 매크로블록들의 움직임 추정들을 계산하는 것을 포함한다. 본 발명의 실시예들에 따라, 비디오 데이터의 스트림의 비트레이트는 동일한 수의 비트들을 움직임 추정들에 할당하고, 매크로 블록들의 기술에 할당된 비트들의 수를 증가시키거나 감소시킴으로써 변경될 수 있다.
본 발명의 일 실시예에 따른 멀티미디어 콘텐트의 일부에 포함된 동일한 소스 비디오로부터 도출된 비디오 데이터의 다른 스트림들 사이에 매크로블록들의 움직임의 움직임 추정들을 재사용하기 위한 프로세스가 도 5에 도시된다. 프로세스(500)는 비디오 데이터의 다른 스트림들을 결정하기 위해 소스 비디오상에 하향 크기 조정을 수행하는 단계(510)를 포함한다. 비디오 데이터의 하나의 다른 스트림이 선택된다(512). 매크로블록들은 비디오 데이터의 선택된 스트림에 대해 결정된다(514). 비디오 데이터의 제 2 다른 스트림에서 매크로블록들을 매칭하기 위한 검색(516)이 수행된다. 비디오 데이터의 제 2 다른 스트림이 하나 이상의 매칭 매크로블록들을 포함하는 경우, 매칭 매크로블록들에 관련된 움직임 추정 결과들은 비디오 데이터의 제 2 다른 스트림의 인코딩시 재사용된다(518).
전체 검색들, 발견적 검색들, 및 계층적 추정들을 포함하지만 그로 제한되지 않는, 비디오 데이터의 프레임들에서 매크로블록들의 움직임의 추정들을 계산하기 위한 몇몇 방법들이 존재한다. 계층적 추정들은 그들이 빠르고 효율적인 방식으로 정확한 결과를 제공하기 때문에 공통으로 사용된다. 본 발명의 일 실시예에 따른 비디오 데이터의 프레임에서 매크로블록들의 계층적 움직임 추정을 수행하기 위한 프로세스가 도 6에 도시된다. 프로세스(600)는 검색에 사용된 제로 해상도로서 알려진 비디오 데이터의 프레임을 선택하는 단계(610)를 포함한다. 선택된 프레임에 대한 해상도들이 생성된다(612). 본 발명의 실시예들에 따라, 두 개 이상의 해상도들이 생성되고(612), 생성된 해상도들은 이전 해상도보다 작다. 해상도들은 평균 강도 및 서브샘플링을 포함하지만 그로 제한되지 않는 다양한 이미지 샘플링 기술들을 사용하여 생성될 수 있다(612). 가장 높은 해상도는 제로 해상도에서 매크로블록들에 대응하는 매크로블록들에 대해 검색된다(614). 움직임 추정은 가장 높은 해상도에서 대응하는 매크로블록에 대하여 계산된다(616). 제로 해상도 프레임에 도달된 경우(618), 계산된(616) 움직임 추정이 비디오 데이터의 프레임에 대한 움직임 추정으로서 사용되고 프로세스는 완료한다. 제로 해상도 프레임에 도달되지 않은 경우(618), 다음 해상도가 검색되고(614) 움직임 추정은 이전에 계산된(616) 움직임 추정 및 대응하는 매크로블록이 이전 해상도와 현재 해상도 사이에 이동하는 거리를 이용하여 계산된다(616). 다수의 실시예들에서, 매크로블록 움직임은 평균 절대차, 평균 제곱차, 및 픽셀차 분류를 포함하여 다양한 방법들에 의해 계산된다.
도 5에 따라, 수 개의 실시예들에서, 매칭하는 매크로블록들에 대하여 검색하는 단계(516)는 계층적 움직임 추정을 이용한다. 다수의 실시예들에서, 중간 결과들을 포함하는 계층적 움직임 추정 결과들은 상이한 해상도들을 갖는 비디오 데이터의 다른 스트림들 사이에 재사용될 수 있다(518). 다수의 실시예들에서, 비디오 데이터의 선택된(512) 스트림은 가장 낮은 해상도를 갖는 비디오 데이터의 다른 스트림이다. 다수의 실시예들에서, 비디오 데이터의 선택된(512) 스트림은 가장 높은 해상도를 갖는다. 몇몇 실시예들에서, 재사용된(518) 움직임 추정 결과들은 비디오 데이터의 다른 스트림들 사이에서 크기 조정된다. 비디오 데이터의 다른 스트림들의 인코딩시 움직임 추정들을 재사용하기 위한 특정 프로세스가 상기에 기술되었다; 그러나, 움직임 추정들을 재사용하는 다양한 프로세스들이 본 발명의 실시예들에 따라 이용될 수 있다.
본 발명은 몇몇 특정한 양태들에서 기술되었지만, 많은 추가의 변경들 및 변형들이 본 기술의 숙련자들에게 명백할 것이다. 따라서, 본 발명은 본 발명의 범위 및 정신으로부터 벗어나지 않고 특별히 기재되는 것과 다르게 실시될 수 있다는 것이 이해될 것이다. 따라서, 본 발명의 실시예들은 예시된 모든 면들에서 고려될 것이고 제한적이지 않다. 따라서, 본 발명의 범위는 예시된 실시예들에 의해 결정되지 않고, 첨부된 청구항들 및 그들의 동등물들에 의해 결정되어야 한다.
100 : 미디어 소스 102 : 네트워크 렌더러
104 : 네트워크 클라이언트 106 : 미디어 디코더
110 : 네트워크 200 : 미디어 서버
210 : 프로세서 212 : 비디오 인코더
220 : 저장 디바이스 222 : 네트워크 디바이스
224 : 디스플레이 디바이스

Claims (27)

  1. 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법에 있어서,
    미디어 서버를 사용하여 복수의 인코딩 레벨들로부터 제 1 인코딩 레벨을 선택하는 단계;
    상기 제 1 인코딩 레벨 및 상기 미디어 서버를 사용하여 비디오 데이터의 제 1 스트림에 대한 인코딩 정보를 결정하는 단계;
    상기 미디어 서버를 사용하여 상기 비디오 데이터의 제 1 스트림을 인코딩하는 단계로서, 상기 비디오 데이터의 상기 제 1 스트림은 제 1 해상도 및 제 1 비트레이트를 포함하는, 상기 비디오 데이터의 상기 제 1 스트림을 인코딩하는 단계;
    상기 미디어 서버를 사용하여 상기 복수의 인코딩 레벨들로부터 제 2 인코딩 레벨을 선택하는 단계; 및
    상기 인코딩 정보 및 상기 미디어 서버를 사용하여 비디오 데이터의 제 2 스트림을 인코딩하는 단계로서, 상기 비디오 데이터의 제 2 스트림은 제 2 해상도 및 제 2 비트레이트를 포함하는, 상기 비디오 데이터의 상기 제 2 스트림을 인코딩하는 단계를 포함하는, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  2. 제 1 항에 있어서,
    상기 제 1 해상도 및 상기 제 2 해상도는 동일한, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  3. 제 2 항에 있어서,
    상기 제 1 비트레이트는 상기 제 2 비트레이트보다 낮은, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  4. 제 2 항에 있어서,
    상기 제 1 비트레이트는 상기 제 2 비트레이트보다 큰, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  5. 제 1 항에 있어서,
    상기 제 1 해상도는 상기 제 2 해상도보다 낮은, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  6. 제 1 항에 있어서,
    상기 제 1 해상도는 상기 제 2 해상도보다 높은, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  7. 제 1 항에 있어서,
    상기 인코딩 정보를 결정하는 단계는 움직임 추정 결과들을 추정하는 단계, 가중된 예측 가중치들을 선택하는 단계, 및 장면 변경들을 결정하는 단계로 구성된 그룹으로부터 선택된 인코딩 정보를 결정하는 단계를 포함하는, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  8. 제 1 항에 있어서,
    상기 제 1 인코딩 레벨 및 상기 미디어 서버를 사용하여 상기 비디오 데이터의 제 1 스트림에 대한 움직임 추정들을 결정하는 단계; 및
    상기 제 2 인코딩 레벨 및 상기 미디어 서버를 사용하여 상기 비디오 데이터의 제 2 스트림에 대한 상기 결정된 움직임 추정 결과들을 크기 조정하는 단계를 추가로 포함하는, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  9. 제 8 항에 있어서,
    상기 움직임 추정을 결정하는 단계는 상기 미디어 서버를 사용하는 계층적 움직임 추정들을 포함하는, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  10. 제 1 항에 있어서,
    상기 비디오 데이터의 제 1 스트림 및 상기 비디오 데이터의 제 2 스트림을 상기 미디어 서버를 사용하여 컨테이너 파일로 저장하는 단계를 추가로 포함하는, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  11. 제 10 항에 있어서,
    상기 컨테이너 파일은 마트로스카 컨테이너 파일인, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  12. 제 1 항에 있어서,
    상기 비디오 데이터의 제 1 스트림 및 상기 비디오 데이터의 제 2 스트림을 상기 미디어 서버를 사용하여 개별적인 컨테이너 파일들로 저장하는 단계를 추가로 포함하는, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  13. 제 1 항에 있어서,
    상기 비디오 데이터의 제 1 스트림 및 상기 비디오 데이터의 제 2 스트림을 인코딩하는 단계는 스케일러블 비디오 코딩을 이용하는, 적응식 스트리밍 시스템들에서 사용하기 위해 멀티미디어 콘텐트를 인코딩하기 위한 방법.
  14. 미디어 서버에 있어서,
    멀티미디어 콘텐트를 저장하도록 구성된 메모리로서, 상기 멀티미디어 콘텐트는 소스 비디오를 포함하는, 상기 메모리; 및
    프로세서를 포함하고,
    상기 프로세서는 미디어 인코더 애플리케이션에 의해:
    복수의 인코딩 레벨들로부터 제 1 인코딩 레벨을 선택하고,
    상기 제 1 인코딩 레벨을 사용하여 비디오 데이터의 제 1 스트림에 대한 인코딩 정보를 결정하고,
    제 1 해상도 및 제 1 비트레이트를 포함하는 상기 비디오 데이터의 상기 제 1 스트림을 인코딩하고,
    상기 복수의 인코딩 레벨들로부터 제 2 인코딩 레벨을 선택하고,
    상기 인코딩 정보를 사용하여 제 2 해상도 및 제 2 비트레이트를 포함하는 비디오 데이터의 제 2 스트림을 인코딩하도록 구성되는, 미디어 서버.
  15. 제 14 항에 있어서,
    상기 제 1 해상도 및 상기 제 2 해상도는 동일한, 미디어 서버.
  16. 제 15 항에 있어서,
    상기 제 1 비트레이트는 상기 제 2 비트레이트보다 낮은, 미디어 서버.
  17. 제 15 항에 있어서,
    상기 제 1 비트레이트는 상기 제 2 비트레이트보다 큰, 미디어 서버.
  18. 제 14 항에 있어서,
    상기 제 1 해상도는 상기 제 2 해상도보다 낮은, 미디어 서버.
  19. 제 14 항에 있어서,
    상기 제 1 해상도는 상기 제 2 해상도보다 높은, 미디어 서버.
  20. 제 14 항에 있어서,
    상기 결정된 인코딩 정보는 감정 추정 결과들, 가중된 예측 가중치들, 및 장면 변화들로 구성된 그룹으로부터 선택되는, 미디어 서버.
  21. 제 14 항에 있어서,
    상기 프로세서는 또한:
    상기 제 1 인코딩 레벨을 사용하여 상기 비디오 데이터의 상기 제 1 스트림에 대한 움직임 추정들을 결정하고,
    상기 제 2 인코딩 레벨을 사용하여 상기 비디오 데이터의 상기 제 2 스트림에 대한 상기 결정된 움직임 추정 결과들을 크기 조정하도록 구성되는, 미디어 서버.
  22. 제 21 항에 있어서,
    상기 결정된 움직임 추정은 계층적인 움직임 추정들을 포함하는, 미디어 서버.
  23. 제 14 항에 있어서,
    상기 프로세서는 또한 상기 비디오 데이터의 제 1 스트림 및 상기 비디오 데이터의 제 2 스트림을 컨테이너 파일로 저장하도록 구성되는, 미디어 서버.
  24. 제 23 항에 있어서,
    상기 컨테이너 파일은 마트로스카 컨테이너 파일인, 미디어 서버.
  25. 제 14 항에 있어서,
    상기 프로세서는 또한 상기 비디오 데이터의 상기 제 1 스트림 및 상기 비디오 데이터의 상기 제 2 스트림을 개별적인 컨테이너 파일들로 저장하도록 구성되는, 미디어 서버.
  26. 제 14 항에 있어서,
    상기 비디오 데이터의 상기 제 1 스트림 및 상기 비디오 데이터의 상기 제 2 스트림은 스케일러블 비디오 코딩을 사용하여 인코딩되는, 미디어 서버.
  27. 프로세서 명령들을 포함하는 머신 판독 가능 매체에 있어서,
    프로세서에 의한 상기 명령들의 실행은 상기 프로세서가 프로세스를 수행하게 하고,
    상기 프로세스는:
    복수의 인코딩 레벨들로부터 제 1 인코딩 레벨을 선택하고,
    상기 제 1 인코딩 레벨을 사용하여 비디오 데이터의 제 1 스트림에 대한 인코딩 정보를 결정하고,
    제 1 해상도 및 제 1 비트레이트를 포함하는 상기 비디오 데이터의 상기 제 1 스트림을 인코딩하고,
    상기 복수의 인코딩 레벨들로부터 제 2 인코딩 레벨을 선택하고,
    상기 인코딩 정보를 사용하여 제 2 해상도 및 제 2 비트레이트를 포함하는 비디오 데이터의 제 2 스트림을 인코딩하는 것을 포함하는, 머신 판독 가능 매체.
KR1020147033593A 2012-05-31 2013-05-20 비디오 데이터의 대체 스트림들의 인코딩시 인코딩 정보의 재사용을 위한 시스템들 및 방법들 KR102144557B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/485,609 US9532080B2 (en) 2012-05-31 2012-05-31 Systems and methods for the reuse of encoding information in encoding alternative streams of video data
US13/485,609 2012-05-31
PCT/US2013/041874 WO2013181013A1 (en) 2012-05-31 2013-05-20 Systems and methods for the reuse of encoding information in encoding alternative streams of video data

Publications (2)

Publication Number Publication Date
KR20150023323A true KR20150023323A (ko) 2015-03-05
KR102144557B1 KR102144557B1 (ko) 2020-08-13

Family

ID=49670227

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020147033593A KR102144557B1 (ko) 2012-05-31 2013-05-20 비디오 데이터의 대체 스트림들의 인코딩시 인코딩 정보의 재사용을 위한 시스템들 및 방법들

Country Status (7)

Country Link
US (2) US9532080B2 (ko)
EP (1) EP2856751A4 (ko)
JP (3) JP6463264B2 (ko)
KR (1) KR102144557B1 (ko)
AU (2) AU2013267738A1 (ko)
BR (1) BR112014029794A2 (ko)
WO (1) WO2013181013A1 (ko)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9532080B2 (en) 2012-05-31 2016-12-27 Sonic Ip, Inc. Systems and methods for the reuse of encoding information in encoding alternative streams of video data
US20140044197A1 (en) * 2012-08-10 2014-02-13 Yiting Liao Method and system for content-aware multimedia streaming
US9355613B2 (en) 2012-10-09 2016-05-31 Mediatek Inc. Data processing apparatus for transmitting/receiving compression-related indication information via display interface and related data processing method
US9568985B2 (en) 2012-11-23 2017-02-14 Mediatek Inc. Data processing apparatus with adaptive compression algorithm selection based on visibility of compression artifacts for data communication over camera interface and related data processing method
US9357210B2 (en) 2013-02-28 2016-05-31 Sonic Ip, Inc. Systems and methods of encoding multiple video streams for adaptive bitrate streaming
US9350990B2 (en) 2013-02-28 2016-05-24 Sonic Ip, Inc. Systems and methods of encoding multiple video streams with adaptive quantization for adaptive bitrate streaming
US9604139B2 (en) 2013-11-11 2017-03-28 Amazon Technologies, Inc. Service for generating graphics object data
US9634942B2 (en) * 2013-11-11 2017-04-25 Amazon Technologies, Inc. Adaptive scene complexity based on service quality
US9805479B2 (en) 2013-11-11 2017-10-31 Amazon Technologies, Inc. Session idle optimization for streaming server
US9596280B2 (en) 2013-11-11 2017-03-14 Amazon Technologies, Inc. Multiple stream content presentation
US9582904B2 (en) 2013-11-11 2017-02-28 Amazon Technologies, Inc. Image composition based on remote object data
US9578074B2 (en) 2013-11-11 2017-02-21 Amazon Technologies, Inc. Adaptive content transmission
US9641592B2 (en) 2013-11-11 2017-05-02 Amazon Technologies, Inc. Location of actor resources
US10567765B2 (en) * 2014-01-15 2020-02-18 Avigilon Corporation Streaming multiple encodings with virtual stream identifiers
US9699464B2 (en) 2014-07-10 2017-07-04 Intel Corporation Adaptive bitrate streaming for wireless video
JP2017097536A (ja) * 2015-11-20 2017-06-01 ソニー株式会社 画像処理装置および方法
WO2018164930A1 (en) * 2017-03-08 2018-09-13 Vid Scale, Inc. Improving motion vector accuracy by sharing cross-information between normal and zoom views

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6229850B1 (en) * 1997-07-22 2001-05-08 C-Cube Semiconductor Ii, Inc. Multiple resolution video compression
US20070153914A1 (en) * 2005-12-29 2007-07-05 Nokia Corporation Tune in time reduction
US20100189179A1 (en) * 2009-01-29 2010-07-29 Microsoft Corporation Video encoding using previously calculated motion information

Family Cites Families (161)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5930473A (en) 1993-06-24 1999-07-27 Teng; Peter Video application server for mediating live video services
US5477272A (en) 1993-07-22 1995-12-19 Gte Laboratories Incorporated Variable-block size multi-resolution motion estimation scheme for pyramid coding
US5592226A (en) 1994-01-26 1997-01-07 Btg Usa Inc. Method and apparatus for video data compression using temporally adaptive motion interpolation
JP3812750B2 (ja) 1995-01-19 2006-08-23 ソニー株式会社 動き量検出方法及び動き量検出装置
US5822524A (en) 1995-07-21 1998-10-13 Infovalue Computing, Inc. System for just-in-time retrieval of multimedia files over computer networks by transmitting data packets at transmission rate determined by frame size
EP0787405B1 (en) 1995-07-21 2000-03-08 Koninklijke Philips Electronics N.V. Method of receiving compressed video signals
US5742840A (en) 1995-08-16 1998-04-21 Microunity Systems Engineering, Inc. General purpose, multiple precision parallel operation, programmable media processor
US5734822A (en) 1995-12-29 1998-03-31 Powertv, Inc. Apparatus and method for preprocessing computer programs prior to transmission across a network
US6075884A (en) 1996-03-29 2000-06-13 Sarnoff Corporation Method and apparatus for training a neural network to learn and use fidelity metric as a control mechanism
SE515535C2 (sv) 1996-10-25 2001-08-27 Ericsson Telefon Ab L M En transkoder
US6118817A (en) 1997-03-14 2000-09-12 Microsoft Corporation Digital video signal encoder and encoding method having adjustable quantization
IL122299A (en) 1997-11-25 2003-11-23 Broadcom Corp Video encoding device
KR19990042668A (ko) 1997-11-27 1999-06-15 정선종 다중 비디오 전송을 위한 비디오 부호화 장치 및 방법
US6192154B1 (en) 1998-01-26 2001-02-20 International Business Machines Corporation Two-pass encoding method of digital motion video sequences for constant-or variable bit rate
US6343098B1 (en) * 1998-02-26 2002-01-29 Lucent Technologies Inc. Efficient rate control for multi-resolution video encoding
US6859496B1 (en) 1998-05-29 2005-02-22 International Business Machines Corporation Adaptively encoding multiple streams of video data in parallel for multiplexing onto a constant bit rate channel
US6330369B1 (en) 1998-07-10 2001-12-11 Avid Technology, Inc. Method and apparatus for limiting data rate and image quality loss in lossy compression of sequences of digital images
US6141380A (en) 1998-09-18 2000-10-31 Sarnoff Corporation Frame-level rate control for video compression
US6563517B1 (en) 1998-10-02 2003-05-13 International Business Machines Corp. Automatic data quality adjustment to reduce response time in browsing
US6970602B1 (en) 1998-10-06 2005-11-29 International Business Machines Corporation Method and apparatus for transcoding multimedia using content analysis
US6233359B1 (en) 1998-10-29 2001-05-15 Seiko Epson Corporation File size bounded JPEG transcoder (FSBJT)
US6356668B1 (en) 1998-12-29 2002-03-12 Eastman Kodak Company Method for efficient rate control
US6275536B1 (en) 1999-06-23 2001-08-14 General Instrument Corporation Implementation architectures of a multi-channel MPEG video transcoder using multiple programmable processors
US6785704B1 (en) 1999-12-20 2004-08-31 Fastforward Networks Content distribution system for operation over an internetwork including content peering arrangements
TW519840B (en) 2000-06-02 2003-02-01 Sony Corp Image coding apparatus and method, image decoding apparatus and method, and recording medium
GB2364843A (en) 2000-07-14 2002-02-06 Sony Uk Ltd Data encoding based on data quantity and data quality
US7310678B2 (en) 2000-07-28 2007-12-18 Kasenna, Inc. System, server, and method for variable bit rate multimedia streaming
US6976151B1 (en) 2000-09-28 2005-12-13 Intel Corporation Decoding an instruction portion and forwarding part of the portion to a first destination, re-encoding a different part of the portion and forwarding to a second destination
JP4428680B2 (ja) 2000-11-06 2010-03-10 パナソニック株式会社 映像信号符号化方法および映像信号符号化装置
US7305560B2 (en) 2000-12-27 2007-12-04 Proxense, Llc Digital content security system
US6970506B2 (en) 2001-03-05 2005-11-29 Intervideo, Inc. Systems and methods for reducing frame rates in a video data stream
US7209519B2 (en) 2001-04-16 2007-04-24 Mitsubishi Electric Research Laboratories, Inc. Encoding a video with a variable frame-rate while minimizing total average distortion
US7213072B2 (en) 2001-05-08 2007-05-01 Nokia Mobile Phones Method and apparatus for transcoding content with permissible operations authorized by content creator
EP1271926B1 (en) 2001-06-18 2015-08-12 Canon Kabushiki Kaisha Image processing method, apparatus and computer program for compression-encoding
US7072393B2 (en) 2001-06-25 2006-07-04 International Business Machines Corporation Multiple parallel encoders and statistical analysis thereof for encoding a video sequence
US20030031371A1 (en) 2001-08-02 2003-02-13 Shinichi Kato Image encoding apparatus and image decoding apparatus
EP1292153B1 (en) 2001-08-29 2015-08-19 Canon Kabushiki Kaisha Image processing method and apparatus, computer program, and storage medium
US7302102B2 (en) 2001-09-26 2007-11-27 Reynolds Jodie L System and method for dynamically switching quality settings of a codec to maintain a target data rate
JP2003143411A (ja) 2001-11-02 2003-05-16 Canon Inc 画像処理装置及びその制御方法及びコンピュータプログラム及び記憶媒体
FR2837330B1 (fr) 2002-03-14 2004-12-10 Canon Kk Procede et dispositif de selection d'une methode de transcodage parmi un ensemble de methodes de transcodage
US6995769B2 (en) 2002-03-21 2006-02-07 Hewlett-Packard Development Company, L.P. Systems and methods for compressing rasterization setup data within a sort middle graphics architecture
JP2003299064A (ja) 2002-03-29 2003-10-17 Sony Corp コンテンツ視聴システム、視聴装置、および電子しおり
US7227998B2 (en) 2002-06-11 2007-06-05 Canon Kabushiki Kaisha Image processing apparatus, control method of the same, computer program, and computer-readable storage medium
US7496283B2 (en) 2002-06-28 2009-02-24 Microsoft Corporation Methods and systems for processing digital data rate and directional playback changes
US8054880B2 (en) 2004-12-10 2011-11-08 Tut Systems, Inc. Parallel rate control for digital video encoder with multi-processor architecture and picture-based look-ahead window
JP3747910B2 (ja) 2003-01-24 2006-02-22 ソニー株式会社 通信システムおよび方法、情報処理装置および方法、情報管理装置および方法、記録媒体、並びにプログラム
JP4104066B2 (ja) 2003-02-26 2008-06-18 Ｋｄｄｉ株式会社 ビデオ情報複数同時符号化装置
US7424160B1 (en) 2003-04-28 2008-09-09 The Directv Group, Inc. Methods and apparatus for monitoring compressed bitstreams
JP4196726B2 (ja) 2003-05-14 2008-12-17 ソニー株式会社 画像処理装置および画像処理方法、記録媒体、並びに、プログラム
JP2005033664A (ja) 2003-07-10 2005-02-03 Nec Corp 通信装置及びその動作制御方法
US7330509B2 (en) 2003-09-12 2008-02-12 International Business Machines Corporation Method for video transcoding with adaptive frame rate control
JP4287429B2 (ja) 2003-10-15 2009-07-01 株式会社エヌ・ティ・ティ・ドコモ 階層型通信シナリオにおける複数の通信層の動作を制御する装置および方法
US7177474B2 (en) 2003-11-10 2007-02-13 Mobixell Networks Inc. Video to animation conversion with file size constraint
KR20050077874A (ko) 2004-01-28 2005-08-04 삼성전자주식회사 스케일러블 비디오 스트림 송신 방법 및 이를 이용한 장치
KR100526189B1 (ko) 2004-02-14 2005-11-03 삼성전자주식회사 트랜스코딩 전후에 타이밍 파라미터를 일정하게유지시키는 트랜스코딩 시스템 및 방법
GB0403982D0 (en) 2004-02-23 2004-03-31 Logicacmg Uk Ltd Improvements relating to digital radio communications
JP2005260541A (ja) 2004-03-11 2005-09-22 Matsushita Electric Ind Co Ltd 映像表示装置及び映像表示方法
US20050232497A1 (en) 2004-04-15 2005-10-20 Microsoft Corporation High-fidelity transcoding
JP4456920B2 (ja) 2004-04-16 2010-04-28 京セラ株式会社 携帯端末、番組再生システム
US20050251835A1 (en) 2004-05-07 2005-11-10 Microsoft Corporation Strategies for pausing and resuming the presentation of programs
US7523507B2 (en) 2004-05-27 2009-04-21 Nokia Corporation Delivery of non-permanent media files to a mobile station
JP2006033393A (ja) * 2004-07-15 2006-02-02 Matsushita Electric Ind Co Ltd 画像符号化装置および画像符号化方法
KR100725385B1 (ko) 2004-08-14 2007-06-07 삼성전자주식회사 메시지 통신을 이용한 컨텐츠 디스플레이 시스템 및 방법
EP1786205A1 (en) 2004-08-30 2007-05-16 Matsushita Electric Industrial Co., Ltd. Recorder
US7660366B2 (en) 2004-08-30 2010-02-09 Harmonic Inc. Message synchronization over a stochastic network
US20060056508A1 (en) 2004-09-03 2006-03-16 Phillippe Lafon Video coding rate control
TWI243615B (en) 2004-10-11 2005-11-11 Ind Tech Res Inst System for enhancing compression ratio of scalable video coding and method thereof
US8356327B2 (en) 2004-10-30 2013-01-15 Sharp Laboratories Of America, Inc. Wireless video transmission system
US7784076B2 (en) 2004-10-30 2010-08-24 Sharp Laboratories Of America, Inc. Sender-side bandwidth estimation for video transmission with receiver packet buffer
KR100641218B1 (ko) 2004-11-19 2006-11-02 엘지전자 주식회사 지상파 디지털 멀티미디어 방송을 위한 수신제한 방송시스템 및 방법
JP4251133B2 (ja) 2004-11-29 2009-04-08 ソニー株式会社 画像圧縮装置及び方法
KR100703399B1 (ko) 2004-12-13 2007-04-03 삼성전자주식회사 멀티미디어 컨텐츠를 연속적으로 전송하는 장치 및 방법
US8181266B2 (en) 2005-01-13 2012-05-15 Samsung Electronics Co., Ltd. Method for moving a rights object between devices and a method and device for using a content object based on the moving method and device
EP1839446A1 (en) 2005-01-19 2007-10-03 THOMSON Licensing Method and apparatus for real time parallel encoding
US10445748B2 (en) 2005-01-21 2019-10-15 Koninklijke Philips N.V. Ordering content by mobile phone to be played on consumer devices
WO2006079368A1 (en) 2005-01-25 2006-08-03 Nero Ag Method for preparing dvd-video formatted data, method for reconstructing dvd-video data and dvd-video data structure
KR20060088461A (ko) 2005-02-01 2006-08-04 엘지전자 주식회사 영상신호의 엔코딩/디코딩시에 영상블록을 위한 모션벡터를베이스 레이어 픽처의 모션벡터로부터 유도하는 방법 및장치
WO2006085301A2 (en) 2005-02-09 2006-08-17 Mobixell Networks Image adaptation with target size, quality and resolution constraints
US7676436B2 (en) 2005-02-23 2010-03-09 Trans World New York Llc Digital content distribution systems and methods
KR100672332B1 (ko) 2005-06-10 2007-01-24 엘지전자 주식회사 멀티미디어 콘텐츠 다운로드 방법 및 시스템
EP1908303A4 (en) 2005-07-01 2011-04-06 Sonic Solutions METHOD, DEVICE AND SYSTEM FOR USE IN MULTIMEDIA SIGNAL CODING
JP5484725B2 (ja) 2005-07-21 2014-05-07 トムソン ライセンシング スケーラブルビデオコーディングのための重み付け予測方法及び装置
US8879857B2 (en) * 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
EP1932358A4 (en) 2005-09-28 2011-04-13 Ericsson Telefon Ab L M MEDIA CONTENTS MANAGEMENT
KR100664227B1 (ko) 2005-09-29 2007-01-04 엘지전자 주식회사 이동 단말의 멀티미디어 콘텐츠 제공 방법 및 시스템
US20070086528A1 (en) 2005-10-18 2007-04-19 Mauchly J W Video encoder with multiple processors
KR100657343B1 (ko) 2005-10-19 2006-12-14 삼성전자주식회사 영상처리장치 및 방법
US20070094691A1 (en) 2005-10-24 2007-04-26 Gazdzinski Robert F Method and apparatus for on-demand content transmission and control over networks
KR100736080B1 (ko) 2005-10-27 2007-07-06 삼성전자주식회사 다 계층으로 구성된 멀티미디어 스트림의 저작권을 계층별로 관리하는 방법 및 장치
WO2007053957A1 (en) 2005-11-14 2007-05-18 Cyberdiffusion Inc. Transcoder for live streams and on demand media
FR2895190A1 (fr) 2005-12-19 2007-06-22 France Telecom Procede de fourniture d'un service multimedia a la demande, plate-forme de service, programme et decodeur pour la mise en oeuvre du procede
US20070230586A1 (en) 2006-03-31 2007-10-04 Masstech Group Inc. Encoding, decoding and transcoding of audio/video signals using combined parallel and serial processing techniques
US20070271106A1 (en) 2006-05-19 2007-11-22 Lee David H System and method for secure internet channeling agent
US20070283269A1 (en) 2006-05-31 2007-12-06 Pere Obrador Method and system for onboard camera video editing
US20080037880A1 (en) 2006-08-11 2008-02-14 Lcj Enterprises Llc Scalable, progressive image compression and archiving system over a low bit rate internet protocol network
US8428118B2 (en) * 2006-08-17 2013-04-23 Ittiam Systems (P) Ltd. Technique for transcoding MPEG-2/MPEG-4 bitstream to H.264 bitstream
US8135063B2 (en) 2006-09-08 2012-03-13 Mediatek Inc. Rate control method with frame-layer bit allocation and video encoder
US9247259B2 (en) 2006-10-10 2016-01-26 Flash Networks Ltd. Control of video compression based on file size constraint
US8180920B2 (en) 2006-10-13 2012-05-15 Rgb Networks, Inc. System and method for processing content
US20080120676A1 (en) 2006-11-22 2008-05-22 Horizon Semiconductors Ltd. Integrated circuit, an encoder/decoder architecture, and a method for processing a media stream
US8358690B2 (en) 2006-12-13 2013-01-22 Viasat, Inc. Predictive adaptive coding and modulation
US9270944B2 (en) 2007-02-14 2016-02-23 Time Warner Cable Enterprises Llc Methods and apparatus for content delivery notification and management
US8254761B2 (en) 2007-03-07 2012-08-28 Rovi Solutions Corporation Copying digital content by emulating playing of a recording medium by a player
GB0708440D0 (en) 2007-05-02 2007-06-06 Film Night Ltd Data transmission
US9398346B2 (en) 2007-05-04 2016-07-19 Time Warner Cable Enterprises Llc Methods and apparatus for predictive capacity allocation
WO2008154742A1 (en) 2007-06-19 2008-12-24 Vantrix Corporation A buffer-based rate control exploiting frame complexity, buffer level and position of intra frames in video coding
US8335266B2 (en) 2007-06-29 2012-12-18 Cisco Technology, Inc. Expedited splicing of video streams
US8023562B2 (en) 2007-09-07 2011-09-20 Vanguard Software Solutions, Inc. Real-time video coding/decoding
US8223837B2 (en) 2007-09-07 2012-07-17 Microsoft Corporation Learning-based image compression
US9247285B2 (en) 2007-09-10 2016-01-26 The Directv Group, Inc. Method and system for monitoring a content signal
JP5427785B2 (ja) 2007-09-28 2014-02-26 ドルビー ラボラトリーズ ライセンシング コーポレイション ビデオ圧縮技法及びビデオ伝達技法
EP2193663B1 (en) 2007-09-28 2017-11-08 Dolby Laboratories Licensing Corporation Treating video information
JP2009111691A (ja) 2007-10-30 2009-05-21 Hitachi Ltd 画像符号化装置及び符号化方法、画像復号化装置及び復号化方法
US8301793B2 (en) 2007-11-16 2012-10-30 Divx, Llc Chunk header incorporating binary flags and correlated variable-length fields
KR101350723B1 (ko) 2008-06-16 2014-01-16 돌비 레버러토리즈 라이쎈싱 코오포레이션 비디오 코딩을 위한 슬라이스 종속성에 기초한 레이트 제어 모델 적응 방법
US8300696B2 (en) 2008-07-25 2012-10-30 Cisco Technology, Inc. Transcoding for systems operating under plural video coding specifications
EP2151970B1 (en) 2008-08-09 2011-08-03 Saffron Digital Limited Processing and supplying video data
EP2321969A4 (en) 2008-09-09 2012-05-09 Onmobile Global Ltd METHOD AND APPARATUS FOR VIDEO TRANSMISSION
JP5549903B2 (ja) 2008-09-14 2014-07-16 雅英 田中 コンテンツの受信装置および配信装置
US8249168B2 (en) 2008-11-06 2012-08-21 Advanced Micro Devices, Inc. Multi-instance video encoder
WO2010057170A1 (en) 2008-11-17 2010-05-20 Cernium Corporation Analytics-modulated coding of surveillance video
US8396114B2 (en) 2009-01-29 2013-03-12 Microsoft Corporation Multiple bit rate video encoding using variable bit rate and dynamic resolution for adaptive video streaming
CN102365871A (zh) 2009-04-03 2012-02-29 日本电气株式会社 分配系统、分配方法、变换装置及程序
JP5435217B2 (ja) 2009-04-06 2014-03-05 株式会社リコー 画像形成用トナー、画像形成装置、画像形成方法、およびプロセスカートリッジ
GB2469528B (en) 2009-04-18 2011-10-05 Saffron Digital Ltd Transcoding video data
JP2010258894A (ja) 2009-04-27 2010-11-11 Canon Inc 映像受信装置、映像受信方法及びプログラム
US8270473B2 (en) 2009-06-12 2012-09-18 Microsoft Corporation Motion based dynamic resolution multiple bit rate video encoding
US8279926B2 (en) * 2009-06-18 2012-10-02 Cisco Technology, Inc. Dynamic streaming with latticed representations of video
US8588296B2 (en) 2009-07-02 2013-11-19 Dialogic Corporation Bitrate control algorithm for video transcoding systems
JP5038367B2 (ja) 2009-07-27 2012-10-03 日本電信電話株式会社 スケーラブル動画像符号化方法、スケーラブル動画像符号化装置およびスケーラブル動画像符号化プログラム
US8355433B2 (en) 2009-08-18 2013-01-15 Netflix, Inc. Encoding video streams for adaptive video streaming
US9565439B2 (en) 2009-10-15 2017-02-07 Nbcuniversal Media, Llc System and method for enhancing data compression using dynamic learning and control
WO2011068807A1 (en) 2009-12-01 2011-06-09 Divx, Llc System and method for determining bit stream compatibility
KR101487687B1 (ko) 2010-01-14 2015-01-29 삼성전자주식회사 큰 크기의 변환 단위를 이용한 영상 부호화, 복호화 방법 및 장치
JP5368631B2 (ja) 2010-04-08 2013-12-18 株式会社東芝 画像符号化方法、装置、及びプログラム
US8467412B2 (en) * 2010-04-14 2013-06-18 Ericsson Television Inc. Adaptive rate shifting for delivery of video services to service groups
US8705616B2 (en) 2010-06-11 2014-04-22 Microsoft Corporation Parallel multiple bitrate video encoding to reduce latency and dependences between groups of pictures
US8947492B2 (en) * 2010-06-18 2015-02-03 Microsoft Corporation Combining multiple bit rate and scalable video coding
US20120014663A1 (en) 2010-07-13 2012-01-19 Rovi Corporation Systems and methods for electronic sell-through of interactive multimedia content authored for distribution via physical media
US8914534B2 (en) 2011-01-05 2014-12-16 Sonic Ip, Inc. Systems and methods for adaptive bitrate streaming of media stored in matroska container files using hypertext transfer protocol
US9020039B2 (en) 2011-01-06 2015-04-28 Sonic Ip, Inc. Systems and methods for encoding alternative streams of video for use in adaptive bitrate streaming
US20160065959A1 (en) 2014-08-26 2016-03-03 Lyrical Labs Video Compression Technology, LLC Learning-based partitioning for video encoding
JP5810700B2 (ja) 2011-07-19 2015-11-11 ソニー株式会社 画像処理装置及び画像処理方法
JP2013030899A (ja) 2011-07-27 2013-02-07 Sony Corp 情報処理装置、情報処理方法、及びプログラム
KR101606661B1 (ko) 2011-11-18 2016-03-25 모토로라 모빌리티 엘엘씨 고효율 비디오 코딩(ｈｅｖｃ)을 위한 병치된 화상을 시그널링하기 위한 명시적 방법
US9532080B2 (en) 2012-05-31 2016-12-27 Sonic Ip, Inc. Systems and methods for the reuse of encoding information in encoding alternative streams of video data
US9426498B2 (en) 2012-07-10 2016-08-23 Broadcom Corporation Real-time encoding system of multiple spatially scaled video based on shared video coding information
US9350990B2 (en) 2013-02-28 2016-05-24 Sonic Ip, Inc. Systems and methods of encoding multiple video streams with adaptive quantization for adaptive bitrate streaming
US9357210B2 (en) 2013-02-28 2016-05-31 Sonic Ip, Inc. Systems and methods of encoding multiple video streams for adaptive bitrate streaming
CN105359511A (zh) 2013-05-24 2016-02-24 索尼克Ip股份有限公司 为了自适应位速率流化而利用自适应量化编码多个视频流的系统和方法
EP3038370A1 (en) 2014-12-22 2016-06-29 Alcatel Lucent Devices and method for video compression and reconstruction
WO2016132152A1 (en) 2015-02-19 2016-08-25 Magic Pony Technology Limited Interpolating visual data
US20160249109A1 (en) 2015-02-25 2016-08-25 Skipr.Tv, Llc System and method for the detection of advertisements in television and other video programming
US10007977B2 (en) 2015-05-11 2018-06-26 Netflix, Inc. Techniques for predicting perceptual video quality
US10034005B2 (en) 2015-06-05 2018-07-24 Sony Corporation Banding prediction for video encoding
CA2997193C (en) 2015-09-03 2021-04-06 Mediatek Inc. Method and apparatus of neural network based processing in video coding
EP3151562B1 (en) 2015-09-29 2020-06-17 Dolby Laboratories Licensing Corporation Feature based bitrate allocation in non-backward compatible multi-layer codec via machine learning
US11166027B2 (en) 2016-06-10 2021-11-02 Apple Inc. Content adaptation for streaming
US11049005B2 (en) 2017-03-22 2021-06-29 At&T Intellectual Property I, L.P. Methods, devices and systems for managing network video traffic
US10979718B2 (en) 2017-09-01 2021-04-13 Apple Inc. Machine learning video processing systems and methods
US10721471B2 (en) 2017-10-26 2020-07-21 Intel Corporation Deep learning based quantization parameter estimation for video encoding

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6229850B1 (en) * 1997-07-22 2001-05-08 C-Cube Semiconductor Ii, Inc. Multiple resolution video compression
US20070153914A1 (en) * 2005-12-29 2007-07-05 Nokia Corporation Tune in time reduction
US20100189179A1 (en) * 2009-01-29 2010-07-29 Microsoft Corporation Video encoding using previously calculated motion information

Also Published As

Publication number Publication date
WO2013181013A1 (en) 2013-12-05
JP2017063495A (ja) 2017-03-30
US20170104989A1 (en) 2017-04-13
BR112014029794A2 (pt) 2017-06-27
JP6463264B2 (ja) 2019-01-30
US11025902B2 (en) 2021-06-01
EP2856751A4 (en) 2017-03-01
JP2015523789A (ja) 2015-08-13
JP2019030022A (ja) 2019-02-21
EP2856751A1 (en) 2015-04-08
KR102144557B1 (ko) 2020-08-13
US9532080B2 (en) 2016-12-27
AU2017203764A1 (en) 2017-06-22
AU2017203764B2 (en) 2018-11-01
AU2013267738A1 (en) 2014-11-13
WO2013181013A8 (en) 2014-07-17
US20130322517A1 (en) 2013-12-05

Similar Documents

Publication Publication Date Title
US11025902B2 (en) Systems and methods for the reuse of encoding information in encoding alternative streams of video data
US20200396451A1 (en) Systems and Methods for Encoding Alternative Streams of Video for Playback on Playback Devices Having Predetermined Display Aspect Ratios and Network Connection Maximum Data Rates
US10728564B2 (en) Systems and methods of encoding multiple video streams for adaptive bitrate streaming
US9350990B2 (en) Systems and methods of encoding multiple video streams with adaptive quantization for adaptive bitrate streaming
US20130329781A1 (en) Techniques for adaptive video streaming
WO2016039956A1 (en) Techniques for adaptive video streaming
WO2014190308A1 (en) Systems and methods of encoding multiple video streams with adaptive quantization for adaptive bitrate streaming
KR20130139970A (ko) 클라이어트와, 콘텐트 생성기 엔티티 및 미디어 스트리밍을 위한 이들의 방법
AU2018250308B2 (en) Video compression using down-sampling patterns in two phases
US20130291031A1 (en) Systems and Methods for Adaptive Streaming with Augmented Video Stream Transitions Using a Media Server
CN106134202B (zh) Mmt资产和具有包含多个qoe操作点的改进的mmt qos描述符的isobmff的增强的失真信令
WO2013163221A1 (en) Systems and methods for adaptive streaming with augmented video stream transitions

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right