KR101428504B1 - 비트스트림에 임베딩된 메타데이터를 이용하는 렌더링 제어부를 갖는 비디오 디스플레이 - Google Patents

비트스트림에 임베딩된 메타데이터를 이용하는 렌더링 제어부를 갖는 비디오 디스플레이 Download PDF

Info

Publication number
KR101428504B1
KR101428504B1 KR1020127021699A KR20127021699A KR101428504B1 KR 101428504 B1 KR101428504 B1 KR 101428504B1 KR 1020127021699 A KR1020127021699 A KR 1020127021699A KR 20127021699 A KR20127021699 A KR 20127021699A KR 101428504 B1 KR101428504 B1 KR 101428504B1
Authority
KR
South Korea
Prior art keywords
metadata
video
video data
guard
display
Prior art date
Application number
KR1020127021699A
Other languages
English (en)
Other versions
KR20120106901A (ko
Inventor
네일 더블유. 메스머
Original Assignee
돌비 레버러토리즈 라이쎈싱 코오포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 돌비 레버러토리즈 라이쎈싱 코오포레이션 filed Critical 돌비 레버러토리즈 라이쎈싱 코오포레이션
Publication of KR20120106901A publication Critical patent/KR20120106901A/ko
Application granted granted Critical
Publication of KR101428504B1 publication Critical patent/KR101428504B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/025—Systems for the transmission of digital non-picture data, e.g. of text during the active part of a television frame
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

캡쳐, 후속 작업, 임의의 공지된 비디오 전달 채널, 디코딩 및 디스플레이 서브시스템들을 포함하는 시스템에서, 비디오 생성자의 생성 의도를 보전하기 위해 비디오 데이터를 생성하고, 편집하고, 전달하고, 처리하고 디스플레이하기 위한 장치 및 방법이 제공된다. 비디오 데이터의 후속 처리 및 디스플레이를 가이드하기 위해 이용된 참조 디스플레이 메타데이터는 후속 작업에서 동적으로 생성되고 비디오 데이터에 임베딩된다.

Description

비트스트림에 임베딩된 메타데이터를 이용하는 렌더링 제어부를 갖는 비디오 디스플레이{VIDEO DISPLAY WITH RENDERING CONTROL USING METADATA EMBEDDED IN THE BITSTREAM}
관련 출원들에 대한 상호-참조
본 출원은 전체에서 참조로서 여기서 통합되는, 2010년 2월 22일에 출원된 U.S. 우선권 특허 출원 번호 61/306,900에 대한 우선권을 청구한다.
본 발명은 비디오 데이터를 전달하고/전달하거나 비디오 데이터를 제어하는 시스템들, 디바이스들 및 방법들에 관한 것이다. 일부 실시예들은 비디오 데이터의 스트림에서 다른 데이터를 전달하는 시스템들, 디바이스 및 방법들을 제공한다. 일부 실시예들은 비디오 생성자의 생성 의도를 보전하기 위해 비디오 데이터를 생성, 전달, 처리 및 디스플레이하는 시스템들, 디바이스 및 방법들을 제공한다.
도 1은 비디오 캡쳐로부터 비디오 콘텐트 디스플레이로 여러 단계들을 도시하는 종래의 비디오 전달 파이프라인(100)의 흐름도이다. 비디오 프레임들(100)의 시퀀스는 블록(102)에서 캡쳐된다. 비디오 프레임들(101)은 비디오 데이터(103)의 스트림을 생성하기 위해 (예를 들면, 디지털 카메라에 의해) 디지털로 캡쳐되거나 컴퓨터(예를 들면, 컴퓨터 애니메이션을 이용하여) 생성될 수 있다. 대안으로, 비디오 프레임들(101)은 필름 카메라에 의해 필름상에서 캡쳐될 수 있다. 필름은 비디오 데이터(103)의 스트림을 제공하기 위해 디지털 포맷으로 변환된다.
비디오 데이터(103)는 후속 편집 작업에 대해 블록(104)에서 프로세서에 제공된다. 블록(104)은 비디오 생성자의 생성 의도에 따라 이미지에 대한 특정 표현을 달성하거나 이미지 품질을 개선하기 위해 이미지의 특정 영역들의 색들 또는 밝기를 조정 또는 수정하는 것을 포함할 수 있다. 다른 편집(예를 들면, 장면 선택 및 시퀀싱, 이미지 크로핑, 컴퓨터 생성된 시각 특수 효과 등의 부가)은 블록(104)에서 실행될 수 있다. 블록(104) 후속 편집 작업 동안, 비디오 이미지들은 참조 디스플레이 상에 보여진다.
이후 후속 작업에서, 비디오 데이터(103)는 블록(106)에서 디스플레이 서브시스템에 전달된다. 도 1a를 참조하면, 블록(106) 전달은 비디오 분배 매체(105)(예를 들면, 위성, 케이블, DVD 등)를 통해 브로드캐스트 또는 비디오 데이터(103)의 송신을 위해 인코더 단계(107A)를 포함한다. 디코더 단계(107B)는 매체(105)를 통해 송신된 비디오 데이터(103)를 디코딩하기 위해 블록(106)의 디스플레이 끝에 위치된다. 디스플레이 서브시스템은 비디오 프로세서 및 디스플레이를 포함할 수 있다. 블록(108)에서, 비디오 데이터(103)는 처리 및/또는 디코딩을 위해 비디오 프로세서에 제공된다. 비디오 데이터(103)는 시청자에게 이미지들의 시퀀스를 디스플레이하기 위해 블록(110)에서 디스플레이에 출력된다.
디스플레이된 이미지들의 품질을 개선하기 위해, 비디오 데이터(103)는 각 크로미넌스 (색) 채널에 대한 크로마 값들 또는 RGB를 규정하는 증가된 비트 심도을 용이하게 하도록 상대적으로 높은 비트 레이트로 비디오 전달 파이프라인(100)을 통해 구동될 수 있다. 예를 들면, 비디오 데이터(100)의 스트림은 화소의 각 크로미넌스 채널에 대해 데이터의 8, 10 또는 12 비트들을 포함할 수 있다.
각 크로미넌스 채널에 대한 높은 비트 심도를 이용함에도 불구하고, (루미넌스 범위, 색 정도 등과 같은) 디스플레이 특성들에서 변화들은, 랜더링된 이미지가 비디오의 생성자의 생성 의도와 매칭되지 않도록 디스플레이 상에서 랜더링된 이미지의 출현에 영향을 미칠 수 있다. 특히, 특정 디스플레이 서브시스템상에서 랜더링된 이미지의 감지된 색 또는 밝기는 블록(104) 후속 편집 작업 동안 참조 디스플레이 상에서 관측된 이미지의 색 또는 밝기와 다를 수 있다.
더욱이, 비디오 전달 파이프라인(100)(도 1)의 블록들(104, 108 및 110)에 의해 표현된 단계들과 같이 종래의 비디오 전달 파이프라인의 처리 또는 디스플레이 단계들에서 적용된 방법들은 비디오 전달 파이프라인(100)의 다른 단계들에서 발생될 수 있는 처리를 고려하지 않고 미리 구성된 방식으로 통상적으로 실행된다. 예를 들면, 블록(110) 비디오 데이터(103)를 디스플레이하는 방법들은 블록(104) 후속 편집 작업과 같이, 비디오 전달 파이프라인(100)에서 이전 처리 단계들이 어떻게 실행되는지에 대한 지식없이 실행될 수 있다. 블록(110) 디스플레이는 블록(104) 후속 편집 작업에 의해 결정된, 비디오 창작자의 창작 의도(video creator's creative intent)를 보전하는 방식으로 디스플레이 상에 이미지를 랜더링하기에 적합하지 않을 수 있다.
비디오 창작자의 창작 의도를 보전하기 위해 비디오 데이터를 생성, 전달, 처리 및 디스플레이하는 시스템들, 디바이스 및 방법들에 대한 일반적인 요구가 존재한다. 비디오 데이터의 디스플레이 및/또는 다운스트림 처리를 가이드하기 위해 이용될 수 있는 정보를 제공하는 시스템들, 디바이스 및 방법들에 대한 일반적인 요구가 존재한다.
메타데이터를 포함하는 디스플레이 서브시스템에 비디오 데이터를 제공하는 시스템들, 디바이스 및 방법들이 제공된다. 비디오 데이터는 콘텐트 전달의 유형에 적합할 수 있는 시스템들, 디바이스 및 방법들을 이용하는 디스플레이 서브시스템에 송신 또는 제공될 수 있다(예를 들면, 위성을 통한 브로드캐스트 중계, 케이블 또는 고화질 네트워크들; IP 또는 무선 네트워크들을 통한 멀티미디어 스트리밍; 및 DVD 또는 다른 저장 매체 등으로부터의 재생). 특정 실시예들에 따라, 메타데이터는 비디오 전달 파이프라인의 하나 이상의 단계들에서 생성되고 비디오 데이터에 임베딩된다. 메타데이터는 비디오 데이터를 편집하기 위해 이용된 참조 디스플레이의 특성들, 참조 디스플레이가 위치된 환경의 특성들, 편집된 이미지의 특성들(루미넌스 및 색 영역), 디스플레이 서브시스템의 디스플레이가 위치된 시청 환경의 특성들에 관련한 정보를 제공할 수 있다.
메타데이터는 디스플레이 서브시스템과 같은 다운스트림 디바이스로 비디오 데이터로 전달된다. 메타데이터는 임베딩된 메타데이터가 적용될 비디오 프레임에 앞서 다운 스트림 디바이스에 의해 전달 및 수신될 수 있다. 메타데이터는 디스플레이에 대한 비디오 데이터를 조정하기 위해 비디오 데이터를 처리 및/또는 디스플레이 서브시스템의 디스플레이를 구성하기 위해 적용되고 디스플레이 서브시스템에서 검출되고 디코딩될 수 있다.
어떤 실시예들에서, 메타데이터는 비디오 데이터에 복수의 가드 비트들을 겹쳐씀으로써 비디오 데이터에 임베딩될 수 있다. 다른 실시예들에서, 메타데이터는 크로미넌스 채널들의 최하위 비트와 같은 비디오 데이터의 복수의 최하위 비트를 겹쳐씀으로써 비디오 데이터 내에 임베딩될 수 있다. 데이터의 다른 유형들은 본 명세서에서 기술된 방법들을 이용하여 비디오 데이터 내에 임베딩될 수 있다.
예약된 비디오 워드들(reserved video words)(예를 들면, 예약된 화소값들) 및 예약된 메타데이터 워드들(예를 들면, 프레임 헤더들의 시작 또는 끝)의 의도되지 않은 통신을 피하기 위해 메타데이터를 인코딩하는 방법이 제공된다. 가드 비트들이 메타데이터로 겹쳐써지는 실시예들에서, 가드 비트를 선행하는 복수의 비디오 데이터 비트들은 가드 비트가 가드를 포함해야 하는지; 그렇지 않으면, 메타데이터의 비트가 가드 비트에서 임베딩될 수 있는 지를 결정하기 위해 예약된 비디오 워드들과 비교된다.
상기에서 기술된 예시적인 측면들 및 실시예들에 부가하여, 다른 측면들 및 실시예들은 하기의 상세한 기술의 연구에 의해 그리고 도면들의 참조에 의해 명확해질 것이다.
예시적인 실시예들이 참조된 도면들에 개시된다. 본 명세서에서 개시된 실시예들 및 도면들은 제한적이기보다 예시적으로 고려되도록 의도된다.
도 1은 종래의 비디오 전달 파이프라인의 단계들을 도시한 도면.
도 1a는 도 1 비디오 전달 파이프라인에서 실행될 수 있는 비디오 데이터의 전달 단계들을 도시한 흐름도.
도 2a는 특정 실시예들에 따라 메타데이터를 전달하기 위해 이용될 수 있는 가드 비트들을 갖는 가시-동적 범위(VDR) 포맷에서 비디오 데이터의 프레임들을 도시한 도면.
도 2b는 특정 실시예들에 따라 메타데이터를 전달하기 위해 이용될 수 있는 각 크로미넌스 채널에서 최하위 비트를 갖는 비-VDR 포맷들에서 비디오 데이터의 프레임들을 도시한 도면.
도 2c는 특정 실시예들에 따라 메타데이터를 전달하기 위해 이용될 수 있는 비트들의 그룹을 갖는 비-VDR 포맷들에서 비디오 데이터의 프레임들을 도시한 도면.
도 3은 비디오 창작자의 창작 의도를 보전하기 위해 일 실시예에 따라 비디오 데이터를 생성, 전달, 처리 및 디스플레이하는 방법들 및 비디오 전달 파이프라인을 통한 비디오 데이터의 흐름을 도시한 흐름도.
도 3a는 도 3 비디오 전달 파이프라인에서 실행될 수 있는 비디오 데이터의 전달 단계들을 도시한 흐름도.
도 4a는 비디오 데이터에 메타데이터를 인코딩하는 일 실시예에 따른 방법을 도시한 흐름도.
도 4b는 도 4a의 방법을 이용하여 비디오 데이터에 인코딩된 메타데이터를 디코딩하는 일 실시예에 따른 방법을 도시한 흐름도.
도 5a 및 도 5b는 다른 특정 실시예들에 따른 비디오 데이터에 메타데이터를 인코딩하는 방법들을 도시한 흐름도들.
도 6a는 일 실시예에 따른 메타데이터 패킷을 도시한 도면.
도 6b는 도 6a의 메타데이터 패킷을 프레이밍하기 위해 이용될 수 있는 헤더를 도시한 도면.
도 7은 수신된 메타데이터가 적용될 때를 도시한 타임라인 및 프레임들의 시퀀스에 전달될 수 있는 메타데이터를 도시한 도면.
도 8은 하나의 실시예에 따른 메타데이터의 전달을 관리하는 방법을 도시한 흐름도.
도 9는 본 명세서에서 기술된 하나 이상의 방법들을 구현하기 위해 이용될 하나의 실시예에 따른 시스템을 개략적으로 도시한 흐름도.
도 10은 2개의 연속적인 프레임들을 통해 송신된 다른 유형들의 메타데이터를 포함하는 메타데이터 패킷들의 시퀀스를 도시한 도면.
도 11a는 비디오 데이터에 메타데이터를 인코딩하기 위해 이용될 수 있는 하나의 실시예에 따른 서브시스템을 개략적으로 도시한 흐름도.
도 11b는 비디오 데이터로부터 메타데이터를 추출하기 위해 이용될 수 있는 하나의 실시예에 따른 서브시스템을 개략적으로 도시한 흐름도.
하기의 기술을 통해, 구체적인 상세한 것들이 당업자가 더 잘 이해하는데 도움이 되도록 설정된다. 하지만, 잘 알려진 요소들은 개시를 불필요하게 어렵게 하는 것을 피하기 위해 상세하게 도시되거나 기술되지 않을 수 있다. 따라서, 기술 및 도면들은 제한적인 의미보다는 예시적인 것으로 고려될 것이다.
예시적인 실시예들은 비디오 전달 파이프라인에서 유용한 시스템들, 디바이스 및 방법들을 제공한다. 메타데이터는 비디오 데이터로 기록되고 전달 파이프라인을 통해 비디오 데이터로 전달된다. 메타데이터는 예를 들면, 디스플레이 상에서 비디오 데이터를 처리하고/처리하거나 비디오 재생을 인도하는 다운스트림 디바이스들을 인도하는데 유용할 수 있다. 디스플레이는 텔레비전, 컴퓨터 모니터, 랩톱, 휴대 전화 또는 휴대용 이동 디바이스 등 또는 비디오 데이터를 디스플레이할 수 있는 어떤 다른 디스플레이로 제공될 수 있는 것 같은 평판 디스플레이가 될 수 있다.
메타데이터는 비디오 캡쳐, 후속 편집 작업, 및 사전-디스플레이 처리를 포함하는 비디오 전달 파이프라인을 통해 여러 단계들에서 비디오 데이터 스트림으로 동적으로 생성되고 및 기록 또는 임베딩될 수 있다. 메타데이터는 예를 들면, 색영역 및 후속 편집 작업, 이미지에서 광원들의 위치, 변경되지 않아야 하는 이미지의 보호된 색들을 포함하는 파라미터들을 정의할 수 있다. 그와 같은 메터데이터는 디코더 및/또는 디스플레이에 의해 디코딩 및 처리될 수 있고 디스플레이 상에서 비디오 재생을 제어 및 개선하기 위한 디스플레이 관리 및 구성 및/또는 비디오 데이터의 처리를 위해 이용될 수 있다. 메타데이터는 비디오 창작자의 창작 의도를 유지하는 방식으로 비디오를 디스플레이하기 위해 디스플레이를 제어(및/또는 디스플레이에 대한 비디오 데이터를 처리)하기 위해 이용될 수 있다.
특정 실시예들에 따라서, 비디오 데이터는 크로미넌스 채널들의 LSB(최하위 비트)들과 같은 LSB들 및/또는 가드 비트들을 포함할 수 있다. 일부 실시예들에서, 메타데이터는 가드 비트들 및/또는 LSB들에서 전달된다. VDR 포맷(도 2 참조)과 같은 비디오 포맷들에 대해, 비디오 데이터 프레임(10)은 하나 이상의 가드 비트들(11)을 포함할 수 있다. 메타데이터(225)는 가드 비트들(11)의 적어도 일부에 기록될 수 있다. 비-VDR 포맷(도 2b 참조)과 같은 다른 비디오 포맷들에 대해, 비디오 데이터 프레임(10)은 하나 이상의 LSB들(12)(예를 들면, 크로미넌스 또는 루미넌스 채널들의 각각의 LSB들)을 포함할 수 있다. 메타데이터(225)는 LSB들(12)의 적어도 일부에 기록될 수 있다. 휴먼 비전 시스템(HVS)은 루미넌스의 변화들보다는 색도의 변화들에 덜 민감하다. 따라서, 이 HVS 특성을 고려해볼 때, 일부 실시예들에서, 메타데이터(225)는 하나 이상의 크로미넌스 채널들에서의 LSB(12)에 기록될 수 있다. 메타데이터(225)의 비트들은 가변의 또는 고정된 길이의 메타데이터(225)의 패킷들을 제공하기 위해 비디오 데이터 프레임들(10) 내의 가드 비트들 및/또는 LSB들(12) 상으로 직렬화될 수 있다. VDR 포맷은 참조를 위해 본 명세서에 포함된 "레거시 비디오 인터페이스들을 통해 확장된 동적 범위 및 확장된 차원수 이미지 신호 변환 및/또는 전달"에 관한 공동 소유된 PCT 출원 번호 PCT/US2010/022700에서 기술된 비디오 포맷이다.
비-VDR 또는 LSB들(예를 들면, 크로미넌스 채널들의 LSB들)을 갖는 다른 포맷들에서 비디오 데이터에 대해, 메타데이터는 예를 들면, 다음의 방식들 중 하나로 LSB들에 기록될 수 있다.
메타데이터는 모든 LSB들이 잠재적으로 메타데이터를 전달하도록 각 크로미넌스 채널의 LSB에 기록될 수 있다.
메타데이터는 모든 LSB들이 잠재적으로 메타데이터를 전달하지 않도록 일부 LSB들 건너뛰는 방식 또는 각 크로미넌스 채널의 LSB의 라운드-로빈 방식으로 기록될 수 있다.
메타데이터는 LSB들을 겹쳐씀으로써 영향을 받을 상대적으로 감소된 성향을 갖는 이미지의 영역들에서 화소들의 크로미넌스 채널들의 LSB들에서 기록될 수 있다. 예를 들면, 일부 실시예들에서, 메타데이터는 더 밝은 이미지 영역들에서 덜 현저할 수 있는 LSB를 겹쳐씀으로써 발생된 디스플레이된 이미지에서 변화하는 일반적인 성향의 이익을 얻기 위해 더 밝은 이미지 영역들의 화소들의 크로미넌스 채널들의 LSB들에 기록될 수 있다.
일부 실시예들에서, LBS들에 메타데이터를 기록하는 방법은 메타데이터를 전달하기 위해 각 크로미넌스 채널 (또는 다른 유형들의 데이터)의 LSB를 겹쳐쓰는 것으로부터 발생할 수 있는 비디오 콘텐트 디스플레이에서 이미지 품질의 가능한 손실을 고려하도록 선택될 수 있다. 메타데이터를 기록하는 방법들은 디스플레이된 이미지에서 아티팩트들을 감소 또는 최소화하기 위해 비디오 데이터 또는 이미지에 기초하여 선택될 수 있다.
가변하는 메타데이터의 양이 각 비디오 프레임에 대한 비디오 전달 파이프라인을 통해 송신될 수 있으므로, 메타데이터의 전달 및 처리의 시기를 관리하기 위한 방법들 및 디바이스들이 제공될 수 있다. 예를 들면, 복수의 비디오 프레임들을 걸치는 메타데이터 페이로드는 메타데이터가 적용될 특별한 비디오 프레임의 처리에 앞서 비디오 디코더 또는 프로세서에 의해 송신되고 및 수신될 수 있다. 메타데이터 페이로드는, 메타데이터가 디스플레이를 관리하거나 구성하기 위해 비디오 디코더 또는 프로세서에 의해 적용될 때를 나타내는 타임스탬프를 갖고 송신될 수 있다.
메타데이터 페이로드는 우선순위 레벨로 할당될 수 있다. 비교적 높은 우선순위 메타데이터로서 분류되는 메타데이터는 비교적 낮은 우선 순위 메타데이터로서 분류되는 메타데이터의 전달 이전에 전달될 수 있는 그와 같은 시스템들, 디바이스 및/또는 방법들이 제공될 수 있다. 그와 같은 시스템들, 디바이스들 및/또는 방법들은 하나 이상의 비디오 프레임들에 대해 생성된 모든 메타데이터를 송신하기 위해 비디오 전달 파이프 라인의 불충분한 대역폭이 있는 메타데이터를 관리하기 위해 이용될 수 있다. 특별한 실시예들에서, 비디오 전달 파이프라인을 통한 메타데이터의 전달은 비교적 높은 우선 순위 메타데이터로 분류되는 다른 메타데이터의 송신을 허용하도록 일시적으로 중단될 수 있다.
다른 전송 메커니즘들은 부가적인 메타데이터를 전달하기 위해 제공될 수 있다. 예를 들면, 일부 비디오 포맷들에서, 비디오 데이터는 루미넌스 데이터로부터 분리하여 표현되는 크로미넌스 데이터를 포함한다. 일부 실시예들은 메타데이터를 갖는 비디오 프레임들의 영역들 또는 특별한 비디오 프레임들에 대한 크로미넌스 데이터를 겹쳐쓰기 함으로써 비디오 전달 파이프라인을 통해 메타데이터의 버스트를 제공한다. 루미너스 레벨이 영이거나 임계치 아래인 화소들에 대해, 크로미넌스 데이터는 디스플레이된 이미지의 출현에 실질적으로 영향을 주지 않고 메타데이터(225)의 비트들로 겹쳐써질 수 있다. 메타데이터는 필드들, 값들, 비트들 등을 포함할 수 있는 비디오 데이터의 크로미넌스 부분들 또는 크로미넌스 채널들에 기록될 수 있다. 도 2c는 메타데이터(225)로 겹쳐써질 수 있는 데이터 프레임들(10)에서 일련의 비트들(13)을 포함하는 크로미넌스 부분들을 도시한다. 크로미넌스 부분들에서 메타데이터의 인코딩은 참조를 위해 본 명세서에 포함된 "비디오 데이터를 겹쳐쓰기 함으로써 비디오 디스플레이를 제어하고 비디오 전달을 위한 시스템들, 디바이스 및 방법들"의 명칭을 갖는 공동 소유되고 공동 계류중인 출원에서 기술된다.
도 3은 특정 실시예에 따라 비디오 전달 파이프라인(200)을 통해 데이터의 흐름을 도시하는 흐름도이다. 비디오 전달 파이프라인(200)은 도 1의 비디오 전달 파이프라인(100)에서 도시된 것과 같은 유사한 단계들을 포함하고, 따라서, 도 3의 비디오 전달 파이프라인(200)에서, 참조 번호들이 "1" 대신에 "2"로 시작하는 것을 제외하곤 유사한 단계들에서 식별하기 위해 이용된다. 비디오 전달 파이프라인(200)의 하나 이상의 단계들에서, 메타데이터(225)는 다운스트림 단계에서 이용을 위해 비디오 데이터(203)의 스트림에 생성되고 임베딩될 수 있다. 메타데이터(225)는 블록(210)에서 디스플레이 서브시스템에서 비디오 재생을 가이드하고/가이드하거나 비디오 데이터 처리에서 다운스트림 디바이스들을 가이드하기 위해 비디오 전달 파이프라인(200)을 통해 비디오 데이터(203)를 따라 송신된다. 임베딩된 메타데이터(225)를 포함하는 비디오 데이터(203)는 비디오 콘텐트 전달의 유형에 적합한 시스템들, 디바이스 및 방법들(예를 들면, 위성, 케이블 또는 고화질 네트워크를 통한 텔레비전 브로드캐스트; IP 또는 무선 네트워크들을 통한 스트리밍 멀티미디어; DVD 또는 다른 저장 매체등으로부터의 재생)을 이용하여 블록(206)에서 디스플레이 서브시스템에 전달될 수 있다.
도 3의 실시예에서, 카메라 메타데이터(225a)는 블록(202)에서 비디오 데이터(203)에서 생성되고 임베딩된다. 카메라 메타데이터(225a)는 카메라 설정들 및 비디오 프레임 캡쳐 환경에 기초하여 생성될 수 있다. 카메라 메타데이터(225a)는 예를 들면, 비디오 프레임 캡쳐 동안 카메라 설정들의 스냅샷을 제공하는 카메라 파라메터들을 포함할 수 있다. 그와 같은 파라미터들은 조리개(f-스톱), 렌즈, 셔터 스피드, 민감도(ISO 등급들) 등을 포함할 수 있다. 이러한 카메라 파라미터들은 블록(204)에서 후속 편집 작업 또는 블록(210)에서 디스플레이 구성 동안 컬러 조정들(예를 들면, 컬러 타이밍)과 같은 비디오 전달 파이프라인(200)에서 그 다음 단계들 가이드하기 위해 이용될 수 있다.
블록(204)에서, 후속 작업 메타데이터(225b)는 비디오 데이터(203)에서 생성되고 임베딩된다. 후속 작업 메타데이터(225b)는: 참조 디스플레이 및 환경 메타데이터(225b1) 및 소스 비디오 콘테트 특성 메타데이터(225b2)를 포함할 수 있다. 후 작업 메타데이터(225b)는 블록(210)에서 디스플레이 구성과 같은 비디오 전달 파이프 라인(200)에서 후속 단계들을 가이드하기 위해 이용될 수 있다.
참조 디스플레이 및 환경 메타데이터(225b1)는 블록(204) 편집 작업에서 이용된 참조 디스플레이 구성 및 스튜디오 또는 시청 환경을 기술할 수 있다. 예를 들면, 블록(204) 후속 편집 작업 동안 비디오 데이터(203)를 디스플레이하기 위해 이용된 참조 디스플레이에 관하여, 참조 디스플레이 및 환경 메타데이터(225b1)는 다음과 같은 파라미터들을 포함할 수 있다:
Figure 112012066386826-pct00001
고 해상도에서 참조 디스플레이의 톤 및 색 영역 경계들을 기술하는 3D 색 영역 맵핑;
Figure 112012066386826-pct00002
(3D 색 영역 맵핑을 추정하기 위해 이용될 수 있는) 참조 디스플레이의 톤 및 색 영역 경계들을 규정하는 감소된 파라미터들의 세트;
Figure 112012066386826-pct00003
각 크로미넌스 채널에 대해 참조 디스플레이의 색조 응답을 기술하는 시스템 색조 응답 파라미터들;
Figure 112012066386826-pct00004
및/또는 기타.
참조 디스플레이 및 환경 메타데이터(225b1)는 비디오 콘텐트가 블록(204) 후속 편집 작업 동안 색-타이밍되거나 편집되는 스튜디오 환경을 기술하는 파라미터들을 또한 포함할 수 있다. 그와 같은 파라미터들은 주위 루미넌스 및 주위 색 온도를 포함할 수 있다.
소스 비디오 콘텐트 특성 메타데이터(225b2)는 하기의 것들을 확인하거나 제공할 수 있는 정보를 포함하는 후속 편집 작업 비디오 콘텐트를 기술할 수 있다.
Figure 112012066386826-pct00005
이미지에서 광원들의 위치 맵 또는 이미지에서 반사 또는 발광체들의 위치 맵;
Figure 112012066386826-pct00006
비디오 소스 콘텐트의 색 영역;
Figure 112012066386826-pct00007
참조 디스플레이의 색 영역의 외부에 고의로 색-타이밍된 이미지의 영역들;
Figure 112012066386826-pct00008
비디오 프로세서에 의해 처리하는 전-디스플레이 동안 또는 디스플레이 구성 동안 변경되지 말아야 하는 보호된 색상들;
Figure 112012066386826-pct00009
루미넌스 또는 색영역에 관한 이미지를 특성화하는 이미지 히스토그램(예를 들면, 그와 같은 정보는 톤 및 색 영역 맵핑을 개선하도록 평균 루미넌스를 결정하기 위해 다운스트림 디바이스들에 의해 이용될 수 있다);
Figure 112012066386826-pct00010
이전의 비디오 프레임들로부터의 어떤 통계들 또는 자기 이력 현상이 더 이상 유효하지 않는 다운스트림 디바이스들에 위험을 알리는 장면 변화 또는 리셋 플래그;
Figure 112012066386826-pct00011
톤 및 색 영역 맵핑을 가이드하기 위해 광원 위치 맵과 조합하여 다운스트림 디바이스들에 의해 이용될 수 있는 움직이는 객체들을 식별하기 위해 비디오 콘텐트를 특징화하는 모션 맵;
Figure 112012066386826-pct00012
색-타이밍된 콘텐트의 소스의 표시(예를 들면, 카메라로부터 직접 또는 후속 편집 작업);
Figure 112012066386826-pct00013
디코더/텔레비전 또는 다른 디스플레이 같은 다운스트림 디바이스들을 제어하기 위해 이용될 수 있는 편집자의 생성 의도 설정들. 예를 들면, 그와 같은 설정들은: 특정 모드(예를 들면, 선명, 영화, 표준, 전문가 등)에서 동작하기 위해 디스플레이를 제어할 능력을 제공하는 디스플레이 모드 제어; 적절한 색 영역 또는 톤 맵핑 등을 결정하기 위해 이용될 수 있는 콘텐트 유형(예를 들면, 애니메이션, 드라마, 스포츠, 게임들 등); 톤 맵핑(예를 들면, 디스플레이에서 톤 확장을 가이드하기 위해 이용될 수 있는 맞춤형 톤 맵핑 파라미터들 또는 커브들); 및 색 영역 맵핑(예를 들면, 디스플레이에서 색 영역 확장을 가이드하기 위해 이용될 수 있는 맞춤형 색 영역 맵핑 파라미터들);
Figure 112012066386826-pct00014
및/또는 기타.
비디오 데이터(203)는 블록(206)에서 디스플레이 서브시스템에 전달된다. 도 3a에서 도시된 것처럼, 블록(206)은 위성, 케이블, 또는 고화질 네트워크들; IP 또는 무선 네트워크들; 또는 DVD 또는 다른 저장 매체 등과 같은 비디오 분배 매체(205)를 통해 비디오 데이터(203)의 분배, 브로드캐스트 또는 송신을 구동하는 인코더 단계(207A)를 포함할 수 있다. 디코더 단계(207B)는 매체(205b)를 통해 분배된 비디오 데이터(203)를 디코딩하기 위해 블록(206)의 디스플레이 말단에 제공될 수 있다. 디코더 단계(207B)는 예를 들면, 셋-탑 박스 또는 디스플레이 서브시스템 내의 디코더에 의해 구현될 수 있다. 블록들(206 및/또는 208)에서, 환경 메타데이터(225C) 및/또는 다른 메타데이터(225)를 관측하는 것은 비디오 데이터(203)에 임베딩될 수 있다. 환경 메타데이터(225C)를 관측하는 것은, 예를 들면, 하기의 것들을 포함할 수 있다:
Figure 112012066386826-pct00015
참조 환경의 참조 모니터 톤 맵핑 또는 색 영역 커브들 또는 주위의 루미넌스를 제공하는 개선된 비디오 코딩(AVC) VDR 인코더 데이터. 이 정보의 적어도 일부는 디스플레이 서브시스템의 환경 및 (예를 들면, 디스플레이의 확장된 디스플레이 식별 데이터(EDID)를 판독함으로써) 디스플레이 특성들의 지식을 갖는 디코더 단계(207B)에서 (또는 비디오 프로세서에 의해) 결정될 수 있다. 일부 실시예들에서, 이 정보의 적어도 일부는 비디오 데이터의 후속 작업 처리 동안 스튜디오에서 결정될 수 있다.
Figure 112012066386826-pct00016
디스플레이 서브시스템의 디스플레이가 고려되는 환경을 기술하는 파라미터들. 그와 같은 파라미터들은, 예를 들면, 주위 루미넌스 및/또는 톤 또는 색 온도를 포함할 수 있다.
관측 환경 메타데이터(225C)는 블록(208)에서 비디오 데이터의 처리를 가이드하고/가이드하거나 블록(210)에서 구성을 디스플레이하기 위해 이용될 수 있다.
디스플레이 서브시스템은 블록(208)에서 인입하는 비디오 데이터(203)를 처리하는 비디오 프로세서를 포함한다. 디스플레이 서브시스템의 비디오 프로세서는 비디오 데이터(203)로부터 추출된 메타데이터(225)(예를 들면, 메타데이터(225a)) 및/또는 디스플레이 서브시스템의 디스플레이에 연관된 알려진 디스플레이 특성에 기초한 비디오 데이터(203)에 관한 신호 처리를 실행할 수 있다. 비디오 데이터(203)는 디스플레이 특성 파라미터들(226) 및/또는 메타데이터(225)에 따라 디스플레이를 위해 처리 및 조정될 수 있다.
비디오 전달 파이프라인(200)의 블록들(206 및/또는 208), 또는 다른 단계들에서 비디오 데이터(203)에 임베딩될 수 있는 다른 메타데이터(225)는 예를 들면, 다음과 같은 (분배권 등을 관리하는) 하우스키핑 메타데이터(housekeeping metadata)(225D)를 포함한다.
Figure 112012066386826-pct00017
비디오 콘텐트가 생성되고, 분배되고, 수정되는 것 등을 나타내는 워터마킹 데이터;
Figure 112012066386826-pct00018
목적들을 탐색 또는 색인화하는 비디오 콘텐트의 기술을 제공하는 핑거프린팅 데이터;
Figure 112012066386826-pct00019
누가 비디오 콘텐트를 소유하고/소유하거나 누가 그것에 액세스하는지를 가리키는 보호 데이터;
Figure 112012066386826-pct00020
및/또는 기타.
환경 메타데이터(225C)를 관측하는 것은 디스플레이 서브시스템의 디스플레이에 연관된 디스플레이 특성화 파라미터들(206)에 적어도 부분적으로 기초하여 생성될 수 있다. 일부 실시예들에서, 환경 메타데이터(225C), 소스 비디오 콘텐트 특정 메타데이터(225b2) 및/또는 하우스키핑 메타데이터(225D)를 관측하는 것은 인코더 단계(207A), 디코더 단계(207B)에서 비디오 데이터(103)의 분석에 의해 및/또는 블록(208)에서 비디오 프로세서에 의해 생성 또는 제공될 수 있다.
블록(210)에서, 디스플레이 구성은 디스플레이 서브시스템의 디스플레이 상에서 실행될 수 있다. 디스플레이 구성에 대한 적합한 파라미터들은 카메라 메타데이터(225a), (참조 디스플레이 및 환경 메타데이터(225b1) 및 소스 비디오 콘텐트 특정 메타데이터(225b2)를 포함하는) 후속 작업 메타데이터(225b) 및 환경 메타데이터(225C) 관측과 같은 디스플레이 특성화 파라미터들(226) 및/또는 메타데이터(225)에 기초하여 결정될 수 있다. 디스플레이는 그와 같은 파라미터들을 따라 구성된다. 비디오 데이터(203)는 디스플레이에 출력된다.
메타데이터(225)가 비디오 전달 파이프라인(200)을 통해 전달된 비디오 프레임에 대해 블록들(202, 204, 206, 또는 208)에서 생성되기 때문에, 메타데이터(225)는 파이프라인을 통해 전달된 비디오 프레임들의 LSB들 및/또는 이용가능한 가드 비트들에 직렬로 기록될(serially written) 수 있다. 요구된 메타데이터 대역폭은 특정 메타데이터 유형들에 대한 메타데이터 송신의 주파수 및 크기에 의존하여 비디오 프레임들 사이에서 변할 수 있다. 일정 실시예들에 따라, 메타데이터(225)의 일부 형태들은 10초 정도마다 다운스트림 송신될 수 있다(예를 들면, 이것은 참조 디스플레이 및 환경 메타데이터(225b1)를 포함할 수 있다); 다른 유형들의 메타데이터(225)는 프레임 시퀀스마다 한번 또는 장면 변화마다 한번 다운스트림 송신될 수 있다(예를 들면, 이것은 환경 메타데이터(225C)를 관측하는 것); 또 다른 유형들의 메타데이터(225)는 프레임마다 한번 또는 몇개의 프레임들마다 한번 송신될 수 있다(예를 들면, 이것은 소스 비디오 콘텐트 특정 메타데이터(225b2)의 일부 파라미터들을 포함할 수 있다).
일부 비디오 프레임들에 대해, 하나의 비디오 프레임의 가드 비트들 또는 LSB들 내의 블록들(202, 204, 206 또는 208)에서 생성된 모든 메타데이터(225)를 순차로 임베딩하는(sequentially embed) 것이 가능할 수 있다. 다른 비디오 프레임들에 대해, 블록들(202, 204, 206 또는 208)에서 생성된 메타데이터(225)는 전달할 하나 이상의 비디오 프레임을 요구할 수 있고, 비디오 전달 파이프라인(200)에 의해 제공된 메타데이터 대역폭을 초과할 수 있다. 이것은 메타데이터의 비-전달을 일으킨다. 아래에서 더 상세하게 논의되는 것과 같이, 메타데이터(225)가 적절하게 전달되고 적용되는 것을 명확하게 하도록 비디오 전달 파이프라인(200)을 통해 메타데이터(225)의 인코딩 및 전달을 관리하는 시스템들, 디바이스 및 방법들이 제공된다.
블록(208)에서 비디오 데이터(203) 및 블록(210)에서 디스플레이 구성의 처리를 위해 이용된 메타데이터(225)는, 메타데이터(225)가 적용 이전에 (비디오 프로세서 및 디스플레이를 포함하는) 디스플레이 서브시스템에서 수신되도록 비디오 데이터 스트림에 전달된다. 일부 실시예들에서, 메타데이터(225)는 메타데이터(225)가 적용될 프레임에 앞서 적어도 하나의 프레임에서 디스플레이 서브시스템에 의해 수신되도록 전달된다. 어떤 실시예들에서, 메타데이터(225)는 하나의 비디오 프레임 앞에서 전달되고, 블록들(208 및/또는 210)에서 메타데이터(225)의 애플리케이션은 인입하는 비디오 스트림에서 새로운 비디오 프레임의 검출시에 트리거링될 수 있다.
특별한 실시예들에서, 비디오 전달 파이프라인(200)의 시스템들 및/또는 디바이스는 메타데이터 구조를 규정하는 메타데이터 프로토콜을 준수한다. 도 6a는 예를 들면, 도 3의 비디오 전달 파이프라인(200)의 블록들(202, 204, 206, 또는 208)에서 생성되고 파이프라인에서 다운스트림으로 전달될 수 있는 특정 실시예를 따라 메타데이터 구조 또는 메타데이터(225)의 패킷(250)를 도시한다. 패킷(250)은 헤더를 갖고 프레이밍된다. 도 6a의 예시된 실시예에서, 패킷(250)은 다음의 필드들을 포함한다:
Figure 112012066386826-pct00021
프레임 비트 세트의 시작을 갖는 헤더를 규정하는 프레임의 시작(SOF: start of frame);
Figure 112012066386826-pct00022
페이로드에서 메타데이터의 유형를 규정하는 패킷 유형(254)(예를 들면, 색 형성 파라미터, 장면 변화 플래그, 이미지 히스토그램들 등) 및 수반하는 메타데이터의 포맷 또는 패턴;
Figure 112012066386826-pct00023
프레이밍 구조의 구성가능한 부분을 규정하는 CGF 비트들(256)(예를 들면, CFG 비트들은 타임스탬프가 패킷에 대하여 인에이블되는지, 및 타임스탬프가 어떻게 적용되는지를 정의할 수 있다);
Figure 112012066386826-pct00024
길이에서 가변할 수 있는 메타데이터 페이로드(258);
Figure 112012066386826-pct00025
프레임 비트 세트의 끝을 갖는 헤더를 규정하는 프레임 끝(EOF: end of frame) 헤더(258);
Figure 112012066386826-pct00026
메타데이터 페이로드(258) 내의 데이터가 적용될 때를 나타내는 타임스탬프(262)(선택)(메타데이터 패킷(250)이 수신된 후 또는 어떤 다른 지연 후 어떤 수의 비디오 프레임들 또는 장면들); 및
Figure 112012066386826-pct00027
메타데이터 패킷(250)의 식별을 가능하게 하도록 예를 들면, CRC(순환 중복 검사)와 같은 검사합(checksum).
도 6b는 도 6a에서 도시된 것처럼 메타데이터 패킷(250)의 시작(즉, SOF 헤더(252) 또는 끝(즉, EOF 헤더(260))을 규정하는데 이용될 수 있는 헤더(270)를 도시한다. 도시된 실시예에서, 헤더(270)는 미리 결정된 패턴(272)으로 복수의 비트들을 가지고 시작한다. 헤더(270)는 페이로드(EOP) 플래그 또는 비트(266)의 끝, 및 SOF/EOF 플래그 또는 비트(268)(예를 들면, 0/1)을 가지고 끝난다. SOF/EOF 플래그(268)은 헤더(270)가 SOF 헤어(252)인지 또는 EOF 헤더(260)인지 결정한다. EOP 플래그(266)는 EOF 플래그(268)가 설정되어야만 유효할 수 있다. EOP 플래그(266)를 설정하는 것은 메타데이터 패킷(250)이 메타데이터 페이로드의 적어도 일부를 포함하는 것을 나타낸다. EOP 플래그(266)는 메타데이터 페이로드가 비디오 프레임들에 걸쳐 분할될 수 있는, 여러 메타데이터 패킷들(250) 사이에서 분할되는 것을 가능하게 한다. EOP 플래그(266)는 낮은 우선권 메타데이터 패킷들이 높은 우선권 메타데이터 패킷들을 송신하도록 인터럽트되도록 한다.
EOP 플래그(266)는 도 10에서 도시된 것처럼, 다른 유형들의 메타데이터를 전달하는 패킷들을 다수의 비디오 프레임들에 걸쳐 전달되는 것이 가능하도록 한다. 패킷으로 전달된 메타데이터의 유형은 헤더에서 패킷 유형(254)에 의해 지시될 수 있다(도 6a 참조). 도시된 예에서, 유형 A 메타데이터를 전달하는 제 1 패킷(280)은 비디오 프레임 1의 비디오 데이터에 임베딩된다. 비디오 데이터 스트림에서 유형 A 메타데이터를 임베딩하는 동안, 메타데이터 유형 A보다 높은 우선권을 갖는 유형 B 메타데이터가 수신된다. 유형 B 메타데이터를 위해 유형 A 메타데이터의 송신을 인터럽트하기 위해, EOF 플래그는 제 1 패킷(280)을 마치기 위해 설정된다(하지만, EOP 플래그는 유형 A 메타데이터가 송신될 것으로 설정되지 않는다). 유형 B 메타데이터를 전달하는 제 2 패킷(282)은 그때 비디오 프레임 1의 비디오 데이터에 임베딩될 수 있다. 도시된 예에서, 비디오 프레임 1은 모든 유형 B 메타데이터의 전달을 위해 충분한 가드 비트들 또는 LSB들을 갖지 않는다. 따라서, 비디오 프레임 1의 끝쪽으로, EOF 플래그는 제 2 패킷(282)의 끝을 나타내도록 설정된다(하지만, EOP 플래그는 남아있는 유형 B 메타데이터가 송신될 것으로 설정되지 않는다). 남아있는 유형 B 메타데이터를 전달하는 제 3 패킷(284)은 비디오 프레임(2)의 비디오 데이터에 임베딩될 수 있다. 제 3 패킷(284)은 유형 B 메타데이터에대한 메타데이터 페이로드의 끝 및 패킷의 끝을 지시하도록 EOF 플래그 및 EOP 플래그로 종료될 수 있다. 유형 A 메타데이터의 전달은 그때 다시 시작할 수 있다. 도시된 예에서, (메타데이터 유형 B를 임베딩하는 동안 저장되고 있는) 모든 남아있는 유형 A 메타데이터는 검색되고 비디오 프레임(2)의 비디오 데이터에 임베딩된 메타데이터의 제 4 패킷으로 전달된다. 제 4 패킷(286)은 유형 A 메타데이터에 대한 메타데이터 페이로드의 끝 및 패킷의 끝을 지시하도록 EOF 플래그 및 EOP 플래그로 종료될 수 있다.
특정 실시예들에 따라, 메타데이터 비트들은 예약되거나 보호된 워드 또는 (어떤 수의 비트들의 길이가 될 수 있는) 비트들의 시퀀스가 부주의로 통신되는 것을 피하는 방식으로 비트들(예를 들면, 가드 비트들 및/또는 LSB들) 상에서 직렬화된다. 2개의 유형들의 예약된 워드들이 존재한다: 메터데이터에 의해 통신될 수 있는 예약된 메타데이터 워드들, 및 비디오 데이터 스트림에 의해 통신될 수 있는 예약된 비디오 워드들. 메타데이터는 메타데이터 페이로드가 프레임의 패킷 끝 또는 EOF 헤더(도 6a)와 같은 예약된 메타데이터 워드를 매칭하는 것을 피하도록 인코딩될 수 있다. 비디오 데이터의 가드 비트들이 메타데이터로 겹쳐쓰기되는 실시예들에서, 직렬화된 메타데이터(serialized metadata)는 비디오 데이터에 의해 예약된 비디오 워드들이 통신되는 것을 방지하는 가드 비트들의 기능을 중단(override)시키는 것을 피해야 한다. 예를 들면, VDR 또는 HDMI 포맷들과 같은 일부 비디오 포맷들에서, 가드 비트들은 어떤 예약된 비디오 워드들(예를 들면, 예약된 화소 값들)이 송신되지 않도록 하기 위해 이용된다. 예약된 화소값들은 예를 들면, 0, 255, 및 다른 예약된 값들을 포함할 수 있다.
도 4a는 예약된 비디오 워드들의 통신을 피하기 위해 비디오 데이터에 메타데이터 비트들을 인코딩하는 방법(300)을 도시한다. 방법(300)은 가드 비트들을 이용하는 VDR 또는 다른 비디오 포맷에서 비디오 데이터 내 메타데이터의 직렬화에 적용될 수 있다. 방법(300)은 비디오 데이터 스트림으로 전달될 메타데이터를 수신함으로써 블록(302)에서 시작한다. 메타데이터는, 예를 들면, 도 3에서 도시된 비디오 전달 파이프라인(200)의 블록들(202, 204, 206 또는 208) 중 어느 하나에서 메타데이터 생성기 또는 인코더로부터 수신될 수 있다. 어떤 실시예들에서, 블록(302)에서 수신된 메타데이터는 (예를 들면, 비디오 데이터 및/또는 디스플레이 구성의 처리를 위해) 장래의 비디오 프레임들에 적용될 메타데이터이고, 메타데이터는 메타데이터가 적용될 프레임 보다 적어도 한 비디오 프레임 앞서서 비디오 데이터 스트림에 전달된다. 메타데이터는 메타데이터 패킷(예를 들면, 도 6(A)에서 도시된 메타데이터 패킷(250))으로 인코딩될 수 있다. 블록(304)에서, 메타데이터 패킷 내의 제 1 비트가 검색되고 다음 이용가능한 가드 비트(즉, 메타데이터로 겹쳐쓰기되지 않는 가드 비트)가 비디오 데이터 스트림 내에서 찾아진다. 블록(306)에서, (이전에 송신된 메타데이터를 포함하는 일부 실시예들에서) 비디오 데이터 스트림은 가드 비트가 하나 이상의 예약된 비디오 워드들의 의도되지 않은 통신을 막기 위한 가드로서 필요할 지를 결정하기 위해 고려될 것이다. 가드 비트가 가드로서 이용되어져야 한다는 조건이 존재하면, 가드는 블록(310)에서 삽입된다. 다른 실시예들에서, 가드들은 비디오 데이터의 인코딩 동안 가드 비트들에 기록될 수 있고; 따라서 가드는 이미 가드 비트에 포함될 수 있고, 가드 비트는 블록(310)에서 스킵될 수 있다; 어떤 메타데이터 비트도 스킵된 가드 비트에 삽입되지 않는다.
가드를 삽입하는 블록(306) 가드 조건들은 예를 들면, 가드 비트를 선행하는 비디오 데이타 스트림의 비트들이 예약된 비디오 워드의 매칭에 가까운지(예를 드어, 매칭에 한 비트가 부족한지)를 고려할 수 있다. 이 결정은 비디오 스트림에서의 선행하는 비트들과 예약된 비디오 워드들의 리스트의 각 워드와 비교함으로써 이뤄질 수 있다.
블록(310)에서 가드 비트에 가드를 삽입(또는 가드 비트를 스킵)한 후, 블록(312)에서 다음 가드 비트가 비디오 데이터 스트림에서 찾아내어지고, 블록(306) 테스트는 가드 비트가 가드로서 이용되어야하는지의 여부(또는 메타데이터가 가드 비트로서 기록될 수 있는지의 여부)를 결정하기 위해 이 다음 가드 비트에 적용된다.
특정한 가드 비트가 가드로서 이용되도록 요구되지 않는 것이 블록(306)에서 결정되면, 그때, 메타데이터의 비트는 블록(308)에서 가드 비트로 기록될 수 있다. 비디오 데이터 스트림에서 임베딩될 메타데이터 패킷의 비트들이 남아있는 동안(블록(314) 참조), 후속 비트들이 메타데이터 패킷으로부터 검색되고, 후속 가드 비트들이 비디오 데이터 스트림에서 찾아내어진다(블록(316) 참조). 검색된 각 메타데이터 비트 및 위치된 가드 비트에 대해, 블록(306) 테스트는 가드로서 가드 비트를 처리하고(블록(310)) 다음 가드 비트를 스킵(블록(312))하는 지를 결정하기 위해 적용된다. 그렇지 않으면, 메타데이터는 가드 비트에 기록될 수 있다(블록(308)).
특정한 실시예들에서, 블록(306) 가드 조건들은 예약된 비디오 워드가 비디오 데이터에 의해 잠재적으로 통신될 수 있는지를 결정하기 위해 가드 비트 이전에 즉시 화소 데이터(305)의 비트들을 고려함으로써 평가된다. 예를 들면, 예약된 비디오 워드들이 0 및 255와 같은 어떤 화소 값들(예를 들면, 각각 00000000 및 11111111와 같은 이진 형태로 표현되는)을 포함하는 비디오 포맷들에 대해, 가드 비트들을 선행하는 화소 데이터(305)의 7개의 비트들은 블록(306)에서 고려될 수 있다. 선행하는 7개의 비트들이 모든 연속하는 0들 또는 연속하는 1들이라면, 그때 (일련의 비디오 데이터 비트들의 8개의 비트일 수 있는) 가드 비트는 가드로서 기능해야 한다. 가드 비트는 예약된 비디오 워드의 통신을 막기 위해 블록(310)에서 적절히 선택된 가드인 0 또는 1로 설정될 수 있다. 예약된 비디오 워드들은 여러 길이들의 비트들의 시퀀스 또는 다른 워드들을 포함할 수 있다. 블록(306) 가드 조건들은 이러한 예약된 비디오 워드들의 일부의 잠재적인 통신을 검출하기 위해 화소 데이터(305)를 평가할 수 있다.
메타데이터(225)는 예약된 메타데이터 워드들의 의도되지 않은 통신을 피하기 위해 인코딩될 수 있다. 예약된 메타데이터 워드들은 예를 들면, 메타데이터 패킷의 시작을 규정하는 프레임 헤더의 패킷 시작 또는 메타데이터 패킷의 끝을 규정하는 프레임 헤더의 패킷 끝을 포함할 수 있다. 예약된 메타데이터 워드들의 의도되지 않은 통신을 피하기 위해 이용된 인코딩 방법들은 예를 들면, 다음의 것들을 포함할 수 있다:
Figure 112012066386826-pct00028
6b/8b 인코딩(일련의 식별 비트들 중 가장 긴 허용된 연속은 6 비트 길이).
Figure 112012066386826-pct00029
8b/10b 인코딩(일련의 식별 비트들 중 가장 긴 허용된 연속은 5 비트 길이).
Figure 112013120144819-pct00030
SOF 헤더(205) 또는 EOF 헤더(260)와 같은 예약된 메타데이터 워드들을 나타내기 위해 일련의 식별 비트들의 고정된 패턴을 규정하기, 및 비디오 데이터에서 메타데이터 페이로드의 임베딩동안 고정된 패턴들을 인코딩하는 것을 피하기. 예를 들면, 고정된 패턴들이 6비트 길이의 패턴들 000000 및 111111이라면, 5비트 길이 패턴 00000 또는 11111이 메타데이터에서 나타날 때마다, 1 또는 0 가드 비트는 비디오 데이터 스트림에서 다음 비트(예를 들면, 000001 또는 111110)으로 임베딩된다. 비디오 데이터 스트림으로부터의 메타데이터의 검출 동안, 이 가드 비트는 유효한 것으로 고려되지 않고 무시된다.
도 4b는 비디오 신호로부터 도 4a의 방법(300)을 이용하여 인코딩된 메타데이터 비트들을 검색하는 방법(330)을 도시한다. 방법(330)은 SOF 헤더(252)(도 6 참조) 또는 메타데이터 패킷의 시작을 규정하는 다른 예약된 메타데이터 워드를 검출하기 위해 비디오 데이터(332)의 스트림을 수신하고 블록(333)에서 비디오 데이터를 모니터링함으로써 시작한다. 블록(333)에서 메타데이터 패킷의 시작의 검출은 SOF 헤더(252)를 형성하는 일련의 메타데이터 비트들이 검출될 때까지, 비디오 데이터 스트림에서 가드 비트들을 수신 및 디코딩(및 예약된 비디오 워드들의 통신을 막기 위해 가드들로서 이용되는 가드 비트들을 스킵)하는 것을 포함할 수 있다. 메타데이터의 시작이 블록(333)에서 검출된 후, 방법(300)은 블록(334)에서 비디오 데이터 스트림에서 다음 가드 비트를 찾는 것으로 진행한다. 블록(336)에서, 비디오 데이터(335)를 선행하는 것(즉, 가드 비트이전에 즉시 수신된 비디오 데이터 비트들)은 가드 비트가 비디오 데이터 스트림에서 예약된 비디오 워드의 통신을 막기 위해 가드로서 기능하는 지를 결정하기 위해 고려될 수 있다. 가드 비트가 가드로서 이용되고 있지 않은 것(메타데이터가 가드 비트로서 기록된 것)이 블록(336)에서 결정되면, 메타데이터는 블록(338)에서 가드 비트로부터 검색된다.
가드 비트가 가드로서 이용되고 있는 것이 블록(336)에서 결정되면, 비디오 데이터(332)의 스트림에서 다음 가드 비트가 블록(334)에서 찾아지고, 블록(336) 테스트가 이 다음 가드 비트에 적용되어 가드 비트가 가드로서 이용되고 있는지 여부가 결정된다.
특정한 실시예들에서, 블록(336) 평가는 가드 비트 바로 전 비디오 데이터(335)의 비트들을 예약된 비디오 워드들을 나타내는 고정된 패턴들과 비교함으로써 실행될 수 있다. 블록(336)은 가드가 가드 비트에 삽입되지 않았다면, 비디오 데이터에 의해 예약된 비디오 워드가 잠재적으로 통신될 수 있었는지의 여부를 결정한다. 예약된 비디오 워드가 잠재적으로 통신될 수 있었다면, 그때 가드 비트는 가드로서 이용되고 있었던 것으로 추정될 수 있고, 방법(300)은 비디오 데이터 스트림 내에서 다음 가드 비트를 찾는 것에 의해 블록(334)으로 진행한다. 하지만, 예약된 비디오 워드가 통신될 수 없었다면, 가드 비트는 메터데이터를 포함하는 것으로 추정될 수 있고, 블록(338)에서 그 가드 비트로부터 메타데이터를 추출할 수 있다.
다른 실시예들에서, 메타데이터는 비디오 프레임의 가드 비트들(11) 대신에(도 2a 참조) 비디오 프레임의 크로미넌스 채널들의 LSB들(12)에 기록된다(도 2a 참조). 메타데이터(225)는 예약된 메타데이터 워드들(예를 들면, 프레임 헤더의 시작 또는 프레임 헤더의 끝)의 의도되지 않은 통신을 피하기 위해 LSB들(12)의 인코딩될 수 있다. 메타데이터(225)는 예약된 메타데이터 워드들의 의도되지 않은 통신을 피하기 위해 상기에서 기술된 방법들 중 하나를 이용하여 인코딩될 수 있다(예를 들면, 6b/8b 인코딩, 8b/10b 인코딩, 연속적인 식별 비트들의 고정된 패턴들로서 예약된 워드들을 규정하기 등).
비디오 콘텐트 디스플레이에서 이미지 품질은 LSB들(12)과 같은 크로미넌스의 비트들을 겹쳐쓰기하는 결과로서 영향을 받을 수 있다. LSB들에서 메타데이터를 인코딩하는 방법들은 이미지 품질에서 역 충격을 감소시키기 위해 이용될 수 있다. 도 5a는 비디오 프레임의 크로미넌스 채널들의 LSB들(12)에서 메타데이터를 인코딩하기 위해 이용될 수 있다(도 2b 참조). 방법(400)은 크로미넌스 채널들의 LSB들(12)에서 메타데이터를 인코딩하는 여러 방법들을 평가한다. 인코딩 메타데이터의 선택된 형식은 비디오 콘텐트 디스플레이의 이미지 품질에 영향을 미친다.
방법(400)은 다음 (장래의) M 비디오 프레임들에 대해 메타데이터(225)를 수신함으로써 블록(402)에서 시작한다. 블록(402)에서 수신된 메타데이터(225)는 (예를 들면, 비디오 처리 및/또는 디스플레이 구성에 대해) 장래의 비디오 프레임들에서 적용될 메타데이터이고, 메타데이터가 적용될 프레임 앞의 적어도 하나의 비디오 프레임이 비디오 데이터 스트림에 전달될 수 있다. 방법(400)은 메타데이터(225)가 디스플레이 동안 아티팩트들을 최소화하는 방식으로 임베딩될 수 있는지의 여부를 고려함으로써 진행한다. 예를 들면, 메타데이터(225)는, LSB를 겹쳐쓰기함으로써 발생된 디스플레이된 이미지에서의 변화들은 더 밝은 이미지 영역들에서 덜 현저해지는 경향이 있는 것을 고려할 때, 이미지의 더 밝은 영역들을 나타내는 화소들(예를 들면, 루미넌스가 어떤 임계치를 넘는 화소들)의 크로미넌스 채널들의 LSB들에 기록될 수 있다. 일부 실시예들에서, 메타데이터는 크로미넌스 값들이 일부 임계치를 초과하는 화소들의 크로미넌스 데이터의 LSB들에 기록된다. 방법(400)의 블록(406)에서, 비디오 프레임들에 의해 디스플레이될 밝은 이미지 영역들이 식별된다. 밝은 이미지 영역들을 나타내는 화소들이 메타데이터(225)를 송신하기 위해 충분한 대역폭을 제공하는지에 따라 평가가 블록(408)에서 행해진다. 충분한 대역폭이 존재하면, 메타데이터(225)는 블록(410)에서 더 밝은 이미지 영역들에 화소들의 크로미넌스 채널들의 LSB들에 기록될 수 있다. 그렇지 않으면, 방법(400)은 메타데이터(255)를 기록하는 다른 방법을 평가함으로써 진행할 수 있다. 블록(410)에서 더 밝은 이미지 영역들의 화소들에 메타데이터(255)를 기록하기 전에, 제 1 메타데이터 패킷은 후속 메타데이터(225)가 인코딩되는 비디오 프레임에서 영역(들)을 비디오 수신기 또는 프로세서에 지시하도록 디폴트 방식(각 크로미넌스 채널의 LSB에 기록)으로 비디오 데이터 스트림에 송신될 수 있다.
방법(400)은 라운드로빈 방식에서 (또는 디스플레이된 이미지에서 아티팩트들을 최소화하기 위해 LSB들을 스킵하는 다른 방식에서) 메타데이터(225)를 기록하는 것은 메타데이터(225)의 송신에 대해 충분한 대역폭을 제공하는지의 여부를 블록(412)에서 평가할 수 있다. 충분한 대역폭이 이용가능하면, 블록(414)에서 메타데이터(225)는 라운드로빈 방식으로 비디오 프레임들의 크로미넌스 채널들의 LSB들에 기록된다(예를 들면, 제 1 화소는 적색 채널에서만 임베딩된 메타데이터 비트를 갖고, 제 2 화소는 녹색 채널에서만 임베딩된 메타데이터 비트를 갖고, 제 3 화소는 청색 채널에서만 임베딩된 메타데이터 비트를 갖는다). 메타데이터를 라운드로빈 방식으로 기록하기 전에, 제 1 메타데이터 패킷은 후속의 메타데이터(225)가 라운드로빈 방식으로 기록된 것을 비디오 수신기 또는 프로세서에 나타내기 위해 디폴트 방식(예를 들면, 각 크로미넌스 채널의 LSB에 기록하는 것) 비디오 데이터 스트림에 송신될 수 있다. 제 1 메타데이터 패킷은 (라운드로빈 방식으로 기록된) 메타데이터(225)가 비디오 프레임 어디에서 임베딩되는지를 가리킬 수 있다. 제 1 메타데이터 패킷은 비디오 전달 파이프라인의 끝을 송신하고 수신하는 사이 메타데이터를 동기화하는 방법들을 제공할 수 있다.
불충분한 대역폭이 라운드로빈 방식으로 메타데이터를 기록함으로써 제공되면, 블록(416)에서, 메타데이터를 임베딩하는 디폴트 방법은 적용될 수 있다(예를 들면, 메타데이터(255)가 비디오 프레임들에서 크로미넌스 채널들의 각 LSB에서 기록될 수 있다). 어떤 메타데이터(255)가 블록(416)에서 메타데이터(225)의 기록 후 비디오 데이터 스트림에 아직 임베딩되지 않은 채로 남아있다면(블록(422) 참조), 남아있는 메타데이터(225)의 전달은 블록(424)에서 우선화되고 관리될 수 있다. 메타데이터(225)는 송신을 위해 다수의 패킷들로 분리될 수 있다. EOP 플레그를 이용하면, 메타데이터 패킷들의 송신이 도 8 및 도 10을 참조하여 본 명세서에서 기술된 것처럼, 상위 우선 순위의 메타데이터 패킷들의 송신을 위하여 인터럽트될 수 있다.
도 5b는 메타데이터 버스트들을 제공하기 위해 비디오 프레임에 크로미넌스 데이터를 겹쳐쓰기함으로써 메타데이터를 인코딩하기 위해 이용될 수 있다. 예를 들면, (화소 값들에 대한 루미넌스 값들이 0 또는 어떤 임계치 아래인) 블랙 프레임들 또는 블랙 이미지 영역들에서의 화소들에 대한 루미너스 값들이, 그와 같은 화소들에 대한 크로미넌스 데이터가 이미지 품질에 실질적으로 영향을 미치지 않고 겹쳐쓰기될 수 있는 것처럼 메타데이터를 전달하는데 이용될 수 있다. 큰 수의 화소들은, 예를 들면, 다음 종류의 프레임들에서 0 또는 매우 작은 값의 루미넌스 값들을 갖는다:
Figure 112012066386826-pct00031
예를 들면, 필름의 다른 장면들 사이, 또는 광고들 및 스케줄링된 프로그래밍 사이의 송신에 이용될 수 있는 것과 같은 블랙 프레임들.
Figure 112012066386826-pct00032
비디오 이미지가 측면들 및/또는 비디오 이미지의 위 및 아래에서 매트들 또는 블랙 바들을 갖고 디스플레이되는 메일박스화된, 우체통화된 및 윈도우박스화된 것 같은 특정한 비디오 포맷들의 프레임들. 이러한 포맷들은 전형적으로 디스플레이 상에 비디오의 원래의 종횡비를 보존하기 위해 이용된다.
방법들(425)은 다음 M 비디오 프레임들에 대해 메타데이터(225)를 수신함으로써 블록(426)에서 시작한다. 블록(428)에서, 방법(425)은 데이터 버스트들을 전달하기 위해 이용될 수 있는 현재 비디오 프레임들의 어떤 블랙 프레임들(또는 블랙 이미지 영역들)을 식별한다. 블록(430)에서, 메타데이터(225)의 복수의 비트들은 식별된 블랙 프레임들(또는 블랙 이미지 영역들)에서 화소들의 크로미넌스 채널들 내에 기록된다. 예를 들면, 일련의 메타데이터 비트들(13)은 크로미넌스 데이터를 겹쳐쓰기위해 도 2c에서 크로미넌스 채널들에 삽입될 수 있다. 크로미넌스 채널들에 메타데이터(225)를 기록하기 전에, 제 1 메타데이터 패킷은, 후속 메타데이터(225)가 화소들의 크로미넌스 채널들에 기록되는 비디오 데이터 수신기 또는 프로세서에 시그널링되는 정보를 제공하기 위해 디폴트 방식(예를 들면, LSB들에 기록)으로 비디오 데이터 스트림에 송신될 수 있다.
블록(432)에서, 어떤 메타데이터가 남아 있다면(즉, 블랙 프레임들에서 화소들의 크로미넌스 채널들에 기록되지 않으면), 그와 같은 메타데이터(225)는 현재 블랙이 아닌 비디오 프레임들에서 이용가능한 LSB들에 기록될 수 있다. 모든 이용가능한 LSB들이 채워진 후, 비디오 데이터 스트림에 아직 임베딩되지 않은 메타데이터(225)가 남고(블록(434) 참조), 남은 메타데이터(255)의 전달은 우선화되고 관리될 수 있다(블록(436) 참조). 메타데이터를 우선적으로 처리하는 특별한 방법들은 도 8에 관련하여 아래에서 더 상세하게 기술된다.
어떤 비디오 포맷들에 대하여, 비디오 이미지들은 측면들 및/또는 비디오 이미지 위 및 아래에서 매트들 또는 블랙 바들로 디스플레이될 수 있다. 비디오 데이터가 그와 같은 포맷들로 제공될 때, 메타데이터(225)는 블랙 매트들 또는 바들을 나타내는 화소들의 크로미넌스 채널들 내에 임베딩될 수 있다.
다른 실시예들에서, 방법들(300, 400 및/또는 425)의 단계들 변형 또는 조합인 방법은 메타데이터 전달을 관리하기 위해 적용될 수 있다. 예를 들면, 특정 방법은 블랙 비디오 프레임들 및/또는 영역들에서 크로미넌스 데이터를 겹쳐쓰고, 가드 비트들에 또는 블랙이 아닌 비디오 프레임들의 크로미넌스 채널들의 LSB들에 메타데이터를 기록함으로써 메타데이터 버스트들을 제공하는 단계들을 조합할 수 있다.
비디오 데이터 스트림에 메타데이터(225)를 인코딩하기 위해 적용된 각 방법은 예약된 비디오 워드가 비디오 데이터에 의해 비의도적으로 통신되지 않는 것을 확실하게 하는 단계들을 통합할 수 있다. 예를 들면, 도 4a 및 도 4b를 참조하여 상기에서 기술된 것과 같은 유사한 방법들은 선행하는 송신된 비디오 데이터가 예약된 비디오 워드들의 리스트들로 고려되고 비교되는 것이 실행될 수 있고, 적합하다면, 예약된 비디오 워드들의 통신을 방지하기 위해 가드가 가드 비트에 설정된다.
도 8은 일 실시예에 따라, 메타데이터의 전달을 관리하는 방법(500)을 도시하는 흐름도이다. 방법(500)에 따라, 비디오 전달 파이프라인을 통한 메타데이터의 전달은 비교적 높은 우선순위 메타데이터로서 분류화된 다른 메타데이터의 전달을 허용하도록 일시적으로 인터럽트될 수 있다. 메타데이터 전달의 인터럽트는 메타데이터가 비디오 데이터 스트림에서 생성되고 임베딩될 수 있는 비디오 전달 파이프라인(200)을 따른 다수 단계들인 것으로 고려되어 요구된다. 어떤 비디오 프레임들(예를 들면, 비디오 전달 파이프라인의 다수의 단계들에서 생성된 메타데이터를 갖는 비디오 프레임들)에 대해, 메타데이터(225)가 다운스트림 디바이스에 의해 적용될 시간에 앞서 다운스트림 디바이스에 메타데이터(225)를 전달하는데 이용가능한 불충분한 메타데이터 대역폭이 있을 수 있다.
방법(500)은 비디오 데이터 스트림에 임베딩될 새로운 메타데이터가 존재하면 실행될 수 있지만, 비디오 데이터 스트림의 현재 비디오 프레임들은 새로운 메타데이터 및 기존의 메타데이터를 전달하는 메타데이터 대역폭을 가지지 않는다. 예를 들면, 기존의 메타데이터(225)는 새로운 메타데이터의 전달을 위해 불충분한 대역을 남기고, 비디오 전달 파이프라인의 이전 단계에서 현재의 비디오 프레임들에 이미 임베딩될 수 있다. 도 8은 블록(502)에서 비디오 데이터 스트림에서 임베딩된 기존의 메타데이터 구조를 찾고 검색함으로써 시작한다. 송신될 기존의 메타데이터 구조의 우선순위 및 새로운 메타데이터 구조의 우선순위는 구조(504)에서 결정된다. 어떤 실시예들에서, 특정 메타데이터 유형들은 특정 우선순위 레벨로 할당될 수 있다. 따라서, 블록(504)에서 우선순위 결정은 프레임 헤더에서 규정된 것처럼 메타데이터 유형에 기초할 수 있다. 블록(508)에서, 블록(504)에서 결정된 우선순위들은 비교된다. 송신될 새로운 메타데이터 구조의 우선순위가 비디오 데이터 스트림에 임베딩된 기존의 메타데이터 구조의 우선순위보다 낮으면, 방법(500)은 비디오 데이터 스트림에 임베딩된 다음 메타데이터 구조를 검색함으로써 블록(502)을 진행한다. 블록들(502 내지 508)에서 단계들은 송신될 새로운 메타데이터 구조보다 더 낮은 우선순위를 갖는 기존의 메타데이터 구조가 비디오 데이터 스트림에서 발견될 때까지(또는 비디오 데이터 스트림의 메타데이터 대역폭이 이용가능할 때까지) 반복될 수 있다.
블록(508)에서, 송신될 새로운 메타데이터 구조의 우선순위는 비디오 데이터 스트림에 임베딩된 기존의 메타데이터 구조의 우선수위보다 더 높으면, 방법(500)은 비디오 데이터 스트림으로부터 기존의 메타데이터(515)를 추출하고 이후 송신에 대해 기존의 메타데이터(515)를 저장함으로써 블록(510)에서 기존의 메타데이터 구조의 송신을 인터럽트한다. 블록(512)에서, 메타데이터(515)에 의해 이전에 점유된 비디오 데이터 가드 비트들 또는 LSB들은 송신될 새로운 메타데이터 구조로 겹쳐쓰여진다.
새로운 메타데이터를 갖는 메타데이터(515)에 의해 이전에 점유된 비디오 데이터 가드 비트들 또는 LSB들을 겹쳐쓴 후(블록(512) 참조), 송신될 필요가 있는 새로운 메타데이터가 남아있고(블록(514) 참조), 제한된 메타데이터 대역폭이 그와 같은 송신에 대해 이용가능하면, 방법(500)은 비디오 데이터 스트림에 임베딩된 다음의 기존 메타데이터 구조를 검색하고(블록(502)) 기존 메타데이터 우선순위와 새로운 메타데이터 우선순위를 비교(블록(504))함으로써 진행할 수 있다. 송신될 남아있는 새로운 메타데이터의 우선순위가 더 높으면, 기존의 메타데이터 구조의 송신은 블록들(510 및 512)에서 새로운 메타데이터의 송신을 위하여 위에서 기술된 처럼 인터럽트될 수 있다.
송신될 더 새로운 메타데이터가 존재하지 않으면(블록(514)), 기존의 메타데이터(515)의 송신은 재개할 수 있다. 이것은 블록(516)에서 비디오 데이터 스트림에서 가드 비트들 또는 LSB들에 메타데이터(515)를 겹쳐쓰기함으로서 달성될 수 있다.
일부 상황들에서, 메타데이터가 비디오 프레임들의 처리 또는 디스플레이 동안 적용될 비디오 프레임들 내에 메타데이터는 임베딩되고 동시에 전달된다. 다른 상황들에서, 특정 비디오 프레임에 대해 적용될 메타데이터는 하나 이상의 초기의 비디오 프레임들에 대한 비디오 데이터로 송신될 수 있다. 메타데이터는 메타데이터가 적용될 특정 비디오 프레임에 앞서 비디오 디코더, 프로세서 또는 다른 다운스트림 디바이스에 의해 전달되고 수신될 수 있다. 메타데이터의 처리 및 적용을 용이하게 하도록, 메타데이터 패이로드를 전달하는 메타데이터 패킷(들)은 메타데이터가 적용될 때를 지시하는 타임스탬프를 포함할 수 있다. 일부 실시예들에서, 타임스탬프는, 메타데이터가 수신된 후 메타데이터가 어떤 수의 비디오 프레임들에 적용될 것을 지시하는 프레임 지연에 관하여 규정될 수 있다. 다른 실시예들에서, 타임스탬프는 시간 지연, 프레임 시퀀스 번호, 비디오의 시작에 관련된 시간 등에 관하여 규정될 수 있다.
일부 실시예들에서, 메타데이터는 장면 송신들 사이 또는 장면 내에서 삽입된 블랙 프레임에 대한 화소 데이터에 전달될 수 있다. 디스플레이 끝에서(도 3의 블록(210)), 디스플레이는 블랙 프레임 내의 메타데이터가 추출되고/추출되거나 적용되고 있는 동안 장면의 디스플레이에서 인터럽트를 피하기 위해 블랙 프레임을 선행하는 비디오 프레임의 재생을 반복할 수 있다. 블랙 프레임에 대한 화소 데이터에 메타데이터를 기록하기 전, 제 1 메타데이터 패킷은 뒤따르는 메타데이터(225)가 블랙 프레임에 기록되는 것을 다운스트림 디바이스에 나타내기 위해 디폴트 방식으로(예를 들면, 각 크로미넌스 채널의 가드 비트에 기록 또는 LSB에 기록) 비디오 데이터 스트림에 송신될 수 있다. 어떤 실시예들에서, 디스플레이는 메타데이터를 포함하는 블랙 프레임을 재생할 수 있다. 다른 실시예들에서, 디스플레이는 메타데이터를 포함하는 블랙 프레임을 재생하지 않을 수 있다(즉, 블랙 프레임의 디스플레이는 스킵된다). 디스플레이는 블랙 프레임으로부터 메타데이터를 추출하고/추출하거나 적용하는 동안 블랙 프레임을 앞서는 비디오 프레임의 재생을 반복할 수 있다.
도 7은 메타데이터가 처리되고 적용되는 시간에 앞서 다운스트림 디바이스(예를 들면, 비디오 프로세서, 디코더 및/또는 디스플레이)에 의해 수신되고 비디오 전달 파이프라인을 통해 전달되는 메타데이터(225)를 도시한다. 메타데이터(225)는 각각이 비디오 프레임과 연관된 6개의 메타데이터 페이로드들(즉, 비디오 프레임들 #3 내지 #9 중 하나)을 포함한다. 도 7에서 도시된 것처럼, 비디오 프레임 #3와 연관된 메타데이터 페이로드가 다운스트림 디바이스에 전달되고 있는 동안, 다운스트림 디바이스는 비디오 프레임들 #1 및 2를 처리하고 있다. 비디오 프레임 #3과 연관된 메타데이터 페이로드에 대한 타임스탬프는, 메타데이터 페이로드가 수신된 후 메타데이터 페이로드는 적용된 3개의 프레임인 것을 지시할 수 있다.
타임스탬프들의 이용은 그와 같은 메타데이터가 다운스트림 디바이스에 의한 메타데이터 적용에 앞서 다운스트림 디바이스에 이용가능한 것을 명확하게 하도록 장면에 대한 모든 메타데이터의 전달을 용이하게 할 수 있다(예를 들면, 메타데이터는 장면에 대한 비디오 데이터 및/또는 디스플레이 구성의 처리를 위해 적용될 수 있다). 메타데이터는 장면 송신 동안 비디오 데이터에 임베딩될 수 있다(예를 들면, 메타데이터는 장면들 사이에서 삽입된 블랙 프레임들로 전달될 수 있다). 메타데이터는 (예를 들면, 도 5b를 참조하여 본 명세서에서 기술된 방법들을 이용하여) 루미넌스 값들이 0으로 인도되는 프레임의 영역들 또는 프레임들에서의 크로미넌스 데이터에 임베딩될 수 있다. 압축되지 않은 비디오 데이터가 블록(206)에서 전달되는 실시예들에서(도 3), 타임스탬프들은 인코더 단계(207A)에서 인코더와 블록(208)에서 비디오 프로세서/디코더 사이에서 비디오 데이터의 메타데이터의 전달을 관리하기 위해 이용될 수 있다(도 3a).
도 9는 본 명세서에서 기술된 하나 이상의 방법들을 실행하기 위해 구성될 수 있는 하나의 실시예에 따른 시스템(600)을 도시한다. 시스템(600)의 구성요소들은 소프트웨어, 하드웨어 및/또는 그것의 조합으로서 구현될 수 있다. 시스템(600)은 비디오 캡쳐 서브시스템(602), 후속 작업 서브시스템(603) 및 디스플레이 서브시스템(604)을 포함한다. 비디오 데이터(203)의 스트림은 비디오 캡쳐 서브시스템(602)에 의해 생성되고 처리 및 편집에 대한 후속 작업 서브시스템(603)에 전달된다. 비디오 이미지들은 비디오 데이터(203)의 편집 코스에서 후속 작업 서브시스템(603)의 참조 디스플레이(111) 상에서 디스플레이되고 관측될 수 있다. 편집된 비디오 데이터(203)는 다른 처리 및 디스플레이에 대해 (인코더(207A) 및 디코더(208B)에 의한 분배 매체(205)를 통해) 디스플레이 서브시스템(604)에 전달된다. 서브시스템들(602, 603 및 604)의 각각 (및 인코더(207A))는 비디오 데이터(203)에 메타데이터(225)를 인코딩하도록 구성될 수 있다. 다운스트림 서브시스템들은 업스트림 디바이스로부터 비디오 데이터(225)를 수신하고 내부에 임베딩된 메타데이터(225)를 디코딩하도록 구성될 수 있다. 메타데이터(225)는 비디오 데이터(203)의 처리 및/또는 디스플레이를 가이드하기 위해 다운스트림 서브시스템들(예를 들면, 서브시스템들(603 및 604))에 의해 이용될 수 있다. 메타데이터(225)는 디스플레이 서브시스템(604)의 디스플레이(618) 상에 비디오 재생을 제어하고/제어하거나 가이드하기 위해 디스플레이 특성화 파라미터들(620)에 따라 디스플레이 서브시스템(604)에 의해 이용될 수 있다.
도 9를 참조하여, 서브시스템들(602, 603 및 604)은 각각 프로세서(606, 608 및 616), 및 각 프로세서들에 액세스가능한 프로그램 메모리(607, 609 및 617)를 포함할 수 있다. 각 프로세서는 중앙 처리 유닛(CPU들), 하나 이상의 마이크로프로세서들, 하나 이상의 FPGA(field-programmable gate array)들, 또는 그것을 조합들, 본 명세서에 기술된 기능할 수 있는 하드웨어 및/또는 소프트웨어를 포함하는 어떤 다른 적합한 처리 유닛(들)을 포함할 수 있다. 각 서브시스템에서, 프로세서는 프로그램 메모리에 저장된 소프트웨어 제공된 명령들을 실행한다. 소프트웨어는 예를 들면, 다음과 같은 루틴들과 같은 본 명세서에서 기술된 메타데이터 생성, 인코딩, 디코딩 및 처리 단계들을 실행하기 위한 루틴들을 포함할 수 있다.
Figure 112012066386826-pct00033
메타데이터(225)를 생성 또는 메타데이터(225)에 대한 파라미터들을 수신(예를 들면, 그와 같은 파라미터들은 후속 작업 단계에서 색상 타이머들 또는 색상 그레이더들에 의해 설정될 수 있다; 메타데이터(225)는 도 3을 참조하여 본 명세서에서 기술된 파라미터들을 정의할 수 있다);
Figure 112012066386826-pct00034
업스트림 디바이스로부터 수신된 비디오 데이터(203)로부터 메타데이터(225)를 디코딩;
Figure 112012066386826-pct00035
비디오 데이터의 처리 및/또는 디스플레이를 가이드하기 위해 메타데이터(225)의 처리 및 적용;
Figure 112012066386826-pct00036
그와 같은 비디오 데이터가 다운스트림 디바이스와 통신하기 전에 비디오 데이터(203)에 메타데이터(225)를 인코딩;
Figure 112012066386826-pct00037
비디오 데이터 스트림에 더 높은 우선순위 메타데이터(225)의 전달을 허용하기 위해 더 낮은 우선순위 메타데이터(225)의 전달을 인터럽트;
Figure 112012066386826-pct00038
이미지 및/또는 비디오 데이터(203)에 기초하여 메타데이터(225)를 인코딩하는 방법을 선택(예를 들면, 메타데이터(225)를 인코딩하는 방법은 이미지 품질에 대한 역효과들을 최소화하기 위해 선택될 수 있다);
Figure 112012066386826-pct00039
루미너스 값들이 0 또는 임계값 아래인 비디오 프레임들, 비디오 프레임들 또는 화소들의 영역들의 크로미넌스 부분들에서 메타데이터(225)의 버스트들의 인코딩을 관리;
Figure 112012066386826-pct00040
및/또는 기타.
시스템(600)은 서브시스템들(602, 603 및 604)에 액세스가능한 저장소(610)를 포함할 수 있다. 저장소(610)는 (예를 들면, 메타데이터를 생성하고/생성하거나 판독하는 방법에 관하여 메타데이터 인코더들 및 디코더들을 형성하는) 메타데이터 규정들(612)의 라이브러리 및 예약된 비디오 워드들(614)의 리스트(예를 들면, 보호된 화소값들)를 포함할 수 있다. 메타데이터 규정들(612)의 라이브러리는 메타데이터를 생성, 인코딩 및/또는 처리에서 서브시스템들(602, 603 및 604)에 의해 액세스될 수 있다. 메타데이터(225)의 인코딩 또는 디코딩에서, 예약된 비디오 워드들(604)은, 가드 비트가 예약된 비디오 워드들의 통신을 막기위해 가드로서 처리되는지의 여부를 식별하기 위해 상기에서 기술된 가드 비트를 선행하는 비디오 데이터 비트들과 비교될 수 있다.
공유된 저장소(610)가 도 9의 예시된 실시예에서 도시되는 동안, 다른 실시예들에서, 서브시스템들(602, 603 및 604)의 각각은 서브시스템에 액세스가능한 저장 매체에 저장된 로컬 저장소(610)를 포함할 수 있다.
도 11a는 예시적인 실시예에 따른 비디오 데이터의 스트림에 메타데이터를 인코딩하기 위해 이용될 수 있는 서브시스템(280)을 도시한다. 서브시스템(280)은 예를 들면, 도 4a에 도시된 방법(300) 또는 본 명세서에서 기술된 다른 방법을 이용하여 다가올 장면 또는 프레임들의 다른 시퀀스에 관한 메타데이터(225)를 인코딩하기 위해 이용될 수 있다. 서브시스템(280)은 비디오 데이터의 소스로부터 입력 비디오 데이터(203)를 수신할 수 있다. 일부 실시예들에서, 서브시스템(280)은 버퍼 또는 다른 저장 매체로부터 입력 비디오 데이터(203)를 검색할 수 있다. 다른 실시예들에서, 서브시스템(280)은 비디오 신호 입력으로부터 스트리밍 비디오 데이터(203)를 수신할 수 있다. 비디오 데이터(203)는 위성, 케이블, 또는 고-화질 네트워크들을 통한 텔레비전 브로드캐스트; IP 또는 무선 네트워크들 통한 스트리밍 멀티미디어; 또는 DVD 또는 다른 저장 매체의 판독 등과 같은 비디오 콘텐트 전달에 대해 적합한 포맷으로 제공될 수 있다.
입력된 비디오 데이터(203)는 업스트림 디바이스에 의해 비디오 데이터에 부가되었던 임베딩된 메타데이터를 포함할 수 있다. 일부 실시예들에 따라, 입력된 비디오 데이터(203)는 가드 비트들을 포함할 수 있다. 입력된 비디오 데이터(203)는 루미넌스 및 크로미넌스 정보를 포함할 수 있다. 특별한 실시예들에서, 비디오 데이터(203)는 디코더(282)에 의해 디코딩된다. 디코더(282)는 비디오 신호에서 루미넌스 및 크로미넌스 구성요소들을 분리할 수 있다.
프레임들의 다가오는 장면 또는 시퀀스에 대한 비디오 데이터(203)는 소프트웨어 및/또는 하드웨어에 의해 구현된 하나 이상의 데이터 버퍼들(283)로 푸시될 수 있다. 비디오 데이터(203)의 하나 이상의 프레임들(또는 비디오 데이터(203)의 다른 부분)은 비디오 데이터(203)가 수신되는 것처럼 연속하여 버퍼(283)에 푸시될 수 있다. 일부 실시예들에서, 가드 비트 판독기(284)는 예약된 메타데이터 워드(예를 들면, 메타데이터 페이로드의 끝 등)이 검출될 때까지 버퍼(283)의 버퍼링된 비디오 데이터(203)의 가드 비트들을 모니터링(가드를 포함하는 그러한 비트들을 스킵핑)함으로써 비디오 데이터 스트림에서 삽입을 시작하는 장소를 결정한다. 새로운 메타데이터(255)는 그와 같은 예약된 메타데이터 후 비디오 데이터에 기록될 수 있다. 다른 실시예들에서, 가드 비트 판독기(284)는 서브시스템(280) 비디오 스트림에서 메타데이터를 인코딩하는 것을 시작할 수 있는 비디오 데이터 스트림(203)의 위치를 가리키는 메타데이터 패킷을 판독하거나 신호를 수신할 수 있다.
메타데이터 인코딩을 시작하기 위해, 가드 비트 판독기(284)는 버퍼에 저장된 비디오 데이터(203)를 액세스하고 차례로 각 가드 비트를 고려한다. 고려된 각 가드 비트에 대해, 가드 비트 판독기(284)는 예약된 워드 저장소(285)으로부터 액세스된 복수의 예약된 비디오 워드들(예를 들면, 예약된 화소값들)의 각각과 가드 비트에 앞서는 비디오 비트들을 비교할 수 있다. 각 비교에 기초하여, 가드 비트 판독기(284)는 가드 비트가 예약된 비디오 워드들의 통신을 막기 위해 가드로서 기능하고 있는지, 또는 가드 비트가 메타데이터를 포함하고 있는지를 식별할 수 있다.
가드 비트 판독기(284)가 가트 비트가 메타데이터를 포함하는지 결정하면, 가드 비트 판독기(284)는 메타데이터(225)(또는 다른 데이터)가 (예를 들면, 도 4a의 블록(308)의 관하여 논의된 것처럼) 가드 비트에 기록될 수 있다. 가드 비트 판독기(284)는 프레임들의 특정 장면 또는 시퀀스에 대한 모든 메타데이터(225)가 비디오 데이터(203)에 기록될 때까지 비디오 데이터(203)를 계속해서 액세스하고 판독할 수 있다.
데이터 기록기(286)가 신호(287)를 수신할 때, 데이터 기록기(286)는 다가오는 장면에 관련한 메타데이터(225)의 다음 비트를 검색한다. 데이터 기록기(286)는 메타데이터를 전달하는데 적합할 수 있는 가드 비트 판독기(284)에 의해 가드 비트에 메타데이터(225)의 이러한 비트를 기록한다. 데이터 기록기(286)는 메타데이터를 포함하는 저장소 또는 버퍼로부터 메타데이터(225)를 검색할 수 있다. 데이터 기록기(286)가 버퍼(283)에 비디오 데이터(203)의 모든 이용가능한 가드 비트들에 메타데이터(225)를 기록한 후, 서브시스템(280)은 삽입된 메타데이터(225)를 포함하는 비디오 데이터(203)를 출력한다(예를 들면, 비디오 데이터(203)는 버퍼(283)로부터 푸시될 수 있다; 그때, 메타데이터(225)는 버퍼(283)의 비디오 데이터(203)의 새로운 프레임들에 기록될 수 있다). 출력 비디오 데이터(203)는 처리 및/또는 비디오 재생을 위한 디스플레이 서브시스템과 같은 다운스트림 디바이스에 전달될 수 있다.
가드 비트가 (가드를 포함하는 것처럼) 메타데이터를 전달하는데 적합하지 않는 것을 가드 비트 판독기(284)가 식별하면, 가드 비트 판독기(284)는 (예를 들면, 도 4a의 블록(310)을 참조하여 논의된 것처럼) 데이터 기록기(286)로 하여금 가드 비트에 가드를 삽입하도록 하는 데이터 판독기(286)에 신호(288)를 통신할 수 있다. 다른 실시예들에서, 신호(288) 또는 신호(287)의 표명의 결핍은 데이터 판독기(286)로 하여금 가드 비트를 스킵하도록 할 수 있다. 그와 같이, 데이터 기록기(286)는 이 가드 비트에 어떤 메타데이터(225)를 기록하지 않는다.
도 11b는 예시적인 실시예에 따라 비디오 데이터의 스트림으로부터 메타데이터를 디코딩하기 위해 이용될 수 있는 서브시스템(290)을 도시한다. 서브시스템(290)은 예를 들면, 도 4b의 방법(330)과 같은 본 명세서에서 기술된 방법들 중 하나를 이용하여 다가오는 장면에 대해 메타데이터(225)를 검출하기 위해 이용될 수 있다. 서브시스템(290)은 서브시스템(280)과 관련하여 일부 유사하다. 예를 들면, 서브시스템(290)은 입력된 비디오 데이터(203)를 수신하고, (서브시스템(280)이 입력된 비디오 데이터(203)를 수신하고 디코딩하는 방법과 유사하게) 디코더(292)에서 입력된 비디오 데이터(203)를 디코딩할 수 있다. 입력된 비디오 데이터(203)는 버퍼(293)에서 버퍼링될 수 있다. 가드 비트 판독기(294)는 버퍼에 저장된 비디오 데이터(203)를 액세스하고, 차례로 각 가드 비트를 고려한다. 고려된 각 가드 비트에 대해, 가드 비트 판독기(294)는 가드 비트에 앞선 비디오 비트들과 예약된 워드 저장소(285)로부터 액세스된 복수의 예약된 비디오 워드들(예를 들면, 예약된 화소 값들)의 각각을 비교할 수 있다. 그와 같은 비교에 기초하여, 가드 비트 판독기(294)는 가드 비트가 예약된 비디오 워드들의 통신을 막기 위해 가드로서 기능하는지의 여부, 또는 가드 비트가 메타데이터를 포함하는지의 여부를 식별할 수 있다.
가드 비트가 메타데이터를 포함할 수 있는지를 가드 비트 판독기(294)에 의해 결정되면, 가드 비트 판독기(294)는 신호(297)를 메타데이터 판독기(296)가 (예를 들면, 도 4b의 블록(338)에서 실행되는) 가드 비트를 판독하도록 하는 메타데이터 판독기(296)로 송신할 수 있다. 가드 비트들로부터 판독된 메타데이터(225)는 수반하는 검색 및 적용에 대해 메타데이터 저장소(296)에 저장될 수 있다.
가드 비트가 가드를 포함하는지를 가드 비트 판독기(294)에 의해 결정되면, 가드 비트 판독기(294)는 일부 실시예들에서, 신호(298)를 메타데이터 판독기(296)가 가드 비트를 판독하는 것을 스킵하도록 하는 메타데이터 판독기(296)로 송신할 수 있다. 다른 실시예들에서, 메타데이터 판독기(286)는 신호(297)를 수신할 때에만 가드 비트로부터 메타데이터를 판독하고, 신호(297)의 표명의 결핍은 가드 비트로하여금 메타데이터 판독기(296)에 의해 스킵되도록 한다.
몇몇 실시예들에서, 가드 비트 판독기(284, 294)들은 비디오 데이터를 인코딩 또는 디코딩하기 시작하는 곳을 찾기 위해 인입하는 비디오 스트림에서 가드 비트들을 모니터링할 필요가 없다. 메타데이터가 비디오 데이터에 기록될 때, 메타데이터 패킷이 메타데이터 기록기에 의해 생성되어 비디오 데이터에서(예를 들면, 어떤 비디오 프레임들에서, 또는 비디오 프레임의 특정 화소에서 시작하는, 또는 특정 이미지 영역들 등에서) 기존의 메타데이터의 위치를 다운스트림 디바이스에 가리키기 위해 비디오 데이터 스트림에 삽입될 수 있다. 이 메타데이터 패킷은 비디오 데이터에 부가적인 메타데이터의 기록을 가이드하기 위해 서브시스템(280)에 의해 이용될 수 있고, 비디오 데이터로부터 메타데이터의 추출을 가이드하기 위해 서브시스템(290)에 의해 이용될 수 있다. 이 메타데이터 패킷은 비디오 전달 파이프라인을 통해 메타데이터의 전달을 동기화하는데 유용할 수 있다. 메타데이터 패킷은 또한 메타데이터가 검출되는 화소들에 대해, 디스플레이를 구동하는데 이용되어야 하는 화소 값을 다운스트림 디바이스에 가리킬 수 있다. 이것은 메타데이터가 일정한 휴를 갖는 이미지의 영역들에 인코딩될 메타데이터를 가능하게 한다.
다른 실시예들에서, 서브시스템(280) 및 서브시스템(290)은 일부 다른 방법에 따라 비디오 데이터에 메타데이터를 기록하도록 적응되거나 재구성될 수 있다. 예를 들면, 비디오 데이터의 크로미넌스 부분들의 LSB들이 비디오 데이터를 송신하기 위해 이용될 수 있는 실시예들에 대해, 최소 유효 비트 기록기는 서브시스템(280)의 가드 비트 판독기(284) 및 데이터 기록기(286) 대신에 제공될 수 있다. 유사하게, 최소 유효 비트 판독기는 서브시스템(290)의 가드 비트 판독기(294) 및 데이터 기록기(296) 대신에 제공될 수 있다. 최소 유효 비트 기록기는 버퍼(283)의 비디오 데이터(203)를 액세스하고 비디오 데이터의 크로미넌스 부분들의 LSB들에 메타데이터를 기록할 수 있다. 최소 유효 비트 판독기는 버퍼(293)의 비디오 데이터(203)를 액세스하고 비디오 데이터의 크로미넌스 부분들의 LSB들로부터 메타데이터를 판독할 수 있다. 최소 유효 비트 기록기는 (예를 들면, 6b/8b 또는 8b/10b 인코딩 등을 이용하거나 연속적인 식별 비트들의 고정된 패턴들로서 예약된 워드들을 정의함으로써) 예약된 메타데이터 워드들의 의도되지 않은 통신을 피하기 위해 그와 같은 방식으로 메타데이터를 인코딩할 수 있다.
가드 비트 판독기들(284, 294)(및 최소 유효 비트 판독기들 또는 기록기들)은 데이터 프로세서, CPU, 마이크로프로세서, FPGA, 또는 그것의 조합, 또는 루미넌스 레벨들을 결정하기 위해 비디오 데이터를 판독하고, 루미넌스 레벨들을 임계값과 비교할 수 있는 어떤 다른 적합한 처리 유닛에 의해 구현될 수 있다. 데이터 기록기(286) 및 메타데이터 판독기(296)는 데이터 프로세서, CPU, 마이크로프로세서, FPGA, 또는 그것의 조합, 또는 비디오 데이터 소스로부터 비디오 데이터(203)를 액세스하고 비디오 데이터(203)의 비트들을 기록하거나 판독할 수 있는 어떤 다른 적합한 처리 유닛에 의해 구현될 수 있다.
다르게 지시되지 않으면, 상기에서 언급된 구성요소(예를 들면, 프로세서, 디코더, 인코더, 디바이스 디스플레이, 등)는 (수단을 포함하는) 구성요소는 본 발명의 예시적인 실시예들에서 기능을 실행하는 개시된 실질적으로 동일하지 않은 구성요소들을 포함하는 기재된 구성을 실행하는(즉, 기능적으로 등가인) 어떤 구성요소를 구성하는 등가들을 포함하는 것으로 해석되어야 한다.
특정한 실시예들은 프로그램 제품의 형태로 제공될 수 있다. 프로그램 제품은 데이터 프로세서에 의해 실행될 때, 데이터 프로세서가 본 발명의 방법을 실행하도록 하는 명령들을 포함하는 한 세트의 컴퓨터-판독 가능한 신호들을 전달하는 어떤 매체를 포함할 수 있다. 본 발명에 따른 프로그램 제품들은 다양한 형태들 중 어느 하나가 될 수 있다. 프로그램 제품은 예를 들면, 플로피 디스켓들, 하드 디스크 드라이브들, CD ROM들, DVD들을 포함하는 광 데이터 저장 매체, ROM들, 플래시 메모리 등을 포함하는 전자 데이터 저장 매체를 포함할 수 있다. 프로그램 제품 상의 컴퓨터 판독가능한 신호들은 선택적으로 압축되거나 암호화될 수 있다.
복수의 예시적인 측면들 및 실시예들이 상기에서 기술되는 동안, 당업자는 어떤 수정들, 치환들, 부가들 및 그것의 하위-조합들을 인식할 것이다. 예를 들면,:
Figure 112012066386826-pct00041
어떤 실시예들에서, 메타데이터는 가드 비트들 또는 LSB들이 아닌 비트들에서 메타데이터를 임베딩함으로써 비디오 데이터 스트림에서 전달될 수 있다. 예를 들면, 메타데이터는 일부 실시예들에서, 최상위 비트들(MSBs)에 임베딩될 수 있다. 이것은 MSB에서 기존의 비디오 데이터를 하나의 비트만큼 우측으로 시프트하고 메타데이터를 대체함으로써 실행될 수 있다.
Figure 112012066386826-pct00042
본 명세서에서 개시된 예시적인 실시예들은 비디오 전달 파이프라인에 유용한 시스템들, 디바이스 및 방법들을 제공한다. 그와 같은 시스템들, 디바이스 및 방법들은 다른 유형의 데이터의 전달에 대해 유용할 수 있다.
Figure 112012066386826-pct00043
예시적인 실시예들에서, 메타데이터는 비디오 데이터에 기록되고, 비디오 전달 파이프라인을 통해 비디오 데이터를 가지고 전달된다. 다른 실시예들에서, 다른 종류 데이터들은 비디오 데이터에 기록되고, 비디오 전달 파이프라인을 통해 비디오 데이터를 가지고 전달된다.
Figure 112012066386826-pct00044
본 명세서에서 기술된 실시예들에 따라 비디오 데이터에 기술된 메타데이터는 비디오 압축 프로그램, 리코더 등과 같은 다른 디바이스의 구성, 제어 및/또는 동작의 가이드에 유용할 수 있다.
따라서, 하기의 첨부된 청구항들 및 이후로 도입된 청구항들은 본 발명의 참 정신 및 범위 내에서 수정들, 치환들, 부가들 및 그것의 하위-조합들을 포함하도록 해석되는 것으로 의도된다.
따라서, 본 발명은 어떤 요소들을(본 발명의 여러 부분들 또는 특징들 및 명세서에서 기술된 등가들, 현재 존재하는 것, 및/또는 차후에 개발된 것) 적절하게 포함하고, 구성되고, 또는 필수적으로 구성될 수 있다. 또한, 본 명세서에서 예시적으로 개시된 본 발명은, 본 명세서에서 구체적으로 개시되는지의 여부에 상관없이 여러 요소가 관례적으로 삭제될 수 있다. 명백하게, 본 발명의 많은 변형들 및 수정들은 상기 교시의 관점에서 가능하다. 따라서, 첨부된 청구항들의 범위 내에서, 본 발명은 본 명세서에서 구체적으로 기술되는 것과 다르게 실행될 수 있는 것이 이해될 것이다.
따라서, 본 발명은 본 발명의 일부 부분들의 구조, 특징, 및 기능성을 기술한 하기의 열거된 예시적인 실시예(EEE)들에 제한되지 않지만 포함하는 본 명세서에 기술된 형태들로 구현될 수 있다.
EEE1 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법에 있어서:
(a) 비디오 데이터를 제공하기 위해 비디오 프레임들의 시퀀스를 캡쳐하는 단계;
(b) 상기 비디오 데이터에 의해 제공된 이미지를 참조 디스플레이 상에서 편집하는 단계;
(c) 상기 참조 디스플레이의 구성 파라미터들 및 상기 편집된 이미지의 특성들을 식별하는 메타데이터를 생성하는 단계;
(d) 상기 비디오 데이터에 상기 메타데이터를 임베딩(embed)하는 단계;
(e) 상기 임베딩된 메타데이터를 포함하는 상기 비디오 데이터를 상기 디스플레이 서브시스템에 전달하는 단계;
(f) 상기 디스플레이 서브시스템에서 상기 메타데이터를 추출하는 단계; 및
(g) 상기 메타데이터 상에 적어도 일부에 기초하여 상기 디스플레이 서브시스템을 구성하거나 상기 디스플레이에 대한 상기 비디오 데이터를 처리하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE2 제 1 항에 있어서, 상기 비디오 데이터에 상기 메타데이터를 임베딩하는 단계는 상기 비디오 데이터에 복수의 가드 비트들을 겹쳐쓰는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE3 제 2 항에 있어서, 상기 비디오 데이터에 상기 메타데이터를 임베딩하는 단계는:
(a) 전달될 메타데이터 패킷으로부터 메타데이터의 비트를 검색하는 단계;
(b) 상기 비디오 데이터에서 제 1 가드 비트를 찾아내는 단계;
(c) 상기 제 1 가드 비트를 선행하는 복수의 비디오 비트들과 예약된 비디오 워드를 나타내는 제 1 워드를 비교하는 단계; 및
(d) 상기 제 1 가드 비트를 선행하는 상기 복수의 비디오 비트들이 상기 제 1 워드와 다르면 상기 제 1 가드 비트에 상기 메타데이터의 비트를 기록하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE4 제 3 항에 있어서, 상기 메타데이터를 상기 비디오 데이터에 임베딩하는 단계는 상기 제 1 가드 비트를 선행하는 상기 복수의 비디오 비트들이 상기 제 1 워드와 매칭하면 상기 제 1 가드에 가드를 설정하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE5 제 4 항에 있어서, 상기 가드가 상기 제 1 가드 비트에 설정되면, 상기 비디오 데이터 내에 메타데이터를 임베딩하는 단계는:
(a) 상기 제 1 가드 비트 이후에 상기 비디오 데이터에 제 2 가드 비트를 찾아내는 단계;
(b) 상기 제 2 가드 비트를 선행하는 복수의 비디오 비트들과 상기 제 1 워드를 비교하는 단계; 및
(c) 상기 제 2 가드 비트를 선행하는 상기 복수의 비디오 비트들이 상기 제 1 워드와 다르면 상기 제 2 가드 비트에 상기 메타데이터의 비트를 기록하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE6 제 5 항에 있어서, 상기 메타데이터를 추출하는 단계는:
(a) 상기 비디오 데이터에서 상기 제 1 가드 비트를 찾아내는 단계;
(b) 상기 제 1 가드 비트를 선행하는 상기 복수의 비디오 비트들과 상기 제 1 워드를 비교함으로써 상기 제 1 가드 비트가 가드를 포함하는지를 결정하는 단계; 및
(c) 상기 제 1 가드 비트가 가드를 포함하지 않는다고 결정되면 상기 제 1 가드 비트를 추출하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE7 제 6 항에 있어서, 상기 제 1 가드 비트가 가드를 포함하는지가 결정되면, 상기 메타데이터를 추출하는 단계는:
(a) 상기 비디오 데이터에서 상기 제 2 가드 비트를 찾아내는 단계;
(b) 상기 제 2 가드 비트를 선행하는 상기 복수의 비디오 비트들과 상기 제 1 워드를 비교함으로써 상기 제 2 가드 비트가 가드를 포함하는지를 결정하는 단계; 및
(c) 상기 제 2 가드 비트가 가드를 포함하지 않는다고 결정되면 상기 제 2 가드 비트를 추출하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE8 제 1 항에 있어서, 상기 비디오 데이터에 상기 메타데이터를 임베딩하는 단계는 상기 비디오 데이터에 크로미넌스 채널들의 복수의 최하위 비트(LSB)를 겹쳐쓰는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE9 제 8 항에 있어서, 상기 비디오 데이터에 상기 메타데이터를 임베딩하는 단계는:
(a) 전달될 메타데이터 패킷으로부터 메타데이터의 비트를 검색하는 단계;
(b) 상기 비디오 데이터에서 크로미넌스 채널의 제 1 LSB를 찾아내는 단계; 및
(c) 상기 제 1 LSB에 상기 메타데이터의 비트를 기록하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE10 제 1 항에 있어서, 상기 비디오 데이터에 상기 메타데이터를 임베딩하는 단계는 임계값 아래의 루미넌스 값들을 갖는 화소들에 대해 상기 비디오 데이터에 복수의 크로미넌스 비트들을 겹쳐쓰는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE11 제 1 항에 있어서, 상기 비디오 데이터에 상기 메타데이터를 임베딩하는 단계는:
(a) 상기 비디오 데이터에 하나 이상의 블랙 프레임들을 식별하는 단계; 및
(b) 상기 메타데이터를 갖는 상기 하나 이상의 블랙 프레임들 내의 화소들에 대해 복수의 크로미넌스 비트들을 겹쳐쓰는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE12 제 1 항에 있어서, 상기 비디오 데이터에 상기 메타데이터를 임베딩하는 단계는:
(a) 상기 비디오 데이터에 하나 이상의 블랙 이미지 영역들을 식별하는 단계; 및
(b) 상기 메타데이터를 갖는 상기 하나 이상의 블랙 이미지 영역들 내의 화소들에 대해 복수의 크로미넌스 비트들을 겹쳐쓰는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE13 제 1 항에 있어서, 상기 비디오 데이터에 상기 메타데이터를 임베딩하는 단계는:
(a) 한 쌍의 비디오 데이터 프레임들 사이에 비디오 데이터의 블랙 프레임을 삽입하는 단계; 및
(b) 상기 블랙 프레임의 화소 데이터에 상기 메타데이터를 임베딩하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE14 제 13 항에 있어서, 상기 블랙 프레임의 화소 데이터 내의 메타데이터는 상기 비디오 데이터의 블랙 프레임에 선행하는 비디오 프레임의 디스플레이 시스템에 의해 재생을 반복하여, 상기 디스플레이 서브시스템에서 추출되는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE15 제 1 항에 있어서, 상기 임베딩된 메타데이터를 포함하는 상기 비디오 데이터를 디스플레이 서브시스템에 전달하는 단계는:
(a) 상기 비디오 데이터에 송신될 새로운 메타데이터를 수신하는 단계;
(b) 상기 새로운 메타데이터의 우선순위 레벨을 식별하는 단계;
(c) 상기 임베딩된 메타데이터의 우선순위 레벨을 식별하는 단계;
(d) 상기 새로운 메타데이터의 우선순위 레벨을 상기 임베딩된 메타데이터의 우선순위 레벨을 비교하는 단계; 및
(e) 상기 임베딩된 메타데이터의 우선순위 레벨이 상기 새로운 메타데이터의 우선순위보다 낮으면, 상기 임베딩된 메타데이터의 전달을 인터럽트하고, 상기 비디오 데이터에 상기 새로운 메타데이터를 기록하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE16 제 15 항에 있어서, 상기 임베딩된 메타데이터의 전달을 인터럽트하는 단계는:
(a) 상기 비디오 데이터로부터 상기 임베딩된 메타데이터를 추출하는 단계; 및
(b) 상기 추출된 메타데이터를 저장하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE17 제 16 항에 있어서, 상기 새로운 메타데이터의 모두가 상기 비디오 데이터에 기록된 후 상기 비디오 스트림에 상기 추출된 메타데이터를 재기록함으로써 상기 추출된 메타데이터의 송신을 재개하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE18 제 1 항에 있어서, 상기 비디오 데이터를 전달하는 단계는 상기 임베딩된 메타데이터가 적용될 비디오 프레임에 앞서 상기 임베딩된 메타데이터를 갖는 상기 비디오 데이터를 전달하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE19 제 18 항에 있어서, 상기 메타데이터는 상기 임베딩된 메타데이터가 적용될 때를 식별하는 타임스탬프를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE20 제 1 항 내지 제 19 항 중 어느 한 항에 있어서, 상기 비디오 데이터를 전달하는 단계는 다음의 송신 매체: DVD, 블루-레이, 위성, 케이블 또는 인터넷 중 하나에 의한 전달을 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE21 제 1 항 내지 제 20 항 중 어느 한 항에 있어서, 상기 메타데이터는 다음의 포맷들:
(a) 6b/8b 인코딩; 및
(b) 8b/10b 인코딩 중 하나에 인코딩되는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE22 제 1 항 내지 제 21 항 중 어느 한 항에 있어서, 상기 메타데이터의 프레임 헤더의 시작이 연속적인 식별 비트들의 제 1 고정된 패턴에 의해 표현되고 상기 메타데이터의 프레임 헤더의 끝이 연속적인 식별 비트들의 제 2 고정된 패턴에 의해 표현되도록 상기 메타데이터는 인코딩되는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
EEE23 시스템에 있어서:
(a) 비디오 데이터를 생성하는 비디오 캡쳐 서브시스템;
(b) 상기 비디오 캡쳐 서브시스템에 의해 생성된 상기 비디오 데이터를 수신 및 편집하고 상기 참조 디스플레이 상에 상기 비디오 데이터를 디스플레이하도록 구성된 프로세서 및 참조 디스플레이를 갖는 후속 작업 서브시스템(post-production subsystem); 및
(c) 상기 후속 작업 서브시스템에 의해 편집된 상기 비디오 데이터를 수신하고 상기 디스플레이 상에 상기 비디오 데이터를 디스플레이하도록 구성된 비디오 프로세서 및 디스플레이를 갖는 디스플레이 서브시스템을 포함하고,
상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템 중 적어도 하나는 후속 처리 또는 상기 비디오 데이터의 디스플레이를 가이드하는 상기 비디오 데이터에 메타데이터를 인코딩하도록 구성되는, 시스템.
EEE24 제 23 항에 있어서, 상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템은 복수의 상기 비디오 데이터의 가드 비트들에 메타데이터를 임베딩함으로써 상기 비디오 데이터에 메타데이터를 인코딩하도록 구성되는, 시스템.
EEE25 제 23 항에 있어서, 상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템은 복수의 상기 비디오 데이터의 최하위 비트들에 메타데이터를 임베딩함으로써 상기 비디오 데이터에 메타데이터를 인코딩하도록 구성되는, 시스템.
EEE26 제 23 항에 있어서, 상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템은 상기 메타데이터를 갖는 상기 비디오 데이터에 크로미넌스 데이터를 겹쳐씀으로써 상기 비디오 데이터에 메타데이터를 인코딩하도록 구성되는, 시스템.
EEE27 제 24 항에 있어서, 하나 이상의 저장소들을 포함하고, 각 저장소는 예약된 비디오 워드들의 리스트를 저장하고, 상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템의 각각은 상기 비디오 데이터에서 다음 이용가능한 가드 비트를 찾아내고, 상기 저장소들 중 하나로부터 예약된 비디오 워드들의 리스트를 검색하고, 상기 다음 이용가능한 가드 비트에 가드를 삽입할 지를 결정하기 위해 상기 예약된 비디오 워드들과 상기 비디오 데이터를 비교하도록 구성되는, 시스템.
EEE28 제 23 항 내지 제 27 항 중 어느 한 항에 있어서, 상기 후속 작업 서브시스템의 프로세서는:
상기 참조 디스플레이의 구성 파라미터들; 및
상기 비디오 데이터에 의해 제공된 이미지의 루미넌스 및 색 영역 특성들 중 적어도 하나를 식별하는 상기 비디오 데이터에 메타데이터를 인코딩하도록 구성되는, 시스템.
EEE29 제 28 항에 있어서, 상기 디스플레이 서브시스템의 비디오 프로세서는 상기 비디오 데이터에 메타데이터를 디코딩하고, 상기 디스플레이 서브시스템의 디스플레이를 구성하거나 상기 디스플레이 서브시스템의 디스플레이의 특성들을 조정하기 위해 상기 비디오 데이터를 처리하기 위해 상기 디코딩된 메타데이터를 적용하기 위해 구성되는, 시스템.
EEE30 제 28 항에 있어서, 상기 디스플레이 서브시스템의 비디오 프로세서는 상기 디스플레이 서브시스템의 디스플레이의 특성들을 조정하기 위해 상기 비디오 데이터를 처리하도록 상기 디스플레이 서브시스템의 디스플레이의 확장된 디스플레이 식별 데이터를 판독하도록 구성되는, 시스템.
EEE31 제 23 항 내지 제 30 항 중 어느 한 항에 있어서, 상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템은:
상기 비디오 데이터 상에서 적어도 부분적으로 기초하여 메타데이터를 인코딩하는 방법을 선택하고;
상기 비디오 데이터의 디스플레이 또는 후속 처리를 가이드하는 상기 비디오 데이터에 메타데이터를 인코딩하도록 상기 선택된 방법을 적용하도록 구성되는, 시스템.
EEE32 제 23 항 내지 제 31 항 중 어느 한 항에 있어서, 상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템은 비교적 높은 우선 순위 메타데이터의 전달을 위해 인터럽트될 비교적 낮은 우선순위 메타데이터의 전달을 허용하도록 상기 비디오 데이터에 전달을 관리하도록 구성되는, 시스템.
EEE33 제 23 항 내지 제 32 항 중 어느 한 항에 있어서, 상기 디스플레이 서브시스템은 다음의 송신 매체: DVD, 블루-레이, 위성, 케이블 또는 인터넷 중 하나에 의해 비디오 데이터를 수신하도록 구성되는, 시스템.
EEE34 제 23 항 내지 제 33 항 중 어느 한 항에 있어서, 상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템은 다음의 포맷들:
(a) 6b/8b 인코딩; 및
(b) 8b/10b 인코딩 중 하나에 메타데이터를 인코딩하도록 구성되는, 시스템.
EEE35 제 23 항 내지 제 34 항 중 어느 한 항에 있어서, 상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템은, 상기 메타데이터의 프레임 헤더의 시작이 연속적인 식별 비트들의 제 1 고정된 패턴에 의해 표현되고 상기 메타데이터의 프레임 헤더의 끝이 연속적인 식별 비트들의 제 2 고정된 패턴에 의해 표현되도록 메타데이터를 인코딩하도록 구성되는, 시스템.
EEE36 비디오 데이터에 메타데이터를 인코딩하는 방법에 있어서,
(a) 상기 비디오 데이터에 전달될 메타데이터의 비트를 검색하는 단계;
(b) 상기 비디오 데이터에서 제 1 가드 비트를 찾아내는 단계;
(c) 상기 제 1 가드 비트에 인접한 복수의 비디오 비트들과 예약된 비디오 워드를 나타내는 제 1 워드를 비교하는 단계; 및
(d) 상기 복수의 비디오 비트들이 상기 제 1 워드와 다르면 상기 제 1 가드 비트에 상기 메타데이터의 비트를 기록하는 단계를 포함하는, 비디오 데이터에 메타데이터를 인코딩하는 방법.
EEE37 제 36 항에 있어서, 상기 제 1 가드 비트에 인접한 복수의 비디오 비트들이 상기 제 1 워드와 매칭하면 상기 비디오 데이터에 상기 메타데이터를 인코딩하는 단계는 상기 제 1 가드 비트에 가드를 설정하는 단계를 포함하는, 비디오 데이터에 메타데이터를 인코딩하는 방법.
EEE38 제 37 항에 있어서, 상기 가드가 상기 제 1 가드 비트에 설정되면, 상기 비디오 데이터 내에 메타데이터를 인코딩하는 단계는:
(a) 상기 제 1 가드 비트 이후에 상기 비디오 데이터에서 제 2 가드 비트를 찾아내는 단계;
(b) 상기 제 2 가드 비트에 인접한 복수의 비디오 비트들과 상기 제 1 워드를 비교하는 단계; 및
(c) 상기 제 2 가드 비트에 인접한 상기 복수의 비디오 비트들이 상기 제 1 워드와 다르면 상기 제 2 가드 비트에 상기 메타데이터의 비트를 기록하는 단계를 포함하는, 비디오 데이터에 메타데이터를 인코딩하는 방법.
EEE39 제 36 항 내지 제 38 항 중 어느 한 항에 있어서, 상기 메타데이터를 인코딩하는 방법은 다음의 포맷들:
(a) 6b/8b 인코딩; 및
(b) 8b/10b 인코딩 중 하나에 메타데이터를 인코딩하는 단계를 포함하는, 비디오 데이터에 메타데이터를 인코딩하는 방법.
EEE40 제 36 항 내지 제 39 항 중 어느 한 항에 있어서, 상기 메타데이터의 프레임 헤더의 시작이 연속적인 식별 비트들의 제 1 고정된 패턴에 의해 표현되고 상기 메타데이터의 프레임 헤더의 끝이 연속적인 식별 비트들의 제 2 고정된 패턴에 의해 표현되도록 상기 메타데이터는 인코딩되는, 비디오 데이터에 메타데이터를 인코딩하는 방법.
EEE41 비디오 데이터로부터 메타데이터를 추출하는 방법에 있어서:
(a) 상기 비디오 데이터에서 제 1 가드 비트를 찾아내는 단계;
(b) 상기 제 1 가드 비트에 인접한 상기 복수의 비디오 비트들과 하나 이상의 예약된 워드를 비교함으로써 상기 제 1 가드 비트가 가드를 포함하는지를 결정하는 단계; 및
(c) 상기 제 1 가드 비트가 가드를 포함하지 않는다고 결정되면 상기 제 1 가드 비트를 추출하는 단계를 포함하는, 비디오 데이터로부터 메타데이터를 추출하는 방법.
EEE42 제 41 항에 있어서, 상기 제 1 가드 비트가 가드를 포함한다고 결정되면, 상기 메타데이터를 추출하는 단계는:
(a) 상기 제 1 가드 비트 이후에 상기 비디오 데이터에서 제 2 가드 비트를 찾아내는 단계;
(b) 상기 제 2 가드 비트에 인접한 복수의 비디오 비트들과 상기 하나 이상의 예약된 비디오 워드들을 비교함으로써 상기 제 2 가드 비트가 가드를 포함하는 지를 결정하는 단계;
(c) 상기 제 2 가드 비트가 가드를 포함하지 않는다고 결정되면 상기 제 2 가드 비트를 추출하는 단계를 포함하는, 비디오 데이터로부터 메타데이터를 추출하는 방법.
EEE43. 본 명세서에서 기술된 어떤 신규성 및 진보성이 있는 행위, 단계, 행위들 및/또는 단계들의 조합 또는 행위들 및/또는 단계들의 하위-조합을 포함하는 방법.
EEE44. 본 명세서에서 기술된 어떤 신규성 및 진보성이 있는 특징, 특징들의 조합 또는 특징들의 하위-조합을 포함하는 디바이스.
200: 비디오 전달 파이프라인 207A: 인코더
208B: 디코더 283: 버퍼
284, 294: 가드 비트 판독기 285: 예약된 워드 저장소
286: 데이터 기록기 600: 시스템
602: 비디오 캡쳐 서브시스템
603: 후속 작업 서브시스템
604: 디스플레이 서브 시스템 610: 저장소

Claims (17)

  1. 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법에 있어서:
    (a) 비디오 데이터를 제공하기 위해 비디오 프레임들의 시퀀스를 캡쳐하는 단계;
    (b) 상기 비디오 데이터에 의해 제공된 이미지를 참조 디스플레이 상에서 편집하는 단계;
    (c) 상기 참조 디스플레이의 구성 파라미터들 및 상기 편집된 이미지의 특성들을 식별하는 메타데이터를 생성하는 단계;
    (d) 상기 비디오 데이터에 상기 메타데이터를 임베딩(embedding)하는 단계;
    (e) 상기 임베딩된 메타데이터를 포함하는 상기 비디오 데이터를 상기 디스플레이 서브시스템에 전달하는 단계;
    (f) 상기 디스플레이 서브시스템에서 상기 메타데이터를 추출하는 단계; 및
    (g) 적어도 상기 메타데이터의 일부에 기초하여 상기 디스플레이 서브시스템을 구성하거나 상기 디스플레이 서브시스템을 위해 상기 비디오 데이터를 처리하는 단계를 포함하고;
    상기 비디오 데이터에 상기 메타데이터를 임베딩하는 단계는 상기 비디오 데이터에 복수의 가드 비트들을 겹쳐쓰는 단계를 포함하고;
    상기 비디오 데이터에 상기 메타데이터를 임베딩하는 단계는:
    (a) 전달될 메타데이터 패킷으로부터 메타데이터의 비트를 검색하는 단계;
    (b) 상기 비디오 데이터 내에서 제 1 가드 비트를 찾아내는 단계;
    (c) 상기 제 1 가드 비트를 선행하는 복수의 비디오 비트들과 예약된 비디오 워드를 나타내는 제 1 워드를 비교하는 단계; 및
    (d) 상기 제 1 가드 비트를 선행하는 상기 복수의 비디오 비트들이 상기 제 1 워드와 다르면 상기 제 1 가드 비트에 상기 메타데이터의 비트를 기록하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
  2. 제 1 항에 있어서,
    상기 메타데이터를 상기 비디오 데이터에 임베딩하는 단계는 상기 제 1 가드 비트를 선행하는 상기 복수의 비디오 비트들이 상기 제 1 워드와 매칭하면 상기 제 1 가드에 가드를 설정하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
  3. 제 2 항에 있어서,
    상기 가드가 상기 제 1 가드 비트에 설정되면, 상기 비디오 데이터 내에 메타데이터를 임베딩하는 단계는:
    (a) 상기 제 1 가드 비트 이후에 상기 비디오 데이터 내에서 제 2 가드 비트를 찾아내는 단계;
    (b) 상기 제 2 가드 비트를 선행하는 복수의 비디오 비트들과 상기 제 1 워드를 비교하는 단계; 및
    (c) 상기 제 2 가드 비트를 선행하는 상기 복수의 비디오 비트들이 상기 제 1 워드와 다르면 상기 제 2 가드 비트에 상기 메타데이터의 비트를 기록하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
  4. 제 3 항에 있어서,
    상기 메타데이터를 추출하는 단계는:
    (a) 상기 비디오 데이터에 상기 제 1 가드 비트를 찾아내는 단계;
    (b) 상기 제 1 가드 비트를 선행하는 상기 복수의 비디오 비트들과 상기 제 1 워드를 비교함으로써 상기 제 1 가드 비트가 가드를 포함하는지를 결정하는 단계; 및
    (c) 상기 제 1 가드 비트가 가드를 포함하지 않는다고 결정되면 상기 제 1 가드 비트를 추출하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
  5. 제 4 항에 있어서,
    상기 제 1 가드 비트가 가드를 포함하는 것으로 결정되면, 상기 메타데이터를 추출하는 단계는:
    (a) 상기 비디오 데이터 내에서 상기 제 2 가드 비트를 찾아내는 단계;
    (b) 상기 제 2 가드 비트를 선행하는 상기 복수의 비디오 비트들과 상기 제 1 워드를 비교함으로써 상기 제 2 가드 비트가 가드를 포함하는지를 결정하는 단계; 및
    (c) 상기 제 2 가드 비트가 가드를 포함하지 않는다고 결정되면 상기 제 2 가드 비트를 추출하는 단계를 포함하는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 방법.
  6. 디스플레이 서브시스템에 비디오 데이터를 제공하는 시스템에 있어서:
    (a) 비디오 데이터를 생성하는 비디오 캡쳐 서브시스템;
    (b) 상기 비디오 캡쳐 서브시스템에 의해 생성된 상기 비디오 데이터를 수신 및 편집하고 참조 디스플레이 상에 상기 비디오 데이터를 디스플레이하도록 구성된 프로세서 및 상기 참조 디스플레이를 갖는 후속 작업 서브시스템(post-production subsystem); 및
    (c) 상기 후속 작업 서브시스템에 의해 편집된 상기 비디오 데이터를 수신하고 디스플레이 상에 상기 비디오 데이터를 디스플레이하도록 구성된 비디오 프로세서 및 상기 디스플레이를 갖는 디스플레이 서브시스템을 포함하고,
    상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템 중 적어도 하나는, 상기 비디오 데이터의 디스플레이 상에서의 비디오 재생 혹은 후속 처리에서 다운스트림 디바이스들을 가이드하기 위해 상기 비디오 데이터내에 기준 디스플레이의 구성 파라미터들 및 상기 편집된 비디오 데이터의 특성들을 식별하는 메타데이터를 인코딩하도록 구성되고;
    상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템은 상기 비디오 데이터의 복수의 가드 비트들에 메타데이터를 임베딩함으로써 상기 비디오 데이터에 메타데이터를 인코딩하도록 구성되고;
    상기 시스템은 하나 이상의 저장소들을 포함하고, 각 저장소는 예약된 비디오 워드들의 리스트를 저장하고, 상기 비디오 캡쳐 서브시스템, 후속 작업 서브시스템 및 디스플레이 서브시스템의 각각은 상기 비디오 데이터 내에서 다음 이용가능한 가드 비트를 찾아내고, 상기 저장소들 중 하나로부터 예약된 비디오 워드들의 리스트를 검색하고, 상기 다음 이용가능한 가드 비트에 가드를 삽입할 지를 결정하기 위해 상기 예약된 비디오 워드들과 상기 비디오 데이터를 비교하도록 구성되는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 시스템.
  7. 제 6 항에 있어서,
    상기 후속 작업 서브시스템의 프로세서는:
    상기 참조 디스플레이의 구성 파라미터들; 및
    상기 비디오 데이터에 의해 제공된 이미지의 루미넌스 및 색 영역 특성들 중 적어도 하나를 식별하는 메타데이터를 상기 비디오 데이터 내에 인코딩하도록 구성되는, 디스플레이 서브시스템에 비디오 데이터를 제공하는 시스템.
  8. 비디오 데이터로부터 메타데이터를 추출하는 방법에 있어서:
    (a) 상기 비디오 데이터 내에서 제 1 가드 비트를 찾아내는 단계;
    (b) 상기 제 1 가드 비트에 인접한 복수의 비디오 비트들과 하나 이상의 예약된 비디오 워드들을 비교함으로써 상기 제 1 가드 비트가 가드를 포함하는지를 결정하는 단계; 및
    (c) 상기 제 1 가드 비트가 가드를 포함하지 않는다고 결정되면 상기 제 1 가드 비트를 추출하는 단계를 포함하는, 비디오 데이터로부터 메타데이터를 추출하는 방법.
  9. 제 8 항에 있어서,
    상기 제 1 가드 비트가 가드를 포함한다고 결정되면, 상기 메타데이터를 추출하는 단계는:
    (a) 상기 제 1 가드 비트 이후에 상기 비디오 데이터 내에서 제 2 가드 비트를 찾아내는 단계;
    (b) 상기 제 2 가드 비트에 인접한 복수의 비디오 비트들과 상기 하나 이상의 예약된 비디오 워드들을 비교함으로써 상기 제 2 가드 비트가 가드를 포함하는 지를 결정하는 단계; 및
    (c) 상기 제 2 가드 비트가 가드를 포함하지 않는다고 결정되면 상기 제 2 가드 비트를 추출하는 단계를 포함하는, 비디오 데이터로부터 메타데이터를 추출하는 방법.
  10. 삭제
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
KR1020127021699A 2010-02-22 2011-02-17 비트스트림에 임베딩된 메타데이터를 이용하는 렌더링 제어부를 갖는 비디오 디스플레이 KR101428504B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US30690010P 2010-02-22 2010-02-22
US61/306,900 2010-02-22
PCT/US2011/025185 WO2011103258A2 (en) 2010-02-22 2011-02-17 Video display control using embedded metadata

Publications (2)

Publication Number Publication Date
KR20120106901A KR20120106901A (ko) 2012-09-26
KR101428504B1 true KR101428504B1 (ko) 2014-08-11

Family

ID=43881249

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020127021699A KR101428504B1 (ko) 2010-02-22 2011-02-17 비트스트림에 임베딩된 메타데이터를 이용하는 렌더링 제어부를 갖는 비디오 디스플레이

Country Status (6)

Country Link
US (2) US8891934B2 (ko)
EP (1) EP2539895B1 (ko)
JP (1) JP5577415B2 (ko)
KR (1) KR101428504B1 (ko)
CN (1) CN102893602B (ko)
WO (1) WO2011103258A2 (ko)

Families Citing this family (86)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5588022B2 (ja) 2010-02-22 2014-09-10 ドルビー ラボラトリーズ ライセンシング コーポレイション 表示サブシステムにビデオデータを提供する方法、およびシステム
WO2011150109A1 (en) * 2010-05-26 2011-12-01 Qualcomm Incorporated Camera parameter- assisted video frame rate up conversion
US20120008693A1 (en) * 2010-07-08 2012-01-12 Echostar Technologies L.L.C. Substituting Embedded Text for Video Text Images
KR101482542B1 (ko) 2010-07-22 2015-01-14 돌비 레버러토리즈 라이쎈싱 코오포레이션 이미지 데이터와 디스플레이의 비디오 범위들 사이의 맵핑을 위한 시스템, 장치 및 방법들
JP5791244B2 (ja) * 2010-07-29 2015-10-07 キヤノン株式会社 画像処理装置、表示装置及びそれらの制御方法
US9190014B2 (en) * 2010-09-13 2015-11-17 Dolby Laboratories Licensing Corporation Data transmission using out-of-gamut color coordinates
US20120092327A1 (en) * 2010-10-14 2012-04-19 Sony Corporation Overlaying graphical assets onto viewing plane of 3d glasses per metadata accompanying 3d image
US8755438B2 (en) * 2010-11-29 2014-06-17 Ecole De Technologie Superieure Method and system for selectively performing multiple video transcoding operations
CN103477648B (zh) * 2011-03-31 2018-08-14 索尼移动通信株式会社 在呈现多媒体内容的同时呈现消息传送内容的系统和方法
EP2518719B1 (en) 2011-04-08 2016-05-18 Dolby Laboratories Licensing Corporation Image range expansion control methods and apparatus
WO2013061337A2 (en) * 2011-08-29 2013-05-02 Tata Consultancy Services Limited Method and system for embedding metadata in multiplexed analog videos broadcasted through digital broadcasting medium
US9565476B2 (en) * 2011-12-02 2017-02-07 Netzyn, Inc. Video providing textual content system and method
JP6344592B2 (ja) * 2012-03-09 2018-06-20 パナソニックＩｐマネジメント株式会社 画像処理装置
US9218638B2 (en) * 2012-03-27 2015-12-22 Infosys Limited Method, system, and computer-readable medium for embedding and extracting a watermark in a video
US8984157B2 (en) * 2012-07-18 2015-03-17 International Business Machines Corporation Network analysis in a file transfer system
US9491494B2 (en) * 2012-09-20 2016-11-08 Google Technology Holdings LLC Distribution and use of video statistics for cloud-based video encoding
US9456055B2 (en) * 2012-11-16 2016-09-27 Sony Network Entertainment International Llc Apparatus and method for communicating media content
US20140169760A1 (en) * 2012-12-14 2014-06-19 Rembrandt 3D Corp Media Player with Recorder Optimization
US20140193083A1 (en) * 2013-01-09 2014-07-10 Nokia Corporation Method and apparatus for determining the relationship of an image to a set of images
CN105074791B (zh) 2013-02-08 2018-01-09 罗伯特·博世有限公司 向视频流添加用户选择的标记
CN105009567B (zh) 2013-02-21 2018-06-08 杜比实验室特许公司 用于合成叠加图形的外观映射的系统和方法
US10055866B2 (en) 2013-02-21 2018-08-21 Dolby Laboratories Licensing Corporation Systems and methods for appearance mapping for compositing overlay graphics
EP2773127A1 (en) * 2013-02-28 2014-09-03 Televic Rail NV System for visualizing data
US10649424B2 (en) 2013-03-04 2020-05-12 Fisher-Rosemount Systems, Inc. Distributed industrial performance monitoring and analytics
US10909137B2 (en) * 2014-10-06 2021-02-02 Fisher-Rosemount Systems, Inc. Streaming data for analytics in process control systems
US10866952B2 (en) 2013-03-04 2020-12-15 Fisher-Rosemount Systems, Inc. Source-independent queries in distributed industrial system
US9558220B2 (en) 2013-03-04 2017-01-31 Fisher-Rosemount Systems, Inc. Big data in process control systems
US11112925B2 (en) 2013-03-15 2021-09-07 Fisher-Rosemount Systems, Inc. Supervisor engine for process control
US9967599B2 (en) 2013-04-23 2018-05-08 Dolby Laboratories Licensing Corporation Transmitting display management metadata over HDMI
US20140337905A1 (en) * 2013-05-09 2014-11-13 Telefonaktiebolaget L M Ericsson (Publ) System and method for delivering extended media content
US9197926B2 (en) 2013-06-05 2015-11-24 International Business Machines Corporation Location based determination of related content
CN110867198B (zh) 2013-06-20 2022-02-25 索尼公司 显示装置
US10057633B2 (en) * 2013-07-14 2018-08-21 Lg Electronics Inc. Method and apparatus for transmitting and receiving ultra high-definition broadcasting signal for expressing high-quality color in digital broadcasting system
US20150019359A1 (en) * 2013-07-15 2015-01-15 Remi Swierczek System and method for discovery moment monetization of media
CN108831511B (zh) 2013-07-30 2020-10-23 杜比实验室特许公司 用于使用场景稳定元数据的系统、方法、设备和存储介质
US9264683B2 (en) 2013-09-03 2016-02-16 Sony Corporation Decoding device and decoding method, encoding device, and encoding method
CN107147942B (zh) * 2013-10-02 2021-01-26 杜比实验室特许公司 视频信号传输方法、设备、装置以及存储介质
CN104581839B (zh) * 2013-10-24 2018-10-16 展讯通信（上海）有限公司 一种信息传输的方法和通信设备
US20160336040A1 (en) * 2014-01-03 2016-11-17 Thomson Licensing Method and apparatus for video optimization using metadata
JP2017510114A (ja) * 2014-01-03 2017-04-06 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ ビデオ最適化用のメタデータを生成するための方法及び装置
JP2017507547A (ja) * 2014-01-03 2017-03-16 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ ビデオコンテンツをレンダリングするときの超高精細解像度へのアップスケーリングを最適化するための方法、装置、およびコンピュータプログラム製品
KR102330316B1 (ko) * 2014-02-25 2021-11-24 애플 인크. 비디오 인코딩 및 디코딩을 위한 적응형 전달 함수
JP6217462B2 (ja) * 2014-03-05 2017-10-25 ソニー株式会社 画像処理装置及び画像処理方法、並びに画像処理システム
CN106233717B (zh) * 2014-03-12 2020-09-15 罗伯特·博世有限公司 用于在无专用反向信道的情况下传输基于摄像机的参数的系统和方法
JP6398241B2 (ja) * 2014-03-20 2018-10-03 富士ゼロックス株式会社 パケット生成装置及びプログラム
GB2525666B (en) * 2014-05-02 2020-12-23 Advanced Risc Mach Ltd Graphics processing systems
CN106416261B (zh) * 2014-06-13 2020-06-26 索尼公司 传输设备、传输方法、接收设备以及接收方法
WO2016007210A1 (en) * 2014-07-07 2016-01-14 Thomson Licensing Enhancing video content according to metadata
WO2016074999A1 (en) * 2014-11-10 2016-05-19 Koninklijke Philips N.V. Method for encoding, video processor, method for decoding, video decoder
US10820002B2 (en) * 2014-12-10 2020-10-27 Samsung Electronics Co., Ltd. Image encoding apparatus and image decoding apparatus and method of operating the same
KR102484385B1 (ko) * 2014-12-10 2023-01-03 삼성전자주식회사 이미지 부호화 및 복호화 장치 및 그 작동 방법
USD776713S1 (en) * 2014-12-17 2017-01-17 Rgi Informatics, Llc Display device with a timeline graphical user interface
GB201502205D0 (en) * 2015-02-10 2015-03-25 Canon Kabushiki Kaisha And Telecom Paris Tech Image data encapsulation
US20160277244A1 (en) * 2015-03-18 2016-09-22 ThePlatform, LLC. Methods And Systems For Content Presentation Optimization
US9584696B2 (en) * 2015-03-24 2017-02-28 Semiconductor Components Industries, Llc Imaging systems with embedded data transmission capabilities
CN107409191B (zh) * 2015-03-27 2020-03-27 松下知识产权经营株式会社 信号处理装置、录像再生装置、信号处理方法以及存储介质
EP3086562B1 (en) * 2015-04-23 2017-05-24 Axis AB Method and device for processing a video stream in a video camera
FR3035989B1 (fr) * 2015-05-05 2018-09-07 Viaccess Procede de reglage du niveau de definition des images d'un programme multimedia
US10368105B2 (en) 2015-06-09 2019-07-30 Microsoft Technology Licensing, Llc Metadata describing nominal lighting conditions of a reference viewing environment for video playback
GB201511450D0 (en) * 2015-06-30 2015-08-12 British Broadcasting Corp Audio-video content control
US9955191B2 (en) 2015-07-01 2018-04-24 At&T Intellectual Property I, L.P. Method and apparatus for managing bandwidth in providing communication services
US10257575B2 (en) * 2015-08-05 2019-04-09 Nagrastar, Llc Hybrid electronic program guide
CN108028958B (zh) 2015-09-25 2021-09-03 麦克赛尔株式会社 广播接收装置
WO2017051808A1 (ja) * 2015-09-25 2017-03-30 日立マクセル株式会社 放送受信装置
US20170127150A1 (en) * 2015-11-04 2017-05-04 Ubitus Inc. Interactive applications implemented in video streams
EP3375194A1 (en) * 2015-11-09 2018-09-19 Thomson Licensing Method and device for adapting the video content decoded from elementary streams to the characteristics of a display
US10573324B2 (en) 2016-02-24 2020-02-25 Dolby International Ab Method and system for bit reservoir control in case of varying metadata
US10181083B2 (en) * 2016-03-21 2019-01-15 Viisights Solutions Ltd. Scene change detection and logging
US10200571B2 (en) 2016-05-05 2019-02-05 Nvidia Corporation Displaying an adjusted image according to ambient light conditions
WO2018070822A1 (ko) * 2016-10-14 2018-04-19 엘지전자 주식회사 적응적 영상 재생을 위한 데이터 처리 방법 및 장치
US10847073B2 (en) * 2016-10-17 2020-11-24 Huawei Technologies Co., Ltd. Image display optimization method and apparatus
EP3340629A1 (en) 2016-12-21 2018-06-27 Thomson Licensing Method and apparatus for embedding key information in an image
JP6853060B2 (ja) * 2017-02-15 2021-03-31 株式会社日立国際電気 映像信号伝送装置
JP2018011337A (ja) * 2017-09-11 2018-01-18 ソニー株式会社 画像処理装置及び画像処理方法、並びに画像処理システム
EP4220541A1 (en) * 2017-09-13 2023-08-02 Panasonic Intellectual Property Management Co., Ltd. Luminance characteristics generation method
KR102449454B1 (ko) 2017-12-11 2022-10-04 삼성디스플레이 주식회사 계조 확장이 가능한 표시 장치
AU2018271424A1 (en) * 2017-12-13 2019-06-27 Playable Pty Ltd System and Method for Algorithmic Editing of Video Content
US10944950B2 (en) * 2017-12-21 2021-03-09 Texas Instruments Incorporated Transmitting functional safety statistics via transmitted video
WO2020261617A1 (ja) * 2019-06-27 2020-12-30 株式会社ソニー・インタラクティブエンタテインメント 画像処理システム、画像処理用集積回路、および画像処理方法
EP3991427A1 (en) 2019-06-28 2022-05-04 Dolby Laboratories Licensing Corporation Video content type metadata for high dynamic range
CN110536167A (zh) 2019-09-20 2019-12-03 京东方科技集团股份有限公司 视频信号发送方法、视频信号接收方法、装置和显示设备
EP3820144B1 (en) * 2019-11-07 2021-12-29 Axis AB Method for displaying a video stream of a scene
KR20210083840A (ko) * 2019-12-27 2021-07-07 삼성전자주식회사 다이나믹 톤 메타데이터를 포함하는 영상의 편집을 위한 전자 장치 및 그의 동작 방법
JP2023509805A (ja) * 2020-01-06 2023-03-09 ソースピクチャー インコーポレイテッド コンテンツディスプレイに再生デバイスを適応させるシステム及び方法
EP4106318A4 (en) * 2020-03-30 2023-11-22 Sony Group Corporation SIGNAL PROCESSING DEVICE AND SIGNAL PROCESSING METHOD
US11165848B1 (en) * 2020-08-21 2021-11-02 Nvidia Corporation Evaluating qualitative streaming experience using session performance metadata

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040249861A1 (en) 2003-04-04 2004-12-09 Hiromi Hoshino Meta-data display system, meta-data synthesis apparatus, video-signal recording/reproduction apparatus, imaging apparatus and meta-data display method
EP1501316A1 (en) * 2002-04-25 2005-01-26 Sharp Corporation Multimedia information generation method and multimedia information reproduction device
WO2009095732A1 (en) 2008-01-31 2009-08-06 Thomson Licensing Method and system for look data definition and transmission over a high definition multimedia interface

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6188987B1 (en) * 1998-11-17 2001-02-13 Dolby Laboratories Licensing Corporation Providing auxiliary information with frame-based encoded audio information
GB0119569D0 (en) * 2001-08-13 2001-10-03 Radioscape Ltd Data hiding in digital audio broadcasting (DAB)
US7558326B1 (en) 2001-09-12 2009-07-07 Silicon Image, Inc. Method and apparatus for sending auxiliary data on a TMDS-like link
EP3496349B1 (en) 2001-12-24 2021-09-29 Koninklijke Philips N.V. System for video and auxiliary data transmission over a serial link
JP2003229828A (ja) * 2002-02-01 2003-08-15 Matsushita Electric Ind Co Ltd 同期パターン挿入方法および同期パターン除去方法
JP4161773B2 (ja) * 2003-04-04 2008-10-08 ソニー株式会社 映像編集装置，映像編集装置の処理方法
US7369677B2 (en) * 2005-04-26 2008-05-06 Verance Corporation System reactions to the detection of embedded watermarks in a digital host content
US20050086702A1 (en) 2003-10-17 2005-04-21 Cormack Christopher J. Translation of text encoded in video signals
US20050220322A1 (en) * 2004-01-13 2005-10-06 Interdigital Technology Corporation Watermarks/signatures for wireless communications
US20070121939A1 (en) * 2004-01-13 2007-05-31 Interdigital Technology Corporation Watermarks for wireless communications
US7308135B2 (en) * 2004-01-14 2007-12-11 Eastman Kodak Company Constructing extended color gamut digital images from limited color gamut digital images
EP1578140A3 (en) * 2004-03-19 2005-09-28 Thomson Licensing S.A. System and method for color management
US8265378B2 (en) * 2004-04-15 2012-09-11 Dolby Laboratories Licensing Corporation Methods and systems for converting images from low dynamic to high dynamic range
WO2006039357A1 (en) * 2004-09-29 2006-04-13 Technicolor Inc. Method and apparatus for color decision metadata generation
US20060072780A1 (en) * 2004-09-30 2006-04-06 Zarrabizadeh Mohammad H Watermarking scheme for analog video
KR101328547B1 (ko) * 2004-11-01 2013-11-13 테크니컬러, 인크. 향상된 컬러 공간 콘텐츠를 마스터하고 분배하는 방법 및 시스템
US7675509B2 (en) 2005-01-13 2010-03-09 Sony Corporation Methods and apparatus for optical wireless communication
US20060092038A1 (en) 2004-11-03 2006-05-04 Unger Robert A Chameleon button universal remote control with tactile feel
KR100774180B1 (ko) 2005-08-26 2007-11-07 엘지전자 주식회사 디지털 멀티미디어 인터페이스를 가지는 디지털 멀티미디어데이터 송수신장치
US7987160B2 (en) * 2006-01-30 2011-07-26 Microsoft Corporation Status tool to expose metadata read and write queues
US20070257923A1 (en) 2006-03-15 2007-11-08 Colin Whitby-Strevens Methods and apparatus for harmonization of interface profiles
US8363161B2 (en) * 2006-05-26 2013-01-29 Broadcom Corporation Systems, methods, and apparatus for synchronization of audio and video signals
EP1903775B1 (en) * 2006-09-21 2010-06-16 Thomson Licensing Method for conversion of a colour space using separate chromatic and luminance look-up tables
IL179351A0 (en) 2006-11-16 2008-01-20 Nds Ltd System for embedding data
US8386259B2 (en) 2006-12-28 2013-02-26 Intel Corporation Voice interface to NFC applications
US8565337B2 (en) 2007-02-07 2013-10-22 Valens Semiconductor Ltd. Devices for transmitting digital video and data over the same wires
US20080195977A1 (en) * 2007-02-12 2008-08-14 Carroll Robert C Color management system
BRPI0721520B1 (pt) * 2007-04-03 2020-03-31 Interdigital Madison Patent Holdings Métodos e sistemas para correção de cor de telas com diferentes gamas de cores
US20090147985A1 (en) 2007-12-07 2009-06-11 Xuemin Chen METHOD AND SYSTEM FOR secure WATERMARK EMBEDDING AND EXTRACTION DATA FLOW ARCHITECTURE
US8024632B1 (en) * 2008-01-11 2011-09-20 Victor Konrad Method and mechanism for implementation-independent, on-line, end-to-end detection of faults in self-checking queues in digital hardware systems
US8593476B2 (en) * 2008-02-13 2013-11-26 Gary Demos System for accurately and precisely representing image color information
JP2010049224A (ja) 2008-07-25 2010-03-04 Seiko Epson Corp カラーフィルター用インク、カラーフィルター用インクセット、カラーフィルター、画像表示装置、および、電子機器
US20110154426A1 (en) * 2008-08-22 2011-06-23 Ingo Tobias Doser Method and system for content delivery
JP5157774B2 (ja) * 2008-09-17 2013-03-06 株式会社リコー 画像形成装置、画像形成方法およびプログラム
KR101522555B1 (ko) * 2009-02-20 2015-05-26 삼성전자주식회사 워터마크 삽입 기능이 포함된 영상 재생 방법 및 그 장치
WO2010103012A1 (fr) 2009-03-09 2010-09-16 3Dtv Solutions Systeme et procede configures pour la captation d'une pluralite d'images a destination d'une restitution multiscopique a deformation controlee
EP2406943B1 (en) 2009-03-10 2016-06-15 Dolby Laboratories Licensing Corporation Extended dynamic range and extended dimensionality image signal conversion
US8760461B2 (en) * 2009-05-13 2014-06-24 Stmicroelectronics, Inc. Device, system, and method for wide gamut color space support
JP5588022B2 (ja) 2010-02-22 2014-09-10 ドルビー ラボラトリーズ ライセンシング コーポレイション 表示サブシステムにビデオデータを提供する方法、およびシステム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1501316A1 (en) * 2002-04-25 2005-01-26 Sharp Corporation Multimedia information generation method and multimedia information reproduction device
US20040249861A1 (en) 2003-04-04 2004-12-09 Hiromi Hoshino Meta-data display system, meta-data synthesis apparatus, video-signal recording/reproduction apparatus, imaging apparatus and meta-data display method
WO2009095732A1 (en) 2008-01-31 2009-08-06 Thomson Licensing Method and system for look data definition and transmission over a high definition multimedia interface

Also Published As

Publication number Publication date
US20120321273A1 (en) 2012-12-20
WO2011103258A2 (en) 2011-08-25
JP2013527996A (ja) 2013-07-04
CN102893602B (zh) 2016-08-10
JP5577415B2 (ja) 2014-08-20
EP2539895B1 (en) 2014-04-09
US8891934B2 (en) 2014-11-18
EP2539895A2 (en) 2013-01-02
WO2011103258A3 (en) 2011-11-03
KR20120106901A (ko) 2012-09-26
US20150071615A1 (en) 2015-03-12
CN102893602A (zh) 2013-01-23

Similar Documents

Publication Publication Date Title
KR101428504B1 (ko) 비트스트림에 임베딩된 메타데이터를 이용하는 렌더링 제어부를 갖는 비디오 디스플레이
US9226048B2 (en) Video delivery and control by overwriting video data
US10553255B2 (en) System and methods for generating scene stabilized metadata
US10291874B2 (en) Method for generating control information based on characteristic data included in metadata
US9967599B2 (en) Transmitting display management metadata over HDMI
US8718388B2 (en) Video processing with tiered interdependencies of pictures
US11089359B1 (en) Systems and methods for persisting in-band metadata within compressed video files
TWI826400B (zh) 資訊處理裝置、資訊處理方法、記錄媒體、再生裝置、再生方法、及程式
JP2021166363A (ja) 映像再生装置および映像再生方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170726

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180726

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190724

Year of fee payment: 6