TW201431381A - 編碼輔助資料至視訊資料中之裝置及其方法 - Google Patents

編碼輔助資料至視訊資料中之裝置及其方法 Download PDF

Info

Publication number
TW201431381A
TW201431381A TW102144242A TW102144242A TW201431381A TW 201431381 A TW201431381 A TW 201431381A TW 102144242 A TW102144242 A TW 102144242A TW 102144242 A TW102144242 A TW 102144242A TW 201431381 A TW201431381 A TW 201431381A
Authority
TW
Taiwan
Prior art keywords
data
video
auxiliary
encoding
video data
Prior art date
Application number
TW102144242A
Other languages
English (en)
Inventor
William Conrad Altmann
Original Assignee
Silicon Image Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Silicon Image Inc filed Critical Silicon Image Inc
Publication of TW201431381A publication Critical patent/TW201431381A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Systems (AREA)
  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明之實施例通常係針對編碼輔助資料於視訊資料中之裝置及其方法。本裝置之實施例包含：一連接埠，用於連接上述裝置至一第二裝置；以及一發射器，用於傳輸視訊資料與輔助資料至第二裝置；其中上述裝置係編碼輔助資料至視訊資料之一部分，以及傳輸已編碼資料至第二裝置，而輔助資料係編碼至視訊資料部分之未使用位元。

Description

編碼輔助資料至視訊資料中之裝置及其方法
本發明之實施例大體上係有關於資料傳輸的領域，特定而言係有關於編碼輔助資料至視訊資料中之裝置及其方法。
為了傳輸信號(如音視訊資料串流之傳輸)至一裝置，需要傳輸額外的輔助資料，如隱藏式字幕字元資料。於某一實施例中，一傳輸系統(資料源)可傳輸一視訊串流至含有顯示螢幕的接收裝置(接收器)，於其中傳輸裝置亦可被要求提供隱藏式字幕資訊。傳統的系統可利用標準品，如HDMITM(高解析度多媒體介面)與MHLTM(行動高畫質連結)用於資料傳輸。
然而，數位視訊連結{如HDMITM(高解析度多媒體介面)與MHLTM(行動高畫質連結)}無法提供同步化機制以用於將輔助資料(例如：字元字串)從資料源裝置傳送至接收裝置。一般伴隨視訊資料之字元字串係於隱藏式字幕使用。為了隱藏字幕，字幕字串需要與視訊訊框同步化使每一個新的字串僅譯成相關於這些訊框的最終圖案。字幕應不得用於字幕所應用的情景之前或之後。若無同步化機制，則不能保證字幕資訊與相對應的視訊資料一同被顯示。
本發明之實施例通常係針對編碼輔助資料於視訊資料中之裝置及其方法。
於本發明之第一觀點中，本裝置之實施例包含：一連接埠，用於連接上述裝置至一第二裝置；以及一發射器，用於傳輸視訊資料與輔助資料至第二裝置；其中上述裝置係編碼輔助資料至視訊資料之一部分，以及傳輸已編碼資料至第二裝置，而輔助資料係編碼至視訊資料部分之未使用位元。
於本發明之第二觀點中，本裝置之實施例包含：一連接埠，用於連接裝置至一第二裝置；以及一接收器，用於從第二裝置而來之視訊資料與輔助資料的接收；其中上述裝置係辨識編碼於視訊資料之一部分之中的輔助資 料，以及從視訊資料之部分擷取輔助資料，而輔助資料係編碼至視訊資料部分之未使用位元。
於本發明之第三觀點中，本方法之實施例包含：連接一第一裝置至一第二裝置以用於包含從第一裝置至第二裝置之視訊資料的資料傳輸；確定第二裝置用於一輔助資料編碼模式之一能力；從第一裝置傳輸一信號至第二裝置以指示一意圖以改變為輔助資料編碼模式；以及插入輔助資料至視訊資料之一部分未使用空間。
於本發明之第四觀點中，本方法之實施例包含：連接一第一裝置至一第二裝置以用於包含從第一裝置至第二裝置之視訊資料的資料接收；提供一支援旗標指示第一裝置之一能力用於一輔助編碼模式；在第一裝置接收從第二裝置來之一信號以指示第二裝置之一意圖以改變輔助資料編碼模式；以及接收包含已編碼輔助資料之一視訊資料部分，輔助資料係存於未使用於視訊資料部分的位元之中；從視訊資料之部分擷取輔助資料。
100‧‧‧系統
105‧‧‧傳輸裝置
108‧‧‧視訊處理器
110‧‧‧發射器
112‧‧‧輔助資料邏輯
114‧‧‧轉換邏輯
130‧‧‧埠
150‧‧‧連結
155‧‧‧接收裝置
158‧‧‧視訊處理器
160‧‧‧接收器
162‧‧‧輔助資料邏輯
164‧‧‧轉換邏輯
180‧‧‧埠
182‧‧‧支援旗標
186‧‧‧接收裝置的擴充顯示器識別資料(EDID)或能力暫存器
190‧‧‧輔助資料
200‧‧‧色彩空間
300‧‧‧資料訊框
310‧‧‧視訊資料
320‧‧‧垂直遮沒期
325‧‧‧視訊資料線
330‧‧‧第一或多條線
335‧‧‧最後或多條線
400‧‧‧通道
410‧‧‧畫素資料
415‧‧‧位元
420‧‧‧畫素資料
430‧‧‧畫素資料
505‧‧‧資料源裝置係連接至接收裝置
510‧‧‧資料源裝置從接收裝置讀取一旗標以指示於字元編碼模式之操作能力
515‧‧‧接收字元資料以用於傳輸
520‧‧‧一般模式
525‧‧‧傳輸旗標至接收裝置以指示資料源裝置開始字元編碼模式
530‧‧‧需要額外的未使用空間被編碼字元資料
540‧‧‧轉換視訊資料之部分至較低位元計數色彩空間或重新分配視訊資料位元
545‧‧‧插入字元資料至視訊資料部分之未使用空間
550‧‧‧更多的字元資料被傳輸
555‧‧‧傳輸一旗標以從字元編碼模式指示一退出
560‧‧‧一般模式中繼續視訊資料的傳輸
605‧‧‧接收裝置係與資料源裝置連接
610‧‧‧支援旗標以在字元編碼模式中指示操作能力
615‧‧‧於字元編碼模式中接收到一旗標
620‧‧‧一般模式
625‧‧‧轉變至字元編碼模式
630‧‧‧已接收資料在字元編碼部分
640‧‧‧視訊資料係被接收
650‧‧‧混合的資料係被接收，而接收裝置子系統在每一訊框中從上述線擷取字元資料，且保存使用邏輯的字元資料
655‧‧‧視訊資料已從第一型式轉換至第二型式以用於輔助資料編碼至視訊資料中
660‧‧‧已接收之資料未在字元編碼部分內
665‧‧‧供予顯示
670‧‧‧旗標係被接收以指示從字元編碼模式退出
675‧‧‧返回至一般模式
700‧‧‧裝置或系統
702‧‧‧匯流排或互連結構
704‧‧‧處理器
712‧‧‧主記憶體
716‧‧‧唯讀記憶體
718‧‧‧非揮發性記憶體元件
720‧‧‧發射器或接收器
722‧‧‧連接埠
724‧‧‧輸入裝置
726‧‧‧輸出顯示器
730‧‧‧電源裝置
750‧‧‧其他裝置
本發明之實施例係藉由後附圖式中之實例加以說明，而非用以限制本發明。後附圖式中相似之元件符號係指類似之元件。
第一圖係根據一實施例顯示在資料源裝置與接收裝置之間之輔助資料傳輸；第二A圖係根據一實施例顯示在第一色彩空間之畫素資料係被轉換以產生未使用位元以用於輔助資料編碼；第二B圖係根據一實施例顯示於第二色彩空間之色彩資料包含用於輔助資料編碼之未使用位元；第三圖係根據一實施例顯示在視訊訊框之視訊資料中的輔助資料編碼；第四圖係根據一實施例顯示在畫素資料的未使用空間中之輔助資料編碼；第五圖係顯示於視訊資料中用於傳輸之編碼輔助資料之一方法實施例的流程圖；第六圖係顯示用於從視訊資料擷取輔助資料之一方法實施例的流程圖；第七圖係顯示一裝置或系統，其用於傳輸或接收編碼於視訊資料中的輔助資料。
本發明實施例通常係針對編碼輔助資料至視訊資料中。
於某些實施例中，一方法、裝置或系統提供編碼輔助資料至視訊資料中，上述輔助資料係編碼於在視訊資料之一部分的未使用空間中。在某些實施例中，輔助資料包含字元資料，於其中字元資料係為由字母、數字和其他符號所組成的本文資料。在某些實施例中，資料係置於現有的未使用空間以用於畫素資料。於某些實施例中，視訊資料之一部分係從原始色彩空間被轉換至一需要更少資料位元之色彩空間以提供額外的未使用空間，輔助資料則被編碼於視訊資料部分的未使用空間。在某些實施例中，視訊資料之部分係被轉換回原始的空間以用於顯示。在某些實施例中，視訊資料之一部分的修改係藉由使用於畫素資料編碼之一或多個資料位元的重新分配。
一個封包或一個控制通道(channel)可被利用於傳送特定輔助資料，如從資料源裝置至接收裝置之隱藏式字幕資料。然而，在一個封包中，HDMI(高解析度多媒體介面)與MHL(行動高畫質連結)之封包不具單獨攜帶完整字幕之能力。因此需要資料源裝置用以分離字幕至多個部分，而這些部分於接收裝置再重新組合。另外，用於字元資料之封包使用將更多的封包加至於空白時間，增加可用頻寬的擁擠，特別於特定的視訊模式。
由HDMI(高解析度多媒體介面)與MHL(行動高畫質連結)所提供之控制通道無法提供用於輔助資料(例如：字元字串)之機制，而因此當隨著封包，字元字串需要以多個片段被傳送與接收。進一步而言，在HDMITM(高解析度多媒體介面)與MHLTM(行動高畫質連結)之控制通道不會與視訊訊框同步化。
於某些實施例中，一個裝置、系統或方法在視訊資料之未使用空間中包含輔助資料之傳輸，於其中輔助資料可包含字元資料。於一些實施例中，數位資料藉由利用於特定視訊色彩空間之未使用的二元位置於視訊連結上通過匯流排傳輸。在一實施例中，YCbCr為色彩空間，於其中Y=亮度或強度；Cb=藍色度，其在藍黃軸上源自於灰色的色差；而Cr=紅色度，其在紅綠軸上源自於灰色的色差，於其中YCbCr 4：2：2與YCbCr 4：4：4係藉由用於畫素資料之每一成分的採樣率所區分。在某一實施例中，當傳送YCbCr 4：4：4資料，則每一畫素時間沒有未使用位元。然而，當傳送YCbCr 4：2：2資料，每一畫素時間則依據色彩解析度可有4或8個未使用位元。在某些實施例中，於這視訊色彩空間之未使用的二元位置係被利用於輔助資料之編碼。於某些實施例中，視訊資料係從第 一色彩空間轉換至第二色彩空間以產生未使用空間以用於插入輔助資料。
於某些實施例中，畫素資料之一或多個位元可被輔助資料所取代。例如，於一實施例中沒有未使用的位元，而一定數量之位元(如每個像素之一位元)係重新分配至輔助資料。在一實施例中，一色度位元(Cb或Cr)可被分配至輔助資料，因為此減少大體上對於觀眾而言比起亮度(Y)改變而言為不明顯。在其他實施例中，在RGB色彩空間中的紅色、綠色與藍色位元可被分配至輔助資料。
於某些實施例中，在視訊資料中插入上述的輔助資料包含對整個視訊影像之一小部分的影像品質降格，以產生額外的未使用空間以用於輔助資料之插入。在某些實施例中，輔助資料係插入於視訊資料線中，於其中上述視訊資料線可為提供減少視覺中斷之視訊資料線，如在視訊影像邊緣的線。在一實施例中，上述的輔助資料可被編碼在視訊影像頂端之第一資料線中，或在視訊影像底端之最後資料線中。
於某些實施例中，上述影像品質降格包含操作資料源裝置以將視訊資料從第一(原始的)色彩空間轉換至第二(已轉換的)色彩空間以用於傳輸，其中已轉換的色彩空間需較少的資料位元。換言之，第一色彩空間可稱為一較高位元計數色彩空間，而第二色彩空間可稱為一較低位元計數色彩空間。在某些實施例中，操作接收裝置以將視訊資料從已轉換的色彩空間轉換回原始的色彩空間以用於顯示。在一實施例中，YCbCr 4：4：4可為一原始的色彩空間。為了提供額外的空間用於輔助資料(如字元資料)之編碼，上述視訊資料之一小部分係轉換至YCbCr 4：2：2以用於傳輸，其中在視訊資料之部分內的未使用資料空間係使用於傳輸與視訊影像相關之字元資料。在某些實施例中，於視訊資料接收時，接收裝置擷取輔助資料且轉換上述資料回YCbCr 4：4：4，其中此轉換在影像品質中將導致某些降格。
於某些實施例中，一裝置、系統或方法因此利用可用的畫素頻寬與觀眾的感知極限，以減少在每一訊框之一資料線中所需要用於畫素資料之資料頻寬與安排可用於傳輸輔助資料之頻寬。在某些實施例中，視訊資料頻寬係因此被“借用”以利於傳輸輔助資料之目的。於某些實施例中，在連結的接收端擷取輔助資料後，上述“借用”的頻寬則回復於視訊資料中。
第一圖係根據一實施例顯示在資料源裝置與接收裝置之間的輔 助資料傳輸。在此說明中，一傳輸裝置105於一系統100中可稱為一資料源裝置，其係透過一連結150與一接收裝置155相耦合，而接收裝置則可稱為目的裝置(若資料係藉由裝置使用)或轉發器(若資料係傳輸至另一裝置)，於其中上述之連結可包含一電纜，如HDMITM(高解析度多媒體介面)與MHLTM(行動高畫質連結)電纜。資料源裝置105包含一發射器110(或發射器子系統)與一連接器或其他埠130以用於上述連結150之第一端，而資料源裝置包含一接收器160(或接收器子系統)與一連接器或其他埠180以用於上述連結150之第二端。接收裝置155可進一步包含一顯示螢幕160或與其相耦合。在此說明中，資料源裝置105進一步包含一視訊處理器108(上游視訊處理器)，而接收裝置155則包含一視訊處理器158(下游視訊處理器)。在某些實施例中，發射器進一步包含一輔助資料邏輯112與轉換邏輯114，而輔助資料邏輯用於將輔助資料編碼至視訊資料中，轉換邏輯則用於將資料從第一型式轉換至第二型式以產生未使用之空間，如藉由將一視訊資料部分從第一色彩空間轉換至第二色彩空間或藉由重新分配上述視訊資料之一或多個位元至輔助資料。於某些實施例中，接收器160包含一輔助資料邏輯162與一轉換邏輯164，而輔助資料邏輯用於從視訊資料擷取輔助資料，轉換邏輯則用於將視訊資料從第二型式轉換回第一型式，如藉由將視訊資料從第二色彩空間轉換至第一色彩空間或藉由將用於輔助資料之重新分配的一或多個位元分配回視訊資料。
資料源裝置105係透過連結150傳輸資料串流至接收裝置155。在某些實施例中，資料源裝置係透過連結150傳輸視訊資料。於某些實施例中，資料源裝置105決定接收裝置155是否支援輔助資料編碼功能，其中決定接收裝置是否支援輔助資料編碼功能則包含資料源裝置讀取接收裝置的支援旗標182或接收裝置之其他資訊，在此配置資料中，其中支援旗標可被包含於接收裝置的擴充顯示器識別資料(EDID)或能力暫存器(capability registers)186或接收裝置其他的相似資料內。在某些實施例中，決定接收裝置是否支援輔助資料編碼功能則包含資料源裝置105接收從接收裝置而來之訊息、在訊息中接收裝置所傳輸的支援旗標、訊息廣告或者其他指示接收裝置支援輔助資料編碼功能，於其中支援旗標可被包含於控制封包或其他從接收裝置155傳輸到資料源裝置105的資料內。在某些實施例中，資料源裝置105傳輸一個意圖旗標至接收裝置155以指示開始輔助資料編碼模式之意圖，於其中意圖旗標可被包含於控制封包或 其他從資料源裝置傳輸到接收裝置的資料內。在一實施例中，旗標可在傳輸至每一訊框資料之前傳輸至資訊框(InfoFrame)中，而上述的旗標指示訊框是否編碼資料，或者旗標可在資料島中被傳送至分離的封包。
雖然在此明確地描述視訊訊框的單線編碼包含輔助資料，而實施例並不受限於本特定實施例。在某些實施例中，輔助資料係與視訊資料之訊框相關，而編碼將輔助資料與相關的視訊資料同步化。例如，輔助資料可為隱藏式字幕資料，而藉由視訊資料提供字幕以用於視訊影像。在此實施例中，資料源105利用視訊資料的空白空間以編碼隱藏式字幕資料。在某些實施例中，資料源裝置修改原始之視訊資料訊框線的色彩空間編碼以轉換資料線至使用第二且已轉換色彩空間的資料，其中已轉換的色彩空間需要更少的資料位元，或者重新分配一或多個視訊資料位元以產生空間用於隱藏式字幕資料之編碼，於其中上述之資料因此將與適當的視訊資料同步化。在某些實施例中，視訊資料之轉換可於利用轉換邏輯114的發射器中發生，而視訊轉換回原始的型式可發生於可利用轉換邏輯164的接收裝置中。
第二(A)圖係根據一實施例顯示畫素資料在第一色彩空間中係被轉換以產生未使用位元以用於輔助資料編碼，而第二(B)圖係根據一實施例顯示畫素資料在第二色彩空間包含未使用位元以用於輔助資料編碼。在這些實施例中，第二(A)圖提供畫素資料於YCbCr 4：4：4色彩空間中，而第二(B)圖則提供畫素資料於YCbCr 4：2：2色彩空間中，亦提供4位元之未使用空間。
如第二(A)圖所示，在YCbCr 4：4：4中，畫素資料將被編碼為8個位元以用於每一Y、Cb與Cr元件。因此每一顯示的最小化差分信號傳輸(TMDS)通道需要8個位元資料，然後則無未使用位元。
相比之下，在YCbCr 4：2：2中，畫素資料將可提供多達8個未使用位元之未使用空間。在此格式中，編碼將包含Y元件以及Cb或Cr其中之一的元件。用於12位元色彩，此需要24位元且無未使用空間。然而，用於10位元色彩，則有4位元之未使用空間；而用於8位元色彩，則有8位元之未使用空間。
第三圖係依據一實施例於視訊訊框之視訊資料中顯示輔助資料之編碼。在某些實施例中，一裝置、系統或方法在視訊訊框之資料中提供用於輔助資料編碼，於其中輔助資料被編碼於一定程度上減少對於觀眾所顯示資料 的清晰度。
在第三圖中，資料訊框300包含現用視訊資料310(現用視訊資料的480個線於此特定實施例中)，以及在現用視訊資料週期之間的垂直遮沒期320與在視訊資料線325之間的水平遮沒期(每一線包含720現用畫素)。大量特定的線與畫素則取決於視訊影像的類型與解析度。在某些實施例中，為了同步化輔助資料(如字元資料)至視訊資料325，輔助資料則被編碼於視訊資料之中。在某些實施例中，輔助資料之編碼係藉由修改視訊資料310之一部分的色彩空間以產生用於輔助資料之編碼之未使用位元。
在某些實施例中，因為使用於編碼輔助資料之視訊資料部分之色彩空間的修改導致某些視訊資料之降格，視訊資料之部分係被選擇以減少視覺衝擊。在某些實施例中，視訊資料之部分係被選擇於視訊資料之起始或結束端(或兩者)使影像顯示僅在如影像的頂端或底端(或兩者)受到影響。於此說明中，利用於輔助資料編碼之視訊資料部分可為視訊資料310之第一或多條線330或視訊資料之最後或多條線335，使得最終影像受影響的部分僅在影像的頂端、底端或兩者。在某些實施例中，上述之部分亦可被編碼於影像的右邊或左邊邊緣，其帶有的字元資料係被編碼於視訊資料之多條線中。然而，實施例係限制於視訊影像之特定部分。
於某些實施例中，因為當傳送新的輔助資料時僅需要轉換色彩空間或重新分配位元，影像品質則因為輔助資料之編碼而短暫降低。當慣用系統需要多個訊框時，輔助資料(如隱藏式字幕)伴隨視訊資料之高頻寬可被傳送至一單一訊框。因此，於一實施例中，每秒色彩空間轉換僅可中斷單一訊框，其對於觀眾而言則可能感覺不到改變。
第四圖係根據一實施例顯示於畫素資料之未使用空間中的輔助資料之編碼。在此圖式中，資料可被編碼在三個邏輯資料子通道中，如編碼於HDMITM(高解析度多媒體介面)與MHLTM(行動高畫質連結)格式中。例如，畫素資料在子通道0,1與2中係分別為元件410、420、430。在某些實施例中，輔助資料之編碼利用在畫素資料中的未使用位元。如圖所示，畫素資料在第一型式中，例如YCbCr，，提供一特定大量未使用位元，其如圖所示之位元415。然而，可能沒有未使用位元或未使用位元的數量不足。在某一實施例中，發射器係將畫素資料從一第一型式轉換至第二型式，如將在第一色彩空間之畫素資料轉換 至第二色彩空間之畫素資料，於其中第二色彩空間提供額外的未使用畫素，或例如重新分配一或多個位元至輔助資料。例如，第二色彩空間可為YCbCr 4：2：2，其中每一畫素時間最多提供八個未使用位元，以佔據三個子通道的其中之一，從而在第四圖中擴展未使用位元415以包圍子通道0。在某些實施例中，大量擴展的未使用位元係利用於輔助資料之編碼。於某些實施例中，接收器係從位元415移除輔助資料，以及將資料轉換回原始型式，因此產生的資料在品質上帶有一些降格而可相容用於顯示。
第五圖係一流程圖顯示一在視訊資料中用於編碼輔助資料之傳輸的方法實施例。在某些實施例中，資料源裝置係連接至接收裝置505以為了從資料源裝置傳輸視訊和其他資料至接收裝置之目的。於某些實施例中，資料源裝置從接收裝置讀取一旗標，而上述的旗標指示接收裝置可支援一用於輔助資料傳輸之模式，如字元編碼模式510。在某些實施例中，資料源裝置利用軟體或軔體可傳輸字元資料至發射器。若發射器515無法接收字元資料以用於傳輸515，發射器將在一般模式520操作用以將視訊和其他資料傳輸至接收裝置。若發射器可接收字元資料以用於傳輸515，發射器係傳輸旗標至接收裝置以指示資料源裝置開始字元編碼模式525。
於某些實施例中，傳輸子系統編碼字元資料至一現用視訊訊框，其中上述編碼利用視訊資料之一部分，如現用視訊訊框之一線。在某些實施例中，若需要額外的未使用空間被編碼字元資料530，則視訊資料之部分係轉換至較低位元計數色彩空間，或者一特定數量位元視訊資料再分配至輔助資料。例如，在視訊線中輸入至發射器子系統的每一畫素可在較高位元計數色彩空間(例如：YCbCr 4：4：4模式)或在較低位元計數色彩空間(例如：YCbCr 4：2：2模式)。若視訊資料在較高位元計數色彩空間，因此輸入的畫素在此實施例中係在YCbCr 4：4：4模式，而發射器子系統使用邏輯電路以轉換視訊資料之部分至較低位元計數色彩計數模式540，如轉換畫素色彩資料至YCbCr 4：2：2。在一實施例中，畫素視訊資料在YCbCr 4：2：2模式所提供的8位元色彩在高解析度多媒體介面(HDMI)與行動高畫質連結(MHL)編碼串流僅可佔據3個邏輯子通道之其中2個，且在每一畫素僅使用24個可用資料位元中的16個。在某些實施例中，上述的發射器子系統係插入字元資料至視訊資料部分的未使用空間，例如使用邏輯子通道之剩餘8個未使用資料位元，而字元資料之一位元組係被寫入第三邏輯子通道。 於某些實施例中，上述保存一畫素資料和字元資料之一位元組的三個邏輯子通道，係根據一般高解析度多媒體介面(HDMI)與行動高畫質連結(MHL)步驟被編碼至最小化差分信號傳輸(TMDS)字元。
在某些實施例中，若有更多的字元資料被傳輸550，字元資料之編碼則可繼續。若不能被傳輸，於某些實施例中，發射器傳輸一旗標以從字元編碼模式指示一退出555。在其他實施例中，如當資料源裝置與接收裝置在視訊訊框中的字元資料編碼之後自動退出字元編碼模式，則不需要以旗標從字元編碼模式555指示退出。在某些實施例中，發射器退出字元編碼模式，且在一般模式中繼續視訊資料的傳輸560。
第六圖係一流程圖顯示從視訊資料擷取輔助資料之方法實施例。在某些實施例中，接收裝置係與資料源裝置連接605，如通過纜線連接兩裝置。在某些實施例中，接收裝置可包含一支援旗標以在字元編碼模式中指示操作能力610。於某些實施例中，若接收裝置未從資料源裝置於字元編碼模式中接收到一旗標615以指示一操作意圖，則接收裝置在一般模式620操作用於視訊資料之接收。於接收旗標以指示字元編碼模式615時，接收裝置轉變至字元編碼模式625。
在某些實施例中，字元編碼模式指示字元資料係位於視訊資料之特定部分中，如視訊訊框之第一或最後一線。接收裝置接收視訊串流，其包含在視訊訊框之一部分的字元資料。於某些實施例中，接收子系統根據模式旗標辨認在視訊訊框單線中的已修改資料。若已接收之資料未在字元編碼部分內(資料在視訊訊框之其他線中)660，則視訊資料係被接收640並供予顯示665。如已接收資料在字元編碼部分630內，則混合的資料係被接收，而接收裝置子系統在每一訊框中從上述線擷取字元資料，且保存使用邏輯的字元資料650。例如，接收子系統在每一畫素時間的現用線去編碼最小化差分信號傳輸(TMDS)字元至一個24位元值。上述24位元值之其中16位元係解譯為一YCbCr 4：2：2畫素資料值，而24位元值之其中8位元係解譯為字元資料之一位元組。
若視訊資料已從第一型式轉換至第二型式以用於輔助資料編碼至視訊資料中655，則視訊資料係轉換回第一型式，例如藉由將視訊從較低的位元計數色彩空間轉換至較高的位元計數色彩空間，或者藉由分配一或多個位元回到視訊資料。於某些實施例中，若視訊串流係在YCbCr 4：2：2模式(如所示之 AVI InfoFrame)被傳送且第三子通道包含輔助資料，則第三子通道被空白為零值，而24位元值作為一般YCbCr 4：2：2資料以被向前傳送至接收裝置之視訊處理器。然而，若視訊串流以YCbCr 4：4：4模式(如所示之AVI InfoFrame)傳送，則接收子系統的邏輯透過色彩空間轉換器將16位元之YCbCr 4：2：2值處理回至24位元之YCbCr 4：4：4值。此值係被向前傳送作為一般YCbCr 4：4：4串流之部分以用於視訊顯示665。
在某些實施例中，若額外的旗標係被接收以指示從字元編碼模式退出670，接收裝置可返回至一般模式675。然而，額外的旗標並非於所有實施例都有需要，且接收裝置可自動返回至一般模式。
在某些實施例中，每當擷取的字元資料改變，接收裝置傳送旗標至接收裝置之主視訊系統。而在相同視訊訊框中，8位元字元資料係從前面和隨後的畫素時間與字元資料相結合以創造完整的字元字串。若此字串所帶有的值不同於前面視訊訊框的字元字串值，則信號被傳送至接收裝置之處理器(例如：中斷信號)。每當資料改變，接收裝置之主視訊系統讀取從接收裝置之邏輯而來的字元資料，且合併上述資料至已繪製的畫面，或者處理字元資料。
注意到已編碼的字元字串或其他輔助資料可藉由其他資料補充，如標頭位元、字元空間旗標(如用以區分7位元美國資訊交換標準碼(ASCII)與較大統一碼(Unicode)編碼)、錯誤偵測與改正位元(用以在已編碼的字串防止單一或多個位元錯誤)、串流索引值(在一個視訊串流中提供多重類型的字串)以及其他此種資料。
在未使用空間中，攜帶於視訊線所攜帶之資料進一步可被格式化於任何不同的方式。例如，隨著合適的標頭位元於資料線之上，後來位元組之格式將被接收器所認識。而隨著資料錯誤與改正機制，則進一步確保資料完整。
在某些實施例中，附加的資料不需要於視訊的每一視訊訊框之上被傳輸。在一個訊框中傳送資料後，若在發射器上的資料未改變，則一般視訊畫素資料可於下一個訊框重新取得。若在發射器中係藉由一個訊框時間傳輸，則接收裝置可控制此上述資料，使旗標可加在一個訊框端以指示下一個訊框是否具有已編碼資料而非畫素資料。
在一替代實施例中，旗標在每一訊框資料之前的InfoFrame中可指示是否訊框已編碼資料，或者旗標可在資料島的分離封包中。於某些實施例 中，旗標的間歇傳輸以指示字元資料編碼可被利用於透過一個連結促進編碼資料與YCbCr 4：2：2畫素資料同時進行，即使主要視訊資料的串流於RGB或YCbCr中的每一畫素為24位元。當資料被傳輸通過，視訊線的畫素資料可使用色彩空間轉換器轉換至YCbCr 4：2：2之8位元(或10位元)，然後當資料傳輸完成，則色彩空間可回復。
於某些實施例中，在接收裝置中的下游視訊處理器係於實施例中未察覺到上述之轉換過程，於其中輔助資料和資料轉換之處置係自視訊處理器分離，例如，接收裝置於連接埠處理器中完成處置。相同地，在某些實施例中，上游視訊處理器於資料源裝置內於實施例中未察覺到轉換過程，於其中輔助資料和資料轉換之處置係自視訊處理器分離，例如於資料源裝置中的發射器處理轉換過程，而且接受從視訊和音訊串流分離的輸入資料位元組。
在一裝置或系統之實施例中，在一個訊框線(如第一或最後一線)中的畫素資料修改將不會影響全部的CEA-861-相容性時序，而因此對所有HDMITM(高解析度多媒體介面)相容性沒有影響，且不影響HDMITM(高解析度多媒體介面)中繼器，其不改變資料傳送。除資料源裝置通知接收裝置之機制的使用外，無須額外封包。
在某些實施例中，資料源裝置可插入輔助資料至視訊串流而不需要通知接收裝置。若接收裝置可在視訊線中辨識字元資料(如在擴充顯示器識別資料(EDID)或能力暫存器所示之支援旗標)，則接收裝置藉著在字元線之簽章或其他相關方式可操作用於準備於辨識資料。於某些實施例中，當在接收裝置之組態發現支援旗標時，資料源裝置可立即開始傳送字元資料。在某些實施例中，連接埠處理器或其他接收器子系統可偵測輸入的輔助資料(例如於YCbCr 4：2：2資料中)，而經由取代與原來的(如在YCbCr 4：4：4模式中)畫素資料相近的畫素資料以轉換視訊資料，其中在視訊資料中可導致某些降格。在一些實施例中，接收器子系統隨後傳送畫素串流至下游視訊處理器，而其未察覺在資料源裝置與接收裝置之間的串流中已有輔助資料。
於一替代實施例中，而不是在色彩空間之間轉換資料或重新配置位元，而透過單線緩衝之使用，當接收器子系統擷取字元字串時，可在訊框中從倒數第二線儲存畫素資料，以及在訊框之最後一線中重複畫素資料。這可被觀眾察覺的重複線方式不同於轉換YCbCr 4：4：4至YCbCr 4：2：2，且隨後回復到 YCbCr 4：4：4，或藉由重新配置位元回到視訊資料之途徑。
在一發射器之實施例中，藉由將資料之一個位元組作為字元資料插入於接收裝置上之每一畫素時間，而獲得的頻寬可遠超過於從控制匯流排得到之頻寬。進一步而言，因為在已編碼資料和一般的YCbCr 4：2：2視訊資料之間沒有衝突，所以在如此操作中不需要調控控制匯流排之使用。
進一步而言，當已編碼資料係與視訊資料訊框同步化，而操作中的延遲係降到最低。藉由微控制器輸入資料至發射器的佇列中以及從接收器的佇列取出資料會造成延遲，但連結本身則保證為低延遲。
表一與表二顯示在特定視訊模式之實施例中可用的頻寬。
相比之下，EIA-608定義一字元空間可在兩個位元組中傳送兩個字元，但僅每秒提供960個位元。此每秒解譯120個位元組。利用YCbCr傳送之一實施例可處置此負載之100倍資料。
字元資料可被編碼為7位元美國資訊交換標準碼、8位元美國資訊交換標準碼(統一空間的部分)或單個至多個位元組之統一字元。此提供世界語 言之支援，以及在資料源裝置上係可藉由被使用者所選擇或從接收裝置預選選項單語言可被回讀。
輔助資料可包含字元編碼，其可利用於正文之疊加或其他呈現於視訊影像上。多用途可包含在螢幕上的正文訊息呈現。於一實施例中，使用者正文字串可從資料源裝置傳送至接收裝置，如下所示：
(1)電話在第一輸入連接埠連接電視，而使用者於電視的第二輸入連接埠看到內容。
(2)電話接收到正文式訊息(或一通電話)，以及傳輸正文式訊息(或來電顯示訊息)至電視，其中資料被轉換至YCbCr 4：2：2模態連結，上述的連結係維持於一連接狀態以支援高頻寬數位內容保護(High-bandwidth Digital Content Protection，HDCP)與將連接埠切換時間最小化。
(3)電視辨認字元資料以及(若藉由使用者為此目的設置於電視端與電話端)具有螢幕顯示產生器之電視顯示訊息於螢幕上。在某些實施例中，螢幕顯示(OSD)功能係於連接埠處理器執行，而完全不影響下游應用處理器。
於某些實施例中，輔助資料編碼包含用於視訊之隱藏式字幕。用於隱藏式字幕之正文字元在視訊資料串流中傳送，與視訊訊框同步化，以及不影響控制匯流排。在某些實施例中，連接埠處理器解譯輸入的正文且將其格式化為螢幕顯示訊息或者傳給下游的應用處理器。
智慧型外接傳輸器(dongle)或智慧型連接埠處理器可具有內崁的韌體。可從資料源穿過連結傳送更新至此韌體，且在YCbCr空間中使用上述之資料。
在某些實施例中，在外接傳輸器或連接埠處理器之色彩解譯表格隨著資料透過連結傳送，可與新的乘法器碼或查詢表被更新，以支援新的色彩空間。在某些實施例中，每當連接特定資料源或每當特定應用程式之使用欲以特定格式輸出視訊，這些資料重新設置色彩空間轉換器。
在某些實施例中，低速音訊利用YCbCr資料空間可被編碼至視訊資料以用於傳輸。在某些實施例中，伴隨著視訊串流，音訊資料與音訊同時運行(例如：聲音跟隨電影)，而不依賴主要連結的音訊採樣率或格式化。電話音訊為本使用之實施例-甚至一來電鈴聲-於一般音訊運轉時經由連結傳送。當一般音訊藉由接收裝置可被降低音訊時，此來電鈴聲可發出聲音。(說明：當接收 裝置辨認通過資料源裝置的YCbCr所傳送的音訊，接收裝置可降低從不同資料源裝置來的音訊。)
在某些實施例中，接收裝置可藉由點亮LED、燈炮以指示使用者音訊抵達而非音訊輸出。
資料源裝置可週期性地傳送特定資料字串作為輔助資料以確認接收裝置的信號完整性。資料值可被選擇以創造最佳的測量表現，例如最易出錯的已編碼值。在某些實施例中，連結完整的資料於每秒視訊可不需佔據完整線或每一線。其他使用者資料可伴隨連結完整性資料被攜帶。
在某些實施例中，資料源裝置可發給接收裝置關於資料源能力之細節的信號，且在YCbCr畫素值使用資料。一實施例係為“智慧型電纜“，其以組態資料取代原始的YCbCr零值，且傳遞參數(例如：纜線長度、纜線最大頻寬等等)至接收裝置。
第七圖係顯示一用於傳輸或接收編碼於視訊資料中之輔助資料之裝置或系統。在某些實施例中，上述裝置或系統提供在視訊資料之未使用空間中的輔助資料編碼以及已編碼資料之傳輸，或者上述裝置或系統提供用於從視訊資料接收與擷取視訊資料。
於某些實施例中，一種裝置或系統700(大體上於此稱為裝置)包含一互連(interconnect)結構或跨線(crossbar)結構702或其他用以傳送資料之通訊手段。裝置700可包含一處理手段例如一個或以上之處理器704，其與互連結構702耦合以用於處理資訊。處理器704可包含一個或以上之實體處理器與一個或以上之邏輯處理器。互連結構702係顯示為單一互連結構，以用於簡化，但可代表多個不同之互連結構或匯流排，且至此樣互連結構之元件連結可加以改變。第七圖所示之互連結構702係代表由適當之橋接器(bridges)、配接器(adapter)或控制器所連接之任何一個或以上之獨立實體匯流排、點對點連結或兩者之抽象化。
於某些實施例中，裝置700更包含隨機存取記憶體(random access memory，RAM)或其他動態儲存裝置或元件以作為主記憶體712，用以儲存資訊及欲由處理器704執行之指令。於某些實施例中，主記憶體可包含主動(active)儲存應用程式，其包含藉由使用者裝置700使用於網路瀏覽活動之瀏覽器應用程式。於某些實施例中，裝置之記憶體可包含某些暫存器或其他特定目的之記 憶體。
裝置700亦可包含唯讀記憶體(read only memory，ROM)716或其他靜態儲存裝置，用以儲存靜態資訊及用於處理器704之指令。裝置700可包含一個或以上之非揮發性記憶體元件(non-volatile memory elements)718用以儲存某些元件，其包含例如快閃記憶體及硬碟或固定硬碟。
一個或以上之發射器或接收器720可耦合至互連結構702。在某些實施例中，發射器或接收器720可包含可一個或以上之連接埠722，用以連接如上述之說明的其他裝置750。
裝置700亦可透過互連結構702耦合至輸出顯示器726。於某些實施例中，顯示器726可包含液晶顯示器(LCD，liquid crystal display)或任何其他顯示技術，用以顯示資訊或內容給使用者，包含3D立體顯示(three-dimensional(3D)displays)。於某些狀況中，顯示器726可包含觸控螢幕，其亦用作為至少一部分之輸入裝置。於某些狀況中，顯示器726可為或可包含音訊裝置，例如揚聲器，用以提供音訊資訊。在某些實施例中，裝置700包含輔助資料邏輯724，於其中輔助資料邏輯提供輔助資料傳輸與接收的處理，而如此的資料處理包含編碼輔助資料於視訊資料中以用於傳輸或擷取從已接收資料而來的輔助資料。
裝置700亦可包含一電源裝置或設備730，其可包含電源供應器、電池、太陽能電池、燃料電池或其他用以提供或產生電力之系統或裝置。電源裝置或系統730所提供之電力可依需求分配至裝置700之元件。
為說明本發明上述敘述提出了若干特定細節，以利於徹底瞭解本發明。然而，將得以領會者為，對本領域中具通常知識之技藝者而言，本發明可在不需要其中的某些特定細節之下實施。於其他實例中，已知的結構及裝置係以方塊圖的形式顯示。圖中所示之元件之間可能有中間結構。此處所述或所顯示之元件可能具有額外的輸入或輸出並未加以顯示或敘述。所顯示之元件或零件亦可以不同之配置方式或順序加以配置，包含任何欄位之重新排序或欄位大小之修改。
本發明可包含不同的方法。本發明之方法可藉由硬體元件加以實施或可具體實施於電腦可讀指令中，其可用以使一般用途或特定用途之處理器或編程有指令之邏輯電路實施本方法。另則，本方法可藉由硬體與軟體的結合加以實施。
部分之本發明可提供為電腦程式產品，上述電腦程式產品可包含電腦可讀非暫態儲存媒體(computer-readable non-transitory storage medium)，其具有電腦程式指令儲存於其上，其可用以編程一電腦(或其他電子裝置)以實施根據本發明之方法。電腦可讀儲存媒體可包含但不限於軟碟、光碟、唯讀光碟(compact disk read-only memory，CD-ROMs)及磁性光碟(magneto-optical disks)、唯讀記憶體(ROM)、隨機存取記憶體(RAM)、可抹除可編程唯讀記憶體(erasable programmable read-only memory，EPROMs)、可電性式抹除可編程唯讀記憶體(electrically-erasable programmable read-only memory，EEPROMs)、磁性或光學性卡片、快閃記憶體或其他類型之適於儲存電子指令之媒體/電腦可讀媒體。此外，本發明亦可下載為電腦程式產品，其中程式可從遠端電腦傳送至進行要求之電腦。
本發明之方法中的若干者係以其最基礎的形式加以敘述，但在不脫離本發明之基礎範圍下仍可加入若干方法至其任一者或從其任一者刪除若干方法，且可增加若干資訊至此處所述訊息之任一者中或從其刪減若干資訊。此領域中具通常知識之技藝者將得以領會，可對本發明進一步做若干更動及改變。此處所提供之特定實施例並非用以限制本發明，而係用以說明本發明。
若敘述了「A」元件耦合至「B」元件或與其耦合，則A元件可直接耦合至B元件或透過例如C元件非直接耦合。當說明書敘述了A元件、特徵、結構、方法或特性「造成」B元件、特徵、結構、方法或特性，其係指「A」為「B」的至少一部分原因，但亦可能有至少一其他元件、特徵、結構、方法或特性協助造成「B」。若說明書指出一元件、特徵、結構、方法或特性「得」、「可能」或「可」被包含，則特定元件、特徵、結構、方法或特性並不要求一定要被包含。若說明書指「一」元件，則其並不意指僅有一個所述元件。
本發明之實施例係為本發明之實作或實例。說明書中所提到之「一實施例」、「某些實施例」或「其他實施例」係指與實施例有關而敘述之特定特徵、結構或特性被包含於至少某些實施例中，但不一定是所有實施例。「一實施例」或「某些實施例」之若干次出現並不一定全部指向相同之實施例。應領會者為，於上述本發明之示範性實施例的敘述中，為簡化揭露內容並有助於瞭解若干進步之觀點中之一者或以上者，本發明之若干特徵有時會聚集於單一實施例、圖式或其敘述中。
在某些實施例中，一種編碼輔助資料至視訊資料中之裝置，包含：一連接埠，用於連接裝置至一第二裝置；以及一發射器，用於傳輸視訊資料與輔助資料至第二裝置；其中編碼輔助資料至視訊資料中之裝置係編碼輔助資料至視訊資料之一部分，以及傳輸已編碼資料至第二裝置，輔助資料係編碼至視訊資料部分之未使用位元。
於某些實施例中，輔助資料為字元資料。於某些實施例中，視訊資料之部分係一視訊訊框之一或多條線。在某些實施例中，視訊資料之部分係為視訊訊框之一第一線或一最後一線。
在某些實施例中，發射器包含一邏輯以編碼輔助資料至視訊之部分之中。
在某些實施例中，發射器包含一轉換邏輯以將視訊之部分從一第一型式轉換為一第二型式。
在某些實施例中，其中其中轉換邏輯將視訊部分從一第一色彩空間轉換為一第二色彩空間之前，編碼輔助資料至視訊之部分、第二色彩空間相較於第一色彩空間，需較少位元。在某些實施例中，第一色彩空間為YCbCr 4：4：4，而第二色彩空間為YCbCr 4：2：2。
在某些實施例中，轉換邏輯係藉由一或多個位元減少許多用於編碼視訊資料之部分之字元，以產生一或多個位元以用於輔助資料之編碼。於某些實施例中，視訊資料之部分之一色彩空間包含一亮度部分與一色度部分，而其中一或多個位元係包含於色度部分之中。
在某些實施例中，一種編碼輔助資料至視訊資料中之裝置，包含：一連接埠，用於連接裝置至一第二裝置；以及一接收器，用於從第二裝置而來之視訊資料與輔助資料的接收；於某些實施例中，裝置係辨識編碼於視訊資料之一部分之中的輔助資料，以及從視訊資料之部分擷取輔助資料，而輔助資料係編碼至視訊資料部分之未使用位元。
於某些實施例中，輔助資料為字元資料。在某些實施例中，視訊資料之部分係一視訊訊框之一或多條線。
在某些實施例中，接收器包含一邏輯以從視訊之部分擷取輔助資料。
於某些實施例中，接收器包含一轉換邏輯以將視訊之部分從一第 一型式轉換為一第二型式，而第二型式在輔助資料編碼之前，係為視訊資料之一型式。
在某些實施例中，轉換邏輯在從視訊之部分擷取輔助資料之後，係將視訊部分從一第一色彩空間轉換為一第二色彩空間，而第二色彩空間需要一或多於第一色彩空間的位元，而輔助資料在擷取之前係被編碼於一或多個位元之中。
於某些實施例中，轉換邏輯係於從視訊資料之部分擷取輔助資料之後，藉由一或多個位元增加許多用於編碼視訊資料之部分之字元，而輔助資料於擷取之前係被編碼於一或多個位元之中。
在某些實施例中，一種編碼輔助資料至視訊資料中之方法，包含下列步驟：連接一第一裝置至一第二裝置以用於包含從第一裝置至第二裝置之視訊資料的資料傳輸；確定第二裝置用於一輔助資料編碼模式之一能力；從第一裝置傳輸一信號至第二裝置以指示一意圖以改變為輔助資料編碼模式；以及插入輔助資料至視訊資料之一部分未使用空間。
在某些方法實施例中，輔助資料為字元資料。於某些方法實施例中，視訊資料之部分係一視訊訊框之一或多條線從第一裝置被傳輸至第二裝置。在某些實施例中，視訊資料之部分係為視訊訊框之一第一線或一最後一線。
於某些實施例中，確定第二裝置用於一輔助資料編碼模式之能力，能力包含讀取第二裝置之一支援旗標。其中藉由第一裝置或從第二裝置傳送至第一裝置之一信號以存取被提供於一或多個組態的支援旗標。
於某些實施例中，編碼輔助資料至視訊資料中之方法進一步包含：確定是否額外未使用空間需要被編碼輔助資料，且確定額外未使用空間係有需要將視訊資料之部分從一第一型式轉換至一第二型式，而第二型式提供比第一型式更多的未使用空間。在某些實施例中，編碼輔助資料至視訊資料中之方法進一步包含：將該視訊部分從一第一色彩空間轉換為一第二色彩空間之前，編碼該輔助資料至該視訊之該部分、該第二色彩空間相較於該第一色彩空間，需較少位元。在某些實施例中，編碼輔助資料至視訊資料中之方法進一步包含：藉由一或多個位元以產生一或多個未使用位元以用於輔助資料之編碼以減少大量使用於編碼視訊資料之部分的位元。
在某些實施例中，一種編碼輔助資料至視訊資料中之方法，包含 下列步驟：連接一第一裝置至一第二裝置以用於包含從第一裝置至第二裝置之視訊資料的資料接收；提供一支援旗標指示第一裝置之一能力用於一輔助編碼模式；在第一裝置接收從第二裝置來之一信號以指示第二裝置之一意圖以改變輔助資料編碼模式；以及接收包含已編碼輔助資料之一視訊資料部分，輔助資料係存於未使用於視訊資料部分的位元之中；從視訊資料之部分擷取輔助資料。
在某些實施例中，輔助資料為字元資料。於某些實施例中，視訊資料之部分係一已接收視訊訊框之一或多條線。在某些實施例中，視訊資料之部分係視訊訊框之一第一線或一最後一線。
於某些實施例中，其中提供一支援旗標指示第一裝置之一能力用於一輔助資料編碼模式，其包含在第一裝置之一組態中儲存旗標。在某些實施例中，其中提供一支援旗標指示第一裝置之一能力用於一輔助資料編碼模式，其包含在一信息中傳輸旗標至第一裝置。
於某些實施例中，一種編碼輔助資料至視訊資料中之方法，進一步包含：若視訊資料部分從第二型式轉換至第一型式以提供輔助資料未使用空間，則在輔助資料之擷取之後，編碼輔助資料至視訊資料中之方法進一步包含：將視訊資料部分從一第一型式轉換至一第二型式。於某些實施例中，一種編碼輔助資料至視訊資料中之方法，進一步包含：在從視訊資料之部分而來之輔助資料之擷取之後，編碼輔助資料至視訊資料中之方法進一步包含：將視訊資料部分從一第一色彩空間轉換至一第二色彩空間，第二空間需要比第一色彩空間多一或多個額外位元，而輔助資料在擷取之前被編碼在一或多個位元。於某些實施例中，一種編碼輔助資料至視訊資料中之方法，進一步包含：在從視訊資料之部分而來之輔助資料之擷取之後，編碼輔助資料至視訊資料中之方法進一步包含：增加大量位元，其藉由一或多個位元用於編碼視訊資料之部分，輔助資料在擷取前係被編碼於一或多個位元之中。
100‧‧‧系統
105‧‧‧傳輸裝置
108‧‧‧視訊處理器
110‧‧‧發射器
112‧‧‧輔助資料邏輯
114‧‧‧轉換邏輯
130‧‧‧埠
150‧‧‧連結
155‧‧‧接收裝置
158‧‧‧視訊處理器
160‧‧‧接收器
162‧‧‧輔助資料邏輯
164‧‧‧轉換邏輯
180‧‧‧埠
182‧‧‧支援旗標
186‧‧‧接收裝置的擴充顯示器識別資料(EDID)或能力暫存器
190‧‧‧輔助資料

Claims (36)

  1. 一種編碼輔助資料至視訊資料中之裝置，包含：一連接埠，用於連接該裝置至一第二裝置；以及一發射器，用於傳輸視訊資料與輔助資料至該第二裝置；其中該編碼輔助資料至視訊資料中之裝置係編碼該輔助資料至該視訊資料之一部分，以及傳輸該已編碼資料至該第二裝置，該輔助資料係編碼至該視訊資料部分之未使用位元。
  2. 如請求項1所述之編碼輔助資料至視訊資料中之裝置，其中該輔助資料為字元資料。
  3. 如請求項1所述之編碼輔助資料至視訊資料中之裝置，其中該視訊資料之該部分係一視訊訊框之一或多條線。
  4. 如請求項3所述之編碼輔助資料至視訊資料中之裝置，其中該視訊資料之該部分係為該視訊訊框之一第一線或一最後一線。
  5. 如請求項1所述之編碼輔助資料至視訊資料中之裝置，其中該發射器包含一邏輯以編碼該輔助資料至該視訊之該部分之中。
  6. 如請求項1所述之編碼輔助資料至視訊資料中之裝置，其中該發射器包含一轉換邏輯以將該視訊之該部分從一第一型式轉換為一第二型式。
  7. 如請求項6所述之編碼輔助資料至視訊資料中之裝置，其中該轉換邏輯將該視訊部分從一第一色彩空間轉換為一第二色彩空間之前，編碼該輔助資料至該視訊之該部分、該第二色彩空間相較於該第一色彩空間，需較少位元。
  8. 如請求項7所述之編碼輔助資料至視訊資料中之裝置，其中該第一色彩空間為YCbCr 4：4：4，而該第二色彩空間為YCbCr 4：2：2。
  9. 如請求項6所述之編碼輔助資料至視訊資料中之裝置，其中該轉換邏輯係藉由一或多個位元減少許多用於編碼該視訊資料之該部分之字元，以產生一或 多個位元以用於該輔助資料之該編碼。
  10. 如請求項9所述之編碼輔助資料至視訊資料中之裝置，其中該視訊資料之該部分之一色彩空間包含一亮度部分與一色度部分，而其中該一或多個位元係包含於該色度部分之中。
  11. 一種編碼輔助資料至視訊資料中之裝置，包含：一連接埠，用於連接該裝置至一第二裝置；以及一接收器，用於從該第二裝置而來之該視訊資料與輔助資料的接收；其中該編碼輔助資料至視訊資料中之裝置係辨識編碼於該視訊資料之一部分之中的該輔助資料，以及從該視訊資料之該部分擷取該輔助資料，而該輔助資料係編碼至該視訊資料部分之未使用位元。
  12. 如請求項11所述之編碼輔助資料至視訊資料中之裝置，其中該輔助資料為字元資料。
  13. 如請求項11所述之編碼輔助資料至視訊資料中之裝置，其中該視訊資料之該部分係一視訊訊框之一或多條線。
  14. 如請求項13所述之編碼輔助資料至視訊資料中之裝置，其中該視訊資料之該部分係為該視訊訊框之一第一線或一最後一線。
  15. 如請求項11所述之編碼輔助資料至視訊資料中之裝置，其中該接收器包含一邏輯以從該視訊之該部分擷取該輔助資料。
  16. 如請求項11所述之編碼輔助資料至視訊資料中之裝置，其中該接收器包含一轉換邏輯以將該視訊之該部分從一第一型式轉換為一第二型式，而該第二型式在該輔助資料編碼之前，係為該視訊資料之一型式。
  17. 如請求項16所述之編碼輔助資料至視訊資料中之裝置，其中該轉換邏輯在從該視訊之該部分擷取該輔助資料之後，係將該視訊部分從一第一色彩空間 轉換為一第二色彩空間，而該第二色彩空間需要一或多於該第一色彩空間的位元，而該輔助資料在擷取之前係被編碼於該一或多個位元之中。
  18. 如請求項16所述之編碼輔助資料至視訊資料中之裝置，其中該轉換邏輯係於從該視訊資料之該部分擷取該輔助資料之後，藉由一或多個位元增加許多用於編碼該視訊資料之該部分之字元，而該輔助資料於擷取之前係被編碼於該一或多個位元之中。
  19. 一種編碼輔助資料至視訊資料中之方法，包含下列步驟：連接一第一裝置至一第二裝置以用於包含從該第一裝置至該第二裝置之視訊資料的資料傳輸；確定該第二裝置用於一輔助資料編碼模式之一能力；從該第一裝置傳輸一信號至該第二裝置以指示一意圖以改變為該輔助資料編碼模式；以及插入輔助資料至該視訊資料之一部分未使用空間。
  20. 如請求項19所述之編碼輔助資料至視訊資料中之方法，其中該輔助資料為字元資料。
  21. 如請求項20所述之編碼輔助資料至視訊資料中之方法，其中該視訊資料之該部分係一視訊訊框之一或多條線，係從該第一裝置被傳輸至該第二裝置。
  22. 如請求項20所述之編碼輔助資料至視訊資料中之方法，其中該視訊資料之該部分係為該視訊訊框之一第一線或一最後一線。
  23. 如請求項19所述之編碼輔助資料至視訊資料中之方法，其中確定該第二裝置用於一輔助資料編碼模式之該能力，該能力包含讀取該第二裝置之一支援旗標。
  24. 如請求項23所述之編碼輔助資料至視訊資料中之方法，其中藉由該第一裝置或從該第二裝置傳送至該第一裝置之一信號以存取該被提供於一或多個組態的該支援旗標。
  25. 如請求項19所述之編碼輔助資料至視訊資料中之方法，進一步包含：確定是否額外未使用空間需要被編碼該輔助資料，且確定額外未使用空間係有需要將該視訊資料之該部分從一第一型式轉換至一第二型式，而該第二型式提供比該第一型式更多的未使用空間。
  26. 如請求項25所述之編碼輔助資料至視訊資料中之方法，進一步包含將該視訊部分從一第一色彩空間轉換為一第二色彩空間之前，編碼該輔助資料至該視訊之該部分、該第二色彩空間相較於該第一色彩空間，需較少位元。
  27. 如請求項25所述之編碼輔助資料至視訊資料中之方法，進一步包含：藉由一或多個位元以產生一或多個未使用位元以用於該輔助資料之該編碼以減少大量使用於編碼該視訊資料之該部分的位元。
  28. 一種編碼輔助資料至視訊資料中之方法，包含下列步驟：連接一第一裝置至一第二裝置以用於包含從該第一裝置至該第二裝置之視訊資料的資料接收；提供一支援旗標指示該第一裝置之一能力用於一輔助編碼模式；在該第一裝置接收從第二裝置來之一信號以指示該第二裝置之一意圖以改變該輔助資料編碼模式；以及接收包含已編碼輔助資料之一視訊資料部分，該輔助資料係存於未使用於該視訊資料部分的位元之中；從該視訊資料之該部分擷取該輔助資料。
  29. 如請求項28所述之編碼輔助資料至視訊資料中之方法，其中該輔助資料為字元資料。
  30. 如請求項28所述之編碼輔助資料至視訊資料中之方法，其中該視訊資料之該部分係一已接收視訊訊框之一或多條線。
  31. 如請求項30所述之編碼輔助資料至視訊資料中之方法，其中該視訊資料之該部分係該視訊訊框之一第一線或一最後一線。
  32. 如請求項28所述之編碼輔助資料至視訊資料中之方法，其中提供一支援旗標指示該第一裝置之一能力用於一輔助資料編碼模式，其包含在該第一裝置之一組態中儲存該旗標。
  33. 如請求項28所述之編碼輔助資料至視訊資料中之方法，其中提供一支援旗標指示該第一裝置之一能力用於一輔助資料編碼模式，其包含在一信息中傳輸該旗標至該第一裝置。
  34. 如請求項28所述之編碼輔助資料至視訊資料中之方法，若該視訊資料部分從該第二型式轉換至該第一型式以提供該輔助資料未使用空間，則在該輔助資料之擷取之後，進一步包含將該視訊資料部分從一第一型式轉換至一第二型式。
  35. 如請求項34所述之編碼輔助資料至視訊資料中之方法，在從該視訊資料之該部分而來之該輔助資料之該擷取之後，進一步包含將該視訊資料部分從一第一色彩空間轉換至一第二色彩空間，該第二空間需要比該第一色彩空間多一或多個額外位元，而該輔助資料在擷取之前被編碼在該一或多個位元。
  36. 如請求項34所述之編碼輔助資料至視訊資料中之方法，在從該視訊資料之該部分而來之該輔助資料之該擷取之後，進一步包含增加大量位元，其藉由一或多個位元用於編碼該視訊資料之該部分，該輔助資料在擷取前係被編碼於該一或多個位元之中。
TW102144242A 2013-01-24 2013-12-03 編碼輔助資料至視訊資料中之裝置及其方法 TW201431381A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201361756412P 2013-01-24 2013-01-24
US13/787,664 US20140204994A1 (en) 2013-01-24 2013-03-06 Auxiliary data encoding in video data

Publications (1)

Publication Number Publication Date
TW201431381A true TW201431381A (zh) 2014-08-01

Family

ID=51207660

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102144242A TW201431381A (zh) 2013-01-24 2013-12-03 編碼輔助資料至視訊資料中之裝置及其方法

Country Status (4)

Country Link
US (1) US20140204994A1 (zh)
CN (1) CN105052137A (zh)
TW (1) TW201431381A (zh)
WO (1) WO2014116347A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107919943B (zh) * 2016-10-11 2020-08-04 阿里巴巴集团控股有限公司 二进制数据的编码、解码方法和装置
KR102249191B1 (ko) * 2016-11-30 2021-05-10 삼성전자주식회사 전자 장치, 그의 제어 방법 및 전자 장치와 복수의 디스플레이 장치를 포함하는 디스플레이 시스템
CN106941596B (zh) * 2017-03-15 2020-05-22 深圳朗田亩半导体科技有限公司 一种信号处理方法及装置
US10645199B2 (en) * 2018-01-22 2020-05-05 Lattice Semiconductor Corporation Multimedia communication bridge
CN113099271A (zh) * 2021-04-08 2021-07-09 天津天地伟业智能安全防范科技有限公司 视频辅助信息的编码、解码方法及电子设备

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100746018B1 (ko) * 1999-03-10 2007-08-06 디지맥 코포레이션 디지털 저작권 관리를 위한 신호 프로세싱 방법들, 디바이스들, 및 응용들
US7088398B1 (en) * 2001-12-24 2006-08-08 Silicon Image, Inc. Method and apparatus for regenerating a clock for auxiliary data transmitted over a serial link with video data
CN1663247B (zh) * 2002-04-24 2012-07-11 汤姆森许可公司 把辅助数据插入到辅助视频输出信号中的方法和装置
US7136417B2 (en) * 2002-07-15 2006-11-14 Scientific-Atlanta, Inc. Chroma conversion optimization
US7378586B2 (en) * 2002-10-01 2008-05-27 Yamaha Corporation Compressed data structure and apparatus and method related thereto
US20040218095A1 (en) * 2003-04-29 2004-11-04 Tuan Nguyen System, method, and apparatus for transmitting data with a graphics engine
JP2005191933A (ja) * 2003-12-25 2005-07-14 Funai Electric Co Ltd 送信装置、送受信システム
JP4805924B2 (ja) * 2004-07-08 2011-11-02 テレフオンアクチーボラゲット エル エム エリクソン（パブル） マルチモード画像処理のための方法、システム、及びシステムを具備するユーザ端末
KR20050035236A (ko) * 2005-03-24 2005-04-15 (주)참된기술 전송 스트림의 오디오 패킷에 자막 데이터 삽입방법
US7818466B2 (en) * 2007-12-31 2010-10-19 Synopsys, Inc. HDMI controller circuit for transmitting digital data to compatible audio device using address decoder where values are written to registers of sub-circuits
KR101442608B1 (ko) * 2008-02-05 2014-09-25 삼성전자주식회사 영상을 효율적으로 부호화/복호화하는 방법 및 장치
US20100135379A1 (en) * 2008-12-02 2010-06-03 Sensio Technologies Inc. Method and system for encoding and decoding frames of a digital image stream
US8948406B2 (en) * 2010-08-06 2015-02-03 Samsung Electronics Co., Ltd. Signal processing method, encoding apparatus using the signal processing method, decoding apparatus using the signal processing method, and information storage medium
KR101128819B1 (ko) * 2011-10-28 2012-03-27 엘지전자 주식회사 디지털 방송 송신 방법

Also Published As

Publication number Publication date
US20140204994A1 (en) 2014-07-24
WO2014116347A1 (en) 2014-07-31
CN105052137A (zh) 2015-11-11

Similar Documents

Publication Publication Date Title
US10999554B2 (en) Communication device and communication method
US9779687B2 (en) Device and method for transmitting and receiving data using HDMI
JP5815008B2 (ja) モバイル用Ｈｉｇｈ−ＤｅｆｉｎｉｔｉｏｎＭｕｌｔｉｍｅｄｉａＩｎｔｅｒｆａｃｅを構築し、円滑化するための方法、装置およびシステム
US10085058B2 (en) Device and method for transmitting and receiving data using HDMI
US20170078739A1 (en) Device and method for transmitting and receiving data using hdmi
EP2355506A1 (en) Transmitter apparatus and transmission data format deciding method
US8730400B2 (en) Image displaying apparatus and image processing apparatus
EP2785053B1 (en) Transmission device and reception device for baseband video data, and transmission/reception system
TW201431381A (zh) 編碼輔助資料至視訊資料中之裝置及其方法
KR20170066423A (ko) Hdmi를 사용하여 데이터를 송수신하기 위한 방법 및 장치
JP2007311884A (ja) 通信システム、送信装置及び受信装置、通信方法、並びにプログラム
RU2670599C9 (ru) Устройство связи, способ связи и компьютерная программа
US20080317440A1 (en) Video receiving apparatus and video receiving method
US20170134796A1 (en) Display, Display Device, Player, Playing Device, and Playing Display System
US10134356B2 (en) Transmission apparatus, method of transmitting image data with wide color gamut, reception apparatus, method of receiving image data with color gamut
CN102547430A (zh) 一种降低机顶盒功耗的方法
US10623805B2 (en) Sending device, method of sending high dynamic range image data, receiving device, and method of receiving high dynamic range image data
EP2995080B1 (en) Devices and methods for communicating sideband data with non-compressed video
CN102025936A (zh) 视频宽高比转换方法及装置
CN103634597B (zh) 一种在4k2k电视机上解码图片的方法
TW201412119A (zh) 行動高畫質連結資料轉換器以及行動高畫質連結資料轉換方法
JP2015109683A (ja) 映像送信装置、映像受信装置、映像送信方法及び映像受信方法