TW201138425A - Method and system for rendering 3D graphics based on 3D display capabilities - Google Patents

Method and system for rendering 3D graphics based on 3D display capabilities Download PDF

Info

Publication number
TW201138425A
TW201138425A TW099131218A TW99131218A TW201138425A TW 201138425 A TW201138425 A TW 201138425A TW 099131218 A TW099131218 A TW 099131218A TW 99131218 A TW99131218 A TW 99131218A TW 201138425 A TW201138425 A TW 201138425A
Authority
TW
Taiwan
Prior art keywords
dimensional
view
graphics
right view
video
Prior art date
Application number
TW099131218A
Other languages
English (en)
Inventor
Samir Hulyalkar
Xuemin Chen
Marcus Kellerman
Ilya Klebanov
Original Assignee
Broadcom Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Broadcom Corp filed Critical Broadcom Corp
Publication of TW201138425A publication Critical patent/TW201138425A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/337Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using polarisation multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Description

201138425 六、發明說明: 【發明所屬之技術領域】 [0001] 本發明涉及通信系統。更具體地說,本發明涉及基於二 維顯示功能顯示三維圖像。 【先前技術】 [0002] 很多設備都具有數位視頻功能,例如,數位電視、數位 直播系統、數位記錄系統、遊戲機等。數位視頻設備相 比傳統的類比視頻系統在處理和以更高帶寬效率傳送視 頻序列方面具有顯著的進步。 ·. ...... .. .... .
[0003] 視頻内容可以用二維格式或三維格式記錄。在各種應用 ,例如’ DVD電影和數位電視中,一般偏愛三維視頻,因 為對觀看者來說,它通常比二維視頻更真賁。三維視頻 包括左視圖視頻和右視圖視頻。三維視頻幀可以由左視 圖視頻部分和右視圖視頻部分組合而成。 [0004] 比較本發明後續將要結合附亂僉紹的系統,現有技術的 其他局限性和弊端對於本領誠的丨普通技術人員來說是顯 而易見的。 【發明内容】 [0005] 本發明提供了 一種用於基於三維顯示功能顯示三維圖形 的方法和系統,並在權利要求中得到了更完整的闡述。 [0006] 根據一個方面,一種用於處理視頻的方法,包括: [00〇7] 由三維圖形和/或三維視頻處理設備中的一個或多個處理 器和/或電路執行如下步驟: [0008] 基於三維顯示設備使用的顯示格式來生成將在所述三維 099131218 表單編號A0101 第4頁/共40頁 1003084681-0 201138425 顯示設備上顯示的三維内容的左視圖三維圖形幀和相應 的右視圖三維圖形幀;以及 [0009] 將所述左視圖三維圖形幀和所述相應的右視圖三維圖形 幀傳送給所述三維顯示設備。 [0010] 優選地,所述三維圖形和/或三維視頻處理設備包括以 下一個或多個:機頂盒和電腦。 [0011] 優選地,所述方法進一步包括基於所述三維顯示設備使 用的時序顯示格式生成所述左視圖三維圖形幀和所述相 應的右視圖三維圖形幀。 [0012] 優選地,所述方法進一步包括基於所述三維顯示設備使 用的偏振顯示格式生成所述左視圖三維圖形幀和所述相 應的右視圖三維圖形幀。 [0013] 優選地,所述方法進一步包括基於一個或多個顯示器偏 振模式對所述左視圖三維圖形幀和/或所述右視圖三維 圖形幀進行亞取樣。 [0014] 優選地,所述方法進一步包括基於奇數圖元行對左視 圖三維圖形幀和相應的右視圖三維圖形幀其中之一進行 亞取樣,以及基於偶數圖元行對所述左視圖三維圖形 幀和所述相應的右視圖三維圖形幀中的另一個進行亞取 樣。 [0015] 優選地,所述方法進一步包括基於棋盤模式内交替的圖 元位置對左視圖三維圖形幀和相應的右視圖三維圖形幀 其中之一進行亞取樣,以及基於所述棋盤模式内互補交 099131218 表單編號A0101 第5頁/共40頁 1003084681-0 201138425 替的圖元位置對所述左視圖三維圖形幀和所述相應的右 視圖三維圖形幀中的另一個進行亞取樣。 [0016] 優選地,所述左視圖三維圖形幀的圖元與視頻圖元混合 和/或所述右視圖三維圖形幀的圖元與視頻圖元混合。 [0017] 優選地,所述左視圖三維圖形幀和所述右視圖三維圖形 幀以時間順序顯示。 [0018] 優選地,所述左視圖三維圖形幀和所述右視圖三維圖形 幀以互補模式亞取樣、在單一幀中交錯並利用左視圖圖 元和右視圖圖元的不同偏振方向顯示。 [0019] 根據一個方面,一種用於處理視頻的系統,包括: [0020] 第一三維圖形和/或三維視頻處理設備中的一個或多個處 理器和/或電路,其中所述一個或多個處理器和/或電路 用於: [0021] 基於三維顯示設備使用的顯示格式來生成將在所述三維 顯示設備上顯示的三維内容的左視圖三維圖形幀和相應 的右視圖三維圖形幀;以及 [0022] 將所述左視圖三維圖形幀和所述相應的右視圖三維圖形 幀傳送給所述三維顯示設備。 [0023] 優選地,所述三維圖形和/或三維視頻處理設備包括以下 一個或多個:機頂盒和電腦。 [0024] 優選地,所述一個或多個處理器和/或電路用於基於所述 三維顯示設備使用的時序顯示格式生成所述左視圖三維 圖形幀和所述相應的右視圖三維圖形幀。 099131218 表單編號A0101 第6頁/共40頁 1003084681-0 201138425 . [0025] [0026] [0027]❹ [0028] Ο [0029] [0030] 優選地,所述一個或多個處理器和/或電路用於基於所述 三維顯示設備使用的偏振顯示格式生成所述左視圖三維 圖形幀和所述相應的右視圖三維圖形幀。 優選地,所述一個或多個處理器和/或電路用於基於一個 或多個顯示器偏振模式對所述左視圖三維圖形幀和/或 所述右視圖三維圖形幀進行亞取樣。 優選地,所述一個或多個處理器和/或電路用於基於奇數 圖元行對左視圖三維圖形幀和相應的右視圖三維圖形幀 其中之一進行亞取樣,以及基於偶數圖元行對所述左 視圖三維圖形幀和所述相應的右視圖三維圖形幀中的另 一個進行亞取樣。 優選地,所述一個或多個處理器和/或電路用於基於棋盤 模式内交替的圖元位置對左視圖三維圖形幀和相應的右 視圖三維圖形幀其中之一進行亞取樣,以及基於所述棋 盤模式内互補交替的圖元位置對所述左視圖三維圖形幀 和所述相應的右視圖三維圖形幀中的另一個進行亞取樣 〇 優選地,所述左視圖三維圖形幀的圖元與視頻圖元混合 和/或所述右視圖三維圖形幀的圖元與視頻圖元混合。 優選地,所述左視圖三維圖形幀和所述右視圖三維圖形 幀以時間順序顯示。 優選地,所述左視圖三維圖形幀和所述右視圖三維圖形 幀以互補模式亞取樣、在單一幀中交錯並利用左視圖圖 元和右視圖圖元的不同偏振方向顯示。 099131218 表單編號A0101 第7頁/共40頁 1003084681-0 [0031] 201138425 [0032] 本發明的各種優點、各個方面和創新特徵,以及其中所 示例的實施例的細節,將在以下的描述和附圖中進行詳 細介紹。 【實施方式】 [0033] 本發明用於基於三維顯示功能顯示三維圖形的方法和系 統提供了一些實施例。根據本發明的各種實施例,第一 三維圖形和/或三維視頻處理設備中的一個或多個處理器 和/或電路可以基於三維顯示設備使用的顯示格式來生 成將在所述三維顯示設備上顯示的三維内容的左視圖三 維圖形幀和相應的右視圖三維圖形幀。可以將左視圖三 維圖形幀和右視圖三維圖形幀傳送給三維顯示設備。就 這一點而言,第一三維圖形和/或三維視頻處理設備可以 包括以下一個或多個:機頂盒和電腦。 [0034] 左視圖三維圖形幀和/或右視圖三維圖形幀可以基於顯示 格式的類型生成。例如,左視圖三維圖形幀和相應的 右視圖三維圖形幀可以基於三維顯示設備使用的時序格 式生成。可選地,左視圖三維圖形幀和相應的右視圖 三維圖形幀可以基於三維顯示設備使用的偏振顯示格式 生成。左視圖三維圖形幀和/或右視圖三維圖形幀可以 基於一個或多個偏振顯示模式亞取樣。例如,左視圖三 維圖形幀和相應的右視圖三維圖形幀中的一個可以基於 奇數圖元行亞取樣。另外,左視圖三維圖形幀和相應的 右視圖三維圖形幀中的另一個可以基於偶數圖元行亞取 樣。 [0035] 在發明的另一個實施例中,左視圖三維圖形幀和相應的 099131218 表單編號A0101 第8頁/共40頁 1003084681-0 201138425 〇 右視圖三維圖形幀中的一個可以基於棋盤模式中的交替 圖元位置亞取樣。另外,左視圖三維圖形t貞和相應的右 視圖三維圖形幀中的另一個可以基於棋盤模式中的互補 交替圖元位置亞取樣。左視圖三維圖形幀和/或右視圖三 維圖形幀中的圖元可以與視頻圖元混合,例如,左視圖 和右視圖視頻圖元和/或二維視頻圖元。在本發明的各種 實施例中,左視圖三維圖形幀和右視圖三維圖形幀可以 以時間順序顯示。在本發明的另一個實施例中,左視圖 三維圖形幀和右視圖三維圖形幀可以以互補模式亞取樣 、在單一幀中交錯並利用左視圖和右視圖圖元的不同偏 振方向顯示。以這種方式,就可以基於各種三維顯示功 能生成並處理左視圖和/或右視圖三維圖形幀。例如,為 了顯示的目的基於隨後亞取樣的知識產生三維圖形幀可 以提高處理三維圖形幀的品質以及減小處理三維圖形幀 的複雜度。例如,隨後亞取樣的知識可以減少實體記憶 體和/或處理設備並能提高記憶體和/或處理器帶寬的使 〇 [0036] 用率。 圖1是根據本發明的實施例的示範性三維視頻和/或三維 圖形通信系統的框圖。如圖1所示,示出了視頻傳送單元 (VTU) 110、通信網路120、視頻接收單元(VRU) 130 、記憶體11 6和三維顯示設備114。 [0037] VTU 110可以包括合適的邏輯、電路、介面和/或代碼, 用於向VRU 130提供編碼的視頻内容。VTU 110可以用於 編碼三維視頻。例如,VTU 110可以用於將三維視頻編碼 為左視圖視頻流和右視圖視頻流,可以將它們稱作左視 099131218 表單編號A0101 第9頁/共40頁 1003084681-0 201138425 圖視頻流和/或右視圖視頻流。左視圖視頻流和/或右視 圖視頻流通過不同的通道傳送給VRU 13〇。另外,左視圖 三維圖形資訊流和/或右視圖三維圖形資訊流可以通過不 同的通道傳送給VRU 13G。左視圖三維圖形資訊流和右視 圖二維圖形資訊流可以稱作左視圖圖形流和右視圖圖形 流。VTU 110的例子可以包括有線電視首端、直播衛星首 端和網路服務器。 [0038] [0039] 通信網路120可以包括合適的邏輯、電路、介面和/或代 碼’用於提供VTU 11〇和卿130間的通信平臺。通信網 路120可以是有線或無線通信網路。通信網路12〇可以是 局域網、廣域網、網際網路等。 VRU 130可以包括合適的邏輯、電路、介面和/或代碼, 用於通過通信網路12〇接收來自VTU 11〇的傳輪流。接收 到的傳輸流可以包括編碼的左視圖和/或右視圖三維視頻 流,例如,包括一個或多個三維電視節目的視頻流,還 可以包括左視圖和/或右視圖三維圖形f訊流。例如,左 視圖和/或右視圖三維圖形資訊可以包括左視圖和/或右 (r 視圖原始三維圖形。就這一點而言,VRU 13〇可以用於從 接收到的傳輸流解複用或解析左視圖和/或右視圖視頻流 和/或左視圖和/或右視圖三維圖形資訊流。VRU 13〇可 以從其記憶體116中提取和/或在其中存儲左視圖和/或右 視圖視頻流資料和/或左視圖和/或右視圖三維圖形資訊 。在本發明的各種實施例中,左視圖和/或右視圖三維圖 形資訊不能從VTU 1〇〇接收。例如,左視圖和/或右視圖 三維圖形資訊可以存儲在VRlJ 13〇中。左視圖和/或右視 099131218 表單編號A0101 第〗0頁/共40頁 1003084681-0 201138425 ' 圖二維圖形資訊可以與左視圖和/或右視圖視頻内容相關 聯’或者可以與視頻内容不相關。在本發明的各種實施 例中’左視圖和/或右視圖三維圖形資訊可以基於用戶輸4 入進行選擇。VRU 130可以用於解碼提取的左視圖和/或 右視圖三維視頻流資料。VRU 130可以用於基於左視圖和 /或右視圖三維圖形資訊產生左視圖和/或右視圖三維圖 形。例如’左視圖和/或右視圖三維圖形資訊可以包括左 視圖和/或右視圖原始圖形,將該圖形提供給VRU 13〇以 〇 產生左視圖和/或右視圖三維圖形。左視圖和/或右視圖 三維圖形可以包括在視圖和/或右視圖三維圖元資料和/
或左視圖和/或右視圖三維圓形幀,就填一點而言,VRU φβΰ ]: f! 纏、 13〇可以基於三維顯示設備π ♦的砷終▲理左碑圖和/或右 視圖三維圖形資訊和/或左視圖和/或古視圏三維圖形。 左視圖和/或右視圖三維圖形資訊、三維圖形、三維圖元 和/或三維幀可以稱作左視圖和/或右視圖圖形資訊、圖 形' 圖元和/或幀。示範性VRU 130可以包括機頂盒和/ 或個人電腦。 ·
O
[0040]三維顯示設備114可以用於顯示左視圖和右視圖三維圖形 和/或三維視頻資料,顯示方式可以是交替時序的左視圖 和右視圖幀和/或包含交錯左視圖和右視圖視頻圖元的單 一幀’其中左視圖和右視圖視頻圖元以不同角度或不同 方向偏振。例如’左視圖圖元行可以與右視圖圖元行相 父替’其中左視圖圖元行和右視圖圖元行可以以不同角 度或不同方向偏振》在本發明的另一個實施例中,包含 交替的左視圖和右視圖圖元的棋盤格子模式可以以不同 099131218 表單編號A0101 第11頁/共40頁 1003084681-0 201138425 角度或不同方向偏振以便區別左視圖和右視圖圖元。就 ,這一點而言,三維顯示設備114中可以使用包括基於行和 /或基於棋盤偏振模式的偏振片。 [0041] 在本發明的各種實施例中,三維顯示設備114可以使用左 手系和右手系圓偏振來區別左視圖和右視圖圖形圖元資 料。在本發明的其他實施例中,三維顯示設備114可以利 用以不同角度交替的線性偏振,例如,加上4 5度和減去 45度來區別左視圖和右視圖圖元資料。當三維顯示設備 114用於顯示偏振的左視圖和/或右視圖三維圖形和/或偏 振的左視圖和/或右視圖三維視頻時,觀看者需要佩戴偏 振化三維眼鏡,這種眼鏡可以根據左視圖顯示偏振為左 眼濾光以及根據右視圖顯示偏振角度或方向為右眼濾光 。在本發明的各種實施例中,三維顯示設備114可以用於 與三維眼鏡通信以便自適應匹配所使用的偏振類型。例 如,三維眼鏡和/或三維顯示設備114可以用於自適應確 定是使用圓偏振還是使用線偏振。就這一點而言,三維 顯示設備114和/或三維眼鏡可以通過藍牙連接來通信, 但是,本發明並不受限於此,還可以使用其他有線和/或 無線連接。 [0042] 三維顯示設備114可以用於顯示時序的左視圖和右視圖三 維圖形資料和/或左視圖和右視圖三維視頻資料,顯示方 式可以是左視圖圖元和右視圖圖元的交替幀。當三維顯 示設備11 4用於顯示時序的左視圖和/或右視圖圖時,觀 看者需要佩戴活動快門三維眼鏡(active shutter 3D g 1 a s s e s )。針對時序顯示而產生的左視圖和右視圖三維 099131218 表單編號A0101 第12頁/共40頁 1003084681-0 201138425 圖形幢可以分別表示在不同時間點的圖像,I亥時間,點可 以根據顯示率來進行間隔’但是,本發明並不受限於此 。在本發明的各種實施例中,三維顯示設僙114可以用於 與三維快門眼鏡通信以便自適應同步左視圖和右視圖= 維圖形幀的刷新率與左和右三維眼鏡的快門速度。就這 一點而言’三維顯示設備114和/或三維眼鏡可以通過藍 牙連接來通信’但是,本發明並不受限於此,還可以使 用其他有線和/或無線連接。 Ο [0043] 在本發明的各種實施例中,三維顯示設備114可以用於將 左視圖視頻資料與左視圖三維圖形資料混合,以及將右 視圖視頻資料攔右視圖三維圖形嘖料璉备抓如一 :,,.(· ι維顯不設 14可以包 備m可以用於基於時序的左和右賴顯示左_和/或右 視圖三維圖形和/或視頻。進一步地,三維顯示設備ιΐ4 可以用於基於左和右圖元偏振模式顯示左視圖和/或右視 圖三維圖形和/或視頻。示範性三維顯示設備^ 括三維電視或電腦顯示器。 Ο [晒工作中,m m可簡於編瑪左視圖和/或右視圖三維 視頻和/或左視圖和/或右視圖三維圖形資訊。例如 :將=視:目編碼成左視圖視頻流和,或 類似地’可以將三維圖形資訊編瑪成左視圖圖形資 訊流和/或右視圖圖形資訊流。可以將包含許多編碼的視 頻和/或二維圖形流的多工傳輪流通過通信網路120傳送 給VRU 13〇。削130可以用於接收和/或 流,以及胁提取錢圖和/或右㈣=傳輪 視圖和/或右視圖三維圖形資訊 頻和/或左 表單编號Α0101 第13頁/共40頁 099131218 I30可以用於解碼 表單编號A0101 第13 川π
10030846J 201138425 編碼的左視圖和/或右視圖二維視頻流以及左視圖和/或 右視圖三維圖形資訊流。VRU 1 3 0可以用於處理接收到的 左視圖和/或右視圖三維圖形資訊以產生左視圖和/或右 視圖三維圖形。 [0045] 在本發明的各種實施例中,左視圖和/或右視圖三維圖形 資訊可以存儲在VRU 130中,並可以由VRU 130用於產生 左視圖和/或右視圖三維圖形。VRU 130可以利用三維顯 示設備114顯示功能的知識來決定如何處理左視圖和/或 右視圖三維圖形資訊。例如,三維顯示設備114可以包括 時序顯示和/或偏振顯示功能。類似地,VRU 130可以利 用三維顯示設備114功能的知識來處理左視圖和/或右視 圖三維視頻流。VRU 130可以將左視圖和/或右視圖三維 圖形和/或左視圖和/或右視圖三維視頻傳送給三維顯示 設備114。三維顯示設備114可以用於將相應的左視圖三 維圖形資料覆蓋、混合和/或代替左視圖三維視頻資料, 和/或將相應的右視圖三維圖形資料覆蓋、混合和/或代 替右視圖三維視頻資料。得到的混合三維左視圖視頻和/ 或左視圖三維圖形資料可以與混合三維右視圖視頻和/或 右視圖三維圖形資料一起按時間順序顯示。可選地,混 合三維左視圖視頻和/或左視圖三維圖形資料可以與混合 三維右視圖視頻和/或右視圖三維圖形資料同時顯示,其 中混合三維左視圖視頻和/或左視圖三維圖形資料以及混 合三維右視圖視頻和/或右視圖三維圖形資料可以由三維 顯示設備114以不同方式偏振。 [0046] 圖2是根據本發明的實施例的用於基於三維顯示功能生成 099131218 表單編號A0101 第14頁/共40頁 1003084681-0 201138425 和/或處理左視圖和/或右視圖三維圖形的示範性視頻接 收單元的示意圖。如圖2所示,示出了包含VRU 130的視 頻處理系統200 ’該VRU 130包括主處理器208、解碼器 204、記憶體和重播模組216、本地記憶體218、圖形處 理器210。另外,示出了三維顯示設備114,包括左混合 模組284和右混合模組286。 [0047] 〇
三維顯示設備114參考圖1所示。左浪合模組284可以包括 合適的邏輯、電路、介面和/或代碼,用於接收和混合左 視圖三維圖形流以及左視圖三維視頻流。就這一點而言 ’左混合模組284可以利用混合因數用於左視圖視頻資料 和左視圖三維圖形資料的混合。' 在本發明的各種實施例 中,三維顯示設備114可以基於左视厨和/或右視圖三維 圖形的透明程度來確定混合因數。在本發明的其他實施 例中,左視圖和/或右視圖三維圖形内容可以代替視頻内 容,和/或當不需要視頻内容時L可以顯示左視圖和/或 右視圖三維圖形内容。右混合模缸286可以包括合適的邏 輯、電路、介面,/或代碼,用於接收和混合右視圖三維 圖形流以及右視圖三維視頻流。就這一點而言,右混合 模組286可關祕合因數祕右視圖視㈣料和右視圖 三維圖形資料的混合。在本發明的各種實施例中,三維 顯示設備114可絲於®形的透明程度來確定混合因數。 在本發明的其他實施例中,㈣内容可以代替視頻内容 ,和/或當不需要視頰内容時,可以顯示圖形内容。可以 將左混合模组m和/或右混合模組286的輸出以交替的左 視圖和右視圖巾貞顯示 或者將它們以包含左視圖和右視 099131218 表單編號A0101 第15頁/共40頁 1003084681-0 201138425 圖圖元的交替偏振的單一幀形式亞取樣、交錯以及顯示 〇 [0048] 三維顯示設備11 4可以用於顯示左視圖和/或右視圖三維 圖形和/或與三維或二維視頻混合的左視圖和/或右視圖 三維圖形。就這一點而言,三維顯示設備11 4可以基於許 多顯示技術中的一種或多種來顯示三維圖形和/或視頻。 例如,三維顯示設備114可以利用偏振顯示技術,例如, 通過偏振液晶顯示設備(LCD)。在本發明的另一個實施 例中,三維顯示設備114可以利用時序顯示技術,通過 DLN後方投影顯示器或高速率等離子顯示器。另外,三維 顯示設備114可以用於利用以下一種或多種技術:光譜過 濾技術、立體電影技術和/或浦夫立希(Pulfrich)技 術。本發明不受任意特定類型的三維顯示技術的限制, 而可以使用任意合適的三維視頻和/或三維圖形顯示技術 〇 [0049] 主處理器208可以包括合適的邏輯、電路、介面和/或代 碼,用於控制VRU 130中的各個單元的運行,例如解碼器 204和圖形處理器210。主處理器208可以支援各種應用 ,例如,VRU 1 3 0上左視圖和/或右視圖三維圖形的生成 和/或三維視頻的解碼。主處理器208可以用於執行程式 指令和/或傳送用來產生左視圖和/或右視圖三維圖形的 配置參數。主處理器208可以用於與記憶體和重播模組 216和/或本地記憶體218通信,以便讀取和/或寫入左視 圖和/或右視圖三維圖形資料、視頻資料。可以將用來產 生左視圖和/或右視圖三維圖形的三維圖形資訊傳送給記 099131218 表單編號A0101 第16頁/共40頁 1003084681-0 201138425 [0050] Ο Ο 憶體和重播模組21 6和/或圖形處理器21 〇。 °主處理器2 0 8 可以用於控制和/或使圖形處理器21〇由 Μ $資訊產生左 視圖和/或右視圖三維圖形。左視圖和/ ° , 4右挽圖三維圖 形可以稱作左視圖和/或右視圖圖形或左 現圖和/或右視 圖圖形流。就這一點而言’主處理器2〇8 J以用於選擇左 視圖和/或右視圖圖形流以便在三維電親 、、 p目中顯示。 解碼器204可以包括合適的邏輯、電路、八 /1面年〇 /或為焉 ,用於將從VTU 110中接收到的左視圖 一 ^ ,ν ^ ® ^ , /或右視圖視頻 以幀為皁位進行解碼。解碼器204可以用 *用於利用各種視 頻解壓演算法’例如MPEG-2、MPEG-4、AVC、vci、VP6 、H. 264和/或其他梘頻格式》將從ντϋ 中接收到的 左視圖視頻變為解壓的或解碼的視頻内容。來自左視圖 解碼中的資訊’例如場景資訊,可以被傳送以用於例如 右視圖解碼。另外,解碼器204可以包括合適的邏輯、電 路、介面和/或代碼,用於將從ντυ 11〇中接收到的右視 圖視頻以幀為單位進行解碼。解碼器204可以用於利用各 種視頻解壓演算法,例如MPEG,2、MPEG-4、AVC ' VC1 、VP6、Η· 264和/或其他視頻格式,將從VTU 110中接 收到的右視圖視頻變為解壓的或解碼的視頻内容。 [0051]圖形處理器210可以包括合適的邏輯、電路、介面和/或 代碼’用於從主處理器2〇8和/或記憶體和重播模組216接 收三維左視圖和/或右視圖三維圖形資訊,例如,三維左 視圖和/或右視圖原始圖形,並可以輸出左視圖和/或右 視圖三維圖像。另外,圖形處理器2丨〇可以具有三維顯示 設備114的各種功能的知識,和/或可以用於根據三維顯 099131218 表單編號A0101 第17頁/共40頁 1003084681-0 201138425 示設備114的功能來處理左視圖和/或右視圖三維圖形。 例如,圖形處理器210可以用於產生用於時序三維顯示功 能的和/或偏振三維顯示功能的左視圖和/或右視圖三維 圖形。在本發明的各種實施例中,圖形處理器21〇可以用 於產生交替時序的左視圖和右視圖三維圖形。在本發明 的其他實施例中,圖形處理器210可以用於亞取樣左視圖 和/或右視圖三維圖形資料,例如,產生線偏振模式和/ 或棋盤格子偏振模式的三維圖形。另外,亞取樣的三維 圖形資料可以由圖形處理器210來處理,以便改善亞取樣 的三維圖形内容的外觀和7或減輕亞取樣造成的視覺上的 人工痕跡。例如,圖形處理器2丨〇可以改善和/或光滑亞 取樣的對角線。圖形處理器210可以甩,於產生左視圖和右 視圖三維圖形流的左視圖和/或右視圓三維圖形。可以將 產生的左視圖和右視圖三維圖形流傳送給三維顯示設備 114。 [0052] 在本發明的各種實施例中’例如,左視圖和/或右視圖三 維圖形内容可以覆蓋、混入和/或代替左視圖和/或右視 圖三維視頻内容和/或二維視頻内容。另外,示範性左視 圖和/或右視圖三維圖形可以包括用戶介面,例如,用戶 嚮導和/或功能表。 [0053] 記憶體和重播模組21 6可以包括合適的邏輯、電路、介面 和/或代碼,用於存儲VRU 130可能使用的資訊,例如, 配置參數、可執行指令和/或4視圖和/或右視圖三維圖 形和/或視頻資料。可執行指令可以包括由解碼器2〇4用 來處理左視圖和/或右視圖視頻内容的各種圖像處理演算 099131218 表單編號A0101 第18頁/共40頁 1003084681-0 201138425 Ο [0054] 法。另外,可執行指令可以包括由圖形處理器2ΐ〇用來提 供左視圖和/或右視圖三維圖形的圖形處理演算法。例如 ,可執行指令可以實現左視圖和/或右視圖三維圖形基於 三維顯示設備Π 4的功能的生成。存儲在記憶體和重播模 組216中的資料可以包括以下一個或多個的輸入和/或輸 出:解碼器204、圖形處理器210、記憶體218、主處理 器208和/或三維顯示設備114。就這一點而言,存儲的資 料可以包括左視圖和/或右視圖視頻内容和/或可以包括 左視圖和/或右視圖三維圖形内容。記憶體和重播模組 21 6可以包括RAM、ROM、以快閃記憶體為例的低延遲非 易失性記憶體和/或其他合適的電子資料記憶體。 Ο [0055] 本地記憶體218可以包括合適的邏輯、電路、介面和/或 代碼,用於記錄及存儲各種視頻應用和/或三維圖形節目 的内容和/或三維圖形資料。本地記憶體218是VRU 130 的可選組件。本地記憶體218可以包括磁和/或光驅動器 ,例如硬碟。本地記憶體218還可以包括固體記憶體,例 如快閃記憶體和/或其舞合適的能夠記錄及存儲資料和指 令的電子資料記憶艘。 工作中,解碼器204可以用於接收三維視頻資料的左視圖 和/成右視圖視頻流。左視圖視頻流和右視圖視頻流可以 由解碼器204解碼,、還可以存儲在記憶體和重播模組216 和/或記憶體218中。主處理器208可以選擇圖形處理器 210將要處理的左視圖和/或右視圖三維圖形資訊,例如 ,左視圖和/或右視圖原始三維圖形。例如,左視圖和/ 或右視圖三維圖形資訊可以存儲在VRU 130中,和/或可 099131218 表單編號A0101 第19頁/共40頁 1003084681-0 201138425 以從VTU 11 0的複甩傳輸流中接收。就這—點而言,左視 圖和/或右視圖三維圖形資訊可以存儲在記憶體和重播模 組216和/或記憶體218中。可以將選定的左視圖和/或右 視圖三維圖形資訊發送給圖形處理器21〇,用來處理和/ 或表現左視圖和/或右視圖三維圖像。 [0056] 圖形處理器210可以用於根據接收到的左視圖和/或右視 圖圖形資訊產生左視圖和/或右視圖三維圖形。左視圖和 /或右視圖圖形可以包括左視圖和/或右視圖圖元資料。 在本發明的各種實施例中,固形處理器21〇可以用於產生 .......... ... ..... . . 三維左視圖和/或右視圖圖形的時序幘。在本發明的其他 實施例中’圖形處理器210可以用於產生包含垂直亞取樣 的左視圖和/或右視圖圖元交替行的三維圖形幅。就這一 點而言,例如,左視圖和/或右視圖圖元交替行可以與三 維顯示設備114的顯示偏振的交替行相對應。進一步地, 在本發明的一個實施例中,圖形處理器21〇可以用於垂直 及水準亞取樣以便產生棋盤格子模式的交替的左視圖和 右視圖圖元,用於以棋盤格子偏振模式來顯示三維圖形 内容。 [0057] 為了時序顯示和/或偏振顯示而生成的左視圖和/或右視 圖二維圖形可以稱作左視圖和/或右視圖圖形流。左視圖 和/或右視圖視頻流可以包括線偏振模式的子樣和/或棋 盤格子偏振模式的子樣。VRU 130可以向三維顯示設備 114輸出左視圖和/或右視圖視頻流和/或左視圖和/或右 視圖二維圖形 '々il。二維顯不設備114可以用於接收左視圖 和/或右視圖視頻流和/或左視圖和/或右視圖三維圖形流 099131218 表單編號Α0101 第20頁/共40頁 1003084681-0 201138425 Ο [0058] ,和/或可以用於在顯示三維視頻和/或三維圖形内容前 ,在左混合模組284中混合左視圖三維圖形内容與左視圖 視頻内容,以及在右混合模組286中混合右視圖三維圖形 内容與右視圖視頻内容。三維顯示設備丨14可以以時序交 替的左視圖和右視圖三維幀形式和/或以每幀中均包含偏 振的左視圖和/或右視圖圖元的三維幀形式來顯示左混合 和/或右混合的視頻和三維圖形内容。本發明不受任意特 定的三維顯示方法和/或任意特定模式的左視圖和/或右 視圖三維幀或左視圖和/或右視阖三維圖元的限制,而可 以使用任意合適的方法和/或方法的組合來區別左視圖和 /或右視圖圖形和/或視頻内容 圖3是根據本發明的實施例的1示範性左視圖和右視圖三維 圖形幀的示意圖。如圖3所示,示出了左視圖三維圖形幀 310和右視圖三維圖形幀312。 [0059] ❹ 左視圖三維圖形幀310和/或右視圖三維圖形幀312可以包 括由圖形處理器210產'生的三維圖形β例如,三維圖形可 .: 以基於三維圖形資訊蠢生,例如,存儲在¥1^ 130中或由 VRU 130從VTU 110中接收的原始三維圖形。左視圖三維 圖形幀310可以包括從立體的左視圖角看到的圖形内容, 右視圖三維圖形幀312可以包括從立體的右視圖角看到的 圖形内容。就這一點而言,位於左視圖三維圖形幀31〇中 的物件的視角不同於位於右視圖三維圖形幀3 i 2中的相同 物件的視角。另外,左視圖三維圖形幀31〇中可能被某個 物件遮住的至少一部分背景圖案在右視圖三維圖形幀3 j 2 中是可見的,反之亦然,因為兩個幀31〇和312中的視角 099131218 表單編號A0101 第21頁/共40頁 1003084681-0 201138425 不同。 [0060] [0061] [0062] [0063] 在本發明的各種實施例甲,左視圖三維圖形幀31()和右視 圖三維圖形幀31 2可以包括同時發生的兩個視點,但是, 本發明並不受限於此。例如,根據兩個視圖31 〇和312是 如何按時間顯示的,由左視圖三維圖形幀31〇代表的時間 點與由右視圖三維圖形幀312代表的時間點是不同的。就 這一點而言,例如,由左視圖和右視圖幀310和312代表 的不同時間點可以與三維顯示設備114顯示這兩個視圖的 速率相對應。 左視圖三維圖形幢可以稱作左視圖圖形幀,右視圖三維 圖形幀可以稱作右視圖圖形賴。 矜讀 ’ . ‘I: i 圖4疋根據本發明的實施例的左視圖和右視圖三維圖形幀 的時序顯示的示意圖。如圖4所示,示出了包含左視圖三 維圖开)幢410和右視圖三維圖形賴41 2的三維時序幢系統 40 0。 左視圖三維圖形幀410和/务右視圖三維圖形幀412可以類 似於和/或大致等同於如圖3所示的左視圖三維圖形幀31〇 和/或右視圖三維圖形t貞312。三維時序+貞系統4〇〇可以包 括-個Φ貞流的_部分’其中㈣可以包括許多對三維鴨 中貞机中的二維幀對可以包括左視圖三維圖形幀和右視 圖 '維圖屯帕,其中每個Ί»貞可以由三維顯示設備114按順 序顯示。另休, r 不範性三維流可以包括各種三維圖形和/ 或—維視頻内容,例如,三維電視節目可以包括三維圖 升》、勺 — '匕S二維圖形的三維電視廣告和/或三維圖形用戶介 099131218 表單編號A0101 第22頁/共40頁 1003084681-0 201138425 [0064] [0065] θ [0066] Ο [0067] 面。 在本發明的各種實施例中,左視圖三維圖形幀41 0可以與 相應的左視圖三維視頻幀混合,右視圖三維圖形幀41 2可 以與相應的右視圖三維視頻幀混合。例如,三維顯示設 備114可以執行三維視頻與三維圖形幀的混合。 工作中,包含左視圖三維圖形幀410和右視圖三維圖形幀 412的時序幀系統400可以由三維時序顯示器顯示,例如 ,三維顯示設備114。顯示的時序幀系統400的觀看者可 以佩戴三維快門眼鏡,該眼鏡可以以與左視圖三維圖形 幀410和右視圖三維圖形幀412的顯示速率相對應的速率 來交替阻檔左眼視圖和右眼視圖。以這種方式,觀看者 可以感知三維圖形内容和/或混合視頻内容的立體左視圖 和右視圖。在本發明的各種實施例中,三維圖形可以與 二維視頻混合或疊加。 圖5是根據本發明實施例的包含左視圖和右視圖三維圖形 幀的圖元行的示範性偏振三維圖形幀的示意圖。如圖5所 示,示出了交替行三維圖形楨520。 交替行三維圖形幀520可以包括奇數和偶數行交替的左視 圖三維圖形Ί1貞圖元和右視圖三維圖形t貞圖元。例如,左 視圖三維圖形圖元可以從如圖3所示的左視圖三維圖形幀 310中亞取樣得到,右視圖三維圖形圖元可以從如圖3所 示的右視圖三維圖形幀312中亞取樣得到。 在本發明的一個實施例中,可以對左視圖三維圖形幀310 和/或右視圖三維圖形幀312進行亞取樣,這樣可以消除 099131218 表單編號A0101 第23頁/共40頁 1003084681-0 [0068] 201138425 [0069] [0070] 099131218 和/或不顯示每個幀中的一個不同部分的圖元。例如,奇 數行圖元可以從左視圖三維圖形幀31〇中取樣,偶數行圖 元可以從右視圖三維圖形幀312中取樣。進一步地,可以 將亞取樣的左視圖三維圖形幀31〇中的圖元和亞取樣的右 視圖三維圖形幀312中的圖元交錯以產生交替行三維圖形 幀520。交替行三維圖形幀52〇可以包括左視圖和右視圖 三維圖形圖元的交替行構成的單一幀。 在本發明的各種實施例中,交替行三維圖形幀52〇中的圖 元可以通過混合視頻圖元和三雄爾形圖元來產生。就這 一點而言,來自左視圖和右視圖三維視頻幀的視頻圖元 >料可以與來自左視圖和右权圖三維腾形幀和/或312 中的圖元資料分別混合,左視;圖和七視圖三維視頻幀類 似于左視圖和右視圖三維圖形幢31 0和/或.31 2。混合操作 可以在亞取樣之前或之後執行。例如,在一些情形中, 左視圖和右視圖二維視頻^貞以及.左視圖和右視圖三維圖 形幀可以在混合前進行亞取樣。在本發明的另一個實施 例令,左視圖和右視圖視頻幀可以與左視圖和右視圖三 維圖形幀310和/或312分別混合,然後亞取樣出奇數或偶 數行的混合左視圖幀及混合右視圖幀。可選地,來自左 視圖和右視圖三維圖形幀310和/或31 2的圖元可以與二維 視頻混合和/或疊加。 圖6是根據本發明實施例的包含左視圖和右視圖三維圖形 幀的圖元的棋盤模式的示範性偏振三維圖形幀的示意圖 。如圖6所示,示出了棋盤三維圖形幀630。 棋盤三維圖形幀630可以包括交替的左視圖三維圖形幢内 第24頁/共40頁 表單編號A0101 1003084681-0 [0071] 201138425 容和右視圖三維圖形幀内容的圖元位置。就這一點而言 ,棋盤三維圖形幀630的一行中的相鄰圖元位置和同一幀 中沿著一列的相鄰圖元可以在左視圖三維圖形圖元和右 視圖三維圖形圖元間交替。左視圖三維圖形圖元可以從 如圖3所示的左視圖三維圖形幀310中亞取樣,右視圖三 維圖形圖元可以從如圖3所示的右視圖三維圖形幀31 2中 亞取樣。 [0072] Ο ❹ 在本發明的一個實施例中,左視圖三維圖形幀310和/或 右視圖三維圖形幀31 2可以以兩種互補的棋盤模式亞取樣 ,這樣可以消除和/或不顯示每個幀中的一個不同部分的 圖元。就這一點而言,兩種包含0至Ν行以及0至Μ列的示 範性互補棋盤格子模式可以包括奇數行、奇數列圖元位 置和偶數行、偶數列圖元位置的第一模式以及奇數行、 偶數列圖元位置和偶數行、奇數列位置的第二模式。可 以將亞取樣的左視圖三維圖形幀310中的圖元和亞取樣的 右視圖三維圖形幀312中的圖元交錯以產生棋盤三維圖形 幀630。棋盤三維圖形幀630可以包括單一的三維圖形幀 ,該三維圖形幀包含在相鄰的垂直及水準圖元位置上的 交替的左視圖三維圖形圖元和右視圖三維圖形圖元。 [0073] 在本發明的各種實施例中,棋盤三維圖形幀630中的圖元 可以包括混合的視頻和三維圖形圖元。就這一點而言, 可以在棋盤模式亞取樣之前或之後執行混合操作。例如 ,在一些情形中,左視圖和右視圖三維視頻幀以及左視 圖和右視圖三維圖形幀310和31 2可以以互補棋盤模式進 行亞取樣。亞取樣的左視圖視頻圖元可以與亞取樣的左 099131218 表單編號Α0101 第25頁/共40頁 1003084681-0 201138425 視圖三維圖形圖元混合,類似地,亞取樣的右視圖視頻 圖元可以與亞取樣的右視圖三維圖形圖元混合。在本發 明的另一個實施例中,可以將左視圖和右視圖視頻幀與 左視圖和右視圖三維圖形幀310和/或31 2分別混合。隨後 ,以互補棋盤模式對混合的左視圖和右視圖幀進行亞取 樣。可選地,來自左視圖和右視圖三維圖形幀310和/或 312的圖元可以與二維視頻混合和/或疊加。 [0074] 工作中,包含左視圖三維圖形圖元的圖元位置和右視圖 三維圖形圖元的圖元位置的棋盤三維圖形幀630可以由偏 振三維顯示器來顯示,例如,三維顯示設備114。就這一 點而言,三維顯示設備114可以使用基於棋盤格子的偏振 片,該偏振片可以在不同的方向偏振左視圖和右視圖三 維圖形圖元的交替的圖元位置。所述不同的方向可以包 括,例如,不同的圓偏振方向或不同的線偏振方向。顯 示的棋盤三維圖形幀630的觀看者可以佩戴三維偏振眼鏡 。就這一點而言,三維偏振眼鏡可以包括一個左側或左 鏡頭,該鏡頭的偏振方向或角度與顯示的左視圖三維圖 形圖元位置的方向或角度相同。類似地,三維偏振眼鏡 可以包括一個右側或右鏡頭,該鏡頭的偏振方向或角度 與顯示的右視圖三維圖形圖元位置的方向或角度相同。 以這種方式,觀看者可以感知三維圖形内容和/或混合視 頻内容的立體左視圖及右視圖。 [0075] 儘管亞取樣是以一個幀和/或棋盤模式的奇數及偶數行進 行描述的,但本發明並不受限於此。例如,還可以使用 其他模式的亞取樣。進一步地,本發明並不受限於使用 099131218 表單編號A0101 第26頁/共40頁 1003084681-0 201138425 任意特定的三維顯示方法,而可以使用任意合適的方法 和/或方法的組合來區別左視圖和/或右視圖三維圖形内 容和/或視頻内容。例如,本發明的各種實施例可以使用 光譜過遽技術、立體電影技術和/或浦夫立希技術。 [0076] Ο 圖7是根據本發明實施例的產生左視圖和右視圖三維圖形 以及基於顯示類型處理該左視圖和右視圖三維圖形的示 範性步驟的流程圖。示範性步驟可以開始於步驟710。在 步驟712中,左視圖三維圖形幀310和右視圖三維圖形幀 312可以由,例如,圖形處理單元210產生。在步驟714 ,當左視圖和右視圖以時間順序顯示時,示範性步驟可 以繼續進行步驟716。在步驟716,左視圖和右視圖三維 圖形幀310和312可以由三維顯示設備114按時間交替顯 示,並且可以用三維快門眼鏡觀看。示範性步驟可以結 束於步驟718。在本發明的各種實施例中,三維顯示設備 114可以在顯示左視圖和右視圖幀之前,將左視圖和右視 圖三維圖形幀310和/或312與三維和/或二維視頻内容混 合。在步驟714,當左視圖和右視圖基於偏振技術顯示時 ,示範性步驟可以繼續進行步驟720。在步驟720,可以 將來自相應的左視圖和右視圖三維圖形幀310和312的圖 元進行亞取樣及交錯,以產生單個三維圖形巾貞,例如, 交替行三維圖形幀520或棋盤三維圖形幀630。就這一點 而言,可以在亞取樣之前或亞取樣之後將左視圖和/或右 視圖三維圖形圖元與三維和/或二維視頻混合。在步驟 722,可以利用多偏振角度或方向來顯示交錯的三維圖形 幀,並可以使用三維偏振眼鏡觀看。例如,可以利用基 099131218 表單編號A0101 第27頁/共40頁 1003084681-0 201138425 :行# /或基於棋盤的偏振模式來顯示交錯的三維圖形幀 〇 [0077] 在本發明的一個實施例中,第-三維圖形和/或三維視頻 處理設備中的一個或多個處理器和/或電路,例如,™ 130 了以根據二維顯示設備114使用的顯示格式,為將 在三維顯示設備丨14上顯示的三維内容產生左視圖三維圖 形幀,例如,左視圖三維圖形幀31〇,和相應的右視圖三 維圖形+ 貞,例如,右視圖三維圖形頻2。可以將左視圖 三維圖形幀和右視圖三維圖形幀傳送給三維顯示設備ιΐ4 就這點而5,第一二維圖形和/或三維視頻處理設備 ’例如VRU 13G ’可以包括以下—個或仰—:機頂盒和電 腦。左視圖三維圖形幀和/或右視圖三維圓形幀可以基於 一種類型的顯不格式產生。例如,左視圖三維圖形幀和 相應的右視圖三维圖形幀可以基於三維顯示設備114使用 的時序顯示格式產生。可選地,左視圖三鱗圖形幀和相 應的右視圖三維圖形幀可以基於三維顯示設備114使用的 偏振顯示格式產生。左視圖三維圖形幀和/或右視圖三維 圖形幀可以基於一個或多個顯示偏振模式進行亞取樣。 例如,左視圖三維圖形幀310和相應的右視圖三維圖形幀 312其中之一可以基於奇數圖元行進行亞取樣。另外,左 視圖二維圖形幀31 〇和相應的右視圖三維圖形幀3丨2中的 另一個可以基於偶數圖元行進行亞取樣。在本發明的另 一個實施例中,左視圖三維圖形幀31〇和相應的右視圖三 維圖形幀312其中之一可以基於棋盤模式中交替的圖元位 置進行亞取樣。另外,左視圖三維圖形幀3〗〇和相應的右 099131218 表單編號A0101 第28頁/共40頁 1003084681-0 201138425 ❸ 視圖三維圖形幀31 2中的另一個可以基於棋盤模式中互補 的交替圖元位置進行亞取樣。來自左視圖三維圖形幀和/ 或右視圖三維圖形幀的圖元可以與視頻圖元混合,例如 ,左視圖和右視圖視頻圖元和/或二維視頻圖元。在本發 明的各種實施例中,左視圖三維圖形幀和右視圖三維圖 形幀可以按如圖4所示的以時間順序顯示。在本發明的其 他實施例中,左視圖三維圖形幀和右視圖三維圖形幀可 以以互補模式進行亞取樣,如圖5和圖6所示,可以在單 一幀中交錯,並且可以利用左視圖和右視圖圖元的各種 偏振方向來顯示。以這種方式,就可以基於三維顯示設 備114的各種功能來產生並處理左視圖和/或右視圖三維 圖形幀了。 [0078] Ο [0079] 本發明的另一個實施例可以提供一種機器和/或電腦可讀 記憶體和/或媒介,其内存儲的機器代碼和/或電腦程式 包括至少一個代碼段,所述至少一個代碼段由機器和/或 電腦執行,從而使該機器和/或電腦執行上述基於三維 顯示器功能提供三維圖形的步驟。 因此,本發明可以通過硬體、軟體,或者軟、硬體結合 來實現。本發明可以在至少一個電腦系統中以集中方式 實現,或者由分佈在幾個互連的電腦系統中的不同部分 以分散方式實現。任何可以實現方法的電腦系統或其他 設備都是可適用的。常用軟硬體的結合可以是安裝有電 腦程式的通用電腦系統,通過安裝和執行程式控制電腦 系統,使其按方法運行。 [0080] 本發明還可以通過電腦程式產品進行實施,套裝程式含 099131218 表單編號Α0101 第29頁/共40頁 1003084681-0 201138425 能夠實現本發明方法的全部特徵,當其安裝到電腦系統 中時,可以實現本發明的方法。本文件中的電腦程式所 指的是:可以採用任何程式語言、代碼或符號編寫的一 組指令的任何運算式,該指令組使系統具有資訊處理能 力,以直接實現特定功能,或在進行下述一個或兩個步 驟之後實現特定功能:a)轉換成其他語言、編碼或符號 ;b)以不同的格式再現。 [0081] 雖然本發明是通過具體實施例進行說明的,本領域技術 人員應當明白,在不脫離本發明範圍的情況下,還可以 對本發明進行各種變換及等同替代。另外,針對特定情 形或材料,可以對本發明做各種修改,而不脫離本發明 的範圍。因此,本發明不局限於所公開的具體實施例, 而應當包括落入本發明權利要求範圍内的全部實施方式 〇 【圖式簡單說明】 [0082] 圖1是根據本發明的實施例的示範性三維視頻和/或三維 圖形通信系統的框圖; [0083] 圖2是根據本發明的實施例的用於基於三維顯示功能生 成和/或處理左視圖和/或右視圖三維圖形的示範性視頻 接收單元的示意圖; [0084] 圖3是根據本發明的實施例的示範性左視圖和右視圖三維 圖形幀的示意圖; [0085] 圖4是根據本發明的實施例的左視圖和右視圖三維圖形幀 的時序顯示的示意圖; 099131218 表單編號A0101 第30頁/共40頁 1003084681-0 201138425 . [0086] 圖5是根據本發明實施例的包含左視圖和右視圖三維圖 形幀的圖元行的示範性偏振三維圖形幀的示意圖; [0087] 圖6是根據本發明實施例的包含左視圖和右視圖三維圖 形幀的圖元的棋盤模式的示範性偏振三維圖形幀的示意 圖; [0088] 圖7是根據本發明實施例的生成左視圖和右視圖三維圖 形以及基於顯示類型處理該左視圖和右視圖三維圖形的 示範性步驟的流程圖。 【主要元件符號說明】 [0089] 視頻傳送單元(VTU) 110三維顯示設備114 [0090] 記憶體116通信網路120 [0091] 視頻接收單元(VRU) 130視頻處理系統200 [0092] 解碼器204主處理器208 [0093] 圖形處理器210記憶體和重播模組216
[0094] 本地記憶體218左混合模組284 [0095] 右混合模組286左視圖三維圖形幀310 [0096] 右視圖三維圖形幀312三維時序幀系統400 [0097] 左視圖三維圖形幀410右視圖三維圖形幀412 [0098] 交替行三維圖形幀520棋盤三維圖形幀630 1003084681-0 099131218 表單編號A0101 第31頁/共40頁

Claims (1)

  1. 201138425 七、申請專利範圍: 1 . 一種用於處理視頻的方法,其特徵在於,包括: 由三維圖形和/或三維視頻處理設備中的一個或多個處理 器和/或電路執行如下步驟: 基於三維顯示設備使用的顯示格式來生成將在所述三 維顯示設備上顯示的三維内容的左視圖三維圖形幀和相應 的右視圖三維圖形幀;以及 將所述左視圖三維圖形幀和所述相應的右視圖三維圖形幀 傳送給所述三維顯示設備。 2 .如申請專利範圍第1項所述的方法,其中,所述三維圖形 和/或三維視頻處理設備包括以下一個或多個:機頂盒和 電腦。 3 .如申請專利範圍第1項所述的方法,其中,所述方法進一 步包括基於所述三維顯示設備使用的時序顯示格式生成所 述左視圖三維圖形幀和所述相應的右視圖三維圖形幀。 4 .如申請專利範圍第1項所述的方法,其中,所述方法進一 步包括基於所述三維顯示設備使用的偏振顯示格式生成所 述左視圖三維圖形幀和所述相應的右視圖三維圖形幀。 5 .如申請專利範圍第1項所述的方法,其中,所述方法進一 步包括基於一個或多個顯示器偏振模式對所述左視圖三維 圖形幀和/或所述右視圖三維圖形幀進行亞取樣。 6 . —種用於處理視頻的系統,其特徵在於,包括: 第一三維圖形和/或三維視頻處理設備中的一個或多個處 理器和/或電路,其中所述一個或多個處理器和/或電路用 於: 099131218 表單編號A0101 第32頁/共40頁 1003084681-0 201138425 基於三維顯示設備使用的顯示格式來生成將在所述三 維顯示設備上顯示的三維内容的左視圖三維圖形幀和相應 的右視圖三維圖形幀;以及 將所述左視圖三維圖形幀和所述相應的右視圖三維圖形幀 傳送給所述三維顯示設備。 7 .如申請專利範圍第6項所述的系統,其中,所述三維圖形 和/或三維視頻處理設備包括以下一個或多個:機頂盒和 電腦。 8 .如申請專利範圍第6項所述的系統,其中,所述一個或多 個處理器和/或電路用於基於所述三維顯示設備使用的時 序顯示格式生成所述左視圖三維圖形幀和所述相應的右視 圖三維圖形f貞。 9 .如申請專利範圍第6項所述的系統,其中,所述一個或多 個處理器和/或電路用於基於所述三維顯示設備使用的偏 振顯示格式生成所述左視圖三維圖形幀和所述相應的右視 圖三維圖形t貞。 10 .如申請專利範圍第6項所述的系統,其中,所述一個或多 個處理器和/或電路用於基於一個或多個顯示器偏振模式 對所述左視圖三維圖形幀和/或所述右視圖三維圖形幀進 行亞取樣。 099131218 表單編號A0101 第33頁/共40頁 1003084681-0
TW099131218A 2009-09-15 2010-09-15 Method and system for rendering 3D graphics based on 3D display capabilities TW201138425A (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US24264409P 2009-09-15 2009-09-15
US12/604,980 US20110063298A1 (en) 2009-09-15 2009-10-23 Method and system for rendering 3d graphics based on 3d display capabilities

Publications (1)

Publication Number Publication Date
TW201138425A true TW201138425A (en) 2011-11-01

Family

ID=43304851

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099131218A TW201138425A (en) 2009-09-15 2010-09-15 Method and system for rendering 3D graphics based on 3D display capabilities

Country Status (4)

Country Link
US (1) US20110063298A1 (zh)
EP (1) EP2309766A3 (zh)
CN (1) CN102026007A (zh)
TW (1) TW201138425A (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9179136B2 (en) 2009-11-20 2015-11-03 Broadcom Corporation Method and system for synchronizing 3D shutter glasses to a television refresh rate
US20110134231A1 (en) * 2009-11-20 2011-06-09 Hulvey Robert W Method And System For Synchronizing Shutter Glasses To A Display Device Refresh Rate
JPWO2011125368A1 (ja) * 2010-04-05 2013-07-08 シャープ株式会社 立体画像表示装置、表示システム、駆動方法、駆動装置、表示制御方法、表示制御装置、プログラム、およびコンピュータ読み取り可能な記録媒体
CN102215405B (zh) * 2011-06-01 2013-10-23 深圳创维-Rgb电子有限公司 3d视频信号压缩编解码方法、装置及系统
US9743064B2 (en) * 2012-09-11 2017-08-22 The Directv Group, Inc. System and method for distributing high-quality 3D video in a 2D format
US20150334382A1 (en) * 2012-12-26 2015-11-19 Yan Xu Method and apparatus for content presentation

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1117288C (zh) * 1998-07-05 2003-08-06 肖高俊 一种偏振光视差式立体显示方法
CN1244762A (zh) * 1998-08-10 2000-02-16 袁灿伦 实现立体视频图象的方法及其装置
US6816158B1 (en) * 1998-10-30 2004-11-09 Lemelson Jerome H Three-dimensional display system
JP2002095018A (ja) * 2000-09-12 2002-03-29 Canon Inc 画像表示制御装置及び画像表示システム、並びに画像データの表示方法
TW476001B (en) * 2000-09-29 2002-02-11 Artificial Parallax Electronic 3D image display device
AU2003231508A1 (en) * 2002-04-25 2003-11-10 Sharp Kabushiki Kaisha Multimedia information generation method and multimedia information reproduction device
US20060203085A1 (en) * 2002-11-28 2006-09-14 Seijiro Tomita There dimensional image signal producing circuit and three-dimensional image display apparatus
JP2004274125A (ja) * 2003-03-05 2004-09-30 Sony Corp 画像処理装置および方法
US20070236493A1 (en) * 2003-05-27 2007-10-11 Keiji Horiuchi Image Display Apparatus and Program
EP1617370B1 (en) * 2004-07-15 2013-01-23 Samsung Electronics Co., Ltd. Image format transformation
KR100716992B1 (ko) * 2005-02-04 2007-05-10 삼성전자주식회사 스테레오 영상 부호화 및 복호화 방법과 그 장치
KR101468746B1 (ko) * 2005-09-16 2014-12-04 스테레오그래픽스 코포레이션 스테레오스코픽 포맷 변환기
KR20080059937A (ko) * 2006-12-26 2008-07-01 삼성전자주식회사 3d영상 디스플레이 장치 및 그의 3d영상신호 처리방법과3d영상 처리시스템
KR101539935B1 (ko) * 2008-06-24 2015-07-28 삼성전자주식회사 3차원 비디오 영상 처리 방법 및 장치

Also Published As

Publication number Publication date
US20110063298A1 (en) 2011-03-17
EP2309766A3 (en) 2012-08-08
CN102026007A (zh) 2011-04-20
EP2309766A2 (en) 2011-04-13

Similar Documents

Publication Publication Date Title
EP2537347B1 (en) Apparatus and method for processing video content
US8743178B2 (en) Multi-view video format control
US9578305B2 (en) Digital receiver and method for processing caption data in the digital receiver
US20110187821A1 (en) Process and system for encoding and playback of stereoscopic video sequences
Gotchev et al. Three-dimensional media for mobile devices
US20110273542A1 (en) Broadcast receiver and video data processing method thereof
US20110254925A1 (en) Image processing apparatus, image processing method, and program
EP2334092A1 (en) Methods and apparatuses for encoding, decoding, and displaying a stereoscopic 3D image
WO2006008613A1 (en) System and method for transferring video information
WO2009052730A1 (en) Video encoding decoding method and device and video codec
TW201138425A (en) Method and system for rendering 3D graphics based on 3D display capabilities
TW201204007A (en) Method for generating and rebuilding a stereoscopic-compatible video stream and related coding and decoding devices
Coll et al. 3D TV at home: Status, challenges and solutions for delivering a high quality experience
EP2676446B1 (en) Apparatus and method for generating a disparity map in a receiving device
JP2007312407A (ja) 立体画像表示装置およびその方法
Bourge et al. MPEG-C part 3: Enabling the introduction of video plus depth contents
US8416288B2 (en) Electronic apparatus and image processing method
KR101742993B1 (ko) 디지털 방송 수신기 및 디지털 방송 수신기에서 3d 효과 제공 방법
Salman et al. Overview: 3D Video from capture to Display
Zinger et al. iGLANCE project: free-viewpoint 3D video
KR101433082B1 (ko) 2차원 영상과 3차원 영상의 중간 정도 느낌을 주는 영상 변환 및 재생 방법
Aguirre et al. Embedded stereoscopic 3D camera system for mobile platforms
Ostermann 3D information coding
TW201407540A (zh) 影像處理方法與影像顯示系統
KR20130063603A (ko) 부가 영상 부복호화 방법 및 이러한 방법을 사용하는 장치