TWI790511B - 實現3d圖像顯示的方法、3d顯示設備 - Google Patents

實現3d圖像顯示的方法、3d顯示設備 Download PDF

Info

Publication number
TWI790511B
TWI790511B TW109142955A TW109142955A TWI790511B TW I790511 B TWI790511 B TW I790511B TW 109142955 A TW109142955 A TW 109142955A TW 109142955 A TW109142955 A TW 109142955A TW I790511 B TWI790511 B TW I790511B
Authority
TW
Taiwan
Prior art keywords
display
display device
posture
image
orientation
Prior art date
Application number
TW109142955A
Other languages
English (en)
Other versions
TW202135524A (zh
Inventor
刁鴻浩
玲溪 黃
Original Assignee
新加坡商視覺技術創投私人有限公司
大陸商北京芯海視界三維科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 新加坡商視覺技術創投私人有限公司, 大陸商北京芯海視界三維科技有限公司 filed Critical 新加坡商視覺技術創投私人有限公司
Publication of TW202135524A publication Critical patent/TW202135524A/zh
Application granted granted Critical
Publication of TWI790511B publication Critical patent/TWI790511B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/27Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/305Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/317Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using slanted parallax optics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/32Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using arrays of controllable light sources; using moving apertures or moving light sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/368Image reproducers using viewer tracking for two or more viewers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/383Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • General Physics & Mathematics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本發明公開了實現3D圖像顯示的方法,包括:檢測3D顯示設備的姿態變化,3D顯示設備包括多視點3D顯示幕,多視點3D顯示幕包括多個複合圖元和覆蓋多個複合圖元的柱鏡光柵,每個複合圖元包括多個複合子圖元,每個複合子圖元包括多個子圖元,柱鏡光柵傾斜設置從而沿3D顯示設備的第一方向覆蓋多個子圖元以限定多個第一姿態視點並沿3D顯示設備的第二方向覆蓋至少兩個複合圖元以限定至少兩個第二姿態視點;在3D顯示設備的姿態變化時,調整3D圖像的顯示朝向,以使3D圖像保持在3D顯示設備發生姿態變化前的初始顯示朝向。該方法使3D顯示設備在兩個姿態能顯示合適的3D效果。本發明還公開一種3D顯示設備、電腦可讀儲存介質、電腦程式產品。

Description

實現3D圖像顯示的方法、3D顯示設備
本發明關於3D顯示技術領域,例如關於實現3D圖像顯示的方法、3D顯示設備。
目前,3D顯示設備通過光柵折射圖元實現3D顯示效果。
在實現本發明實施例的過程中,發現相關技術中至少存在如下問題:顯示設備配置為在一個姿態下顯示合適的3D效果,不具備在另一個姿態下顯示3D效果的功能。
為了對披露的實施例的一些方面有基本的理解,下面給出了簡單的概括。該概括不是泛泛評述,也不是要確定關鍵/重要組成元素或描繪這些實施例的保護範圍,而是作為後面的詳細說明的序言。
本發明實施例提供了一種實現3D圖像顯示的方法、3D顯示設備、電腦可讀儲存介質、電腦程式產品,以解決3D顯示設備調整取向後無法顯示3D圖像的技術問題。
在一些實施例中,提供了一種實現3D圖像顯示的方法,包括:檢測3D顯示設備的姿態變化,其中,3D顯示設備包括多視點3D顯示幕,多視點3D顯示幕包括多個複合圖元和覆蓋多個複合圖元的柱鏡光柵,多個複合圖元中的每個複合圖元包括多個複合子圖元,多個複合子圖元中的每個複合子圖元包括多個子圖元,柱鏡光柵傾斜設置從而沿3D顯示設備的第一方向覆蓋多個子圖元以限定出多個第一姿態視點並沿3D顯示設備的第二方向覆蓋至少兩個複合圖元以限定出至少兩個第二姿態視點;和在檢測到3D顯示設備的姿態發生變化時,調整所顯示的3D圖像的顯示朝向,以使3D圖像保持在3D顯示設備發生姿態變化前的初始顯示朝向。
在一些實施例中,檢測3D顯示設備的姿態變化包括:檢測3D顯示設備的旋轉角速度,根據旋轉角速度確定3D顯示設備的姿態變化;調整3D圖像的顯示朝向包括:在3D圖像所在平面中旋轉3D圖像的顯示朝向,以使3D圖像保持在3D顯示設備發生姿態變化前的初始顯示朝向。
在一些實施例中,3D顯示設備的姿態包括以下至少之一:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態。
在一些實施例中,3D顯示設備在姿態變化前的第一姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的任一個;3D顯示設備在姿態變化後的第二姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的不同於第一姿態的任一個;調整3D圖像的顯示朝向包括:旋轉3D圖像以使3D圖像保持在對應於第一姿態的初始顯示朝向。
在一些實施例中,第一姿態、第二姿態中任一個為斜屏顯示姿態時,調整3D圖像的顯示朝向時還包括:以全屏顯示方式顯示3D圖像。
在一些實施例中,調整3D圖像的顯示朝向包括:在3D圖像所在平面中旋轉3D圖像的顯示朝向,以使3D圖像保持在初始顯示朝向範圍內;其中,初始顯示朝向範圍包括初始顯示朝向。
在一些實施例中,實現3D圖像顯示的方法還包括:根據使用者的觀看朝向調整3D圖像的顯示朝向,使得3D圖像的顯示朝向與使用者的觀看朝向一致。
在一些實施例中,使用者的觀看朝向包括:橫向觀看朝向、豎向觀看朝向、斜向觀看朝向中的任一個;實現3D圖像顯示的方法還包括:對使用者進行眼部定位,根據得到的眼部定位資料確定使用者的觀看朝向。
在一些實施例中,調整3D圖像的顯示朝向包括:基於調整後的3D圖像的顯示朝向,渲染3D顯示設備的多視點3D顯示幕中的子圖元。
在一些實施例中,使每個複合子圖元的多個子圖元在3D顯示設備的第一方向上按行排列。
在一些實施例中,使每個複合圖元的多個複合子圖元在3D顯示設備的第二方向上並列佈置。
在一些實施例中,使柱鏡光柵相對於3D顯示設備的第二方向的傾斜角θ以滿足以下條件的方式佈置:±1/i≤tanθ≤±1/2。
在一些實施例中,使柱鏡光柵相對於3D顯示設備的第二方向的傾斜角θ以滿足以下條件的方式佈置:tanθ=1/j,其中2≤j≤i,且j為整數。
在一些實施例中,提供了一種3D顯示設備,包括:處理器;和儲存有程式指令的記憶體;其中,處理器被配置為在執行程式指令時,執行如上所述的方法。
在一些實施例中,提供了一種3D顯示設備,包括:多視點3D顯示幕,包括多個複合圖元和覆蓋多個複合圖元的柱鏡光柵,多個複合圖元中的每個複合圖元包括多個複合子圖元,多個複合子圖元中的每個複合子圖元包括多個子圖元,柱鏡光柵傾斜設置從而沿3D顯示設備的第一方向覆蓋多個子圖元以限定出多個第一姿態視點並沿3D顯示設備的第二方向覆蓋至少兩個複合圖元以限定出至少兩個第二姿態視點;姿態檢測裝置,被配置為檢測3D顯示設備的姿態變化;和3D處理裝置,被配置為基於檢測到的3D顯示設備的姿態變化,調整所顯示的3D圖像的顯示朝向,以使3D圖像保持在3D顯示設備發生姿態變化前的初始顯示朝向。
在一些實施例中,姿態檢測裝置被配置為檢測3D顯示設備的旋轉角速度,根據旋轉角速度確定3D顯示設備的姿態變化;3D處理裝置被配置為在3D圖像所在平面中旋轉3D圖像的顯示朝向,以使3D圖像保持在3D顯示設備發生姿態變化前的初始顯示朝向。
在一些實施例中,3D顯示設備的姿態包括以下至少之一:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態。
在一些實施例中,3D顯示設備在姿態變化前的第一姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的任一個;3D顯示設備在姿態變化後的第二姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的不同於第一姿態的任一個;3D處理裝置被配置為旋轉3D圖像以使3D圖像保持在對應於第一姿態的初始顯示朝向。
在一些實施例中,3D處理裝置被配置為在第一姿態、第二姿態中的任一個為斜屏顯示姿態時,以全屏顯示方式顯示3D圖像。
在一些實施例中,3D處理裝置被配置為在3D圖像所在平面中旋轉3D圖像的顯示朝向,以使3D圖像保持在初始顯示朝向範圍內;其中,初始顯示朝向範圍包括初始顯示朝向。
在一些實施例中,3D處理裝置被配置為根據使用者的觀看朝向調整3D圖像的顯示朝向,使得3D圖像的顯示朝向與使用者的觀看朝向一致。
在一些實施例中,使用者的觀看朝向包括:橫向觀看朝向、豎向觀看朝向、斜向觀看朝向中的任一個;3D顯示設備還包括被配置為獲取眼部定位資料的眼部定位資料獲取裝置;3D處理裝置被配置為根據得到的眼部定位資料確定使用者的觀看朝向。
在一些實施例中,3D處理裝置被配置為基於調整後的3D圖像的顯示朝向,渲染3D顯示設備的多視點3D顯示幕中的複合圖元。
在一些實施例中,每個複合子圖元的多個子圖元在3D顯示設備的第一方向上按行排列。
在一些實施例中,每個複合圖元的多個複合子圖元在3D顯示設備的第二方向上並列佈置。
在一些實施例中,柱鏡光柵相對於3D顯示設備的第二方向的傾斜角θ滿足以下條件:±1/i≤tanθ≤±1/2。
在一些實施例中,柱鏡光柵相對於3D顯示設備的第二方向的傾斜角θ滿足以下條件:tanθ=1/j,其中2≤j≤i,且j為整數。
本發明實施例提供的電腦可讀儲存介質,儲存有電腦可執行指令,上述電腦可執行指令設置為執行上述的實現3D圖像顯示的方法。
本發明實施例提供的電腦程式產品,包括儲存在電腦可讀儲存介質上的電腦程式,上述電腦程式包括程式指令,當該程式指令被電腦執行時,使上述電腦執行上述的實現3D圖像顯示的方法。
本發明實施例提供的實現3D圖像顯示的方法、3D顯示設備,以及電腦可讀儲存介質、電腦程式產品,可以實現以下技術效果: 3D顯示設備在不同姿態下都能顯示合適的3D效果,而不會因3D顯示設備的姿態調整而受影響。
以上的總體描述和下文中的描述僅是示例性和解釋性的,不用於限制本發明。
為了能夠更加詳盡地瞭解本發明實施例的特點與技術內容,下面結合附圖對本發明實施例的實現進行詳細闡述,所附附圖僅供參考說明之用,並非用來限定本發明實施例。
根據本發明的實施例提供了一種3D顯示設備,包括多視點3D顯示幕(例如:多視點裸眼3D顯示幕)、姿態檢測裝置、3D信號介面和3D處理裝置。多視點3D顯示幕包括多個複合圖元和覆蓋這些複合圖元的柱鏡光柵,各複合圖元包括多個複合子圖元,各複合子圖元包括i個子圖元。在一些實施例中,多視點3D顯示幕具有顯示面板,多個複合子圖元被形成在顯示面板中,而柱鏡光柵覆蓋顯示面板。在一些實施例中,i≥3。
在一些實施例中,3D處理裝置與多視點3D顯示幕通信連接。在一些實施例中,3D處理裝置與多視點3D顯示幕的驅動裝置通信連接。
在一些實施例中,各複合子圖元包括在3D顯示設備的第一方向上(例如長度方向或橫向)按行排列的i個同色子圖元。在一些實施例中,按行排列的i個同色子圖元可以是成單行、成兩行或成多於兩行的多行佈置。
柱鏡光柵傾斜設置在面板上,從而柱鏡光柵沿3D顯示設備的第一方向(例如長度方向或橫向)覆蓋i個子圖元以限定出i個第一姿態視點,並沿3D顯示設備的第二方向(例如寬度方向或豎向)覆蓋至少兩個複合圖元以限定出至少兩個第二姿態視點。在一些實施例中,柱鏡光柵沿3D顯示設備的第一方向覆蓋的i個子圖元是屬於同一複合子圖元的i個子圖元。在一些實施例中,柱鏡光柵沿3D顯示設備的第一方向覆蓋的i個子圖元屬於不同的複合子圖元。例如,在i=6的情況下,柱鏡光柵沿3D顯示設備的第一方向覆蓋相鄰的兩個複合子圖元,其中覆蓋了一個複合子圖元的4個子圖元,並覆蓋了另一個複合子圖元的2個子圖元。在一些實施例中,柱鏡光柵沿3D顯示設備的第一方向覆蓋的i個子圖元可以不屬於同一複合圖元。
在一些實施例中,多視點3D顯示幕可以限定出3D顯示設備在第一姿態下的第一姿態播放區域和3D顯示設備在第二姿態下的第二姿態播放區域。姿態檢測裝置配置為檢測3D顯示設備的姿態。3D 信號介面配置為接受3D信號。3D處理裝置配置為處理3D信號以在第一姿態播放區域內播放來自3D信號的3D圖像和在第二姿態播放區域內播放來自3D信號的3D 圖像。在一些實施例中,3D顯示設備的姿態包括以下至少之一:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態。在一些實施例中,3D顯示設備在姿態變化前的第一姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的任一個,且3D顯示設備在姿態變化後的第二姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的不同於所述第一姿態的任一個。
圖1A示出了根據本發明實施例的3D顯示設備100。如圖1A所示,3D顯示設備100包括多視點3D顯示幕110、3D處理裝置130、接收3D信號如3D視頻信號的視頻幀的3D信號介面(如視頻信號介面140)、處理器120和姿態檢測裝置180。在一些實施例中,3D信號可以是靜態圖像。3D顯示設備100可限定出例如沿長度方向或橫向的第一方向,以及例如沿寬度方向或豎向的第二方向。
多視點3D顯示幕110可包括顯示面板111和覆蓋顯示面板111的柱鏡光柵(未示出),顯示面板111可設有m列n行(m×n)個複合圖元400並因此限定出m×n的顯示解析度。
圖1A示意性地示出了m×n個複合圖元400中的一個複合圖元400,包括由i=6個紅色子圖元R構成的紅色複合子圖元410、由i=6個綠色子圖元G構成的綠色複合子圖元420和由i=6個藍色子圖元B構成的藍色複合子圖元430。在其他實施例中可以想到i為大於或小於6的其他值。
在一些實施例中,每個複合圖元成正方形。每個複合圖元中的所有複合子圖元彼此平行佈置。
在本發明的實施例中,每個複合子圖元具有對應於視點的相應子圖元。每個複合子圖元的多個子圖元在多視點3D顯示幕的橫向上成行佈置,且成行的多個子圖元的顏色相同。由於3D顯示設備的多個視點是大致沿多視點3D顯示幕的橫向排布的,這樣,在使用者移動導致眼部處於不同的視點時,需要相應動態渲染每個複合子圖元中對應於相應視點的不同子圖元。由於每個複合子圖元中的同色子圖元成行排列,所以能夠避免由於視覺暫留帶來的串色問題。此外,由於光柵的折射,有可能會在相鄰的視點位置看見當前顯示子圖元的一部分,而通過同色、同行排列,即使當前顯示子圖元的一部分被看見,也不會出現混色的問題。
如上所述,3D顯示設備可具有多個不同的姿態。參見圖2A,3D顯示設備100具有例如為橫屏顯示姿態的第一姿態,多視點3D顯示幕110可以限定出適配於第一姿態的第一姿態播放區域171。參見圖2B,3D顯示設備100還可具有例如為豎屏顯示姿態的第二姿態,多視點3D顯示幕110可以限定出適配於第二姿態的第二姿態播放區域172。
在一些實施例中,第一姿態播放區域171和第二姿態播放區域172可以具有不同的尺寸。第一姿態播放區域171的面積例如可以占多視點3D顯示幕110的面積的80%至100%。第二姿態播放區域172的面積例如可以占多視點3D顯示幕110的面積的30%至60%。在3D顯示設備100處於第二姿態時,第二姿態播放區域172例如可以位於多視點3D顯示幕110的中部。在一些實施例中,第一姿態播放區域171和第二姿態播放區域172可具有不同的顯示解析度。
在一些實施例中,柱鏡光柵傾斜設置在顯示面板上並在3D顯示設備的不同姿態下與複合圖元或複合圖元的複合子圖元中的子圖元配合而分別形成3D效果。多個柱鏡光柵可以在顯示面板表面彼此平行地並排佈置。
在一些實施例中,柱鏡光柵相對於3D顯示設備的第二方向的傾斜角θ滿足以下條件:±1/i≤tanθ≤±1/2。
在一些實施例中,tanθ=1/j,其中2≤j≤i,且j為整數。
參見圖3A和圖3B,示出了柱鏡光柵的一種示例性設置方式。在所示出的實施例中,每個複合圖元成正方形並包含沿3D顯示設備的第二方向並列設置的三個複合子圖元,分別為紅色複合子圖元、綠色複合子圖元和藍色複合子圖元。各複合子圖元包含i=6個同色子圖元,且各複合子圖元的i=6個同色子圖元在3D顯示設備的第一方向上並排佈置。柱鏡光柵190相對於3D顯示設備的第二方向以傾斜角θ設置在顯示面板111上,且tanθ=1/3。如圖所示,柱鏡光柵190沿3D顯示設備的第一方向覆蓋i=6個子圖元,並限定出在3D顯示設備的第一姿態下的i=6個第一姿態視點Vi1-Vi6(如圖3A所示),而且柱鏡光柵190沿3D顯示設備的第二方向覆蓋三個複合圖元,並限定出在3D顯示設備的第二姿態下的3個第二姿態視點Vj1-Vj3(如圖3B所示)。
可以想到在其他實施例中,柱鏡光柵沿3D顯示設備的第一方向覆蓋i個子圖元,並沿3D顯示設備的第二方向覆蓋其他數量的複合圖元。在一些實施例中,i≥3。
在一些實施例中,柱鏡光柵相對於3D顯示設備的第二方向的傾斜角θ滿足tanθ=1/2。柱鏡光柵沿3D顯示設備的第一方向覆蓋i個子圖元,i=6,從而限定出3D顯示設備在第一姿態下的6個第一姿態視點,並沿3D顯示設備的第二方向覆蓋2個複合圖元,從而限定出3D顯示設備在第二姿態下的2個第二姿態視點。
在一些實施例中,柱鏡光柵相對於3D顯示設備的第二方向的傾斜角θ滿足tanθ=1/4。柱鏡光柵沿3D顯示設備的第一方向覆蓋i個子圖元,i=6,從而限定出3D顯示設備在第一姿態下的6個第一姿態視點,並沿3D顯示設備的第二方向覆蓋4個複合圖元,從而限定出3D顯示設備在第二姿態下的4個第二姿態視點。
在一些實施例中,柱鏡光柵相對於3D顯示設備的第二方向的傾斜角θ滿足tanθ=1/5。柱鏡光柵沿3D顯示設備的第一方向覆蓋i個子圖元,i=6,從而限定出3D顯示設備在第一姿態下的6個第一姿態視點,並沿3D顯示設備的第二方向覆蓋5個複合圖元,從而限定出3D顯示設備在第二姿態下的5個第二姿態視點。
在一些實施例中,柱鏡光柵相對於3D顯示設備的第二方向的傾斜角θ滿足tanθ=1/6。柱鏡光柵沿3D顯示設備的第一方向覆蓋i個子圖元,i=6,從而限定出3D顯示設備在第一姿態下的6個第一姿態視點,並沿3D顯示設備的第二方向覆蓋6個複合圖元,從而限定出3D顯示設備在第二姿態下的6個第二姿態視點。
如圖1A所示的實施例,3D處理裝置130還可以選擇性地包括暫存器131,以便緩存所接收到的視頻幀。
3D顯示設備100還可包括通過視頻信號介面140通信連接至3D處理裝置130的處理器120。在一些實施例中,處理器120被包括在電腦或智慧終端機、如移動終端中或作為處理器裝置。
在一些實施例中,視頻信號介面140為連接處理器120與3D處理裝置130的內部介面。這樣的3D顯示設備100例如可以是移動終端,視頻信號介面140可以為MIPI、mini-MIPI介面、LVDS介面、min-LVDS介面或Display Port介面。
在一些實施例中,如圖1A所示,3D顯示設備100的處理器120還可包括寄存器121。寄存器121可配置為暫存指令、數據和地址。
姿態檢測裝置180可以與處理器120通信連接。姿態檢測裝置180可以為重力感測器或陀螺儀感測器。
在一些實施例中,3D顯示設備還包括配置為獲取眼部定位資料的眼部定位資料獲取裝置,例如眼部定位裝置或眼部定位資料介面。例如圖1B所示的實施例中,3D顯示設備100包括通信連接至3D處理裝置130的眼部定位裝置150,由此3D處理裝置130可以直接接收眼部定位資料。在圖1C所示的實施例中,眼部定位裝置(未示出)例如可以直接連接處理器120,而3D處理裝置130經由眼部定位資料介面160從處理器120獲得眼部定位資料。在另一些實施例中,眼部定位裝置可同時連接處理器和3D處理裝置,使得一方面3D處理裝置130可以直接從眼部定位裝置獲取眼部定位資料,另一方面可以眼部定位裝置獲取的其他資訊可以被處理器處理。
示例性的,圖4示出了例如為移動終端、如智慧蜂窩電話或平板電腦的3D顯示設備200的硬體結構示意圖。在所示出的實施例中,3D顯示設備200可以包括處理器201、外部記憶體介面211、(內部)記憶體210、通用序列匯流排(USB)介面213、充電管理模組214、電源管理模組215、電池216、移動通信模組240、無線通信模組242、天線239和241、音頻模組234、揚聲器235、受話器236、麥克風237、耳機介面238、按鍵209、馬達208、指示器207、使用者標識模組(SIM)卡介面221、多視點3D顯示幕202、3D處理裝置203、3D信號介面(如視頻信號介面204)、攝影裝置206、眼部定位裝置205,以及感測器模組220等。
在一些實施例中,感測器模組220可以包括接近光感測器221、環境光感測器222、壓力感測器223、氣壓感測器224、磁感測器225、重力感測器226、陀螺儀感測器227、加速度感測器228、距離感測器229、溫度感測器230、指紋感測器231、觸摸感測器232和骨傳導感測器233等。
在一些實施例中,處理器201可以包括一個或一個以上處理單元。在一些實施例中,處理器201可以包括以下之一或以下至少兩種的組合:應用處理器(AP)、調製解調處理器、基帶處理器、圖形處理器(GPU)、圖像信號處理器(ISP)、控制器、記憶體、視頻編解碼器、數位信號處理器(DSP)、基帶處理器、神經網路處理器(NPU)等。不同的處理單元可以是獨立的器件,也可以集成在一個或一個以上處理器中。
在一些實施例中,處理器201可以包括一個或一個以上介面。介面可以包括積體電路(I2C)介面、積體電路內置音頻(I2S)介面、脈衝碼調制(PCM)介面、通用非同步收發傳輸器(UART)介面、移動產業處理器介面(MIPI)、通用輸入輸出(GPIO)介面、使用者標識模組(SIM)介面、通用序列匯流排(USB)介面等。
USB介面213是符合USB標準規範的介面,可以是Mini USB介面、Micro USB介面、USB Type C介面等。USB介面213可以用於連接充電器為3D顯示設備200充電,也可以用於3D顯示設備200與週邊設備之間傳輸資料。也可以用於連接耳機並通過耳機播放音頻。
3D顯示設備200的無線通信功能可以通過天線241和239、移動通信模組240、無線通信模組242、調製解調處理器或基帶處理器等實現。
在一些實施例中,3D顯示設備200的天線239與移動通信模組240耦合,天線241與無線通信模組242耦合,使得3D顯示設備200可以通過無線通信技術與網路以及其他設備通信。
在一些實施例中,用於接收3D視頻信號的外部介面可以包括USB介面213、移動通信模組240、無線通信模組242或它們的任意組合。
記憶體210可以用於儲存電腦可執行程式碼,可執行程式碼包括指令。處理器201通過運行儲存在記憶體210中的指令,從而執行3D顯示設備200的各種功能應用以及資料處理。
外部記憶體介面212可以用於連接外部儲存卡,例如Micro SD卡,實現擴展3D顯示設備200的儲存能力。外部儲存卡通過外部記憶體介面212與處理器201通信,實現資料儲存功能。
在一些實施例中,3D顯示設備的記憶體可以包括(內部)記憶體210、外部記憶體介面212連接的外部儲存卡或其組合。
在本發明的實施例中,攝影裝置206可以採集圖像或視頻。
在一些實施例中,3D顯示設備200通過視頻信號介面204、3D處理裝置203、多視點3D顯示幕202,以及應用處理器等實現顯示功能。
在一些實施例中,3D顯示設備200可包括GPU218,例如在處理器201內用於對3D視頻圖像進行處理,也可以對2D視頻圖像進行處理。
在一些實施例中,3D顯示設備200還包括配置為對數位視頻壓縮或解壓縮的視頻編解碼器219。
在一些實施例中,視頻信號介面204配置為將經GPU218或編解碼器219或兩者處理的3D視頻信號、例如解壓縮的3D視頻信號的視頻幀輸出至3D處理裝置203。
在一些實施例中,GPU218或編解碼器219集成有格式調整器。
在一些實施例中,多視點3D顯示幕202用於顯示三維(3D)圖像或視頻等。多視點3D顯示幕202可以包括顯示面板和光柵。
在一些實施例中,眼部定位裝置205通信連接至3D處理裝置203,從而3D處理裝置203可以基於眼部定位資料渲染複合圖元(複合子圖元)中的相應子圖元。在一些實施例中,眼部定位裝置205還可連接處理器201,例如旁路連接處理器201。
3D顯示設備200可以通過音頻模組234、揚聲器235、受話器236、麥克風237、耳機介面238以及應用處理器等實現音頻功能。
按鍵209包括開機鍵、音量鍵等。按鍵209可以是機械按鍵,也可以是觸摸式按鍵。3D顯示設備200可以接收按鍵輸入,產生與3D顯示設備200的使用者設置以及功能控制有關的鍵信號輸入。
馬達208可以產生振動提示。馬達208可以配置為振動以提示來電,也可以配置為振動以回饋觸摸。
SIM卡介面211配置為連接SIM卡。在一些實施例中,3D顯示設備200採用嵌入式SIM卡(eSIM)。
壓力感測器223配置為感受壓力信號,可以將壓力信號轉換成電信號。
氣壓感測器224用於測量氣壓。
磁感測器225包括霍爾感測器。
重力感測器226作為姿態檢測裝置能夠將運動或重力轉換為電信號,配置為測量傾斜角、慣性力、衝擊及震動等參數。
陀螺儀感測器227作為姿態檢測裝置配置為確定3D顯示設備200的運動姿態。
借助重力感測器226或陀螺儀感測器227能夠檢測到3D顯示設備200處於第一姿態或是處於不同於第一姿態的第二姿態,或是3D顯示設備在第一姿態與第二姿態之間轉換。
加速度感測器228可檢測3D顯示設備200在各個方向上(一般為三軸)加速度的大小。
距離感測器229可配置為測量距離。
溫度感測器230可配置為檢測溫度。
指紋感測器231可配置為採集指紋。
觸摸感測器232可以設置於多視點3D顯示幕202中,由觸摸感測器232與多視點3D顯示幕202組成觸控式螢幕,也稱“觸控屏”。
骨傳導感測器233可以獲取振動信號。
充電管理模組214配置為從充電器接收充電輸入。
電源管理模組215配置為將電池216和充電管理模組214連接至處理器201。電源管理模組215接收電池216或充電管理模組214中至少一項的輸入,為處理器201、記憶體210、外部記憶體、多視點3D顯示幕202、攝影裝置206和無線通信模組242等供電。在另一些實施例中,電源管理模組215和充電管理模組214也可以設置於同一個器件中。
3D顯示設備200的軟體系統可以採用分層架構、事件驅動架構、微核架構、微服務架構或雲架構。本發明所示的實施例以分層架構的安卓系統為例,示例性說明3D顯示設備200的軟體結構。但可以想到,本發明的實施例可以在不同的軟體系統、如作業系統中實施。
圖5是例如為移動終端的3D顯示設備200的軟體結構示意圖。分層架構將軟體分成若干個層。層與層之間通過軟體介面通信。在一些實施例中,將安卓系統分為四層,從上至下分別為應用程式層510、框架層520、核心類庫和運行時(Runtime)530,以及內核層540。
應用程式層510可以包括一系列應用套裝程式。如圖6所示,應用套裝程式可以包括藍牙、WLAN、導航、音樂、相機、日曆、通話、視頻、圖庫、地圖和短資訊等應用程式。
框架層520為應用程式層的應用程式提供應用程式設計介面(API)和程式設計框架。如圖5所示,框架層520可以包括資源管理器、電話管理器、內容管理器、通知管理器、視窗管理器、視圖系統和安裝包管理器等。
安卓Runtime(運行時)包括核心庫和虛擬機器。安卓Runtime負責安卓系統的調度和管理。 核心庫包含兩部分:一部分是java語言要調用的功能函數,另一部分是安卓的核心庫。
應用程式層和框架層運行在虛擬機器中。虛擬機器將應用程式層和框架層的java檔執行為二進位檔案。虛擬機器用於執行物件生命週期的管理,堆疊管理,執行緒管理,安全和異常的管理,以及垃圾回收等功能。
核心類庫可以包括多個功能模組。例如:3D圖形處理庫(例如:OpenGL ES)、表面管理器、圖像處理庫、媒體庫和圖形引擎(例如:SGL)等。
內核層540是硬體和軟體之間的層。內核層至少包含攝影頭驅動、音視頻界面、通話介面、Wifi介面、感測器驅動、電源管理和GPS介面。
下面參見圖6來描述根據本發明的實施例的3D顯示設備內的3D視頻信號的傳輸和顯示。如上所述,3D顯示設備對應於各姿態而限定出多個視點。使用者的眼部在對應於各姿態的視點(空間位置)處可看到多視點3D顯示幕中各複合圖元或各複合子圖元中相應的子圖元的顯示。使用者的雙眼在不同的視點看到的兩個不同畫面形成視差,在大腦中合成3D的畫面。
在本發明的一些實施例中,3D處理裝置130通過例如作為內部介面的視頻信號介面140從處理器120接收例如為解壓縮的3D視頻信號的視頻幀。各視頻幀可包含兩幅圖像或者包含複合圖像,或者由其構成。
在一些實施例中,兩幅圖像或複合圖像可以包括不同類型的圖像以及可以呈各種排布形式。
如圖6所示,3D視頻信號的視頻幀包含並列的兩幅圖像601、602或由其構成。在一些實施例中,兩幅圖像可以分別為左眼視差圖像和右眼視差圖像。在一些實施例中,兩幅圖像可以分別為渲染色彩圖像和景深圖像。
在一些實施例中,3D視頻信號的視頻幀包含交織的複合圖像。在一些實施例中,複合圖像可以為交織的左眼和右眼視差複合圖像、交織的渲染色彩和景深複合圖像。
在一些實施例中,至少一個3D處理裝置130在接收到包括兩幅圖像601、602的視頻幀後,基於兩幅圖像之一渲染各複合子圖元中至少一個子圖元並基於兩幅圖像中的另一幅渲染各複合子圖元中至少另一個子圖元。
在另一些實施例中,至少一個3D處理裝置在接收到包括複合圖像的視頻幀後,基於複合圖像渲染各複合子圖元中至少兩個子圖元。例如,根據複合圖像中的第一圖像(部分)渲染至少一個子圖元,根據第二圖像(部分)渲染至少另一個子圖元。
在一些實施例中,對子圖元的渲染可以是基於即時眼部定位資料的動態渲染。即時眼部定位資料可通過眼部定位裝置或眼部定位資料介面獲得。
在一些實施例中,3D顯示設備的眼部定位裝置配置為與3D顯示設備的姿態檢測裝置通信連接以與3D顯示設備的姿態相關地獲取使用者眼部所處的視點的位置。姿態檢測裝置例如可以是陀螺儀感測器或重力感測器,可以檢測3D顯示設備處於第一姿態、第二姿態以及在兩個姿態之間的切換。
在一些實施例中,與3D顯示設備的姿態相關地獲取使用者眼部所處的視點的位置包括在3D顯示設備處於第一姿態時,獲取使用者眼部所處的第一姿態視點的位置。在另一些實施例中,與3D顯示設備的姿態相關地獲取使用者眼部所處的視點的位置包括在3D顯示設備處於第二姿態時,獲取使用者眼部所處的第二姿態視點的位置。
在一些實施例中,3D處理裝置配置為基於使用者眼部所處的第一姿態視點,根據來自3D信號的3D圖像在第一姿態播放區域內渲染相關子圖元。
參見圖3A,示出了對應於第一姿態的動態渲染的一個示例。如圖3A所示,當姿態檢測裝置檢測到3D顯示設備處於第一姿態或從第二姿態朝著第一姿態切換時,眼部定位裝置檢測到使用者雙眼所對應的第一姿態視點,例如左眼對應於第一姿態視點中的視點Vi2,且右眼對應於第一姿態視點中的Vi5。基於3D視頻信號的視頻幀生成使用者雙眼所對應的第一姿態視點的圖像,並在第一播放區域171內渲染複合子圖元中對應於第一姿態視點Vi2、Vi5的子圖元。圖3A示意性示出了對部分子圖元的渲染。
在一些實施例中,3D處理裝置配置為基於使用者眼部所處的第二姿態視點,根據3D信號的3D圖像在第二姿態播放區域內渲染被覆蓋的複合圖元中對應於第二姿態視點的相關子圖元。
參見圖3B,示出了對應於第二姿態的動態渲染的一個示例。如圖3B所示,當姿態檢測裝置檢測到3D顯示設備處於第二姿態或從第一姿態朝著第二姿態切換時,眼部定位裝置檢測到使用者雙眼所對應的第二姿態視點,例如左眼對應於第二姿態視點中的視點Vj1,且右眼對應於第二姿態視點中的Vj3。基於3D視頻信號的視頻幀生成使用者雙眼所對應的第二姿態視點的圖像,並在第二播放區域172內渲染被柱鏡光柵190覆蓋的三個複合圖元中對應於第二姿態視點Vj1、Vj3的子圖元。圖3B示意性示出了對部分被覆蓋的複合圖元中的子圖元的渲染。
在一些實施例中,3D顯示設備還包括格式調整器(未示出),配置為調整3D信號的格式,例如預處理3D視頻信號的視頻幀,以適於分別在第一姿態播放區域內和第二姿態播放區域內播放3D圖像。例如,當3D信號的解析度與第一姿態播放區域或第二姿態播放區域的顯示解析度不一致時,格式調整器將3D信號的解析度進行預處理,以適配於第一姿態播放區域或第二姿態播放區域的顯示解析度。
根據本發明的實施例提供了在如上所述的3D顯示設備中實現3D圖像顯示的方法。實現3D圖像顯示的方法包括: 檢測3D顯示設備的姿態,包括檢測3D顯示設備所處的姿態、或者檢測3D顯示設備的姿態變化,或者檢測這兩者; 在檢測到3D顯示設備發生姿態變化時,調整3D圖像的顯示,以使3D圖像的顯示朝向保持在3D顯示設備發生姿態變化前的初始顯示朝向。這樣可以使顯示的3D圖像始終適配於使用者的觀看朝向。
在一些實施例中,如圖7所示,實現3D圖像顯示的方法包括: S100,檢測3D顯示設備的姿態變化;和 S200,在檢測到3D顯示設備的姿態發生變化時,調整所顯示的3D圖像的顯示朝向,以使3D圖像保持在3D顯示設備發生姿態變化前的初始顯示朝向。
在一些實施例中,檢測3D顯示設備所處的姿態或姿態變化可以由姿態檢測裝置完成,而調整3D圖像的顯示,以使3D圖像的顯示朝向保持在3D顯示設備發生姿態變化前的初始顯示朝向可以由3D處理裝置完成。
在一些實施例中,檢測3D顯示設備所處的姿態或姿態變化包括:檢測3D顯示設備的旋轉角速度,根據旋轉角速度確定3D顯示設備所處的姿態或姿態變化。
在一些實施例中,調整3D圖像的顯示朝向包括:在3D圖像所在平面中旋轉3D圖像的顯示朝向,以使3D圖像保持在3D顯示設備發生姿態變化前的初始顯示朝向。
在一些實施例中,3D顯示設備的姿態包括以下至少之一:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態。
在一些實施例中,3D顯示設備在姿態變化前的第一姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的任一個,3D顯示設備在姿態變化後的第二姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的不同於所述第一姿態的任一個。
在一些實施例中,調整3D圖像的顯示朝向包括:旋轉3D圖像以使3D圖像保持在對應於第一姿態的初始顯示朝向。這樣,對於使用者來說,不論怎樣調整3D顯示設備的姿態,所看到的3D圖像的顯示朝向都是一致的。
在一些實施例中,第一姿態、第二姿態中任一個為斜屏顯示姿態時,調整3D圖像的顯示朝向時還包括:以全屏顯示方式顯示所述3D圖像。
在一些實施例中,調整3D圖像的顯示朝向包括:在3D圖像所在平面中旋轉3D圖像的顯示朝向,以使3D圖像保持在初始顯示朝向範圍內;其中,初始顯示朝向範圍包括初始顯示朝向。這樣,所顯示的3D圖像的顯示朝向可以根據使用者的運動而微調或調整,以適應使用者的運動。
在一些實施例中,在3D顯示設備中實現顯示3D圖像的方法還包括:根據使用者的觀看朝向調整3D圖像的顯示朝向,使得3D圖像的顯示朝向與使用者的觀看朝向一致。使用者的觀看朝向可以包括橫向觀看朝向、豎向觀看朝向、斜向觀看朝向中的任一個。
在一些實施例中,還可以對使用者進行眼部定位,根據得到的眼部定位資料確定使用者的觀看朝向。這例如可以通過眼部定位裝置實現。
在一些實施例中,調整3D圖像的顯示朝向包括:基於調整後的(或者說是3D顯示設備的姿態改變後的)3D圖像的顯示朝向,渲染3D顯示設備的多視點3D顯示幕中的複合圖元。例如在一個姿態下,基於多視點3D顯示幕中的每個複合子圖元的子圖元與視點的對應關係,依據要顯示的3D圖像來渲染由眼部定位資料確定的視點所對應的子圖元。或者,又例如在另一個姿態下,基於多視點3D顯示幕中的每個複合圖元與視點的對應關係,依據要顯示的3D圖像來渲染由眼部定位資料確定的視點所對應的複合圖元中的子圖元。
上述調整3D圖像的顯示朝向以及對子圖元的渲染可以由3D處理裝置完成。
在一些實施例中,在3D顯示設備中實現顯示3D圖像的方法包括: 獲取3D信號; 回應3D顯示設備處於第一姿態或向第一姿態切換的信號,在第一姿態播放區域內播放來自3D信號的3D圖像;和 回應於3D顯示設備處於第二姿態或向第二姿態切換的信號,在第二姿態播放區域內播放來自3D信號的3D圖像。
在本發明的實施例中,3D顯示設備的“姿態”等同於3D顯示設備的“取向”。
在一些實施例中,切換方法還包括:與3D顯示設備的姿態相關地獲取即時眼部定位資料。
在一些實施例中,與3D顯示設備的姿態相關地獲取即時眼部定位資料包括:回應於3D顯示設備處於第一姿態的信號,獲取使用者眼部所處的第一姿態視點的位置。
在一些實施例中,與3D顯示設備的姿態相關地獲取即時眼部定位資料包括:回應於3D顯示設備處於第二姿態的信號,獲取使用者眼部所處的第二姿態視點的位置。
在一些實施例中,在第一姿態播放區域內播放來自3D信號的3D圖像包括:基於使用者眼部所處的第一姿態視點,根據3D信號的3D圖像在第一姿態播放區域內渲染各複合子圖元的同色子圖元中的相關子圖元。
在一些實施例中,在第二姿態播放區域內播放來自3D信號的3D圖像包括:基於使用者眼部所處的第二姿態視點,根據3D信號的3D圖像在第二姿態播放區域內渲染被覆蓋的複合圖元中對應於第二姿態視點的相關子圖元。
本發明實施例提供了一種3D顯示設備300,參考圖8,3D顯示設備300包括處理器320和記憶體310。3D顯示設備300還可以包括通信介面340和匯流排330。處理器320、通信介面340和記憶體310通過匯流排330完成相互間的通信。通信介面340可配置為傳輸資訊。處理器320可以調用記憶體310中的邏輯指令,以執行上述實施例的在3D顯示設備中切換顯示3D圖像的方法。上述的記憶體310中的邏輯指令可以通過軟體功能裝置的形式實現並作為獨立的產品銷售或使用時,可以儲存在一個電腦可讀取儲存介質中。
本發明實施例提供的電腦可讀儲存介質,儲存有電腦可執行指令,上述電腦可執行指令設置為執行上述的實現3D圖像顯示的方法。
本發明實施例提供的電腦程式產品,包括儲存在電腦可讀儲存介質上的電腦程式,上述電腦程式包括程式指令,當該程式指令被電腦執行時,使上述電腦執行上述的實現3D圖像顯示的方法。
本發明實施例的技術方案可以以軟體產品的形式體現出來,該電腦軟體產品儲存在一個儲存介質中,包括一個或多個指令用以使得一台電腦設備(可以是個人電腦,伺服器,或者網路設備等)執行本發明實施例的方法的全部或部分步驟。而前述的儲存介質可以是非暫態儲存介質,包括:U盤、移動硬碟、唯讀記憶體、隨機存取記憶體、磁碟或者光碟等多種可以儲存程式碼的介質,也可以是暫態儲存介質。
以上描述和附圖充分地示出了本發明的實施例,以使本領域技術人員能夠實踐它們。其他實施例可以包括結構的、邏輯的、電氣的、過程的以及其他的改變。除非明確要求,否則單獨的部件和功能是可選的,並且操作的順序可以變化。一些實施例的部分和特徵可以被包括在或替換其他實施例的部分和特徵。本發明實施例的範圍包括申請專利範圍的整個範圍,以及申請專利範圍的所有可獲得的等同物。本發明中使用的用詞僅用於描述實施例並且不用於限制申請專利範圍。當用於本發明中時,術語“包括”等指陳述的特徵中至少一項的存在,但不排除其它特徵的存在。
本文所披露的實施例中,所揭露的方法、產品(包括但不限於裝置、設備等),可以通過其它的方式實現。例如,以上所描述的裝置實施例僅僅是示意性的,例如,單元的劃分,可以僅僅為一種邏輯功能劃分,實際實現時可以有另外的劃分方式,例如多個單元或元件可以結合或者可以集成到另一個系統,或一些特徵可以忽略,或不執行。另外,所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些介面,裝置或單元的間接耦合或通信連接,可以是電性、機械或其它的形式。作為分離部件說明的單元可以是或不是物理上分開的,作為單元顯示的部件可以是不是物理單元。可以根據實際的需要選擇其中的部分或者全部單元來實現本實施例。另外,在本發明實施例中的各功能單元可以集成在一個處理單元中,也可以是各個單元單獨物理存在,也可以兩個或兩個以上單元集成在一個單元中。
附圖中的流程圖和方塊圖顯示了根據本發明實施例的系統、方法和電腦程式產品的可能實現的體系架構、功能和操作。流程圖或方塊圖中的每個方塊可以代表一個模組、程式段或代碼的一部分,上述模組、程式段或代碼的一部分包含一個或多個用於實現規定的邏輯功能的可執行指令。在有些作為替換的實現中,方塊中所標注的功能也可以以不同於附圖中所標注的順序發生。例如,兩個連續的方塊實際上可以基本並行地執行,它們有時也可以按相反的循序執行,這可以依所涉及的功能而定。在附圖中的流程圖和方塊圖所對應的描述中,不同的方塊所對應的操作或步驟也可以以不同於描述中所披露的順序發生,有時不同的操作或步驟之間不存在特定的順序。例如,兩個連續的操作或步驟實際上可以基本並行地執行,它們有時也可以按相反的循序執行,這可以依所涉及的功能而定。方塊圖和/或流程圖中的每個方塊、以及方塊圖和/或流程圖中的方塊的組合,可以用執行規定的功能或動作的專用的基於硬體的系統來實現,或者可以用專用硬體與電腦指令的組合來實現。
100:3D顯示設備 110:多視點3D顯示幕 111:顯示面板 120:處理器 121:寄存器 130:3D處理裝置 131:暫存器 140:視頻信號介面 150:眼部定位裝置 160:眼部定位資料介面 171:第一姿態播放區域 172:第二姿態播放區域 180:姿態檢測裝置 190:柱鏡光柵 200:3D顯示設備 201:處理器 202:多視點3D顯示幕 203:3D處理裝置 204:視頻信號介面 205:眼部定位裝置 206:攝影裝置 207:指示器 208:馬達 209:按鍵 210:記憶體 211:SIM卡(使用者標識模組)介面 212:外部記憶體介面 213:USB(通用序列匯流排)介面 214:充電管理模組 215:電源管理模組 216:電池 217:寄存器 218:GPU 219:編解碼器 220:感測器模組 221:接近光感測器 222:環境光感測器 223:壓力感測器 224:氣壓感測器 225:磁感測器 226:重力感測器 227:陀螺儀感測器 228:加速度感測器 229:距離感測器 230:溫度感測器 231:指紋感測器 232:觸摸感測器 233:骨傳導感測器 234:音頻模組 235:揚聲器 236:受話器 237:麥克風 238:耳機介面 239:天線 240:移動通信模組 241:天線 242:無線通信模組 300:3D顯示設備 310:記憶體 320:處理器 330:匯流排 340:通信介面 400:複合圖元 410:紅色複合子圖元 420:綠色複合子圖元 430:藍色複合子圖元 510:應用程式層 520:框架層 530:核心類庫和運行時(Runtime) 540:內核層 601:3D視頻信號的視頻幀所包含的兩幅圖像之一 602:3D視頻信號的視頻幀所包含的兩幅圖像之一 S100,S200:步驟
一個或多個實施例通過與之對應的附圖進行示例性說明,這些示例性說明和附圖並不構成對實施例的限定,附圖中具有相同參考數位標號的元件示為類似的元件,附圖不構成比例限制,並且其中: 圖1A至圖1C是根據本發明實施例的3D顯示設備的結構示意圖; 圖2A和圖2B是根據本發明的實施例的3D顯示設備的兩個姿態及相應的播放區域; 圖3A和圖3B是根據本發明的實施例的3D顯示設備在兩個姿態下的動態渲染; 圖4是根據本發明實施例的3D顯示設備的硬體結構示意圖; 圖5是根據本發明實施例的3D顯示設備的軟體結構示意圖; 圖6是根據本發明實施例的3D視頻信號的視頻幀所包含圖像的格式及內容的示意圖; 圖7是根據本發明的實施例的在3D顯示設備中切換顯示3D圖像的流程圖;以及 圖8是根據本發明的實施例的3D顯示設備的結構示意圖。
S100,S200:步驟

Claims (29)

  1. 一種實現3D圖像顯示的方法,包括:檢測3D顯示設備的姿態變化,其中,所述3D顯示設備包括多視點3D顯示幕,所述多視點3D顯示幕包括多個複合圖元和覆蓋所述多個複合圖元的柱鏡光柵,所述多個複合圖元中的每個複合圖元包括多個複合子圖元,所述多個複合子圖元中的每個複合子圖元包括多個子圖元,所述柱鏡光柵傾斜設置從而沿所述3D顯示設備的第一方向覆蓋多個子圖元以限定出多個第一姿態視點並沿所述3D顯示設備的第二方向覆蓋至少兩個複合圖元以限定出至少兩個第二姿態視點;和在檢測到所述3D顯示設備的姿態發生變化時,調整所顯示的3D圖像的顯示朝向,以使所述3D圖像保持在所述3D顯示設備發生姿態變化前的初始顯示朝向。
  2. 根據請求項1所述的方法,其中,檢測3D顯示設備的姿態變化包括:檢測所述3D顯示設備的旋轉角速度,根據所述旋轉角速度確定所述3D顯示設備的姿態變化;調整3D圖像的顯示朝向包括:在所述3D圖像所在平面中旋轉所述3D圖像的顯示朝向,以使所述3D圖像保持在所述3D顯示設備發生姿態變化前的初始顯示朝向。
  3. 根據請求項2所述的方法,其中,所述3D顯示設備的姿態包括以下至少之一:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態。
  4. 根據請求項3所述的方法,其中,所述3D顯示設備在姿態變化前的第一姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的任一個;所述3D顯示設備在姿態變化後的第二姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的不同於所述第一姿態的任一個;調整所述3D圖像的顯示朝向包括:旋轉所述3D圖像以使所述3D圖像保持在對應於所述第一姿態的初始顯示朝向。
  5. 根據請求項4所述的方法,其中,所述第一姿態、第二姿態中任一個為斜屏顯示姿態時,調整所述3D圖像的顯示朝向時還包括:以全屏顯示方式顯示所述3D圖像。
  6. 根據請求項2所述的方法,其中,調整所述3D圖像的顯示朝向包括:在所述3D圖像所在平面中旋轉所述3D圖像的顯示朝向,以使所述3D圖像保持在初始顯示朝向範圍內;其中,所述初始顯示朝向範圍包括所述初始顯示朝向。
  7. 根據請求項1至6任一項所述的方法,還包括:根據使用者的觀看朝向調整所述3D圖像的顯示朝向,使得所述3D圖像的顯示朝向與所述使用者的觀看朝向一致。
  8. 根據請求項7所述的方法,其中, 所述使用者的觀看朝向包括:橫向觀看朝向、豎向觀看朝向、斜向觀看朝向中的任一個;所述方法還包括:對所述使用者進行眼部定位,根據得到的眼部定位資料確定所述使用者的觀看朝向。
  9. 根據請求項1至6任一項所述的方法,其中,調整所述3D圖像的顯示朝向包括:基於調整後的所述3D圖像的顯示朝向,渲染所述3D顯示設備的多視點3D顯示幕中的子圖元。
  10. 根據請求項1至6任一項所述的方法,其中,使每個複合子圖元的多個子圖元在所述3D顯示設備的所述第一方向上按行排列。
  11. 根據請求項10所述的方法,其中,使每個複合圖元的多個複合子圖元在所述3D顯示設備的所述第二方向上並列佈置。
  12. 根據請求項11所述的方法,其中,使所述柱鏡光柵相對於所述3D顯示設備的所述第二方向的傾斜角θ以滿足以下條件的方式佈置:±1/i
    Figure 109142955-A0305-02-0039-5
    tanθ
    Figure 109142955-A0305-02-0039-6
    ±1/2。
  13. 根據請求項12所述的方法,其中,使所述柱鏡光柵相對於所述3D顯示設備的所述第二方向的傾斜角θ以滿足以下條件的方式佈置:tanθ=1/j,其中2
    Figure 109142955-A0305-02-0039-1
    j
    Figure 109142955-A0305-02-0039-2
    i,且j為整數。
  14. 一種3D顯示設備,包括:處理器;和 儲存有程式指令的記憶體;其中,所述處理器被配置為在執行所述程式指令時,執行如請求項1至10任一項所述的方法。
  15. 一種3D顯示設備,包括:多視點3D顯示幕,包括多個複合圖元和覆蓋所述多個複合圖元的柱鏡光柵,所述多個複合圖元中的每個複合圖元包括多個複合子圖元,所述多個複合子圖元中的每個複合子圖元包括多個子圖元,所述柱鏡光柵傾斜設置從而沿所述3D顯示設備的第一方向覆蓋多個子圖元以限定出多個第一姿態視點並沿所述3D顯示設備的第二方向覆蓋至少兩個複合圖元以限定出至少兩個第二姿態視點;姿態檢測裝置,被配置為檢測所述3D顯示設備的姿態變化;和3D處理裝置,被配置為基於檢測到的所述3D顯示設備的姿態變化,調整所顯示的3D圖像的顯示朝向,以使所述3D圖像保持在所述3D顯示設備發生姿態變化前的初始顯示朝向。
  16. 根據請求項15所述的3D顯示設備,其中,所述姿態檢測裝置被配置為檢測所述3D顯示設備的旋轉角速度,根據所述旋轉角速度確定所述3D顯示設備的姿態變化;所述3D處理裝置被配置為在所述3D圖像所在平面中旋轉所述3D圖像的顯示朝向,以使所述3D圖像保持在所述3D顯示設備發生姿態變化前的初始顯示朝向。
  17. 根據請求項16所述的3D顯示設備,其中,所述3D顯示設備的姿態包括以下至少之一:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態。
  18. 根據請求項17所述的3D顯示設備,其中,所述3D顯示設備在姿態變化前的第一姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的任一個;所述3D顯示設備在姿態變化後的第二姿態包括:橫屏顯示姿態、豎屏顯示姿態、斜屏顯示姿態中的不同於所述第一姿態的任一個;所述3D處理裝置被配置為旋轉所述3D圖像以使所述3D圖像保持在對應於所述第一姿態的初始顯示朝向。
  19. 根據請求項18所述的3D顯示設備,其中,所述3D處理裝置被配置為在所述第一姿態、第二姿態中的任一個為斜屏顯示姿態時,以全屏顯示方式顯示所述3D圖像。
  20. 根據請求項16所述的3D顯示設備,其中,所述3D處理裝置被配置為在所述3D圖像所在平面中旋轉所述3D圖像的顯示朝向,以使所述3D圖像保持在初始顯示朝向範圍內;其中,所述初始顯示朝向範圍包括所述初始顯示朝向。
  21. 根據請求項15至20任一項所述的3D顯示設備,其中,所述3D處理裝置被配置為根據使用者的觀看朝向調整所述3D圖像的顯示朝向,使得所述3D圖像的顯示朝向與所述使用者的觀看朝向一致。
  22. 根據請求項21所述的3D顯示設備,其中,所述使用者的觀看朝向包括:橫向觀看朝向、豎向觀看朝向、斜向觀看朝向中的任一個;所述3D顯示設備還包括被配置為獲取眼部定位資料的眼部定位資料獲取裝置;所述3D處理裝置被配置為根據得到的眼部定位資料確定所述使用者的觀看朝向。
  23. 根據請求項15至20任一項所述的3D顯示設備,其中,所述3D處理裝置被配置為基於調整後的所述3D圖像的顯示朝向,渲染所述3D顯示設備的多視點3D顯示幕中的複合圖元。
  24. 根據請求項15至20任一項所述的3D顯示設備,其中,每個複合子圖元的多個子圖元在所述3D顯示設備的所述第一方向上按行排列。
  25. 根據請求項24所述的3D顯示設備,其中,每個複合圖元的多個複合子圖元在所述3D顯示設備的所述第二方向上並列佈置。
  26. 根據請求項25所述的3D顯示設備,其中,所述柱鏡光柵相對於所述3D顯示設備的所述第二方向的傾斜角θ滿足以下條件:±1/i
    Figure 109142955-A0305-02-0042-7
    tanθ
    Figure 109142955-A0305-02-0042-8
    ±1/2。
  27. 根據請求項26所述的3D顯示設備,其中,所述柱鏡光柵相對於所述3D顯示設備的所述第二方向的傾斜角θ滿足以下條件: tanθ=1/j,其中2
    Figure 109142955-A0305-02-0043-3
    j
    Figure 109142955-A0305-02-0043-4
    i,且j為整數。
  28. 一種電腦可讀儲存介質,儲存有電腦可執行指令,所述電腦可執行指令設置為執行如請求項1至13任一項所述的方法。
  29. 一種電腦程式產品,包括儲存在電腦可讀儲存介質上的電腦程式,所述電腦程式包括程式指令,當該程式指令被電腦執行時,使所述電腦執行如請求項1至13任一項所述的方法。
TW109142955A 2019-12-05 2020-12-04 實現3d圖像顯示的方法、3d顯示設備 TWI790511B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201911231390.2 2019-12-05
CN201911231390.2A CN112929646A (zh) 2019-12-05 2019-12-05 实现3d图像显示的方法、3d显示设备

Publications (2)

Publication Number Publication Date
TW202135524A TW202135524A (zh) 2021-09-16
TWI790511B true TWI790511B (zh) 2023-01-21

Family

ID=76160767

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109142955A TWI790511B (zh) 2019-12-05 2020-12-04 實現3d圖像顯示的方法、3d顯示設備

Country Status (5)

Country Link
US (1) US11924398B2 (zh)
EP (1) EP4068770A4 (zh)
CN (1) CN112929646A (zh)
TW (1) TWI790511B (zh)
WO (1) WO2021110027A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115567698A (zh) * 2022-09-23 2023-01-03 立观科技(盐城)有限公司 一种实现横向及纵向3d显示的装置及实现方法
CN116996661B (zh) * 2023-09-27 2024-01-05 中国科学技术大学 三维视频展示方法、装置、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040263968A1 (en) * 2003-04-21 2004-12-30 Masanori Kobayashi Method and apparatus for displaying three-dimensional stereo image using light deflector
CN101909219A (zh) * 2010-07-09 2010-12-08 深圳超多维光电子有限公司 一种立体显示方法、跟踪式立体显示器及图像处理装置
CN104661011A (zh) * 2014-11-26 2015-05-27 深圳超多维光电子有限公司 立体图像显示方法及手持终端
CN105467603A (zh) * 2016-02-01 2016-04-06 京东方科技集团股份有限公司 一种立体显示装置
CN106959522A (zh) * 2016-01-11 2017-07-18 擎中科技(上海)有限公司 一种立体显示器件

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9603890D0 (en) * 1996-02-23 1996-04-24 Philips Electronics Nv Autostereoscopic display apparatus
US6064424A (en) * 1996-02-23 2000-05-16 U.S. Philips Corporation Autostereoscopic display apparatus
CN102510515B (zh) * 2011-12-29 2015-08-05 中航华东光电有限公司 一种光栅式多视点立体图像合成方法
CN203025421U (zh) * 2012-12-26 2013-06-26 黑龙江省四维影像数码科技有限公司 带有垂直柱镜光栅的自由立体显示屏
JP6358494B2 (ja) * 2013-02-27 2018-07-18 Tianma Japan株式会社 立体画像表示装置
JP2017028446A (ja) * 2015-07-21 2017-02-02 株式会社ソニー・インタラクティブエンタテインメント 画像提示装置、光学透過型ヘッドマウントディスプレイ、および画像提示方法
CN106067969B (zh) * 2016-06-30 2018-02-27 北京邮电大学 一种柱镜光栅的多视点3d显示方法及装置
CN105911712B (zh) * 2016-06-30 2018-12-04 北京邮电大学 一种多视点液晶显示器lcd裸眼3d显示方法及装置
WO2019137272A1 (en) * 2018-01-12 2019-07-18 Sun Yat-Sen University Grating based three-dimentional display method for presenting more than one views to each pupil
US10817131B2 (en) * 2018-04-24 2020-10-27 Alioscopy System and method for displaying an autostereoscopic image with N points of view on a mobile display screen
FR3080462B1 (fr) * 2018-04-24 2020-04-24 Alioscopy Systeme et procede d'affichage d'une image auto-stereoscopique a n points de vue sur un ecran d'affichage mobile
WO2020090316A1 (ja) * 2018-11-02 2020-05-07 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
CN211930763U (zh) * 2019-12-05 2020-11-13 北京芯海视界三维科技有限公司 3d显示设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040263968A1 (en) * 2003-04-21 2004-12-30 Masanori Kobayashi Method and apparatus for displaying three-dimensional stereo image using light deflector
CN101909219A (zh) * 2010-07-09 2010-12-08 深圳超多维光电子有限公司 一种立体显示方法、跟踪式立体显示器及图像处理装置
CN104661011A (zh) * 2014-11-26 2015-05-27 深圳超多维光电子有限公司 立体图像显示方法及手持终端
CN106959522A (zh) * 2016-01-11 2017-07-18 擎中科技(上海)有限公司 一种立体显示器件
CN105467603A (zh) * 2016-02-01 2016-04-06 京东方科技集团股份有限公司 一种立体显示装置

Also Published As

Publication number Publication date
TW202135524A (zh) 2021-09-16
CN112929646A (zh) 2021-06-08
US11924398B2 (en) 2024-03-05
US20220408074A1 (en) 2022-12-22
EP4068770A4 (en) 2023-12-13
EP4068770A1 (en) 2022-10-05
WO2021110027A1 (zh) 2021-06-10

Similar Documents

Publication Publication Date Title
US20210058612A1 (en) Virtual reality display method, device, system and storage medium
TWI790511B (zh) 實現3d圖像顯示的方法、3d顯示設備
TWI746302B (zh) 多視點3d顯示屏、多視點3d顯示終端
US10855916B2 (en) Image processing apparatus, image capturing system, image processing method, and recording medium
CN110557626B (zh) 一种图像显示的方法及电子设备
TWI818211B (zh) 眼部定位裝置、方法及3d顯示裝置、方法
CN112584125A (zh) 三维图像显示设备及其显示方法
US20190289206A1 (en) Image processing apparatus, image capturing system, image processing method, and recording medium
CN211791829U (zh) 3d显示设备
CN112929647A (zh) 3d显示设备、方法和终端
CN211128026U (zh) 多视点裸眼3d显示屏、多视点裸眼3d显示终端
JP2018056889A (ja) 表示端末、表示方法、及びプログラム
TWI782361B (zh) 3d顯示裝置、方法及終端
CN211930763U (zh) 3d显示设备
CN109714585B (zh) 图像传输方法及装置、显示方法及装置、存储介质
TWI840636B (zh) 實現3d圖像顯示的方法、3d顯示設備
WO2021110037A1 (zh) 实现3d图像显示的方法、3d显示设备
JP6812643B2 (ja) 通信端末、画像通信システム、表示方法、及びプログラム
CN112929645A (zh) 3d显示设备、系统和方法及3d视频数据通信方法
CN112929641B (zh) 3d图像显示方法、3d显示设备
WO2021110026A1 (zh) 实现3d图像显示的方法、3d显示设备
CN112925109A (zh) 多视点裸眼3d显示屏、裸眼3d显示终端
JP6816403B2 (ja) 画像管理システム、画像通信システム、画像管理方法、及びプログラム