TWI815300B - 光場攝影機系統以及多重攝影機設備的基線和匯聚距離的設定方法 - Google Patents

光場攝影機系統以及多重攝影機設備的基線和匯聚距離的設定方法 Download PDF

Info

Publication number
TWI815300B
TWI815300B TW111104484A TW111104484A TWI815300B TW I815300 B TWI815300 B TW I815300B TW 111104484 A TW111104484 A TW 111104484A TW 111104484 A TW111104484 A TW 111104484A TW I815300 B TWI815300 B TW I815300B
Authority
TW
Taiwan
Prior art keywords
depth
sample point
camera
baseline
distance
Prior art date
Application number
TW111104484A
Other languages
English (en)
Other versions
TW202247648A (zh
Inventor
亞瑟 Ｚ 班尼
Original Assignee
美商雷亞有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商雷亞有限公司 filed Critical 美商雷亞有限公司
Publication of TW202247648A publication Critical patent/TW202247648A/zh
Application granted granted Critical
Publication of TWI815300B publication Critical patent/TWI815300B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
    • H04N13/279—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals the virtual viewpoint locations being selected by the viewers or determined by tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H04N13/351—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying simultaneously
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359—Switching between monoscopic and stereoscopic modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/957—Light-field or plenoptic cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computing Systems (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Measurement Of Optical Distance (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Abstract

一種光場攝影機系統以及多重攝影機設備的基線和匯聚距離的設定方法，其採用樣本點深度來確定和設定相對於三維（3D）景象的值。多重攝影機設備的基線和匯聚距離的設定是藉由確定表示多重攝影機設備與在多重攝影機設備的視野內的3D景象中的複數個樣本點之間的距離的複數個樣本點深度來達成。匯聚距離設定為複數個樣本點深度的平均樣本點深度。然後基線設定為複數個樣本點深度中的最小樣本點深度與匯聚距離的相差值的倒數。光場攝影機系統包含多重攝影機設備，其包括複數個攝影機。

Description

光場攝影機系統以及多重攝影機設備的基線和匯聚距離的設定方法
本發明關於一種多重攝影機設備，特別是光場攝影機系統以及多重攝影機設備的基線和匯聚距離的設定方法。
三度（3D）空間中的景象可以根據視角從多個視點觀看。此外，當以立體視覺觀看時，可以同時感知表示景象不同立體圖的多個視像，有效創造可被觀看者感知的深度感。多視像顯示器呈現具有多個視像的影像，以呈現景象在3D世界中是如何被感知的。多視像顯示器同時呈現不同視像，以向使用者提供真實的體驗。多視像影像可由軟體動態產生和處理。獲取多視像影像可以涉及多個攝影機或攝影機位置。
為了實現這些與其他優點並且根據本發明的目的，如本文所體現和廣泛描述的，提供有一種多重攝影機設備的基線和匯聚距離的設定方法，該方法包括：確定複數個樣本點深度，該複數個樣本點深度表示該多重攝影機設備與在該多重攝影機設備的視野內的一三維景象中的複數個樣本點之間的距離；設定該匯聚距離為該複數個樣本點深度的一平均樣本點深度；確定該複數個樣本點深度的一最小樣本點深度；以及設定該基線為該最小樣本點深度與該匯聚距離的一相差值的一倒數。
根據本發明一實施例，所述確定該複數個樣本點深度之步驟包括在該三維景象中執行光線投射，以及記錄複數個樣本點中的每個樣本點的擊中距離。
根據本發明一實施例，所述確定該複數個樣本點深度之步驟包括對於該複數個樣本點中的每一個樣本點從該三維景象的一視差圖計算該等樣本點深度。
根據本發明一實施例，所述計算該等樣本點深度之步驟進一步包括使用由該多重攝影機設備中的不同的攝影機獲取的影像之間的一影像視差，以及從該影像視差形成該三維景象的該視差圖。
根據本發明一實施例，所述確定該複數個樣本點深度之步驟包括使用一深度感測器以測量該多重攝影機設備與該三維景象內的物體之間的距離，該等物體與該複數個樣本點中的樣本點對應。
根據本發明一實施例，該深度感測器包括一雷射測距感測器和一飛時測距感測器其中之一。
根據本發明一實施例，該平均樣本點深度是一加權平均值，具有根據該三維景象中與一焦點之間的距離的一遞減函數來分配的權重。
根據本發明一實施例，該加權平均值的該等權重是根據以該焦點爲中心的高斯分布來分配。
根據本發明一實施例，該多重攝影機設備包括複數個虛擬攝影機，該三維景象是一三維模型。
根據本發明一實施例，該多重攝影機設備包括複數個實體攝影機，該三維景象表示一實體景象，由該複數個實體攝影機中的攝影機成像。
根據本發明一實施例，該多重攝影機設備包括一攝影機，在複數個位置之間移動以獲取形成該三維景象的影像。
在本發明之另一態樣中，提供有一種光場攝影機系統，包括：一多重攝影機設備，包括複數個攝影機；一處理器；以及一記憶體，配置以儲存指令，當該等指令由該處理器執行時，該等指令會實施：確定複數個樣本點深度，該複數個樣本點深度表示該多重攝影機設備與在該多重攝影機設備的視野內的一三維景象中的複數個樣本點之間的距離；以及設定該多重攝影機設備的一匯聚距離和一基線，其中，該匯聚距離為該複數個樣本點深度的一平均樣本點深度，而且該基線為該複數個樣本點深度中的一最小樣本點深度減去該匯聚距離的一相差值的一倒數。
根據本發明一實施例，所述確定該複數個樣本點深度包括下列其中一者或多者：從表示該三維景象的一影像的一深度圖；使用一視差圖來計算該等樣本點深度；以及在該三維景象中執行光線投射，以確定該三維景象中的該等樣本點深度。
根據本發明一實施例，該複數個樣本點深度係使用一深度感測器以測量該多重攝影機設備與該三維景象內的物體之間的距離來確定，該等物體與該複數個樣本點中的樣本點對應。
根據本發明一實施例，該複數個樣本點深度的該平均樣本點深度是一加權平均值，該加權平均值的權重是根據與該三維景象的一焦點之間的距離的一遞減函數來分配。
根據本發明一實施例，該複數個攝影機中的攝影機是一虛擬攝影機，該三維景象是一三維模型。
根據本發明一實施例，該多重攝影機設備的該複數個攝影機中的攝影機包括實體攝影機，該三維景象表示由該實體攝影機成像的一實體景象。
根據本發明一實施例，光場攝影機系統，進一步包括一多視像顯示器，該匯聚距離對應於該多視像顯示器的一零視差平面。
在本發明之另一態樣中，提供有一種非暫時性電腦可讀取儲存媒體，儲存可執行指令，當該等可執行指令由一電腦系統的一處理器執行時，該等可執行指令會執行確定一多重攝影機設備的一基線和一匯聚距離的操作，該等操作包括：確定複數個樣本點深度，該複數個樣本點深度表示該多重攝影機設備與在該多重攝影機設備的視野內的一三維景象中的複數個樣本點之間的距離，該匯聚距離設定爲該複數個樣本點深度的一平均樣本點深度；以及確定該複數個樣本點深度中的一最小樣本點深度，該基線設定為該最小樣本點深度與該匯聚距離的一相差值的一倒數。
根據本發明一實施例，所述確定該複數個樣本點深度包括下列其中一者或多者：從表示該三維景象的一影像的一深度圖；使用一視差圖來計算該等樣本點深度；在該三維景象中執行光線投射，以確定該三維景象中的該等樣本點深度；以及使用一深度感測器，以測量該多重攝影機設備與該三維景象內的物體之間的距離，該物體對應該複數個樣本點中的樣本點。
根據本發明一實施例，該複數個樣本點深度的該平均樣本點深度是一加權平均值，該加權平均值的權重是根據與該三維景象的一焦點之間的距離的一遞減函數來分配。
根據本發明所述原理的示例和實施例，本發明提供了一種設定攝影機設備的基線（base line）和匯聚距離（convergence distance）的技術，該攝影機設備用於獲取三維（3D）景象（scene）的多視像影像。具體來說，根據各個實施例，可以根據多重攝影機設備獲取的三維（3D）內容來確定多重攝影機設備的基線和匯聚距離。隨後，基線和匯聚距離可以隨著3D內容的變化，根據多重攝影機設備其中一個或多個攝影機可見的3D內容來動態調整。根據各個實施例，基線和匯聚距離的設定可以採用實體攝影機來獲取光場影像和視訊，也可以採用虛擬攝影機，諸如在任何種類的彩現引擎（rendering engines）（例如，3D建模/動畫軟體、遊戲引擎、視訊編輯工具）中找到的那些虛擬攝影機。
如下文所解釋的，不是使用預設的基線和匯聚距離或手動調整基線和匯聚距離，本發明的實施例針對的是根據攝影機（或更具體來說是多重攝影機設備其中一個或多個攝影機）的視像內的景象的各種深度來修改這些參數。而攝影機可以是虛擬攝影機，也可以是實際的或實體攝影機。當在彩現器中實施時，虛擬攝影機可以定位為獲取3D模型的一部分的3D景象。彩現器（renderer）可以是遊戲引擎、3D模型播放器、視訊播放器或其他軟體環境，其定位虛擬攝影機以獲取3D模型。
根據各個實施例，攝影機一般具有特定的位置（例如，座標）和方向，以獲取表示3D模型的3D景象的視像。在此態樣，攝影機和攝影機的視像內的3D景象的各個表面之間有複數個深度（樣本點深度，sample point depths）。爲了産生多視像影像，複數個攝影機或「多重攝影機設備」獲取3D景象的不同、重疊的視像。在採用虛擬攝影機的一些實施例中，可以複製（例如大量産生、複製）虛擬攝影機（例如參考攝影機），以産生多重攝影機設備，其例如從3D模型中獲取3D景象的不同、重疊的視像。在其他的實施例中，多重攝影機設備包括實體或實際的攝影機，其配置爲獲取表示實體或實際的3D景象的不同視像的影像。在這些實施例中，深度表示實體3D景象中的實際或實體的深度。
圖1A是根據與本發明所述原理一致的一實施例，顯示示例中的多視像顯示器100（或多模式顯示器的多視像模式）的立體圖。如圖1A中所示的，多視像顯示器100包括螢幕，其配置以顯示要被觀看的多視像影像110。多視像顯示器100在相對於多視像顯示器100的螢幕的不同的視像方向120上提供多視像影像的不同的視像112。視像方向120如箭頭所示，從螢幕以各個不同主要角度方向延伸；不同的視像112在箭頭（亦即，表示視像方向120）的終點處被顯示為陰影多邊形框；並且僅顯示三個視像112和三個視像方向120，這全是作爲示例而非限制。應注意，雖然不同的視像112在圖1A中顯示為在螢幕上方，但是當多視像影像110被顯示在多視像顯示器100上時，視像112實際上出現在螢幕上或附近。在圖1A中多視像顯示器100的螢幕上方描繪視像112僅是爲了簡化說明，並且意圖表示從對應於特定視像112的相應的一個視像方向120觀看多視像顯示器100。根據各個實施例，多視像顯示器100配置以顯示多視像影像110，多視像顯示器100可以是或用作電話（例如手機、智慧型手機等等）、平板電腦、筆記型電腦、桌上型電腦的電腦顯示器、攝影機顯示器、或基本上顯示任何其他裝置的電子顯示器的顯示器（例如顯示螢幕）。
根據本發明定義，視像方向或等效地具有與多視像顯示器的視像方向對應方向的光束，通常具有由角度分量｛ ｝給出的主要角度方向。角度分量 在本發明中稱為光束的「仰角分量」或「仰角」。角度分量 稱為光束的「方位角分量」或「方位角」。根據定義，仰角 爲在垂直面（例如，垂直於多視像顯示器螢幕的平面）內的角度，而方位角 爲在水平面（例如，平行於多視像顯示器螢幕的平面）內的角度。
圖1B是根據與本發明所述原理一致的一實施例，顯示示例中使用多視像顯示器100顯示多視像影像110的示意圖。多視像影像110具有複數個視像112。每個視像112都對應於不同視像方向120或景象的立體圖。視像112由多視像顯示器100呈現以顯示。因此，每個視像112表示多視像影像110的不同視角。因此，不同視像112彼此之間具有一定程度的視差。在一些實施例中，觀看者可以用右眼感知一個視像112，並用左眼感知不同的視像112。這使觀看者能夠同時感知不同的視像，並且可以藉此形成立體視。換句話說，不同的視像112創造三維（3D）的效果。
在一些實施例中，當觀看者在實體上改變相對多視像顯示器100的視角時，觀看者的眼睛可以隨著視角的變化，在不同時間點上遇到多視像影像110的不同視像112。因此，觀看者可以藉由改變視角而與多視像顯示器100互動，以看到多視像影像110的不同視像112。例如，隨著觀看者向左移動，觀看者可以看到多視像影像110中更多物體的左側。根據各個實施例，多視像影像110可以具有沿者水平面或水平軸的多個視像112，以提供所謂的「純水平視差」（horizontal-parallax-only，HPO）3D多視像影像，而在其他實施例中，多視像影像110可以具有沿著水平軸以及垂直面或垂直軸的多個視像112，以形成所謂的「全視差」3D多視像影像。因此，當觀看者改變視角以看到不同的視像112時，觀看者可以獲得多視像影像110中的額外視覺細節。根據各個實施例，當爲了顯示而處理時，多視像影像110儲存為記錄不同視像112的格式的資料。
本發明中，「二維顯示器」或「2D顯示器」定義爲配置以提供影像的視像的顯示器，而不論該影像是從甚麽方向觀看的（亦即，在2D顯示器的預定視角內或預定範圍內），該影像的視像基本上是相同的。很多智慧型手機和電腦螢幕中會有的傳統液晶顯示器（LCD）是2D顯示器的示例。與此相反，「多視像顯示器」定義爲配置從使用者的視點相對於在不同視像方向（view direction）上或從不同視像方向同時提供多視像影像（multiview image）的不同視像（different views）的電子顯示器或顯示系統。具體來說，不同視像112可以呈現多視像影像110的不同立體圖。
如下文詳細描述的，多視像顯示器100可以使用適應不同影像視像的呈現的各種技術以實現，從而同時感知不同影像。多視像顯示器的一個示例是採用繞射光栅以控制不同視像112的主要角度方向的多視像顯示器。根據一些實施例，多視像顯示器100可以是光場顯示器，其表示對應不同的視像的不同顔色和不同方向的複數個光束的顯示器。在一些示例中，光場顯示器是所謂的「裸視立體」三維（3D）顯示器，其可以使用繞射光柵或多光束元件以提供多視像影像的自動立體呈現，而不需要特別的眼鏡以感知深度。在一些實施例中，多視像顯示器100可以需要眼鏡或其他覆眼裝置已控制使用者的每隻眼睛感知哪些視像112。
在一些實施例中，多視像顯示器100是多視像顯示系統的一部分，其呈現多視像影像和二維影像。在此態樣，多視像顯示系統可以包括複數個背光件，以在不同模式下運作。例如，多視像顯示系統可以配置爲在二維模式期間使用廣角背光件提供廣角發射的光。另外，多視像顯示系統可以配置爲使用具有多光束元件陣列的多視像背光件在多視像模式期間提供方向性發射的光，該方向性發射的光包括由多光束元件陣列其中每一個多光束元件提供的複數個方向性光束。多視像顯示系統可以配置爲使用模式控制器對2D模式和多視像模式進行時間多工，以依序啓動對應於該2D模式的第一連續時間間隔內的廣角背光件以及對應於該多視像模式的第二連續時間間隔內的多視像背光件。方向性光束中的方向性光束的方向可以對應於多視像影像的不同視像方向。
例如，在二維模式下，廣角背光件可以産生影像，以使多視像顯示系統像二維顯示器一樣運作。根據定義，「廣角」發射的光定義為具有錐角的光，並且廣角發射的光的錐角大於多視像影像或多視像顯示器的視像的錐角。具體來說，在一些實施例中，廣角發射的光可以具有大於大約二十度（例如，＞±20°）的錐角。在其他實施例中，廣角發射的光的錐角可以大於大約三十度（例如，＞±30°），或者大於大約四十度（例如，＞±40°），或者大於大約五十度（例如，＞±50°）。例如，廣角發射的光的錐角可以大於大約為六十度（例如，＞±60°）。
多視像模式可以使用多視像背光件取代廣角背光件。多視像背光件可以具有多光束元件的陣列，其將光散射爲具有互相不同的主要角度方向的複數個方向性光束。例如，如果多視像顯示器100在多視像模式下運行以顯示具有四個視像的多視像影像，則多視像背光件可以將光散射爲四個方向光束，每個方向性光束對應不同的視像。模式控制器可以在2D模式和多視像模式之間依序切換，以使用多視像背光件在第一連續時間間隔期間顯示多視像影像以及使用廣角背光件在第二連續時間間隔期間顯示2D影像。
在一些實施例中，多視像顯示系統配置爲在導光體中引導光以作爲引導的光。在本發明中，「導光體」定義為使用全內反射（total internal reflection，TIR）在結構內引導光的結構。具體來說，導光體可以包含在導光體的工作波長下基本上爲透明的核心。在各個示例中，術語「導光體」一般指的是介電材料的光波導，其利用全內反射在導光體的介電材料和圍繞導光體的物質或介質之間的界面引導光。根據定義，全內反射的條件是導光體的折射係數大於與導光體材料的表面鄰接的周圍介質的折射係數。在一些實施例中，導光體可以在利用上述的折射係數差异之外額外包含塗層，或者利用塗層取代上述的折射係數差异，藉此進一步促成全內反射。舉例而言，該塗層可以是反射塗層。導光體可以是數種導光體中的任何一種，包含但不限於平板或厚平板導光體和條狀導光體其中之一或之二。導光體的形狀可以是板狀或片狀。導光體可以由光源（例如發光裝置）側光式發光。
在一些實施例中，多視像顯示系統配置爲使用多光束元件陣列中的多光束元件將引導的光的一部分散射爲方向性發射的光，多光束元件陣列之中每一個多光束元件包括繞射光栅、微折射元件和微反射元件其中一個或多個。在一些實施例中，多光束元件的繞射光柵可以包括複數個個別子光柵。在一些實施例中，微反射元件配置爲反射性耦合或散射出引導的光的一部分以作爲複數個方向性光束。微反射元件可以具有反射塗層以控制引導的光的散射方向。在一些實施例中，多光束元件包括微折射元件，微折射元件配置以藉由或使用折射以耦合出或散射出引導的光的一部分（亦即，折射性散射出引導的光的一部分）以作爲複數個方向性光束。
圖2是根據與本發明所述原理一致的一實施例，顯示獲取三維（3D）景象200的多視像影像的示意圖。如圖2所示，3D景象200包含各種物體（例如，實體的或虛擬的），如地面208上的樹202和石頭204。樹202、石頭204和地面208可以稱為物體，其共同構成3D景象200的至少一部分。3D景象200的多視像影像可以由類似參考圖1A至圖1B討論的方式顯示和查看。爲了獲取多視像影像，可以使用攝影機210。在一些實施例中，攝影機210可以包含一個或多個實體攝影機。例如，實體攝影機包含鏡頭，用於獲取光並將光記錄為影像。多個實體攝影機可以用於獲取景象的不同視像，以創造多視像影像。例如，每個實體攝影機可以依界定的距離間隔開，以獲取景象中的物體的不同的立體圖。不同的實體攝影機之間的距離使其能夠獲取到3D景象200的深度，就像觀看者的眼睛之間的距離能有3D視覺一樣。
攝影機210也可以表示（例如，模擬的或假設的）一個或多個虛擬攝影機，而不是實體攝影機。3D景象200可以使用操縱電腦產生的資訊的電腦圖形技術以產生。在此示例中，攝影機210實現為具有視點的虛擬攝影機，以獲取3D景象200。虛擬攝影機可以在3D模型內以視角和座標的方式定義。3D模型可以界定由虛擬攝影機獲取的各種物體（例如，樹202、石頭204和地面208）。
當使用攝影機210産生或獲取景象的視像時，攝影機可以根據匯聚平面230以配置。匯聚平面界定爲不同視像的對齊的複數個位置，不同視像之間在該位置幾乎沒有視差。匯聚平面230出現在攝影機210的前面。在攝影機210和匯聚平面230之間的物體看起來離觀看者更近，而匯聚平面230後面的物體看起來離觀看者更遠。在此態樣，物體越遠離匯聚平面230，不同視像之間的視差程度越大。相對於觀看者來說，沿著匯聚平面230的物體會出現在焦點上。攝影機210和匯聚平面230之間的距離稱為匯聚距離或匯聚偏移。如本發明所述，匯聚距離會隨著攝影機210改變位置或方向，或隨著景象的變化而動態更新。
攝影機210獲取的景象在攝影機210的截錐體220的範圍中。圖中所示的截錐體220具有上界和下界，其界定3D景象200的視角範圍。在圖2中，匯聚平面230與樹202的底部和樹202的背面（相對於攝影機210）相交。因此，樹202的底部出現在焦點上，並將作爲觀看者所關注的特徵點出現在顯示器上的位置。此外，石頭204可以出現在樹202前面的前景中。
如本發明所用，「視差」定義為多視像影像的至少兩個視像在對應位置的差別。例如，在立體視覺的情況中，左眼和右眼可以看到同一個物體，但由於兩眼之間的視角不同，其物體的位置會略有不同。這種差別可以量化為視差性。整個多視像影像的視差變化表達了深度感。
術語「基線」或「攝影機基線」定義為獲取多視像影像對應視像的兩個攝影機之間的距離。例如，在立體視覺的情況中，基線是左眼和右眼之間的距離。較大的基線會導致視差的增加，並且可以增强多視像影像的三維效果。縮放基線或基線縮放指的是根據乘數以改變或調整基線，以減少或增加基線。本發明中，根據定義，多重攝影機設備其中一對攝影機以基線彼此間隔開。在一些實施例中，在多重攝影機設備其中每一對攝影機之間使用共同的基線。
本發明，根據定義，「匯聚距離」或「匯聚偏移」指的是攝影機和沿著匯聚平面的點之間的距離。修改匯聚偏移將改變匯聚平面的位置，以便將多視像影像重新聚焦到不同深度的新物體上。
此外在本發明中，「3D景象」指包含一個或多個3D物體的景象，其可以存在於實體空間中，也可以虛擬地表示爲3D模型或3D環境。物理3D景象可以由實體攝影機獲取，而虛擬3D景象可以由虛擬攝影機獲取。
此外，如本發明所使用的，冠詞「一」旨在具有其在專利領域中的通常含義，亦即「一個或多個」。例如，在本發明中「一攝影機」意指一個或多個攝影機，並因此「該攝影機」意指「該（些）攝影機」。此外，本發明所述的任何「頂部」、「底部」、「上」、「下」、「向上」、「向下」、「前」、「後」、「第一」、「第二」、「左」、或「右」皆並非意使其成爲任何限制。本發明中，當「大約（about）」一詞應用在一數值時，除非另有明確說明，其意思大體上爲該數值在産生該數值的設備的公差範圍內，或者可以表示正負10％或正負5％或正負1％。此外，本發明所使用「基本上（substantially）」一詞是指大部分、或幾乎全部、或全部、或在大約51％至大約100％的範圍內的數量。再者，本發明的示例僅爲說明性示例，並且提出該示例的目的是爲了討論而非限制。
根據本發明所述原理的一些實施例，本發明提供了一種多重攝影機設備的基線和匯聚距離的設定方法。圖3是根據與本發明所述原理一致的一實施例，顯示示例中的多重攝影機設備的基線和匯聚距離的設定方法300的流程圖。在一些實施例中，多重攝影機設備的基線和匯聚距離的設定方法300可以用於動態地調整多重攝影機設備的基線和匯聚距離。例如，根據一些實施例，可以即時地實施基線調整或基線縮放以及匯聚距離調整。
如圖所示，多重攝影機設備的基線和匯聚距離的設定方法300包括確定樣本點集合或複數個樣本點深度的步驟310。根據各個實施例，樣本點深度表示多重攝影機設備和三維（3D）景象中複數個樣本點之間的距離集合或多個距離。例如，3D景象可以是在多重攝影機設備的視野（field of view）內的景象（例如能够被多重攝影機設備的攝影機看見），並且距離可以表示3D景象中各個感興趣的對象或點的距離。
在一些實施例中，確定複數個樣本點深度的步驟310可以包括在3D景象中執行光線投射（ray casting）。例如，光線投射的網格可以由從多重攝影機設備向外並朝向3D景象的方式以產生。然後在光線投射網格中，記錄3D景象中各個碰撞體的擊中距離（hit distance），以進行光線投射。擊中距離對應於3D景象中各種碰撞體的深度。
圖4是根據與本發明所述原理一致的一實施例，顯示示例中的光線投射的示意圖。如圖所示，3D景象402包含複數個物體404，而多重攝影機設備410定位以從3D景象402獲取多視像影像。光線投射包括產生複數個光線420的網格或者光線420的網格，以及將光線引入3D景象402，其中，如圖4中的箭頭所示，各個光線420遇到物體404上的點。如圖所示，擊中距離是光線420在多重攝影機設備410的原點和光線420遇到（亦即終止於）特定物體404的點之間延伸的長度。然後，由光線投射提供的光線網格的擊中距離確定複數個樣本點深度（或距離）（步驟310）。圖4還顯示相鄰攝影機之間的基線b的多重攝影機設備410。
在其他實施例中，確定複數個樣本點深度的步驟310可以包括從3D景象的視差圖計算深度。在一些實施例中，視差圖可以與景象的影像一起提供。在其它實施例中，視差圖可以從藉由多重攝影機設備的不同攝影機記錄的影像之間的視覺視差以計算。具體來說，深度的計算可以包括使用由多重攝影機設備的不同攝影機獲取的影像之間的影像視差。例如，可以詢問與藉由多重攝影機設備的攝影機獲取的3D景象的影像相關聯的深度緩衝。在一些實施例中，深度的計算可以進一步包括從影像視差中形成3D景象的視差圖。
在其它實施例中，確定複數個樣本點深度的步驟310可以包括使用深度感測器以測量多重攝影機設備與3D景象中的物體之間的距離。在各個實施例中，物體可以對應於複數個樣本點之中樣本點，並且深度感測器可以包括任何種類的深度感測器。例如，深度感測器可以是雷射測距感測器，其包含但不限於雷射偵測和測距（laser detection and ranging，LIDAR）系統。在另一示例中，深度感測器可以是飛時測距感測器（time-of-flight sensor）。在另一示例中，距離或深度測量系統採用聲波（例如，聲音導航與測距或「聲納（sound navigation and ranging，SONAR）」系統）或結構光。例如，可以將具有不同顔色位於不同高度的影像投影到景象中，然後可以藉由演算法以使用藉由攝影機獲取的景象影像，以根據每個像素的顏色分配深度來產生深度圖。另外，具有3D追踪功能的機器人也可用於有效地探索或「滾過」景觀並記錄高度或距離等，並且可以用於確定樣本點深度。
如圖3所示，多重攝影機設備的基線和匯聚距離的設定方法300進一步包括將匯聚距離設定為複數個樣本點深度的平均深度的步驟320。具體來說，計算複數個樣本點深度的樣本點深度的平均值。然後將匯聚距離設定為等於所計算的樣本點深度平均值。在一些具體實施例中，複數個樣本點深度包括所有樣本點深度。在其它實施例中，複數個樣本點深度可以包括選擇小於樣本點總數的樣本點深度，例如該集合可以僅包含認爲是相關的或重要的樣本點，並且例如與3D景象中的主要物體或碰撞體相關聯的樣本點。在其它實施例中（例如，對於大型3D模型），複數個樣本點深度可以確定爲複數個頂點的子集（例如，每隔一個或每隔兩個頂點）。再次參考圖4，平均樣本深度 顯示為光線投射平均的擊中距離。
在一些實施例中，複數個樣本點的平均深度為加權平均值。根據各個實施例，加權平均值 可以使用方程式（1）計算： （1） 其中n是複數個樣本點的樣本點數量，s i是複數個樣本點的個別樣本點，並且wi是加權平均值 的權重。
根據一些實施例，加權平均值 的權重可以基於各個樣本點s i與3D景象中的預定位置或特定物體的距離來選擇或分配。例如，權重w i可以基於第i個樣本點s i與景象中心的距離來選擇或確定。在另一個示例中，權重w i可以根據第i個樣本點s i與多重攝影機設備內攝影機的焦點（point of focus、focal point）的距離來選擇或分配。在另一個示例中，權重wi可以根據第i個樣本點s i與特定樣本點s*的距離來選擇或分配（例如，3D景象中感興趣的物體上的樣本點或與其相關聯的樣本點）。
在一些實施例中，加權平均值 的權重可以取決於距離而減少，例如與景象中心、焦點或特定樣本點s*的距離。在一些實施例中，權重w i的减少可以具有取决於距離的線性分布或非線性分布（例如，指數分布）。在一些實施例中，加權平均值 的權重w i可以根據高斯分佈來分配。例如，高斯分佈可以以景象中心、焦點或特定樣本點s*為中心。
再次參考圖3，圖3所示的多重攝影機設備的基線和匯聚距離的設定方法300進一步包括確定複數個樣本點深度的最小樣本點深度的步驟330。在本發明中，最小樣本點深度通常定義為具有與多重攝影機設備的攝影機的最小深度或距離的樣本點。例如，確定最小樣本點深度的步驟330可以藉由檢查複數個樣本點深度並尋找或辨識具有最小值的樣本點來確定。在其它示例中，確定最小樣本點深度的步驟330可以藉由辨識具有最低深度（或距離）的樣本點的群組，然後將最小樣本點深度設定為等於最低深度的樣本點群組中的樣本點深度的平均值來確定。在一些示例中，最低深度的樣本點組可以包括具有最低深度或距離的樣本點的部分，例如，具有最低深度或距離的樣本點的大約百分之五（5%）或大約百分之十（10%）。再次參考圖4，圖中顯示表示光線420的最小擊中距離的最小樣本點深度。
再次參考圖3，根據各個實施例，多重攝影機設備的基線和匯聚距離的設定方法300進一步包括將基線設定為最小樣本點深度與匯聚距離的相差值的倒數的步驟340，如方程式（2）所給定： （2） 其中，b是基線，z min是最小樣本點深度，並且D conv是匯聚距離，如上文所述。
根據一些實施例，多重攝影機設備可以包括複數個虛擬攝影機。例如，3D景象可以是3D模型，並且複數個虛擬攝影機可以是與3D模型相關聯或者用於成像3D模型的攝影機。在一些實施例中，複數個虛擬攝影機之中的虛擬攝影機可以是由彩現器管理的虛擬攝影機。例如，多重攝影機設備可以與彩現器相關聯，彩現器使用多重攝影機設備的虛擬攝影機來獲取虛擬三維景象。在其他實施例中，多重攝影機設備可以包括複數個實體攝影機。例如，3D景象可以是或表示實體景象，其由複數個實體攝影機之中的攝影機成像。在其他實施例中，多重攝影機設備可以包括攝影機（例如，一個或多個攝影機），其在複數個位置之間移動以獲取形成3D景象的影像。在一些實施例中，樣本點深度可以表示相對於多重攝影機設備之中的攝影機（例如，參考攝影機）的深度或距離，而在其它實施例中，樣本點深度可以是相對於整個多重攝影機設備的距離。如上文所述，圖4還顯示相鄰攝影機之間的基線b的多重攝影機設備410。
在根據本文所述原理的其他實施例中，本發明提供了一種光場攝影機系統。在一些實施例中，光場攝影機系統可以具有或者提供自動基線和匯聚距離的確定。圖5是根據與本發明所述原理一致的一實施例，顯示示例中的光場攝影機系統500的方塊圖。如圖5所示，光場攝影機系統500包括多重攝影機設備510。如圖所示，多重攝影機設備510包括複數個攝影機，其彼此之間以基線b分開。
光場攝影機系統500進一步包括處理器520和記憶體530。記憶體530配置為儲存指令，當由處理器520執行時，其實施確定表示多重攝影機設備之間的距離的樣本點集合或者複數個樣本點深度，並且確定位於多重攝影機設備的視野內的三維（3D）景象中的複數個樣本點。在一些實施例中，確定複數個樣本點深度可以與上文關於多重攝影機設備的基線和匯聚距離的設定方法300所述的確定樣本點深度的步驟310基本上相似。
具體來說，在一些實施例中，確定複數個樣本點深度的步驟310可以藉由以下其中一個或多個方式來執行：從表示3D景象的影像的深度圖；使用視差圖來計算深度；以及，在3D景象中進行光線投射，以確定3D景象中的樣本點深度。在其它實施例中，確定複數個樣本點深度的步驟310使用深度感測器以測量多重攝影機設備與3D景象內的物體之間的距離，該物體與複數個樣本點之中的樣本點對應。在一些實施例中，複數個樣本點深度的平均深度是加權平均值，加權平均值的權重是根據與3D景象的焦點之間的距離的遞減函數以分配。
在一些實施例中，複數個攝影機之中的攝影頭是虛擬攝影機，3D景象是3D模型。在一些實施例中，多重攝影機設備的複數個攝影機之中的攝影頭包括實體攝影機，3D景象表示由實體攝影機成像的實體景象。
當圖5中顯示的處理器520執行的時候，儲存在記憶體530中的指令進一步實施設定多重攝影機設備的匯聚距離和基線。根據各個實施例，匯聚距離可以是複數個樣本點深度的平均深度，並且基線可以是匯聚距離減去最小樣本點深度的倒數。在一些實施例中，設定匯聚距離和基線可以基本上類似上文所述的多重攝影機設備的基線和匯聚距離的設定方法300的設定匯聚距離的步驟320和設定基線的步驟340。
在一些實施例中，由處理器520執行的應用程式可以使用3D建模的電腦圖形技術以産生3D模型。3D模型是對不同物體的各種表面和紋理的數學表示，並且可以包含物體之間的空間關係。應用程式可以包含彩現器，其根據使用者輸入產生並更新3D模型。使用者輸入可以涉及藉由點擊或拖曳指標、按方向鍵、將使用者的物理位置轉換成三維模型中的虛擬位置等，以在3D模型中導航。三維模型可以加載到記憶體530中，並在此後進行更新。三維模型可以轉換爲多視像影像，顯示進入三維模型的視窗。可以藉由複數個虛擬攝影機界定視窗，多重攝影機設備510在3D模型內具有座標和方向。在一些實施例中，虛擬攝影機的基線和匯聚距離可以根據虛擬攝影機的運動或3D景象的變化而動態地更新。
在一些實施例中（如圖5所示），光場攝影機系統500進一步包括多視像顯示器540。在這些實施例中，匯聚距離可以對應於多視像顯示器540的零視差平面。
圖6A是根據與本發明所述原理一致的一實施例，顯示示例中的多視像顯示器600的剖面圖。圖6B是根據與本發明所述原理一致的一實施例，顯示另一示例中的多視像顯示器600的剖面圖。具體來說，圖6A顯示在第一模式或二維（2D）模式期間或根據第一模式或二維模式的多視像顯示器600。圖6B顯示在第二模式或多視像模式期間或根據第二模式或多視像模式的多視像顯示器600。圖6C是根據與本發明所述原理一致的一實施例，顯示示例中的多視像顯示器600的立體圖。在圖6C中顯示在多視像模式期間的多視像顯示器600，以作爲示例而非限制。此外，根據各個實施例，可以依照時間順序或時間交錯的方式對2D模式和多視像模式進行時間多工，以在交替的第一時間間隔和第二時間間隔中提供2D和多視像模式（例如，在圖6A和圖6B之間交替顯示）。因此，多視像顯示器600也可以稱爲「時間多工可切換模式」多視像顯示器。
如圖所示，多視像顯示器600配置為提供或發射光，以作為發射的光602。根據各個示例和實施例，發射的光602可用於照明並使用多視像顯示器600以提供影像。例如，發射的光602可以用於照明多視像顯示器600的光閥（例如，下文所述的光閥630）的陣列。
根據各個實施例，在多視像模式期間可以提供方向性發射的光602”，方向性發射的光602”包括複數個方向性光束，其方向對應於多視像影像的不同視像方向。根據各個實施例，相反地，在2D模式期間可以提供廣角發射的光602’，廣角發射的光602’大部分爲非方向性的，並且其錐角大體上大於與多視像顯示器600相關聯的多視像影像或多視像顯示器的視像的錐角。爲了便於顯示，圖6A中將廣角發射的光602’顯示為虛線箭頭。然而，表示廣角發射的光602’的虛線箭頭並非意圖暗示發射的光602具有任何特定的方向，反之，其僅表示光的發射和傳輸，例如從多視像顯示器600發射和傳輸。同樣地，圖6B和圖6C將方向性發射的光602”的方向性光束顯示爲複數個發散箭頭。在各個實施例中，方向性光束可以是或表示光場。
如圖6A至圖6C所示，時間多工多模式顯示器600包括廣角背光件610。所示的廣角背光件610具有平面的或基本上平面的發光表面，其配置以提供廣角發射的光602’（例如，參見圖6A）。根據各個實施例，廣角背光件610可以基本上是具有配置爲提供光以照亮顯示器的光閥陣列的發光表面610’的任何背光件。舉例而言，廣角背光件610可以是直接發射光或直接照明的平面背光板。直接發射光或直接照明的平面背光件，包含但不限於，背光面板採用冷陰極螢光燈（cold-cathode fluorescent lamps，CCFLs）、霓虹燈或發光二極體（light emitting diodes，LEDs）的平面陣列，其配置以直接照射平面的發光表面610’並提供廣角發射的光602’。電致發光面板（ELP）是直接發射光的平面背光件的另一個非限制性示例。在其他示例中，廣角背光件610可以包括採用間接光源的背光件。這種間接照明的背光件可以包含，但不限於各種形式的耦合到邊緣的背光件或所謂的「側光式（edge-lit）」背光件。
圖6A至圖6C所示的多視像顯示器600進一步包括多視像背光件620。如圖所示，多視像背光件620包括多光束元件622的陣列。根據各個實施例，多光束元件622的陣列之中的多光束元件622在多視像背光件620上彼此間隔開。多視像背光件620中可以使用不同種類的多光束元件622，其包含但不限於主動發射器和各種散射元件。根據各個實施例，多光束元件622的陣列之中每一個多光束元件622配置爲在多視像模式期間提供複數個方向性光束，其方向對應於多視像影像的不同視像方向。
在一些實施例中（例如，如圖所示），多視像背光件620進一步包括導光體624，其配置為將光引導為引導的光。在一些實施例中，導光體624可以爲平板導光體。根據各個實施例，導光體624配置為根據全內反射沿著導光體624的長度引導引導的光。在圖6B中由粗箭頭顯示引導的光在導光體624內的總體傳播方向。在一些實施例中，如圖6B所示，引導的光可以由非零值傳播角度引導在傳播方向上，並且引導的光可以包括根據預定準直係數σ準直的準直光。
如圖6B所示，在包含導光體624的實施例中，多光束元件622的陣列之中的多光束元件622可以配置為從導光體624內散射出引導的光的一部分，並且引導所散射出的該部分以使其遠離發射表面，以提供方向性發射的光602”。舉例而言，引導的光的一部分可以被多光束元件622散射出第一表面。此外，根據各個實施例，如圖6A至圖6C所示，多視像背光件620的與第一表面相對的第二表面可以與廣角背光件的平面發光表面610’相鄰。此外，多視像背光件620可以是基本上透明的，以允許來自廣角背光件610的廣角發射的光602’穿過或透射過多視像背光件620的厚度，如圖6A中虛線箭頭所示，其始於廣角背光件610然後穿過多視像背光件620。
在一些實施例中（例如，如圖6A至圖6C所示），多視像背光件620可以進一步包括光源626。因此，舉例而言，多視像背光件620可以是側光式背光件。根據各個實施例，光源626配置以提供在導光體624內被引導的光。在各個實施例中，光源626可以包括基本上任何光源（例如光學發射器），其包含但不限於，一個或多個發光二極體（light emitting diodes, LEDs）或者雷射（例如雷射二極體）。在一些實施例中，光源626可以包括光學發射器，其配置以産生代表特定顔色之具有窄頻光譜的基本上爲單色的光。具體來說，該單色光的顔色可爲特定顔色空間或特定顔色模型的原色（例如，紅綠藍（red-green-blue, RGB）顔色模型）。在其他示例中，光源626可以是基本上寬頻帶的光源，其配置以提供基本上寬頻帶或多色的光。舉例而言，光源626可以提供白光。在一些實施例中，光源626可以包括複數個不同的光學發射器，其配置以提供不同光色。不同光學發射器可以配置以提供具有不同的、顏色特定的、非零值傳播角度的引導的光的光，其對應於每個不同光色。如圖6B所示，多視像背光件620的啟動可以包括啟動光源626。
根據一些實施例（例如，如圖6A至圖6C所示），多光束元件622的陣列中的多光束元件622可以位於導光體624的第一表面處（例如，與多視像背光件620的第一表面相鄰）。在其他實施例（圖中未顯示）中，多光束元件622可以位於導光體624內。在其他實施例（圖中未顯示）中，多光束元件622可以位在導光體624的第二表面處或第二表面上（例如，鄰近多視像背光件620的第二表面）。此外，多光束元件622的尺寸可以與多視像顯示器600的光閥的尺寸相當。在一些實施例中，多光束元件622的尺寸可以介於光閥尺寸的一半到兩倍之間。
如上文所述並且如圖6A至圖6C所示，多視像顯示器600進一步包括光閥630的陣列。在各個實施例中，可用任何種類的光閥作為光閥630的陣列之中的光閥630，其包含但不限於，液晶光閥、電泳光閥，及基於電潤濕的複數光閥其中一種或多種。此外，如圖所示，對於多光束元件622的陣列之中每一個多光束元件622，可以存在一個獨自的複數個光閥630。舉例而言，獨自的複數個光閥630可以對應於時間多工多模式顯示器600的多視像像素。根據一些實施例，可以選擇多光束元件622和光閥630的相當尺寸以减少多視像顯示器的視像之間的暗區（或在一些示例中將其最小化），並且同時减少多視像影像的視像或等效的多視像影像之間的重疊（或在一些示例中將其最小化）。
根據各個實施例，多視像背光件620的多光束元件622可以包括配置以散射出引導的光的一部分的複數個不同結構中的任何一種。舉例而言，不同的結構可以包含但不限於繞射光栅、微反射元件、微折射元件或其各種組合。在一些實施例中，包括繞射光柵的多光束元件622配置以繞射性耦合出或繞射性散射出引導的光的一部分，以作爲包括具有不同主要角度方向的複數個方向性光束的方向性發射的光602”。在一些實施例中，多光束元件的繞射光柵可以包括複數個個別子光柵。在其他實施例中，多光束元件622包括微反射元件，其配置爲將引導的光的一部分反射性耦合出或反射性散射出以作爲複數條方向性光束，或者多光束元件622包含微折射元件，其配置爲藉由或使用折射將引導的光的一部分耦合出或散射出以作爲複數條方向性光束（亦即，折射性散射出引導的光的一部份）。
在一些實施例中，圖5中的光場攝影機系統500可以在客戶端裝置中或使用客戶端裝置實施。圖7是根據與本發明所述原理一致的一實施例，顯示示例中的客戶端裝置700的方塊圖。例如，光場攝影機系統500可以包括客戶端裝置700。例如，光場攝影機系統500的處理器520和記憶體530可以是客戶端裝置700的一部分。
如圖所示，客戶端裝置700包括組件系統，其爲客戶端裝置700的使用者執行各種計算操作。客戶端裝置700可以是膝上型電腦、平板電腦、智慧型手機、觸控螢幕系統、智慧顯示系統或其他客戶端裝置。客戶端裝置700可以包含各種組件，例如（多個）處理器710、記憶體720、（多個）輸入/輸出（I / O）組件730、顯示器740以及其他可能的組件。這些組件可以耦接到用作局部介面的匯流排750，以允許客戶端裝置700的組件互相通訊。儘管客戶端裝置700的組件顯示爲包含在客戶端裝置700中，應理解爲，至少部分組件可以藉由外部連接耦接到客戶端裝置700。例如，組件可以經由外部埠、插座、插頭或連接器從外部插入客戶端裝置700或者以其他方式連接客戶端裝置700。
處理器710可以是中央處理單元（CPU）、圖形處理單元（GPU）、執行電腦處理操作的任何其他積體電路，或其組合。（多個）處理器710可以包含一個或多個處理核心。（多個）處理器710包括執行指令的電路。指令包含，例如，電腦編碼、程式、邏輯或其他機器可讀指令，其藉由（多個）處理器710接收並執行，以執行指令中包含的電腦功能。（多個）處理器710可以執行指令以操作資料。例如，（多個）處理器710可以接收輸入資料（例如影像）、根據指令集處理輸入資料、並産生輸出資料（例如，處理後的影像）。作為另一個示例，（多個）處理器710可以接收指令並產生新指令以用於後續執行。處理器710可以包括實施圖形管線的硬體，圖形管線從彩現器呈現輸出。例如，（多個）處理器710可以包括一個或多個GPU核心、向量處理器、純量處理器或硬體加速器。
記憶體720可以包含一個或多個記憶體組件。記憶體720在本發明中界定為包含揮發性和非揮發性記憶體其中之一或之二。揮發性記憶體組件是指那些在斷電後不會保留資訊的記憶體組件。例如，揮發性記憶體可以包含隨機存取記憶體（RAM）、靜態隨機存取記憶體（SRAM）、動態隨機存取記憶體（DRAM）、磁性隨機存取記憶體（MRAM）或其他隨機存取記憶體結構。系統記憶體（例如，主記憶體、快取記憶體等）可以使用揮發性記憶體以實現。系統記憶體是指快速記憶體，其可以臨時儲存用於快速讀取和寫入存取的資料或指令以輔助（多個）處理器710的指令。
非揮發性記憶體組件是在斷電後保留資訊的記憶體組件。非揮發性記憶體包含唯讀記憶體（ROM）、硬碟驅動器，固態硬碟、USB隨身碟、經由記憶卡讀取器訪問的記憶卡、經由關聯的軟碟驅動器存取的軟碟、經由光碟驅動器存取的光碟、經由適當的磁帶驅動器存取的磁帶。ROM可以包括，例如，可程式化唯讀記憶體（PROM）、可抹除可程式化唯讀記憶體（EPROM）、可電氣抹除可程式化唯讀記憶體（EEPROM）或其他類似記憶體裝置。可以使用非揮發性記憶體以實現儲存記憶體，以提供資料和指令的長期保留。
記憶體720可以指用於儲存指令以及資料的揮發性和非揮發性記憶體的組合。例如，資料和指令可以儲存在非揮發性記憶體中，並且加載到揮發性記憶體中以由（多個）處理器710進行處理。例如，指令的執行可以包含：編譯程式，其譯為格式可以從非揮發性記憶體加載到揮發性記憶體中的機器碼，然後由處理器710運行；原始碼，其轉換為適當格式，例如能夠加載到揮發性記憶體中以供處理器710執行的目標碼；或者原始碼，其由另一可執行程式解譯以在揮發性記憶體中產生指令並由處理器710執行碼。指令可以儲存或加載到記憶體720的任何部分或組件，例如，記憶體720包含RAM、ROM、系統記憶體、儲存器或其任何組合。
雖然記憶體720顯示爲與客戶端裝置700的其他組件分離，應當理解為，記憶體720可以至少部分地嵌入或者以其他方式整合到一個或多個組件中。例如，（多個）處理器710可以包含內建記憶體，其暫存或快取以執行處理操作。
例如，（多個）I / O組件730包含觸控螢幕、揚聲器、麥克風、按鈕、開關、轉盤、攝影機、感測器、加速計或其他組件以接收使用者輸入或産生導向使用者的輸出。（多個）I / O組件730可以接收使用者輸入並轉換為資料，以儲存在記憶體720中或由處理器710處理。（多個）I / O組件730可以接收由記憶體720或（多個）處理器710輸出的資料，並將其轉換爲使用者可以感知的形式（例如，聲音、觸覺響應、視覺資訊等）。I / O組件730可以包含一個或多個耦合到客戶端裝置的實體攝影機。客戶端裝置700可以控制攝影機的基線以及對焦能力。
I / O組件730的特定類型是顯示器740。顯示器740可以包含多視像顯示器（例如，多視像顯示器100）、與二維顯示器結合的多視像顯示器、或者任何其他呈現影像的顯示器。可以在顯示器內疊放作為I / O組件730的電容式觸控螢幕層，以讓使用者在感知視覺輸出同時提供輸入。（多個）處理器710可以產生資料，其以影像的形式呈現在顯示器740上。（多個）處理器710可以執行指令以在顯示器上呈現影像以讓使用者感知。
匯流排750有利於（多個）處理器710、記憶體720、（多個）I / O組件730、顯示器740和客戶端裝置700的任何其他組件之間的指令和資料通訊。匯流排750可以包含位址轉換器、位址解碼器、結構、導電迹線、導線、端口、插頭、插座和其他連接器，以讓資料和指令通訊。
記憶體720內的指令可以由各種實現至少一部分的軟體堆疊的方式實現。例如，這些指令可以體現爲操作系統722、（多個）應用程式724、裝置驅動器（例如顯示驅動器726）、韌體（例如顯示韌體728）或其他軟體組件。操作系統722是支持客戶端裝置700的基本功能的軟體平臺，諸如排程任務、控制I / O組件730、提供硬體資源的存取、管理電源以及支持應用程式724。
（多個）應用程式724可以經由操作系統722在操作系統722上執行，並且存取客戶端裝置700的硬體資源。在此態樣，（多個）應用程式724的執行至少一部分由操作系統722控制。（多個）應用程式724可以是向使用者提供高級功能、服務和其他功能的使用者級軟體程式。在一些實施例中，應用程式724可以是專用的「app」，使用者可以在客戶端裝置700下載或以其他方式存取。使用者可以經由操作系統722提供的使用者介面以啓動（多個）應用程式724。（多個）應用程式724可以由開發人員開發並定義為各種原始碼格式。可以使用各種程式語言或手稿語言以開發應用程式724，例如C、C ++、C＃、Objective C，Java®、Swift、JavaScript®、Perl、PHP、VisualBasic®、Python®、Ruby、Go或其他手稿語言。（多個）應用程式724可以由編譯器編譯成目標碼，或者可以由解譯器解譯以由（多個）處理器710執行。應用程式724可以包含彩現器或其他圖形彩現引擎。
諸如顯示驅動器726的裝置驅動器包含指令，其讓操作系統722與各種I / O組件730通訊。每個I / O組件730可以具有自身的裝置驅動器。可以安裝裝置驅動器，以使其儲存在儲存器中並加載到系統記憶體中。例如，安裝後，顯示驅動器726將從操作系統722接收的高階顯示指令轉換成由顯示器740實施的較低階指令以顯示影像。
韌體，例如顯示韌體728，可以包含允許I / O組件730或顯示器740執行低階操作的機器碼或組合語言碼。韌體可以將特定組件的電訊號轉換成更高階的指令或資料。例如，顯示韌體728可以藉由調整電壓或電流訊號以控制顯示器740如何啟動低位準電壓的各個像素。韌體可以儲存在非揮發性記憶體中，並且可以直接從非揮發性記憶體執行。例如，顯示韌體728可以體現在耦接到顯示器740的ROM晶片中，從而使ROM晶片與客戶端裝置700的其他儲存器和系統記憶體分開。顯示器740可以包含用於執行顯示韌體728的處理電路。
操作系統722、（多個）應用程式724、驅動器（例如顯示驅動器726）、韌體（例如顯示韌體）以及其他可能的指令集，可以各自包括（多個）處理器710可執行的指令、或者客戶端裝置700的其他處理電路，以執行上述功能和操作。儘管本發明所述的指令可以實現爲由上述（多個）處理器710執行的軟體或代碼，但作爲替代，指令也可以實現爲在專用硬體或軟體和專用硬體的組合中。例如，上文所述的指令執行的功能和操作可以實施爲電路或狀態機，其採用多種技術中的任一種或其組合。這些技術可以包含但不限於：分立邏輯電路，其具有用於在應用一個或多個資料訊號時實施各種邏輯功能的邏輯閘；具有適當邏輯閘的特殊應用積體電路（ASIC）；現場可程式邏輯閘陣列（FPGA）；或者其他組件等。
根據所述原理的一些實施例中，提供了一種非暫時性電腦可讀取儲存媒體，其儲存可執行指令，當可執行指令由電腦系統的處理器執行時，會執行確定多重攝影機設備的基線和匯聚距離的操作。具體來說，實施上文所討論的功能和操作的指令可以實現在非暫時性電腦可讀取儲存媒體中。例如，一些實施例可以針對儲存可執行指令的非暫時性電腦可讀取儲存媒體，當可執行指令由電腦系統（例如客戶端裝置700）的處理器（例如處理器710）執行時，會使處理器執行上文所述的各種功能，包含動態地並且自動地更新多重攝影機設備的匯聚距離或者基線的各種操作。
具體來說，由處理器執行儲存在非暫時性電腦可讀取儲存媒體中的指令執行的操作，可以包括確定樣本點深度的集合或複數個樣本點深度，其表示多重攝影機設備和多攝像機裝置的視野內三維（3D）景象中的複數個樣本點之間的距離，匯聚距離設定為複數個樣本點深度的平均深度。這些操作可以進一步包括確定複數個樣本點深度之中最小的樣本點深度，基線設定為最小樣本點深度和匯聚距離之間的相差值的倒數。在一些實施例中，確定複數個樣本點深度包括以下其中一個或多個方法：從表示3D景象的影像的深度圖；使用視差圖來計算深度；在3D景象中進行光線投射，以確定3D景象中的樣本點深度；以及，使用深度感測器以測量多重攝影機設備與3D景象內的物體之間的距離，該物體與複數個樣本點之中的樣本點對應。在一些實施例中，複數個樣本點深度的平均深度是加權平均值，加權平均值的權重是根據與3D景象的焦點之間的距離的遞減函數以分配。
本發明中，「非暫時性（non-transitory）電腦可讀取儲存媒體」界定爲可以包含、儲存或維護本發明所述指令以供指令執行系統使用或與其結合的任何媒體。例如，非暫時性電腦可讀取儲存媒體可以儲存由光場攝影機系統500或客戶端裝置700使用或與其結合使用的指令。此外，非暫時性電腦可讀取儲存媒體可以是也可以不是上述客戶端裝置700的一部分（例如，記憶體720的一部分）。由非暫時性電腦可讀取儲存媒體儲存的指令可以包含但不限於：可從非暫時性電腦可讀取儲存媒體中提取並由處理電路執行的敘述、代碼或宣告（例如，處理器520或（多個）處理器710）。此外，根據本發明定義，術語「非暫時性電腦可讀取儲存媒體」明確排除包括例如載波的暫時性媒體。
根據各個實施例，非暫時性電腦可讀取儲存媒體可以包括多種實體媒體其中任一種，例如磁性、光學或半導體媒體。合適的非暫時性電腦可讀取儲存媒體的更具體的示例可以包含但不限於：磁帶、軟磁碟、硬磁碟、記憶卡、固態硬碟、USB隨身碟或光碟。並且，非暫時性電腦可讀取儲存媒體可以是隨機存取記憶體（RAM），例如，其包含靜態隨機存取記憶體（SRAM）和動態隨機存取記憶體（DRAM）或磁性隨機存取記憶體（MRAM）。另外，非暫時性電腦可讀取儲存媒體可以是唯讀記憶體（ROM）、可程式化唯讀記憶體（PROM）、可抹除可程式化唯讀記憶體（EPROM）、可電氣抹除可程式化唯讀記憶體（EEPROM）或其他種類的記憶體裝置。
客戶端裝置700可以執行上述的任何操作或實現上述的功能。例如，上文討論的處理流程可以由執行指令並處理資料的客戶端裝置700以執行。儘管客戶端裝置700顯示為單一裝置，但是實施例不限於此。在一些實施例中，客戶端裝置700可以由分布式的方式卸載指令的處理，以使複數個其他客戶端裝置700或其他電腦裝置一起操作以執行指令，指令可以分佈式排列地儲存或載入。例如，至少一些指令或資料可以在與客戶端裝置700結合操作的雲端式系統中儲存、加載或執行。
因此，本發明已描述一種設定多重攝影機設備的基線和匯聚距離並應用於光場攝影機系統的示例和實施例。在一些實施例中，基線和匯聚距離可以根據攝影機視像中的點的深度來動態地或即時地確定。應該理解的是，上述示例僅是說明本發明所述的原理的多個具體示例的其中一些示例。很明顯的，所屬技術領域中具有通常知識者可以輕易設計出多種其他配置，但這些配置不會超出本發明的論述。
本申請案請求於2022年1月31日提交的第 PCT/US2022/014613號國際專利申請的優先權，該申請案請求於2021年2月11日提交的第63/148,587號美國臨時申請案的優先權，本發明引用上述每篇全文且併入本發明。
100:多視像顯示器 110:多視像影像 112:視像 120:視像方向 200:景象 202:樹 204:石頭 208:地面 210:攝影機 220:截錐體 230:匯聚平面 300:方法 310:步驟 320:步驟 330:步驟 340:步驟 402:景象 404:物體 410:多重攝影機設備 420:光線 500:光場攝影機系統 510:多重攝影機設備 520:處理器 530:記憶體 540:多視像顯示器 600:多視像顯示器、時間多工多模式顯示器 602:發射的光 602’:廣角發射的光 602”:方向性發射的光 610:廣角背光件 610’:發光表面 620:多視像背光件 622:多光束元件 624:導光體 626:光源 630:光閥 700:客戶端裝置 710:處理器 720:記憶體 722:操作系統 724:應用程式 726:顯示驅動器 728:顯示韌體 730:I/O組件 740:顯示器 750:匯流排 b:基線 z min:最小樣本點深度 σ:預定準直係數 :角度分量 :角度分量 :加權平均值
根據在本發明所述的原理的示例和實施例的各種特徵可以參考以下結合附圖的詳細描述而更容易地理解，其中相同的元件符號表示相同的結構元件，並且其中： 圖1A是根據與本發明所述原理一致的一實施例，顯示示例中的多視像顯示器的立體圖。 圖1B是根據與本發明所述原理一致的一實施例，顯示示例中使用多視像顯示器顯示多視像影像的示意圖。 圖2是根據與本發明所述原理一致的一實施例，顯示獲取三維（3D）景象的多視像影像的示意圖。 圖3是根據與本發明所述原理一致的一實施例，顯示示例中的多重攝影機設備的基線和匯聚距離的設定方法的流程圖。 圖4是根據與本發明所述原理一致的一實施例，顯示示例中的光線投射的示意圖。 圖5是根據與本發明所述原理一致的一實施例，顯示示例中的光場攝影機系統的方塊圖。 圖6A是根據與本發明所述原理一致的一實施例，顯示示例中的多視像顯示器的剖面圖。 圖6B是根據與本發明所述原理一致的一實施例，顯示另一示例中的多視像顯示器的剖面圖。 圖6C是根據與本發明所述原理一致的一實施例，顯示示例中的多視像顯示器的立體圖。 圖7是根據與本發明所述原理一致的一實施例，顯示示例中的客戶端裝置的方塊圖。 特定示例和實施例可以具有上述參考附圖所示的特徵之外的其他特徵，或者具有代替上述參考附圖中所示的特徵的其他特徵。下文將參照上述參考附圖，詳細描述這些特徵和其他特徵。
300:方法
310:步驟
320:步驟
330:步驟
340:步驟

Claims (21)

  1. 一種多重攝影機設備的基線和匯聚距離的設定方法，該方法包括：  確定複數個樣本點深度，該複數個樣本點深度表示該多重攝影機設備與在該多重攝影機設備的視野內的一三維景象中的複數個樣本點之間的距離； 設定該匯聚距離為該複數個樣本點深度的一平均樣本點深度； 確定該複數個樣本點深度的一最小樣本點深度；以及 設定該基線為該最小樣本點深度與該匯聚距離的一相差值的一倒數。
  2. 如請求項1之基線和匯聚距離的設定方法，其中，所述確定該複數個樣本點深度之步驟包括在該三維景象中執行光線投射，以及記錄複數個樣本點中的每個樣本點的擊中距離。
  3. 如請求項1之基線和匯聚距離的設定方法，其中，所述確定該複數個樣本點深度之步驟包括對於該複數個樣本點中的每一個樣本點從該三維景象的一視差圖計算該等樣本點深度。
  4. 如請求項3之基線和匯聚距離的設定方法，其中，所述計算該等樣本點深度之步驟進一步包括使用由該多重攝影機設備中的不同的攝影機獲取的影像之間的一影像視差，以及從該影像視差形成該三維景象的該視差圖。
  5. 如請求項1之基線和匯聚距離的設定方法，其中，所述確定該複數個樣本點深度之步驟包括使用一深度感測器以測量該多重攝影機設備與該三維景象內的物體之間的距離，該等物體與該複數個樣本點中的樣本點對應。
  6. 如請求項5之基線和匯聚距離的設定方法，其中，該深度感測器包括一雷射測距感測器和一飛時測距感測器其中之一。
  7. 如請求項1之基線和匯聚距離的設定方法，其中，該平均樣本點深度是一加權平均值，具有根據該三維景象中與一焦點之間的距離的一遞減函數來分配的權重。
  8. 如請求項7之基線和匯聚距離的設定方法，其中，該加權平均值的該等權重是根據以該焦點爲中心的高斯分布來分配。
  9. 如請求項1之基線和匯聚距離的設定方法，其中，該多重攝影機設備包括複數個虛擬攝影機，該三維景象是一三維模型。
  10. 如請求項1之基線和匯聚距離的設定方法，其中，該多重攝影機設備包括複數個實體攝影機，該三維景象表示一實體景象，由該複數個實體攝影機中的攝影機成像。
  11. 如請求項1之基線和匯聚距離的設定方法，其中，該多重攝影機設備包括一攝影機，在複數個位置之間移動以獲取形成該三維景象的影像。
  12. 一種光場攝影機系統，包括： 一多重攝影機設備，包括複數個攝影機； 一處理器；以及 一記憶體，配置以儲存指令，當該等指令由該處理器執行時，該等指令會實施： 確定複數個樣本點深度，該複數個樣本點深度表示該多重攝影機設備與在該多重攝影機設備的視野內的一三維景象中的複數個樣本點之間的距離；以及 設定該多重攝影機設備的一匯聚距離和一基線， 其中，該匯聚距離為該複數個樣本點深度的一平均樣本點深度，而且該基線為該匯聚距離減去該複數個樣本點深度中的一最小樣本點深度的一相差值的一倒數。
  13. 如請求項12之光場攝影機系統，其中，所述確定該複數個樣本點深度包括下列其中一者或多者：從表示該三維景象的一影像的一深度圖；使用一視差圖來計算該等樣本點深度；以及在該三維景象中執行光線投射，以確定該三維景象中的該等樣本點深度。
  14. 如請求項12之光場攝影機系統，其中，該複數個樣本點深度係使用一深度感測器以測量該多重攝影機設備與該三維景象內的物體之間的距離來確定，該等物體與該複數個樣本點中的樣本點對應。
  15. 如請求項12之光場攝影機系統，其中，該複數個樣本點深度的該平均樣本點深度是一加權平均值，該加權平均值的權重是根據與該三維景象的一焦點之間的距離的一遞減函數來分配。
  16. 如請求項12之光場攝影機系統，其中，該複數個攝影機中的攝影機是一虛擬攝影機，該三維景象是一三維模型。
  17. 如請求項12之光場攝影機系統，其中，該多重攝影機設備的該複數個攝影機中的攝影機包括實體攝影機，該三維景象表示一實體景象，由該實體攝影機成像。
  18. 如請求項12之光場攝影機系統，進一步包括一多視像顯示器，該匯聚距離對應於該多視像顯示器的一零視差平面。
  19. 一種非暫時性電腦可讀取儲存媒體，儲存可執行指令，當該等可執行指令由一電腦系統的一處理器執行時，該等可執行指令會執行確定一多重攝影機設備的一基線和一匯聚距離的操作，該等操作包括： 確定複數個樣本點深度，該複數個樣本點深度表示該多重攝影機設備與在該多重攝影機設備的視野內的一三維景象中的複數個樣本點之間的距離，該匯聚距離設定爲該複數個樣本點深度的一平均樣本點深度；以及 確定該複數個樣本點深度中的一最小樣本點深度，該基線設定為該最小樣本點深度與該匯聚距離的一相差值的一倒數。
  20. 如請求項19之非暫時性電腦可讀取儲存媒體，其中，所述確定該複數個樣本點深度包括下列其中一者或多者：從表示該三維景象的一影像的一深度圖；使用一視差圖來計算該等樣本點深度；在該三維景象中執行光線投射，以確定該三維景象中的該等樣本點深度；以及使用一深度感測器，以測量該多重攝影機設備與該三維景象內的物體之間的距離，該物體對應該複數個樣本點中的樣本點。
  21. 如請求項19之非暫時性電腦可讀取儲存媒體，其中，該複數個樣本點深度的該平均樣本點深度是一加權平均值，該加權平均值的權重是根據與該三維景象的一焦點之間的距離的一遞減函數來分配。
TW111104484A 2021-02-11 2022-02-08 光場攝影機系統以及多重攝影機設備的基線和匯聚距離的設定方法 TWI815300B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US202163148587P 2021-02-11 2021-02-11
US63/148,587 2021-02-11
WOPCT/US22/14613 2022-01-31
PCT/US2022/014613 WO2022173611A1 (en) 2021-02-11 2022-01-31 Light field camera system and method of setting baseline and convergence distance

Publications (2)

Publication Number Publication Date
TW202247648A TW202247648A (zh) 2022-12-01
TWI815300B true TWI815300B (zh) 2023-09-11

Family

ID=82837987

Family Applications (1)

Application Number Title Priority Date Filing Date
TW111104484A TWI815300B (zh) 2021-02-11 2022-02-08 光場攝影機系統以及多重攝影機設備的基線和匯聚距離的設定方法

Country Status (8)

Country Link
US (1) US20230410419A1 (zh)
EP (1) EP4292279A1 (zh)
JP (1) JP2024507138A (zh)
KR (1) KR102686659B1 (zh)
CN (1) CN116830570A (zh)
CA (1) CA3208318A1 (zh)
TW (1) TWI815300B (zh)
WO (1) WO2022173611A1 (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9025007B1 (en) * 2009-04-28 2015-05-05 Lucasfilm Entertainment Company Ltd. Configuring stereo cameras
US20180342075A1 (en) * 2017-05-25 2018-11-29 Lytro, Inc. Multi-view back-projection to a light-field

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8564641B1 (en) * 2010-06-11 2013-10-22 Lucasfilm Entertainment Company Ltd. Adjusting stereo images
US9532027B2 (en) * 2011-05-27 2016-12-27 Warner Bros. Entertainment Inc. Methods for controlling scene, camera and viewing parameters for altering perception of 3D imagery
KR101244866B1 (ko) * 2011-11-16 2013-03-19 한국방송공사 직교식 3ｄ 카메라 구동 장치
EP3326358B1 (en) 2015-02-27 2022-08-17 LEIA Inc. Multiview camera
US20180184066A1 (en) 2016-12-28 2018-06-28 Intel Corporation Light field retargeting for multi-panel display

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9025007B1 (en) * 2009-04-28 2015-05-05 Lucasfilm Entertainment Company Ltd. Configuring stereo cameras
US20180342075A1 (en) * 2017-05-25 2018-11-29 Lytro, Inc. Multi-view back-projection to a light-field

Also Published As

Publication number Publication date
CN116830570A (zh) 2023-09-29
KR102686659B1 (ko) 2024-07-22
EP4292279A1 (en) 2023-12-20
TW202247648A (zh) 2022-12-01
CA3208318A1 (en) 2022-08-18
US20230410419A1 (en) 2023-12-21
WO2022173611A1 (en) 2022-08-18
JP2024507138A (ja) 2024-02-16
KR20230121868A (ko) 2023-08-21

Similar Documents

Publication Publication Date Title
CN108351691B (zh) 用于虚拟图像的远程渲染
JP7471449B2 (ja) マルチモードディスプレイを使用して複数の画像の品質を向上させるシステムおよび方法
US20230290046A1 (en) Multiview display system and method employing multiview image convergence plane tilt
TWI815300B (zh) 光場攝影機系統以及多重攝影機設備的基線和匯聚距離的設定方法
JP2024534103A (ja) マルチビュー画像撮影システムおよび方法
KR101425321B1 (ko) 적응형 렌즈 어레이를 구비하는 3차원 집적 영상 디스플레이 시스템 및 적응형 렌즈 어레이에 대한 요소 영상 생성 방법
TWI823323B (zh) 多視像影像創造系統和創造方法
TWI830147B (zh) 多視像檔案格式的檢測系統與檢測方法
TWI852053B (zh) 使用深度圖的視像合成系統和方法
US20240153200A1 (en) View synthesis system and method using depth map