TW202335494A - 用於在裸視立體顯示裝置上顯示之三維內容的縮放 - Google Patents

用於在裸視立體顯示裝置上顯示之三維內容的縮放 Download PDF

Info

Publication number
TW202335494A
TW202335494A TW111150358A TW111150358A TW202335494A TW 202335494 A TW202335494 A TW 202335494A TW 111150358 A TW111150358 A TW 111150358A TW 111150358 A TW111150358 A TW 111150358A TW 202335494 A TW202335494 A TW 202335494A
Authority
TW
Taiwan
Prior art keywords
screen
dimensional
image
viewer
display
Prior art date
Application number
TW111150358A
Other languages
English (en)
Inventor
西爾維諾 何塞 安圖納 普雷薩
桑德 約翰內斯 布魯沃斯
朱仁 卡爾斯
Original Assignee
荷蘭商戴蒙科控股有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 荷蘭商戴蒙科控股有限公司 filed Critical 荷蘭商戴蒙科控股有限公司
Publication of TW202335494A publication Critical patent/TW202335494A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/111Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H04N13/117Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/122Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/373Image reproducers using viewer tracking for tracking forward-backward translational head movements, i.e. longitudinal movements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本發明係關於一種用於驅動一裸視立體顯示裝置之一螢幕以向一觀看者呈現一三維影像的方法,該方法包括考量1)該觀看者之眼睛至該螢幕之觀看距離;及2)物件之記錄距離來縮放該三維影像。以此方式,一場景中之一或多個特定物件之一個該三維影像可經縮放使得該場景及其中之該(等)物件成為該觀看者之真實環境之一現實部分。亦可在該螢幕上顯示一背景影像,其中該背景影像亦被縮放至現實尺寸。

Description

用於在裸視立體顯示裝置上顯示之三維內容的縮放
本發明係關於一種用於驅動一裸視立體顯示裝置之一螢幕以向駐留在該螢幕之一視場中之一觀看者呈現一三維影像的方法。
在過去二十年中,裸視立體顯示器已吸引極大關注。其等之最突出特徵之一係其等容許一觀看者在不具有一專用眼鏡裝置之情況下而且在觀看者相對於顯示器移動時感知三維影像。此技術之關鍵係包括一個雙凸透鏡或視差屏障之一螢幕之存在。此使裸視立體顯示器能夠同時將一左眼影像引導至觀看者之一左眼及將一右眼影像引導至觀看者之一右眼。所得三維影像提供一深度感(depth perception),其中影像中之元素可看似在顯示器前面或比顯示器更遠(在顯示器「後面」)。不存在任何專用眼鏡裝置容許一觀看者體驗到他在真實世界中實體地存在,而裸視立體顯示器形成至另一世界(一真實可信的虛擬世界,其亦係三維的)之一虛擬視窗。
然而,此等虛擬視窗之一缺點在於所顯示內容之尺寸通常未被觀看者感知為與已被記錄之實際場景之尺寸相匹配。例如,當一觀看者看到被包含在一虛擬視窗之一視場中之一品項(例如,一物件或一人) (即,「透過」虛擬視窗可見之一品項)時,此所顯示品項之尺寸通常不匹配在透過一真實視窗從相同距離進行觀察時真實品項之尺寸。當然,當存在複數個品項時,情況並非如此。
與實境之一進一步差異在於當觀看者朝向或遠離虛擬視窗移動時,任何所顯示品項之大小不會相應地改變。
因此,已知裸視立體顯示器似乎在向一觀看者現實地呈現一三維記錄品項方面具有一些缺點,尤其是在其中裸視立體顯示器充當一虛擬視窗之一設定中。
因此,本發明之一目的係提供一種改良一觀看者在觀看一裸視立體顯示器時;例如,當觀看者「瀏覽一虛擬視窗」以看到另一物件或人時的體驗之方法。特定言之,本發明之一目的係提供一種改良一觀看者在一電話會議中之體驗之方法。
現已發現,可藉由適當地縮放待由裸視立體顯示器顯示之三維內容來達到此等目的之一或多者。
因此,本發明係關於一種用於驅動一裸視立體顯示裝置之一螢幕以向駐留在該螢幕之一視場中之一觀看者呈現一場景中之一物件之一三維影像的方法,該方法包括 -  使用一立體攝影機提供一場景中之一物件之一三維記錄; -  將該物件之該三維記錄作為一三維影像顯示在該螢幕上; 其中該方法包括其中考量以下來縮放該物件之該三維影像之一步驟 -  該觀看者之眼睛至該螢幕之觀看距離; -  該物件至該立體攝影機之記錄距離。
在本描述及發明申請專利範圍各處,術語「三維影像」及「裸視立體影像」可互換地使用且指代相同類型之影像。由此認知,嚴格來說,一裸視立體影像與一三維影像並不相同。一裸視立體影像係僅被一觀看者感知為三維之一影像,此係因為其係由將被呈現給觀看者之一左眼之一左影像及將被呈現給觀看者之一右眼之一右影像組成。
在本發明之內容背景中,術語「左影像」意謂由一裸視立體顯示裝置顯示之旨在用於左眼之影像。對應地,術語「右影像」意謂由一裸視立體顯示之旨在用於右眼之影像。在本文中,應理解,實務上,始終有(非常)小部分之光「洩漏」至另一眼睛,此效應被稱為串擾。然而,觀看者可能並未始終意識到此,且仍認為其三維觀看體驗係令人滿意的。
在本發明之內容背景中,一三維記錄意謂含有表示一三維可見影像之資訊,因為其可用於在以可由一裸視立體顯示裝置處理之一格式被輸入至此裝置時顯示此三維影像。(例如,真實世界中之一場景、人或物件之)一三維記錄係由一立體攝影機捕捉之一真實場景或物件之一記錄或實況串流,且其包括關於場景或物件之三維性之資訊。其可被儲存在與裝置相關聯之一記憶體部分中,使得其可在被請求時被顯示;或其可被顯示為由與裸視立體顯示裝置相關聯之一立體攝影機捕捉之實況視訊(此攝影機可為遠距於裝置之一攝影機,例如,其經組態以捕捉一不同環境中之一場景或物件)。
在本發明之內容背景中,術語「立體攝影機」意謂能夠提供一真實場景或物件之一三維記錄之一攝影機,由此可進行記錄一立體或三維影像。為本發明之目的,一立體攝影機意謂包含一立體攝影機及一全光相機。此外,術語立體攝影機可包括複數個(立體)攝影機,其等共同來自如上文所陳述之一立體攝影機且提供立體攝影機之能力。
在本發明之內容背景中,術語「觀看者」意謂消費根據本發明之方法呈現給他的內容之一人。除了觀看三維影像之外,觀看者亦可體驗其他感官刺激,諸如聲音或觸覺刺激。然而,為方便起見,此人因此被稱為「觀看者」,但應理解,其同時亦可為例如一「收聽者」。
在本文各處,對觀看者之引用將由男性字詞(如「他(he/him)」或「他的」來進行。此僅係為了清晰及簡潔,且應理解,如「她」及「她的」之女性字詞同樣適用。
本發明之一方法利用一裸視立體顯示裝置。此通常係在其使用期間在真實世界中基本上固定之一裝置,諸如一桌上型裝置或一壁掛式裝置。例如,裸視立體顯示裝置係一電視機、具有一監視器之一(桌上型)電腦、一膝上型電腦或一影院顯示系統。然而,其亦可為容許一觀看者與裸視立體顯示裝置一起在真實世界中(自由)移動之一可攜式裝置,諸如一行動電話、一汽車中之一顯示器、一平板電腦或一遊戲主控台。
裸視立體顯示裝置在此項技術中係已知的,例如從WO2013120785A2已知。在本發明之一方法中使用之一裸視立體顯示裝置之主要組件通常為一眼睛追蹤系統、一螢幕、一處理單元及選用音訊構件。
眼睛追蹤系統包括用於追蹤觀看者之眼睛相對於裸視立體顯示裝置的位置之構件,且與處理單元電通信。需要眼睛位置以將左眼影像及右眼影像正確地編織至像素陣列,使得即使當觀看者相對於裸視立體顯示裝置之螢幕移動時,各影像仍命中預期眼睛。
通常亦從眼睛追蹤系統獲得觀看者之眼睛至螢幕之觀看距離。替代地,可存在用於判定此觀看距離之單獨構件。
可藉由使用眼睛追蹤系統或與立體攝影機相關聯或整合在立體攝影機中之一不同系統來獲得一觀看者相對於立體攝影機之記錄距離。
螢幕包括用於向一觀看者顯示一三維影像之構件,該觀看者之眼睛由眼睛追蹤系統追蹤。此等構件包括用於產生一顯示輸出之一像素陣列,及設置在陣列上方以將一左影像引導至觀看者之左眼及將一右影像引導至觀看者之右眼的一視差屏障或一個雙凸透鏡。
處理單元經輸入具有三維記錄,且經組態以考量由眼睛追蹤系統獲得之資料來驅動螢幕。因此,處理單元之一重要組件係所謂的「編織器(weaver)」,其將一左影像及一右影像編織至像素陣列,藉此判定哪些像素將產生與各自影像對應之像素輸出。以此方式,可向在一特定位置處之一觀看者顯示一三維影像。
處理單元通常亦經組態以根據本發明之方法執行一三維影像之縮放。
選用音訊構件包括用於向觀看者播放聲音之構件。例如,音訊構件包括選自立體聲揚聲器、揚聲器陣列、頭戴受話器及耳塞之群組之一或多個裝置。
在本發明之一方法中使用之一裸視立體顯示裝置通常包括用於接收真實世界中之一場景或物件的一三維記錄之一接收器。此亦包含接收真實世界中之一場景或物件之一實況視訊串流。一音訊記錄及/或音訊串流亦可由此接收器接收。視訊及/或音訊記錄之傳送可經由例如一無線連接或一電信線路發生。
在本發明之一方法中使用之一裸視立體顯示裝置可包括用以儲存真實世界中之一場景或物件的一三維記錄之記憶體。
在實際三維記錄發生(或已發生)之場景處,亦存在一或多個裝置。此等裝置係一立體攝影機及用於判定一經記錄物件至立體攝影機之記錄距離之一構件。後一裝置可整合在立體攝影機中。視情況,三維記錄之場景處存在一音訊記錄裝置及/或一照明裝置。
在三維記錄之場景處之裝置通常實體上並非裸視立體顯示裝置之部分,但可經由例如一電信線路與其相關聯。
發明人意識到,在一特定態樣中,已知裸視立體顯示裝置能夠正如一普通電視機顯示二維影像般顯示三維影像:記錄影像之構件之視場基本上適合裝置之螢幕,即,經記錄場景之邊緣亦形成場景之所顯示影像之邊緣。在某些時刻,可為方便起見縮放所顯示內容,但此通常並非根據表觀大小。此外,不同記錄距離處之不同物件將需要不同程度之縮放,此在一影像作為一整體縮放時係不可行的。關於縮放之此等缺點似乎具有所顯示內容未被體驗為觀看者之真實環境的一自然部分之效果。換言之,此所顯示內容損害觀看者之一沉浸式體驗。
現已發現,當分開記錄及量測一場景中之一或多個特定物件時;及當其等作為一三維影像之顯示包括考量觀看者之眼睛至螢幕之觀看距離以及物件至立體攝影機之記錄距離的一縮放時,可達成增加的沉浸感。以此方式,如從所顯示三維影像感知之一物件之尺寸可被調整至使得其等匹配在真實世界中感知物件時物件的尺寸之一程度(如此,螢幕用作一虛擬視窗)。
一物件之此大小感知與觀察物件之距離有關,不僅在觀看側而且在記錄側。在於一螢幕上顯示一真實物件時,存在兩種類型之觀察距離。第一類型係記錄距離,即,一(立體)攝影機與物件之間之距離。第二類型係觀看距離,即,觀看者之眼睛與於其上顯示物件之一影像的螢幕之間之距離。
在一短觀察距離下,視角(視場)較大且物件覆蓋觀看者之視網膜或攝影機之影像感測器的表面之一較大部分。相反地,在一長觀察距離下,視角(視場)較小且物件覆蓋觀看者之視網膜或攝影機之影像感測器的表面之一較小部分。針對在觀看側處對出現在真實世界中(即,在記錄側上)之尺寸之一現實感知,在記錄側上之視角必須與在觀看側上之視角相同。在給定一特定記錄距離及觀看距離(取決於時間及環境)之情況下,達到一匹配視角之最佳方式係(即時)縮放觀看側上(即,螢幕上)之影像。此反映在本發明之方法中。當記錄距離及觀看距離係已知時,熟習此項技術者可使用常見數學原理且在在未進行任何創造性努力之情況下計算何種縮放程度適用。
為本發明之目的,待以此方式縮放之物件通常存在於距立體攝影機之一定距離處,該距離係在立體觀測可行之一範圍內。通常,此係在小於25 m之一距離處,較佳地在小於10 m之一距離處,更佳地在小於7 m之一距離處,且甚至更佳地在小於5 m之一距離處。例如,其小於4 m、小於3 m或小於2 m。
達成此縮放之一較佳方式係藉由定義真實世界中之一待記錄物件之一表觀大小,及將此轉譯為在一螢幕上顯示經記錄物件之一影像。為此,亦定義如顯示在螢幕上之物件之一表觀大小。術語一物件之「表觀大小」意謂指示從物件之一個側至物件之相對側之角距離。此可被視為角位移,一眼睛或攝影機必須旋轉遍及該角位移以從一個側看向相對側。
在此內容背景內,一物件之表觀真實世界大小係由一人在真實世界中所感知之角大小,該人至物件之距離係立體攝影機至由立體攝影機記錄之物件之距離(即,人之視點係立體攝影機之視點)。對應地,物件之表觀顯示大小係當三維影像顯示在螢幕上時由裸視立體顯示裝置之觀看者感知之角大小。
在本發明之方法中,三維影像較佳地經縮放使得表觀顯示大小匹配表觀真實世界大小。此匹配意謂三維影像及真實物件被感知為具有相同大小(例如,兩者被感知為具有相同高度且兩者被感知為具有相同寬度)。以此方式,可判定必須將三維影像縮放至何種程度以具有一匹配表觀大小。如此,結果係經縮放三維影像成為觀看者之真實環境之一現實部分。
然而,表觀顯示大小亦可被設定為表觀真實世界大小之一特定所要百分比(即,除100%外之一百分比,如此一來兩個表觀大小匹配)。當現實尺寸不太重要及/或當不期望一物件覆蓋螢幕之一非常大或非常小部分時,情況可如此。例如,所要百分比係在50%至150%之範圍內,特定言之在80%至120%之範圍內,更特定言之在95%至105%之範圍內,且甚至更特定言之在99%至101%之範圍內。
相當於判定一(所顯示或真實)物件之表觀大小的係判定此物件之一特徵之表觀大小。例如,當物件係一刀子時,特徵可為其刀片。或當物件係一人體頭部時,其可為眼睛之間之距離。
因此,本發明之一方法可包括以下步驟 a) 判定物件至立體攝影機之記錄距離; b) 判定觀看者之眼睛至螢幕之觀看距離; c) 定義物件之一特徵,該特徵被包含在三維影像中; d) 判定特徵之一表觀真實世界大小,該表觀真實世界大小係在於真實世界中從根據a)獲得之記錄距離觀看特徵時該特徵之角大小; e) 判定特徵之一表觀顯示大小,該表觀顯示大小係在於螢幕上從根據b)獲得之觀看距離作為一三維影像觀看特徵時該特徵之角大小; f) 藉由將根據e)判定之三維影像中之表觀顯示大小調整為根據d)獲得之表觀真實世界大小之一所要百分比來縮放三維影像; g) 當三維影像大於螢幕時,藉由裁剪三維影像而使在步驟f)中縮放之三維影像適合螢幕。
本發明之方法不限於一個物件之縮放。亦可縮放複數個物件且同時顯示該等物件。因此,該方法可為一種方法,其中 - 場景中存在複數個物件; - 針對複數個物件之各物件執行該方法; - 在螢幕上同時顯示複數個三維影像,其中考量觀看者之眼睛至螢幕之觀看距離及物件至立體攝影機之記錄距離來彼此獨立地縮放各影像。
在一替代措辭中,該方法可為一種方法,其包括 - 提供一場景中之一第一物件之一第一三維記錄及場景中之一第二物件之一第二三維記錄,兩個記錄係由一立體攝影機獲得; - 同時在螢幕上顯示第一三維記錄作為一第一三維影像及在螢幕上顯示第二三維記錄作為一第二三維影像; 其中考量以下來將第一及第二三維影像彼此獨立地縮放至一所要程度 - 觀看者之眼睛至螢幕之觀看距離; - 各自物件至立體攝影機之記錄距離(即,針對第一三維影像之縮放,考量第一物件至立體攝影機之記錄距離;及針對第二三維影像之縮放,考量第二物件至立體攝影機之記錄距離)。
應注意,在一螢幕上(同時)顯示一或多個物件之各別記錄通常需要物件先前已彼此分割及與一背景分割,因為一記錄通常包括一或多個物件形成其之一部分之一完整場景。當彼此獨立地縮放物件時,此更加適用。將物件與其等所處之一場景之其餘部分分割在此項技術中係已知的。因此,對於熟習此項技術者而言,任何此分割係一標準程序。
除一或多個物件外,發生實際三維記錄之場景亦可包括一背景。在本發明之內容背景中,一背景意謂與立體攝影機相距一定距離之場景之任何部分,該距離在7 m至無窮遠之範圍內、在10 m至無窮遠之範圍內、在15 m至無窮遠之範圍內、在25 m至無窮遠之範圍內或在50 m至無窮遠之範圍內。歸因於其相對遠距於立體攝影機,一背景可作為一整體進行縮放。因此,本發明之一方法可包括 - 提供由一攝影機或一立體攝影機獲得之場景中的背景之一記錄; - 同時1)在螢幕上顯示背景之記錄作為一背景影像及2)在螢幕上顯示物件之三維記錄作為一三維前景影像;或在螢幕上顯示複數個物件之三維記錄作為三維前景影像; 其中該方法包括其中考量以下來縮放背景影像之一步驟 - 觀看者之眼睛至螢幕之觀看距離; - 攝影機或立體攝影機之一視場。
在一較佳實施例中,藉由進一步執行以下步驟來執行此方法 a) 判定觀看者之眼睛至螢幕之觀看距離; b) 判定攝影機或立體攝影機之視場; c) 將背景影像虛擬地(imaginarily)定位在螢幕之顯示平面中,使得背景影像平面與螢幕之顯示平面重合; d) 判定必須將背景影像虛擬地縮放至何種程度以容許觀看者從根據a)獲得之觀看距離虛擬地看到具有對應於根據b)獲得之攝影機或立體攝影機之視場的一所要百分比之一視場之背景影像; e) 將背景影像縮放至根據d)獲得之程度及將其顯示在螢幕上; f) 藉由在背景影像大於螢幕之處裁剪背景影像而使在步驟e)中縮放之背景影像適合螢幕。
將背景影像虛擬地定位在螢幕之顯示平面中意謂在其中觀看者在螢幕前面在根據a)獲得之一距離處的設定中,背景影像以一虛構或虛擬方式顯示在與螢幕之顯示平面重合之一平面中。在本文中,虛擬顯示之背景影像之尺寸(例如,長度及寬度)不限於螢幕尺寸。鑑於觀看者至螢幕之觀看距離及他看到背景影像所需要之視場(其係根據a)獲得之攝影機或立體攝影機之視場之一所要百分比),判定必須將背景影像虛擬地縮放至何種程度。當觀看者至螢幕之觀看距離及攝影機或立體攝影機之視場(之所要百分比)係已知時,熟習此項技術者可使用常見數學原理且在未進行任何創造性努力之情況下計算此縮放程度。
此虛擬縮放程度隨後被應用於背景影像之真實顯示。當結果係背景影像大於螢幕時,則將在背景影像大於螢幕之處裁剪背景影像。當其小於螢幕時,則吾人可決定在特定位置處缺少一背景影像,或將在缺少一背景影像之處顯示另一影像。
在本發明之方法中,背景影像較佳地經縮放使得觀看者看到背景影像之所依之視場匹配攝影機或立體攝影機之視場。此匹配意謂背景影像及真實背景被感知為具有相同大小(例如,兩者被感知為具有相同高度且兩者被感知為具有相同寬度)。運用此設定(即,匹配視場),可判定必須將背景影像縮放至何種程度。如此,結果係經縮放背景影像成為觀看者之真實環境之一現實部分。
然而,觀看者看到背景所依之視場亦可被設定為攝影機或立體攝影機之視場之一特定所要百分比(即,除100%外之一百分比,其中兩個視場匹配)。當現實尺寸不太重要及/或當期望放大或縮減一背景時,情況可如此。例如,所要百分比係在50%至150%之範圍內,特定言之在80%至120%之範圍內,更特定言之在95%至105%之範圍內,且甚至更特定言之在99%至101%之範圍內。
本發明之一方法可有利地應用於電話會議而容許遠距於觀看者之另一人與觀看者通信,反之亦然。在此設定中,另一人及觀看者兩者較佳地具有可實行本發明之方法之構件;如此,觀看者之裸視立體顯示裝置包括立體攝影機,該立體攝影機根據本發明之方法與另一人之裸視立體顯示裝置一起操作。其提供觀看者之一三維記錄,使得另一人可看到觀看者之三維影像(反之亦然)。
然而,觀看者之立體攝影機亦可向觀看者(且並非另一人)顯示觀看者之記錄。因此,在本發明之一方法中,立體攝影機可經組態以在螢幕之視場中記錄觀看者,使得螢幕可向觀看者顯示觀看者之一記錄。在此情況下,觀看者觀看其自身之一三維影像(因此,觀看者之裸視立體顯示裝置可被視為一虛擬鏡子)。為此,所顯示三維影像較佳地係鏡像的。
在一實施例中,根據本發明之方法之縮放可在三維影像之顯示期間重複一或多次,以考量觀看者之眼睛相對於螢幕的位置之一變化。
在另一實施例中,整個方法被重複一或多次,以考量1)場景中之一可能變化,諸如物件至立體攝影機之記錄距離之一變化;及2)觀看者之眼睛相對於螢幕的位置之一可能變化。例如,其以每秒至少一次重複之一速率,以每秒至少10次、至少25次、至少40次或至少50次重複之一速率重複。特定言之,該速率係在每秒27次至33次重複之範圍內、在每秒57次至63次重複之範圍內或在每秒87次至93次重複之範圍內。一高速率以一高頻率產生連續影像,此可由觀看者感知為一電影。一高速率亦意謂存在對觀看者之眼睛至螢幕之觀看距離之變化及物件至立體攝影機之記錄距離之變化的一更及時調節。例如,當觀看者相對於裸視立體顯示裝置進行快速移動時,及/或當物件相對於立體攝影機進行快速移動時,在以一高重複速率實行本發明之方法時及時地考量此等移動。
在本發明之一方法中,三維記錄可被儲存在諸如一記憶棒或一硬碟之一資料載體上。接著,裸視立體顯示裝置自此儲存器獲得三維記錄。替代地,裸視立體顯示裝置「實況地」獲得三維記錄而無需自一記憶體讀取該三維記錄。因此,在本發明之一方法中,三維記錄可被包含在與裸視立體顯示裝置相關聯之一記憶體部分中,或其可為源自其中發生實際三維記錄的場景之一實況視訊串流。

Claims (15)

  1. 一種用於驅動一裸視立體顯示裝置之一螢幕以向駐留在該螢幕之一視場中之一觀看者呈現一場景中之一物件之一三維影像的方法,該方法包括 提供由一立體攝影機獲得之一場景中之一物件之一三維記錄; 將該物件之該三維記錄作為一三維影像顯示在該螢幕上; 其中考量以下來將該物件之該三維影像縮放至一所要程度 該觀看者之眼睛至該螢幕之觀看距離; 該物件至該立體攝影機之記錄距離。
  2. 如請求項1之方法,其中該方法包括以下步驟 a) 判定該物件至該立體攝影機之該記錄距離; b) 判定該觀看者之眼睛至該螢幕之該觀看距離; c) 定義該物件之一特徵,該特徵被包含在該三維影像中; d) 判定該特徵之一表觀真實世界大小,該表觀真實世界大小係在於該真實世界中從根據a)獲得之該記錄距離觀看該特徵時該特徵之角大小; e) 判定該特徵之一表觀顯示大小,該表觀顯示大小係在於該螢幕上從根據b)獲得之該觀看距離作為一三維影像觀看該特徵時該特徵之該角大小; f) 藉由將根據e)判定之該三維影像中之該表觀顯示大小調整至根據d)獲得之該表觀真實世界大小之一所要百分比來縮放該三維影像; g) 藉由在該三維影像大於該螢幕之處裁剪該三維影像而使在步驟f)中縮放之該三維影像適合該螢幕。
  3. 如請求項1或2之方法,其中該三維記錄被包含在與該裸視立體顯示裝置相關聯之一記憶體部分中,或其中該三維記錄係一實況視訊串流。
  4. 如請求項1或2之方法,其中 該場景中存在複數個物件; 針對該複數個物件之各物件執行該方法; 在該螢幕上同時顯示複數個三維影像,其中各影像係彼此獨立地縮放。
  5. 如請求項1或2之方法,該方法包括 提供一場景中之一第一物件之一第一三維記錄及該場景中之一第二物件之一第二三維記錄,兩個記錄係由一立體攝影機獲得; 同時在該螢幕上顯示該第一三維記錄作為一第一三維影像及在該螢幕上顯示該第二三維記錄作為一第二三維影像; 其中考量以下來縮放該第一及該第二三維影像 該觀看者之眼睛至該螢幕之該觀看距離; 該各自物件至該立體攝影機之該記錄距離。
  6. 如請求項1或2之方法,其中在該場景中與該立體攝影機相距一定距離處存在一背景,該距離係在10 m至無窮遠,特定言之從25 m至無窮遠之範圍內,該方法進一步包括 提供由一攝影機或一立體攝影機獲得之該場景中之該背景之一記錄; 同時1)在該螢幕上顯示該背景之該記錄作為一背景影像及2)在該螢幕上顯示該物件之該三維記錄作為一三維前景影像;或在該螢幕上顯示複數個物件之該三維記錄作為三維前景影像; 其中考量以下來縮放該背景影像 該觀看者之眼睛至該螢幕之該觀看距離; 該攝影機或立體攝影機之視場。
  7. 如請求項6之方法,其中該方法包括以下步驟 a) 判定該觀看者之眼睛至該螢幕之該觀看距離; b) 判定該攝影機或立體攝影機之該視場; c) 將該背景影像虛擬地定位在該螢幕之顯示平面中,使得背景影像平面與該螢幕之該顯示平面重合; d) 判定必須將該背景影像虛擬地縮放至何種程度以容許該觀看者從根據a)獲得之該觀看距離虛擬地看到具有對應於根據b)獲得之該攝影機或立體攝影機之該視場的一所要百分比之一視場之該背景影像; e) 將該背景影像縮放至根據d)獲得之該程度及將其顯示在該螢幕上; f) 藉由在該背景影像大於該螢幕之處裁剪該背景影像而使在步驟e)中縮放之該背景影像適合該螢幕。
  8. 如請求項1或2之方法,其中該物件係一人體頭部。
  9. 如請求項1或2之方法,其中在電話會議中使用該方法。
  10. 如請求項1或2之方法,其中該立體攝影機經組態以在該螢幕之該視場中記錄該觀看者。
  11. 如請求項10之方法,其中該所顯示三維影像係鏡像的。
  12. 如請求項1或2之方法,其中該所要百分比係在50%至150%之範圍內,特定言之在80%至120%之範圍內,更特定言之在95%至105%之範圍內,且甚至更特定言之在99%至101%之範圍內。
  13. 如請求項1或2之方法,其中該縮放係在該三維影像之該顯示期間重複一或多次,以考量該觀看者之眼睛相對於該螢幕的位置之一變化。
  14. 如請求項1或2之方法,其中該方法被重複一或多次,以考量該物件至該立體攝影機之該記錄距離之一變化及/或該觀看者之眼睛相對於該螢幕的該位置之一變化。
  15. 如請求項1或2之方法,其中該裸視立體顯示裝置係選自電視機、桌上型電腦、膝上型電腦、影院顯示系統、行動電話、一汽車中之顯示器、平板電腦及遊戲主控台之群組。
TW111150358A 2021-12-28 2022-12-28 用於在裸視立體顯示裝置上顯示之三維內容的縮放 TW202335494A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
NL2030325 2021-12-28
NL2030325A NL2030325B1 (en) 2021-12-28 2021-12-28 Scaling of three-dimensional content for an autostereoscopic display device

Publications (1)

Publication Number Publication Date
TW202335494A true TW202335494A (zh) 2023-09-01

Family

ID=79831632

Family Applications (1)

Application Number Title Priority Date Filing Date
TW111150358A TW202335494A (zh) 2021-12-28 2022-12-28 用於在裸視立體顯示裝置上顯示之三維內容的縮放

Country Status (3)

Country Link
NL (1) NL2030325B1 (zh)
TW (1) TW202335494A (zh)
WO (1) WO2023128760A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110157322A1 (en) * 2009-12-31 2011-06-30 Broadcom Corporation Controlling a pixel array to support an adaptable light manipulator
US9041774B2 (en) * 2011-01-07 2015-05-26 Sony Computer Entertainment America, LLC Dynamic adjustment of predetermined three-dimensional video settings based on scene content
GB2499426A (en) 2012-02-16 2013-08-21 Dimenco B V Autostereoscopic display device with viewer tracking system
WO2019041035A1 (en) * 2017-08-30 2019-03-07 Innovations Mindtrick Inc. STEREOSCOPIC IMAGE DISPLAY DEVICE ADJUSTED BY THE SPECTATOR

Also Published As

Publication number Publication date
WO2023128760A1 (en) 2023-07-06
NL2030325B1 (en) 2023-07-03

Similar Documents

Publication Publication Date Title
US8913108B2 (en) Method of processing parallax information comprised in a signal
US8514275B2 (en) Three-dimensional (3D) display method and system
US8514225B2 (en) Scaling pixel depth values of user-controlled virtual object in three-dimensional scene
US20150358539A1 (en) Mobile Virtual Reality Camera, Method, And System
US7660472B2 (en) System and method for managing stereoscopic viewing
CN105894567B (zh) 放缩三维场景中的用户控制的虚拟对象的像素深度值
GB2582315A (en) Method and system for generating an image
WO2003081921A1 (fr) Procede de traitement d'images tridimensionnelles et dispositif
JP2014508430A (ja) フィードバックベース3次元ビデオのためのゼロ視差平面
CN108141578A (zh) 呈现相机
JP6207640B2 (ja) 2次元映像の立体映像化表示装置
Benzeroual et al. 3D display size matters: Compensating for the perceptual effects of S3D display scaling
TW202335494A (zh) 用於在裸視立體顯示裝置上顯示之三維內容的縮放
JP2009500878A (ja) 奥行錯覚デジタル撮像
JP2012134885A (ja) 画像処理装置及び画像処理方法
JP2018504014A (ja) 三次元の外観を有する画像の再生方法
Schild et al. Integrating stereoscopic video in 3D games
Mangiat et al. Camera placement for handheld 3d video communications
EP4030752A1 (en) Image generation system and method
US9609313B2 (en) Enhanced 3D display method and system
Hast 3D Stereoscopic Rendering: An Overview of Implementation Issues
Rhee et al. Stereoscopic view synthesis by view morphing
US20210051310A1 (en) The 3d wieving and recording method for smartphones
WO2024128915A1 (en) Method for scaling size and depth in videoconferencing
TW202329684A (zh) 呈現3d視圖及3d立體聲之裸視立體顯示裝置