TWI500314B - A portrait processing device, a three-dimensional portrait display device, and a portrait processing method - Google Patents

A portrait processing device, a three-dimensional portrait display device, and a portrait processing method Download PDF

Info

Publication number
TWI500314B
TWI500314B TW101102252A TW101102252A TWI500314B TW I500314 B TWI500314 B TW I500314B TW 101102252 A TW101102252 A TW 101102252A TW 101102252 A TW101102252 A TW 101102252A TW I500314 B TWI500314 B TW I500314B
Authority
TW
Taiwan
Prior art keywords
coordinate value
viewer
display
viewing area
image
Prior art date
Application number
TW101102252A
Other languages
English (en)
Other versions
TW201310972A (zh
Inventor
Kenichi Shimoyama
Ryusuke Hirai
Takeshi Mita
Nao Mishima
Norihiro Nakamura
Yoshiyuki Kokojima
Original Assignee
Toshiba Kk
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Kk filed Critical Toshiba Kk
Publication of TW201310972A publication Critical patent/TW201310972A/zh
Application granted granted Critical
Publication of TWI500314B publication Critical patent/TWI500314B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/305Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/27Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/30Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers
    • G02B30/32Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers characterised by the geometry of the parallax barriers, e.g. staggered barriers, slanted parallax arrays or parallax arrays of varying shape or size
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/317Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using slanted parallax optics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/376Image reproducers using viewer tracking for tracking left-right translational head movements, i.e. lateral movements
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/028Improving the quality of display appearance by changing the viewing angle properties, e.g. widening the viewing angle, adapting the viewing angle to the view direction

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Description

畫像處理裝置、立體畫像顯示裝置及畫像處理方法
本發明之實施形態係關於畫像處理裝置、立體畫像顯示裝置及畫像處理方法。
於立體畫像顯示裝置,視聽者無須使用特殊之眼鏡可以裸眼觀察立體畫像。於該立體畫像顯示裝置,係將不同視點之複數畫像予以顯示,藉由例如視差遮障、雙凸透鏡等來控制彼等光線。控制後之光線,係被導入視聽者之兩眼,只要視聽者之觀察位置適當,視聽者即可以辨識立體畫像。如上述說明,將視聽者可觀察立體畫像的區域稱為視域。
但是,存在著該視域被限定的問題。例如,左眼所感覺的畫像之視點相較於右眼所感覺的畫像之視點呈相對偏右側,因此,立體畫像無法正確辨識的觀察位置、亦即逆視區域存在。
習知,對應於視聽者位置來設定視域的技術,係藉由感測器檢測出視聽者位置,對應於視聽者位置來切換右眼用畫像與左眼用畫像而控制視域位置的技術。
[先行技術文獻] [專利文獻]
[專利文獻1]專利第3443271號公報
但是,習知技術完全未針對視聽者之高度方向之位置加以考慮,因此在對應個別高度而顯示不同視域的立體畫像之立體畫像顯示裝置,當視聽者位於和所推斷的觀察位置之高度不同高度時,該視聽者變為難以觀察立體畫像之問題存在。
本發明所欲解決的課題在於,提供畫像處理裝置、立體畫像顯示裝置及畫像處理方法,其可使視聽者對應於個別之高度容易觀察不同視域的立體畫像。
實施形態之畫像處理裝置,係具備:取得部、算出部及顯示控制部。取得部,係取得視聽者位置的3維座標值。算出部,係使用3維座標值算出用於表示基準平面上之視聽者位置的基準座標值,該基準平面係包含視聽者可以觀察立體畫像之視域者。顯示控制部,係針對依個別高度顯示不同視域之立體畫像的顯示裝置進行控制,以使顯示和基準座標值對應之資訊。
[實施發明之形態]
以下,參照圖面詳細說明本發明之畫像處理裝置、立 體畫像顯示裝置及畫像處理方法之實施形態。
(第1之實施形態)
第1之實施形態之畫像處理裝置10,係使用於視聽者可以裸眼觀察立體畫像的TV(電視)、PC(個人電腦)、智慧型手機、數位像框等之立體畫像顯示裝置1。立體畫像係指包含互相具有視差的複數個視差畫像的畫像。另外,實施形態中說明之畫像可維靜止畫或動畫之其中之一。
圖1係表示第1實施形態之立體畫像顯示裝置1之構成例的方塊圖。立體畫像顯示裝置1,係具備:畫像處理裝置10,及顯示裝置18。畫像處理裝置10,係進行畫像處理的裝置。其詳細內容如後述。
顯示裝置18,係對應於個別高度顯示不同視域之立體畫像的裝置。視域係指視聽者可以觀察的顯示裝置18所顯示立體畫像之範圍(區域)。該可以觀察的範圍係成為實體空間之範圍(區域)。該視域,係由顯示裝置18之顯示參數(詳細後述)之組合決定。因此,藉由設定顯示裝置18之顯示參數,可以設定視域。
另外,以下之說明之本實施形態中之於實體空間上,係以顯示裝置18之顯示面(顯示器)之中心為原點,以顯示器面之水平方向為X軸,以顯示器面之鉛直方向為Y軸,以顯示器面之法線方向為Z軸而加以設定。本實施形態中之高度方向係指Y軸方向。但是,實體空間上之座 標之設定方法不限定於此。
如圖2所示,顯示裝置18,係包含顯示元件20與開口控制部26。視聽者,係介由開口控制部26觀察顯示元件20,而觀察顯示裝置18所顯示的立體畫像。
顯示元件20,係針對立體畫像之顯示用的視差畫像進行顯示。顯示元件20,可為直視型2維顯示器,例如有機EL(Organic Electro Luminescence)或LCD(Liquid Crystal Display),PDP(Plasma Display Panel),投射型顯示器等。
顯示元件20,例如可以RGB各色之子像素,以RGB為1畫素配置成為矩陣狀之公知之構成。此時,並列於第1方向的RGB各色之子像素係構成1畫素,在視差之數範圍內將鄰接畫素並列於和第1方向交叉的第2方向而成為畫素群,將顯示於該畫素群的畫像稱為要素畫像30。第1方向例如為列方向(垂直方向),第2方向例如為行方向(水平方向)。顯示元件20之子像素之配列,亦可為其他之公知之配列。又,子像素不限定於RGB之3色。例如,可為4色。
開口控制部26,係使由顯示元件20朝其前方發散的光線,介由開口部朝特定方向射出(以下稱具有,該機能的開口部為光學開口部)。開口控制部26可為雙凸透鏡(lenticular lens)或視差遮障(parallax barrier)等。
光學開口部係對應於顯示元件20之各要素畫像30而配置。欲於顯示元件20顯示複數個要素畫像30時,須於 顯示元件20顯示和複數個視差方向對應的視差畫像群(多視差畫像)。該多視差畫像之光線係透過各光學開口部。位於視域內的視聽者33,係分別藉由左眼33A及右眼33B觀察包含於要素畫像30之不同畫素。如此則,藉由對視聽者33之左眼33A及右眼33B分別顯示不同視差的畫像,而使視聽者33可以觀察立體畫像。
本實施形態中之係如圖3所示,開口控制部26之光學開口部之延伸方向係對於顯示元件20之第1方向具有特定之傾斜而被設置。於圖3之例,用於表示光學開口部之沿線方向的向量R可由式1來表示。
如本實施形態之將光學開口部以傾斜配置時,光學開口部與顯示畫素間對於行方向(該例為圖3所示第2方向)之位置呈偏移,分別對應於個別高度而呈現不同的視域位置。圖4係Y=Y1之平面上之視域S1,Y=Y0之平面上之視域S0,及Y=Y2之平面上之視域S2之各別之模式圖(其之一例為Y1>0>Y2)。於圖4之例,顯示面(顯示器)至視域S1之距離,顯示面至視域S0之距離,及顯示面至視域S2之距離分別為同一。
圖5係表示由上方俯視顯示面及各視域S1,S0,S2之狀態圖(X-Z平面圖)。圖6係表示由側方俯視顯示面及各視域S1,S0,S2之狀態圖(Y-Z平面圖)。圖7係表示由正面俯視顯示面及各視域S1,S0,S2之狀態圖( X-Y平面圖)。由圖5可知,視域S1,S0及S2之互相於X方向呈偏移。另外,由圖7可知,視域之個別高度之偏移係沿著向量R。該偏移量可由高度之差與向量R之傾斜求出。亦即,於該例,各視域S1,S0,S2係於高度方向(Y方向)傾斜被延伸。
另外,於本實施形態之顯示裝置18,光學開口部之延伸方向對於顯示元件20之第1方向,係以具有特定傾斜而被設置(採用傾斜透鏡作為開口控制部26),但不限定於此,顯示裝置18只要是對應於個別高度而可以顯示不同視域的立體畫像者即可。
圖8係表示畫像處理裝置10之構成例的方塊圖。如圖8所示,畫像處理裝置10係包含取得部200,算出部300,及顯示控制部400之構成。
取得部200係取得3維座標值,該3維座標值為用於表示視聽區域內之實體空間之視聽者位置者。取得部200,例如除可視攝影機、紅外線攝影機等之攝像機器以外,可使用雷達或感測器等之機器。彼等機器係顯示習知技術由獲得的資訊(攝影機時為攝影畫像)取得視聽者位置。例如使用可視攝影機時,係對取得的畫像進行畫像解析,而進行視聽者之檢測及視聽者位置之算出。如此則,取得部可取得視聽者位置。又,使用雷達時,係對取得的雷達信號實施信號處理,而進行視聽者之檢測及視聽者位置之算出。如此則,取得部可取得視聽者位置。又,於人物檢測.位置算出之視聽者之檢測,可針對臉部、頭、人物全 體、標記等可以判斷為人的任意對象進行檢測。另外,視聽者位置之取得方法不限定於上述之方法。
算出部300,係使用取得部200所取得的3維座標值,算出事先設定的基準平面上之視聽者位置的基準座標值。基準平面只要是包含視域之平面即可。本實施形態中之向量R可採用非平行面之其中任意之平面作為基準平面。
例如可採用以通過顯示器之中心的Y=0之平面為基準平面,亦可採用以通過Y=C(C為和設計條件對應之常數)之平面為基準平面。又,亦可採用和某一視聽者i之高度為同一高度之平面(Y=Yi)作為基準平面。又,亦可採用通過複數個視聽者位置之平面作為基準平面。此時,視聽者之人數為3人以下時,可將後述之投影引起的誤差設為最小。另外,亦可採用複數個視聽者起之距離之總和為最小之平面作為基準平面。此時,視聽者之人數為3人以上時,亦可將後述之投影引起的誤差設為最小。又,亦可採用通過觀測視聽者的攝影機之光軸之平面作為基準平面。此時,觀測誤差為最小。
接著,說明基準座標值之算出方法。例如本實施形態之算出部300,可以沿著向量R(視域之延伸方向)攝影至基準平面上的座標值作為基準座標值,而算出取得部200所取得的3維座標值。假設取得部200所取得的視聽者之3維座標值為(Xi,Yi,Zi),基準平面之法線向量n為(a,b,c)。基準平面可使用該法線向量n=(a,b,c)由式2來表示。
[數2]aX+bY+cZ+d=0………(2)
於此,使取得部200所取得的3維座標值(Xi,Yi,Zi)沿著向量R移動時,其之移動目的地之座標值可使用任意之實數t由式3來表示。
[數3]移動目的地之座標值=(X i +t,Y i +t▽,Z i )………(3)
將式3之座標值代入式2而成立式4。
[數4]a(X i +t)+b(Y i +t▽)+cZ i +d=0………(4)
針對式4解出t並代入式3,則基準平面上之視聽者位置的基準座標值(Xi2,Yi2,Zi2)可由式5來表示。
特別是,以Y=0之平面作為基準平面而採用時,該基準平面上之視聽者位置的基準座標值(Xi2,Yi2,Zi2)可由式6來表示。該式係表示單純使表示高度方向之成分的Y成分沿著向量R移動。
如上述說明,使用取得部200所取得的3維座標值,可算出基準平面上之視聽者位置的基準座標值。如此則, 可求出基準平面上之視域和基準座標值之間之位置關係,該基準座標值係用於表示基準平面內之視聽者位置者。基準座標值包含於基準平面上之視域時,視聽者可於現在之位置辨識立體畫像。另外,基準座標值未包含於基準平面上之視域時,視聽者於現在之位置難以辨識立體畫像。
另外,將高度方向之視域之延伸方向之表示用的向量R,和與基準平面不同的特定平面之視域予以分開,則可以界定基準平面上之視域。具體言之為,例如Y=Y0之平面之視域內之座標值為(Xp,Y0,Zp)時,使用上述式5將該座標值(Xp,Y0,Zp)轉換為基準平面上之座標值,則變換後之座標值成為基準平面上之視域內之座標值。如此則,可以界定基準平面上之視域。
顯示控制部400,係以可以將算出部300所算出的基準座標值對應之資訊予以顯示的方式,對顯示裝置18進行控制。本實施形態中之顯示控制部400,係以將算出部300所算出的基準座標值,和基準平面上之視域間之位置關係報知視聽者而予以顯示的方式,對顯示裝置18進行控制。看到此之視聽者即可容易把握現在之位置是否可以辨識立體畫像。另外,報知方法可為任意,可以將基準座標值與基準平面上之視域間之位置關係直接顯示,或者可以將視聽者往哪一位置移動即可辨識立體畫像的報知影像予以顯示。例如圖9所示,可以由上方俯視基準平面之狀態之表示用影像作為報知影像予以顯示。圖9,Sx係表示基準平面上之視域,U係表示使用者之位置。視聽者,藉 由觀看該報知影像,可以把握基準平面上之視域與自身間之相對位置關係。本實施形態中之係將視聽者位置修正於基準平面上而予以顯示,例如以包含視聽者位置的Y=Yx之平面為基準平面時,亦可以將和該基準平面不同的平面(例如Y=0之平面)上之視域投影至基準平面(此例為Y=Yx之平面)上,而決定基準平面上之視域之位置,並將視聽者位置同時予以顯示。另外,例如如圖10所示,可以將由正面攝影視聽者之影像,以及視域之表示用影像作為報知影像予以顯示。實際之視域於高度方向雖呈傾斜延伸,於圖10之例,則顯示視域對於高度方向呈平行延伸被變換的影像。如此則,視域之影像之辨識性可以提升。另外,不限定於此,顯示控制部400,可以不進行上述補正,而以視域於高度方向呈傾斜延伸之影像被顯示的方式,對顯示裝置18進行控制。
圖11係表示第1之實施形態之畫像處理裝置10之處理之一例的流程圖。如圖11所示,首先,取得部200,係取得視聽者位置的3維座標值(步驟S1)。算出部300,係使用步驟S1所取得的3維座標值,算出基準平面上之視聽者位置的基準座標值(步驟S2)。顯示控制部400,係對步驟S2算出的基準座標值與基準平面上之視域間之位置關係進行報知顯示,而對顯示裝置18進行控制(步驟S3)。
如上述說明,於第1之實施形態中之係使用包含視聽者之高度方向之位置的3維座標值,算出基準平面上之視 聽者位置之表示用的基準座標值。之後,將所算出的基準座標值與基準平面上之視域間之位置關係報知視聽者,因此,視聽者可以容易把握現在之位置是否能辨識立體畫像。例如視聽者位於和所推斷的觀察位置之高度不同之高度時,該視聽者藉由觀看顯示於顯示裝置18的報知影像,可以立即理解現在之位置無法辨識立體影像。
(第2之實施形態)
第2之實施形態之畫像處理裝置100,其和第1之實施形態之差異在於,以包含算出部300所算出的基準座標值的方式來決定基準平面上之視域之位置,使視域被形成於該決定之位置而對顯示裝置18進行控制。以下,具體說明之。另外,和第1之實施形態與共通部分係附加同一符號並省略說明。
於此,於第2之實施形態之畫像處理裝置100之說明之前,先說明視域之設定位置或設定範圍之控制方法。以下,為說明之方便而說明Y=0之平面之視域之例。視域之位置係由顯示裝置18之顯示參數之組合而定。顯示參數可為顯示畫像之位移、顯示元件20與開口控制部26間之距離(間隙)、畫素之間距、顯示裝置18之旋轉、變形、移動等。
圖12~圖14係表示視域之設定位置或設定範圍之控制說明圖。首先,使用圖10說明藉由調整顯示畫像之位移、或顯示元件20與開口控制部26間之距離(間隙), 來控制視域之設定位置等。於圖12,當顯示畫像例如朝右方向(參照圖12(b)中之箭頭R方向)位移時,光線靠向左方向(圖12(b)中之箭頭L方向),因此,視域朝左方向移動(參照圖12(b)中之視域B)。反之,顯示畫像朝和圖12(a)相比之左方向移動時,視域朝右方向移動(不圖示)。
又,如圖12(a)及圖12(c)所示,顯示元件20與開口控制部26間之距離設為越短,則視域可以設於接近顯示裝置18之位置。另外,視域設於越接近顯示裝置18之位置,光線密度呈減少。又,顯示元件20與開口控制部26間之距離設為越長,視域可以設於越遠離顯示裝置18之位置。
參照圖13說明,藉由調整顯示元件20所顯示畫素之並列(間距),而控制視域之設定位置等。顯示元件20之越是畫面之端部(右端(圖13中之箭頭R方向端部),左端(圖13中之箭頭L方向端部),畫素與開口控制部26間之位置相對偏移較大,利用此可以控制視域。增大畫素與開口控制部26間之位置之相對偏移量,則視域由圖13所示視域A變化為視域C。反之,縮小畫素與開口控制部26間之位置之相對偏移量,則視域由圖13所示視域A變化為視域B。另外,視域之幅度之最大長度(視域之水平方向之最大長度)被稱為視域設定距離。
參照圖14說明藉由顯示裝置18之旋轉、變形、移動,而控制視域之設定位置等。如圖14(a)所示,藉由顯 示裝置18之旋轉,可使基本狀態之視域A變化為視域B。又,如圖14(b)所示,藉由顯示裝置18之移動,可使基本狀態之視域A變化為視域C。另外,如圖14(c)所示,藉由顯示裝置18之變形,可使基本狀態之視域A變化為視域D。如上述說明,藉由顯示裝置18之顯示參數之組合可使Y=0之平面上之視域之位置被決定。
圖15係表示第2之實施形態之畫像處理裝置100之一例的方塊圖。如圖15所示,畫像處理裝置100係另外具備決定部500。
決定部500,係以包含算出部300所算出的基準座標值的方式,決定基準平面上之視域之位置。例如,針對基準平面上可以設定的複數種類之視域之各個,和用於決定該視域位置的顯示參數之組合予以設定關連對應,而將該關連對應資料事先儲存於記憶體(不圖示)。之後,決定部500,可由該記憶體檢索出包含算出部300所算出的基準座標值的視域,如此則,可以決定包含該基準座標值的視域之位置。
另外,不限定於此,決定部500之決定方法可以任意。例如決定部500可藉由運算來決定包含基準平面上之基準座標值的視域之位置。此時,例如將基準座標值與顯示參數之組合之計算用的運算式事先設定對應關連而記憶於記憶體(不圖示),該顯示參數係用於決定基準平面上包含該基準座標值的視域之位置者。之後,決定部500係由記憶體讀出和算出部300所算出的基準座標值對應的運算 式,使用該讀出的運算式求出顯示參數之組合,而決定基準平面上包含該基準座標值的視域之位置。又,視聽者有複數個時,較好是以更多視聽者包含於視域內的方式來決定基準平面上之視域之位置。
本實施形態之顯示控制部600,係以視域被形成於決定部500所決定的位置的方式而控制顯示裝置18。更具體言之為,顯示控制部600,係以可變方式控制顯示裝置18之顯示參數之組合,而使視域形成於決定部500所決定的位置。
圖16係表示第2之實施形態之畫像處理裝置10之處理之一例的流程圖。如圖16所示,首先,取得部200係取得表示視聽者位置的3維座標值(步驟S11)。算出部300係使用步驟S11所取得的3維座標值,算出基準平面上之視聽者位置的基準座標值(步驟S12)。決定部500,係以包含步驟S12所算出的基準座標值的方式,來決定基準平面上之視域之位置(步驟S13)。顯示控制部600,係以視域被形成於步驟S13所決定的位置的方式,對顯示裝置18進行控制(步驟S14)。
如上述說明,於第2之實施形態,係於基準平面上,以包含視聽者位置之表示用的基準座標值的方式來形成視域。因此,例如視聽者位於和所推斷的觀察位置不同高度時,亦可以包含視聽者位置的基準座標值的方式,使基準平面上之視域被自動變更,因此該視聽者無須變化現在之觀察位置即可以觀察立體畫像。
(第2之實施形態之變形例)
顯示控制部600,可以針對在取得部200所取得的3維座標值所示位置進行觀察的立體畫像之畫像品質,進行提升處理。圖17係表示顯示控制部600之構成例的圖。如圖17所示,顯示控制部600,係具備:視域最佳化部610與高畫質化部620。視域最佳化部610,係以視域被形成於決定部500所決定位置的方式,針對顯示裝置18之顯示參數之組合進行可變控制,而將顯示於顯示裝置18的畫像之資料傳送至高畫質化部620。
於高畫質化部620,係被輸入來自視域最佳化部610之畫像資料,及用於表示視聽者位置的資訊。用於表示視聽者位置的資訊,係可為取得部200所取得的3維座標值,或算出部300所算出的基準座標值。高畫質化部620,係針對在所輸入視聽者位置能觀察的立體畫像之畫像品質進行提升處理,而使該處理後之畫像資料顯示於顯示裝置18予以控制。
其之一例,高畫質化部620,亦可執行濾波處理(filtering)。更具體言之為,高畫質化部620,在所輸入的視聽者位置執行顯示裝置18之觀察時,可以僅使來自待觀察的視差畫像(立體畫像)之顯示用各畫素之光線到達該位置(來自其他畫素之光線不到達)的方式,使用對該視差畫像實施轉換的係數(filter),針對用於表示該視差畫像的各畫素之畫素值進行修正處理(「亦稱為濾波 處理(filtering process)」)。如此則,來自其他視差畫像之顯示用畫素的光線之一部分,被混入來自待觀察之視差畫像之顯示用畫素之光線、亦即所謂串訊之產生可以被抑制,因此可以提升待觀察之立體畫像之畫像品質。
以上,說明本發明之實施形態,但上述之各實施形態僅為一例,並非用來限定發明之範圍。彼等新規之實施形態,可藉由其他之各種形態加以實施,在不脫離發明要旨之情況下可做各種省略、取代或變更。
上述各實施形態及變形例之畫像處理裝置,係包含CPU(Central Processing Unit),ROM,RAM,及通信I/F裝置等之硬體構成。上述各部之機能亦可藉由CPU將儲存於ROM的程式展開於RAM上而執行、實現。又,不限定於此,各部之機能之其中至少一部分藉由個別之電路(硬體)來實現亦可。
又,上述各實施形態及變形例之畫像處理裝置所執行之程式,可以儲存於網際網路等之網路所連接之電腦上,經由網路下載而提供。又,上述各實施形態及變形例之畫像處理裝置所執行之程式,可經由網際網路等之網路提供或發布。又,上述各實施形態及變形例之畫像處理裝置所執行之程式,可以組入ROM等而提供。
1‧‧‧立體畫像顯示裝置
10‧‧‧畫像處理裝置
18‧‧‧顯示裝置
20‧‧‧顯示元件
26‧‧‧開口控制部
30‧‧‧要素畫像
100‧‧‧畫像處理裝置
200‧‧‧取得部
300‧‧‧算出部
400‧‧‧顯示控制部
500‧‧‧決定部
600‧‧‧顯示控制部
610‧‧‧視域最佳化部
620‧‧‧高畫質化部
[圖1]第1之實施形態之立體畫像顯示裝置之一例的圖。
[圖2]第1之實施形態之顯示裝置之一例的圖。
[圖3]第1之實施形態之開口控制部之配置例的圖。
[圖4]第1之實施形態之視域之一例的圖。
[圖5]第1之實施形態之視域之一例的圖。
[圖6]第1之實施形態之視域之一例的圖。
[圖7]第1之實施形態之視域之一例的圖。
[圖8]第1之實施形態之畫像處理裝置之一例的圖。
[圖9]報知影像之一例的圖。
[圖10]報知影像之一例的圖。
[圖11]第1之實施形態之畫像處理裝置之處理之一例的流程圖。
[圖12]視域之控制之圖。
[圖13]視域之控制之圖。
[圖14]視域之控制之圖。
[圖15]第2之實施形態之畫像處理裝置之一例的圖。
[圖16]第2之實施形態之畫像處理裝置之處理之一例的流程圖。
[圖17]顯示控制部之變形例的圖。

Claims (8)

  1. 一種畫像處理裝置,其特徵為具備:取得部,係取得用於表示視聽者位置的3維座標值;算出部,係使用上述3維座標值算出用於表示基準平面上之上述視聽者位置的基準座標值,該基準平面為包含上述視聽者可以觀察立體畫像之視域者;及顯示控制部,係針對對應於個別高度顯示上述不同視域之上述立體畫像的顯示裝置,以使顯示和上述基準座標值對應之資訊的方式進行控制。
  2. 如申請專利範圍第1項之畫像處理裝置,其中,上述顯示控制部,係以將上述基準座標值和上述基準平面上之上述視域間之位置關係,對上述視聽者進行報知顯示的方式,實施上述顯示裝置之控制。
  3. 如申請專利範圍第2項之畫像處理裝置,其中,上述視域,係於高度方向呈傾斜延伸;上述算出部,係使上述3維座標值沿著上述視域之延伸方向射影至上述基準平面上而得的座標值,作為上述基準座標值予以算出。
  4. 如申請專利範圍第3項之畫像處理裝置,其中,上述基準平面,係和上述視域之延伸方向呈非平行之面。
  5. 如申請專利範圍第1項之畫像處理裝置,其中,另外具備:決定部,其以包含上述算出部所算出的上述基準座標值的方式,來決定上述基準平面上之上述視域 之位置;上述顯示控制部,係以上述視域被形成於上述決定部所決定之上述位置的方式,對上述顯示裝置進行控制。
  6. 如申請專利範圍第5項之畫像處理裝置,其中,上述顯示控制部,係針對在上述3維座標值所示位置應被觀察的上述立體畫像之畫像品質進行提升處理。
  7. 一種立體畫像顯示裝置,其特徵為具備:顯示裝置,視聽者所能觀察立體畫像的視域,係對應於個別高度而顯示不同的上述立體畫像;取得部,係取得用於表示上述視聽者位置的3維座標值;算出部,係使用上述3維座標值算出用於表示基準平面上之上述視聽者位置的基準座標值,該基準平面係包含上述視域者;及顯示控制部,係以使顯示和上述基準座標值對應之資訊的方式,對上述顯示裝置進行控制。
  8. 一種畫像處理方法,其特徵為:取得用於表示視聽者位置的3維座標值;使用上述3維座標值,算出用於表示基準平面上之上述視聽者位置的基準座標值,該基準平面為包含上述視聽者可以觀察立體畫像之視域者;及顯示控制部,係針對對應於個別高度顯示上述不同視域之上述立體畫像的顯示裝置,以使顯示和上述基準座標值對應之資訊的方式進行控制。
TW101102252A 2011-08-26 2012-01-19 A portrait processing device, a three-dimensional portrait display device, and a portrait processing method TWI500314B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2011/069328 WO2013030905A1 (ja) 2011-08-26 2011-08-26 画像処理装置、立体画像表示装置および画像処理方法

Publications (2)

Publication Number Publication Date
TW201310972A TW201310972A (zh) 2013-03-01
TWI500314B true TWI500314B (zh) 2015-09-11

Family

ID=46678869

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101102252A TWI500314B (zh) 2011-08-26 2012-01-19 A portrait processing device, a three-dimensional portrait display device, and a portrait processing method

Country Status (4)

Country Link
US (1) US20140168394A1 (zh)
JP (1) JP4977278B1 (zh)
TW (1) TWI500314B (zh)
WO (1) WO2013030905A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150066931A (ko) * 2013-12-09 2015-06-17 씨제이씨지브이 주식회사 상영관의 가시 영역을 표현하는 방법
JP6253380B2 (ja) 2013-12-11 2017-12-27 キヤノン株式会社 画像処理方法、画像処理装置および撮像装置
WO2016152217A1 (ja) * 2015-03-23 2016-09-29 ソニー株式会社 表示装置、表示装置の駆動方法、及び、電子機器
KR101818854B1 (ko) * 2016-05-12 2018-01-15 광운대학교 산학협력단 테이블탑 3d 디스플레이 시스템에서 사용자 추적 기반의 시역 확대 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060170764A1 (en) * 2003-03-12 2006-08-03 Siegbert Hentschke Autostereoscopic reproduction system for 3d displays
US20090282429A1 (en) * 2008-05-07 2009-11-12 Sony Ericsson Mobile Communications Ab Viewer tracking for displaying three dimensional views

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3443271B2 (ja) * 1997-03-24 2003-09-02 三洋電機株式会社 立体映像表示装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060170764A1 (en) * 2003-03-12 2006-08-03 Siegbert Hentschke Autostereoscopic reproduction system for 3d displays
US20090282429A1 (en) * 2008-05-07 2009-11-12 Sony Ericsson Mobile Communications Ab Viewer tracking for displaying three dimensional views

Also Published As

Publication number Publication date
TW201310972A (zh) 2013-03-01
JP4977278B1 (ja) 2012-07-18
US20140168394A1 (en) 2014-06-19
WO2013030905A1 (ja) 2013-03-07
JPWO2013030905A1 (ja) 2015-03-23

Similar Documents

Publication Publication Date Title
JP5881732B2 (ja) 画像処理装置、立体画像表示装置、画像処理方法および画像処理プログラム
JP6308513B2 (ja) 立体画像表示装置、画像処理装置及び立体画像処理方法
KR101852209B1 (ko) 자동입체 디스플레이 및 그 제조방법
JP5849811B2 (ja) 裸眼立体視用映像データ生成方法
JP2007052304A (ja) 映像表示システム
JPWO2012176443A1 (ja) 映像表示装置および映像表示方法
JPWO2012070103A1 (ja) 立体画像表示装置および方法
CN104836998A (zh) 显示设备及其控制方法
WO2015132828A1 (ja) 映像表示方法、及び、映像表示装置
KR20120051287A (ko) 사용자 위치 기반의 영상 제공 장치 및 방법
US20130106843A1 (en) Information processing apparatus, display control method, and program
TWI500314B (zh) A portrait processing device, a three-dimensional portrait display device, and a portrait processing method
JP5439686B2 (ja) 立体画像表示装置及び立体画像表示方法
TW201320719A (zh) 立體畫像顯示裝置、畫像處理裝置及畫像處理方法
US20140362197A1 (en) Image processing device, image processing method, and stereoscopic image display device
JP5143291B2 (ja) 画像処理装置、方法、および立体画像表示装置
KR20050076946A (ko) 입체영상 표시장치 및 방법
US9185399B2 (en) Stereoscopic video receiver
US20140192168A1 (en) Image processing device, method, and stereoscopic image display device
WO2012165132A1 (ja) 裸眼立体ディスプレイ装置、視点調整方法、裸眼立体視用映像データ生成方法
JP5428723B2 (ja) 画像生成装置、画像生成方法、および、プログラム
KR20160017618A (ko) 무안경식 입체 디스플레이 장치의 렌티큘러 또는 패럴렉스 배리어의 기울기 각도 확인 장치, 기울기 각도 확인 방법, 기울기 각도 확인 프로그램 및 기울기 각도 확인 프로그램이 저장된 매체
JP2014030152A (ja) 3次元画像表示装置及び方法
JP2008276036A (ja) ファントグラム用ステレオ画像の作成方法

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees