JP5881732B2 - 画像処理装置、立体画像表示装置、画像処理方法および画像処理プログラム - Google Patents
画像処理装置、立体画像表示装置、画像処理方法および画像処理プログラム Download PDFInfo
- Publication number
- JP5881732B2 JP5881732B2 JP2013544054A JP2013544054A JP5881732B2 JP 5881732 B2 JP5881732 B2 JP 5881732B2 JP 2013544054 A JP2013544054 A JP 2013544054A JP 2013544054 A JP2013544054 A JP 2013544054A JP 5881732 B2 JP5881732 B2 JP 5881732B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- viewer
- panel
- parallax
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/26—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
- G02B30/30—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
- H04N13/31—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/26—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
- G02B30/27—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
- H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
- H04N13/305—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
Description
画像取得部1では、表示したい視差画像数(視差数)に応じて、1つまたは複数の視差画像を取得する。視差画像は、記録媒体から取得する。たとえばハードディスクやサーバ等にあらかじめ保存しておき、そこから取得してもよいし、カメラや、複数のカメラを連結させたカメラアレイ、ステレオカメラ等の入力デバイスから、直接取得するように構成してもよい。
視聴位置取得部2は、視聴領域内の実空間における視聴者の位置を3次元座標値として取得する。視聴者の位置の取得には、例えば、可視カメラ、赤外線カメラ等の撮像機器の他、レーダやセンサ等の機器を用いることができる。これらの機器で得られた情報(カメラの場合には撮影画像)から、公知の技術を用いて、視聴者の位置を取得する。
ピクセルマッピング処理部4は、画像取得部1で取得した視差画像群の各サブピクセルを、視差数N、光学的開口部のY軸に対する傾きθ、光学的開口部とパネルとのX軸方向のずれ量(パネル換算シフト量)koffset、光学的開口部1つに対応するパネル上での幅Xn等の制御パラメータをもとに並べ替える(割り当てる)ことで、各要素画像30を決定する。なお、以下では表示素子20全体に表示する複数の要素画像30を要素画像アレイと呼ぶ。要素画像アレイは、表示時に視聴者が立体画像を可視可能なように視差画像の各ピクセルを割り当てた画像である。
マッピング制御パラメータ算出部3は、視域を観察者に合わせて移動させるための、補正パラメータ(補正量)を算出する。補正パラメータは、マッピング制御パラメータとも呼ばれる。本実施形態で、補正対象となるパラメータはkoffsetとXnの2つのパラメータである。
r_koffsetは、視聴位置のX座標から算出する。具体的には、現在の視聴位置のX座標と、視聴位置からパネル(あるいはレンズ)までの距離である視距離L、および光学的開口部(レンズの場合は主点P)とパネルとの距離であるギャップg(図4(C)参照)を用いて、以下の式4で、r_koffsetは算出される。なお、現在の視聴位置は、視聴位置取得部2により取得され、視距離Lは、当該現在の視聴位置から計算される。
表示部5は前述したような、表示素子20と光学的開口部26とを含む表示装置である。視聴者は、光学的開口部26を介して表示素子20を観察することで、表示装置に表示される立体画像を観察する。
Claims (10)
- パネルと光学的開口部とを有する表示装置に立体画像を表示するための画像処理装置であって、
1つの視点での画像である少なくとも1つの視差画像を取得する視差画像取得部と、
視聴者の位置を取得する視聴者位置取得部と、
前記表示装置に対する前記視聴者の位置に基づいて、前記パネルと光学的開口部との対応関係に関するパラメータを補正し、補正後のパラメータに基づいて、前記表示装置に表示されたときに前記視聴者に前記立体画像を可視可能なように前記視差画像の各ピクセルを割り当てた画像を生成する画像生成部と、
を備えた画像処理装置。 - 前記画像生成部は、前記パネルに対する前記視聴者の水平方向位置と、前記視聴者の視距離とに応じて前記パラメータを補正する、
請求項1に記載の画像処理装置。 - マッピング制御パラメータ算出部をさらに備え、
前記パラメータは、前記パネルと前記光学的開口部との位置ずれ量を表し、
前記マッピング制御パラメータ算出部は、前記パネルに対する前記視聴者の水平方向位置と、前記視聴者の視距離とに応じて補正量を算出し、
前記画像生成部は、前記パラメータを、前記補正量に基づいて補正する、
請求項2に記載の画像処理装置。 - 前記画像生成部は、前記パネルに対する前記視聴者の垂直方向位置と、前記光学的開口部の幅に応じて、前記パラメータを補正する、
請求項1ないし3のいずれか一項に記載の画像処理装置。 - マッピング制御パラメータ算出部をさらに備え、
前記パラメータは、1つの光学的開口部に対応するパネル上の幅を表し、
前記マッピング制御パラメータ算出部は、前記パネルに対する前記視聴者の垂直方向位置と、前記光学的開口部の幅に応じて、補正量を算出し、
前記画像生成部は、前記パラメータを、前記補正量に基づいて補正する、
請求項4に記載の画像処理装置。 - 前記視聴者位置取得部は、撮像機器により撮像された画像を解析することで顔を認識し、認識した顔をもとに前記視聴者の位置を取得する、
請求項1ないし5のいずれか一項に記載の画像処理装置。 - 前記視聴者位置取得部は、視聴者の動きを検出するセンサにより検出された信号を処理することにより、前記視聴者の位置を取得する、
請求項1ないし5のいずれか一項に記載の画像処理装置。 - パネルと光学的開口部とを有する表示装置に立体画像を表示するための画像処理方法であって、
1つの視点での画像である少なくとも1つの視差画像を取得する視差画像取得ステップと、
視聴者の位置を取得する視聴者位置取得ステップと、
前記表示装置に対する前記視聴者の位置に基づいて、前記パネルと光学的開口部との対応関係に関するパラメータを補正し、補正後のパラメータに基づいて、前記表示装置に表示されたときに前記視聴者に前記立体画像を可視可能なように前記視差画像の各ピクセルを割り当てた画像を生成する画像生成処理ステップと、
を備えた画像処理方法。 - パネルと光学的開口部とを有する表示装置に立体画像を表示するための画像処理プログラムであって、
1つの視点での画像である少なくとも1つの視差画像を取得する視差画像取得ステップと、
視聴者の位置を取得する視聴者位置取得ステップと、
前記表示装置に対する前記視聴者の位置に基づいて、前記パネルと光学的開口部との対応関係に関するパラメータを補正し、補正後のパラメータに基づいて、前記表示装置に表示されたときに前記視聴者に前記立体画像を可視可能なように前記視差画像の各ピクセルを割り当てた画像を生成する画像生成処理ステップと、
をコンピュータに実行させるための画像処理プログラム。 - パネルと光学的開口部とを有する表示部と、
1つの視点での画像である少なくとも1つの視差画像を取得する視差画像取得部と、
視聴者の位置を取得する視聴者位置取得部と、
前記表示部に対する前記視聴者の位置に基づいて、前記パネルと光学的開口部との対応関係に関するパラメータを補正し、補正後のパラメータに基づいて、前記表示部に表示された時に前記視聴者に立体画像を可視可能なように前記視差画像の各ピクセルを割り当てた画像を生成する画像生成部と、を備え、
前記表示部は、前記画像生成部により生成された画像を表示する
立体画像表示装置。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2011/076447 WO2013073028A1 (ja) | 2011-11-16 | 2011-11-16 | 画像処理装置、立体画像表示装置、画像処理方法および画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2013073028A1 JPWO2013073028A1 (ja) | 2015-04-02 |
JP5881732B2 true JP5881732B2 (ja) | 2016-03-09 |
Family
ID=48429140
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013544054A Expired - Fee Related JP5881732B2 (ja) | 2011-11-16 | 2011-11-16 | 画像処理装置、立体画像表示装置、画像処理方法および画像処理プログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US20140247329A1 (ja) |
JP (1) | JP5881732B2 (ja) |
KR (1) | KR20140073584A (ja) |
CN (1) | CN103947199A (ja) |
TW (1) | TW201322733A (ja) |
WO (1) | WO2013073028A1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2015132828A1 (ja) | 2014-03-06 | 2017-03-30 | パナソニックIpマネジメント株式会社 | 映像表示方法、及び、映像表示装置 |
KR102208898B1 (ko) * | 2014-06-18 | 2021-01-28 | 삼성전자주식회사 | 무안경 3d 디스플레이 모바일 장치, 이의 설정방법 및 사용방법 |
US10394037B2 (en) | 2014-06-18 | 2019-08-27 | Samsung Electronics Co., Ltd. | Glasses-free 3D display mobile device, setting method of the same, and using method of the same |
TWI559731B (zh) * | 2014-09-19 | 2016-11-21 | 大昱光電股份有限公司 | 製作立體影像方法 |
CN104601975B (zh) | 2014-12-31 | 2016-11-16 | 深圳超多维光电子有限公司 | 广视角裸眼立体图像显示方法及显示设备 |
KR102269137B1 (ko) * | 2015-01-13 | 2021-06-25 | 삼성디스플레이 주식회사 | 표시 제어 방법 및 장치 |
KR102396289B1 (ko) * | 2015-04-28 | 2022-05-10 | 삼성디스플레이 주식회사 | 입체 영상 표시 장치 및 그 구동 방법 |
US10638119B2 (en) * | 2015-05-05 | 2020-04-28 | Koninklijke Philips N.V. | Generation of image for an autostereoscopic display |
JP6764574B2 (ja) * | 2016-01-13 | 2020-10-07 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム、及び、手術システム |
JP6732617B2 (ja) * | 2016-09-21 | 2020-07-29 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置および画像生成方法 |
EP3316575A1 (en) * | 2016-10-31 | 2018-05-02 | Thomson Licensing | Method for providing continuous motion parallax effect using an auto-stereoscopic display, corresponding device, computer program product and computer-readable carrier medium |
WO2019204012A1 (en) * | 2018-04-20 | 2019-10-24 | Covidien Lp | Compensation for observer movement in robotic surgical systems having stereoscopic displays |
CN112748796B (zh) * | 2019-10-30 | 2024-02-20 | 京东方科技集团股份有限公司 | 显示方法及显示装置 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008185629A (ja) * | 2007-01-26 | 2008-08-14 | Seiko Epson Corp | 画像表示装置 |
JP2008228199A (ja) * | 2007-03-15 | 2008-09-25 | Toshiba Corp | 立体画像表示装置及び立体画像表示方法並びに立体画像用データの構造 |
US8331023B2 (en) * | 2008-09-07 | 2012-12-11 | Mediatek Inc. | Adjustable parallax barrier 3D display |
JP4711007B2 (ja) * | 2009-06-05 | 2011-06-29 | 健治 吉田 | パララッスクスバリア、裸眼立体ディスプレイ |
JP2011141381A (ja) * | 2010-01-06 | 2011-07-21 | Ricoh Co Ltd | 立体画像表示装置及び立体画像表示方法 |
WO2011111349A1 (ja) * | 2010-03-10 | 2011-09-15 | パナソニック株式会社 | 立体映像表示装置および視差調整方法 |
JP5306275B2 (ja) * | 2010-03-31 | 2013-10-02 | 株式会社東芝 | 表示装置及び立体画像の表示方法 |
JP2011223482A (ja) * | 2010-04-14 | 2011-11-04 | Sony Corp | 画像処理装置、画像処理方法、およびプログラム |
CN101984670B (zh) * | 2010-11-16 | 2013-01-23 | 深圳超多维光电子有限公司 | 一种立体显示方法、跟踪式立体显示器及图像处理装置 |
-
2011
- 2011-11-16 WO PCT/JP2011/076447 patent/WO2013073028A1/ja active Application Filing
- 2011-11-16 KR KR1020147012552A patent/KR20140073584A/ko not_active Application Discontinuation
- 2011-11-16 JP JP2013544054A patent/JP5881732B2/ja not_active Expired - Fee Related
- 2011-11-16 CN CN201180074832.2A patent/CN103947199A/zh active Pending
- 2011-12-22 TW TW100148039A patent/TW201322733A/zh unknown
-
2014
- 2014-05-08 US US14/272,956 patent/US20140247329A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
US20140247329A1 (en) | 2014-09-04 |
CN103947199A (zh) | 2014-07-23 |
WO2013073028A1 (ja) | 2013-05-23 |
JPWO2013073028A1 (ja) | 2015-04-02 |
KR20140073584A (ko) | 2014-06-16 |
TW201322733A (zh) | 2013-06-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5881732B2 (ja) | 画像処理装置、立体画像表示装置、画像処理方法および画像処理プログラム | |
JP4521342B2 (ja) | 三次元画像表示装置、三次元画像表示方法および三次元画像表示プログラム | |
JP6061852B2 (ja) | 映像表示装置および映像表示方法 | |
JP6278323B2 (ja) | 自動立体ディスプレイの製造方法 | |
JP5306275B2 (ja) | 表示装置及び立体画像の表示方法 | |
US9110296B2 (en) | Image processing device, autostereoscopic display device, and image processing method for parallax correction | |
JP4937424B1 (ja) | 立体画像表示装置および方法 | |
JP2013527932A5 (ja) | ||
JPWO2015132828A1 (ja) | 映像表示方法、及び、映像表示装置 | |
US9179119B2 (en) | Three dimensional image processing device, method and computer program product, and three-dimensional image display apparatus | |
CN111869202B (zh) | 用于减少自动立体显示器上的串扰的方法 | |
JP5763208B2 (ja) | 立体画像表示装置、画像処理装置および画像処理方法 | |
TWI500314B (zh) | A portrait processing device, a three-dimensional portrait display device, and a portrait processing method | |
JP5696107B2 (ja) | 画像処理装置、方法、及びプログラム、並びに、立体画像表示装置 | |
US20140362197A1 (en) | Image processing device, image processing method, and stereoscopic image display device | |
JP5143291B2 (ja) | 画像処理装置、方法、および立体画像表示装置 | |
JP2014103502A (ja) | 立体画像表示装置、その方法、そのプログラム、および画像処理装置 | |
JP2014135590A (ja) | 画像処理装置、方法、及びプログラム、並びに、立体画像表示装置 | |
JP7456290B2 (ja) | ヘッドアップディスプレイ装置 | |
JP2014216719A (ja) | 画像処理装置、立体画像表示装置、画像処理方法およびプログラム | |
JP2012242544A (ja) | 表示装置 | |
JP2012157008A (ja) | 立体画像決定装置、立体画像決定方法、および立体画像表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150721 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150806 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160105 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160202 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5881732 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |