JP5928280B2 - 多視点画像生成装置及び方法 - Google Patents
多視点画像生成装置及び方法 Download PDFInfo
- Publication number
- JP5928280B2 JP5928280B2 JP2012215568A JP2012215568A JP5928280B2 JP 5928280 B2 JP5928280 B2 JP 5928280B2 JP 2012215568 A JP2012215568 A JP 2012215568A JP 2012215568 A JP2012215568 A JP 2012215568A JP 5928280 B2 JP5928280 B2 JP 5928280B2
- Authority
- JP
- Japan
- Prior art keywords
- viewpoint
- eye viewpoint
- eye
- image signal
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Computing Systems (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
Description
DPT_EMBS_L=R_LEFT−128 …(2)
DPT_EMBS_R=R_RIGHT−128 …(3)
DPT_L=DPT_MDL+DPT_EMBS_L …(4)
DPT_R=DPT_MDL+DPT_EMBS_R …(5)
2 左眼視点画像オブジェクト情報生成部
3 右眼視点画像オブジェクト情報生成部
4,5 加算器
6 多視点画像信号生成部
7 視点配列信号生成部
61 視点位置判定部
62 係数発生部
63,64 選択部
65 乗算器
66 画素シフト部
Claims (5)
- 所定の立体構造の画面内の奥行き値を示す基本奥行きモデルを生成する基本奥行きモデル生成部と、
左眼視点画像信号に基づいて画像内の被写体の凹凸情報を推測して、左眼視点凹凸値を生成する左眼視点画像オブジェクト情報生成部と、
右眼視点画像信号に基づいて画像内の被写体の凹凸情報を推測して、右眼視点凹凸値を生成する右眼視点画像オブジェクト情報生成部と、
前記基本奥行きモデルと前記左眼視点凹凸値とを加算して左眼視点奥行き値を生成する第1の加算器と、
前記基本奥行きモデルと前記右眼視点凹凸値とを加算して右眼視点奥行き値を生成する第2の加算器と、
画面内の画素の位置に応じて複数の視点のうちのいずれの視点であるかを示す視点配列信号を生成する視点配列信号生成部と、
前記左眼視点画像信号と、前記右眼視点画像信号と、前記左眼視点奥行き値と、前記右眼視点奥行き値と、前記視点配列信号とに基づいて、3視点以上の多視点画像信号を生成する多視点画像信号生成部と、
を備え、
前記多視点画像信号生成部は、
前記視点配列信号が示す視点が左眼視点と右眼視点とのいずれに近いかを判定する視点位置判定部と、
前記視点配列信号に基づいて、前記左眼視点または前記右眼視点よりも右側の視点では前記左眼視点または前記右眼視点より離れるに従って正方向に大きくなる係数を発生し、前記左眼視点または前記右眼視点よりも左側の視点では前記左眼視点または前記右眼視点より離れるに従って負方向に大きくなる係数を発生する係数発生部と、
前記視点位置判定部による判定結果に基づいて、視点位置が前記左眼視点または前記右眼視点よりも左側と判定された場合には、前記左眼視点画像信号を選択し、視点位置が前記左眼視点または前記右眼視点よりも右側と判定された場合には、前記右眼視点画像信号を選択する第1の選択部と、
前記視点位置判定部による判定結果に基づいて、視点位置が前記左眼視点または前記右眼視点よりも左側と判定された場合には、前記左眼視点奥行き値を選択し、視点位置が前記左眼視点または前記右眼視点よりも右側と判定された場合には、前記右眼視点奥行き値を選択する第2の選択部と、
前記第2の選択部によって選択された前記左眼視点奥行き値または前記右眼視点奥行き値に、前記係数発生部が発生した係数を乗算する乗算器と、
前記第1の選択部によって選択された前記左眼視点画像信号及び前記右眼視点画像信号を、前記乗算器より出力された奥行き値に応じて画素シフトして、多視点画像信号を生成する画素シフト部と、
を有することを特徴とする多視点画像生成装置。 - 前記基本奥行きモデル生成部は、基本となる複数の立体構造それぞれの画面内の奥行き値を示す複数の基本奥行きモデルのうちからいずれかを選択するか、前記複数の基本奥行きモデルを組み合わせて基本奥行きモデルを生成することを特徴とする請求項1記載の多視点画像生成装置。
- 前記基本奥行きモデル生成部は、画面内の所定の領域に含まれる高域成分の程度に応じて、前記複数の基本奥行きモデルのうちからいずれかを選択するか、前記複数の基本奥行きモデルを組み合わせることを特徴とする請求項2記載の多視点画像生成装置。
- 前記左眼視点画像オブジェクト情報生成部及び前記右眼視点画像オブジェクト情報生成部は、それぞれ、赤色信号に基づいて前記被写体の凹凸情報を推測することを特徴とする請求項1〜3のいずれか1項に記載の多視点画像生成装置。
- 左眼視点画像信号に基づいて画像内の被写体の凹凸情報を推測して、左眼視点凹凸値を生成し、
右眼視点画像信号に基づいて画像内の被写体の凹凸情報を推測して、右眼視点凹凸値を生成し、
所定の立体構造の画面内の奥行き値を示す基本奥行きモデルと前記左眼視点凹凸値とを加算して左眼視点奥行き値を生成し、
前記基本奥行きモデルと前記右眼視点凹凸値とを加算して右眼視点奥行き値を生成し、
画面内の画素の位置に応じて複数の視点のうちのいずれの視点であるかを示す視点配列信号を生成し、
前記視点配列信号が示す視点が左眼視点と右眼視点とのいずれに近いかを判定し、
前記視点配列信号に基づいて、前記左眼視点または前記右眼視点よりも右側の視点では前記左眼視点または前記右眼視点より離れるに従って正方向に大きくなる係数を発生し、前記左眼視点または前記右眼視点よりも左側の視点では前記左眼視点または前記右眼視点より離れるに従って負方向に大きくなる係数を発生し、
左眼視点と右眼視点とのいずれに近いかの判定結果に基づいて、視点位置が前記左眼視点または前記右眼視点よりも左側と判定された場合には、前記左眼視点画像信号を選択し、視点位置が前記左眼視点または前記右眼視点よりも右側と判定された場合には、前記右眼視点画像信号を選択し、
前記判定結果に基づいて、視点位置が前記左眼視点または前記右眼視点よりも左側と判定された場合には、前記左眼視点奥行き値を選択し、視点位置が前記左眼視点または前記右眼視点よりも右側と判定された場合には、前記右眼視点奥行き値を選択し、
選択された前記左眼視点奥行き値または前記右眼視点奥行き値に前記係数を乗算し、
前記左眼視点画像信号及び前記右眼視点画像信号を、前記係数を乗算した前記左眼視点奥行き値または前記右眼視点奥行き値に応じて画素シフトして、多視点画像信号を生成する
ことを特徴とする多視点画像生成方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012215568A JP5928280B2 (ja) | 2012-09-28 | 2012-09-28 | 多視点画像生成装置及び方法 |
US14/036,064 US9460550B2 (en) | 2012-09-28 | 2013-09-25 | Multi-viewpoint image generation apparatus and method |
CN201310451760.XA CN103716610B (zh) | 2012-09-28 | 2013-09-27 | 多视点图像生成装置以及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012215568A JP5928280B2 (ja) | 2012-09-28 | 2012-09-28 | 多視点画像生成装置及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014072602A JP2014072602A (ja) | 2014-04-21 |
JP5928280B2 true JP5928280B2 (ja) | 2016-06-01 |
Family
ID=50384705
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012215568A Active JP5928280B2 (ja) | 2012-09-28 | 2012-09-28 | 多視点画像生成装置及び方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9460550B2 (ja) |
JP (1) | JP5928280B2 (ja) |
CN (1) | CN103716610B (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107509067B (zh) * | 2016-12-28 | 2019-07-30 | 浙江工业大学 | 一种高速高质量的自由视点图像合成方法 |
WO2023013130A1 (ja) * | 2021-08-05 | 2023-02-09 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、及び記録媒体 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001346226A (ja) | 2000-06-02 | 2001-12-14 | Canon Inc | 画像処理装置、立体写真プリントシステム、画像処理方法、立体写真プリント方法、及び処理プログラムを記録した媒体 |
JP2003179800A (ja) * | 2001-12-13 | 2003-06-27 | Sony Corp | 多視点画像生成装置、画像処理装置、および方法、並びにコンピュータ・プログラム |
JP4214976B2 (ja) * | 2003-09-24 | 2009-01-28 | 日本ビクター株式会社 | 擬似立体画像作成装置及び擬似立体画像作成方法並びに擬似立体画像表示システム |
JP2006163547A (ja) * | 2004-12-03 | 2006-06-22 | Canon Inc | 立体画像生成プログラム、立体画像生成システム及び立体画像生成装置。 |
JP4958233B2 (ja) * | 2007-11-13 | 2012-06-20 | 学校法人東京電機大学 | 多眼視画像作成システム及び多眼視画像作成方法 |
CN101702780A (zh) * | 2009-09-07 | 2010-05-05 | 无锡景象数字技术有限公司 | 多视点立体内容的参数化合成方法 |
JP5402483B2 (ja) * | 2009-10-02 | 2014-01-29 | 株式会社Jvcケンウッド | 擬似立体画像作成装置及び擬似立体画像表示システム |
CN101799939A (zh) * | 2010-04-02 | 2010-08-11 | 天津大学 | 基于左右视点图像的中间视点快速、自适应生成算法 |
JP2011248723A (ja) * | 2010-05-28 | 2011-12-08 | Sony Corp | 画像処理装置および方法、並びにプログラム |
JP5879713B2 (ja) * | 2010-12-09 | 2016-03-08 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
US9582928B2 (en) * | 2011-01-13 | 2017-02-28 | Samsung Electronics Co., Ltd. | Multi-view rendering apparatus and method using background pixel expansion and background-first patch matching |
CN102368826A (zh) * | 2011-11-07 | 2012-03-07 | 天津大学 | 双视点视频到多视点视频的实时自适应生成方法 |
-
2012
- 2012-09-28 JP JP2012215568A patent/JP5928280B2/ja active Active
-
2013
- 2013-09-25 US US14/036,064 patent/US9460550B2/en active Active
- 2013-09-27 CN CN201310451760.XA patent/CN103716610B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN103716610B (zh) | 2016-06-08 |
US9460550B2 (en) | 2016-10-04 |
JP2014072602A (ja) | 2014-04-21 |
US20140092086A1 (en) | 2014-04-03 |
CN103716610A (zh) | 2014-04-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8503764B2 (en) | Method for generating images of multi-views | |
KR101629479B1 (ko) | 능동 부화소 렌더링 방식 고밀도 다시점 영상 표시 시스템 및 방법 | |
JP5011316B2 (ja) | 出力画像のレンダリング | |
JP4403162B2 (ja) | 立体画像表示装置および立体画像の作製方法 | |
US9036015B2 (en) | Rendering views for a multi-view display device | |
Schmidt et al. | Multiviewpoint autostereoscopic dispays from 4D-Vision GmbH | |
EP3158536B1 (en) | Method and apparatus for generating a three dimensional image | |
TWI420152B (zh) | A Method of Multi - view Three - dimensional Image Display | |
JP5402483B2 (ja) | 擬似立体画像作成装置及び擬似立体画像表示システム | |
US9270981B2 (en) | Apparatus and method for adaptively rendering subpixel | |
US8531454B2 (en) | Display apparatus and stereoscopic image display method | |
JP4489610B2 (ja) | 立体視可能な表示装置および方法 | |
KR102130123B1 (ko) | 다시점 영상 디스플레이 장치 및 그 제어 방법 | |
US9154765B2 (en) | Image processing device and method, and stereoscopic image display device | |
US10694173B2 (en) | Multiview image display apparatus and control method thereof | |
EP2801200B1 (en) | Display processor for 3d display | |
CN208257981U (zh) | 一种基于子像素的led裸眼3d显示装置 | |
JP2010226500A (ja) | 立体画像表示装置および立体画像表示方法 | |
JP2004264858A (ja) | 立体映像表示装置 | |
TW201931311A (zh) | 立體影像調整方法與顯示裝置 | |
US8976171B2 (en) | Depth estimation data generating apparatus, depth estimation data generating method, and depth estimation data generating program, and pseudo three-dimensional image generating apparatus, pseudo three-dimensional image generating method, and pseudo three-dimensional image generating program | |
JP5304758B2 (ja) | 多視点画像作成装置及び多視点画像作成方法並びに多視点画像表示システム | |
JP5928280B2 (ja) | 多視点画像生成装置及び方法 | |
JP5780214B2 (ja) | 奥行き情報生成装置、奥行き情報生成方法、奥行き情報生成プログラム、擬似立体画像生成装置 | |
JP2012203050A (ja) | 立体表示装置並びに信号処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150331 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150917 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150929 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151028 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160329 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160411 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5928280 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |