JP2012060345A - 多視点画像作成装置及び多視点画像作成方法並びに多視点画像表示システム - Google Patents
多視点画像作成装置及び多視点画像作成方法並びに多視点画像表示システム Download PDFInfo
- Publication number
- JP2012060345A JP2012060345A JP2010200672A JP2010200672A JP2012060345A JP 2012060345 A JP2012060345 A JP 2012060345A JP 2010200672 A JP2010200672 A JP 2010200672A JP 2010200672 A JP2010200672 A JP 2010200672A JP 2012060345 A JP2012060345 A JP 2012060345A
- Authority
- JP
- Japan
- Prior art keywords
- image
- depth
- signal
- viewpoint
- brightness
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】合成部17は、フレームメモリ14〜16から発生した3つの基本奥行きモデルを、高域成分評価部12及び13で算定された値に応じた合成比率で合成して、背景を構成する曲面の奥行きデータを生成する。加算部18は、非立体画像のR信号成分と、背景を構成する曲面の奥行きデータとを加算して奥行き推定データを生成する。輝度調整部20a及び20bは、R信号成分が奥行き推定データと背景を構成する曲面の奥行きデータとの差分を示す奥行き差分として入力され、その奥行き差分に基づいて背景より手前に近付くほど非立体画像の輝度信号の振幅を大とする輝度調整を2つの各視点別に行う。
【選択図】図1
Description
=(上部の高域成分評価値−tps):(tp1−下部の高域成分評価値):0
また、図5において、「typeA/B/C」の領域では、typeA/BとtypeA/Cとの平均を採用して、下記のようにtypeA/B/Cの値が決定される。
=(上部の高域成分評価値−tps)+(下部の高域成分評価値−bms):(tpl−
上部の高域成分評価値):(bml−下部の高域成分評価値)
なお、合成比率k1、k2、k3は次式で算出される。
k2=typeB/(typeA+typeB+typeC)
k3=typeC/(typeA+typeB+typeC)
合成部17は、続いて、上記のように算出した合成比率k1〜k3が示す比率で、基本奥行きモデルタイプA〜Cの画像を合成して、背景を構成する曲面の奥行きデータ(以下、「背景の奥行きデータ」ともいう)を生成する。この合成部17は、本発明の合成手段を構成する。加算部18は、合成部17から供給される背景の奥行きデータと、画像入力部11から供給されるR信号成分とを加算して奥行き推定データを生成する。
調整後Y信号=(Y信号−コントラスト調整中心値)×輝度変調信号
+コントラスト調整中心値
上記の調整後Y信号は、輝度変調信号に基づき、コントラスト調整中心値を中心とし、Y信号の振幅を調整した信号である。この調整後Y信号は、コントラスト調整中心値より大きな振幅のY信号はより大きな振幅に調整し、コントラスト調整中心値より小さな振幅のY信号はより小さな振幅に調整したY信号となる。
10 擬似立体画像生成部
11 画像入力部
12 画面上部の高域成分評価部
13 画面下部の高域成分評価部
14〜16 フレームメモリ
17 合成部
18 加算部
20a、20b 輝度調整部
21 RGB−YUV変換部
22 YUV−RGB変換部
23 減算器
24、25 乗算器
26、27 加算器
30a、30b ステレオペア生成部
31a、31b テクスチャシフト部
32a、32b オクルージョン補償部
33a、33b ポスト処理部
34a 視点1画像
34b 視点2画像
35 右目画像
40 多視点立体表示装置
Claims (5)
- 基本となる複数のシーン構造のそれぞれについて奥行き値を示す複数の基本奥行きモデルを発生する発生手段と、
入力される奥行き情報が与えられていない非立体画像の、画面内の所定領域における画素値の統計量を算定してシーン構造を推定する算定手段と、
前記発生手段から発生した前記複数の基本奥行きモデルを、前記算定手段により算定された値に応じた合成比率で合成して、背景を構成する曲面の奥行きデータを生成する合成手段と、
入力される前記非立体画像の原画像の凹凸に略対応した信号レベルを示す前記非立体画像の所定の信号成分と、前記背景を構成する曲面の奥行きデータとを加算して奥行き推定データを生成する加算手段と、
前記加算手段に供給される前記非立体画像の所定の信号成分が、前記奥行き推定データと前記背景を構成する曲面の奥行きデータとの差分を示す奥行き差分として入力されると共に前記非立体画像の輝度信号が入力され、前記奥行き差分に基づいて、背景より手前に近付くほど前記非立体画像の輝度信号の振幅を大とする輝度調整を複数の各視点別に行う複数の輝度調整手段と、
前記複数の輝度調整手段からそれぞれ出力される各視点別の輝度調整後の画像信号のそれぞれのテクスチャのシフトを、対応部分の前記奥行き推定データに応じた量だけ行う複数のテクスチャシフト手段と
を有することを特徴とする多視点画像作成装置。 - 前記複数の輝度調整手段は、
前記非立体画像中の所定の信号成分と、視点別に設定される前記非立体画像中の所定の信号成分の輝度変化に対する寄与率とを乗算した乗算結果に、前記非立体画像中の所定の信号成分が0のときのオフセット値を与える視点別に設定される輝度変調オフセット値とを加算して輝度変調信号を生成する輝度変調信号生成手段と、
前記非立体画像の輝度信号からコントラスト調整の基準値であるコントラスト調整中心値を減算した値に前記輝度変調信号を乗算し、その乗算結果に前記コントラスト調整中心値を加算して調整後輝度信号を生成する調整後輝度信号生成手段と、
前記調整後輝度信号と前記非立体画像中の前記輝度信号以外の信号成分とから各視点別の前記輝度調整後の画像信号を生成する画像信号生成手段と
を有することを特徴とする請求項1記載の多視点画像作成装置。 - 入力される奥行き情報が与えられていない非立体画像の、画面内の所定領域における画素値の統計量を算定してシーン構造を推定する算定ステップと、
基本となる複数のシーン構造のそれぞれについて奥行き値を示す複数の基本奥行きモデルを、前記算定ステップにより算定された値に応じた合成比率で合成して、背景を構成する曲面の奥行きデータを生成する合成ステップと、
入力される前記非立体画像の原画像の凹凸に略対応した信号レベルを示す前記非立体画像の所定の信号成分と、前記背景を構成する曲面の奥行きデータとを加算して奥行き推定データを生成する加算ステップと、
前記非立体画像の所定の信号成分が、前記奥行き推定データと前記背景を構成する曲面の奥行きデータとの差分を示す奥行き差分として入力されると共に前記非立体画像の輝度信号が入力され、前記奥行き差分に基づいて、背景より手前に近付くほど前記非立体画像の輝度信号の振幅を大とする輝度調整を複数の各視点別に行う輝度調整ステップと、
前記輝度調整ステップにより得られる各視点別の輝度調整後の画像信号のそれぞれのテクスチャのシフトを、対応部分の前記奥行き推定データに応じた量だけ行うテクスチャシフトステップと
を含むことを特徴とする多視点画像作成方法。 - 前記輝度調整ステップは、
前記非立体画像中の所定の信号成分と、視点別に設定される前記非立体画像中の所定の信号成分の輝度変化に対する寄与率とを乗算した乗算結果に、前記非立体画像中の所定の信号成分が0のときのオフセット値を与える視点別に設定される輝度変調オフセット値とを加算して輝度変調信号を生成する輝度変調信号生成ステップと、
前記非立体画像の輝度信号からコントラスト調整の基準値であるコントラスト調整中心値を減算した値に前記輝度変調信号を乗算し、その乗算結果に前記コントラスト調整中心値を加算して調整後輝度信号を生成する調整後輝度信号生成ステップと、
前記調整後輝度信号と前記非立体画像中の前記輝度信号以外の信号成分とから各視点別の前記輝度調整後の画像信号を生成する画像信号生成ステップと
を含むことを特徴とする請求項3記載の多視点画像作成方法。 - 基本となる複数のシーン構造のそれぞれについて奥行き値を示す複数の基本奥行きモデルを発生する発生手段と、
入力される奥行き情報が与えられていない非立体画像の、画面内の所定領域における画素値の統計量を算定してシーン構造を推定する算定手段と、
前記発生手段から発生した前記複数の基本奥行きモデルを、前記算定手段により算定された値に応じた合成比率で合成して、背景を構成する曲面の奥行きデータを生成する合成手段と、
入力される前記非立体画像の原画像の凹凸に略対応した信号レベルを示す前記非立体画像の所定の信号成分と、前記背景を構成する曲面の奥行きデータとを加算して奥行き推定データを生成する加算手段と、
前記加算手段に供給される前記非立体画像の所定の信号成分が、前記奥行き推定データと前記背景を構成する曲面の奥行きデータとの差分を示す奥行き差分として入力されると共に前記非立体画像の輝度信号が入力され、前記奥行き差分に基づいて、背景より手前に近付くほど前記非立体画像の輝度信号の振幅を大とする輝度調整を複数の各視点別に行う複数の輝度調整手段と、
前記複数の輝度調整手段からそれぞれ出力される各視点別の輝度調整後の画像信号のそれぞれのテクスチャのシフトを、対応部分の前記奥行き推定データに応じた量だけ行う複数のテクスチャシフト手段と、
前記入力される前記非立体画像を左目視点又は右目視点の画像とし、前記複数のテクスチャシフト手段から出力されるテクスチャシフト後の複数の画像を、前記非立体画像の視点とはそれぞれ異なる複数の視点の画像として表示する多視点表示手段と
を有することを特徴とする多視点画像表示システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010200672A JP5304758B2 (ja) | 2010-09-08 | 2010-09-08 | 多視点画像作成装置及び多視点画像作成方法並びに多視点画像表示システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010200672A JP5304758B2 (ja) | 2010-09-08 | 2010-09-08 | 多視点画像作成装置及び多視点画像作成方法並びに多視点画像表示システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012060345A true JP2012060345A (ja) | 2012-03-22 |
JP5304758B2 JP5304758B2 (ja) | 2013-10-02 |
Family
ID=46056923
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010200672A Active JP5304758B2 (ja) | 2010-09-08 | 2010-09-08 | 多視点画像作成装置及び多視点画像作成方法並びに多視点画像表示システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5304758B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014074969A (ja) * | 2012-10-02 | 2014-04-24 | Toshiba Corp | 画像処理装置及びその方法 |
WO2015167262A1 (en) * | 2014-04-29 | 2015-11-05 | Lg Electronics Inc. | System and method for correcting distortion image due to curved surface |
WO2016010234A1 (en) * | 2014-07-18 | 2016-01-21 | Samsung Electronics Co., Ltd. | Curved multi-view image display apparatus and control method thereof |
US9661296B2 (en) | 2012-07-12 | 2017-05-23 | Samsung Electronics Co., Ltd. | Image processing apparatus and method |
JP7498288B2 (ja) | 2020-03-01 | 2024-06-11 | レイア、インコーポレイテッド | マルチビュースタイル変換のシステムおよび方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005151534A (ja) * | 2003-09-24 | 2005-06-09 | Victor Co Of Japan Ltd | 擬似立体画像作成装置及び擬似立体画像作成方法並びに擬似立体画像表示システム |
JP2005250978A (ja) * | 2004-03-05 | 2005-09-15 | Fuji Xerox Co Ltd | 三次元画像処理装置および三次元画像処理方法 |
JP2006229818A (ja) * | 2005-02-21 | 2006-08-31 | Sharp Corp | 立体画像表示装置 |
JP2007264722A (ja) * | 2006-03-27 | 2007-10-11 | Victor Co Of Japan Ltd | 画像処理装置 |
JP2009044722A (ja) * | 2007-07-19 | 2009-02-26 | Victor Co Of Japan Ltd | 擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法 |
-
2010
- 2010-09-08 JP JP2010200672A patent/JP5304758B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005151534A (ja) * | 2003-09-24 | 2005-06-09 | Victor Co Of Japan Ltd | 擬似立体画像作成装置及び擬似立体画像作成方法並びに擬似立体画像表示システム |
JP2005250978A (ja) * | 2004-03-05 | 2005-09-15 | Fuji Xerox Co Ltd | 三次元画像処理装置および三次元画像処理方法 |
JP2006229818A (ja) * | 2005-02-21 | 2006-08-31 | Sharp Corp | 立体画像表示装置 |
JP2007264722A (ja) * | 2006-03-27 | 2007-10-11 | Victor Co Of Japan Ltd | 画像処理装置 |
JP2009044722A (ja) * | 2007-07-19 | 2009-02-26 | Victor Co Of Japan Ltd | 擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9661296B2 (en) | 2012-07-12 | 2017-05-23 | Samsung Electronics Co., Ltd. | Image processing apparatus and method |
JP2014074969A (ja) * | 2012-10-02 | 2014-04-24 | Toshiba Corp | 画像処理装置及びその方法 |
US9111377B2 (en) | 2012-10-02 | 2015-08-18 | Kabushiki Kaisha Toshiba | Apparatus and method for generating a multi-viewpoint image |
WO2015167262A1 (en) * | 2014-04-29 | 2015-11-05 | Lg Electronics Inc. | System and method for correcting distortion image due to curved surface |
WO2016010234A1 (en) * | 2014-07-18 | 2016-01-21 | Samsung Electronics Co., Ltd. | Curved multi-view image display apparatus and control method thereof |
US10136125B2 (en) | 2014-07-18 | 2018-11-20 | Samsung Electronics Co., Ltd. | Curved multi-view image display apparatus and control method thereof |
JP7498288B2 (ja) | 2020-03-01 | 2024-06-11 | レイア、インコーポレイテッド | マルチビュースタイル変換のシステムおよび方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5304758B2 (ja) | 2013-10-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5402483B2 (ja) | 擬似立体画像作成装置及び擬似立体画像表示システム | |
JP5402504B2 (ja) | 擬似立体画像作成装置及び擬似立体画像表示システム | |
JP5387377B2 (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
JP4214976B2 (ja) | 擬似立体画像作成装置及び擬似立体画像作成方法並びに擬似立体画像表示システム | |
US8503764B2 (en) | Method for generating images of multi-views | |
US20130038606A1 (en) | Image processing apparatus, image processing method, and program | |
US20110026809A1 (en) | Fast multi-view three-dimensional image synthesis apparatus and method | |
US9154765B2 (en) | Image processing device and method, and stereoscopic image display device | |
KR20130061042A (ko) | 부화소를 렌더링하는 영상 처리 장치 및 방법 | |
KR20150121127A (ko) | 양안 응시 이미징 방법 및 장치 | |
JP5304758B2 (ja) | 多視点画像作成装置及び多視点画像作成方法並びに多視点画像表示システム | |
JP6033625B2 (ja) | 多視点画像生成装置、画像生成方法、表示装置、プログラム、及び、記録媒体 | |
JP4214529B2 (ja) | 奥行き信号生成装置、奥行き信号生成プログラム、擬似立体画像生成装置、及び擬似立体画像生成プログラム | |
JP5692051B2 (ja) | 奥行き推定データの生成装置、生成方法及び生成プログラム、並びに疑似立体画像の生成装置、生成方法及び生成プログラム | |
US8976171B2 (en) | Depth estimation data generating apparatus, depth estimation data generating method, and depth estimation data generating program, and pseudo three-dimensional image generating apparatus, pseudo three-dimensional image generating method, and pseudo three-dimensional image generating program | |
US20140198104A1 (en) | Stereoscopic image generating method, stereoscopic image generating device, and display device having same | |
TWI478100B (zh) | 影像深度估計方法及其裝置 | |
JP2013090129A (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
US9064338B2 (en) | Stereoscopic image generation method and stereoscopic image generation system | |
JP4419139B2 (ja) | 奥行き信号生成装置、奥行き信号生成プログラム、擬似立体画像生成装置、及び擬似立体画像生成プログラム | |
JP5500092B2 (ja) | 奥行き推定データ生成装置、奥行き推定データ生成プログラム及び擬似立体画像表示装置 | |
JP2014072602A (ja) | 多視点画像生成装置及び方法 | |
JP5780214B2 (ja) | 奥行き情報生成装置、奥行き情報生成方法、奥行き情報生成プログラム、擬似立体画像生成装置 | |
JP6028427B2 (ja) | 奥行き情報生成装置、奥行き情報生成方法、奥行き情報生成プログラム、擬似立体画像生成装置 | |
JP2014011470A (ja) | 奥行き情報生成装置、奥行き情報生成方法、奥行き情報生成プログラム、擬似立体画像生成装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120724 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130516 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130528 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130610 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5304758 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |