JP2013070205A - 奥行き推定データの生成装置、生成方法及び生成プログラム、並びに疑似立体画像の生成装置、生成方法及び生成プログラム - Google Patents
奥行き推定データの生成装置、生成方法及び生成プログラム、並びに疑似立体画像の生成装置、生成方法及び生成プログラム Download PDFInfo
- Publication number
- JP2013070205A JP2013070205A JP2011206787A JP2011206787A JP2013070205A JP 2013070205 A JP2013070205 A JP 2013070205A JP 2011206787 A JP2011206787 A JP 2011206787A JP 2011206787 A JP2011206787 A JP 2011206787A JP 2013070205 A JP2013070205 A JP 2013070205A
- Authority
- JP
- Japan
- Prior art keywords
- image
- depth
- stereo image
- basic
- stereo
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
Abstract
【解決手段】RB割合算出部1191は、R信号及びB信号に基づいてRB割合RB_rateを算出する。基点変更部1192は、RB割合RB_rateから基点変更を行う。オフセット算出部1193は、下部の高域成分評価値に基づいて基本奥行きモデルタイプの選択に合わせるように、オフセット値を計算する。加算部1194は、基点変更部1192からの信号とオフセットとを加算する。加算部1195は、加算部1194からのオフセット加算信号と合成部から供給される基本奥行きモデル合成画像信号とを加算して、選択されて合成された基本奥行きモデルの合成画像の構図に合わせてオブジェクト情報の重畳度合いを変化させた奥行き推定データを生成する。
【選択図】図7
Description
=(top_act−tps):(tp1−top_act):0
また、図6において、「TypeA/B/C」の領域では、TypeA/BとTypeA/Cとの平均を採用して、下記のようにTypeA/B/Cの値が決定される。
=(top_act−tps)+(bottom_act−bms):(tpl−top_act):(bml−bottom_act)
なお、合成比率k1、k2、k3は次式で算出される。
k2=TypeB/(TypeA+TypeB+TypeC) (2)
k3=TypeC/(TypeA+TypeB+TypeC) (3)
合成部117は、続いて、上記のように算出した合成比率k1〜k3のうち、合成比率k1と基本奥行きモデルタイプAの値であるTypeAとの第1の乗算結果と、合成比率k2と基本奥行きモデルタイプBの値であるTypeBとの第2の乗算結果と、合成比率k3と基本奥行きモデルタイプCの値であるTypeCとの第3の乗算結果とをそれぞれ算出し、更にそれら3つの乗算結果を加算して合成奥行きモデルとなる画像信号を生成する。
ただし、(4)式中、Rは入力R信号の値、Bは入力B信号の値を示す。
これにより、基点変更部1192から出力される基点変更後のRB割合RB_outは、図9において、X軸に示す入力B信号成分の値(0〜255のいずれか)と、Y軸に示す入力R信号成分の値(0〜255のいずれか)とに対して、Z軸に示される値となり、図8のZ軸に示したRB割合RB_rateの中心が0基点に変更されたものとなる。すなわち、図9において、図8の範囲Ia、IIa、IIIa、IVa、Vaの値が、範囲Ib、IIb、IIIb、IVb、Vbの値に変更される。
10 奥行き推定データ生成装置
11 奥行き推定部
20 ステレオペア生成装置
21 テクスチャシフト部
22 オクルージョン補償部
23 ポスト処理部
24 左目画像
25 右目画像
30 ステレオ表示装置
111 画像入力部
112 画面上部の高域成分評価部
113 画面下部の高域成分評価部
114〜116 フレームメモリ
117 合成部
119 重畳部
1191 RB割合算出部
1192 基点変更部
1193 オフセット算出部
1194、1195 加算部
Claims (8)
- 基本となる複数のシーン構造のそれぞれについて奥行き値を示す複数の基本奥行きモデルの画像を発生する発生手段と、
奥行き情報が明示的にも又はステレオ画像のように暗示的にも与えられていない供給される非立体画像のシーン構造を推定するために、前記非立体画像の画面内の所定領域における画素値の少なくとも一部の統計量を利用して、前記複数の基本奥行きモデルの画像間の合成比率を算定する第1の算定手段と、
前記発生手段から発生した前記複数の基本奥行きモデルの画像を、前記合成比率で合成して、基本奥行きモデル合成画像を生成する合成手段と、
前記非立体画像から疑似立体画像の凹凸に関するオブジェクト情報を示すオブジェクト信号を生成するオブジェクト信号生成手段と、
供給される前記非立体画像の画面内の所定領域における画素値の少なくとも一部の前記統計量を利用して、前記オブジェクト信号による前記凹凸に関するオブジェクト情報を強調するためのオフセット値を算定する第2の算定手段と、
前記オブジェクト信号を前記オフセット値に基づき補正する補正手段と、
前記合成手段により合成した前記基本奥行きモデル合成画像に前記補正手段により補正された前記オブジェクト信号を加算して、前記非立体画像と共に擬似的な立体画像を構成する、前記非立体画像とは別視点の画像を生成するための奥行き推定データを生成する加算手段と
を有することを特徴とする奥行き推定データ生成装置。 - 前記第2の算定手段は、
前記第1の算定手段が、前記複数の基本奥行きモデルの画像のうち平面モデル寄りの基本奥行きモデルの画像を他の基本奥行きモデルの画像に対して大なる合成比率で算定するときは奥行きを強調するオフセット値を算出し、一方、前記複数の基本奥行きモデルの画像のうち凹面モデル寄りの基本奥行きモデルの画像を他の基本奥行きモデルの画像に対して大なる合成比率で算定するときは飛び出しを強調するオフセット値を算出することを特徴とする請求項1記載の奥行き推定データ生成装置。 - 前記オブジェクト信号生成手段は、
前記非立体画像の映像信号を構成する赤色信号と青色信号との信号割合を画素単位に算出する割合算出手段と、
前記割合算出手段により算出された前記信号割合の中心を0基点に変更した値を前記オブジェクト信号として出力する基点変更手段と
からなることを特徴とする請求項1又は2記載の奥行き推定データ生成装置。 - 奥行き情報が明示的にも又はステレオ画像のように暗示的にも与えられていない供給される非立体画像のシーン構造を推定するために、前記非立体画像の画面内の所定領域における画素値の少なくとも一部の統計量を利用して、基本となる複数のシーン構造のそれぞれについて奥行き値を示す複数の基本奥行きモデルの画像間の合成比率を算定する第1の算定ステップと、
前記複数の基本奥行きモデルの画像を、前記合成比率で合成して、基本奥行きモデル合成画像を生成する合成ステップと、
前記非立体画像から疑似立体画像の凹凸に関するオブジェクト情報を示すオブジェクト信号を生成するオブジェクト信号生成ステップと、
供給される前記非立体画像の画面内の所定領域における画素値の少なくとも一部の前記統計量を利用して、前記オブジェクト信号による前記凹凸に関するオブジェクト情報を強調するためのオフセット値を算定する第2の算定ステップと、
前記オブジェクト信号を前記オフセット値に基づき補正する補正ステップと、
前記合成ステップにより合成した前記基本奥行きモデル合成画像に前記補正ステップにより補正された前記オブジェクト信号を加算して、前記非立体画像と共に擬似的な立体画像を構成する、前記非立体画像とは別視点の画像を生成するための奥行き推定データを生成する加算ステップと
を含むことを特徴とする奥行き推定データ生成方法。 - 奥行き情報が明示的にも又はステレオ画像のように暗示的にも与えられていない供給される非立体画像のシーン構造を推定するために、前記非立体画像の画面内の所定領域における画素値の少なくとも一部の統計量を利用して、基本となる複数のシーン構造のそれぞれについて奥行き値を示す複数の基本奥行きモデルの画像間の合成比率を算定する第1の算定機能と、
前記複数の基本奥行きモデルの画像を、前記合成比率で合成して、基本奥行きモデル合成画像を生成する合成機能と、
前記非立体画像から疑似立体画像の凹凸に関するオブジェクト情報を示すオブジェクト信号を生成するオブジェクト信号生成機能と、
供給される前記非立体画像の画面内の所定領域における画素値の少なくとも一部の前記統計量を利用して、前記オブジェクト信号による前記凹凸に関するオブジェクト情報を強調するためのオフセット値を算定する第2の算定機能と、
前記オブジェクト信号を前記オフセット値に基づき補正する補正機能と、
前記合成機能により合成した前記基本奥行きモデル合成画像に前記補正機能により補正された前記オブジェクト信号を加算して、前記非立体画像と共に擬似的な立体画像を構成する、前記非立体画像とは別視点の画像を生成するための奥行き推定データを生成する加算機能と
をコンピュータに実現させることを特徴とする奥行き推定データ生成プログラム。 - 奥行き情報が明示的にも又はステレオ画像のように暗示的にも与えられていない非立体画像が供給される請求項1に記載の奥行き推定データ生成装置にて生成された奥行き推定データと、前記非立体画像とに基づいて、前記非立体画像のテクスチャのシフトを対応部分の前記奥行き推定データに応じた量だけ行うことによって別視点画像を生成する別視点画像生成手段と、
前記非立体画像及び前記別視点画像の一方を左目画像とし、他方を右目画像とする疑似立体画像を出力する手段と
を有することを特徴とする疑似立体画像生成装置。 - 奥行き情報が明示的にも又はステレオ画像のように暗示的にも与えられていない非立体画像が供給される請求項4に記載の奥行き推定データ生成方法にて生成された奥行き推定データと、前記非立体画像とに基づいて、前記非立体画像のテクスチャのシフトを対応部分の前記奥行き推定データに応じた量だけ行うことによって別視点画像を生成する別視点画像生成ステップと、
前記非立体画像及び前記別視点画像の一方を左目画像とし、他方を右目画像とする疑似立体画像を出力するステップと
を含むことを特徴とする疑似立体画像生成方法。 - 奥行き情報が明示的にも又はステレオ画像のように暗示的にも与えられていない非立体画像が供給される請求項5に記載の奥行き推定データ生成プログラムにて生成された奥行き推定データと、前記非立体画像とに基づいて、前記非立体画像のテクスチャのシフトを対応部分の前記奥行き推定データに応じた量だけ行うことによって別視点画像を生成する別視点画像生成機能と、
前記非立体画像及び前記別視点画像の一方を左目画像とし、他方を右目画像とする疑似立体画像を出力する機能とを
コンピュータに実現させることを特徴とする疑似立体画像生成プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011206787A JP5691965B2 (ja) | 2011-09-22 | 2011-09-22 | 奥行き推定データの生成装置、生成方法及び生成プログラム、並びに疑似立体画像の生成装置、生成方法及び生成プログラム |
US13/615,911 US8976171B2 (en) | 2011-09-22 | 2012-09-14 | Depth estimation data generating apparatus, depth estimation data generating method, and depth estimation data generating program, and pseudo three-dimensional image generating apparatus, pseudo three-dimensional image generating method, and pseudo three-dimensional image generating program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011206787A JP5691965B2 (ja) | 2011-09-22 | 2011-09-22 | 奥行き推定データの生成装置、生成方法及び生成プログラム、並びに疑似立体画像の生成装置、生成方法及び生成プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013070205A true JP2013070205A (ja) | 2013-04-18 |
JP5691965B2 JP5691965B2 (ja) | 2015-04-01 |
Family
ID=47910793
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011206787A Active JP5691965B2 (ja) | 2011-09-22 | 2011-09-22 | 奥行き推定データの生成装置、生成方法及び生成プログラム、並びに疑似立体画像の生成装置、生成方法及び生成プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US8976171B2 (ja) |
JP (1) | JP5691965B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103810708B (zh) * | 2014-02-13 | 2016-11-02 | 西安交通大学 | 一种激光散斑图像深度感知方法及装置 |
KR102192986B1 (ko) | 2014-05-23 | 2020-12-18 | 삼성전자주식회사 | 영상 디스플레이 장치 및 영상 디스플레이 방법 |
CN104537657A (zh) * | 2014-12-23 | 2015-04-22 | 西安交通大学 | 一种搜索并行gpu加速的激光散斑图像深度感知方法 |
CN105931240B (zh) | 2016-04-21 | 2018-10-19 | 西安交通大学 | 三维深度感知装置及方法 |
US10735707B2 (en) | 2017-08-15 | 2020-08-04 | International Business Machines Corporation | Generating three-dimensional imagery |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005151534A (ja) * | 2003-09-24 | 2005-06-09 | Victor Co Of Japan Ltd | 擬似立体画像作成装置及び擬似立体画像作成方法並びに擬似立体画像表示システム |
JP2011078036A (ja) * | 2009-10-02 | 2011-04-14 | Jvc Kenwood Holdings Inc | 擬似立体画像作成装置及び擬似立体画像表示システム |
JP2011087100A (ja) * | 2009-10-15 | 2011-04-28 | Jvc Kenwood Holdings Inc | 擬似立体画像作成装置及び擬似立体画像表示システム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7262767B2 (en) * | 2004-09-21 | 2007-08-28 | Victor Company Of Japan, Limited | Pseudo 3D image creation device, pseudo 3D image creation method, and pseudo 3D image display system |
US8131098B2 (en) * | 2007-07-06 | 2012-03-06 | Panasonic Corporation | Image processing device, image processing method, image processing system, program, storage medium, and integrated circuit |
US8463019B2 (en) * | 2007-07-19 | 2013-06-11 | JVC Kenwood Corporation | Pseudo 3D image generation device, image encoding device, image encoding method, image transmission method, image decoding device, and image decoding method |
JP5387377B2 (ja) * | 2009-12-14 | 2014-01-15 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
-
2011
- 2011-09-22 JP JP2011206787A patent/JP5691965B2/ja active Active
-
2012
- 2012-09-14 US US13/615,911 patent/US8976171B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005151534A (ja) * | 2003-09-24 | 2005-06-09 | Victor Co Of Japan Ltd | 擬似立体画像作成装置及び擬似立体画像作成方法並びに擬似立体画像表示システム |
JP2011078036A (ja) * | 2009-10-02 | 2011-04-14 | Jvc Kenwood Holdings Inc | 擬似立体画像作成装置及び擬似立体画像表示システム |
JP2011087100A (ja) * | 2009-10-15 | 2011-04-28 | Jvc Kenwood Holdings Inc | 擬似立体画像作成装置及び擬似立体画像表示システム |
Also Published As
Publication number | Publication date |
---|---|
US20130076745A1 (en) | 2013-03-28 |
JP5691965B2 (ja) | 2015-04-01 |
US8976171B2 (en) | 2015-03-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4214976B2 (ja) | 擬似立体画像作成装置及び擬似立体画像作成方法並びに擬似立体画像表示システム | |
JP5402483B2 (ja) | 擬似立体画像作成装置及び擬似立体画像表示システム | |
JP5691965B2 (ja) | 奥行き推定データの生成装置、生成方法及び生成プログラム、並びに疑似立体画像の生成装置、生成方法及び生成プログラム | |
JP5692051B2 (ja) | 奥行き推定データの生成装置、生成方法及び生成プログラム、並びに疑似立体画像の生成装置、生成方法及び生成プログラム | |
JP4214529B2 (ja) | 奥行き信号生成装置、奥行き信号生成プログラム、擬似立体画像生成装置、及び擬似立体画像生成プログラム | |
JP4214527B2 (ja) | 擬似立体画像生成装置及び擬似立体画像生成プログラム並びに擬似立体画像表示システム | |
WO2012050089A1 (ja) | 奥行き信号生成装置、擬似立体画像信号生成装置、奥行き信号生成方法、擬似立体画像信号生成方法、奥行き信号生成プログラム、擬似立体画像信号生成プログラム | |
JP5304758B2 (ja) | 多視点画像作成装置及び多視点画像作成方法並びに多視点画像表示システム | |
US8976175B2 (en) | Depth estimation data generating device, computer readable recording medium having depth estimation data generating program recorded thereon, and pseudo-stereo image display device | |
JP5786807B2 (ja) | 奥行き情報生成装置、奥行き情報生成方法、奥行き情報生成プログラム、擬似立体画像生成装置 | |
JP5691966B2 (ja) | 奥行き推定データの生成装置、生成方法及び生成プログラム、並びに疑似立体画像の生成装置、生成方法及び生成プログラム | |
JP5500092B2 (ja) | 奥行き推定データ生成装置、奥行き推定データ生成プログラム及び擬似立体画像表示装置 | |
JP5780214B2 (ja) | 奥行き情報生成装置、奥行き情報生成方法、奥行き情報生成プログラム、擬似立体画像生成装置 | |
JP2006186510A (ja) | 擬似立体画像生成装置及び擬似立体画像生成プログラム並びに擬似立体画像表示システム | |
JP4419139B2 (ja) | 奥行き信号生成装置、奥行き信号生成プログラム、擬似立体画像生成装置、及び擬似立体画像生成プログラム | |
JP5459231B2 (ja) | 擬似立体画像生成装置、擬似立体画像生成プログラム及び擬似立体画像表示装置 | |
JP6028427B2 (ja) | 奥行き情報生成装置、奥行き情報生成方法、奥行き情報生成プログラム、擬似立体画像生成装置 | |
JP2012084961A (ja) | 奥行き信号生成装置、擬似立体画像信号生成装置、奥行き信号生成方法、擬似立体画像信号生成方法、奥行き信号生成プログラム、擬似立体画像信号生成プログラム | |
JP5888140B2 (ja) | 奥行き推定データ生成装置、擬似立体画像生成装置、奥行き推定データ生成方法及び奥行き推定データ生成プログラム | |
JP6056459B2 (ja) | 奥行き推定データ生成装置、擬似立体画像生成装置、奥行き推定データ生成方法及び奥行き推定データ生成プログラム | |
JP2014072640A (ja) | 奥行き推定データ生成装置、擬似立体画像生成装置、奥行き推定データ生成方法及び奥行き推定データ生成プログラム | |
JP2013017052A (ja) | 奥行き信号生成装置、擬似立体画像生成装置、奥行き信号生成方法、および擬似立体画像生成方法 | |
JP2012060381A (ja) | 奥行きデータ生成装置、擬似立体画像信号生成装置、奥行きデータ生成方法、擬似立体画像信号生成方法、奥行きデータ生成プログラム、擬似立体画像信号生成プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140228 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140918 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140930 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141129 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150106 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150119 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5691965 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |