JP6016061B2 - 画像生成装置、画像表示装置及び画像生成方法並びに画像生成プログラム - Google Patents
画像生成装置、画像表示装置及び画像生成方法並びに画像生成プログラム Download PDFInfo
- Publication number
- JP6016061B2 JP6016061B2 JP2012096311A JP2012096311A JP6016061B2 JP 6016061 B2 JP6016061 B2 JP 6016061B2 JP 2012096311 A JP2012096311 A JP 2012096311A JP 2012096311 A JP2012096311 A JP 2012096311A JP 6016061 B2 JP6016061 B2 JP 6016061B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- pixel
- parallax
- noise
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 89
- 238000012545 processing Methods 0.000 claims description 60
- 238000003702 image correction Methods 0.000 claims description 34
- 238000012937 correction Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 15
- 238000000605 extraction Methods 0.000 description 11
- 238000009499 grossing Methods 0.000 description 10
- 230000000694 effects Effects 0.000 description 9
- 238000004364 calculation method Methods 0.000 description 7
- 238000007796 conventional method Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 230000004069 differentiation Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000003706 image smoothing Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
Description
本発明の実施の形態1に係る仮想視点画像を生成する画像生成装置の構成について、図1を参照して説明する。図1は、本実施の形態に係る仮想視点画像生成装置100の構成を示すブロック図である。
本発明の実施の形態2に係る画像生成装置200の構成について、図6を参照して説明する。図6は、本実施の形態に係る画像生成装置200の構成を示すブロック図である。
次に、本発明の実施の形態3に係る画像生成装置300の構成について、図11を参照して説明する。図11は、本実施の形態に係る画像生成装置300の構成を示すブロック図である。図11において、図1と同様の構成要素には同一の符号を付し、説明を適宜省略する。
101 視差画像生成部
101’ 視差画像生成部
102 視差画像補正部
102a 輪郭線抽出部
102b エラー領域算出部
102c エラー領域視差値修正部
103 画素移動処理部
104 未設定画素領域補間部
105 未設定画素領域ノイズ除去部
105a ノイズ判定部
105b ノイズ除去部
200 画像生成装置
300 画像生成装置
300’ 画像生成装置
1000 2次元画像信号
2000 デプス画像信号
2001 補正後のデプス画像信号
3000 視差画像信号
3001 補正後の視差画像信号
4000 未設定画素領域にノイズが入っていない中間画像信号
4001 未設定画素領域にノイズが入っている中間画像信号
4002 仮想視点画像信号
4003 フラッグ画像信号
5000 2次元画像の輪郭情報
5001 視差画像の輪郭情報
6000 エラー領域情報
7000 仮想カメラのパラメータ
7001 ノイズ画素情報
10000 3D表示パネル
Claims (14)
- 2次元画像と、前記2次元画像の奥行き情報を表すデプス画像と、3次元空間に仮想的に配置した仮想カメラのパラメータと、を用いて、前記仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成装置であって、
前記デプス画像と前記仮想カメラのパラメータとを用いて、前記2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成部と、前記2次元画像及び前記視差画像から抽出した輪郭線に基づいて前記視差画像生成部で生成した前記視差画像の視差値を補正、若しくは、前記2次元画像及び前記デプス画像から抽出した輪郭線に基づいて前記視差画像生成部で前記視差画像を生成するための前記デプス画像の奥行き情報を補正する視差画像補正部と、補正後の視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理部と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素を補間して前記仮想視点画像を生成する未設定画素補間部と、を備え、
前記視差画像補正部は、前記視差画像の輪郭線の所定の行(又は列)の画素を基準画素とし、当該所定の行(又は列)の近傍の行(又は列)を含む範囲内で、行(又は列)のプラス方向及びマイナス方向に最も離れている2つの画素を特定し、前記2つの画素に挟まれる行(又は列)方向の領域をエラー領域として推測し、得られたエラー領域内の視差値を補正することを特徴とする画像生成装置。 - 複数枚の2次元画像を用いて、3次元空間に仮想的に配置した仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成装置であって、
複数枚の2次元画像を使用して、2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成部と、前記2次元画像及び前記視差画像の輪郭線を抽出し、抽出された輪郭線に基づいて前記視差画像からエラー領域を推測し、得られたエラー領域内の視差値を補正する視差画像補正部と、補正後の視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理部と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素を補間して前記仮想視点画像を生成する未設定画素補間部と、を備え、
前記視差画像補正部は、前記視差画像の輪郭線の所定の行(又は列)の画素を基準画素とし、当該所定の行(又は列)の近傍の行(又は列)を含む範囲内で、行(又は列)のプラス方向及びマイナス方向に最も離れている2つの画素を特定し、前記2つの画素に挟まれる行(又は列)方向の領域をエラー領域として推測し、得られたエラー領域内の視差値を補正することを特徴とする画像生成装置。 - 2次元画像と、前記2次元画像の奥行き情報を表すデプス画像と、3次元空間に仮想的に配置した仮想カメラのパラメータと、を用いて、前記仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成装置であって、
前記デプス画像と前記仮想カメラのパラメータとを用いて、前記2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成部と、前記視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理部と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素領域にあるノイズを除去する未設定画素領域ノイズ除去部と、ノイズを除去した中間画像の前記未設定画素を補間して前記仮想視点画像を生成する未設定画素補間部と、を備え、
前記未設定画素領域ノイズ除去部は、二つの未設定画素領域に挟まる画素領域の長さと予め定めたノイズ判定閾値とを比較することによって、前記画素領域がノイズであるか否かを判断するノイズ判定部と、前記画素領域がノイズであると判断された場合に、前記ノイズを除去するノイズ除去部と、を備えることを特徴とする画像生成装置。 - 2次元画像と、前記2次元画像の奥行き情報を表すデプス画像と、3次元空間に仮想的に配置した仮想カメラのパラメータと、を用いて、前記仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成装置であって、
前記デプス画像と前記仮想カメラのパラメータとを用いて、前記2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成部と、前記視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理部と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素領域にあるノイズを除去する未設定画素領域ノイズ除去部と、ノイズを除去した中間画像の前記未設定画素を補間して前記仮想視点画像を生成する未設定画素補間部と、を備え、
前記未設定画素領域ノイズ除去部は、二つの未設定画素領域の長さと前記二つの未設定画素領域に挟まる画素領域の長さの比例値と予め定めたノイズ判定閾値とを比較することによって、前記画素領域がノイズであるか否かを判断するノイズ判定部と、前記画素領域がノイズであると判断された場合に、前記ノイズを除去するノイズ除去部と、を備えることを特徴とする画像生成装置。 - 複数枚の2次元画像を用いて、3次元空間に仮想的に配置した仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成装置であって、
複数枚の2次元画像を使用して、2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成部と、前記視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理部と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素領域にあるノイズを除去する未設定画素領域ノイズ除去部と、ノイズを除去した中間画像の前記未設定画素を補間して前記仮想視点画像を生成する未設定画素補間部と、を備え、
前記未設定画素領域ノイズ除去部は、二つの未設定画素領域に挟まる画素領域の長さと予め定めたノイズ判定閾値とを比較することによって、前記画素領域がノイズであるか否かを判断するノイズ判定部と、前記画素領域がノイズであると判断された場合に、前記ノイズを除去するノイズ除去部と、を備えることを特徴とする画像生成装置。 - 複数枚の2次元画像を用いて、3次元空間に仮想的に配置した仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成装置であって、
複数枚の2次元画像を使用して、2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成部と、前記視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理部と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素領域にあるノイズを除去する未設定画素領域ノイズ除去部と、ノイズを除去した中間画像の前記未設定画素を補間して前記仮想視点画像を生成する未設定画素補間部と、を備え、
前記未設定画素領域ノイズ除去部は、二つの未設定画素領域の長さと前記二つの未設定画素領域に挟まる画素領域の長さの比例値と予め定めたノイズ判定閾値とを比較することによって、前記画素領域がノイズであるか否かを判断するノイズ判定部と、前記画素領域がノイズであると判断された場合に、前記ノイズを除去するノイズ除去部と、を備えることを特徴とする画像生成装置。 - 請求項1乃至6のいずれか一に記載の前記画像生成装置と3次元表示パネルとを備える3次元画像表示装置。
- 2次元画像と、前記2次元画像の奥行き情報を表すデプス画像と、3次元空間に仮想的に配置した仮想カメラのパラメータと、を用いて、前記仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成方法であって、
前記デプス画像と前記仮想カメラのパラメータとを用いて、前記2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成処理と、前記2次元画像及び前記視差画像から抽出した輪郭線に基づいて前記視差画像生成処理で生成した前記視差画像の視差値を補正、若しくは、前記2次元画像及び前記デプス画像から抽出した輪郭線に基づいて前記視差画像生成処理で前記視差画像を生成するための前記デプス画像の奥行き情報を補正する視差画像補正処理と、補正後の視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素を補間して前記仮想視点画像を生成する未設定画素補間処理と、を実行し、
前記視差画像補正処理では、前記視差画像の輪郭線の所定の行(又は列)の画素を基準画素とし、当該所定の行(又は列)の近傍の行(又は列)を含む範囲内で、行(又は列)のプラス方向及びマイナス方向に最も離れている2つの画素を特定し、前記2つの画素に挟まれる行(又は列)方向の領域をエラー領域として推測し、得られたエラー領域内の視差値を補正することを特徴とする画像生成方法。 - 複数枚の2次元画像を用いて、3次元空間に仮想的に配置した仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成方法であって、
複数枚の2次元画像を使用して、2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成処理と、前記2次元画像及び前記視差画像の輪郭線を抽出し、抽出された輪郭線に基づいて前記視差画像からエラー領域を推測し、得られたエラー領域内の視差値を補正する視差画像補正処理と、補正後の視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素を補間して前記仮想視点画像を生成する未設定画素補間処理と、を実行し、
前記視差画像補正処理では、前記視差画像の輪郭線の所定の行(又は列)の画素を基準画素とし、当該所定の行(又は列)の近傍の行(又は列)を含む範囲内で、行(又は列)のプラス方向及びマイナス方向に最も離れている2つの画素を特定し、前記2つの画素に挟まれる行(又は列)方向の領域をエラー領域として推測し、得られたエラー領域内の視差値を補正することを特徴とする画像生成方法。 - 2次元画像と、前記2次元画像の奥行き情報を表すデプス画像と、3次元空間に仮想的に配置した仮想カメラのパラメータと、を用いて、前記仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成方法であって、
前記デプス画像と前記仮想カメラのパラメータとを用いて、前記2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成処理と、前記視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素領域にあるノイズを除去する未設定画素領域ノイズ除去処理と、ノイズを除去した中間画像の前記未設定画素を補間して前記仮想視点画像を生成する未設定画素補間処理と、を実行し、
前記未設定画素領域ノイズ除去処理では、二つの未設定画素領域に挟まる画素領域の長さと予め定めたノイズ判定閾値とを比較することによって、前記画素領域がノイズであるか否かを判断し、前記画素領域がノイズであると判断した場合に、前記ノイズを除去することを特徴とする画像生成方法。 - 2次元画像と、前記2次元画像の奥行き情報を表すデプス画像と、3次元空間に仮想的に配置した仮想カメラのパラメータと、を用いて、前記仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成方法であって、
前記デプス画像と前記仮想カメラのパラメータとを用いて、前記2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成処理と、前記視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素領域にあるノイズを除去する未設定画素領域ノイズ除去処理と、ノイズを除去した中間画像の前記未設定画素を補間して前記仮想視点画像を生成する未設定画素補間処理と、を実行し、
前記未設定画素領域ノイズ除去処理では、二つの未設定画素領域の長さと前記二つの未設定画素領域に挟まる画素領域の長さの比例値と予め定めたノイズ判定閾値とを比較することによって、前記画素領域がノイズであるか否かを判断し、前記画素領域がノイズであると判断された場合に、前記ノイズを除去することを特徴とする画像生成方法。 - 複数枚の2次元画像を用いて、3次元空間に仮想的に配置した仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成方法であって、
複数枚の2次元画像を使用して、2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成処理と、前記視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素領域にあるノイズを除去する未設定画素領域ノイズ除去処理と、ノイズを除去した中間画像の前記未設定画素を補間して前記仮想視点画像を生成する未設定画素補間処理と、を実行し、
前記未設定画素領域ノイズ除去処理では、二つの未設定画素領域に挟まる画素領域の長さと予め定めたノイズ判定閾値とを比較することによって、前記画素領域がノイズであるか否かを判断し、前記画素領域がノイズであると判断した場合に、前記ノイズを除去することを特徴とする画像生成方法。 - 複数枚の2次元画像を用いて、3次元空間に仮想的に配置した仮想カメラ位置から撮影して得られる仮想視点画像を生成する画像生成方法であって、
複数枚の2次元画像を使用して、2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成処理と、前記視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理と、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素領域にあるノイズを除去する未設定画素領域ノイズ除去処理と、ノイズを除去した中間画像の前記未設定画素を補間して前記仮想視点画像を生成する未設定画素補間処理と、を実行し、
前記未設定画素領域ノイズ除去処理では、二つの未設定画素領域の長さと前記二つの未設定画素領域に挟まる画素領域の長さの比例値と予め定めたノイズ判定閾値とを比較することによって、前記画素領域がノイズであるか否かを判断し、前記画素領域がノイズであると判断された場合に、前記ノイズを除去することを特徴とする画像生成方法。 - 2次元画像と、前記2次元画像の奥行き情報を表すデプス画像と、3次元空間に仮想的に配置した仮想カメラのパラメータと、を用いて、前記仮想カメラ位置から撮影して得られる仮想視点画像を生成する装置で動作する画像生成プログラムであって、
前記装置を、
前記デプス画像と前記仮想カメラのパラメータとを用いて、前記2次元画像の各画素のずらし量を表す視差値を表す視差画像を生成する視差画像生成部、前記2次元画像及び前記視差画像から抽出した輪郭線に基づいて前記視差画像生成部で生成した前記視差画像の視差値を補正、若しくは、前記2次元画像及び前記デプス画像から抽出した輪郭線に基づいて前記視差画像生成部で前記視差画像を生成するための前記デプス画像の奥行き情報を補正する視差画像補正部、補正後の視差画像に従って前記2次元画像の各画素をシフトさせて中間画像を生成する画素移動処理部、前記中間画像の内、シフトされた画素が割り当てられていない未設定画素を補間して前記仮想視点画像を生成する未設定画素補間部、として機能させ、
前記視差画像補正部は、前記視差画像の輪郭線の所定の行(又は列)の画素を基準画素とし、当該所定の行(又は列)の近傍の行(又は列)を含む範囲内で、行(又は列)のプラス方向及びマイナス方向に最も離れている2つの画素を特定し、前記2つの画素に挟まれる行(又は列)方向の領域をエラー領域として推測し、得られたエラー領域内の視差値を補正することを特徴とする画像生成プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012096311A JP6016061B2 (ja) | 2012-04-20 | 2012-04-20 | 画像生成装置、画像表示装置及び画像生成方法並びに画像生成プログラム |
CN201310135262.4A CN103379352B (zh) | 2012-04-20 | 2013-04-18 | 图像生成装置、图像显示装置及图像生成方法 |
US13/866,548 US9361725B2 (en) | 2012-04-20 | 2013-04-19 | Image generation apparatus, image display apparatus, image generation method and non-transitory computer readable medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012096311A JP6016061B2 (ja) | 2012-04-20 | 2012-04-20 | 画像生成装置、画像表示装置及び画像生成方法並びに画像生成プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013225740A JP2013225740A (ja) | 2013-10-31 |
JP6016061B2 true JP6016061B2 (ja) | 2016-10-26 |
Family
ID=49379675
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012096311A Active JP6016061B2 (ja) | 2012-04-20 | 2012-04-20 | 画像生成装置、画像表示装置及び画像生成方法並びに画像生成プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US9361725B2 (ja) |
JP (1) | JP6016061B2 (ja) |
CN (1) | CN103379352B (ja) |
Families Citing this family (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010093351A1 (en) * | 2009-02-13 | 2010-08-19 | Thomson Licensing | Depth map coding to reduce rendered distortion |
WO2013190814A1 (ja) * | 2012-06-22 | 2013-12-27 | 株式会社ニコン | 画像処理装置、撮像装置および画像処理プログラム |
CN104809137B (zh) * | 2014-01-28 | 2018-07-13 | 上海尚恩华科网络科技股份有限公司 | 一种二维页面的三维网页制作方法及系统 |
JP5847228B2 (ja) * | 2014-04-16 | 2016-01-20 | オリンパス株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
US9582888B2 (en) * | 2014-06-19 | 2017-02-28 | Qualcomm Incorporated | Structured light three-dimensional (3D) depth map based on content filtering |
US10726593B2 (en) | 2015-09-22 | 2020-07-28 | Fyusion, Inc. | Artificially rendering images using viewpoint interpolation and extrapolation |
US10262426B2 (en) | 2014-10-31 | 2019-04-16 | Fyusion, Inc. | System and method for infinite smoothing of image sequences |
US10176592B2 (en) | 2014-10-31 | 2019-01-08 | Fyusion, Inc. | Multi-directional structured image array capture on a 2D graph |
US9940541B2 (en) | 2015-07-15 | 2018-04-10 | Fyusion, Inc. | Artificially rendering images using interpolation of tracked control points |
US10275935B2 (en) | 2014-10-31 | 2019-04-30 | Fyusion, Inc. | System and method for infinite synthetic image generation from multi-directional structured image array |
JP6570296B2 (ja) | 2015-04-09 | 2019-09-04 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
CA2988360A1 (en) * | 2015-06-16 | 2016-12-22 | Koninklijke Philips N.V. | Method and apparatus for determining a depth map for an image |
KR101648673B1 (ko) * | 2015-06-26 | 2016-08-17 | 동서대학교산학협력단 | 360° vr 영상 콘텐츠제작을 위한 유손실 이미지 복원 및 컨버팅 방법 |
US10147211B2 (en) * | 2015-07-15 | 2018-12-04 | Fyusion, Inc. | Artificially rendering images using viewpoint interpolation and extrapolation |
US11006095B2 (en) | 2015-07-15 | 2021-05-11 | Fyusion, Inc. | Drone based capture of a multi-view interactive digital media |
US11095869B2 (en) | 2015-09-22 | 2021-08-17 | Fyusion, Inc. | System and method for generating combined embedded multi-view interactive digital media representations |
US10852902B2 (en) | 2015-07-15 | 2020-12-01 | Fyusion, Inc. | Automatic tagging of objects on a multi-view interactive digital media representation of a dynamic entity |
US10242474B2 (en) | 2015-07-15 | 2019-03-26 | Fyusion, Inc. | Artificially rendering images using viewpoint interpolation and extrapolation |
US10222932B2 (en) | 2015-07-15 | 2019-03-05 | Fyusion, Inc. | Virtual reality environment based manipulation of multilayered multi-view interactive digital media representations |
US11783864B2 (en) | 2015-09-22 | 2023-10-10 | Fyusion, Inc. | Integration of audio into a multi-view interactive digital media representation |
US10582179B2 (en) | 2016-02-01 | 2020-03-03 | Samsung Electronics Co., Ltd. | Method and apparatus for processing binocular disparity image |
CN107240064B (zh) * | 2016-03-28 | 2021-04-06 | 展讯通信(天津)有限公司 | 图像校正方法、装置及终端 |
CN106296789B (zh) * | 2016-08-05 | 2019-08-06 | 深圳迪乐普数码科技有限公司 | 一种虚拟植入物体在实景中穿梭的方法及终端 |
US11069120B2 (en) | 2016-08-10 | 2021-07-20 | Sony Corporation | Image processing apparatus and image processing method |
CN109564698B (zh) * | 2016-08-10 | 2023-05-26 | 索尼公司 | 图像处理设备和图像处理方法 |
CN106327445A (zh) * | 2016-08-24 | 2017-01-11 | 王忠民 | 一种图像处理方法、装置及摄影器材、使用方法 |
US11202017B2 (en) | 2016-10-06 | 2021-12-14 | Fyusion, Inc. | Live style transfer on a mobile device |
CN106651794B (zh) * | 2016-12-01 | 2019-12-03 | 北京航空航天大学 | 一种基于虚拟相机的投影散斑校正方法 |
US10437879B2 (en) | 2017-01-18 | 2019-10-08 | Fyusion, Inc. | Visual search using multi-view interactive digital media representations |
JPWO2018186287A1 (ja) * | 2017-04-05 | 2020-05-14 | シャープ株式会社 | 映像データ生成装置、映像再生装置、映像データ生成方法、制御プログラム、及び記録媒体 |
US10313651B2 (en) | 2017-05-22 | 2019-06-04 | Fyusion, Inc. | Snapshots at predefined intervals or angles |
US11069147B2 (en) | 2017-06-26 | 2021-07-20 | Fyusion, Inc. | Modification of multi-view interactive digital media representation |
WO2019053935A1 (ja) * | 2017-09-14 | 2019-03-21 | 株式会社島津製作所 | 放射線撮影装置 |
US10839540B2 (en) * | 2017-09-29 | 2020-11-17 | Electronics And Telecommunications Research Institute | Apparatus and method for generating intermediate view image |
WO2019123509A1 (ja) * | 2017-12-18 | 2019-06-27 | ガンホー・オンライン・エンターテイメント株式会社 | 端末装置、システム、プログラム及び方法 |
US10592747B2 (en) | 2018-04-26 | 2020-03-17 | Fyusion, Inc. | Method and apparatus for 3-D auto tagging |
JP2020027957A (ja) * | 2018-08-09 | 2020-02-20 | オリンパス株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
CN114051128B (zh) * | 2021-11-11 | 2023-09-05 | 北京奇艺世纪科技有限公司 | 一种2d视频转3d视频的方法、装置、设备及介质 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3769850B2 (ja) * | 1996-12-26 | 2006-04-26 | 松下電器産業株式会社 | 中間視点画像生成方法および視差推定方法および画像伝送方法 |
EP1018706A4 (en) * | 1998-04-10 | 2004-11-17 | Seiko Epson Corp | IMAGE DATA INTERPOLATION DEVICE AND METHOD, AND MEDIUM ON WHICH THE IMAGE DATA INTERPOLATION PROGRAM IS RECORDED |
JP3886727B2 (ja) * | 1999-02-25 | 2007-02-28 | 富士通株式会社 | 画像処理装置 |
JP2001175863A (ja) | 1999-12-21 | 2001-06-29 | Nippon Hoso Kyokai <Nhk> | 多視点画像内挿方法および装置 |
JP2001256482A (ja) * | 2000-03-08 | 2001-09-21 | Fuji Xerox Co Ltd | 視差画像生成装置および視差画像生成方法 |
KR100682889B1 (ko) * | 2003-08-29 | 2007-02-15 | 삼성전자주식회사 | 영상에 기반한 사실감 있는 3차원 얼굴 모델링 방법 및 장치 |
JP2005228134A (ja) | 2004-02-13 | 2005-08-25 | Konica Minolta Photo Imaging Inc | 画象処理装置、画像処理方法及びプログラム |
CN101610421B (zh) * | 2008-06-17 | 2011-12-21 | 华为终端有限公司 | 视频通讯方法、装置及系统 |
FR2932911A1 (fr) | 2008-06-24 | 2009-12-25 | France Telecom | Procede et dispositif de remplissage des zones d'occultation d'une carte de profondeur ou de disparites estimee a partir d'au moins deux images. |
CN100576934C (zh) * | 2008-07-03 | 2009-12-30 | 浙江大学 | 基于深度和遮挡信息的虚拟视点合成方法 |
JP5243612B2 (ja) * | 2008-10-02 | 2013-07-24 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | 中間画像合成およびマルチビューデータ信号抽出 |
US8780172B2 (en) * | 2009-01-27 | 2014-07-15 | Telefonaktiebolaget L M Ericsson (Publ) | Depth and video co-processing |
JP2011139281A (ja) * | 2009-12-28 | 2011-07-14 | Sony Corp | 三次元画像生成装置、三次元画像表示装置、三次元画像生成方法およびプログラム |
JP4875762B2 (ja) * | 2010-05-26 | 2012-02-15 | シャープ株式会社 | 画像処理装置、画像表示装置および画像撮像装置 |
JP5150698B2 (ja) * | 2010-09-30 | 2013-02-20 | 株式会社東芝 | デプス補正装置及び方法 |
CN102307312B (zh) * | 2011-08-31 | 2013-06-05 | 四川虹微技术有限公司 | 一种对dibr技术生成的目标图像进行空洞填充的方法 |
US9401041B2 (en) * | 2011-10-26 | 2016-07-26 | The Regents Of The University Of California | Multi view synthesis method and display devices with spatial and inter-view consistency |
-
2012
- 2012-04-20 JP JP2012096311A patent/JP6016061B2/ja active Active
-
2013
- 2013-04-18 CN CN201310135262.4A patent/CN103379352B/zh active Active
- 2013-04-19 US US13/866,548 patent/US9361725B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN103379352A (zh) | 2013-10-30 |
US9361725B2 (en) | 2016-06-07 |
CN103379352B (zh) | 2016-08-10 |
US20130278596A1 (en) | 2013-10-24 |
JP2013225740A (ja) | 2013-10-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6016061B2 (ja) | 画像生成装置、画像表示装置及び画像生成方法並びに画像生成プログラム | |
US9412151B2 (en) | Image processing apparatus and image processing method | |
JP5156837B2 (ja) | 領域ベースのフィルタリングを使用する奥行マップ抽出のためのシステムおよび方法 | |
JP4658223B2 (ja) | 画像生成方法、装置、およびそのプログラム並びにプログラムを記録した記録媒体 | |
JP5153940B2 (ja) | 動き補償を用いた画像の奥行き抽出のためのシステムおよび方法 | |
US7742657B2 (en) | Method for synthesizing intermediate image using mesh based on multi-view square camera structure and device using the same and computer-readable medium having thereon program performing function embodying the same | |
EP2291825B1 (en) | System and method for depth extraction of images with forward and backward depth prediction | |
KR101856805B1 (ko) | 화상 처리 장치 및 화상 처리 방법, 및 프로그램 | |
US20110080463A1 (en) | Image processing apparatus, method, and recording medium | |
JP2007053621A (ja) | 画像生成装置 | |
KR101918030B1 (ko) | 하이브리드 멀티-뷰 랜더링 방법 및 장치 | |
JP5492223B2 (ja) | 動きベクトル検出装置及び方法 | |
JP7233150B2 (ja) | 奥行推定装置およびそのプログラム | |
KR20130036430A (ko) | 저 해상도 깊이 맵으로부터 고 해상도 깊이 맵을 생성하는 방법 및 이를 기록한 기록매체 | |
JP5820716B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラム、記録媒体、立体画像表示装置 | |
JP5627498B2 (ja) | 立体画像生成装置及び方法 | |
US9380285B2 (en) | Stereo image processing method, stereo image processing device and display device | |
JP5906033B2 (ja) | 画像処理装置および画像処理方法、プログラム | |
JP4899151B2 (ja) | 視差補間処理方法および処理装置 | |
Wang et al. | A novel approach for depth image based rendering, based on non-linear transformation of depth values | |
JP2009187138A (ja) | 対応点探索装置 | |
KR101378190B1 (ko) | 거리변환 기반 양측 보간을 이용하여 저 해상도 깊이 맵으로부터 고 해상도 깊이 맵을 생성하는 방법 및 이를 기록한 기록매체 | |
JP4775221B2 (ja) | 画像処理装置、画像処理装置の制御方法、および画像処理装置の制御プログラム | |
JP5431393B2 (ja) | 立体画像生成装置及び方法 | |
KR20120079794A (ko) | 영상 처리 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20150415 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150410 |
|
RD07 | Notification of extinguishment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7427 Effective date: 20150410 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151026 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160120 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20160405 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160629 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20160707 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160823 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160915 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6016061 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |