CN109685885B - 一种利用深度图转换3d图像的快速方法 - Google Patents

一种利用深度图转换3d图像的快速方法 Download PDF

Info

Publication number
CN109685885B
CN109685885B CN201710978092.4A CN201710978092A CN109685885B CN 109685885 B CN109685885 B CN 109685885B CN 201710978092 A CN201710978092 A CN 201710978092A CN 109685885 B CN109685885 B CN 109685885B
Authority
CN
China
Prior art keywords
depth
depth map
rendering
camera
stereoscopic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710978092.4A
Other languages
English (en)
Other versions
CN109685885A (zh
Inventor
马凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhizhun Electronic Science And Technology Co ltd Shanghai
Original Assignee
Zhizhun Electronic Science And Technology Co ltd Shanghai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhizhun Electronic Science And Technology Co ltd Shanghai filed Critical Zhizhun Electronic Science And Technology Co ltd Shanghai
Priority to CN201710978092.4A priority Critical patent/CN109685885B/zh
Publication of CN109685885A publication Critical patent/CN109685885A/zh
Application granted granted Critical
Publication of CN109685885B publication Critical patent/CN109685885B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects

Abstract

本发明涉及三维立体渲染技术领域，具体地说是一种利用深度图转换3D图像的快速方法，其通过三维制作软件渲染出深度图Z‑Depth，利用深度图Z‑Depth进行2D到3D的转换，得到左右两个眼睛视图，形成3D立体成片，降低了三维制作软件制作3D立体片源时的重复渲染，可以节约渲染时间，减少渲染成本，大幅度缩短制作周期，提高工作效率。

Description

一种利用深度图转换3D图像的快速方法
技术领域
本发明涉及三维立体渲染技术领域，具体地说是一种利用深度图转换3D图像的快速方法。
背景技术
现有的2D转3D的技术时往往需要重复渲染，渲染时间长，渲染成本高，大大延长了制作周期，工作效率低下。
发明内容
本发明的目的是克服现有技术的不足，通过三维制作软件渲染出深度图，利用深度图进行2D到3D的转换，得到左右两个眼睛视图，形成3D立体成片，降低了三维制作软件制作3D立体片源时的重复渲染，可以节约渲染时间，减少渲染成本，大幅度缩短制作周期，提高工作效率。
为实现上述目的，设计一种利用深度图转换3D图像的快速方法，其特征在于，在三维软件中进行如下处理步骤：
(1)、创建一个三维场景模型；
(2)、在三维场景中架设灯光相机；
(3)、三维场景中，用标尺测量灯光相机到物体远端距离，来得到深度图的深度值；
(4)、三维场景中，测量得到距离值，通过距离值来设置深度图；
(5)、深度图数值设置最大值深度图max和最小值深度图min，渲染成图，最终得到深度图；
(6)、导入视频序列帧，通过以场景为参照，找到一个水平位置，以确定摄像机对视频的相机透视角度；
(7)、导入深度图；
(8)、使用Z通道添加立体相机，对当前调整好的那张序列帧进行向前和向后跟踪解算，得出整个序列帧的Z方向的信息图；景深越白，该图像上相对应的特征点离像平面越近，即g(x)＝n/λ，其中，g(x)为景深程度，n为比例常数，λ为黑白景深程度；
(9)、经过立体摄像机偏移处理，手动调整立体两眼间距以及零平面的具体位置，最后通过Z通道过滤器深度图进行模糊过滤，得出流畅的具有Z通道的解算图，通过立体渲染，进行输出3D格式的序列帧。
所述的三维软件包括3ds Max。
本发明的技术优势在于，减少重复渲染，大大缩短渲染时间，减少渲染成本，大幅度减少制作周期，提高工作效率。
附图说明
图1为本发明中景深与特征点距离关系。
具体实施方式
现结合附图及实施例对本发明作进一步地说明。
实施例1
参见图1，一种利用深度图转换3D图像的快速方法，其特征在于，在三维软件中进行如下处理步骤：
(1)、创建一个三维场景模型；
(2)、在三维场景中架设灯光相机；
(3)、三维场景中，用标尺测量灯光相机到物体远端距离，来得到深度图的深度值；
(4)、三维场景中，测量得到距离值，通过距离值来设置深度图；
(5)、深度图数值设置最大值深度图max和最小值深度图min，渲染成图，最终得到深度图；
(6)、导入视频序列帧，通过以场景为参照，找到一个水平位置，以确定摄像机对视频的相机透视角度；
(7)、导入深度图；
(8)、使用Z通道添加立体相机，对当前调整好的那张序列帧进行向前和向后跟踪解算，得出整个序列帧的Z方向的信息图；景深越白，该图像上相对应的特征点离像平面越近，即g(x)＝n/λ，其中，g(x)为景深程度，n为比例常数，λ为黑白景深程度，参见图1，其中h为景深；
(9)、经过立体摄像机偏移处理，手动调整立体两眼间距以及零平面的具体位置，最后通过Z通道过滤器深度图进行模糊过滤，得出流畅的具有Z通道的解算图，通过立体渲染，进行输出3D格式的序列帧。
进一步的，所述的三维软件包括3ds Max。
通过上述处理步骤我们很快得到立体图像，并进行了立体测试，测试结果如下：
在整个步骤中渲染单相机单张图片时间为T1＝60分钟；
渲染立体相机两张图片时间为T2＝TI*2＝60m*2＝120分钟；
整个镜头序列为100帧，渲染单相机序列帧时间为T3＝T1*100＝60m*100＝6000分钟；
渲染立体相机序列帧时间为T4＝T2*100＝120m*100＝12000分钟；
利用深度图制作渲染立体序列时间为T5＝60分钟；
三维软件和深度图制作立体序列时间为T6＝T5+T3＝6060分钟；
通过以上数值可以看出三维软件和用深度图制作立体比三维软件直接渲染立体时间上节约很多时间，T7＝T4-T6＝12000m-6060m＝5940分钟，可以看出三维软件和用深度图差不多节约49.5％的时间。降低了三维制作软件制作3D立体片源时的重复渲染，可以节约渲染时间，减少渲染成本，大幅度缩短制作周期，提高工作效率。
通用立体渲染模式是对左右眼分别渲染。设有n张序列帧，总时间为Tn’，左眼为T1，右眼相对左眼的误差值为k1∈(0，0.01)；
则渲染单帧立体总时间为T1’+(T1’+k1T1’)，渲染整个序列的总时间Tn’＝nT1’(2+k1)；
利用深度图转换立体图像的渲染模式是只渲染单眼的序列，额外增加导入Depth的时间即可。设有n张序列帧，总时间为Tn″，单帧渲染时间为Tcenter，额外增加导入Depth的时间为Tdepth，Tdepth约为T1’；单帧左眼或者右眼与Tcenter之间的渲染误差值为k2；
则渲染整个序列的总时间为Tn″＝nT1(1+k2)+Tdepth；设渲染节约总时间为Tm，则Tm＝Tn’-Tn″＝nT1’(1+k-k2)-T1’；
利用深度图转换立体图像的渲染模式相对通用立体渲染模式所节省的时间比例为q＝Tm/Tn’*100％。

Claims (2)

1.一种利用深度图转换3D图像的快速方法，其特征在于，在三维软件中进行如下处理步骤：
(1)、创建一个三维场景模型；
(2)、在三维场景中架设灯光相机；
(3)、三维场景中，用标尺测量灯光相机到物体远端距离，来得到深度图的深度值；
(4)、三维场景中，测量得到距离值，通过距离值来设置深度图；
(5)、深度图数值设置最大值深度图和最小值深度图，渲染成图，最终得到深度图；
(6)、导入视频序列帧，通过以场景为参照，找到一个水平位置，以确定摄像机对视频的相机透视角度；
(7)、导入深度图；
(8)、使用Z通道添加立体相机，对当前调整好的那张序列帧进行向前和向后跟踪解算，得出整个序列帧的Z方向的信息图；景深越白，该图像上相对应的特征点离像平面越近，即g(x)＝n/λ，其中，g(x)为景深程度，n为比例常数，λ为黑白景深程度；
(9)、经过立体摄像机偏移处理，手动调整立体两眼间距以及零平面的具体位置，最后通过Z通道过滤器深度图进行模糊过滤，得出流畅的具有Z通道的解算图，通过立体渲染，进行输出3D格式的序列帧。
2.如权利要求1所述的一种利用深度图转换3D图像的快速方法，其特征在于，所述的三维软件包括3ds Max。
CN201710978092.4A 2017-10-18 2017-10-18 一种利用深度图转换3d图像的快速方法 Active CN109685885B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710978092.4A CN109685885B (zh) 2017-10-18 2017-10-18 一种利用深度图转换3d图像的快速方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710978092.4A CN109685885B (zh) 2017-10-18 2017-10-18 一种利用深度图转换3d图像的快速方法

Publications (2)

Publication Number Publication Date
CN109685885A CN109685885A (zh) 2019-04-26
CN109685885B true CN109685885B (zh) 2023-05-23

Family

ID=66183546

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710978092.4A Active CN109685885B (zh) 2017-10-18 2017-10-18 一种利用深度图转换3d图像的快速方法

Country Status (1)

Country Link
CN (1) CN109685885B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112686981B (zh) 2019-10-17 2024-04-12 华为终端有限公司 画面渲染方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6285779B1 (en) * 1999-08-02 2001-09-04 Trident Microsystems Floating-point complementary depth buffer
CN101208723A (zh) * 2005-02-23 2008-06-25 克雷格·萨默斯 用于3维照相机和3维视频的自动场景建模
CN102333229A (zh) * 2010-06-21 2012-01-25 壹斯特股份有限公司 将二维影像转换为三维影像的方法及其装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011152895A2 (en) * 2010-02-12 2011-12-08 The University Of North Carolina At Chapel Hill Systems and methods that generate height map models for efficient three dimensional reconstruction from depth information
US8848038B2 (en) * 2010-07-09 2014-09-30 Lg Electronics Inc. Method and device for converting 3D images
US8432434B2 (en) * 2011-07-08 2013-04-30 Mitsubishi Electric Research Laboratories, Inc. Camera and method for focus based depth reconstruction of dynamic scenes

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6285779B1 (en) * 1999-08-02 2001-09-04 Trident Microsystems Floating-point complementary depth buffer
CN101208723A (zh) * 2005-02-23 2008-06-25 克雷格·萨默斯 用于3维照相机和3维视频的自动场景建模
CN102333229A (zh) * 2010-06-21 2012-01-25 壹斯特股份有限公司 将二维影像转换为三维影像的方法及其装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于深度图的2D转3D视频算法的研究;卞玲艳;《中国优秀硕士学位论文全文数据库（电子期刊)》;20160216;I138-7399 *

Also Published As

Publication number Publication date
CN109685885A (zh) 2019-04-26

Similar Documents

Publication Publication Date Title
US10194135B2 (en) Three-dimensional depth perception apparatus and method
US9204128B2 (en) Stereoscopic shooting device
JP5320524B1 (ja) ステレオ撮影装置
CN103065289A (zh) 基于双目立体视觉的四目摄像机正面人脸重建方法
US10165249B2 (en) Method for smoothing transitions between scenes of a stereo film and controlling or regulating a plurality of 3D cameras
KR20110093829A (ko) 깊이 맵을 생성하기 위한 방법 및 디바이스
CA2430591A1 (en) Techniques and systems for developing high-resolution imagery
US9807372B2 (en) Focused image generation single depth information from multiple images from multiple sensors
WO2019105261A1 (zh) 背景虚化处理方法、装置及设备
CN103238337B (zh) 立体图像获取系统及方法
CN103702103B (zh) 基于双目相机的光栅立体印刷图像合成方法
CN109889799B (zh) 基于rgbir摄像头的单目结构光深度感知方法及装置
WO2018032841A1 (zh) 绘制三维图像的方法及其设备、系统
WO2022142139A1 (zh) 投影面选取和投影图像校正方法、装置、投影仪及介质
US9602797B2 (en) Stereoscopic image processing apparatus, stereoscopic image processing method, and stereoscopic image processing program
CN104853080A (zh) 图像处理装置
KR20200129657A (ko) 혼합현실 환경의 동적인 3차원 현실데이터 구동을 위한 실사기반의 전방위 3d 모델 비디오 시퀀스 획득 방법
CN111047636B (zh) 基于主动红外双目视觉的避障系统和避障方法
CN104599308A (zh) 一种基于投射的动态贴图方法
CN109685885B (zh) 一种利用深度图转换3d图像的快速方法
CN108322726A (zh) 一种基于双摄像头的自动对焦方法
KR101994472B1 (ko) 입체이미지용 마스크 및 양안이미지의 생성방법, 장치 및 기록매체
Knorr et al. From 2D-to stereo-to multi-view video
Galabov A real time 2D to 3D image conversion techniques
TW201531744A (zh) 影像處理裝置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20220419

Address after: 201400 No. 299, Zhuangwu Road, Zhuangxing Town, Fengxian District, Shanghai

Applicant after: ZHIZHUN ELECTRONIC SCIENCE AND TECHNOLOGY Co.,Ltd. SHANGHAI

Address before: 201415 room 130, No. 410, Zhuangbei Road, Zhuangxing Town, Fengxian District, Shanghai

Applicant before: SHANGHAI ZHIZUN CULTURE MEDIA DEVELOPMENT CO.,LTD.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant