CN117579803A - 3d摄像与显示方法及系统 - Google Patents
3d摄像与显示方法及系统 Download PDFInfo
- Publication number
- CN117579803A CN117579803A CN202311533135.XA CN202311533135A CN117579803A CN 117579803 A CN117579803 A CN 117579803A CN 202311533135 A CN202311533135 A CN 202311533135A CN 117579803 A CN117579803 A CN 117579803A
- Authority
- CN
- China
- Prior art keywords
- video
- shot
- shadow
- image
- person
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 27
- 230000000694 effects Effects 0.000 claims abstract description 55
- 238000006243 chemical reaction Methods 0.000 claims abstract description 19
- 238000012545 processing Methods 0.000 claims abstract description 11
- 230000005540 biological transmission Effects 0.000 claims abstract description 7
- 238000005192 partition Methods 0.000 claims description 24
- 239000007787 solid Substances 0.000 claims description 7
- 238000003384 imaging method Methods 0.000 claims description 6
- 238000012544 monitoring process Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本发明公开一种3D摄像与显示方法及系统,包括摄像模块用于获取待拍摄人物的最佳拍摄位置并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,3D拍摄转换模块通过4K视频采集卡将视频流数据转换为预设特定格式视频数据传输至主机,将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,对预设特定格式视频数据进行读取并作为传输的视频源信号;3D播放模块,用于接收视频源信号,通过预设协议将视频源信号进行转换及视频流处理;3D屏设备用于将视频流文件信息通过第二预设协议传输至3D显示屏上用以获得3D显示视频,本发明能够实时的将虚拟摄像机的数据呈现在3D屏上,在数据流转换时具有低延迟及高精度转换,保证了最终3D显示视频的质量。
Description
技术领域
本发明涉及3D显示技术,尤其涉及一种3D摄像与显示方法及系统。
背景技术
在现有技术中,实现裸眼3D效果的方法主流有两种,一种是的有折角的LED,利用素材显示的图像深度不同,当人左眼和右眼查看这些图像时,会出现视差,从而观察到的深度形成3D效果。另外一种是全息投影,利用干涉和衍射原理,通过投射镜投射到三维空间中,实现物体真实三维图像的技术。
但是,目前这两种主流方法会存在以下缺点:
基于LED实现的方式,如果需要实现大型场景或者针对于人体实现裸眼3D效果,需要大量的LED,因此导致造价成本高,动辄花费百万级,内容素材创建成本也非常高并且需要人站在特定的角度才能看到效果;
全息投影技术对设备要求也非常高,需要设备构造三维空间,里面素材的3D建模成本较大,如果实现人高度的三维空间,对成本要求较高。
总的来讲,目前的方法成本高,并且还要有各种限制条件才可以显示出想要的效果,如何能够降低成本并且显示不受限制呢,这是本发明所实现的目的。
发明内容
本发明针对现有技术中的缺点,提供了一种3D摄像与显示方法及系统。
为了解决上述技术问题,本发明通过下述技术方案得以解决:
一种3D摄像与显示系统,包括拍摄系统和播放系统,所述拍摄系统包括摄像模块及3D拍摄转换模块,所述播放系统包括3D播放模块及3D屏设备;
所述摄像模块,用于获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
所述3D拍摄转换模块,被设置为:通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
所述3D播放模块,用于接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
所述3D屏设备,用于将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
作为一种可实施方式,所述摄像模块包括图像获取单元、纯色背景板及光源模块,所述图像获取单元获取纯色背景板前待拍摄人物的视频流数据,通过摄像模块的水平视场角度及垂直视场角度,确定视场宽度及视场高度;基于待拍摄人物显示的图像高度、图像宽度、镜头焦距、视场宽度及视场高度,确定摄像模块至待拍摄人物的距离;基于视场宽度、光源模块的高度及阴影宽度,得到待拍摄人物到光源模块的水平距离,其中,待拍摄人物到光源模块的水平距离=视场宽度*阴影宽度/待拍摄人物的高度;通过所述摄像模块至待拍摄人物的距离及待拍摄人物到光源模块的水平距离,确定最佳拍摄位置。
作为一种可实施方式,所述视场宽度及视场高度,表示如下:
α=2arctan(W/2f)
β=2arctan(H/2f)
其中,α表示水平视场角度,β表示垂直视场角度,W表示视场宽度,H表示视场高度,f表示镜头焦距;
所述摄像模块至待拍摄物体的距离,表示如下:
W=wL/f;
H=hL/f;
其中,W表示视场宽度,H表示视场高度,f表示镜头焦距,w表示图像宽度,L表示摄像模块至待拍摄物体的距离,h表示图像高度。
作为一种可实施方式,所述4K视频采集卡被设置为:
将所述带阴影效果的视频流数据进行拆解,得到多幅第一格式图像,提取第一格式图像待拍摄人物及对应的阴影,并得到待拍摄人物所有像素点数据及阴影所有像素点数据;
基于待拍摄人物所有像素点数据构建第二格式图像中的待拍摄人物所有像素点数据,基于阴影所有像素点数据构建第二格式图像中的阴影所有像素点数据;
将第二格式图像中的待拍摄人物所有像素点数据及阴影所有像素点数据转换成与图像接收接口匹配的格式,并依次输出待拍摄人物所有像素点数据及阴影所有像素点数据至主机。
作为一种可实施方式,还被设置为:
预设等比例待拍摄人物所有像素点数据并形成待拍摄人物参照物,其中,待拍摄人物参照物的像素点数据与待拍摄人物所有像素点数据完全一致;
基于待拍摄人物的外形特征将待拍摄人物所有像素点数据至少划分为若干分区,将每个分区构建对应的第二格式分区;
将每个第二格式分区按照待拍摄人物参照物进行组合形成初始第二格式图像;
基于待拍摄人物参照物对所述初始第二格式图像进行检测,若初始第二格式图像与待拍摄人物参照物的像素点数据匹配成功,则所述初始第二格式图像即为正确图像;
提取所述正确图像中所有像素点数据,即得到第二格式图像中的待拍摄人物所有像素点数据。
作为一种可实施方式,还被设置为:
预设等比例阴影所有像素点数据并形成阴影参照物,其中,阴影参照物的像素点数据与阴影所有像素点数据完全一致;
基于阴影的特征将阴影所有像素点数据至少划分为若干阴影分区,将每个阴影分区构建对应的第二格式阴影分区;
将每个第二格式阴影分区按照阴影参照物进行组合形成初始第二格式阴影图像;
基于阴影参照物对所述初始第二格式阴影图像进行检测,若初始第二格式阴影图像与阴影的像素点数据匹配成功,则所述初始第二格式阴影图像即为正确阴影图像;
提取所述正确阴影图像中所有像素点数据,即得到第二格式图像中的阴影所有像素点数据。
作为一种可实施方式,所述主机,被设置为:
根据真实摄像机构建虚拟摄像机,并将所述虚拟摄像机注册至硬件注册表内;
基于所述虚拟摄像机实时读取预设特定格式视频信息并缓存,形成视频源信号。
作为一种可实施方式,所述3D播放模块,被设置为:
基于预设协议,将视频源信号所包含的文件结构转化为目录树结构;
实时监听所述目录树结构是否发生变化,若目录树结构发生变化,则将发生变化的目录树结构位置并进行反馈;
其中,所述目录树结构包括若干根节点及若干文件结构子单元,每个根节点下至少设有一个文件结构子单元。
作为一种可实施方式,所述3D屏设备,被设置为:将所述待拍摄人物显示的3D显示视频限制在特定范围内,其中,所述特定范围由所述3D显示屏确定。
作为一种可实施方式,还包括特效添加处理模块,对所述视频源信号进行处理,得到特定视频源信号,具体为:
获取待显示特效的时间并划分为多个连续时刻,获取与当前时刻相关联的至少两个图像帧;
选取每个图像帧中的面部图像并识别面部关键点,将待显示特效与目标关键点融合,得到每个图像帧的待显示特效图;
将所有待显示特效图基于划分时刻进行融合,得到待显示特效视频源信号。
作为一种可实施方式,还包括特定场景匹配模块,被设置为:
获取应用场景并解析,得到与视频源信号相匹配的相关参数,所述相关参数至少包括显示背景及视频源信号的显示时间;
提取视频源信号中所有图像帧,结合显示时间及显示背景匹配对应的图像帧。
一种3D摄像与显示方法,包括以下步骤:
摄像模块获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
3D拍摄转换模块,通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
3D播放模块接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
3D屏设备将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
本发明由于采用了以上技术方案,具有显著的技术效果:
通过本发明的系统,能够快捷和实时的实现3D效果并且由于阴影的存在,因此呈现效果逼真并且造价成本较低。
还能够实时的将虚拟摄像机的数据呈现在3D屏上,在数据流转换时具有低延迟及高精度转换,保证了最终3D显示视频的质量。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明系统的整体结构示意图;
图2是一具体实施例中3D摄像和显示装置的示意图;
图3是一具体实施例将所述视频流数据转换为预设特定格式视频数据示意图;
图4是一具体实施例预设虚拟摄像机的流程示意图;
图5是通过预设协议转换及视频流处理的流程示意图;
图6是一具体实施例中3D显示屏范围边框示意图;
图7是本发明方法的整体流程示意图。
具体实施方式
下面结合实施例对本发明做进一步的详细说明,以下实施例是对本发明的解释而本发明并不局限于以下实施例。
实施例1:
一种3D摄像与显示系统,如图1和2所示,包括拍摄系统100和播放系统200,所述拍摄系统100包括摄像模块110及3D拍摄转换模块120,所述播放系统200包括3D播放模块210及3D屏设备220;
所述摄像模块110,用于获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
所述3D拍摄转换模块120,被设置为:通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
所述3D播放模块210,用于接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
所述3D屏设备220,用于将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
本发明的系统能够快捷和实时的实现3D效果并且由于阴影的存在,因此呈现效果逼真并且造价成本较低。
为了能得到最优的视频流数据,如图2所示,所述摄像模块包括图像获取单元、纯色背景板及光源模块,所述图像获取单元获取纯色背景板前待拍摄人物的视频流数据,在具体实现过程中,通过摄像模块的水平视场角度及垂直视场角度,确定视场宽度及视场高度;基于待拍摄人物显示的图像高度、图像宽度、镜头焦距、视场宽度及视场高度,确定摄像模块至待拍摄人物的距离;基于视场宽度、光源模块的高度及阴影宽度,得到待拍摄人物到光源模块的水平距离,其中,待拍摄人物到光源模块的水平距离=视场宽度*阴影宽度/待拍摄人物的高度;通过所述摄像模块至待拍摄人物的距离及待拍摄人物到光源模块的水平距离,确定最佳拍摄位置,通过这个最佳拍摄位置,进而反推出图像获取单元、纯色背景板及光源模块的最佳安装位置。而在实际过程中,视场宽度及视场高度的计算公式如下:
α=2arctan(W/2f)
β=2arctan(H/2f)
其中,α表示水平视场角度,β表示垂直视场角度,W表示视场宽度,H表示视场高度,f表示镜头焦距;
摄像模块至待拍摄物体的距离的计算公式如下:
W=wL/f;
H=hL/f;
其中,W表示视场宽度,H表示视场高度,f表示镜头焦距,w表示图像宽度,L表示摄像模块至待拍摄物体的距离,h表示图像高度。
在一个实施例中,为了使得视频流数据转换为预设特定格式视频数据更加流畅、准确及清晰,参见附图3所示,所述4K视频采集卡被设置为:
将所述带阴影效果的视频流数据进行拆解,得到多幅第一格式图像,提取第一格式图像待拍摄人物及对应的阴影,并得到待拍摄人物所有像素点数据及阴影所有像素点数据;
基于待拍摄人物所有像素点数据构建第二格式图像中的待拍摄人物所有像素点数据,基于阴影所有像素点数据构建第二格式图像中的阴影所有像素点数据;
将第二格式图像中的待拍摄人物所有像素点数据及阴影所有像素点数据转换成与图像接收接口匹配的格式,并依次输出待拍摄人物所有像素点数据及阴影所有像素点数据至主机。
而在转换的过程中,还包括以下过程:
预设等比例待拍摄人物所有像素点数据并形成待拍摄人物参照物,其中,待拍摄人物参照物的像素点数据与待拍摄人物所有像素点数据完全一致;
基于待拍摄人物的外形特征将待拍摄人物所有像素点数据至少划分为若干分区,将每个分区构建对应的第二格式分区;
将每个第二格式分区按照待拍摄人物参照物进行组合形成初始第二格式图像;
基于待拍摄人物参照物对所述初始第二格式图像进行检测,若初始第二格式图像与待拍摄人物参照物的像素点数据匹配成功,则所述初始第二格式图像即为正确图像;
提取所述正确图像中所有像素点数据,即得到第二格式图像中的待拍摄人物所有像素点数据。
以及,预设等比例阴影所有像素点数据并形成阴影参照物,其中,阴影参照物的像素点数据与阴影所有像素点数据完全一致;
基于阴影的特征将阴影所有像素点数据至少划分为若干阴影分区,将每个阴影分区构建对应的第二格式阴影分区;
将每个第二格式阴影分区按照阴影参照物进行组合形成初始第二格式阴影图像;
基于阴影参照物对所述初始第二格式阴影图像进行检测,若初始第二格式阴影图像与阴影的像素点数据匹配成功,则所述初始第二格式阴影图像即为正确阴影图像;
提取所述正确阴影图像中所有像素点数据,即得到第二格式图像中的阴影所有像素点数据。
通过这样的转换,能确保在转换的过程数据不丢失,转换后的精度也能保持高精度。
另外,为了能够实时的将虚拟摄像机的数据呈现在3D屏上,因此在主机内设计了虚拟摄像机,如图4所示,具体过程如下:
根据真实摄像机构建虚拟摄像机,并将所述虚拟摄像机注册至硬件注册表内;
基于所述虚拟摄像机实时读取预设特定格式视频信息并缓存,形成视频源信号。
在实际操作中,可以构建多个虚拟摄像机,多个虚拟摄像机可以分布式存储预设特定格式视频信息还可以根据预设特定格式视频信息的类型等进行分类存储,以防止发生数据丢失。
如图5所示,所述3D播放模块,被设置为:
基于预设协议,将视频源信号所包含的文件结构转化为目录树结构;
实时监听所述目录树结构是否发生变化,若目录树结构发生变化,则将发生变化的目录树结构位置并进行反馈;
其中,所述目录树结构包括若干根节点及若干文件结构子单元,每个根节点下至少设有一个文件结构子单元。
参见如图6,将所述待拍摄物体显示的3D显示视频限制在特定范围内,其中,所述特定范围由所述3D显示屏确定,此3D显示屏限定了3D显示视频的显示范围,在实际显示过程中,为了确保显示效果及清晰度等,显示的大小不超过此3D显示屏的尺寸。
在一个实施例中,还包括特效添加处理模块,对所述视频源信号进行处理,得到特定视频源信号,具体为:
获取待显示特效的时间并划分为多个连续时刻,获取与当前时刻相关联的至少两个图像帧;
选取每个图像帧中的面部图像并识别面部关键点,将待显示特效与目标关键点融合,得到每个图像帧的待显示特效图;
将所有待显示特效图基于划分时刻进行融合,得到待显示特效视频源信号。
也就是说,在对视频源信号处理的时候,可以加上想要显示的特效,比如,想让显示的人物脸部是动漫人物或者戴上各种面具等,就可以对视频源信号进行加特效处理,这样看到的3D显示视频更有意思。
除了面部,其实其他人体部位也可以增加特效,不过其实处理方式和面部的处理相似,在此不再赘述。
在一个实施例中,还包括特定场景匹配模块,被设置为:
获取应用场景并解析,得到与视频源信号相匹配的相关参数,所述相关参数至少包括显示背景及视频源信号的显示时间;
提取视频源信号中所有图像帧,结合显示时间及显示背景匹配对应的图像帧。
比如,给显示的3D显示视频添加特定的应用场景,比如,服装店门口用于显示新款服装并且还能在衣服、帽子及裤子等加入相应的标签,或者在广场上用于展示各种好玩的活动,这些都可以称作为相应的应用场景,则只需要在所述视频源信号输出的时候添加相应的应用场景,就可以得到特定场景视频源信号。
那么如何才能实现特定应用场景的添加呢,可以通过以下步骤实现:
获取应用场景并解析,得到与视频源信号相匹配的相关参数,所述相关参数至少包括显示背景及视频源信号的显示时间;
提取视频源信号中所有图像帧,结合显示时间及显示背景匹配对应的图像帧。
实施例2:
一种3D摄像与显示方法,如图7所示,包括以下步骤:
S100、摄像模块获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
S200、3D拍摄转换模块,通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
S300、3D播放模块接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
S400、3D屏设备将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
此外,需要说明的是,本说明书中所描述的具体实施例,其零、部件的形状、所取名称等可以不同。凡依本发明专利构思所述的构造、特征及原理所做的等效或简单变化,均包括于本发明专利的保护范围内。本发明所属技术领域的技术人员可以对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,只要不偏离本发明的结构或者超越本权利要求书所定义的范围,均应属于本发明的保护范围。
Claims (12)
1.一种3D摄像与显示系统,其特征在于,包括拍摄系统和播放系统,所述拍摄系统包括摄像模块及3D拍摄转换模块,所述播放系统包括3D播放模块及3D屏设备;
所述摄像模块,用于获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
所述3D拍摄转换模块,被设置为:通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
所述3D播放模块,用于接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
所述3D屏设备,用于将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
2.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述摄像模块包括图像获取单元、纯色背景板及光源模块,所述图像获取单元获取纯色背景板前待拍摄人物的视频流数据,通过摄像模块的水平视场角度及垂直视场角度,确定视场宽度及视场高度;基于待拍摄人物显示的图像高度、图像宽度、镜头焦距、视场宽度及视场高度,确定摄像模块至待拍摄人物的距离;基于视场宽度、光源模块的高度及阴影宽度,得到待拍摄人物到光源模块的水平距离,其中,待拍摄人物到光源模块的水平距离=视场宽度*阴影宽度/待拍摄人物的高度;通过所述摄像模块至待拍摄人物的距离及待拍摄人物到光源模块的水平距离,确定最佳拍摄位置。
3.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述视场宽度及视场高度,表示如下:
α=2arctan(W/2f)
β=2arctan(H/2f)
其中,α表示水平视场角度,β表示垂直视场角度,W表示视场宽度,H表示视场高度,f表示镜头焦距;
所述摄像模块至待拍摄物体的距离,表示如下:
W=wL/f;
H=hL/f;
其中,W表示视场宽度,H表示视场高度,f表示镜头焦距,w表示图像宽度,L表示摄像模块至待拍摄物体的距离,h表示图像高度。
4.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述4K视频采集卡被设置为:
将所述带阴影效果的视频流数据进行拆解,得到多幅第一格式图像,提取第一格式图像待拍摄人物及对应的阴影,并得到待拍摄人物所有像素点数据及阴影所有像素点数据;
基于待拍摄人物所有像素点数据构建第二格式图像中的待拍摄人物所有像素点数据,基于阴影所有像素点数据构建第二格式图像中的阴影所有像素点数据;
将第二格式图像中的待拍摄人物所有像素点数据及阴影所有像素点数据转换成与图像接收接口匹配的格式,并依次输出待拍摄人物所有像素点数据及阴影所有像素点数据至主机。
5.根据权利要求4所述的3D摄像与显示系统,其特征在于,还被设置为:
预设等比例待拍摄人物所有像素点数据并形成待拍摄人物参照物,其中,待拍摄人物参照物的像素点数据与待拍摄人物所有像素点数据完全一致;
基于待拍摄人物的外形特征将待拍摄人物所有像素点数据至少划分为若干分区,将每个分区构建对应的第二格式分区;
将每个第二格式分区按照待拍摄人物参照物进行组合形成初始第二格式图像;
基于待拍摄人物参照物对所述初始第二格式图像进行检测,若初始第二格式图像与待拍摄人物参照物的像素点数据匹配成功,则所述初始第二格式图像即为正确图像;
提取所述正确图像中所有像素点数据,即得到第二格式图像中的待拍摄人物所有像素点数据。
6.根据权利要求4所述的3D摄像与显示系统,其特征在于,还被设置为:
预设等比例阴影所有像素点数据并形成阴影参照物,其中,阴影参照物的像素点数据与阴影所有像素点数据完全一致;
基于阴影的特征将阴影所有像素点数据至少划分为若干阴影分区,将每个阴影分区构建对应的第二格式阴影分区;
将每个第二格式阴影分区按照阴影参照物进行组合形成初始第二格式阴影图像;
基于阴影参照物对所述初始第二格式阴影图像进行检测,若初始第二格式阴影图像与阴影的像素点数据匹配成功,则所述初始第二格式阴影图像即为正确阴影图像;
提取所述正确阴影图像中所有像素点数据,即得到第二格式图像中的阴影所有像素点数据。
7.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述主机,被设置为:
根据真实摄像机构建虚拟摄像机,并将所述虚拟摄像机注册至硬件注册表内;
基于所述虚拟摄像机实时读取预设特定格式视频信息并缓存,形成视频源信号。
8.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述3D播放模块,被设置为:
基于预设协议,将视频源信号所包含的文件结构转化为目录树结构;
实时监听所述目录树结构是否发生变化,若目录树结构发生变化,则将发生变化的目录树结构位置并进行反馈;
其中,所述目录树结构包括若干根节点及若干文件结构子单元,每个根节点下至少设有一个文件结构子单元。
9.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述3D屏设备,被设置为:将所述待拍摄人物显示的3D显示视频限制在特定范围内,其中,所述特定范围由所述3D显示屏确定。
10.根据权利要求1所述的3D摄像与显示系统,其特征在于,还包括特效添加处理模块,对所述视频源信号进行处理,得到特定视频源信号,具体为:
获取待显示特效的时间并划分为多个连续时刻,获取与当前时刻相关联的至少两个图像帧;
选取每个图像帧中的面部图像并识别面部关键点,将待显示特效与目标关键点融合,得到每个图像帧的待显示特效图;
将所有待显示特效图基于划分时刻进行融合,得到待显示特效视频源信号。
11.根据权利要求1所述的3D摄像与显示系统,其特征在于,还包括特定场景匹配模块,被设置为:
获取应用场景并解析,得到与视频源信号相匹配的相关参数,所述相关参数至少包括显示背景及视频源信号的显示时间;
提取视频源信号中所有图像帧,结合显示时间及显示背景匹配对应的图像帧。
12.一种3D摄像与显示方法,其特征在于,包括以下步骤:
摄像模块获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
3D拍摄转换模块,通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
3D播放模块接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
3D屏设备将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311533135.XA CN117579803A (zh) | 2023-11-16 | 2023-11-16 | 3d摄像与显示方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311533135.XA CN117579803A (zh) | 2023-11-16 | 2023-11-16 | 3d摄像与显示方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117579803A true CN117579803A (zh) | 2024-02-20 |
Family
ID=89892897
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311533135.XA Pending CN117579803A (zh) | 2023-11-16 | 2023-11-16 | 3d摄像与显示方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117579803A (zh) |
-
2023
- 2023-11-16 CN CN202311533135.XA patent/CN117579803A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11076142B2 (en) | Real-time aliasing rendering method for 3D VR video and virtual three-dimensional scene | |
CN109118581B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
KR102254407B1 (ko) | 3차원 모델의 생성 장치, 생성 방법, 및 프로그램 | |
CN108475327A (zh) | 三维采集与渲染 | |
WO2016045425A1 (zh) | 一种两视点立体图像合成方法及系统 | |
JP2010517038A (ja) | 定量的な三次元撮像のための方法および装置 | |
CN109190533B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
JP7170224B2 (ja) | 三次元生成方法および三次元生成装置 | |
CN108600729B (zh) | 动态3d模型生成装置及影像生成方法 | |
JP2012222743A (ja) | 撮像装置 | |
US20220137555A1 (en) | System and method for lightfield capture | |
CN108156369A (zh) | 图像处理方法和装置 | |
WO2019065260A1 (ja) | 情報処理装置、情報処理方法、及び、プログラム、並びに、交換レンズ | |
JP2019191989A (ja) | 仮想視点画像を生成するシステム、方法及びプログラム | |
CN107862718A (zh) | 4d全息视频捕捉方法 | |
US20050168485A1 (en) | System for combining a sequence of images with computer-generated 3D graphics | |
CN108564654B (zh) | 三维大场景的画面进入方式 | |
JP6409769B2 (ja) | 3次元形状計測装置、3次元形状計測方法及び3次元形状計測プログラム | |
CN117579803A (zh) | 3d摄像与显示方法及系统 | |
AU2013308155B2 (en) | Method for description of object points of the object space and connection for its implementation | |
CN213461928U (zh) | 全景相机和电子设备 | |
CN117615114A (zh) | 3d摄像及显示方法、系统及装置 | |
CN114049317A (zh) | 一种基于人工智能的ccd设备自动化检验系统及方法 | |
JP5924833B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラム、及び撮像装置 | |
CN113630592A (zh) | 扩增实境异地共演系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |