CN117579803A - 3d摄像与显示方法及系统 - Google Patents

3d摄像与显示方法及系统 Download PDF

Info

Publication number
CN117579803A
CN117579803A CN202311533135.XA CN202311533135A CN117579803A CN 117579803 A CN117579803 A CN 117579803A CN 202311533135 A CN202311533135 A CN 202311533135A CN 117579803 A CN117579803 A CN 117579803A
Authority
CN
China
Prior art keywords
video
shot
shadow
image
person
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311533135.XA
Other languages
English (en)
Inventor
黎平
何一兵
浦希哲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Lianlianhui Network Technology Co ltd
Original Assignee
Hangzhou Lianlianhui Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Lianlianhui Network Technology Co ltd filed Critical Hangzhou Lianlianhui Network Technology Co ltd
Priority to CN202311533135.XA priority Critical patent/CN117579803A/zh
Publication of CN117579803A publication Critical patent/CN117579803A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明公开一种3D摄像与显示方法及系统,包括摄像模块用于获取待拍摄人物的最佳拍摄位置并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,3D拍摄转换模块通过4K视频采集卡将视频流数据转换为预设特定格式视频数据传输至主机,将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,对预设特定格式视频数据进行读取并作为传输的视频源信号;3D播放模块,用于接收视频源信号,通过预设协议将视频源信号进行转换及视频流处理;3D屏设备用于将视频流文件信息通过第二预设协议传输至3D显示屏上用以获得3D显示视频,本发明能够实时的将虚拟摄像机的数据呈现在3D屏上,在数据流转换时具有低延迟及高精度转换,保证了最终3D显示视频的质量。

Description

3D摄像与显示方法及系统
技术领域
本发明涉及3D显示技术,尤其涉及一种3D摄像与显示方法及系统。
背景技术
在现有技术中,实现裸眼3D效果的方法主流有两种,一种是的有折角的LED,利用素材显示的图像深度不同,当人左眼和右眼查看这些图像时,会出现视差,从而观察到的深度形成3D效果。另外一种是全息投影,利用干涉和衍射原理,通过投射镜投射到三维空间中,实现物体真实三维图像的技术。
但是,目前这两种主流方法会存在以下缺点:
基于LED实现的方式,如果需要实现大型场景或者针对于人体实现裸眼3D效果,需要大量的LED,因此导致造价成本高,动辄花费百万级,内容素材创建成本也非常高并且需要人站在特定的角度才能看到效果;
全息投影技术对设备要求也非常高,需要设备构造三维空间,里面素材的3D建模成本较大,如果实现人高度的三维空间,对成本要求较高。
总的来讲,目前的方法成本高,并且还要有各种限制条件才可以显示出想要的效果,如何能够降低成本并且显示不受限制呢,这是本发明所实现的目的。
发明内容
本发明针对现有技术中的缺点,提供了一种3D摄像与显示方法及系统。
为了解决上述技术问题,本发明通过下述技术方案得以解决:
一种3D摄像与显示系统,包括拍摄系统和播放系统,所述拍摄系统包括摄像模块及3D拍摄转换模块,所述播放系统包括3D播放模块及3D屏设备;
所述摄像模块,用于获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
所述3D拍摄转换模块,被设置为:通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
所述3D播放模块,用于接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
所述3D屏设备,用于将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
作为一种可实施方式,所述摄像模块包括图像获取单元、纯色背景板及光源模块,所述图像获取单元获取纯色背景板前待拍摄人物的视频流数据,通过摄像模块的水平视场角度及垂直视场角度,确定视场宽度及视场高度;基于待拍摄人物显示的图像高度、图像宽度、镜头焦距、视场宽度及视场高度,确定摄像模块至待拍摄人物的距离;基于视场宽度、光源模块的高度及阴影宽度,得到待拍摄人物到光源模块的水平距离,其中,待拍摄人物到光源模块的水平距离=视场宽度*阴影宽度/待拍摄人物的高度;通过所述摄像模块至待拍摄人物的距离及待拍摄人物到光源模块的水平距离,确定最佳拍摄位置。
作为一种可实施方式,所述视场宽度及视场高度,表示如下:
α=2arctan(W/2f)
β=2arctan(H/2f)
其中,α表示水平视场角度,β表示垂直视场角度,W表示视场宽度,H表示视场高度,f表示镜头焦距;
所述摄像模块至待拍摄物体的距离,表示如下:
W=wL/f;
H=hL/f;
其中,W表示视场宽度,H表示视场高度,f表示镜头焦距,w表示图像宽度,L表示摄像模块至待拍摄物体的距离,h表示图像高度。
作为一种可实施方式,所述4K视频采集卡被设置为:
将所述带阴影效果的视频流数据进行拆解,得到多幅第一格式图像,提取第一格式图像待拍摄人物及对应的阴影,并得到待拍摄人物所有像素点数据及阴影所有像素点数据;
基于待拍摄人物所有像素点数据构建第二格式图像中的待拍摄人物所有像素点数据,基于阴影所有像素点数据构建第二格式图像中的阴影所有像素点数据;
将第二格式图像中的待拍摄人物所有像素点数据及阴影所有像素点数据转换成与图像接收接口匹配的格式,并依次输出待拍摄人物所有像素点数据及阴影所有像素点数据至主机。
作为一种可实施方式,还被设置为:
预设等比例待拍摄人物所有像素点数据并形成待拍摄人物参照物,其中,待拍摄人物参照物的像素点数据与待拍摄人物所有像素点数据完全一致;
基于待拍摄人物的外形特征将待拍摄人物所有像素点数据至少划分为若干分区,将每个分区构建对应的第二格式分区;
将每个第二格式分区按照待拍摄人物参照物进行组合形成初始第二格式图像;
基于待拍摄人物参照物对所述初始第二格式图像进行检测,若初始第二格式图像与待拍摄人物参照物的像素点数据匹配成功,则所述初始第二格式图像即为正确图像;
提取所述正确图像中所有像素点数据,即得到第二格式图像中的待拍摄人物所有像素点数据。
作为一种可实施方式,还被设置为:
预设等比例阴影所有像素点数据并形成阴影参照物,其中,阴影参照物的像素点数据与阴影所有像素点数据完全一致;
基于阴影的特征将阴影所有像素点数据至少划分为若干阴影分区,将每个阴影分区构建对应的第二格式阴影分区;
将每个第二格式阴影分区按照阴影参照物进行组合形成初始第二格式阴影图像;
基于阴影参照物对所述初始第二格式阴影图像进行检测,若初始第二格式阴影图像与阴影的像素点数据匹配成功,则所述初始第二格式阴影图像即为正确阴影图像;
提取所述正确阴影图像中所有像素点数据,即得到第二格式图像中的阴影所有像素点数据。
作为一种可实施方式,所述主机,被设置为:
根据真实摄像机构建虚拟摄像机,并将所述虚拟摄像机注册至硬件注册表内;
基于所述虚拟摄像机实时读取预设特定格式视频信息并缓存,形成视频源信号。
作为一种可实施方式,所述3D播放模块,被设置为:
基于预设协议,将视频源信号所包含的文件结构转化为目录树结构;
实时监听所述目录树结构是否发生变化,若目录树结构发生变化,则将发生变化的目录树结构位置并进行反馈;
其中,所述目录树结构包括若干根节点及若干文件结构子单元,每个根节点下至少设有一个文件结构子单元。
作为一种可实施方式,所述3D屏设备,被设置为:将所述待拍摄人物显示的3D显示视频限制在特定范围内,其中,所述特定范围由所述3D显示屏确定。
作为一种可实施方式,还包括特效添加处理模块,对所述视频源信号进行处理,得到特定视频源信号,具体为:
获取待显示特效的时间并划分为多个连续时刻,获取与当前时刻相关联的至少两个图像帧;
选取每个图像帧中的面部图像并识别面部关键点,将待显示特效与目标关键点融合,得到每个图像帧的待显示特效图;
将所有待显示特效图基于划分时刻进行融合,得到待显示特效视频源信号。
作为一种可实施方式,还包括特定场景匹配模块,被设置为:
获取应用场景并解析,得到与视频源信号相匹配的相关参数,所述相关参数至少包括显示背景及视频源信号的显示时间;
提取视频源信号中所有图像帧,结合显示时间及显示背景匹配对应的图像帧。
一种3D摄像与显示方法,包括以下步骤:
摄像模块获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
3D拍摄转换模块,通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
3D播放模块接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
3D屏设备将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
本发明由于采用了以上技术方案,具有显著的技术效果:
通过本发明的系统,能够快捷和实时的实现3D效果并且由于阴影的存在,因此呈现效果逼真并且造价成本较低。
还能够实时的将虚拟摄像机的数据呈现在3D屏上,在数据流转换时具有低延迟及高精度转换,保证了最终3D显示视频的质量。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明系统的整体结构示意图;
图2是一具体实施例中3D摄像和显示装置的示意图;
图3是一具体实施例将所述视频流数据转换为预设特定格式视频数据示意图;
图4是一具体实施例预设虚拟摄像机的流程示意图;
图5是通过预设协议转换及视频流处理的流程示意图;
图6是一具体实施例中3D显示屏范围边框示意图;
图7是本发明方法的整体流程示意图。
具体实施方式
下面结合实施例对本发明做进一步的详细说明,以下实施例是对本发明的解释而本发明并不局限于以下实施例。
实施例1:
一种3D摄像与显示系统,如图1和2所示,包括拍摄系统100和播放系统200,所述拍摄系统100包括摄像模块110及3D拍摄转换模块120,所述播放系统200包括3D播放模块210及3D屏设备220;
所述摄像模块110,用于获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
所述3D拍摄转换模块120,被设置为:通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
所述3D播放模块210,用于接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
所述3D屏设备220,用于将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
本发明的系统能够快捷和实时的实现3D效果并且由于阴影的存在,因此呈现效果逼真并且造价成本较低。
为了能得到最优的视频流数据,如图2所示,所述摄像模块包括图像获取单元、纯色背景板及光源模块,所述图像获取单元获取纯色背景板前待拍摄人物的视频流数据,在具体实现过程中,通过摄像模块的水平视场角度及垂直视场角度,确定视场宽度及视场高度;基于待拍摄人物显示的图像高度、图像宽度、镜头焦距、视场宽度及视场高度,确定摄像模块至待拍摄人物的距离;基于视场宽度、光源模块的高度及阴影宽度,得到待拍摄人物到光源模块的水平距离,其中,待拍摄人物到光源模块的水平距离=视场宽度*阴影宽度/待拍摄人物的高度;通过所述摄像模块至待拍摄人物的距离及待拍摄人物到光源模块的水平距离,确定最佳拍摄位置,通过这个最佳拍摄位置,进而反推出图像获取单元、纯色背景板及光源模块的最佳安装位置。而在实际过程中,视场宽度及视场高度的计算公式如下:
α=2arctan(W/2f)
β=2arctan(H/2f)
其中,α表示水平视场角度,β表示垂直视场角度,W表示视场宽度,H表示视场高度,f表示镜头焦距;
摄像模块至待拍摄物体的距离的计算公式如下:
W=wL/f;
H=hL/f;
其中,W表示视场宽度,H表示视场高度,f表示镜头焦距,w表示图像宽度,L表示摄像模块至待拍摄物体的距离,h表示图像高度。
在一个实施例中,为了使得视频流数据转换为预设特定格式视频数据更加流畅、准确及清晰,参见附图3所示,所述4K视频采集卡被设置为:
将所述带阴影效果的视频流数据进行拆解,得到多幅第一格式图像,提取第一格式图像待拍摄人物及对应的阴影,并得到待拍摄人物所有像素点数据及阴影所有像素点数据;
基于待拍摄人物所有像素点数据构建第二格式图像中的待拍摄人物所有像素点数据,基于阴影所有像素点数据构建第二格式图像中的阴影所有像素点数据;
将第二格式图像中的待拍摄人物所有像素点数据及阴影所有像素点数据转换成与图像接收接口匹配的格式,并依次输出待拍摄人物所有像素点数据及阴影所有像素点数据至主机。
而在转换的过程中,还包括以下过程:
预设等比例待拍摄人物所有像素点数据并形成待拍摄人物参照物,其中,待拍摄人物参照物的像素点数据与待拍摄人物所有像素点数据完全一致;
基于待拍摄人物的外形特征将待拍摄人物所有像素点数据至少划分为若干分区,将每个分区构建对应的第二格式分区;
将每个第二格式分区按照待拍摄人物参照物进行组合形成初始第二格式图像;
基于待拍摄人物参照物对所述初始第二格式图像进行检测,若初始第二格式图像与待拍摄人物参照物的像素点数据匹配成功,则所述初始第二格式图像即为正确图像;
提取所述正确图像中所有像素点数据,即得到第二格式图像中的待拍摄人物所有像素点数据。
以及,预设等比例阴影所有像素点数据并形成阴影参照物,其中,阴影参照物的像素点数据与阴影所有像素点数据完全一致;
基于阴影的特征将阴影所有像素点数据至少划分为若干阴影分区,将每个阴影分区构建对应的第二格式阴影分区;
将每个第二格式阴影分区按照阴影参照物进行组合形成初始第二格式阴影图像;
基于阴影参照物对所述初始第二格式阴影图像进行检测,若初始第二格式阴影图像与阴影的像素点数据匹配成功,则所述初始第二格式阴影图像即为正确阴影图像;
提取所述正确阴影图像中所有像素点数据,即得到第二格式图像中的阴影所有像素点数据。
通过这样的转换,能确保在转换的过程数据不丢失,转换后的精度也能保持高精度。
另外,为了能够实时的将虚拟摄像机的数据呈现在3D屏上,因此在主机内设计了虚拟摄像机,如图4所示,具体过程如下:
根据真实摄像机构建虚拟摄像机,并将所述虚拟摄像机注册至硬件注册表内;
基于所述虚拟摄像机实时读取预设特定格式视频信息并缓存,形成视频源信号。
在实际操作中,可以构建多个虚拟摄像机,多个虚拟摄像机可以分布式存储预设特定格式视频信息还可以根据预设特定格式视频信息的类型等进行分类存储,以防止发生数据丢失。
如图5所示,所述3D播放模块,被设置为:
基于预设协议,将视频源信号所包含的文件结构转化为目录树结构;
实时监听所述目录树结构是否发生变化,若目录树结构发生变化,则将发生变化的目录树结构位置并进行反馈;
其中,所述目录树结构包括若干根节点及若干文件结构子单元,每个根节点下至少设有一个文件结构子单元。
参见如图6,将所述待拍摄物体显示的3D显示视频限制在特定范围内,其中,所述特定范围由所述3D显示屏确定,此3D显示屏限定了3D显示视频的显示范围,在实际显示过程中,为了确保显示效果及清晰度等,显示的大小不超过此3D显示屏的尺寸。
在一个实施例中,还包括特效添加处理模块,对所述视频源信号进行处理,得到特定视频源信号,具体为:
获取待显示特效的时间并划分为多个连续时刻,获取与当前时刻相关联的至少两个图像帧;
选取每个图像帧中的面部图像并识别面部关键点,将待显示特效与目标关键点融合,得到每个图像帧的待显示特效图;
将所有待显示特效图基于划分时刻进行融合,得到待显示特效视频源信号。
也就是说,在对视频源信号处理的时候,可以加上想要显示的特效,比如,想让显示的人物脸部是动漫人物或者戴上各种面具等,就可以对视频源信号进行加特效处理,这样看到的3D显示视频更有意思。
除了面部,其实其他人体部位也可以增加特效,不过其实处理方式和面部的处理相似,在此不再赘述。
在一个实施例中,还包括特定场景匹配模块,被设置为:
获取应用场景并解析,得到与视频源信号相匹配的相关参数,所述相关参数至少包括显示背景及视频源信号的显示时间;
提取视频源信号中所有图像帧,结合显示时间及显示背景匹配对应的图像帧。
比如,给显示的3D显示视频添加特定的应用场景,比如,服装店门口用于显示新款服装并且还能在衣服、帽子及裤子等加入相应的标签,或者在广场上用于展示各种好玩的活动,这些都可以称作为相应的应用场景,则只需要在所述视频源信号输出的时候添加相应的应用场景,就可以得到特定场景视频源信号。
那么如何才能实现特定应用场景的添加呢,可以通过以下步骤实现:
获取应用场景并解析,得到与视频源信号相匹配的相关参数,所述相关参数至少包括显示背景及视频源信号的显示时间;
提取视频源信号中所有图像帧,结合显示时间及显示背景匹配对应的图像帧。
实施例2:
一种3D摄像与显示方法,如图7所示,包括以下步骤:
S100、摄像模块获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
S200、3D拍摄转换模块,通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
S300、3D播放模块接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
S400、3D屏设备将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
此外,需要说明的是,本说明书中所描述的具体实施例,其零、部件的形状、所取名称等可以不同。凡依本发明专利构思所述的构造、特征及原理所做的等效或简单变化,均包括于本发明专利的保护范围内。本发明所属技术领域的技术人员可以对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,只要不偏离本发明的结构或者超越本权利要求书所定义的范围,均应属于本发明的保护范围。

Claims (12)

1.一种3D摄像与显示系统,其特征在于,包括拍摄系统和播放系统,所述拍摄系统包括摄像模块及3D拍摄转换模块,所述播放系统包括3D播放模块及3D屏设备;
所述摄像模块,用于获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
所述3D拍摄转换模块,被设置为:通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
所述3D播放模块,用于接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
所述3D屏设备,用于将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
2.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述摄像模块包括图像获取单元、纯色背景板及光源模块,所述图像获取单元获取纯色背景板前待拍摄人物的视频流数据,通过摄像模块的水平视场角度及垂直视场角度,确定视场宽度及视场高度;基于待拍摄人物显示的图像高度、图像宽度、镜头焦距、视场宽度及视场高度,确定摄像模块至待拍摄人物的距离;基于视场宽度、光源模块的高度及阴影宽度,得到待拍摄人物到光源模块的水平距离,其中,待拍摄人物到光源模块的水平距离=视场宽度*阴影宽度/待拍摄人物的高度;通过所述摄像模块至待拍摄人物的距离及待拍摄人物到光源模块的水平距离,确定最佳拍摄位置。
3.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述视场宽度及视场高度,表示如下:
α=2arctan(W/2f)
β=2arctan(H/2f)
其中,α表示水平视场角度,β表示垂直视场角度,W表示视场宽度,H表示视场高度,f表示镜头焦距;
所述摄像模块至待拍摄物体的距离,表示如下:
W=wL/f;
H=hL/f;
其中,W表示视场宽度,H表示视场高度,f表示镜头焦距,w表示图像宽度,L表示摄像模块至待拍摄物体的距离,h表示图像高度。
4.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述4K视频采集卡被设置为:
将所述带阴影效果的视频流数据进行拆解,得到多幅第一格式图像,提取第一格式图像待拍摄人物及对应的阴影,并得到待拍摄人物所有像素点数据及阴影所有像素点数据;
基于待拍摄人物所有像素点数据构建第二格式图像中的待拍摄人物所有像素点数据,基于阴影所有像素点数据构建第二格式图像中的阴影所有像素点数据;
将第二格式图像中的待拍摄人物所有像素点数据及阴影所有像素点数据转换成与图像接收接口匹配的格式,并依次输出待拍摄人物所有像素点数据及阴影所有像素点数据至主机。
5.根据权利要求4所述的3D摄像与显示系统,其特征在于,还被设置为:
预设等比例待拍摄人物所有像素点数据并形成待拍摄人物参照物,其中,待拍摄人物参照物的像素点数据与待拍摄人物所有像素点数据完全一致;
基于待拍摄人物的外形特征将待拍摄人物所有像素点数据至少划分为若干分区,将每个分区构建对应的第二格式分区;
将每个第二格式分区按照待拍摄人物参照物进行组合形成初始第二格式图像;
基于待拍摄人物参照物对所述初始第二格式图像进行检测,若初始第二格式图像与待拍摄人物参照物的像素点数据匹配成功,则所述初始第二格式图像即为正确图像;
提取所述正确图像中所有像素点数据,即得到第二格式图像中的待拍摄人物所有像素点数据。
6.根据权利要求4所述的3D摄像与显示系统,其特征在于,还被设置为:
预设等比例阴影所有像素点数据并形成阴影参照物,其中,阴影参照物的像素点数据与阴影所有像素点数据完全一致;
基于阴影的特征将阴影所有像素点数据至少划分为若干阴影分区,将每个阴影分区构建对应的第二格式阴影分区;
将每个第二格式阴影分区按照阴影参照物进行组合形成初始第二格式阴影图像;
基于阴影参照物对所述初始第二格式阴影图像进行检测,若初始第二格式阴影图像与阴影的像素点数据匹配成功,则所述初始第二格式阴影图像即为正确阴影图像;
提取所述正确阴影图像中所有像素点数据,即得到第二格式图像中的阴影所有像素点数据。
7.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述主机,被设置为:
根据真实摄像机构建虚拟摄像机,并将所述虚拟摄像机注册至硬件注册表内;
基于所述虚拟摄像机实时读取预设特定格式视频信息并缓存,形成视频源信号。
8.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述3D播放模块,被设置为:
基于预设协议,将视频源信号所包含的文件结构转化为目录树结构;
实时监听所述目录树结构是否发生变化,若目录树结构发生变化,则将发生变化的目录树结构位置并进行反馈;
其中,所述目录树结构包括若干根节点及若干文件结构子单元,每个根节点下至少设有一个文件结构子单元。
9.根据权利要求1所述的3D摄像与显示系统,其特征在于,所述3D屏设备,被设置为:将所述待拍摄人物显示的3D显示视频限制在特定范围内,其中,所述特定范围由所述3D显示屏确定。
10.根据权利要求1所述的3D摄像与显示系统,其特征在于,还包括特效添加处理模块,对所述视频源信号进行处理,得到特定视频源信号,具体为:
获取待显示特效的时间并划分为多个连续时刻,获取与当前时刻相关联的至少两个图像帧;
选取每个图像帧中的面部图像并识别面部关键点,将待显示特效与目标关键点融合,得到每个图像帧的待显示特效图;
将所有待显示特效图基于划分时刻进行融合,得到待显示特效视频源信号。
11.根据权利要求1所述的3D摄像与显示系统,其特征在于,还包括特定场景匹配模块,被设置为:
获取应用场景并解析,得到与视频源信号相匹配的相关参数,所述相关参数至少包括显示背景及视频源信号的显示时间;
提取视频源信号中所有图像帧,结合显示时间及显示背景匹配对应的图像帧。
12.一种3D摄像与显示方法,其特征在于,包括以下步骤:
摄像模块获取待拍摄人物的最佳拍摄位置,并通过摄像模块获取待拍摄人物的带阴影效果的视频流数据,所述视频流数据中的待拍摄人物与真实待拍摄人物等比例大小;
3D拍摄转换模块,通过4K视频采集卡将所述视频流数据转换为预设特定格式视频数据传输至主机,所述主机将预设特定格式视频数据依次输出;在主机中预设虚拟摄像机,所述虚拟摄像机对预设特定格式视频数据进行读取并作为传输的视频源信号;
3D播放模块接收所述视频源信号,通过预设协议将所述视频源信号进行转换及视频流处理,得到视频流文件信息;
3D屏设备将所述视频流文件信息通过第二预设协议传输至3D显示屏上,用以获得3D显示视频,其中,所述3D显示视频具有阴影效果,3D屏设备包括透明屏和箱体,透明屏有透视感,箱体具有预设厚度,当所述视频流文件信息被投放至透明屏时,部分的阴影效果落在箱体范围内。
CN202311533135.XA 2023-11-16 2023-11-16 3d摄像与显示方法及系统 Pending CN117579803A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311533135.XA CN117579803A (zh) 2023-11-16 2023-11-16 3d摄像与显示方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311533135.XA CN117579803A (zh) 2023-11-16 2023-11-16 3d摄像与显示方法及系统

Publications (1)

Publication Number Publication Date
CN117579803A true CN117579803A (zh) 2024-02-20

Family

ID=89892897

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311533135.XA Pending CN117579803A (zh) 2023-11-16 2023-11-16 3d摄像与显示方法及系统

Country Status (1)

Country Link
CN (1) CN117579803A (zh)

Similar Documents

Publication Publication Date Title
US11076142B2 (en) Real-time aliasing rendering method for 3D VR video and virtual three-dimensional scene
CN109118581B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
KR102254407B1 (ko) 3차원 모델의 생성 장치, 생성 방법, 및 프로그램
CN108475327A (zh) 三维采集与渲染
WO2016045425A1 (zh) 一种两视点立体图像合成方法及系统
JP2010517038A (ja) 定量的な三次元撮像のための方法および装置
CN109190533B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
JP7170224B2 (ja) 三次元生成方法および三次元生成装置
CN108600729B (zh) 动态3d模型生成装置及影像生成方法
JP2012222743A (ja) 撮像装置
US20220137555A1 (en) System and method for lightfield capture
CN108156369A (zh) 图像处理方法和装置
WO2019065260A1 (ja) 情報処理装置、情報処理方法、及び、プログラム、並びに、交換レンズ
JP2019191989A (ja) 仮想視点画像を生成するシステム、方法及びプログラム
CN107862718A (zh) 4d全息视频捕捉方法
US20050168485A1 (en) System for combining a sequence of images with computer-generated 3D graphics
CN108564654B (zh) 三维大场景的画面进入方式
JP6409769B2 (ja) 3次元形状計測装置、3次元形状計測方法及び3次元形状計測プログラム
CN117579803A (zh) 3d摄像与显示方法及系统
AU2013308155B2 (en) Method for description of object points of the object space and connection for its implementation
CN213461928U (zh) 全景相机和电子设备
CN117615114A (zh) 3d摄像及显示方法、系统及装置
CN114049317A (zh) 一种基于人工智能的ccd设备自动化检验系统及方法
JP5924833B2 (ja) 画像処理装置、画像処理方法、画像処理プログラム、及び撮像装置
CN113630592A (zh) 扩增实境异地共演系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination