CN103945205A - 兼容2d与多视点裸眼3d显示的视频处理装置及方法 - Google Patents

兼容2d与多视点裸眼3d显示的视频处理装置及方法 Download PDF

Info

Publication number
CN103945205A
CN103945205A CN201410136474.9A CN201410136474A CN103945205A CN 103945205 A CN103945205 A CN 103945205A CN 201410136474 A CN201410136474 A CN 201410136474A CN 103945205 A CN103945205 A CN 103945205A
Authority
CN
China
Prior art keywords
video
module
image
input
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410136474.9A
Other languages
English (en)
Other versions
CN103945205B (zh
Inventor
任鹏举
余江
刘庚
孙宏滨
赵季中
郑南宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Jiaotong University
Original Assignee
Xian Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Jiaotong University filed Critical Xian Jiaotong University
Priority to CN201410136474.9A priority Critical patent/CN103945205B/zh
Publication of CN103945205A publication Critical patent/CN103945205A/zh
Application granted granted Critical
Publication of CN103945205B publication Critical patent/CN103945205B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明公开了一种兼容2D与多视点裸眼3D显示的视频处理装置,包括视频输入接口、2D视频输出接口、3D合成视频输出接口、视频解码模块、视频图像处理模式选择模块、深度图生成模块、深度图像绘制模块、可配置的图像分解模块、视频图像帧存储模块、并行图像缩放模块以及可配置的多视点裸眼3D视频图像组合计算模块;相应地,对于常见格式的视频源,本装置对应的处理方法不仅能够实现实时的多视点裸眼3D显示,亦能兼容2D播放模式,与此同时,通过参数的调整可以满足目前主流的多种裸眼3D显示技术的要求。与现有裸眼3D显示处理装置及方法相比,本发明对于实现多视点裸眼立体显示处理提供了完整的解决方案。

Description

兼容2D与多视点裸眼3D显示的视频处理装置及方法
技术领域
本发明属于视频图像处理技术领域,具体涉及一种兼容2D与多视点裸眼3D显示的视频处理装置及方法。
背景技术
裸眼3D显示技术打破了二维显示平面的局限,同时摆脱了眼镜式3D技术需要佩戴特制眼镜给用户所带来的束缚,真正实现了人们将三维场景搬上屏幕的愿景,在航天、医疗、教学、展览等诸多领域都具有重要意义。
裸眼3D显示方案包括视差屏障技术、柱状透镜技术、指向光源技术和多层显示技术,当前相对成熟的裸眼3D显示技术大多是依靠在显示面板上额外附加一层可以实现对屏幕图像进行“方向性”视觉阻挡的介质,通过光的遮挡或者折射等物理手段来精确控制各像素的射出光路,使得左右眼画面区分开来,进一步利用人眼的双目立体视觉生理特性,最终将两幅略带差异的图像在大脑中融合形成立体视觉。
目前,裸眼3D显示主流技术为视差屏障技术与柱状透镜技术,其中,视差屏障技术存在画面亮度低、图像分辨率损失严重(与视点数呈反比关系)的问题;柱状透镜技术虽不会对画面亮度造成影响,但依旧存在着图像分辨率损失的问题。此外,多视点裸眼3D显示技术是一个呈现多极化的生态链,整个过程贯穿了前端3D片源制作到后端裸眼3D显示处理一系列环节,伴随而来的还有可视角度、可视距离、画面立体深度感、2D转3D技术、双目转多目技术等诸多现实问题。
尽管如此,就当前显示技术的发展方向来看,裸眼3D技术毫无疑问将会成为今后显示领域的主流趋势,同样地,随着裸眼3D显示技术不断朝着多视点、超高清(4K及4K以上分辨率)、大尺寸化方向的发展更新,当前所突出的一系列问题也将得到很大程度上的改善。
与现有多视点裸眼3D显示的视频处理装置及方法相比,本发明对于常见格式的视频源(包括多视点3D视频源、2D视频源、符合BT.2160规范的双目3D视频源、(V+D)格式视频源)的实时多视点裸眼立体显示处理提供了完整的解决方案。本装置适用性强,灵活性高,通过参数的调整,不仅能够满足目前主流的多视点裸眼3D显示技术的要求,也能够兼容2D播放模式。
发明内容
本发明提供了一种兼容2D与多视点裸眼3D显示的视频处理装置及方法,该装置及方法支持多种格式视频源的2D播放模式及3D播放模式,同时通过参数的调整能够满足目前主流的多视点裸眼3D显示技术的要求。
为实现上述功能,本发明所述的兼容2D与多视点裸眼3D显示的视频处理装置包括视频输入接口、2D视频输出接口、3D合成视频输出接口、视频解码模块、深度图生成模块、深度图像绘制模块、可配置的图像分解模块、视频图像帧存储模块、并行图像缩放模块及可配置的多视点裸眼3D视频图像组合计算模块、以及用于切换至2D播放模式或3D播放模式的视频图像处理模式选择模块;
所述视频输入接口与视频解码模块的输入端相连接,视频解码模块的输出端与视频图像处理模式选择模块的输入端相连接,视频图像处理模式选择模块的第一输出端与深度图生成模块的输入端相连接,深度图像绘制模块的输入端分别与深度图生成模块的输出端、视频图像处理模式选择模块的第一输出端及第二输出端相连接,视频图像处理模式选择模块的第三输出端与可配置的图像分解模块的输入端相连接,视频图像帧存储模块的输入端分别与视频图像处理模式选择模块的第四输出端、可配置的图像分解模块的输出端及深度图像绘制模块的输出端相连接,视频图像帧存储模块的输出端与并行图像缩放模块的输入端相连接,并行图像缩放模块的输出端分为两路,一路与2D视频输出接口相连接,另一路与可配置的多视点裸眼3D视频图像组合计算模块的输入端相连接,可配置的多视点裸眼3D视频图像组合计算模块的输出端与3D合成视频输出接口相连接。
所述视频图像帧存储模块包括片外存储器写控制模块、SDRAM控制器、SDRAM及片外存储器读控制模块,片外存储器写控制模块的输入端分别与视频图像处理模式选择模块的第四输出端、可配置的图像分解模块的输出端及深度图像绘制模块的输出端相连接,片外存储器写控制模块的输出端与SDRAM控制器的输入端相连接,SDRAM控制器的输出端与片外存储器读控制模块的输入端相连接,片外存储器读控制模块的输出端与并行图像缩放模块的输入端相连接,SDRAM与SDRAM控制器相连接。
所述SDRAM包括DDR2SDRAM及DDR3SDRAM。
相应的,本发明还提供了一种兼容2D与多视点裸眼3D显示的视频处理方法,包括以下步骤:外部输入视频源经视频输入接口输入到视频解码模块中,视频解码模块接收及解码所述外部输入视频源获得相应的视频流,然后将得到的视频流输入到视频图像处理模式选择模块,所述外部输入视频源为多视点3D视频源、2D视频源、符合BT.2160规范的双目3D视频源或(V+D)格式视频源中的一种,所述视频图像处理模式选择模块包括2D播放模式及3D播放模式;
当输入视频源为多视点3D视频源,且当前为3D播放模式时,视频图像处理模式选择模块将所述视频流送至可配置的图像分解模块中,可配置的图像分解模块根据当前视频流的视频特征按照像素从属视场分离视频流中视频图像的各视场视图,并将各视场视图以帧为单元存储到视频图像帧存储模块中,然后从视频图像帧存储模块中同步读取各视场视图,并将所述视场视图输入到并行图像缩放模块中,并行图像缩放模块根据各视场视图的分辨率及显示终端的物理分辨率对各视场视图进行并行插值缩放处理,然后将缩放处理后的各视场视图输入到可配置的多视点裸眼3D视频图像组合计算模块中,可配置的多视点裸眼3D视频图像组合计算模块根据显示终端的像素排布方式从各视场视图中选取所需子像素,并将选取的子像素合成最终符合显示终端要求的立体图像,然后再通过3D合成视频输出接口输出到显示终端中;
当输入视频源为2D视频源或符合BT.2160规范的双目3D视频源,且当前为3D播放模式时,视频图像处理模式选择模块将所述视频流分别输入到深度图生成模块及深度图像绘制模块中,深度图生成模块根据视频流获取深度信息,并将所述深度信息送至深度图像绘制模块,深度图像绘制模块根据所述深度信息及视频流生成与显示终端视点数目相同的具有特定视差的第一视频图像序列,然后将所述第一视频图像序列输入到视频图像帧存储模块,视频图像帧存储模块对第一视频图像序列进行缓存,然后将第一视频图像序列输入到并行图像缩放模块,并行图像缩放模块根据第一视频图像序列中各视场视图的分辨率及显示终端的物理分辨率对各视场视图进行并行插值缩放处理,然后将缩放处理后的各视场视图输入到可配置的多视点裸眼3D视频图像组合计算模块中,可配置的多视点裸眼3D视频图像组合计算模块根据显示终端的像素排布方式从各视场视图中选取所需子像素,然后将选取的子像素合成最终符合显示终端要求的立体图像,然后通过3D合成视频输出接口输出到显示终端中;
当输入视频源为(V+D)格式视频源,且当前为3D播放模式时,视频图像处理模式选择模块将所述视频流输入到深度图像绘制模块中,深度图像绘制模块根据所述视频流生成与显示终端视点数目相一致的具有特定视差的第二视频图像序列,然后将所述第二视频图像序列送至视频图像帧存储模块,视频图像帧存储模块对所述第二视频图像序列进行缓存,然后将所述第二视频图像序列同步输入到并行图像缩放模块,并行图像缩放模块根据第二视频图像序列中各视场视图的分辨率与显示终端的物理分辨率对各视场视图进行并行插值缩放处理,然后将缩放处理后的各视场视图输入到可配置的多视点裸眼3D视频图像组合计算模块中,可配置的多视点裸眼3D视频图像组合计算模块根据显示终端的像素排布方式从各视场视图中选取所需子像素,并将所选取的子像素合成符合显示终端要求的立体图像,然后通过3D合成视频输出接口输出到显示终端中;
当输入视频源为2D视频源,且当前为2D播放模式时,所述视频图像处理模式选择模块将所述视频流输入到视频图像帧存储模块中,视频图像帧存储模块对所述视频流进行缓存,然后将所述视频流输入到并行图像缩放模块中,并行图像缩放模块根据视频流中视频图像的分辨率及显示终端的物理分辨率对视频流中的视频图像进行缩放处理,然后将缩放后的视频流通过2D视频输出接口输出到显示终端中;
当输入视频源为多视点3D视频源、符合BT.2160规范的双目3D视频源或(V+D)格式视频源,且当前为2D播放模式时,视频图像处理模式选择模块将所述视频流输入到可配置的图像分解模块中,可配置的图像分解模块根据所述视频流的视频特征按照像素从属视场对视频流中的各视图数据进行分离,并选取其中任意一个有效视图数据,然后将所述有效视图数据送至视频图像帧存储模块中,视频图像帧存储模块对所述有效视图数据进行缓存,然后将所述有效视图数据输入到并行图像缩放模块中,并行图像缩放模块根据所述有效视图的分辨率及显示终端的物理分辨率对所述有效视图进行缩放处理,然后将缩放后的有效视图数据通过2D视频输出接口输出到显示终端中。
本发明具有以下有益效果:
本发明所述的兼容2D与多视点裸眼3D显示的视频处理装置及方法在对外部输入视频源进行处理的过程中,首先通过视频解码模块对外部输入视频源进行解码获得相应的视频数据流,然后通过视频图像处理模式选择模块根据视频源类型以及当前播放模式选择视频图像后续处理步骤与方法,从而实现对多视点3D视频源、2D视频源、符合BT.2160规范的双目3D视频源、(V+D)格式视频源的兼容处理;本装置适用性强,灵活性高,不仅能够实现实时多视点裸眼3D显示,亦能够兼容2D播放模式,与此同时,通过参数的调整可以满足目前主流的多种裸眼3D显示技术的要求。与现有裸眼3D显示处理装置及方法相比,本装置及方法对于实现多视点裸眼立体实时显示处理提供了完整的解决方案。
附图说明
图1为本发明一种兼容2D与多视点裸眼3D显示的视频处理装置的系统结构框图;
图2为本发明中视频图像帧存储模块5的结构框图;
图3为本发明中K视点、M*N分辨率裸眼3D显示终端的立体输出视频图像子像素排布示意图。
其中,1为视频解码模块、2为视频图像处理模式选择模块、3为深度图生成模块、4为深度图像绘制模块、5为视频图像帧存储模块、6为可配置的图像分解模块、7为并行图像缩放模块、8为可配置的多视点裸眼3D视频图像组合计算模块、51为SDRAM、52为片外存储器写控制模块、53为SDRAM控制器、54为片外存储器读控制模块。
具体实施方式
下面结合附图对本发明做进一步详细描述:
参考图1及图2,本发明所述的兼容2D与多视点裸眼3D显示的视频处理装置包括视频输入接口、2D视频输出接口、3D合成视频输出接口、视频解码模块1、视频图像处理模式选择模块2、深度图生成模块3、深度图像绘制模块4、可配置的图像分解模块6、视频图像帧存储模块5、并行图像缩放模块7及可配置的多视点裸眼3D视频图像组合计算模块8;所述视频输入接口与视频解码模块1的输入端相连接,视频解码模块1的输出端与视频图像处理模式选择模块2的输入端相连接,视频图像处理模式选择模块2的第一输出端与深度图生成模块3的输入端相连接,深度图像绘制模块4的输入端分别与深度图生成模块3的输出端、视频图像处理模式选择模块2的第一输出端及第二输出端相连接,视频图像处理模式选择模块2的第三输出端与可配置的图像分解模块6的输入端相连接,视频图像帧存储模块5的输入端分别与视频图像处理模式选择模块2的第四输出端、可配置的图像分解模块6的输出端及深度图像绘制模块4的输出端相连接,视频图像帧存储模块5的输出端与并行图像缩放模块7的输入端相连接,并行图像缩放模块7的输出端分为两路,一路与2D视频输出接口相连接,另一路与可配置的多视点裸眼3D视频图像组合计算模块8的输入端相连接,可配置的多视点裸眼3D视频图像组合计算模块8的输出端与3D合成视频输出接口相连接。视频图像帧存储模块5包括片外存储器写控制模块52、SDRAM控制器53、SDRAM51及片外存储器读控制模块54,片外存储器写控制模块52的输入端分别与视频图像处理模式选择模块2的第四输出端、可配置的图像分解模块6的输出端及深度图像绘制模块4的输出端相连接,片外存储器写控制模块52的输出端与SDRAM控制器53的输入端相连接,SDRAM控制器53的输出端与片外存储器读控制模块54的输入端相连接,片外存储器读控制模块54的输出端与并行图像缩放模块7的输入端相连接,SDRAM51与SDRAM控制器53相连接。
所述SDRAM51包括DDR2SDRAM及DDR3SDRAM。
本发明所述的兼容2D与多视点裸眼3D显示的视频处理方法包括以下步骤:外部输入视频源经视频输入接口输入到视频解码模块1中,视频解码模块1接收及解码所述外部输入视频源获得相应的视频流,然后将得到的视频流输入到视频图像处理模式选择模块2,所述外部输入视频源为多视点3D视频源、2D视频源、符合BT.2160规范的双目3D视频源或(V+D)格式视频源中的一种,所述视频图像处理模式选择模块2包括2D播放模式及3D播放模式;
当输入视频源为多视点3D视频源,且当前为3D播放模式时,视频图像处理模式选择模块2将所述视频流送至可配置的图像分解模块6中,可配置的图像分解模块6根据当前视频流的视频特征按照像素从属视场分离视频流中视频图像的各视场视图,并将各视场视图以帧为单元存储到视频图像帧存储模块5中,然后从视频图像帧存储模块5中同步读取各视场视图,并将所述视场视图输入到并行图像缩放模块7中,并行图像缩放模块7根据各视场视图的分辨率及显示终端的物理分辨率对各视场视图进行并行插值缩放处理,然后将缩放处理后的各视场视图输入到可配置的多视点裸眼3D视频图像组合计算模块8中,可配置的多视点裸眼3D视频图像组合计算模块8根据显示终端的像素排布方式从各视场视图中选取所需子像素,并将选取的子像素合成最终符合显示终端要求的立体图像,然后再通过3D合成视频输出接口输出到显示终端中;
当输入视频源为2D视频源或符合BT.2160规范的双目3D视频源,且当前为3D播放模式时,视频图像处理模式选择模块2将所述视频流分别输入到深度图生成模块3及深度图像绘制模块4中,深度图生成模块3根据视频流获取深度信息,并将所述深度信息送至深度图像绘制模块4,深度图像绘制模块4根据所述深度信息及视频流生成与显示终端视点数目相同的具有特定视差的第一视频图像序列,然后将所述第一视频图像序列输入到视频图像帧存储模块5,视频图像帧存储模块5对第一视频图像序列进行缓存,然后将第一视频图像序列输入到并行图像缩放模块7,并行图像缩放模块7根据第一视频图像序列中各视场视图的分辨率及显示终端的物理分辨率对各视场视图进行并行插值缩放处理,然后将缩放处理后的各视场视图输入到可配置的多视点裸眼3D视频图像组合计算模块8中,可配置的多视点裸眼3D视频图像组合计算模块8根据显示终端的像素排布方式从各视场视图中选取所需子像素,然后将选取的子像素合成最终符合显示终端要求的立体图像,然后通过3D合成视频输出接口输出到显示终端中;
当输入视频源为(V+D)格式视频源,且当前为3D播放模式时,视频图像处理模式选择模块2将所述视频流输入到深度图像绘制模块4中,深度图像绘制模块4根据所述视频流生成与显示终端视点数目相一致的具有特定视差的第二视频图像序列,然后将所述第二视频图像序列送至视频图像帧存储模块5,视频图像帧存储模块5对所述第二视频图像序列进行缓存,然后将所述第二视频图像序列同步输入到并行图像缩放模块7,并行图像缩放模块7根据第二视频图像序列中各视场视图的分辨率与显示终端的物理分辨率对各视场视图进行并行插值缩放处理,然后将缩放处理后的各视场视图输入到可配置的多视点裸眼3D视频图像组合计算模块8中,可配置的多视点裸眼3D视频图像组合计算模块8根据显示终端的像素排布方式从各视场视图中选取所需子像素,并将所选取的子像素合成符合显示终端要求的立体图像,然后通过3D合成视频输出接口输出到显示终端中;
当输入视频源为2D视频源,且当前为2D播放模式时,所述视频图像处理模式选择模块2将所述视频流输入到视频图像帧存储模块5中,视频图像帧存储模块5对所述视频流进行缓存,然后将所述视频流输入到并行图像缩放模块7中,并行图像缩放模块7根据视频流中视频图像的分辨率及显示终端的物理分辨率对视频流中的视频图像进行缩放处理,然后将缩放后的视频流通过2D视频输出接口输出到显示终端中;
当输入视频源为多视点3D视频源、符合BT.2160规范的双目3D视频源或(V+D)格式视频源,且当前为2D播放模式时,视频图像处理模式选择模块2将所述视频流输入到可配置的图像分解模块6中,可配置的图像分解模块6根据所述视频流的视频特征按照像素从属视场对视频流中的各视图数据进行分离,并选取其中任意一个有效视图数据,然后将所述有效视图数据送至视频图像帧存储模块5中,视频图像帧存储模块5对所述有效视图数据进行缓存,然后将所述有效视图数据输入到并行图像缩放模块7中,并行图像缩放模块7根据所述有效视图的分辨率及显示终端的物理分辨率对所述有效视图进行缩放处理,然后将缩放后的有效视图数据通过2D视频输出接口输出到显示终端中。
所述视频图像帧存储模块5包括片外存储器写控制模块52、SDRAM控制器53、SDRAM51、片外存储器读控制模块54,能够实现对高速视频数据流的缓存,在裸眼3D播放模式下,通过片外存储器写控制模块52及SDRAM控制器53可将各视场视图以帧为单元按照预先设计好的数据在外存中分配的存储地址存储进SDRAM51,同时,由于读写操作是在不同帧当中进行的,因而当以帧为单元的视频图像数据通过片外存储器读控制模块54和SDRAM控制器53从SDRAM51读出的过程当中,便可以实现各视场视图的并行输出;特别地,在2D播放模式下,图像数据均按序写入和读出SDRAM51。
参考图3,可配置的多视点裸眼3D视频图像组合计算模块8最终输出的合成立体视频图像中的每一个显示像素都是由多个视图当中选取相应的子像素分量通过一定的组合计算所获得的,对于K视点、M*N分辨率的显示终端而言,最终输出的立体合成视频图像各像素点Pij的子像素分量Rij、Gij、Bij与缩放后各视场(k1,k2,k3,k4,k5,k6)视图对应坐标位置的子像素分量 之间存在如下关系:
R ij = α ij k 1 · r ij k 1 + β ij k 2 · r ij k 2 ;
G ij = α ij k 3 · g ij k 3 + β ij k 4 · g ij k 4 ;
B ij = α ij k 5 · b ij k 5 + β ij k 6 · b ij k 6 ;
其中, α ij k 1 + β ij k 2 = 1 , α ij k 3 + β ij k 4 = 1 , α ij k 5 + β ij k 6 = 1 , 1≤i≤M,1≤j≤N, 0 ≤ α ij k 1 , α ij k 3 , α ij k 5 ≤ 1 , 0 ≤ β ij k 2 , β ij k 4 , β ij k 6 ≤ 1 , k1,k2,k3,k4,k5,k6∈{1,2,3,…,K},该式涵盖了不同视点数的立体视频图像以及不同类型的显示终端,当采用视差屏障技术时,的取值为1,的取值为0;当采用柱状透镜技术时,的取值为浮点数类型。

Claims (4)

1.一种兼容2D与多视点裸眼3D显示的视频处理装置,其特征在于,包括视频输入接口、2D视频输出接口、3D合成视频输出接口、视频解码模块(1)、深度图生成模块(3)、深度图像绘制模块(4)、可配置的图像分解模块(6)、视频图像帧存储模块(5)、并行图像缩放模块(7)、可配置的多视点裸眼3D视频图像组合计算模块(8)、以及用于切换至2D播放模式或3D播放模式的视频图像处理模式选择模块(2);
所述视频输入接口与视频解码模块(1)的输入端相连接,视频解码模块(1)的输出端与视频图像处理模式选择模块(2)的输入端相连接,视频图像处理模式选择模块(2)的第一输出端与深度图生成模块(3)的输入端相连接,深度图像绘制模块(4)的输入端分别与深度图生成模块(3)的输出端、视频图像处理模式选择模块(2)的第一输出端及第二输出端相连接,视频图像处理模式选择模块(2)的第三输出端与可配置的图像分解模块(6)的输入端相连接,视频图像帧存储模块(5)的输入端分别与视频图像处理模式选择模块(2)的第四输出端、可配置的图像分解模块(6)的输出端及深度图像绘制模块(4)的输出端相连接,视频图像帧存储模块(5)的输出端与并行图像缩放模块(7)的输入端相连接,并行图像缩放模块(7)的输出端分为两路,一路与2D视频输出接口相连接,另一路与可配置的多视点裸眼3D视频图像组合计算模块(8)的输入端相连接,可配置的多视点裸眼3D视频图像组合计算模块(8)的输出端与3D合成视频输出接口相连接。
2.根据权利要求1所述的兼容2D与多视点裸眼3D显示的视频处理装置,其特征在于,所述视频图像帧存储模块(5)包括片外存储器写控制模块(52)、SDRAM控制器(53)、SDRAM(51)及片外存储器读控制模块(54),片外存储器写控制模块(52)的输入端分别与视频图像处理模式选择模块(2)的第四输出端、可配置的图像分解模块(6)的输出端及深度图像绘制模块(4)的输出端相连接,片外存储器写控制模块(52)的输出端与SDRAM控制器(53)的输入端相连接,SDRAM控制器(53)的输出端与片外存储器读控制模块(54)的输入端相连接,片外存储器读控制模块(54)的输出端与并行图像缩放模块(7)的输入端相连接,SDRAM(51)与SDRAM控制器(53)相连接。
3.根据权利要求2所述的兼容2D与多视点裸眼3D显示的视频处理装置,其特征在于,所述SDRAM(51)包括DDR2SDRAM及DDR3SDRAM。
4.一种兼容2D与多视点裸眼3D显示的视频处理方法,其特征在于,包括以下步骤:外部输入视频源经视频输入接口输入到视频解码模块(1)中,视频解码模块(1)接收及解码所述外部输入视频源获得相应的视频流,然后将得到的视频流输入到视频图像处理模式选择模块(2),所述外部输入视频源为多视点3D视频源、2D视频源、符合BT.2160规范的双目3D视频源或(V+D)格式视频源中的一种,所述视频图像处理模式选择模块(2)包括2D播放模式及3D播放模式;
当输入视频源为多视点3D视频源,且当前为3D播放模式时,视频图像处理模式选择模块(2)将所述视频流送至可配置的图像分解模块(6)中,可配置的图像分解模块(6)根据当前视频流的视频特征按照像素从属视场分离视频流中视频图像的各视场视图,并将各视场视图以帧为单元存储到视频图像帧存储模块(5)中,然后从视频图像帧存储模块(5)中同步读取各视场视图,并将所述视场视图输入到并行图像缩放模块(7)中,并行图像缩放模块(7)根据各视场视图的分辨率及显示终端的物理分辨率对各视场视图进行并行插值缩放处理,然后将缩放处理后的各视场视图输入到可配置的多视点裸眼3D视频图像组合计算模块(8)中,可配置的多视点裸眼3D视频图像组合计算模块(8)根据显示终端的像素排布方式从各视场视图中选取所需子像素,并将选取的子像素合成最终符合显示终端要求的立体图像,然后再通过3D合成视频输出接口输出到显示终端中;
当输入视频源为2D视频源或符合BT.2160规范的双目3D视频源,且当前为3D播放模式时,视频图像处理模式选择模块(2)将所述视频流分别输入到深度图生成模块(3)及深度图像绘制模块(4)中,深度图生成模块(3)根据视频流获取深度信息,并将所述深度信息送至深度图像绘制模块(4),深度图像绘制模块(4)根据所述深度信息及视频流生成与显示终端视点数目相同的具有特定视差的第一视频图像序列,然后将所述第一视频图像序列输入到视频图像帧存储模块(5),视频图像帧存储模块(5)对第一视频图像序列进行缓存,然后将第一视频图像序列输入到并行图像缩放模块(7),并行图像缩放模块(7)根据第一视频图像序列中各视场视图的分辨率及显示终端的物理分辨率对各视场视图进行并行插值缩放处理,然后将缩放处理后的各视场视图输入到可配置的多视点裸眼3D视频图像组合计算模块(8)中,可配置的多视点裸眼3D视频图像组合计算模块(8)根据显示终端的像素排布方式从各视场视图中选取所需子像素,然后将选取的子像素合成最终符合显示终端要求的立体图像,然后通过3D合成视频输出接口输出到显示终端中;
当输入视频源为(V+D)格式视频源,且当前为3D播放模式时,视频图像处理模式选择模块(2)将所述视频流输入到深度图像绘制模块(4)中,深度图像绘制模块(4)根据所述视频流生成与显示终端视点数目相一致的具有特定视差的第二视频图像序列,然后将所述第二视频图像序列送至视频图像帧存储模块(5),视频图像帧存储模块(5)对所述第二视频图像序列进行缓存,然后将所述第二视频图像序列同步输入到并行图像缩放模块(7),并行图像缩放模块(7)根据第二视频图像序列中各视场视图的分辨率与显示终端的物理分辨率对各视场视图进行并行插值缩放处理,然后将缩放处理后的各视场视图输入到可配置的多视点裸眼3D视频图像组合计算模块(8)中,可配置的多视点裸眼3D视频图像组合计算模块(8)根据显示终端的像素排布方式从各视场视图中选取所需子像素,并将所选取的子像素合成符合显示终端要求的立体图像,然后通过3D合成视频输出接口输出到显示终端中;
当输入视频源为2D视频源,且当前为2D播放模式时,所述视频图像处理模式选择模块(2)将所述视频流输入到视频图像帧存储模块(5)中,视频图像帧存储模块(5)对所述视频流进行缓存,然后将所述视频流输入到并行图像缩放模块(7)中,并行图像缩放模块(7)根据视频流中视频图像的分辨率及显示终端的物理分辨率对视频流中的视频图像进行缩放处理,然后将缩放后的视频流通过2D视频输出接口输出到显示终端中;
当输入视频源为多视点3D视频源、符合BT.2160规范的双目3D视频源或(V+D)格式视频源,且当前为2D播放模式时,视频图像处理模式选择模块(2)将所述视频流输入到可配置的图像分解模块(6)中,可配置的图像分解模块(6)根据所述视频流的视频特征按照像素从属视场对视频流中的各视图数据进行分离,并选取其中任意一个有效视图数据,然后将所述有效视图数据送至视频图像帧存储模块(5)中,视频图像帧存储模块(5)对所述有效视图数据进行缓存,然后将所述有效视图数据输入到并行图像缩放模块(7)中,并行图像缩放模块(7)根据所述有效视图的分辨率及显示终端的物理分辨率对所述有效视图进行缩放处理,然后将缩放后的有效视图数据通过2D视频输出接口输出到显示终端中。
CN201410136474.9A 2014-04-04 2014-04-04 兼容2d与多视点裸眼3d显示的视频处理装置及方法 Active CN103945205B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410136474.9A CN103945205B (zh) 2014-04-04 2014-04-04 兼容2d与多视点裸眼3d显示的视频处理装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410136474.9A CN103945205B (zh) 2014-04-04 2014-04-04 兼容2d与多视点裸眼3d显示的视频处理装置及方法

Publications (2)

Publication Number Publication Date
CN103945205A true CN103945205A (zh) 2014-07-23
CN103945205B CN103945205B (zh) 2015-11-11

Family

ID=51192653

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410136474.9A Active CN103945205B (zh) 2014-04-04 2014-04-04 兼容2d与多视点裸眼3d显示的视频处理装置及方法

Country Status (1)

Country Link
CN (1) CN103945205B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104243964A (zh) * 2014-09-12 2014-12-24 西安诺瓦电子科技有限公司 立体led显示控制系统及方法、显示控制卡
CN106408641A (zh) * 2016-09-19 2017-02-15 上海玮舟微电子科技有限公司 一种图像数据的缓存方法和装置
CN108881878A (zh) * 2018-05-28 2018-11-23 上海玮舟微电子科技有限公司 一种裸眼3d显示设备和方法
CN110113596A (zh) * 2018-02-01 2019-08-09 上海济丽信息技术有限公司 一种可切换光栅式裸眼3d显示系统及显示方法
CN110191331A (zh) * 2018-02-22 2019-08-30 Tcl新技术(惠州)有限公司 一种真三维裸眼3d图像合成方法、存储介质及合成装置
CN113542723A (zh) * 2021-06-01 2021-10-22 泰州汇锦电子有限公司 嵌入式自由立体显示器

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002369218A (ja) * 2001-06-08 2002-12-20 Matsushita Electric Ind Co Ltd 映像信号処理装置
CN101754040A (zh) * 2008-12-04 2010-06-23 三星电子株式会社 用于估计深度和将2d视频转换为3d视频的方法和设备
CN201986081U (zh) * 2011-02-22 2011-09-21 青岛海信电器股份有限公司 一种3d信号处理模块及电视机
CN103051866A (zh) * 2011-10-12 2013-04-17 中国电信股份有限公司 网络3d 视频监控系统、方法和视频处理平台
CN103309146A (zh) * 2012-03-16 2013-09-18 香港城市大学 用于显示三维和二维图像的多模式投影仪显示屏幕的自动切换

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002369218A (ja) * 2001-06-08 2002-12-20 Matsushita Electric Ind Co Ltd 映像信号処理装置
CN101754040A (zh) * 2008-12-04 2010-06-23 三星电子株式会社 用于估计深度和将2d视频转换为3d视频的方法和设备
CN201986081U (zh) * 2011-02-22 2011-09-21 青岛海信电器股份有限公司 一种3d信号处理模块及电视机
CN103051866A (zh) * 2011-10-12 2013-04-17 中国电信股份有限公司 网络3d 视频监控系统、方法和视频处理平台
CN103309146A (zh) * 2012-03-16 2013-09-18 香港城市大学 用于显示三维和二维图像的多模式投影仪显示屏幕的自动切换

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
邹虹等: "基于柱透镜光栅的2D/3D兼容显示的实现原理", 《数字技术与应用》, 15 December 2013 (2013-12-15), pages 70 - 72 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104243964A (zh) * 2014-09-12 2014-12-24 西安诺瓦电子科技有限公司 立体led显示控制系统及方法、显示控制卡
CN106408641A (zh) * 2016-09-19 2017-02-15 上海玮舟微电子科技有限公司 一种图像数据的缓存方法和装置
CN106408641B (zh) * 2016-09-19 2019-10-18 上海玮舟微电子科技有限公司 一种图像数据的缓存方法和装置
CN110113596A (zh) * 2018-02-01 2019-08-09 上海济丽信息技术有限公司 一种可切换光栅式裸眼3d显示系统及显示方法
CN110113596B (zh) * 2018-02-01 2021-04-27 上海济丽信息技术有限公司 一种可切换光栅式裸眼3d显示系统及显示方法
CN110191331A (zh) * 2018-02-22 2019-08-30 Tcl新技术(惠州)有限公司 一种真三维裸眼3d图像合成方法、存储介质及合成装置
CN110191331B (zh) * 2018-02-22 2022-01-04 深圳市华胜软件技术有限公司 一种真三维裸眼3d图像合成方法、存储介质及合成装置
CN108881878A (zh) * 2018-05-28 2018-11-23 上海玮舟微电子科技有限公司 一种裸眼3d显示设备和方法
CN108881878B (zh) * 2018-05-28 2021-04-20 张家港康得新光电材料有限公司 一种裸眼3d显示设备和方法
CN113542723A (zh) * 2021-06-01 2021-10-22 泰州汇锦电子有限公司 嵌入式自由立体显示器

Also Published As

Publication number Publication date
CN103945205B (zh) 2015-11-11

Similar Documents

Publication Publication Date Title
US20230019187A1 (en) Three dimensional glasses free light field display using eye location
CN103945208B (zh) 一种针对多视点裸眼3d显示的并行同步缩放引擎及方法
CN103945205B (zh) 兼容2d与多视点裸眼3d显示的视频处理装置及方法
US8633967B2 (en) Method and device for the creation of pseudo-holographic images
US8884952B2 (en) 3D display apparatus and method for processing image using the same
CN101980544B (zh) 立体图像的显示方法及相关显示系统
CN104539935A (zh) 图像亮度的调节方法及调节装置、显示装置
CN105430369B (zh) 自动立体三维显示设备
CN102404592A (zh) 图像处理设备和方法以及立体图像显示设备
US20150245015A1 (en) Autostereoscopic multi-view image display apparatus
CN103167305B (zh) 一种信号处理方法及装置
CN201937771U (zh) 一种用于高分立体显示器的立体图像处理装置
KR20150121386A (ko) 입체 영상 표시 장치 및 영상 처리 방법
KR100980298B1 (ko) 모델링된 2차원 영상의 3차원 영상 변환 방법
KR101963385B1 (ko) 디스패러티 산출방법과 이를 이용한 입체영상 표시장치
KR102143463B1 (ko) 다시점 영상 디스플레이 장치 및 그 제어 방법
KR102233116B1 (ko) 입체 영상 디스플레이 장치와 이의 구동 방법
US20120163700A1 (en) Image processing device and image processing method
CN103728729B (zh) 一种裸眼三维显示器
KR101929042B1 (ko) 디스패러티 산출부와 이를 포함한 입체영상 표시장치, 및 디스패러티 산출방법
KR102081111B1 (ko) 입체 영상 디스플레이 장치의 구동방법
CN105812765B (zh) 分屏图像显示方法与装置
CN102256160B (zh) 一种立体图像处理设备及方法
KR101917764B1 (ko) 입체 영상 표시 장치 및 입체 영상 표시 방법
CN104796684A (zh) 裸眼3d视频处理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant