CN105657407B - 头戴显示器及其双目3d视频显示方法和装置 - Google Patents

头戴显示器及其双目3d视频显示方法和装置 Download PDF

Info

Publication number
CN105657407B
CN105657407B CN201511025607.6A CN201511025607A CN105657407B CN 105657407 B CN105657407 B CN 105657407B CN 201511025607 A CN201511025607 A CN 201511025607A CN 105657407 B CN105657407 B CN 105657407B
Authority
CN
China
Prior art keywords
video data
data
video
display
binocular
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201511025607.6A
Other languages
English (en)
Other versions
CN105657407A (zh
Inventor
陈江峰
彭华军
万细苟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Ned Optics Co Ltd
Original Assignee
Shenzhen Nade Optical Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Nade Optical Co Ltd filed Critical Shenzhen Nade Optical Co Ltd
Priority to CN201511025607.6A priority Critical patent/CN105657407B/zh
Publication of CN105657407A publication Critical patent/CN105657407A/zh
Priority to PCT/CN2016/098006 priority patent/WO2017113869A1/zh
Application granted granted Critical
Publication of CN105657407B publication Critical patent/CN105657407B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/344Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance

Abstract

本发明涉及头戴显示器及其双目3D视频显示方法和装置,其中双目3D视频显示方法包括以下步骤:在获取到视度调节或瞳距调节信号时,显示视度或瞳距的调节界面,进行视度调节或瞳距调节;读取待显示的视频数据;产生与视频数据的分辨率对应的标准时序信号,进行非线性平滑处理;判断视频数据为3D视频数据还是2D视频数据;将经过非线性平滑处理后的3D视频数据帧分成两部分;对拆分后的两部分3D视频数据帧分别进行放大处理,将放大后的两部分3D视频数据帧分别发送至两块显示屏进行显示。采用本发明方案可快速方便完成头戴显示器的双目光学模组的双目视度和瞳距的调节及双目3D视频显示,使不同视度和瞳距的使用者得到完美的观影效果。

Description

头戴显示器及其双目3D视频显示方法和装置
技术领域
本发明涉及图像显示算法技术领域,更具体地说,涉及一种头戴显示器及其双目3D视频显示方法和装置。
背景技术
头戴显示器是现代显示技术中一种全新技术,高分辨率微型显示屏技术的发展、成像光学设计以及超精密制造的完善,均为头戴显示器的设计开辟了新途径,使其在增强现实、虚拟现实以及立体显示等方面均有重要应用。
在目前应用较多的用于视频观看的头戴显示器中,视频影像的显示效果是非常关键的技术环节。无论是对于左右分屏显示的头戴显示器、还是对于全屏显示的头戴显示器来说,2D视频显示技术都较为成熟,其显示技术的关键在于3D视频的显示效果。而现有的头戴显示器在满足了正常显示2D视频的情况下,很难保证同时具有优异的3D视频显示效果。同时,对于视力不好的用户而言,其视力的不同状况也影响了其观看到的显示效果。
因此,需要针对视力不佳的用户提供完整的3D视频显示方案,使不同用户均能快速方便完成头戴显示器的双目视度和瞳距的调节,并得到完美的观影效果。
发明内容
本发明要解决的技术问题在于,针对现有技术的上述缺陷,提供一种头戴显示器及其双目3D视频显示方法和装置。
本发明解决其技术问题所采用的技术方案是:
构造一种头戴显示器的双目3D视频显示方法,其中,所述头戴显示器包含两块独立驱动的显示屏;所述双目3D视频显示方法包括以下步骤:
在获取到视度调节或瞳距调节信号时,显示视度或瞳距的调节界面,进行视度调节或瞳距调节;
在获取到用于播放视频的播放启动信号时,读取待显示的视频数据;
产生与所述视频数据的分辨率对应的标准时序信号;
根据所述标准时序信号对所述视频数据进行非线性平滑处理;
判断所述视频数据为3D视频数据还是2D视频数据;
在所述视频数据为3D视频数据时,将经过非线性平滑处理后的3D视频数据帧分成两部分;
对拆分后的两部分3D视频数据帧分别进行放大处理,再将放大后的两部分3D视频数据帧分别发送至两块显示屏进行显示。
本发明所述的双目3D视频显示方法,其中,所述视度调节或瞳距调节过程包括:
获取外部输入的左眼视度调节信号,显示左眼视度调节界面;
获取外部输入的右眼视度调节信号,显示右眼视度调节界面;
获取外部输入的瞳距调节信号,显示瞳距调节界面。
本发明所述的双目3D视频显示方法,其中,所述标准时序信号包括:行同步信号、场同步信号和数据使能信号DE;
根据所述标准时序信号对所述视频数据进行非线性平滑处理的步骤具体包括:
在所述数据使能信号DE有效时,依次读取所述3D视频数据帧第m行、第m+1行和第m+2行像素点的数据,并分别存入三个缓存单元
对当前像素点数据进行非线性平滑处理;
其中,所述m为自然数。
本发明所述的双目3D视频显示方法,其中,将经过非线性平滑处理后的3D视频数据帧分成两部分的步骤具体包括:
对于分辨率为axb的3D视频数据帧,在所述数据使能信号DE有效时,读取经过非线性平滑处理的像素点数据,每读取完一行数据后,令数据使能信号计数器计数加1,记为DE_CN;
判断所述数据使能信号计数器DE_CN的大小;
在DE_CN≥1且DE_CN≤(a/2)时,将所读取的经过非线性平滑处理的像素点数据存入第一缓存区内;
在DE_CN≥(a/2)+1且DE_CN≤a时,将所读取的经过非线性平滑处理的像素点数据存入第二缓存区内。
本发明所述的双目3D视频显示方法,其中,对拆分后的两部分3D视频数据帧分别进行放大处理,再将放大后的两部分3D视频数据帧分别发送至两块显示屏进行显示的步骤具体包括:
读取所述第一缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第一显示屏进行显示;
读取所述第二缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第二显示屏进行显示。
本发明所述的双目3D视频显示方法,其中,在获取用户输入的视度调节信号时,先判断为左眼视度调节信号还是右眼视度调节信号,并根据判断结果分别显示左眼视度调节界面或右眼视度调节界面;
其中,所述左眼视度调节界面和所述右眼视度调节界面分别包括多个方框线条、十字线条和/或文字信息中的一种或多种。
本发明所述的双目3D视频显示方法,其中,所述瞳距调节界面包括从左至右延伸的横线条和从上至下延伸的竖线条,所述横线条的两端设置有垂直于所述横线条的短纵线条,所述竖线条的两端设置有垂直于所述竖线条的短横线条。
本发明所述的双目3D视频显示方法,其中,区分用户输入的是所述左眼视度调节信号、所述右眼视度调节信号、还是所述瞳距调节信号的方式包括:
获取来自同一按键的输入信息,通过同一按键的不同输入次序进行区分;
或者,获取不同按键的输入信息进行区分;
或者,获取不同语音识别输入信息进行区分;
或者,获取触摸屏的不同触摸操作信息进行区分。
本发明所述的双目3D视频显示方法,其中,所述左眼视度调节界面、所述右眼视度调节界面和所述瞳距调节界面为同一调节界面。
本发明所述的双目3D视频显示方法,其中,所述方法还包括步骤:
在所述视频数据为2D视频数据时,对经过非线性平滑处理后的2D视频数据复制成两份,并将两份所述2D视频数据分别显示在两块显示屏上。
本发明还提供了一种头戴显示器的双目3D视频显示装置,其中,所述头戴显示器包含两块独立驱动的显示屏;所述双目3D视频显示装置包括:
视度调节/瞳距调节模块,用于在获取到视度调节或瞳距调节信号时,显示视度或瞳距的调节界面,进行视度调节或瞳距调节;
数据读取模块,用于在获取到用于播放视频的播放启动信号时,读取待显示的视频数据;
图像接口模块,用于产生与视频数据的分辨率对应的标准时序信号;
图像平滑滤波模块,用于根据所述标准时序信号,对所述视频数据进行非线性平滑处理;
判断模块,用于判断所述视频数据为3D视频数据还是2D视频数据;
图像左右分离模块,用于在所述视频数据为3D视频数据时,将经过非线性平滑处理后的3D视频数据帧分成两部分;
图像放大显示模块,用于对拆分后的两部分3D视频数据帧分别进行放大处理,再将放大后的两部分3D视频数据帧分别发送至两块显示屏进行显示。
本发明所述的双目3D视频显示装置,其中,所述视度调节/瞳距调节模块包括:
界面显示单元,用于显示开机界面,以及在获取外部输入的左眼视度调节信号时,显示左眼视度调节界面;以及,在获取外部输入的右眼视度调节信号时,显示右眼视度调节界面;以及,在获取外部输入的瞳距调节信号时,显示瞳距调节界面。
本发明所述的双目3D视频显示装置,其中,所述图像接口模块包括:
时序信号产生单元,用于分别产生行同步信号、场同步信号和数据使能信号DE;
所述图像平滑滤波模块包括:
第一读取单元,用于在所述数据使能信号DE有效时,依次读取所述3D视频数据帧第m行、第m+1行和第m+2行像素点的数据,并分别存入三个缓存单元;
滤波单元,用于对当前像素点的数据进行非线性平滑处理;
其中,所述m为自然数。
本发明所述的双目3D视频显示装置,其中,所述图像放大显示模块包括:
第一放大显示单元,用于读取所述第一缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第一显示屏进行显示;
第二放大显示单元,用于读取所述第二缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第二显示屏进行显示。
本发明所述的双目3D视频显示装置,其中,所述视度调节/瞳距调节模块包括便于用户输入所述视度调节信号和所述瞳距调节信号的以下任一结构:
一个输入按键;或者,两个不同输入按键;或者,语音输入设备;或者,触摸屏。
本发明所述的双目3D视频显示装置,其中,所述装置还包括:
2D视频显示模块,用于在所述视频数据为2D视频数据时,对经过非线性平滑处理后的2D视频数据复制成两份,并将两份所述2D视频数据分别显示在两块显示屏上。
本发明还提供了一种头戴显示器,其中,包含如前面所述的双目3D视频显示装置,或采用如前面所述的任一种双目3D视频显示方法进行3D视频显示。
本发明的有益效果在于:通过完整的视度/瞳距调节方案及优质双目3D视频显示方法,可快速方便完成头戴显示器的双目光学模组的双目视度和瞳距的调节及3D视频显示,使不同视度和瞳距的使用者得到完美的观影效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将结合附图及实施例对本发明作进一步说明,下面描述中的附图仅仅是本发明的部分实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他附图:
图1是本发明的双目3D视频显示方法大体流程图;
图2a是本发明的双目3D视频显示方法中视度/瞳距调节流程图;图2b是左眼视度调节界面参考示意图;图2c是右眼调节界面参考示意图;图2d是瞳距调节界面参考示意图;
图3是本发明的双目3D视频显示方法中步骤S40的详细步骤;
图4是本发明的双目3D视频显示方法中步骤S42的详细步骤;
图5是本发明的双目3D视频显示方法中进行单个像素点非线性平滑处理的参考示图;
图6是本发明的双目3D视频显示方法中步骤S60的详细步骤;
图7是本发明的双目3D视频显示装置原理框图;
图8是本发明的双目3D视频显示装置的图像接口模块原理框图;
图9是本发明的双目3D视频显示装置的图像平滑滤波模块原理框图;
图10是本发明的双目3D视频显示装置的图像左右分离模块原理框图;
图11是本发明的双目3D视频显示装置的图像放大显示模块原理框图。
具体实施方式
为了使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本发明的部分实施例,而不是全部实施例。基于本发明的实施例,本领域普通技术人员在没有付出创造性劳动的前提下所获得的所有其他实施例,都属于本发明的保护范围。
本发明较佳实施例的头戴显示器的双目3D视频显示方法流程如图1所示,其中头戴显示器包含两块显示屏,上述方法开始于步骤S00,还包括以下步骤:
S10、在获取到用于调节头戴显示器的视度或瞳距的视度调节或瞳距调节信号时,显示视度或瞳距的调节界面,进行视度调节或瞳距调节;
S20、在获取到用于播放视频的播放启动信号时,读取待显示的视频数据;
S30、产生与视频数据的分辨率对应的标准时序信号;
S40、根据标准时序信号,对视频数据进行非线性平滑处理;
S50、判断视频数据为3D视频数据还是2D视频数据;
S60、在所述视频数据为3D视频数据时,将经过非线性平滑处理后的3D视频数据帧分成两部分;
S70、对拆分后的两部分3D视频数据帧分别进行放大处理,再将放大后的两部分3D视频数据帧分别发送至头戴显示器的两块显示屏进行显示;
上述双目3D视频显示方法结束于步骤S90。
上述双目3D视频显示方法通过完整的视度/瞳距调节方案及优质双目3D视频显示方法,可快速方便完成头戴显示器的双目光学模组的双目视度和瞳距的调节及3D视频显示,使不同视度和瞳距的使用者得到完美的观影效果。
采用上述步骤S10-S70的处理流程,可有效去除图像白点干扰,滤除图像噪声,结合视距和瞳距调节过程,可使得佩戴者观看到的图像更加清晰。
上述双目3D视频显示方法中,步骤S10中所述视度调节或瞳距调节过程包括:显示开机界面;获取外部输入的左眼视度调节信号,显示左眼视度调节界面;获取外部输入的右眼视度调节信号,显示右眼视度调节界面;获取外部输入的瞳距调节信号,显示瞳距调节界面。
具体地,在获取用户输入的视度调节信号时,判断为左眼视度调节信号还是右眼视度调节信号,并根据判断结果分别显示左眼视度调节界面或右眼视度调节界面;上述左眼视度调节界面和右眼视度调节界面分别包括多个方框线条、十字线条和/或文字信息中的一种或多种,如图2b和图2c所示。
具体地,在获取用户输入的瞳距调节信号时,显示瞳距调节界面。上述瞳距调节界面包括从左至右延伸的横线条和从上至下延伸的竖线条,横线条的两端设置有垂直于横线条的短纵线条,竖线条的两端设置有垂直于竖线条的短横线条,如图2d所示。
上述实施例中,左眼视度调节界面、右眼视度调节界面和瞳距调节界面可以是不同的三个调节界面,或者为同一调节界面。
其中,区分用户输入的是视度调节信号还是瞳距调节信号的方式包括:获取来自同一按键的输入信息,通过同一按键的不同输入次序进行区分;或者,获取不同按键的输入信息进行区分;或者,获取不同语音识别输入信息进行区分;或者,获取触摸屏的不同触摸操作信息进行区分。
参阅图2a的视度/瞳距调节流程,以通过同一模式按键的不同输入次序进行区分为例,上述双目3D视频显示方法中显示视度或瞳距的调节界面的流程为:
在头戴显示器系统上电启动,显示开机界面,预定时间之后自动进入左眼视度调节界面,用户根据提示旋转左眼视度调节旋钮进行视度调节,如调整清晰,单击模式按键退出并进入右眼视度调节界面,用户根据提示旋转右眼视度调节旋钮进行视度调节,如调整清晰,单击模式按键退出并进入瞳距调节界面,用户根据提示滑动瞳距调节滑钮调节瞳距,如画面无重影,单击模式按键退出并进入视频播放主界面,如视频播放主界面显示不清晰,可单击模式按键重新进行视度和/或瞳距调节步骤。
进一步地,上述双目3D视频显示方法中,产生与视频数据的分辨率对应的标准时序信号的步骤具体包括:分别产生行同步信号、场同步信号和数据使能信号DE,通过该三个信号保证后续处理流程同步。
如图3所示,上述双目3D视频显示方法中步骤S40具体包括:
S41、在所述数据使能信号DE有效时,依次读取当前3D视频数据帧第m行、第m+1行和第m+2行像素点的数据,并分别存入三个缓存单元:第一缓存单元、第二缓存单元和第三缓存单元;
S42、对当前像素点的数据进行非线性平滑处理;其中,m为自然数。
如图4所示,上述双目3D视频显示方法中的步骤S42具体包括:
步骤S421、读取以当前像素点为中心点的原始3x3矩阵像素点对应的数据,对3x3矩阵中的每行像素点的数据按由大到小顺序进行排序,形成新的3x3矩阵;即,参阅图5,对于由P11、P12……P32、P33构成的3X3像素点矩阵,对第一行三个像素点数据进行排序为:Pmax1、Pmed1、Pmin1;对第二行三个像素点数据进行排序为:Pmax2、Pmed2、Pmin2;对第三行三个像素点数据进行排序为:Pmax3、Pmed3、Pmin3,得到新的3x3矩阵;
步骤S422、读取并对新的3x3矩阵第一列中的三个数据进行排序,取其中的最小值,存入寄存器,记为Pmax_min;即,参阅图5,比较第一列的三个像素点数据:Pmax1、Pmax2、Pmax3,取其中的最小值,记为Pmax_min;
步骤S423、读取并对新的3x3矩阵第二列中的三个数据进行排序,取其中的中间值,存入寄存器,记为Pmed_med;即,参阅图5,比较第二列的三个像素点数据:Pmed1、Pmed2、Pmed3,取其中的中间值,记为Pmed_med;
步骤S424、读取并对新的3x3矩阵第三列中的三个数据进行排序,取其中的最大值,存入寄存器,记为Pmin_max;即,参阅图5,比较第三列的三个像素点数据:Pmin1、Pmin2、Pmin3,取其中的最小值,记为Pmin_min;
步骤S425、读取并对Pmax_min、Pmed_med和Pmin_max进行排序,取其中间值,存入寄存器,记为Pmed;
步骤S426、将Pmed的值赋给原始3x3矩阵的中心像素点。
如图6所示,上述双目3D视频显示方法中,步骤S60、将经过非线性平滑处理后的视频数据分成两部分的步骤具体包括:
S61、对于分辨率为axb的3D视频数据帧,在数据使能信号DE有效时,读取经过非线性平滑处理的像素点数据,每读取完一行数据后,令数据使能信号计数器计数加1,记为DE_CN;
S62、判断数据使能信号计数器DE_CN的大小;
S63、在DE_CN≥1且DE_CN≤(a/2)时,将所读取的经过非线性平滑处理的像素点数据存入第一缓存区内;
S64、在DE_CN≥(a/2)+1且DE_CN≤a时,将所读取的经过非线性平滑处理的像素点数据存入第二缓存区内。
例如,对于分辨率为1920X1080p的3D视频数据帧,在上述数据使能信号计数器计数至960之前的像素点数据存放于第一缓存区内,DE_CN=961之后的像素点数据存放在第二缓存区内,从而将数据分成两份960X1080p的左右两块数据,也可以根据需要将数据拆分成上下两块。
上述双目3D视频显示方法中,步骤S70、对拆分后的两部分数据分别放大至原始分辨率,将放大后的两部分数据分别通过两块显示屏进行显示的步骤具体包括:读取第一缓存区内的数据并放大图像数据,转换成差分视频接口数据后,发送至第一显示屏进行显示;同时,读取第二缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第二显示屏进行显示。
即,上述步骤S70中,对第一缓存区内数据的读取、放大及显示过程,与对第二缓存区内数据的读取、放大及显示的过程是并行的过程,使得人眼能通过两块显示屏上同时显示的图像看到3D图像显示效果。
经验证,在进行了步骤S10的视度/瞳距调节后,再通过上述步骤S30、S40、S50、S60、S70的3D视频显示流程,可得到优异的3D视频显示效果,使得不同使用者均能看到优异的3D视频画质。
上述双目3D视频显示方法中,优选地,第一显示屏和第二显示屏均为OLED屏,因此需要将上述数据转换成差分视频接口数据后,再发送至两块显示屏进行显示。
进一步地,如图1所示,上述双目3D视频显示方法还包括步骤S80:在所述视频数据为2D视频数据时,对经过非线性平滑处理后的2D视频数据复制成两份,并将两份所述2D视频数据分别显示在两块显示屏上。
在本发明的另一实施例中,还提供了一种头戴显示器的双目3D视频显示装置,如图7所示,其包括:视度调节/瞳距调节模块10,用于在获取到用于调节头戴显示器的视度或瞳距的视度调节或瞳距调节信号时,显示视度或瞳距的调节界面;数据读取模块20,用于在获取到用于播放视频的播放启动信号时,读取待显示的视频数据;图像接口模块40,用于产生与视频数据的分辨率对应的标准时序信号;图像平滑滤波模块50,用于根据标准时序信号,对视频数据进行非线性平滑处理;判断模块30,用于判断视频数据为3D视频数据还是2D视频数据;图像左右分离模块60,在视频数据为3D视频数据时,将经过非线性平滑处理后的3D视频数据分成两部分;图像放大显示模块70,用于对拆分后的两部分3D视频数据帧分别进行放大处理,再将放大后的两部分3D视频数据帧分别发送至两块显示屏进行显示。上述双目3D视频显示装置可快速方便完成头戴显示器的双目光学模组的双目视度和瞳距的调节及3D视频显示,使不同视度和瞳距的使用者得到完美的观影效果。
其中,视度调节/瞳距调节模块10包括:界面显示单元,用于显示开机界面,以及在获取外部输入的左眼视度调节信号时,显示左眼视度调节界面;以及,在获取外部输入的右眼视度调节信号时,显示右眼视度调节界面;以及,在获取外部输入的瞳距调节信号时,显示瞳距调节界面。
其中,如图8所示,上述图像接口模块40包括:时序信号产生单元41,用于分别产生行同步信号、场同步信号和数据使能信号DE。
如图9所示,上述图像平滑滤波模块50包括:第一读取单元51,用于在数据使能信号DE有效时,依次读取视频数据当前帧第m行、第m+1行和第m+2行像素点的数据,并依次存入第一缓存单元、第二缓存单元和第三缓存单元;滤波单元52,用于对当前像素点的数据进行非线性平滑处理;其中,m为自然数。
参阅图5,对于由P11、P12……P32、P33构成的3X3像素点矩阵,对第一行三个像素点数据进行排序为:Pmax1、Pmed1、Pmin1;对第二行三个像素点数据进行排序为:Pmax2、Pmed2、Pmin2;对第三行三个像素点数据进行排序为:Pmax3、Pmed3、Pmin3,得到新的3x3矩阵;比较第一列的三个像素点数据:Pmax1、Pmax2、Pmax3,取其中的最小值,记为Pmax_min;比较第二列的三个像素点数据:Pmed1、Pmed2、Pmed3,取其中的中间值,记为Pmed_med;比较第三列的三个像素点数据:Pmin1、Pmin2、Pmin3,取其中的最小值,记为Pmin_min;读取并对Pmax_min、Pmed_med和Pmin_max进行排序,取其中间值,存入寄存器,记为Pmed;将Pmed的值赋给原始3x3矩阵的中心像素点。
进一步地,如图10所示,上述双目3D视频显示装置中,图像左右分离模块60包括:第二读取单元61,用于对于分辨率为axb的3D视频数据帧,在数据使能信号DE有效时,读取经过非线性平滑处理的像素点数据;计数单元62,用于在第二读取单元每读取完一行数据后,令数据使能信号计数器计数加1,记为DE_CN;第二判断单元63,用于判断数据使能信号计数器DE_CN的大小;第一缓存单元64,用于在DE_CN≥1且DE_CN≤(a/2)时,将所读取的经过非线性平滑处理的像素点数据存入第一缓存区641内;第二缓存单元65,用于在DE_CN≥(a/2)+1且DE_CN≤a时,将所读取的经过非线性平滑处理的像素点数据存入第二缓存区651内。
进一步地是,如图11所示,上述双目3D视频显示装置中,图像放大显示模块70包括:第一放大显示单元71,用于读取第一缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第一显示屏进行显示;第二放大显示单元72,用于读取第二缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第二显示屏进行显示。其中放大图像的方式可以是按列进行放大,或其他方法进行图像放大。
优选地,上述双目3D视频显示装置中,第一显示屏和第二显示屏均为OLED屏。
优选地,上述双目3D视频显示装置中,视度调节/瞳距调节模块包括便于用户输入视度调节信号和瞳距调节信号的以下任一结构:
一个输入按键,可以通过一个输入按键的不同次输入来区分不同的输入信号。例如:在头戴显示器系统上电启动,显示logo,5秒之后自动进入左眼视度调节界面,用户根据提示旋转左眼视度调节旋钮进行视度调节,如调整清晰,单击模式按键退出并进入右眼视度调节界面,用户根据提示旋转右眼视度调节旋钮进行视度调节,如调整清晰,单击模式按键退出并进入瞳距调节界面,用户根据提示滑动瞳距调节滑钮调节瞳距,如画面无重影,单击模式按键退出并进入主界面,如主界面显示不清晰,可单击模式按键重新进行视度和瞳距调节步骤。
或者,通过两个不同输入按键,一个用于进行视度调节信号输入,另一个用于瞳距调节信号输入。
或者,语音输入设备,即接收外部语音控制信息,并进行语音识别,然后根据信息内容进行相应的显示操作。
或者,触摸屏,即通过设置于头戴显示器上的触摸输入设备,例如触摸屏,来接收外部输入的调节信息,可以是点击触摸屏的操作,或者是在触摸屏上滑动的操作。
在进一步的双目3D视频显示装置中,其还包括:2D视频显示模块,用于在视频数据为2D视频数据时,对2D视频数据进行复制,并将原始2D视频数据和复制的2D视频数据分别显示在两块显示屏上。可以通过一个显示模式控制按键实现2D或3D显示模式的切换。
上述双目3D视频显示装置中,各模块和单元由硬件、软件或软/硬件结合实现。
在本发明的另一实施例中,还提供了一种头戴显示器,其中包括如前所述的双目3D视频显示装置,采用如前述任一种双目3D视频显示方法进行3D视频显示。具体地,该头戴显示器还包括主体框架、设置于主体框架上的目镜系统和两块显示屏、PCB板。其中,双目3D视频显示装置及其显示方法参见前述各实施例,在此不再赘述。
应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (13)

1.一种头戴显示器的双目3D视频显示方法,其特征在于,所述头戴显示器包含两块独立驱动的显示屏;所述双目3D视频显示方法包括以下步骤:
在获取到视度调节或瞳距调节信号时,显示视度或瞳距的调节界面,进行视度调节或瞳距调节;
在获取到用于播放视频的播放启动信号时,读取待显示的视频数据;
产生与所述视频数据的分辨率对应的标准时序信号,根据所述标准时序信号对所述视频数据进行非线性平滑处理;
判断所述视频数据为3D视频数据还是2D视频数据;
在所述视频数据为3D视频数据时,将经过非线性平滑处理后的3D视频数据帧分成两部分;
对拆分后的两部分3D视频数据帧分别进行放大处理,再将放大后的两部分3D视频数据帧分别发送至两块所述显示屏进行显示;
所述标准时序信号包括:行同步信号、场同步信号和数据使能信号DE;
根据所述标准时序信号对所述视频数据进行非线性平滑处理的步骤具体包括:
在所述数据使能信号DE有效时,依次读取所述3D视频数据帧第m行、第m+1行和第m+2行像素点的数据,并分别存入三个缓存单元;
对当前像素点数据进行非线性平滑处理;
其中,所述m为自然数;
其中,对拆分后的两部分3D视频数据帧分别进行放大处理,再将放大后的两部分3D视频数据帧分别发送至两块显示屏进行显示的步骤具体包括:
读取第一缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第一显示屏进行显示;
读取第二缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第二显示屏进行显示;
对第一缓存区内数据的读取、放大及显示过程,与对第二缓存区内数据的读取、放大及显示的过程是并行的过程,使得人眼能通过两块显示屏上同时显示的图像看到3D图像显示效果。
2.根据权利要求1所述的双目3D视频显示方法,其特征在于,所述视度调节或瞳距调节过程包括:
获取外部输入的左眼视度调节信号,显示左眼视度调节界面;
获取外部输入的右眼视度调节信号,显示右眼视度调节界面;
获取外部输入的瞳距调节信号,显示瞳距调节界面。
3.根据权利要求2所述的双目3D视频显示方法,其特征在于,将经过非线性平滑处理后的3D视频数据帧分成两部分的步骤具体包括:
对于分辨率为axb的3D视频数据帧,在所述数据使能信号DE有效时,读取经过非线性平滑处理的像素点数据,每读取完一行数据后,令数据使能信号计数器计数加1,记为DE_CN;
判断所述数据使能信号计数器DE_CN的大小;
在DE_CN≥1且DE_CN≤(a/2)时,将所读取的经过非线性平滑处理的像素点数据存入第一缓存区内;
在DE_CN≥(a/2)+1且DE_CN≤a时,将所读取的经过非线性平滑处理的像素点数据存入第二缓存区内。
4.根据权利要求2所述的双目3D视频显示方法,其特征在于,在获取用户输入的视度调节信号时,先判断为左眼视度调节信号还是右眼视度调节信号,并根据判断结果分别显示左眼视度调节界面或右眼视度调节界面;
其中,所述左眼视度调节界面和所述右眼视度调节界面分别包括多个方框线条、十字线条和/或文字信息中的一种或多种。
5.根据权利要求2所述的双目3D视频显示方法,其特征在于,所述瞳距调节界面包括从左至右延伸的横线条和从上至下延伸的竖线条,所述横线条的两端设置有垂直于所述横线条的短纵线条,所述竖线条的两端设置有垂直于所述竖线条的短横线条。
6.根据权利要求4或5所述的双目3D视频显示方法,其特征在于,区分用户输入的是所述左眼视度调节信号、所述右眼视度调节信号、还是所述瞳距调节信号的方式包括:
获取来自同一按键的输入信息,通过同一按键的不同输入次序进行区分;
或者,获取不同按键的输入信息进行区分;
或者,获取不同语音识别输入信息进行区分;
或者,获取触摸屏的不同触摸操作信息进行区分。
7.根据权利要求2所述的双目3D视频显示方法,其特征在于,所述左眼视度调节界面、所述右眼视度调节界面和所述瞳距调节界面为同一调节界面。
8.根据权利要求1所述的双目3D视频显示方法,其特征在于,所述方法还包括步骤:
在所述视频数据为2D视频数据时,对经过非线性平滑处理后的2D视频数据复制成两份,并将两份所述2D视频数据分别显示在两块显示屏上。
9.一种头戴显示器的双目3D视频显示装置,其特征在于,所述头戴显示器包含两块独立驱动的显示屏;所述双目3D视频显示装置包括:
视度调节/瞳距调节模块,用于在获取到视度调节或瞳距调节信号时,显示视度或瞳距的调节界面,进行视度调节或瞳距调节;
数据读取模块,用于在获取到用于播放视频的播放启动信号时,读取待显示的视频数据;
图像接口模块,用于产生与视频数据的分辨率对应的标准时序信号;
图像平滑滤波模块,用于根据所述标准时序信号,对所述视频数据进行非线性平滑处理;
判断模块,用于判断所述视频数据为3D视频数据还是2D视频数据;
图像左右分离模块,用于在所述视频数据为3D视频数据时,将经过非线性平滑处理后的3D视频数据帧分成两部分;
图像放大显示模块,用于对拆分后的两部分3D视频数据帧分别进行放大处理,再将放大后的两部分3D视频数据帧分别发送至两块所述显示屏进行显示;
所述图像接口模块包括:
时序信号产生单元,用于分别产生行同步信号、场同步信号和数据使能信号DE;
所述图像平滑滤波模块包括:
第一读取单元,用于在所述数据使能信号DE有效时,依次读取所述3D视频数据帧第m行、第m+1行和第m+2行像素点的数据,并分别存入三个缓存单元;
滤波单元,用于对当前像素点的数据进行非线性平滑处理;
其中,所述m为自然数;
所述图像放大显示模块包括:
第一放大显示单元,用于读取第一缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第一显示屏进行显示;
第二放大显示单元,用于读取第二缓存区内的数据,并放大图像数据,转换成差分视频接口数据后,发送至第二显示屏进行显示;
对第一缓存区内数据的读取、放大及显示过程,与对第二缓存区内数据的读取、放大及显示的过程是并行的过程,使得人眼能通过两块显示屏上同时显示的图像看到3D图像显示效果。
10.根据权利要求9所述的双目3D视频显示装置,其特征在于,所述视度调节/瞳距调节模块包括:
界面显示单元,用于显示开机界面,以及在获取外部输入的左眼视度调节信号时,显示左眼视度调节界面;以及,在获取外部输入的右眼视度调节信号时,显示右眼视度调节界面;以及,在获取外部输入的瞳距调节信号时,显示瞳距调节界面。
11.根据权利要求10所述的双目3D视频显示装置,其特征在于,所述视度调节/瞳距调节模块包括便于用户输入所述视度调节信号和所述瞳距调节信号的以下任一结构:
一个输入按键;或者,两个不同输入按键;或者,语音输入设备;或者,触摸屏。
12.根据权利要求10所述的双目3D视频显示装置,其特征在于,所述装置还包括:
2D视频显示模块,用于在所述视频数据为2D视频数据时,对经过非线性平滑处理后的2D视频数据复制成两份,并将两份所述2D视频数据分别显示在两块显示屏上。
13.一种头戴显示器,其特征在于,包含如权利要求9-12中任一项所述的双目3D视频显示装置,所述双目3D视频显示装置执行如权利要求1-8中任一种双目3D视频显示方法来进行3D视频显示。
CN201511025607.6A 2015-12-31 2015-12-31 头戴显示器及其双目3d视频显示方法和装置 Active CN105657407B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201511025607.6A CN105657407B (zh) 2015-12-31 2015-12-31 头戴显示器及其双目3d视频显示方法和装置
PCT/CN2016/098006 WO2017113869A1 (zh) 2015-12-31 2016-09-05 头戴显示器及其双目3d视频显示方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201511025607.6A CN105657407B (zh) 2015-12-31 2015-12-31 头戴显示器及其双目3d视频显示方法和装置

Publications (2)

Publication Number Publication Date
CN105657407A CN105657407A (zh) 2016-06-08
CN105657407B true CN105657407B (zh) 2018-11-23

Family

ID=56490811

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201511025607.6A Active CN105657407B (zh) 2015-12-31 2015-12-31 头戴显示器及其双目3d视频显示方法和装置

Country Status (2)

Country Link
CN (1) CN105657407B (zh)
WO (1) WO2017113869A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105657407B (zh) * 2015-12-31 2018-11-23 深圳纳德光学有限公司 头戴显示器及其双目3d视频显示方法和装置
WO2017166193A1 (zh) * 2016-03-31 2017-10-05 深圳多哚新技术有限责任公司 一种基于vr图像的显示屏驱动的方法和装置
CN106507093A (zh) * 2016-09-26 2017-03-15 北京小鸟看看科技有限公司 一种虚拟现实设备的显示模式切换方法和装置
CN106792094A (zh) * 2016-12-23 2017-05-31 歌尔科技有限公司 Vr设备播放视频的方法和vr设备
JP7243193B2 (ja) * 2019-01-10 2023-03-22 セイコーエプソン株式会社 表示システム、表示システムの制御方法、情報処理装置、及び情報処理装置の制御プログラム
CN112055264B (zh) * 2019-06-06 2022-11-01 舜宇光学(浙江)研究院有限公司 一种视频数据拆分方法及其系统以及电子设备和计算系统
JP2021056369A (ja) 2019-09-30 2021-04-08 セイコーエプソン株式会社 ヘッドマウントディスプレイ
CN113268302B (zh) * 2021-05-27 2023-08-11 杭州灵伴科技有限公司 一种头戴式显示设备的显示模式切换方法、装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1611988A (zh) * 2003-10-27 2005-05-04 深圳国际技术创新研究院 眼镜式显示器
CN102967937A (zh) * 2011-08-30 2013-03-13 索尼公司 头戴式显示器和显示控制方法
CN103901620A (zh) * 2014-03-20 2014-07-02 成都理想境界科技有限公司 一种头戴显示设备
CN103901621A (zh) * 2014-03-20 2014-07-02 成都理想境界科技有限公司 一种头戴显示设备
CN104581119A (zh) * 2014-12-31 2015-04-29 青岛歌尔声学科技有限公司 一种3d图像的显示方法和一种头戴设备
CN104822061A (zh) * 2015-04-30 2015-08-05 小鸟科技有限公司 头戴式3d显示器的瞳距调节方法、系统、以及模块
CN105100779A (zh) * 2015-09-18 2015-11-25 云南师范大学 一种头戴式立体视频播放方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5685689B2 (ja) * 2011-08-22 2015-03-18 日立マクセル株式会社 映像表示装置
US8482527B1 (en) * 2012-09-14 2013-07-09 Lg Electronics Inc. Apparatus and method of providing user interface on head mounted display and head mounted display thereof
JP6375591B2 (ja) * 2013-01-15 2018-08-22 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、画像表示システム
US9411160B2 (en) * 2013-02-12 2016-08-09 Seiko Epson Corporation Head mounted display, control method for head mounted display, and image display system
JP6212877B2 (ja) * 2013-02-20 2017-10-18 富士通株式会社 画像表示装置及び画像表示方法
CN103901622B (zh) * 2014-04-23 2016-05-25 成都理想境界科技有限公司 3d头戴观影设备及对应的视频播放器
CN104202591A (zh) * 2014-09-01 2014-12-10 北京行云时空科技有限公司 一种3d图像显示系统及方法
CN105657407B (zh) * 2015-12-31 2018-11-23 深圳纳德光学有限公司 头戴显示器及其双目3d视频显示方法和装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1611988A (zh) * 2003-10-27 2005-05-04 深圳国际技术创新研究院 眼镜式显示器
CN102967937A (zh) * 2011-08-30 2013-03-13 索尼公司 头戴式显示器和显示控制方法
CN103901620A (zh) * 2014-03-20 2014-07-02 成都理想境界科技有限公司 一种头戴显示设备
CN103901621A (zh) * 2014-03-20 2014-07-02 成都理想境界科技有限公司 一种头戴显示设备
CN104581119A (zh) * 2014-12-31 2015-04-29 青岛歌尔声学科技有限公司 一种3d图像的显示方法和一种头戴设备
CN104822061A (zh) * 2015-04-30 2015-08-05 小鸟科技有限公司 头戴式3d显示器的瞳距调节方法、系统、以及模块
CN105100779A (zh) * 2015-09-18 2015-11-25 云南师范大学 一种头戴式立体视频播放方法

Also Published As

Publication number Publication date
CN105657407A (zh) 2016-06-08
WO2017113869A1 (zh) 2017-07-06

Similar Documents

Publication Publication Date Title
CN105657407B (zh) 头戴显示器及其双目3d视频显示方法和装置
US9986229B2 (en) Method, system and module for adjusting interpupillary distance of head-mounted 3D displays
US10089769B2 (en) Augmented display of information in a device view of a display screen
Moshtael et al. High tech aids low vision: a review of image processing for the visually impaired
CN112601509B (zh) 用于低视力用户的混合式透视增强现实系统和方法
US10082867B2 (en) Display control method and display control apparatus
US9911214B2 (en) Display control method and display control apparatus
CN105676455B (zh) 头戴式显示设备
CN110764859B (zh) 一种对屏幕可视区域进行自动调整及优化显示的方法
CN109495734A (zh) 用于自动立体三维显示器的图像处理方法和设备
CN101795375B (zh) 投影显示装置及投影控制方法
CN107037592B (zh) 头戴显示设备的视觉优化系统、智能终端及头戴设备
WO2016115849A1 (zh) 图像亮度的调节方法及调节装置、显示装置
CN103018905A (zh) 头戴式体感操控显示系统及其方法
CN103105930A (zh) 一种基于视频图像的非接触式智能输入方法及装置
CN106375868A (zh) 一种显示设备切换观看模式的方法及装置
KR102204212B1 (ko) 실감형 콘텐츠 제공 장치 및 방법
KR20190104218A (ko) 가상현실용 머리-착용형 장치
CN107065198B (zh) 头戴显示设备的视觉优化方法
CN104035544B (zh) 一种控制电子设备的方法及电子设备
CN205608290U (zh) 头戴式显示设备
US20120057778A1 (en) Image processing apparatus, image processing method, and computer program
CN102186094A (zh) 一种媒体文件的播放方法及装置
CN106249866A (zh) 视觉辅助眼镜及其图像识别方法
CN107291233A (zh) 头戴3d显示设备的视觉优化系统、智能终端及头戴设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant