CN106034232A - 显示控制方法和装置 - Google Patents

Abstract

本申请实施例公开了一种显示控制方法和装置，其中，一种显示控制方法包括：确定一第一光场显示设备用于播放第一视频的第一显示区域和一播放时序对齐参考信息；根据所述播放时序对齐参考信息控制一第二显示设备，在所述第一视频的至少一第一帧间隔内，于所述第一显示区域显示第二视频的至少一第二帧，其中，所述第一视频和所述第二视频为对同一内容源进行时域下采样得到的不同部分。该方案可提高光场信息内容源实际显示的时间分辨率增益，提高时域显示控制的灵活性。

Description

显示控制方法和装置

技术领域

本申请涉及显示技术领域，特别是涉及一种显示控制方法和装置。

背景技术

光场显示技术可通过传统显示技术类似的硬件结构实现相对灵活的显示效果，例如光场3D显示、光场投影显示、穿戴式设备上的光场近眼显示、光场显示的视力纠正等等，近年来引起研究人员愈发普遍的关注。

某种程度上光场显示技术可以看作是一种介于传统的双目立体显示技术和全息显示技术之间的3D显示技术。光场显示相比于传统的双目立体显示技术而言其能够呈现多视角信息，相比于全息显示技术而言其需要处理的数据量较少、但相比于双目立体显示而言其所需处理的数据量仍然有百倍量级的增加，因此光场显示的系统设计时会进行一定的性能权衡(trade-off)，如采用较低帧率显示光场信息，由此来减少内容播放所需处理的总数据量，然而，低帧率显示在某些场景下会造成显示画面的拖尾、跃变等，由此影响用户的观看效果。

发明内容

在下文中给出了关于本申请的简要概述，以便提供关于本申请的某些方面的基本理解。应当理解，这个概述并不是关于本申请的穷举性概述。它并不是意图确定本申请的关键或重要部分，也不是意图限定本申请的范围。其目的仅仅是以简化的形式给出某些概念，以此作为稍后论述的更详细描述的前序。

本申请实施例提供一种显示控制方法和装置。

一方面，本申请实施例提供了一种显示控制方法，包括：

确定一第一光场显示设备用于播放第一视频的第一显示区域和一播放时序对齐参考信息；

根据所述播放时序对齐参考信息控制一第二显示设备，在所述第一视频的至少一第一帧间隔内，于所述第一显示区域显示第二视频的至少一第二帧，其中，所述第一视频和所述第二视频为对同一内容源进行时域下采样得到的不同部分。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，所述第一光场显示设备为光场显示阵列。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，所述第二显示设备为近眼显示设备。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，所述近眼显示设备为近眼光场显示设备。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，所述第一视频的时间分辨率大于或等于所述第二视频的时间分辨率。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，所述播放时序对齐参考信息包括：所述第一视频的播放时间信息。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，所述第一视频的播放时间信息包括：所述第一视频播放的绝对时间信息。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，确定所述第一显示区域和所述播放时序对齐参考信息之前，还包括：确定所述第二显示设备相对所述第一光场显示设备的视角信息；根据所述视角信息确定所述内容源。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，确定所述第一显示区域和所述播放时序对齐参考信息之前，还包括：对所述内容源进行第一时域下采样得到所述第一视频；向所述第一光场显示设备发送所述第一视频。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，控制所述第二显示设备显示所述第二视频的至少一第二帧之前，还包括：对所述内容源进行第二时域下采样得到所述第二视频；向所述第二显示设备发送所述第二视频。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，控制所述第二显示设备显示所述第二视频的至少一第二帧之前，还包括：根据所述第一视频中相邻帧的图像差异，确定所述内容源中的第二时域下采样区；对所述第二时域下采样区进行第二时域下采样得到所述第二视频；向所述第二显示设备发送所述第二视频。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，确定所述内容源中的第二时域下采样区，包括：确定所述第一视频中相邻帧的图像差异满足预设条件的至少一时段；确定所述内容源与所述至少一时段对应的部分为所述第二时域下采样区。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，向所述第二显示设备发送所述第二视频之前，还包括：确定下采样得到的所述第二视频中介于所述第一帧间隔内的第二帧；将确定的所述第二帧中自对齐下一第一帧相应时刻之后的部分替换为空白帧。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，控制所述第二显示设备在一所述第一帧间隔内显示所述第二视频的至少一第二帧之后，还包括：控制一所述第一帧间隔内所述至少一第二帧中的末帧，显示至对齐下一第一帧的显示时刻之后，在所述末帧剩余显示时长内，停止或透明化显示所述末帧或者显示一空白帧。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，向所述第二显示设备发送所述第二视频之前，还包括：将所述第二视频中介于所述第一帧间隔内的至少一第二帧的局部图像内容，进行下采样或替换为空白，未进行下采样或替换为空白的其他图像内容，与所述第一视频中相邻帧的图像差异满足预设条件的图像内容对应。

结合本申请实施例提供的任一种显示控制方法的实现方式，可选的，所述“控制一第二显示设备，在所述第一视频的至少一第一帧间隔内，于所述第一显示区域显示第二视频的至少一第二帧”之前，还包括：移动所述第二显示设备的位置和/或改变所述第二显示设备的光学投射参数，以使所述第二显示设备的对焦显示区域为所述第一显示区域或在所述第一显示区域内。

另一方面，本申请实施例还提供了一种显示控制装置，包括：

一信息确定模块，用于确定一第一光场显示设备用于播放第一视频的第一显示区域和一播放时序对齐参考信息；

一显示控制模块，用于根据所述播放时序对齐参考信息控制一第二显示设备，在所述第一视频的至少一第一帧间隔内，于所述第一显示区域显示第二视频的至少一第二帧，其中，所述第一视频和所述第二视频为对同一内容源进行时域下采样得到的不同部分。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述第一光场显示设备为光场显示阵列。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述第二显示设备为近眼显示设备。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述近眼显示设备为近眼光场显示设备。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述第一视频的时间分辨率大于或等于所述第二视频的时间分辨率。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述播放时序对齐参考信息包括：所述第一视频的播放时间信息。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述第一视频的播放时间信息包括：所述第一视频播放的绝对时间信息。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述显示控制装置还包括：一视角确定模块，用于确定所述第二显示设备相对所述第一光场显示设备的视角信息；一内容源确定模块，用于根据所述视角信息确定所述内容源。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述显示控制装置还包括：一第一视频时域下采样模块，用于对所述内容源进行第一时域下采样得到所述第一视频；一第一视频发送模块，用于向所述第一光场显示设备发送所述第一视频。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述显示控制装置还包括：一第二视频时域下采样模块，用于对所述内容源进行第二时域下采样得到所述第二视频；一第二视频发送模块，用于向所述第二显示设备发送所述第二视频。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述显示控制装置还包括：一下采样区确定模块，用于根据所述第一视频中相邻帧的图像差异，确定所述内容源中的第二时域下采样区；一第二视频时域下采样模块，用于对所述第二时域下采样区进行第二时域下采样得到所述第二视频；一第二视频发送模块，用于向所述第二显示设备发送所述第二视频。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，，所述下采样区确定模块包括：一时段确定子模块，用于确定所述第一视频中相邻帧的图像差异满足预设条件的至少一时段；一下采样区确定子模块，用于确定所述内容源与所述至少一时段对应的部分为所述第二时域下采样区。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述显示控制装置还包括：一第二帧确定模块，用于确定下采样得到的所述第二视频中介于所述第一帧间隔内的第二帧；一空白帧替换模块，用于将确定的所述第二帧中自对齐下一第一帧相应时刻之后的部分替换为空白帧。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述显示控制装置还包括：一显示补充控制模块，用于控制一所述第一帧间隔内所述至少一第二帧中的末帧，显示至对齐下一第一帧的显示时刻之后，于所述末帧剩余显示时长内，停止或透明化显示所述末帧或者显示一空白帧。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述显示控制装置还包括：一第二帧内容处理模块，用于将所述第二视频中介于所述第一帧间隔内的至少一第二帧的局部图像内容，进行下采样或替换为空白，未进行下采样或替换为空白的其他图像内容，与所述第一视频中相邻帧的图像差异满足预设条件的图像内容对应。

结合本申请实施例提供的任一种显示控制装置的实现方式，可选的，所述显示控制装置还包括：一显示区域调节模块，用于移动所述第二显示设备的位置和/或改变所述第二显示设备的光学投射参数，以使所述第二显示设备的对焦显示区域为所述第一显示区域或在所述第一显示区域内。

本申请实施例提供的技术方案，将同一内容源从时域维度进行不同下采样所得到的第一视频和第二视频，分别通过第一光场显示设备和第二显示设备进行时分联合显示，进行显示控制时，可根据播放时序参考信息，控制第二显示设备在所述第一视频的至少一个第一帧间隔内插入显示所述第二视频的至少一个第二帧，第二帧显示的区域为所述第一视频的第一显示区域，这样，通过第二显示设备在第一显示区域时域错开的插帧显示同一内容源的其他部分，使得第一光场显示设备显示的第一视频和第二显示设备显示的第二视频在时域上叠加，由此可不增加所述第一光场显示设备数据计算量的同时，提高光场信息内容源实际显示的时间分辨率增益和时域显示控制的灵活性，有利于改善用户在第一显示区域的视频观看效果。

通过以下结合附图对本申请的可选实施例的详细说明，本申请的这些以及其它的优点将更加明显。

附图说明

本申请可以通过参考下文中结合附图所给出的描述而得到更好的理解，其中在所有附图中使用了相同或相似的附图标记来表示相同或者相似的部件。所述附图连同下面的详细说明一起包含在本说明书中并且形成本说明书的一部分，而且用来进一步举例说明本申请的可选实施例和解释本申请的原理和优点。在附图中：

图1为本申请实施例提供的一种显示控制方法的流程图；

图2为本申请实施例提供的一种光场显示阵列的结构示意图；

图3为本申请实施例提供的显示控制的可选应用示例一；

图4为本申请实施例提供的显示控制的可选应用示例二；

图5为本申请实施例提供的显示控制的可选应用示例三；

图6为本申请实施例提供的显示控制的可选应用示例四；

图7为本申请实施例提供的显示控制的可选应用示例五；

图8为本申请实施例提供的一种显示控制装置的逻辑框图；

图9为本申请实施例提供的另一种显示控制装置的逻辑框图；

图10为本申请实施例提供的又一种显示控制装置的逻辑框图。

本领域技术人员应当理解，附图中的元件仅仅是为了简单和清楚起见而示出的，而且不一定是按比例绘制的。例如，附图中某些元件的尺寸可能相对于其他元件放大了，以便有助于提高对本申请实施例的理解。

具体实施方式

在下文中将结合附图对本申请的示范性实施例进行详细描述。为了清楚和简明起见，在说明书中并未描述实际实施方式的所有特征。然而，应该了解，在开发任何这种实际实施例的过程中必须做出很多特定于实施方式的决定，以便实现开发人员的具体目标，例如，符合与系统及业务相关的那些限制条件，并且这些限制条件可能会随着实施方式的不同而有所改变。此外，还应该了解，虽然开发工作有可能是非常复杂和费时的，但对得益于本公开内容的本领域技术人员来说，这种开发工作仅仅是例行的任务。

在此，还需要说明的一点是，为了避免因不必要的细节而模糊了本申请，在附图和说明中仅仅描述了与根据本申请的方案密切相关的装置结构和/或处理步骤，而省略了对与本申请关系不大的、本领域普通技术人员已知的部件和处理的表示和描述。

下面结合附图(若干附图中相同的标号表示相同的元素)和实施例，对本申请的具体实施方式作进一步详细说明。以下实施例用于说明本申请，但不用来限制本申请的范围。

本领域技术人员可以理解，本申请中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等，既不代表任何特定技术含义，也不表示它们之间的必然逻辑顺序。

图1为本申请实施例提供的一种显示控制方法的流程图。本申请实施例提供的显示控制方法的执行主体可为某一显示控制装置。所述显示控制装置的设备表现形式不受限制，例如所述显示控制装置可为某一独立的部件，该部件分别与二个显示设备(如一第一光场显示设备和一第二显示设备等)配合通信；或者，所述显示控制装置可作为某一功能模块集成在一显示设备中，如集成在本申请实施例所述的一第二显示设备中。本申请实施例对此并不限制。具体如图1所示，本申请实施例提供的一种显示控制方法包括：

S101：确定一第一光场显示设备用于播放第一视频的第一显示区域和一播放时序对齐参考信息。

所述第一显示区域和所述播放时序参考信息的确定，可以在同一步骤中进行，也可在不同步骤中进行，本申请实施例对此并不限制。

S102：根据所述播放时序对齐参考信息控制一第二显示设备，在所述第一视频的至少一第一帧间隔内，于所述第一显示区域显示第二视频的至少一第二帧，其中，所述第一视频和所述第二视频为对同一内容源进行时域下采样得到的不同部分。

为便于描述，不妨将第一视频的帧称为第一帧，第一视频的两个连续帧之间的间隔称为第一帧间隔，将第二视频的帧称为第二帧。

从技术发展的趋势来看，光场采集设备中图像传感器采集能力高于光场显示设备的图像显示能力，采集到的光场信息的信息量远高于显示的光场信息量，即光场信息的采集能力和显示能力较不匹配。由于光场信息显示构成中所需处理的数据量很大，运算复杂度高，因此，单个光场显示设备要实现高质量的3D图像显示的成本很高，而权衡成本、功耗等因素采取低帧率显示的方案，光场显示设备实际显示的内容和内容源的时间分辨率方面较不匹配，在某些场景下会影响用户的观看效果。

本申请实施例提供的技术方案，可从时域维度对同一内容源进行不同的下采样，来分别得到采样结果不同的所述第一视频和所述第二视频，所述第一视频用于在第一光场显示设备上显示，所述第二视频用于在第二显示设备上显示。

采用本申请实施例提供的技术方案进行显示控制时，可对光场显示设备显示的内容进行时分显示的补充，改善用户的观看效果，具体的，可根据所述播放时序参考信息将所述第二视频的播放时序和所述第一视频的播放时序对齐，并在所述第一视频的至少一个第一帧间隔内插入显示所述第二视频的至少一个第二帧，第二帧显示的区域为所述第一视频的第一显示区域，这样，通过第二显示设备在第一显示区域时域错开的插帧显示同一内容源的其他部分，使得第一光场显示设备显示的第一视频和第二显示设备显示的第二视频在时域上叠加，由此可不增加所述第一光场显示设备数据计算量的同时，提高光场信息内容源实际显示的时间分辨率增益和时域显示控制的灵活性，有利于改善用户在第一显示区域的视频观看效果。

可选的，所述第一光场显示设备为光场显示阵列。光场显示阵列可包括阵列分布的N×M个显示单元，其中，N为大于或等于1的整数、且M为大于1的整数，或者，N为大于1的整数、且M为大于或等于1的整数。所述光场显示阵列中各显示单元同构或者至少部分显示单元异构，各显示单元的阵列排列方式可根据图像显示的实际需要，例如，各显示单元阵列分布在同一平面上，或者，各显示单元在阵列分布在一弧形面上，等等。光场显示阵列的一种可选结构如图2所示，包括沿一定曲率的弧线依次排列的多个显示单元，一显示单元分别显示某光场信息的一视角的对焦图像(2D图像)，不同显示单元可显示不同视角的对焦图像，这样，各显示单元分别显示的各视角的对焦图像在显示空间中叠加显示，可一定程度上恢复光场信息，实现用户裸眼可看到叠加的3D图像的显示效果。一2D图像相当于一视频中的一静态帧，多幅2D图像以一定时序播放即相当于一视频的播放。光场显示阵列用于播放第一视频的第一显示区域，可为但不限于光场显示阵列中用于播放第一视频的显示单元所发出的光线在空间中传播覆盖的整体或局部区域。光场显示阵列通过光学结构的设计一定程度上可减少光场信息显示的数据运算量，然而基于光场显示阵列进行光场显示时，对待显示的光场中不同视角的信息进行处理并经各视角相应的显示单元协同显示等控制，涉及到数据运算量仍然很大，权衡成本、功耗等因素，可降低光场显示阵列各显示单元显示的帧率，即通过光场显示阵列显示时间分辨率低于内容源实际时间分辨率的时域下采样后的第一视频，并通过第二显示设备时域上的联合显示对视频显示的时间分辨率进行一定的补偿，由此有利于提高光场信息的显示质量。

可选的，所述第二显示设备为近眼显示设备。所述近眼显示设备可为传统的近眼显示设备(如非光场显示的透视(See-through)智能眼镜等)，还可为近眼光场显示设备(如透视的光场智能眼镜等)，本申请实施例对此并不限制。用户佩戴近眼显示设备观看时，第一光场显示设备(如光场显示阵列等)显示的第一视频和近眼显示设备(如透视智能眼镜等)显示的第二视频各自在用户眼底的成像在时域上进行叠加，由此提高了用户实际观看到的视频显示帧率，有利于改善观看效果。

可选的，控制所述第二显示设备显示所述第二视频的至少一第二帧之前，还包括：移动所述第二显示设备的位置和/或改变所述第二显示设备的光学投射参数，以使所述第二显示设备的对焦显示区域为所述第一显示区域或在所述第一显示区域内。所述光学投射参数可包括但不限于：透镜的折射率、焦距、光学元件之间的间距，等等，通过第二显示设备(如近眼显示设备)光学投射参数的改变，在第一光场显示设备显示所述第一视频的第一显示区域时分插入显示所述第二视频的相应帧，用户观看该第一显示区域显示的内容时，二个显示设备分别显示的图像在用户眼底的成像在时域上进行叠加，使得用户实际观看到的视频的时间分辨率相对第一光场显示设备单独显示视频的时间分辨率有所增加，由此有利于改善观看效果。

可选的，所述第一视频的时间分辨率大于或等于所述第二视频的时间分辨率。该情形下，第一光场显示设备可用较高的帧率显示第一视频，第二显示设备根据显示内容的特性对第一光场显示设备显示的第一视频进行时域上的补充显示，二者时分配合来获取实际显示的时间分辨率的增益，提高时域显示控制的灵活性。

所述播放时序对齐参考信息为用于所述第二视频和所述第一视频进行播放时序对齐的参考信息。可选的，所述播放时序对齐参考信息包括：所述第一视频的播放时间信息。所述第一视频的播放时间信息可为所述第一视频某一帧(如起始帧、任一中间帧等)播放的时刻，以便于第二显示设备进行所述第二视频播放时序的对齐。进一步的，所述第一视频的播放时间信息可为所述第一光场显示设备播放所述第一视频的相对时间信息，通过相对时间信息的交互和校准等处理，将第二显示设备播放所述第二视频的播放时序与第一视频的播放时序对齐。或者，所述第一视频的播放时间信息可包括所述第一视频播放的绝对时间信息，如第一视频播放的绝对时刻，采用绝对时刻对齐播放时序的方案，有利于减小第一光场显示设备和第二显示设备关于播放时序对齐所需信息的交互。

所述内容源为所述第一视频和所述第二视频的采样基础。其中，所述内容源可预先确定，或者，可根据第二显示设备相对所述第一光场显示设备的视角信息来动态确定，例如，可选的，本申请实施例提供的显示控制方法在确定所述第一显示区域和所述播放时序对齐参考信息之前，还包括：确定所述第二显示设备相对所述第一光场显示设备的视角信息；根据所述视角信息确定所述内容源。所述第一光场显示设备进行光场信息显示时，不同显示单元显示的光场信息的视角信息可能不同。光场信息包括多个视角的内容，在某些情形下，光场信息一视角的相关内容(可视为与该视角对应的内容源)可通过一显示单元显示，也就是说，在光场信息显示过程中，不同视角对应的内容源可能不同。根据第二显示设备相对第一光场显示设备的视角信息确定内容源的方案，通过第二显示设备对第一光场显示设备显示的光场信息的该视角信息对应的内容进行时分补充显示，有利于针对性改善光场信息局部视角的观看效果，提高时域显示控制的灵活性。不妨以图2所示的光场显示阵列为例，一视角的内容源可通过一显示单元进行显示，用户可佩戴一智能眼镜在一光场显示阵列前观看内容，用户实际观看到的内容和其相对于光场显示阵列的视角有关，因此，可确定智能眼镜相对光场显示阵列的屏幕(所述屏幕可为但不限于散射屏幕)所在位置的视角信息，确定与该视角信息对应的内容源为所述第一视频和所述第二视频时域采样的基础，这样，通过智能眼镜对光场显示阵列该视角未显示的内容进行时分显示的补充，二个显示设备关于该视角的内容的显示在用户眼底的成像进行时域上的叠加，使得用户观看到时间分辨率较高的显示内容，有利于提高显示质量，改善用户体验。

便于区分描述起见，本申请实施例中，为获取所述第一视频对所述内容源进行的时域下采样处理，不妨称为第一时域下采样；为获取所述第二视频对所述内容源进行的时域下采样处理，不妨称为第二时域下采样。所述第一时域下采样的执行主体可为显示控制装置或第一光场显示设备，所述第二时域下采样的执行主体可为显示控制装置或第二显示设备，实现方式非常灵活。

可选的，确定所述第一显示区域和所述播放时序对齐参考信息之前，所述显示控制方法还包括：对所述内容源进行第一时域下采样得到所述第一视频；向所述第一光场显示设备发送所述第一视频。第一视频包括内容源在时域维度按某种方式进行下采样后的部分内容，即采样得到的第一视频的时间分辨率低于内容源的时间分辨率。采样得到的第一视频可发送给第一光场显示设备进行显示，该方案可减小第一光场显示设备显示光场信息的计算量，减少显示控制装置和第一光场显示设备的交互和数据传输量，也有利于显示控制装置采用与第一视频不同的时域采样方式确定第二显示设备待显示的第二视频。当然，也可由第一光场显示设备对内容源进行第一时域下采样来获得所述第一视频，本申请实施例对此并不限制。

可选的，控制所述第二显示设备显示所述第二视频的至少一第二帧之前，还包括：对所述内容源进行第二时域下采样得到所述第二视频；向所述第二显示设备发送所述第二视频。第二视频包括内容源在时域维度按某种方式进行下采样后的部分内容，即采样得到的第二视频的时间分辨率低于内容源的时间分辨率。对内容源进行第二时域下采样得到的第二视频和对内容源进行第一时域下采样得到的第一视频不同，也就是说，经过时域下采样后得到的所述第一视频和所述第二视频包括了同一内容源的不同部分，第一光场显示设备显示的某一视角的第一视频和第二显示设备显示的第二视频在时分互补，以显示内容源更多的信息，改善用户对二个显示设备显示内容的整体观看效果。当然，也可由第二显示设备对内容源进行第二时域下采样来获得所述第二视频，本申请实施例对此并不限制。

可选的应用示例如图3所示，可对待显示的光场信息某一视角对应的内容源进行不同方式的时域下采样，分别得到用于在第一光场显示设备上显示的第一视频和用于在第二显示设备显示的第二视频，从时域上看，第一视频的各第一帧和第二视频的各第二帧在时间轴上交错分布，播放时序对齐后，在第一光场显示设备显示的每一第一帧间隔内，第二显示设备显示一第二帧，二个显示设备在同一显示区域显示的内容在用户眼底的成像进行时域叠加，从用户观看效果来看，相当于用户看到了播放帧率更高的视频，如第一光场显示设备对第一视频的播放帧率为15fps，第二显示设备对第二视频的播放帧率为15fps，二个显示设备在同一显示区域显示的内容在用户眼底的成像进行时域叠加，相当于用户看到了播放帧率为30fps的视频。

在实际应用中，可在所述第一光场显示设备对第一视频播放的整个时段，通过第二显示设备进行第二视频的时分补充显示，可选示例如图3所示。或者，可根据内容源的内容性质，对所述第一视频播放的部分时段，通过第二显示设备进行第二视频的时分补充显示，该情形下，可根据所述第一视频中相邻帧的图像差异，确定所述内容源中的第二时域下采样区，对所述第二时域下采样区进行第二时域下采样得到所述第二视频，向所述第二显示设备发送所述第二视频。在第一视频播放过程中，如果内容涉及静止对象或场景变化较小等部分，采用较低帧率进行播放，对用户观看的视觉效果影响较小。而如果播放内容涉及运动对象或场景变化较大等部分，对应的帧的图像的整体或者局部差异往往较大，对于这部分内容，如果还是采用较低帧率进行播放，则易给用户观看造成画面拖尾、跃变等视觉效果，用户体验较差。采用该方案，可根据第一视频相邻帧的图像差异时域下采样第二视频，以通过第二显示设备针对性对第一视频播放的局部时段进行时域插帧补充显示，使得该时段二个显示设备分别显示的内容在用户眼底的成像进行时域叠加，提高用户实际观看到的视频的时间分辨率，由此有利于用户实际观看到的视频的显示质量，改善用户体验。

可选的，根据所述第一视频中相邻帧的图像差异，确定所述内容源中的第二时域下采样区，包括：确定所述第一视频中相邻帧的图像差异满足预设条件的至少一时段；确定所述内容源与所述至少一时段对应的部分为所述第二时域下采样区。所述预设条件可根据实际需要灵活确定，如可为两帧图像整体或者局部区域中的灰度差值不为零的像素点的数量为某一阈值等等，该情形下，可确定第一视频中两相邻帧的图像整体或局部区域中各像素点的灰度差值，统计灰度差值不为零的像素点的个数，并将统计结果与所述阈值进行比较，如果统计结果超过所述阈值，则可将内容源对应这二个相邻帧之间时段的部分纳入第二时域下采样区，对第二时域下采样区进行第二时域下采样得到第二视频。一可选的应用示例如图4所示，可通过图像分析等手段确定第一视频的部分时段(如167ms-375ms)，对内容源与该部分时段对应的部分进行第二时域下采样得到第二视频，第二视频的各第二帧与第一视频该部分时段的各第一帧交错分布，这样，在第一光场显示设备显示该部分时段的第一帧间隔内，第二显示设备在第一的显示区域时分插入显示一第二帧，二个显示设备该部分时段显示的图像在用户眼底成像在时域上进行叠加，使得用户看到该部分时段内容的帧率或时间分辨率得到增益，由此改善了用户对该部分时段显示内容的观看效果。该方案通过对局部时段的时分联合显示控制，可让用户体验到对内容源不同部分的可变帧率的整体观看效果，如0ms-167ms的帧率为24fps、167ms-375ms的整体等效帧率为24fps、375ms-500ms的帧率为24fps，由此实现根据内容特性对第一光场显示设备低帧率显示的显示品质的针对性补充，有利于提高用户的观看质量，改善用户体验。

在实际应用中，可通过第一视频的时域下采样方式和第二视频的时域下采样方式进行合理设计，以实现内容源实际显示的时间分辨率的增益，改善视频观看效果。可选的，向所述第二显示设备发送所述第二视频之前，还包括：确定下采样得到的所述第二视频中介于所述第一帧间隔内的第二帧；将确定的所述第二帧中自对齐下一第一帧相应时刻之后的部分替换为空白帧。该方案通过对时域下采样得到的第二视频的空白帧插入处理，进一步改善用户内容观看的视觉效果，还有利于减少与第二显示设备的控制交互和/或传输的数据量。例如，如图5所示，第二视频在一第二帧中自对齐下一第一帧相应时刻之后的部分替换为空白帧，如67ms-100ms、133ms-167ms、199ms-233ms、267ms-299ms、333ms-367ms、400ms-433ms、466ms-499ms等部分替换为空白帧。这样，在进行显示控制时，第二显示设备在某一第一帧间隔内(如0ms-67ms)时分插入显示的第二帧持续到下一第一帧显示时刻(如67ms)，即显示空白帧，空白帧显示持续至下一第二帧的显示时刻(如100ms)。采用该方案，可避免第二显示设备对视频显示的频繁开关控制，减少第二视频时分插入显示的第二帧对第一视频正常显示的干扰，由此进一步改善用户观看到的视觉效果。当然，也可对第一视频的内容进行空白帧的插入处理，如图6所示，第一视频在一第一帧(如0ms)中自对齐下一第二帧相应时刻之后的部分(如33ms-67ms)替换为空白帧等，由此减少二个显示设备在第一显示区域同时显示内容可能造成的干扰，由此进一步改善用户观看到的视觉效果。

可选的，还可通过对第二显示设备的显示控制来改善整体显示效果。具体的，控制所述第二显示设备在一所述第一帧间隔内显示所述第二视频的至少一第二帧之后，还可包括：控制一所述第一帧间隔内所述至少一第二帧中的末帧，显示至对齐下一第一帧的显示时刻之后，在所述末帧剩余显示时长内，停止或透明化显示所述末帧或者显示一空白帧。例如，如图7所示，第二视频在一第二帧中自对齐下一第一帧相应时刻之前的部分(如33ms-67ms、100ms-133ms、167ms-199ms、233ms-267ms、299ms-333ms、367ms-400ms、433ms-466ms等部分)正常显示，在一第二帧中自对齐下一第一帧相应时刻之后的部分(如67ms-100ms、133ms-167ms、199ms-233ms、267ms-299ms、333ms-367ms、400ms-433ms、466ms-499ms等部分)停止显示或弱化显示或显示为空白帧，所述弱化显示可包括全透明显示、半透明显示等，由此减少第二视频时分插入显示的第二帧对第一视频正常显示的干扰，进一步改善用户观看到的视觉效果。

可选的，可对时域下采样得到的第二视频的帧内容进行局部空白替换或下采样等处理，由此可通过较小的交互和显示处理数据量，达到依据内容特性进行时分针对性补充显示的效果。具体而言，向所述第二显示设备发送所述第二视频之前，本申请实施例提供的任一种显示控制方法还可包括：将所述第二视频中介于所述第一帧间隔内的至少一第二帧的局部图像内容，进行下采样或替换为空白，未进行下采样或替换为空白的其他图像内容，与所述第一视频中相邻帧的图像差异满足预设条件的图像内容对应。例如，某些情形下，可确定出所述第一视频的相邻帧中变化较大的局部图像内容，如：包括运动对象和背景的图像中，所述第一视频不同帧中背景内容变化较小，而运动对象变化较大，则可将第二视频位于上述相邻帧的第一帧间隔内的至少一第二帧中除了所述运动对象之外的局部图像内容进行下采样或替换为空白，这样，当第二显示设备第二视频时分插入显示的第二帧中仅显示所述运动对象的图像、或差异化分辨率显示所述运动对象(显示分辨率较高)和所述背景部分(显示分辨率较低)。该方案从时分补充插入显示的第二帧的图像内容上进行选择性的局部显示，由此实现根据内容特性对第一光场显示设备低帧率显示的显示品质的针对性补充，可有效减小第二显示设备补充显示所需的交互和处理的数据量。

本领域技术人员可以理解，在本申请具体实施方式的上述任一方法中，各步骤的序号大小并不意味着执行顺序的先后，各步骤的执行顺序应以其功能和内在逻辑确定，而不应对本申请具体实施方式的实施过程构成任何限定。

图8为本申请实施例提供的一种显示控制装置的逻辑框图。如图8所示，本实施例提供的显示控制装置包括：一信息确定模块81和一显示控制模块82。

信息确定模块81用于确定一第一光场显示设备用于播放第一视频的第一显示区域和一播放时序对齐参考信息。可选的，所述第一光场显示设备为光场显示阵列。

显示控制模块82用于根据所述播放时序对齐参考信息控制一第二显示设备，在所述第一视频的至少一第一帧间隔内，于所述第一显示区域显示第二视频的至少一第二帧，其中，所述第一视频和所述第二视频为对同一内容源进行时域下采样得到的不同部分。可选的，所述第二显示设备为近眼显示设备，所述近眼显示设备可包括但不限于近眼光场显示设备。

所述显示控制装置的设备表现形式不受限制，例如所述显示控制装置可为某一独立的部件，该部件分别与至少二个显示设备(如至少一个第一光场显示设备、至少一个第二显示设备等)配合通信；或者，所述显示控制装置可作为某一功能模块集成在一显示设备中，如集成在本申请实施例所述的一第二显示设备中。

所述显示控制装置进行显示控制时，可根据所述播放时序参考信息将所述第二视频的播放时序和所述第一视频的播放时序对齐，并在所述第一视频的至少一个第一帧间隔内插入显示所述第二视频的至少一个第二帧，第二帧显示的区域为所述第一视频的第一显示区域，这样，通过第二显示设备在第一显示区域时域错开的插帧显示同一内容源的其他部分，使得第一光场显示设备显示的第一视频和第二显示设备显示的第二视频在时域上叠加，由此可不增加所述第一光场显示设备数据计算量的同时，提高光场信息内容源实际显示的时间分辨率增益和时域显示控制的灵活性，有利于改善用户在第一显示区域的视频观看效果。

可选的，所述第一视频的时间分辨率大于或等于所述第二视频的时间分辨率。该方案中，第二显示设备可根据显示内容的特性对第一光场显示设备显示的第一视频进行时域上的补充显示，二者时分配合来获取实际显示的时间分辨率的增益，提高时域显示控制的灵活性。

可选的，所述播放时序对齐参考信息包括：所述第一视频的播放时间信息，所述第一视频的播放时间信息可包括但不限于所述第一视频播放的绝对时间信息。采用绝对时刻对齐播放时序的方案，有利于减小第一光场显示设备和第二显示设备关于播放时序对齐所需信息的交互。

可选的，如图9所示，所述显示控制装置还可包括：一视角确定模块83和一内容源确定模块84。视角确定模块83用于确定所述第二显示设备相对所述第一光场显示设备的视角信息；内容源确定模块84用于根据所述视角信息确定所述内容源。该方案根据第二显示设备相对第一光场显示设备的视角信息确定内容源，通过第二显示设备对第一光场显示设备显示的光场信息的该视角信息对应的内容进行时分补充显示，有利于针对性改善光场信息局部视角的观看效果，提高时域显示控制的灵活性。

可选的，所述显示控制装置还可包括：一第一视频时域下采样模块85和一第一视频发送模块86。第一视频时域下采样模块85用于对所述内容源进行第一时域下采样得到所述第一视频；第一视频发送模块86用于向所述第一光场显示设备发送所述第一视频。该方案可减小第一光场显示设备显示光场信息的计算量，减少显示控制装置和第一光场显示设备的交互和数据传输量，也有利于显示控制装置采用与第一视频不同的时域采样方式确定第二显示设备待显示的第二视频。

可选的，所述显示控制装置还可包括：一第二视频时域下采样模块87和一第二视频发送模块88。第二视频时域下采样模块87用于对所述内容源进行第二时域下采样得到所述第二视频；第二视频发送模块88用于向所述第二显示设备发送所述第二视频。所述第二时域下采样的方式与所述第一视频的第一时域下采样的方式不同，这样，经过时域下采样后得到的所述第一视频和所述第二视频包括了同一内容源的不同部分，第一光场显示设备显示的某一视角的第一视频和第二显示设备显示的第二视频在时分互补，以显示内容源更多的信息，改善用户对二个显示设备显示内容的整体观看效果。

可选的，所述显示控制装置还可包括：一第二视频时域下采样模块87、一第二视频发送模块88和一下采样区确定模块89。下采样区确定模块89用于根据所述第一视频中相邻帧的图像差异，确定所述内容源中的第二时域下采样区；第二视频时域下采样模块87用于对所述第二时域下采样区进行第二时域下采样得到所述第二视频；第二视频发送模块88用于向所述第二显示设备发送所述第二视频。进一步的，所述下采样区确定模块87可包括：一时段确定子模块871和一下采样区确定子模块872。时段确定子模块871用于确定所述第一视频中相邻帧的图像差异满足预设条件的至少一时段；下采样区确定子模块872用于确定所述内容源与所述至少一时段对应的部分为所述第二时域下采样区。采用该方案，可根据第一视频相邻帧的图像差异时域下采样第二视频，以通过第二显示设备针对性对第一视频播放的局部时段进行时域插帧补充显示，使得该时段二个显示设备分别显示的内容在用户眼底的成像进行时域叠加，提高用户实际观看到的视频的时间分辨率，由此有利于用户实际观看到的视频的显示质量，改善用户体验。

可选的，所述显示控制装置还可包括：一第二帧确定模块810和一空白帧替换模块811。第二帧确定模块810用于确定下采样得到的所述第二视频中介于所述第一帧间隔内的第二帧；空白帧替换模块811用于将确定的所述第二帧中自对齐下一第一帧相应时刻之后的部分替换为空白帧。该方案通过对时域下采样得到的第二视频的空白帧插入处理，进一步改善用户内容观看的视觉效果，还有利于减少与第二显示设备的控制交互和/或传输的数据量。

可选的，所述显示控制装置还包括：一显示补充控制模块812。显示补充控制模块812用于控制一所述第一帧间隔内所述至少一第二帧中的末帧，显示至对齐下一第一帧的显示时刻之后，于所述末帧剩余显示时长内，停止或透明化显示所述末帧或者显示一空白帧。该方案可减少第二视频时分插入显示的第二帧对第一视频正常显示的干扰，进一步改善用户观看到的视觉效果。

可选的，所述显示控制装置还包括：一第二帧内容处理模块813。第二帧内容处理模块813用于将所述第二视频中介于所述第一帧间隔内的至少一第二帧的局部图像内容，进行下采样或替换为空白，未进行下采样或替换为空白的其他图像内容，与所述第一视频中相邻帧的图像差异满足预设条件的图像内容对应。该方案可对时域下采样得到的第二视频的帧内容进行局部空白替换或下采样等处理，由此可通过较小的交互和显示处理数据量，达到依据内容特性进行时分针对性补充显示的效果。可选的，所述显示控制装置还可包括：一显示区域调节模块814。显示区域调节模块814用于移动所述第二显示设备的位置和/或改变所述第二显示设备的光学投射参数，以使所述第二显示设备的对焦显示区域为所述第一显示区域或在所述第一显示区域内。该方案通过对第二显示设备的调节，使得第二显示设备可在第一光场显示设备显示第一视频的相同或局部显示区域(即第一显示区域或所述第一显示区域内的局部区域)显示第二视频，由此便于用户观看到二个显示设备在第一显示区域时分显示内容的叠加，由此提高实际观看到的内容的时间分辨率，有利于改善观看效果。

图10为本申请实施例提供的又一种显示控制装置的结构框图，本申请具体实施例并不对显示控制装置1000的具体实现方式做限定。如图10所示，显示控制装置1000可以包括：

处理器(Processor)1010、通信接口(Communications Interface)1020、存储器(Memory)1030、以及通信总线1040。其中：

处理器1010、通信接口1020、以及存储器1030通过通信总线1040完成相互间的通信。

通信接口1020，用于与比如具有通信功能的设备、外部光源等通信。

处理器1010，用于执行程序1032，具体可以执行上述任一光场采集控制方法实施例中的相关步骤。

例如，程序1032可以包括程序代码，所述程序代码包括计算机操作指令。

处理器1010可能是一个中央处理器(Central Processing Unit，简称CPU)，或者是特定集成电路(Application Specific Integrated Circuit，简称ASIC)，或者是被配置成实施本申请实施例的一个或多个集成电路。

存储器1030，用于存放程序1032。存储器1030可能包含随机存取存储器(Random Access Memory，简称RAM)，也可能还包括非易失性存储器(Non-volatile memory)，例如至少一个磁盘存储器。

例如，在一种可选的实现方式中，处理器1010通过执行程序1032可执行以下步骤：确定一第一光场显示设备用于播放第一视频的第一显示区域和一播放时序对齐参考信息；根据所述播放时序对齐参考信息控制一第二显示设备，在所述第一视频的至少一第一帧间隔内，于所述第一显示区域显示第二视频的至少一第二帧，其中，所述第一视频和所述第二视频为对同一内容源进行时域下采样得到的不同部分。

在其他可选的实现方式中，处理器1010通过执行程序1032还可执行上述其他任一实施例提及的步骤，在此不再赘述。

程序1032中各步骤的具体实现可以参见上述实施例中的相应步骤、模块、子模块、单元中对应的描述，在此不再赘述。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的设备和模块的具体工作过程，可以参考前述方法实施例中的对应过程描述，在此不再赘述。

在本申请上述各实施例中，实施例的序号和/或先后顺序仅仅便于描述，不代表实施例的优劣。对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。有关装置、设备或系统实施例的实施原理或过程的相关描述，可参见相应方法实施例的记载，在此不再赘述。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及方法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

在本申请的装置、方法、系统等实施例中，显然，各部件(系统、子系统、模块、子模块、单元、子单元等)或各步骤是可以分解、组合和/或分解后重新组合的。这些分解和/或重新组合应视为本申请的等效方案。同时，在上面对本申请具体实施例的描述中，针对一种实施方式描述和/或示出的特征可以以相同或类似的方式在一个或更多个其它实施方式中使用，与其它实施方式中的特征相组合，或替代其它实施方式中的特征。

应该强调，术语“包括/包含”在本文使用时指特征、要素、步骤或组件的存在，但并不排除一个或更多个其它特征、要素、步骤或组件的存在或附加。

最后应说明的是：以上实施方式仅用于说明本申请，而并非对本申请的限制，有关技术领域的普通技术人员，在不脱离本申请的精神和范围的情况下，还可以做出各种变化和变型，因此所有等同的技术方案也属于本申请的范畴，本申请的专利保护范围应由权利要求限定。

Claims (10)

1.一种显示控制方法，其特征在于，包括：

确定一第一光场显示设备用于播放第一视频的第一显示区域和一播放时序对齐参考信息；

根据所述播放时序对齐参考信息控制一第二显示设备，在所述第一视频的至少一第一帧间隔内，于所述第一显示区域显示第二视频的至少一第二帧，其中，所述第一视频和所述第二视频为对同一内容源进行时域下采样得到的不同部分。

2.根据权利要求1所述的方法，其特征在于，所述第一光场显示设备为光场显示阵列。

3.根据权利要求1或2所述的方法，其特征在于，所述第二显示设备为近眼显示设备。

4.根据权利要求3所述的方法，其特征在于，所述近眼显示设备为近眼光场显示设备。

5.根据权利要求1-4任一所述的方法，其特征在于，所述第一视频的时间分辨率大于或等于所述第二视频的时间分辨率。

6.一种显示控制装置，其特征在于，包括：

一信息确定模块，用于确定一第一光场显示设备用于播放第一视频的第一显示区域和一播放时序对齐参考信息；

一显示控制模块，用于根据所述播放时序对齐参考信息控制一第二显示设备，在所述第一视频的至少一第一帧间隔内，于所述第一显示区域显示第二视频的至少一第二帧，其中，所述第一视频和所述第二视频为对同一内容源进行时域下采样得到的不同部分。

7.根据权利要求6所述的装置，其特征在于，所述第一光场显示设备为光场显示阵列。

8.根据权利要求6或7所述的装置，其特征在于，所述第二显示设备为近眼显示设备。

9.根据权利要求8所述的装置，其特征在于，所述近眼显示设备为近眼光场显示设备。

10.根据权利要求6-9任一所述的装置，其特征在于，所述第一视频的时间分辨率大于或等于所述第二视频的时间分辨率。