CN108810513B - 全景视频的画面质量显示方法及装置 - Google Patents

Abstract

本发明提供一种全景视频的画面质量显示以及装置，通过获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度，在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述时间点获取到的所述画面水平角度为极角，还可以获取画面质量参数，并在所述注意力信息曲线上标示所述画面质量参数，以便对所述画面质量参数进行显示。通过本发明可以更准确、直观地获得注意力位置的变化轨迹和各个区域的画面质量。

Description

全景视频的画面质量显示方法及装置

技术领域

本发明涉及多媒体技术领域，特别是涉及一种全景视频的画面质量显示方法和画面质量显示装置。

背景技术

随着视频采集和处理技术的进步，全景视频开始逐步进入人们的生活。全景视频技术在全景照片技术之上发展延伸而来，是一种用3D摄像机进行全方位360度进行拍摄的视频，其承载着丰富的信息量，可以将变化的场景进行实时播放。人们可以在水平和垂直方向任意选择观看角度，对全景视频中感兴趣的场景进行浏览，如同身临其境。

用户可通过VR头盔观看全景视频，全景视频播放器可针对用户的观看视角对全景视频画面进行切流操作，如用户观看前方画面，可仅将用户前方部分画面传输至VR头盔进行观看即可。

为了满足用户更高的视觉体验，全景视频对画质的要求越来越高，但全景视频数据量巨大，这样显然提高了画面内容的拍摄难度和传输难度，导致显示设备无法流畅播放高分辨率全景视频，以及播放的成本越来越高。为了解决高画质的全景视频的现状，可以考虑对画面的部分内容进行分辨率降低操作来减少拍摄成本和播放成本。因此有必要研究用户对不同画面的感兴趣程度，以用户的感兴趣程度为画面调整提供参考。

现有技术中，在平面直角坐标系中，以横坐标为全景视频的画面帧(即播放时间)，纵坐标为用户观看全景画面的角度信息，构建感兴趣画面轨迹，通过研究感兴趣画面轨迹来为全景视频的拍摄和播放来提供参考，具体的示意图可参阅图1。由图1可知，现有技术的感兴趣画面轨迹是扁平化的展示方式，且感兴趣画面轨迹无法显示画面质量，无法直观、准确地为全景视频提供准确的画面质量参考标准。

故，有必要提供一种全景视频的画面质量显示方法及装置，以解决现有技术所存在的问题。

发明内容

本发明实施例提供一种全景视频的画面质量显示方法及装置；以解决现有技术无法直观、准确地为全景视频提供准确的画面质量参考标准的技术问题。

第一方面，本发明提供了一种全景视频的画面质量显示方法，包括：

获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度；

在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述时间点获取到的所述画面水平角度为极角；

获取画面质量参数，并在所述注意力信息曲线上标示所述画面质量参数，以便对所述画面质量参数进行显示。

在一种实施方式中，所述在所述注意力信息曲线上标示所述画面质量参数，以便对所述画面质量参数进行显示，具体包括：

在所述注意力信息曲线上设置颜色，通过颜色来对所述画面质量参数进行显示，不同颜色表示不同的画面质量参数；和/或，

在所述注意力信息曲线上设置线条宽度，通过线条宽度来对所述画面质量参数进行显示，不同线条宽度表示不同的画面质量参数；和/或，

在所述注意力信息曲线上设置线条样式，通过线条样式来对所述画面质量参数进行显示，不同线条宽度表示不同的画面质量参数。

在一种实施方式中，所述获取画面质量参数，具体包括：获取注意力聚焦参数，所述注意力聚焦参数用于表示用户对画面的注意力水平，所述注意力聚焦参数是所述画面水平角度的函数；获取分辨率分布参数，所述分辨率分布参数用于表示画面的分辨率分布情况，所述分辨率分布参数是所述画面水平角度的函数；合成所述注意力聚焦参数和所述分辨率分布参数，得到所述画面质量参数。

在一种实施方式中，所述合成所述注意力聚焦参数和所述分辨率分布参数，得到所述画面质量参数，具体包括：

对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度的积分，得到所述画面质量参数Q，

其中，F(x)为注意力聚焦参数，P(x)为分辨率分布参数；

或，对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度和画面垂直角度的积分，得到所述画面质量参数Q，

其中，F(x，y)为注意力聚焦参数，P(x，y)为分辨率分布参数，所述注意力位置信息还包括画面垂直角度。

在一种实施方式中，全景视频的画面质量显示方法还包括：根据所述注意力信息曲线的显示调节所述画面质量参数，以使得调节后的画面质量参数满足质量要求。

在一种实施方式中，所述获取用户在预设时间段内不同时间点的注意力位置信息，具体包括：

以预设时间间隔获取用户在预设时间段内的多个注意力位置信息，每个时间点对应一个所述注意力位置信息，所述画面水平角度是用户在所述时间点眼睛对水平方向上画面的注意力位置。

第二方面，本发明提供了一种全景视频的画面质量显示装置，包括：

第一获取模块，被配置为获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度；

第二获取模块，被配置为获取画面质量参数；

创建模块，被配置为在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述第一获取模块在所述时间点获取到的所述画面水平角度为极角；

处理模块，被配置为在所述创建模块创建的注意力信息曲线上标示所述第二获取模块获取的画面质量参数，以便对所述画面质量参数进行显示。

在一种实施方式中，所述处理模块，具体可配置为执行：在所述注意力信息曲线上设置颜色，通过颜色来对所述画面质量参数进行显示，不同颜色表示不同的画面质量参数；和/或，

在所述注意力信息曲线上设置线条宽度，通过线条宽度来对所述画面质量参数进行显示，不同线条宽度表示不同的画面质量参数；和/或，

在所述注意力信息曲线上设置线条样式，通过线条样式来对所述画面质量参数进行显示，不同线条宽度表示不同的画面质量参数。

在一种实施方式中，所述第二获取模块，具体包括第一子获取模块、第二子获取模块和第三子获取模块：

所述第一子获取模块，被配置为获取注意力聚焦参数，所述注意力聚焦参数用于表示用户对画面的注意力水平，所述注意力聚焦参数是所述画面水平角度的函数；

所述第二子获取模块，被配置为获取分辨率分布参数，所述分辨率分布参数用于表示画面的分辨率分布情况，所述分辨率分布参数是所述画面水平角度的函数；

所述第三子获取模块，被配置为合成所述第一子获取模块获取的注意力聚焦参数和第二子获取模块获取的所述分辨率分布参数，得到所述画面质量参数；

其中，所述第三子获取模块，具体被配置为执行：

对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度的积分，得到所述画面质量参数Q，

其中，F(x)为注意力聚焦参数，P(x)为分辨率分布参数；或，

对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度和画面垂直角度的积分，得到所述画面质量参数Q，

其中，F(x，y)为注意力聚焦参数，P(x，y)为分辨率分布参数，所述注意力位置信息还包括画面垂直角度。

在一种实施方式中，全景视频的画面质量显示装置还可以包括：调整模块；

所述调整模块，被配置为根据所述注意力信息曲线的显示调节所述画面质量参数，以使得调节后的画面质量参数满足质量要求。

相对现有技术，本发明的全景视频的画面质量显示方法及装置，获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度，在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述时间点获取到的所述画面水平角度为极角，还可以获取画面质量参数，并在所述注意力信息曲线上标示所述画面质量参数，以便对所述画面质量参数进行显示。这样，通过注意力信息曲线便可以清楚地获得用户的注意力位置的变化轨迹，以及画面质量的变化情况；并且，由于极坐标系的可展示角度范围为360度，与全景视频用户观看视频时的画面水平角度更一致，在极坐标中创建注意力信息曲线，可以更准确、直观地获得注意力位置的变化轨迹和各个区域的画面质量；解决了现有技术对全景视频的感兴趣画面轨迹是扁平化展示方式，且无法显示画面质量，无法直观、准确地为全景视频提供准确的画面质量参考标准的技术问题。

附图说明

图1为现有技术的感兴趣画面轨迹的示意图；

图2为本发明实施例的全景视频的画面质量显示方法的一个流程图；

图3为本发明实施例的注意力信息曲线的一个示意图；

图4为本发明实施例的注意力信息曲线的另一个示意图；

图5为本发明实施例的全景视频的画面质量显示装置的结构示意图；

图6为本发明实施例的全景视频的画面质量显示方法的另一个流程图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明的全景视频的画面质量显示方法及装置，获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度，在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述时间点获取到的所述画面水平角度为极角，还可以获取画面质量参数，并在所述注意力信息曲线上标示所述画面质量参数，以便对所述画面质量参数进行显示。这样，通过注意力信息曲线便可以清楚地获得用户的注意力位置的变化轨迹，以及画面质量的变化情况；并且，由于极坐标系的可展示角度范围为360度，与全景视频用户观看视频时的画面水平角度更一致，在极坐标中创建注意力信息曲线，可以更准确、直观地获得注意力位置的变化轨迹和各个区域的画面质量；解决了现有技术对全景视频的感兴趣画面轨迹是扁平化展示方式，且无法显示画面质量，无法直观、准确地为全景视频提供准确的画面质量参考标准的技术问题。

下面以具体实施例对本发明的提供的全景视频的画面质量显示方法进行详细说明，所述方法包括如下步骤：获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度；在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述时间点获取到的所述画面水平角度为极角；获取画面质量参数，并在所述注意力信息曲线上标示所述画面质量参数，以便对所述画面质量参数进行显示。

请参阅图2，图2是本发明实施例提供的全景视频的画面质量显示方法的一个方法流程图，可以包括：

步骤S101、获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度；

全景视频可为用户提供360度的视频观看角度，但用户在某个时间点只能关注到画面中的某一个位置，以该位置为注意力位置信息，其包括画面水平角度，该画面水平角度指的是用户的眼睛对水平方向上画面的注意力位置信息。

本实施例中可以获取全景视频中的一段时间的注意力位置信息变化，也可以获取完整全景视频的注意力位置信息变化，也就是说，预设时间段可以是全景视频的一段播放时间，或者是整个全景视频的完整播放时间。

在一可选实施例中，为了减少计算量，可以以一定时间间隔来获取注意力位置信息，具体的时间间隔以用户设定为准，本发明中不做限定。比如，每隔10帧获取一个注意力位置信息，或者每隔1帧获取一个注意力位置信息。若以一部完整播放时长为2000帧，采集注意力位置信息的时间间隔为1帧的全景视频为例，该段视频可以采集到2000个注意力位置信息。

可以理解的是，不同用户的注意力位置信息可能略有差异，这就导致不同用户的注意力位置信息可能会各不相同，为了解决这一问题，可以将获取的各个用户的注意力位置信息分别构建注意力信息曲线，以此展示不同用户的注意力位置变化。这样，可以获取不同用户的观看习惯，得到各个用户的个性化特征。

在一可选实施例中，获取注意力位置信息具体可以包括：以预设时间间隔获取各个用户在预设时间段内的多个注意力位置信息，每个时间点对应一个所述注意力位置信息，然后以获取的各个用户的位置信息为依据显示在注意力信息曲线上。

需说明的是，也可以采用其他方式来准确获取用户的注意力位置信息，比如采用大数据的采集方式，获取大量用户的注意力位置信息，得到一般用户的注意力位置信息，从而满足大部分用户的观影需求。还可以引入校正数值，用该校正数值对获取到的注意力位置信息进行校正，采用校正后的注意力位置信息来构建注意力信息曲线。

步骤S102、在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述时间点获取到的所述画面水平角度为极角；

本发明在上述步骤S101获取到了各个时间点的注意力位置信息，可以在极坐标系中根据这些注意力位置信息构建注意力信息曲线，其中，极坐标系的极轴为时间，构建的注意力信息曲线以所述时间点为极径，以所述时间点获取到的所述画面水平角度为极角。

在一可选实施例中，为了减少计算量，可以以预设时间间隔获取到多个注意力位置信息，然后将这多个注意力位置信息以坐标点标示在极坐标系中，然后连接各个坐标点，得到完整的注意力信息曲线。比如，以完整播放时长为2000帧，时间间隔为10帧的视频为例，每隔10帧可以获得一个注意力位置信息，并将各个坐标点标注在极坐标中，该坐标点是时间点与注意力位置信息的有序数对，共可以获取到200个坐标点，连接这200个坐标点可以得到完整的注意力信息曲线。其中，连接各个坐标点的方式包括不限于样条曲线法、曲线拟合法或插值样条曲线法等。

本发明由于用户观看全景视频时，可以实现在水平方向上的360度画面的随意切换，而极坐标系的可展示角度范围为360度，与全景视频用户观看视频时的画面水平角度更一致，在极坐标中创建注意力信息曲线，可以更准确、直观地获得注意力位置的变化轨迹和各个区域的画面质量。

步骤S103、获取画面质量参数；

本实施例可以以预设的方法获取各个时间点的画面质量参数，该画面质量参数与该时间点用户的注意力位置有关，比如画面水平角度。

在一可选实施例中，本发明实施例提供了画面质量参数的获取方法，其具体可以包括如下步骤：

步骤A1、获取注意力聚焦参数，所述注意力聚焦参数用于表示用户对画面的注意力水平，所述注意力聚焦参数是所述画面水平角度的函数；

步骤A2、获取分辨率分布参数，所述分辨率分布参数用于表示画面的分辨率分布情况，所述分辨率分布参数是所述画面水平角度的函数；

步骤A3、合成所述注意力聚焦参数和所述分辨率分布参数，得到所述画面质量参数。

在上述步骤A2中，具体可以通过分辨率估值及画面水平角度来获取分辨率分布参数，也就是说，获取分辨率分布参数的步骤具体可以包括：根据所述注意力聚焦参数，生成视频画面的各个画面水平角度的分辨率估值，根据所述视频画面的各个画面水平角度的分辨率估值生成所述分辨率分布参数。

在上述步骤A3中，合成所述注意力聚焦参数和所述分辨率分布参数的方式可以是进行积分运算，具体的运算法则可至少包括如下情况：

一种方式是，用户对垂直方向的画面内容关注度差异不大时，可以只对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度的积分，得到所述画面质量参数Q，

其中，F(x)为注意力聚焦参数，P(x)为分辨率分布参数，画面水平角度的取值范围为0-2π；

另一种方式是，当用户对垂直方向的画面内容和水平方向的画面内容均关注较多，也就是说画面的垂直内容和水平内容差异较大时，为了更好地保证画面质量评估的准确性，对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度和画面垂直角度的积分，得到所述画面质量参数Q，

其中，F(x，y)为注意力聚焦参数，P(x，y)为分辨率分布参数，所述注意力位置信息还包括画面垂直角度，画面水平角度的取值范围为0-2π，画面垂直角度的取值范围为0-π。

其中，上述是根据单个用户的数据来获取到的画面质量参数，本实施例可以根据单个用户的计算结果来评估画面质量，也可以根据多个用户的计算结果来评估画面质量。其中，若要通过多个用户的计算结果来评估画面质量，则在获取到多个用户的画面质量参数后，可以取平均值来得到平均画面质量参数，根据平均画面质量参数来评估画面质量，即评估当前画面切流方式生成的视频画面的画面质量的好坏。

需说明的是，步骤S103的时序与步骤S101和步骤S102时序无关，可以先执行步骤S101和步骤S102，再执行步骤S103，反之也可以，或者可以步骤S101和步骤S103同时执行。

步骤S104、在所述注意力信息曲线上标示所述画面质量参数，以便对所述画面质量参数进行显示。

在所述注意力信息曲线上标示所述画面质量参数的方式可以是多样的，比如通过颜色、线宽、线型等在注意力信息曲线标示所述画面质量参数，不同颜色、线宽、线型的注意力信息曲线可表示不同的画面质量参数。

在一可选实施例中，可以在注意力信息曲线上通过颜色、线宽及线型的渐变来表示连续的质量得分(画面质量参数的表达方式为数值，对应为质量得分)。比如，颜色的RGB渐变，以B色调越高表示质量分越高，R色调越高表示质量分越低；线宽的粗细的渐变，以线宽越粗表示质量分越高，反之越低；线型的样式变化与质量分关联等。其中，质量分越高表示画面质量越好。本发明实施例对画面质量参数进行了数值上的细分，在注意力信息曲线上可以随时掌握不同时间/不同注意力位置的画面质量得分，可以对画面质量进行更细微的调节，调节更准确。

请参阅图3，图3是在极坐标中标示注意力信息曲线的示意图，图中的注意力信息曲线上通过颜色来表示画面质量参数的数值，其中，为了表示方便，图3以不同数值RGB的灰色来表示不同的画面质量参数，图中的灰颜色直方图表示了画面质量参数的取值与不同RGB取值的对应关系。由图3可知，极坐标系中标示了2000帧画面的注意力信息曲线，画面质量参数的取值范围为0-1.0，灰颜色的RGB值越小表示画面质量参数的值越大。通过图3的注意力信息曲线的显示，在注意力信息曲线上可以随时掌握不同时间/不同注意力位置的画面质量参数的大小，可准确、直观地获得用户注意力位置的变化轨迹和画面质量的情况，可以对画面质量进行更细微的调节。

在一可选实施例中，可以在注意力信息曲线通过颜色、线宽及线型的不同来表示画面质量是否符合质量要求(画面质量参数的表达方式为是否满足质量要求)。比如，颜色为暖色调则表示画面质量符合质量要求，颜色为冷色调则表示画面质量不符合质量要求；注意力信息曲线的线条宽度超过一定大小则表示画面质量符合质量要求，反之则不符合质量要求；注意力信息曲线的线性为实线时则表示画面质量符合质量要求等。本发明实施例的注意力信息曲线可以快速辨认该画面质量是否符合质量要求，可以快速调节不符合质量要求的画面。

请参阅图4，图4是在极坐标中标示注意力信息曲线的示意图。本实施例在注意力信息曲线上通过线条的粗细来表示画面质量是否符合质量要求，由图4可知，极坐标系中标示了2000帧画面的注意力信息曲线，粗实线表示了画面质量参数符合质量要求，细实线表示了画面质量参数不符合质量要求。通过图4的注意力信息曲线的显示，可获得用户注意力位置的变化轨迹和画面质量的情况，可以快速辨认该画面质量是否符合质量要求，可以快速调节不符合质量要求的画面。

进一步地，当画面质量参数不符合要求时，可以对画面质量参数进行调整，也就是说，在步骤S104之后，本发明实施例还可以包括：根据所述注意力信息曲线的显示调节所述画面质量参数，以使得调节后的画面质量参数满足质量要求。比如，当画面质量参数小于质量参数阈值时，可以对分辨率估值进行调整，或者根据用户的注意力聚焦位置对画面进行切流操作，从而使得画面质量参数满足质量要求。其中，当画面质量过高时，也可以适当的降低画面质量，以降低播放成本。

由于极坐标可以清楚的显示用户在任何时刻的观看位置，因此可以将全景视频的主要观看区域的用户关注画面的画面质量参数调高，从而满足对全景视频的部分区域的画面质量参数的需求。比如舞台剧表演，不需要提高该全景视频的舞台区域的所有视频画面，只需要对用户关注度比较高的舞台区域的视频画面进行画面质量参数调高即可。

本发明实施例重点关注在不同时间点下的注意力位置信息，在极坐标系中构建了注意力信息曲线，可以获得用户注意力位置的变化轨迹。并且，在所述注意力信息曲线上标示所述画面质量参数，则通过观察注意力信息曲线便可以清楚地获得用户的注意力位置的变化轨迹，以及画面质量的变化情况；由于极坐标系的可展示角度范围为360度，与全景视频用户观看视频时的画面水平角度更一致，在极坐标中创建注意力信息曲线，可以更准确、直观地获得注意力位置的变化轨迹和各个区域的画面质量。

此外，本发明实施例还提供了一种全景视频的画面显示装置200，其主要包括第一获取模块201、第二获取模块202、创建模块203和处理模块204。

请参阅图5，图5是全景视频的画面显示装置的结构示意图。本发明实施例的全景视频的画面显示装置200，主要可以包括：

第一获取模块201，被配置为获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度；

第二获取模块202，被配置为获取画面质量参数；

创建模块203，被配置为在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以第一获取模块201在所述时间点获取到的所述画面水平角度为极角；

处理模块204，被配置为在所述创建模块203创建的注意力信息曲线上标示所述第二获取模块202获取的画面质量参数，以便对所述画面质量参数进行显示。

本实施例中的所描述的预设时间段可以是全景视频的一段播放时间，或者是整个全景视频的完整播放时间。

在一可选实施例中，在所述注意力信息曲线上标示所述画面质量参数的方式可以是多样的，比如通过颜色、线宽、线型等在注意力信息曲线标示所述画面质量参数，不同颜色、线宽、线型的注意力信息曲线可表示不同的画面质量参数。

在一可选实施例中，所述处理模块204，具体可配置为执行：在所述注意力信息曲线上设置颜色，通过颜色来对所述画面质量参数进行显示，不同颜色表示不同的画面质量参数；和/或，在所述注意力信息曲线上设置线条宽度，通过线条宽度来对所述画面质量参数进行显示，不同线条宽度表示不同的画面质量参数；和/或，在所述注意力信息曲线上设置线条样式，通过线条样式来对所述画面质量参数进行显示，不同线条宽度表示不同的画面质量参数。

比如，以颜色的RGB渐变，以R色调越多表示质量分越高；线宽的粗细的渐变，以线宽越粗表示质量分越高；线型的样式变化与质量分关联等来表示连续的质量得分(画面质量参数的表达方式为数值，对应为质量得分)，这样，对画面质量参数进行了数值上的细分，在注意力信息曲线上可以随时掌握不同时间/不同注意力位置的画面质量得分，可以对画面质量进行更细微的调节，调节更准确。比如，颜色为暖色调则表示画面质量符合质量要求，颜色为冷色调则表示画面质量不符合质量要求；注意力信息曲线的线条宽度超过一定大小则表示画面质量符合质量要求，反之则不符合质量要求；注意力信息曲线的线性为实线时则表示画面质量符合质量要求等来表示画面质量是否符合质量要求(画面质量参数的表达方式为是否满足质量要求)，这样，从注意力信息曲线可以快速辨认该画面质量是否符合质量要求，可以快速调节不符合质量要求的画面。

在一可选实施例中，所述第二获取模块202，具体包括第一子获取模块、第二子获取模块和第三子获取模块；

所述第一子获取模块，被配置为获取注意力聚焦参数，所述注意力聚焦参数用于表示用户对画面的注意力水平，所述注意力聚焦参数是所述画面水平角度的函数；

所述第二子获取模块，被配置为获取分辨率分布参数，所述分辨率分布参数用于表示画面的分辨率分布情况，所述分辨率分布参数是所述画面水平角度的函数；具体的，第二子获取模块，具体可被配置为通过分辨率估值及画面水平角度来获取分辨率分布参数，可包括：根据所述注意力聚焦参数，生成视频画面的各个画面水平角度的分辨率估值，根据所述视频画面的各个画面水平角度的分辨率估值生成所述分辨率分布参数。

所述第三子获取模块，被配置为合成所述第一子获取模块获取的注意力聚焦参数和第二子获取模块获取的所述分辨率分布参数，得到所述画面质量参数；

其中，用户对垂直方向的画面内容关注度差异不大时，所述第三子获取模块，具体被配置为执行：对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度的积分，得到所述画面质量参数Q，

其中，F(x)为注意力聚焦参数，P(x)为分辨率分布参数，画面水平角度的取值范围为0-2π。

其中，当用户对垂直方向的画面内容和水平方向的画面内容均关注较多，也就是说画面的垂直内容和水平内容差异较大时，所述第三子获取模块，具体被配置为执行：对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度和画面垂直角度的积分，得到所述画面质量参数Q，

其中，F(x，y)为注意力聚焦参数，P(x，y)为分辨率分布参数，所述注意力位置信息还包括画面垂直角度，画面水平角度的取值范围为0-2π，画面垂直角度的取值范围为0-π。

进一步地，请参阅图5，本发明的全景视频的画面显示装置还可以包括调整模块205，所述调整模块205，被配置为根据所述注意力信息曲线的显示调节所述画面质量参数，以使得调节后的画面质量参数满足质量要求。例如，可以对分辨率估值进行调整，或者根据用户的注意力聚焦位置对画面进行切流操作。

需说明的是，本发明的装置实施例的具体实施可参见上述方法实施例，本实施例中不做赘述。

进一步地，为了更好地理解本发明提供的全景视频的画面质量显示方法及装置，本发明实施例还提供了具体的应用例进行详细说明，请参阅图6，图6是全景视频的画面质量显示方法的方法流程图。

步骤S301、获取用户在全景视频播放时间内不同时间点观看画面时的画面水平角度；

步骤S302、在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述时间点获取到的所述画面水平角度为极角；

时间点和画面水平角度可以分别作为极坐标系中的极径和极轴，一个时间点对应一个画面水平角度，在全景视频播放时间内可以获取到多个画面水平角度，从而在极坐标系中创建注意力信息曲线。

步骤S303、获取画面质量参数；

当用户对垂直方向的画面内容关注度差异不大时，

其中，Q是画面质量参数，F(x)为注意力聚焦参数，P(x)为分辨率分布参数，x是画面水平角度；

当用户对垂直方向的画面内容和水平方向的画面内容均关注较多，也就是说画面的垂直内容和水平内容差异较大时，

其中，Q是画面质量参数，F(x，y)为注意力聚焦参数，P(x，y)为分辨率分布参数，x是画面水平角度，y是画面垂直角度，x的取值范围为0-2π，y的取值范围为0-π。

其中，分辨率分布参数可以通过分辨率估值及注意力聚焦位置来获取，也就是说，可以根据所述注意力聚焦参数，生成视频画面的各个用户注意力聚焦位置的分辨率估值，根据所述视频画面的各个用户注意力聚焦位置的分辨率估值生成所述分辨率分布参数。

步骤S304、在所述注意力信息曲线上以颜色标示所述画面质量参数，以便通过颜色判断画面质量情况；

请参阅图3，图3是在极坐标中标示注意力信息曲线的一个示意图，图中的注意力信息曲线上通过颜色来表示画面质量参数的数值，其中，为了表示方便，图3以不同数值RGB的灰色来表示不同的画面质量参数，图中的灰颜色直方图表示了画面质量参数的取值与不同RGB取值的对应关系。由图3可知，极坐标系中标示了2000帧画面的注意力信息曲线，画面质量参数的取值范围为0-1.0，灰颜色的RGB值越小表示画面质量参数的值越大。通过图3的注意力信息曲线的显示，可准确、直观地获得用户注意力位置的变化轨迹和画面质量的情况。

步骤S305、根据所述注意力信息曲线上的颜色显示调节所述画面质量参数，以使得调节后的画面质量参数满足质量要求。

根据注意力信息曲线上的颜色显示，可以准确获取需要调节画面质量参数的画面帧，从而快速对这些画面质量参数较低的画面帧进行质量调整，以使得调节后的画面质量参数满足质量要求。例如，可以对分辨率估值进行调整，或者根据用户的注意力聚焦位置对画面进行切流操作。

这样即完成了本发明的全景视频的画面质量显示方法的画面质量显示以及调整过程。

本发明的全景视频的画面质量显示方法及装置，获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度，在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述时间点获取到的所述画面水平角度为极角，还可以获取画面质量参数，并在所述注意力信息曲线上标示所述画面质量参数，以便对所述画面质量参数进行显示。这样，通过注意力信息曲线便可以清楚地获得用户的注意力位置的变化轨迹，以及画面质量的变化情况；并且，由于极坐标系的可展示角度范围为360度，与全景视频用户观看视频时的画面水平角度更一致，在极坐标中创建注意力信息曲线，可以更准确、直观地获得注意力位置的变化轨迹和各个区域的画面质量；解决了现有技术对全景视频的感兴趣画面轨迹是扁平化展示方式，且无法显示画面质量，无法直观、准确地为全景视频提供准确的画面质量参考标准的技术问题。

如本申请所使用的术语“组件”、“模块”、“系统”、“接口”、“进程”等等一般地旨在指计算机相关实体：硬件、硬件和软件的组合、软件或执行中的软件。例如，组件可以是但不限于是运行在处理器上的进程、处理器、对象、可执行应用、执行的线程、程序和/或计算机。通过图示，运行在控制器上的应用和该控制器二者都可以是组件。一个或多个组件可以有在于执行的进程和/或线程内，并且组件可以位于一个计算机上和/或分布在两个或更多计算机之间。

本文提供了实施例的各种操作。在一个实施例中，所述的一个或多个操作可以构成一个或多个计算机可读介质上存储的计算机可读指令，其在被电子设备执行时将使得计算设备执行所述操作。描述一些或所有操作的顺序不应当被解释为暗示这些操作必需是顺序相关的。本领域技术人员将理解具有本说明书的益处的可替代的排序。而且，应当理解，不是所有操作必需在本文所提供的每个实施例中存在。

而且，本文所使用的词语“优选的”意指用作实例、示例或例证。奉文描述为“优选的”任意方面或设计不必被解释为比其他方面或设计更有利。相反，词语“优选的”的使用旨在以具体方式提出概念。如本申请中所使用的术语“或”旨在意指包含的“或”而非排除的“或”。即，除非另外指定或从上下文中清楚，“X使用A或B”意指自然包括排列的任意一个。即，如果X使用A；X使用B；或X使用A和B二者，则“X使用A或B”在前述任一示例中得到满足。

而且，尽管已经相对于一个或多个实现方式示出并描述了本公开，但是本领域技术人员基于对本说明书和附图的阅读和理解将会想到等价变型和修改。本公开包括所有这样的修改和变型，并且仅由所附权利要求的范围限制。特别地关于由上述组件(例如元件、资源等)执行的各种功能，用于描述这样的组件的术语旨在对应于执行所述组件的指定功能(例如其在功能上是等价的)的任意组件(除非另外指示)，即使在结构上与执行本文所示的本公开的示范性实现方式中的功能的公开结构不等同。此外，尽管本公开的特定特征已经相对于若干实现方式中的仅一个被公开，但是这种特征可以与如可以对给定或特定应用而言是期望和有利的其他实现方式的一个或多个其他特征组合。而且，就术语“包括”、“具有”、“含有”或其变形被用在具体实施方式或权利要求中而言，这样的术语旨在以与术语“包含”相似的方式包括。

本发明实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。上述提到的存储介质可以是只读存储器，磁盘或光盘等。上述的各装置或系统，可以执行相应方法实施例中的方法。

综上所述，虽然本发明已以优选实施例揭露如上，但上述优选实施例并非用以限制本发明，本领域的普通技术人员，在不脱离本发明的精神和范围内，均可作各种更动与润饰，因此本发明的保护范围以权利要求界定的范围为准。

Claims (10)

1.一种全景视频的画面质量显示方法，其特征在于，包括：

获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度；其中所述画面水平角度指的是用户的眼睛对水平方向上画面的注意力位置信息；

在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述时间点获取到的所述画面水平角度为极角；

获取画面质量参数，并在所述注意力信息曲线上标示所述画面质量参数，以便对所述画面质量参数进行显示。

2.根据权利要求1所述的方法，其特征在于，所述在所述注意力信息曲线上标示所述画面质量参数，以便对所述画面质量参数进行显示，具体包括：

在所述注意力信息曲线上设置颜色，通过颜色来对所述画面质量参数进行显示，不同颜色表示不同的画面质量参数；和/或，

在所述注意力信息曲线上设置线条宽度，通过线条宽度来对所述画面质量参数进行显示，不同线条宽度表示不同的画面质量参数；和/或，

在所述注意力信息曲线上设置线条样式，通过线条样式来对所述画面质量参数进行显示，不同线条宽度表示不同的画面质量参数。

3.根据权利要求1或2所述的方法，其特征在于，所述获取画面质量参数，具体包括：

获取注意力聚焦参数，所述注意力聚焦参数用于表示用户对画面的注意力水平，所述注意力聚焦参数是所述画面水平角度的函数；

获取分辨率分布参数，所述分辨率分布参数用于表示画面的分辨率分布情况，所述分辨率分布参数是所述画面水平角度的函数；

合成所述注意力聚焦参数和所述分辨率分布参数，得到所述画面质量参数。

4.根据权利要求3所述的方法，其特征在于，所述合成所述注意力聚焦参数和所述分辨率分布参数，得到所述画面质量参数，具体包括：

对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度的积分，得到所述画面质量参数Q，

其中，F(x)为注意力聚焦参数，P(x)为分辨率分布参数；

或，对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度和画面垂直角度的积分，得到所述画面质量参数Q，

其中，F(x，y)为注意力聚焦参数，P(x，y)为分辨率分布参数，所述注意力位置信息还包括画面垂直角度。

5.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：

根据所述注意力信息曲线的显示调节所述画面质量参数，以使得调节后的画面质量参数满足质量要求。

6.根据权利要求1或2所述的方法，其特征在于，所述获取用户在预设时间段内不同时间点的注意力位置信息，具体包括：

以预设时间间隔获取用户在预设时间段内的多个注意力位置信息，每个时间点对应一个所述注意力位置信息，所述画面水平角度是用户在所述时间点眼睛对水平方向上画面的注意力位置。

7.一种全景视频的画面质量显示装置，其特征在于，包括：

第一获取模块，被配置为获取用户在预设时间段内不同时间点的注意力位置信息，所述注意力位置信息包括画面水平角度；其中所述画面水平角度指的是用户的眼睛对水平方向上画面的注意力位置信息；

第二获取模块，被配置为获取画面质量参数；

创建模块，被配置为在极坐标系中创建注意力信息曲线，所述注意力信息曲线以所述时间点为极径，以所述第一获取模块在所述时间点获取到的所述画面水平角度为极角；

处理模块，被配置为在所述创建模块创建的注意力信息曲线上标示所述第二获取模块获取的画面质量参数，以便对所述画面质量参数进行显示。

8.根据权利要求7所述的装置，其特征在于，还包括：

所述处理模块，具体可配置为执行：在所述注意力信息曲线上设置颜色，通过颜色来对所述画面质量参数进行显示，不同颜色表示不同的画面质量参数；和/或，

在所述注意力信息曲线上设置线条宽度，通过线条宽度来对所述画面质量参数进行显示，不同线条宽度表示不同的画面质量参数；和/或，

在所述注意力信息曲线上设置线条样式，通过线条样式来对所述画面质量参数进行显示，不同线条宽度表示不同的画面质量参数。

9.根据权利要求7或8所述的装置，其特征在于，所述第二获取模块，具体包括第一子获取模块、第二子获取模块和第三子获取模块：

所述第一子获取模块，被配置为获取注意力聚焦参数，所述注意力聚焦参数用于表示用户对画面的注意力水平，所述注意力聚焦参数是所述画面水平角度的函数；

所述第二子获取模块，被配置为获取分辨率分布参数，所述分辨率分布参数用于表示画面的分辨率分布情况，所述分辨率分布参数是所述画面水平角度的函数；

所述第三子获取模块，被配置为合成所述第一子获取模块获取的注意力聚焦参数和第二子获取模块获取的所述分辨率分布参数，得到所述画面质量参数；

其中，所述第三子获取模块，具体被配置为执行：

对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度的积分，得到所述画面质量参数Q，

其中，F(x)为注意力聚焦参数，P(x)为分辨率分布参数；或，

对所述注意力聚焦参数和所述分辨率分布参数进行画面水平角度和画面垂直角度的积分，得到所述画面质量参数Q，

其中，F(x，y)为注意力聚焦参数，P(x，y)为分辨率分布参数，所述注意力位置信息还包括画面垂直角度。

10.根据权利要求7或8所述的装置，其特征在于，还包括：调整模块；

所述调整模块，被配置为根据所述注意力信息曲线的显示调节所述画面质量参数，以使得调节后的画面质量参数满足质量要求。

Images