WO2014161306A1 - 数据显示方法、装置及终端、显示控制方法及装置 - Google Patents

Abstract

本发明公开了一种数据显示方法、装置及终端、数据显示控制方法及装置，该方法包括：根据采集的数据得到用户与终端间相对位置变化时的参数变化量；根据所述参数变化量对终端目标区域需输出显示内容的位置进行预处理，保持所述显示内容与用户间的相对位置为相对静止；在所述终端目标区域按照预处理后的结果对显示内容进行显示。

Description

数据显示方法、 装置及终端、 显示控制方法及装置 技术领域

本发明涉及终端的显示技术， 尤其涉及一种数据显示方法、 装置及终 端、 数据显示控制方法及装置。 背景技术

随着读书的工具越来越先进， 眼睛却已难以承受。 如今手机读书、 网 络读书等现代阅读方式最容易产生视疲劳， 引入光学防抖技术可以有效的 緩解视疲劳。

本申请发明人在实现本申请实施例技术方案的过程中， 至少发现现有 技术中存在如下技术问题：

现有的光学防抖技术， 并不是让机身不抖动， 它是依靠特殊的镜头或 者电荷耦合元件 （CCD, Charge-Coupled Device ), 利用该 CCD感光元件的 结构最大程度的降低操作者在使用过程中由于抖动造成的影像不稳定， 是 一种硬件处理方案。 而现有的软件处理方案， 如电子防抖是针对 CCD上的 图像进行分析， 然后利用边缘图像进行补偿， 就像光学变焦和数字变焦一 样， 它虽然能对数据的显示进行控制， 但是只是对采集到的数据进行了后 期处理， 对于画质仍然有一定程度的破坏， 采用上述两个方案， 都只能达 到有效范围的防抖目的， 并不能有效的緩解视疲劳。 发明内容

有鉴于此， 本发明实施例的主要目的在于提供一种数据显示方法、 装 置及终端、 数据显示控制方法及装置， 至少能实现对数据显示的自适应控 制， 达到最佳的数据显示结果， 从而有效地緩解视疲劳。 为达到上述目的， 本发明实施例的技术方案是这样实现的： 一种数据显示方法， 该方法包括：

根据采集的数据得到用户与终端间相对位置变化时的参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置进行预处 理， 保持所述显示内容与用户间的相对位置为相对静止；

在所述终端目标区域按照预处理后的结果对显示内容进行显示。

优选地， 所述终端目标区域包括： 终端上的全屏显示区域、 或终端上 的窗口显示区域。

优选地， 所述根据采集的数据得到用户与终端间相对位置变化时的参 数变化量， 具体包括：

参考坐标基于所述用户的头脸部时， 所述采集的数据至少包括采集的 用户的脸部图像数据， 根据所述用户的脸部图像数据得到用户的脸部与终 端间相对位置变化时的参数变化量。

优选地， 所述根据所述用户的脸部图像数据得到用户的脸部与终端间 相对位置变化时的参数变化量， 具体包括：

将采集的用户的脸部图像数据中的头脸轮廓分离出来， 建立对应头脸 轮廓形状的数据模型， 根据建立的数据模型确定所述形状的中心点位置坐 标；

将针对当前实时采集的用户的脸部图像数据处理后得到的中心点位置 坐标与针对上一次采集的用户的脸部图像数据处理后得到的中心点位置坐 标进行比较， 比较得到的位移矢量值作为所述参数变化量。

优选地， 所述根据所述参数变化量对终端目标区域需输出显示内容的 位置进行预处理， 保持所述显示内容与用户间的相对位置为相对静止， 具 体包括：

所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述位移矢量值、 所述用户与终端间的距离值和所述用户平均眼球参 数， 得到所述显示内容在所述终端目标区域上的偏移量； 根据所述偏移量 对终端目标区域上显示内容的位置进行预处理调整。

优选地， 所述根据所述用户的脸部图像数据得到用户的脸部与终端间 相对位置变化时的参数变化量， 具体包括：

将采集的用户的脸部图像数据中的头脸轮廓分离出来， 建立对应头脸 轮廓形状的数据模型， 根据建立的数据模型确定所述形状的面积；

将针对当前实时采集的用户的脸部图像数据处理后得到的面积与针对 上一次采集的用户的脸部图像数据处理后得到的面积进行比较， 比较得到 的面积变化率值作为所述参数变化量。

优选地， 所述根据所述参数变化量对终端目标区域需输出显示内容的 位置进行预处理， 保持所述显示内容与用户间的相对位置为相对静止， 具 体包括：

所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述面积变化率值、 所述用户与终端间的距离值和所述用户平均眼球 参数， 得到终端目标区域中显示内容大小的调整量；

根据显示内容在上一次显示刷新时的内容量、 所在显示区域以及当前 时间量， 得到用户当前注视的位置中心；

根据所述调整量和所述位置中心对终端目标区域上显示内容的位置进 行预处理调整。

优选地， 该方法还包括： 根据用户的平均阅读速度对所述位置中心进 行干预， 所述用户的平均阅读速度根据用户之前每次刷新终端目标区域中 显示内容的时间间隔和显示内容的内容量得到。

优选地， 所述根据所述用户的脸部图像数据得到用户的脸部与终端间 相对位置变化时的参数变化量， 具体包括： 将采集的用户的脸部图像数据中的头脸轮廓分离出来， 建立对应头脸 轮廓形状的数据模型， 根据建立的数据模型确定脸部的中心点位置坐标， 建立脸部参考图形；

将针对当前实时采集的用户的脸部图像数据处理后得到的脸部参考图 形与针对上一次采集的用户的脸部图像数据处理后得到的脸部参考图形进 行比较， 比较得到的脸部偏转角度值作为所述参数变化量。

优选地， 所述根据所述参数变化量对终端目标区域需输出显示内容的 位置进行预处理， 保持所述显示内容与用户间的相对位置为相对静止， 具 体包括：

根据所述脸部偏转角度值对终端目标区域上显示内容的位置进行预处 理调整， 使终端目标区域上显示内容与头部在终端显示平面方向上的偏转 角度保持一致。

一种数据显示装置， 该装置包括：

采集器， 配置为采集数据；

处理器， 配置为根据采集的数据得到用户与终端间相对位置变化时的 参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置 进行预处理， 保持所述显示内容与用户间的相对位置为相对静止， 将显示 内容按照预处理后的结果输出给显示器；

显示器， 配置为在所述终端目标区域按照预处理后的结果对显示内容 进行显示。

优选地， 所述处理器包括：

第一子处理器， 配置为参考坐标基于所述用户的头脸部时， 所述采集 的数据至少包括采集的用户的脸部图像数据， 根据所述用户的脸部图像数 据得到用户的脸部与终端间相对位置变化时的参数变化量。

优选地， 所述处理器， 还包括第二子处理器； 所述第一子处理器， 配置为将采集的用户的脸部图像数据中的头脸轮 廓分离出来， 建立对应头脸轮廓形状的数据模型， 根据建立的数据模型确 定所述形状的中心点位置坐标； 将针对当前实时采集的用户的脸部图像数 据处理后得到的中心点位置坐标与针对上一次采集的用户的脸部图像数据 处理后得到的中心点位置坐标进行比较， 比较得到的位移矢量值作为所述 参数变化量；

第二子处理器， 配置为所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述位移矢量值、 所述用户与终端间的距离值 和所述用户平均眼球参数， 得到所述显示内容在所述终端目标区域上的偏 移量； 根据所述偏移量对终端目标区域上显示内容的位置进行预处理调整。

优选地， 所述处理器， 还包括第二子处理器；

所述第一子处理器， 配置为将采集的用户的脸部图像数据中的头脸轮 廓分离出来， 建立对应头脸轮廓形状的数据模型， 根据建立的数据模型确 定所述形状的面积； 将针对当前实时采集的用户的脸部图像数据处理后得 到的面积与针对上一次采集的用户的脸部图像数据处理后得到的面积进行 比较， 比较得到的面积变化率值作为所述参数变化量；

第二子处理器， 配置为所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述面积变化率值、 所述用户与终端间的距离 值和所述用户平均眼球参数， 得到终端目标区域中显示内容大小的调整量； 根据显示内容在上一次显示刷新时的内容量、 所在显示区域以及当前 时间量， 得到用户当前注视的位置中心；

根据所述调整量和所述位置中心对终端目标区域上显示内容的位置进 行预处理调整。

优选地， 所述第一子处理器， 配置为根据用户的平均阅读速度对所述 位置中心进行干预， 所述用户的平均阅读速度根据用户之前每次刷新终端 目标区域中显示内容的时间间隔和显示内容的内容量得到。

优选地， 所述处理器， 还包括第二子处理器；

所述第一子处理器， 配置为将采集的用户的脸部图像数据中的头脸轮 廓分离出来， 建立对应头脸轮廓形状的数据模型， 根据建立的数据模型确 定脸部的中心点位置坐标， 建立脸部参考图形；

将针对当前实时采集的用户的脸部图像数据处理后得到的脸部参考图 形与针对上一次采集的用户的脸部图像数据处理后得到的脸部参考图形进 行比较， 比较得到的脸部偏转角度值作为所述参数变化量；

所述第二子处理器， 配置为根据所述脸部偏转角度值对终端目标区域 上显示内容的位置进行预处理调整， 使终端目标区域上显示内容与头部在 终端显示平面方向上的偏转角度保持一致。

一种数据显示控制方法， 该方法包括：

根据采集的数据得到用户与终端间相对位置变化时的参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置进行预处 理， 保持所述显示内容与用户间的相对位置为相对静止， 将显示内容按照 预处理后的结果输出给显示器。

一种数据显示控制装置， 该装置包括：

处理器， 配置为根据采集的数据得到用户与终端间相对位置变化时的 参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置 进行预处理， 保持所述显示内容与用户间的相对位置为相对静止， 将显示 内容按照预处理后的结果输出给显示器。

一种终端， 所述终端包括上述数据显示装置。

本发明实施例的方法包括： 根据采集的数据得到用户与终端间相对位 置变化时的参数变化量； 根据所述参数变化量对终端目标区域需输出显示 内容的位置进行预处理， 保持所述显示内容与用户间的相对位置为相对静 止； 在所述终端目标区域按照预处理后的结果对显示内容进行显示。

采用本发明实施例， 由于根据采集的数据得到用户与终端间相对位置 变化时的参数变化量， 并根据所述参数变化量对终端目标区域需输出显示 内容的位置进行预处理， 保持所述显示内容与用户间的相对位置为相对静 止， 从而在所述终端目标区域按照预处理后的结果对显示内容进行显示时， 显示内容与用户间的相对位置为相对静止， 达到有效防抖的效果。 附图说明

图 1为本发明实施例数据显示方法的实现流程示意图；

图 2为本发明实施例数据显示装置的组成结构示意图。 具体实施方式

下面结合附图对技术方案的实施作进一步的详细描述。

本发明实施例的数据显示方法， 如图 1所示， 包括以下步骤： 步骤 101、 采集数据；

步骤 102、根据采集的数据得到用户与终端间相对位置变化时的参数变 化量；

步骤 103、根据得到的参数变化量对终端目标区域需输出显示内容的位 置进行预处理， 保持显示内容与用户间的相对位置为相对静止；

步骤 104、 在终端目标区域按照预处理后的结果对显示内容进行显示。 这里， 终端目标区域可以为全屏显示区域， 也可以为窗口显示区域。 这里， 步骤 102的具体处理为步骤 1021 :

参考坐标基于所述用户的头脸部时， 所述采集的数据至少包括采集的 用户的脸部图像数据， 根据所述用户的脸部图像数据得到用户的脸部与终 端间相对位置变化时的参数变化量。

这里， 步骤 1021中所述根据所述用户的脸部图像数据得到用户的脸部 与终端间相对位置变化时的参数变化量， 具体包括：

将采集的用户的脸部图像数据中的头脸轮廓分离出来， 利用人脸识别 技术建立对应头脸轮廓形状（根据人脸识别技术得到的抽象形状） 的数据 模型， 根据建立的数据模型确定所述形状的中心点位置坐标；

将针对当前实时采集的用户的脸部图像数据处理后得到的中心点位置 坐标与针对上一次采集的用户的脸部图像数据处理后得到的中心点位置坐 标进行比较， 比较得到的位移矢量值作为所述参数变化量。

相应的， 步骤 103具体包括：

所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述位移矢量值、 所述用户与终端间的距离值和所述用户平均眼球参 数， 进一步还可以结合用户调整的补偿值， 得到所述显示内容在所述终端 目标区域上的偏移量； 根据所述偏移量对终端目标区域上显示内容的位置 进行预处理调整。 之后将显示内容按照预处理后的结果输出到所述终端目 标区域进行显示。 预处理后的结果包括： 所述显示内容在所述终端目标区 域上的偏移量。

这里， 步骤 1021中所述根据所述用户的脸部图像数据得到用户的脸部 与终端间相对位置变化时的参数变化量， 具体包括：

将采集的用户的脸部图像数据中的头脸轮廓分离出来， 利用人脸识别 技术建立对应头脸轮廓形状（根据人脸识别技术得到的抽象形状） 的数据 模型， 根据建立的数据模型确定所述形状的面积；

将针对当前实时采集的用户的脸部图像数据处理后得到的面积与针对 上一次采集的用户的脸部图像数据处理后得到的面积进行比较， 比较得到 的面积变化率值， 比如百分比作为所述参数变化量。

相应的， 步骤 103具体包括：

所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述面积变化率值、 所述用户与终端间的距离值和所述用户平均眼球 参数， 进一步还可以结合用户调整的补偿值， 得到终端目标区域中显示内 容大小的调整量；

根据显示内容在上一次显示刷新时的内容量、 所在显示区域以及当前 时间量， 得到用户当前注视的位置中心；

根据所述调整量和所述位置中心对终端目标区域上显示内容的位置进 行预处理调整。 之后将显示内容按照预处理后的结果输出到所述终端目标 区域进行显示。 预处理后的结果包括： 终端目标区域中显示内容大小的调 整量、 用户当前注视的位置中心。

这里， 该方法还包括： 根据用户的平均阅读速度对所述位置中心进行 干预， 所述用户的平均阅读速度根据用户之前每次刷新终端目标区域中显 示内容的时间间隔和显示内容的内容量得到。

这里， 步骤 1021中所述根据所述用户的脸部图像数据得到用户的脸部 与终端间相对位置变化时的参数变化量， 具体包括：

将采集的用户的脸部图像数据中的头脸轮廓分离出来， 利用人脸识别 技术建立对应头脸轮廓形状（根据人脸识别技术得到的抽象形状） 的数据 模型， 根据建立的数据模型确定脸部的中心点位置坐标， 建立脸部参考图 形；

将针对当前实时采集的用户的脸部图像数据处理后得到的脸部参考图 形与针对上一次采集的用户的脸部图像数据处理后得到的脸部参考图形进 行比较， 比较得到的脸部偏转角度值作为所述参数变化量。

相应的， 步骤 103具体包括：

根据所述脸部偏转角度值对终端目标区域上显示内容的位置进行预处 理调整， 调整显示内容在所述终端目标区域上的偏转角度， 进一步还可以 结合用户调整的补偿值， 使终端目标区域上显示内容与头部在终端显示平 面方向上的偏转角度保持一致。 之后将显示内容按照预处理后的结果输出 到所述终端目标区域进行显示。 预处理后的结果包括： 所述显示内容在所 述终端目标区域上的偏转角度。

本发明实施例的数据显示装置， 如图 2所示， 该装置包括：

采集器， 配置为采集数据； 采集器可以为摄像头；

处理器， 配置为根据采集的数据得到用户与终端间相对位置变化时的 参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置 进行预处理， 保持所述显示内容与用户间的相对位置为相对静止， 将显示 内容按照预处理后的结果输出给显示器；

显示器， 配置为在所述终端目标区域按照预处理后的结果对显示内容 进行显示。 该装置还可以包括传感器， 传感器的具体描述后续举例阐述， 此处不做赘述。

这里， 所述处理器包括：

第一子处理器， 配置为参考坐标基于所述用户的头脸部时， 所述采集 的数据至少包括采集的用户的脸部图像数据， 根据所述用户的脸部图像数 据得到用户的脸部与终端间相对位置变化时的参数变化量。

这里， 所述处理器， 还包括第二子处理器；

所述第一子处理器， 配置为将采集的用户的脸部图像数据中的头脸轮 廓分离出来， 建立对应头脸轮廓形状的数据模型， 根据建立的数据模型确 定所述形状的中心点位置坐标； 将针对当前实时采集的用户的脸部图像数 据处理后得到的中心点位置坐标与针对上一次采集的用户的脸部图像数据 处理后得到的中心点位置坐标进行比较， 比较得到的位移矢量值作为所述 参数变化量；

第二子处理器， 配置为所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述位移矢量值、 所述用户与终端间的距离值 和所述用户平均眼球参数， 得到所述显示内容在所述终端目标区域上的偏 移量； 根据所述偏移量对终端目标区域上显示内容的位置进行预处理调整。

这里， 所述处理器， 还包括第二子处理器；

所述第一子处理器， 配置为将采集的用户的脸部图像数据中的头脸轮 廓分离出来， 建立对应头脸轮廓形状的数据模型， 根据建立的数据模型确 定所述形状的面积； 将针对当前实时采集的用户的脸部图像数据处理后得 到的面积与针对上一次采集的用户的脸部图像数据处理后得到的面积进行 比较， 比较得到的面积变化率值作为所述参数变化量；

第二子处理器， 配置为所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述面积变化率值、 所述用户与终端间的距离 值和所述用户平均眼球参数， 得到终端目标区域中显示内容大小的调整量； 根据显示内容在上一次显示刷新时的内容量、 所在显示区域以及当前 时间量， 得到用户当前注视的位置中心；

根据所述调整量和所述位置中心对终端目标区域上显示内容的位置进 行预处理调整。

这里， 所述第一子处理器， 配置为根据用户的平均阅读速度对所述位 置中心进行干预， 所述用户的平均阅读速度根据用户之前每次刷新终端目 标区域中显示内容的时间间隔和显示内容的内容量得到。

这里， 所述处理器， 还包括第二子处理器；

所述第一子处理器， 配置为将采集的用户的脸部图像数据中的头脸轮 廓分离出来， 建立对应头脸轮廓形状的数据模型， 根据建立的数据模型确 定脸部的中心点位置坐标， 建立脸部参考图形；

将针对当前实时采集的用户的脸部图像数据处理后得到的脸部参考图 形与针对上一次采集的用户的脸部图像数据处理后得到的脸部参考图形进 行比较， 比较得到的脸部偏转角度值作为所述参数变化量； 所述第二子处理器， 配置为根据所述脸部偏转角度值对终端目标区域 上显示内容的位置进行预处理调整， 使终端目标区域上显示内容与头部在 终端显示平面方向上的偏转角度保持一致。

本发明实施例的数据显示控制方法， 该方法包括：

根据采集的数据得到用户与终端间相对位置变化时的参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置进行预处 理， 保持所述显示内容与用户间的相对位置为相对静止， 将显示内容按照 预处理后的结果输出给显示器。

本发明实施例的数据显示控制装置， 该装置包括：

处理器， 配置为根据采集的数据得到用户与终端间相对位置变化时的 参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置 进行预处理， 保持所述显示内容与用户间的相对位置为相对静止， 将显示 内容按照预处理后的结果输出给显示器。

本发明实施例的终端包括上述数据显示装置， 上述数据显示装置主要 应用于便携式的移动终端， 如智能手机， 平板电脑上。

综上所述， 本发明实施例主要是通过采集器， 如前置摄像头、 及显示 器、 处理器来实现， 该摄像头与处理器采用 CSI接口， 向处理器传输摄像 头采集的图像数据信息； 处理器与显示器采用 DSI接口， 向显示器传输处 理器经过自适应的防抖算法调整以后的显示数据。 相应的， 本发明实施例 的主要流程包括： 摄像头采集手持终端设备使用者的头脸部图像并传输给 处理器； 处理器分析图象信息， 计算使用者头脸部与手持设备的相对位置， 得到两者之间的相对位移量； 处理器根据相对位移量， 调整当前目标区域 的显示内容的位置， 在阈值范围内保证使用者头脸部位与手持设备显示内 容的相对位置不变， 并输出到显示器。

本发明实施例是一种自适应控制的数据显示结果输出， 在手持设备由 于轻微抖动造成用户与其所使用的终端间相对位置频繁变化时， 保持显示 内容与眼睛相对位置的相对静止， 有效减少设备抖动引起的眼球不必要的 运动调整， 从而能有效地实现终端显示的防抖效果， 尤其是对手机文字显 示的防抖， 将电子防抖技术应用于手持终端设备的显示功能， 从而减少阅 读过程中对眼睛竟造成的损害， 緩解视疲劳的产生。

本发明实施例最佳适用场景为： 针对解决阅读过程中的 "注视的目标 过小、 过细或不稳定" 问题， 可以有效减少因为此类环境因素造成的视疲 劳， 本发明实施例区别于现有技术是对图片数据本身的后期处理， 本发明 实施例是随需要随变的自适应的防抖运算调节， 也可以理解为在图片数据 显示之前的预处理， 而现有技术是后期处理， 相比之下， 本发明实施例更 为优越。

以下对本发明举例阐述。

就硬件实现而言， 本发明实施例的硬件模块部分包括：

A: 采集器， 如前置摄像头， 位于显示设备同一面， 用以捕捉用户脸部 的图像， 采集用户头部的空间位置信息；

B: 显示器， 用于显示文字和图像信息， 实现阅读功能；

C: 处理器， 包括手持设备嵌入式处理系统的各种硬件设备， 具有人脸 识别以及应用本发明实施例的自适应调整的防抖运算。

D: 传感器， 该传感器为可选的模块， 不是必须包括的， 应用于需要进 行智能调节的场景， 用于实时采集手持终端的运动参数。

对使用场景及使用界面介绍如下：

手持终端的使用具有移动的特性， 在用户位置变化（移动）的过程中， 使用手持设备是十分常见的使用场景， 如步行， 乘坐交通工具等。 以坐公 交车为例， 当车辆起步时， 由于惯性， 乘客会向后倾斜， 然后恢复原状； 当车辆行驶过程中发生颠簸， 乘客会跟随向下起伏运动。 在这些变化过程 中， 由于手持设备是通过人体关节与头部形成一个松散的连接状态， 是一 个不稳定的结构。 因此头部的运动与手持终端的运动是不同步的， 会存在 时间和幅度上的差别， 从而造成手持设备与头部， 特别是眼睛的相对运动， 在这里称为抖动。 即使用户处于禁止状态， 如站立、 坐着或者躺下， 但由 于心跳与脉搏的原因， 手持设备仍然会发生相对于头部特别是眼睛的轻微 抖动。

阅读防抖功能主要用于文字显示的防抖， 但不局限于文字， 还可以包 括二维图像、 三维图象等静态显示的信息。 本发明实施例通过补偿上述原 因引起的相对运动， 来减少甚至消除抖动。

以文字为例， 防抖功能可以使窗口模式或者全屏模式。 当使用窗口模 式时， 窗口大小可随意调节。 在窗口范围内实现文字显示的动态跟踪和调 整。 当使用全屏模式时， 全屏显示范围需要缩小一定的距离， 保证目标内 容不会因为调整而超出屏幕。

调整目标分为多种： 二维调整只实现目标的上下左右的移动。 三维调 整除二维调整的上下左右以外， 还包括前后距离的调整即文字的大小的动 态变化。 多维调整包括三维调整的内容， 以及文字不同方向的角度旋转。 最终目的是使用户感觉目标内容相对静止不动。

基于上述功能应用界面可以为菜单方式或者快捷按钮方式实现。 窗口 模式类似于放大镜功能， 可以以通过两指触摸的方式或者使用预先设定的 大小。 窗口模式可以有效减小处理器模块的运算量， 提高算法效率。 全屏 模式有更好的用户感受， 不会因为一部分内容调整而另一部分没有调整， 使得用户产生错觉， 而干扰正常阅读。

对操作过程及效果介绍如下：

用户可以在需要的时候通过菜单项或者按钮打开阅读防抖功能， 并选 择相应的防抖调整的复杂度。 手持终端可以根据用户选择的防抖复杂程度 进行相应的初始化过程， 并提示用户进行必要的操作。 例如需要将设备正 对用户， 前置摄像头对用户头脸部进行对焦并记录影像备用。

处理器依据对焦量以及摄像头参数， 计算出用户与手持设备的距离， 预处理摄像头记录初始化影像数据并开启防抖算法， 进行实时调整。

以窗口模式的二维调整为例， 当手持设备向用户左边偏离， 则窗口以 及窗口内的内容将整体向手持设备的右侧偏移。 当手持设备向用户下方偏 离， 则窗口以及窗口内的内容将整体向手持设备的上方偏移。 若手持设备 在显示平面方向上来回抖动， 则窗口以及窗口内的内容将随着抖动来回进 行补偿， 用户将会感觉窗口及窗口内的内容没有移动。

由于手持终端的显示器面积不是无限大， 只占据了用户视角的一部分， 所以当某些抖动过大时， 处理器的调整将会使窗口超出显示器的范围。 因 此设定合理的窗口大小、 每一帧调整的幅度以及累计调整的幅度的阈值是 必须的。 这样既可以保证防抖的效果， 又不会因为抖动过大而隐藏部分显 示内容。

应用场景一： 二维调整（位移调整）， 包括以下内容：

1、 摄像头实时采集手持设备使用者的头脸部图像并传输给处理器；

2、 处理器收到图像信息， 并进行数字图像处理一一将图像中的头脸轮 廓分离出来， 建立抽象形状（圓型、 椭圓形或矩形登） 的二维模型， 以确 定该形状的中心点位置坐标。 坐标系原点采用摄像头取景范围的中心。

3、 处理器将采集到的模型中心点坐标与上一幅图像处理以后得到的中 心点坐标位置进行比较计算出位移矢量。

4、 处理器根据用户头部的位移矢量值、 用户与设备的距离值、 目标用 户平均眼球参数以及用户调整的补偿值， 计算出目标区域的偏移量。

其中， 用户调整的补偿值为可选项， 不是必须的。

5、 处理器按照目标区域的偏移量调整显示设备目标区域的内容的位置 并输出到显示器。

其中用户可以调整的补偿值需要用户在使用前进行设定， 若没有设定 则不进行补偿。 即按照平均参数进行计算。 补偿的设定可以在启动防抖功 能后， 用户上下左右移动手持设备， 并依据感觉调整补偿量， 直到窗口不 随手持设备的移动而移动为止。 操作方法可以是数值调整挥着滚动条方式。

应用场景二： 距离调整， 包括以下内容：

1、 摄像头实时采集手持设备使用者的头脸部图像并传输给处理器模 块；

2、处理器收到图像信息， 并进行数字图像处理，建立抽象的二维模型， 计算当前二位模型的面积。

3、 处理器将当前二位模型的面积与上一次图像处理得到的面积进行比 较， 得出面积变化的比例， 以百分比表示。

4、 处理器根据用户头部面积变化、 用户与设备的距离值、 平均眼球参 数以及用户调整的补偿值， 计算出目标区域大小的调整量。 所述调整量是 指针对后续得到的位置中心而言， 基于该位置中心将目标区域放大或缩小 多少倍。

其中， 用户调整的补偿值为可选项， 不是必须的。

5、 处理器根据用户之前每次刷新目标区域内容的时间间隔， 内容量， 计算出用户的平均阅读速度； 再依据最近一次刷新的内容量、 所在区域以 及当前时间量， 计算出当前注视的位置中心。 平均阅读速度是为了更精确 的得到所述位置中心所采用的干预值。 最近一次刷新的内容量、 所在区域 以及当前时间量也是干预值， 平均阅读速度可以与最近一次刷新的内容量、 所在区域以及当前时间量任意组合， 对位置中心的精确度进行干预。 所述 平均阅读速度指： 用户单位时间看多少字， 如每秒看多少字。

6、 处理器按照当前注视的中心以及区域大小的调整量， 对目标区域放 大或者缩小， 并输出到显示器。 当头部远离时， 头部面积变小， 此时将目 标放大来抵消因距离变大而导致目标区域内容变小的变化。 同理当头部靠 近时， 需要调小目标区域的内容的大小。

应用场景三： 角度调整（基于显示器平面）， 包括以下内容：

1、 摄像头实时采集手持设备使用者的头脸部图像并传输给处理器；

2、 处理器收到图象信息， 并进行数字图像处理， 确定头部的中心点位 置坐标， 建立脸部参考图形。

3、 处理器将采集到的参考图形与上一幅图像处理以后得到的参考图形 比较， 得到头部偏转角度。

4、 处理器按照头部偏转角度， 同步调整显示设备目标区域的内容的偏 转角度，使目标区域内容在阈值范围内与头部在显示器平面方向上的偏转角 度保持一致。

应用场景四： 基于传感器进行的智能调整（是在基于上述应用场景一 至三实现原理的基础上， 附加此处的智能调整， 能对防抖效果的精度的调 整更加有利）， 包括以下内容：

智能调整是基于传感器完成的， 区别于上述应用场景一至三实现原理 是基于用户头脸部作为坐标参照物， 而是针对地球（地面）作为坐标参照 物， 应用智能调整时， 处理器依据传感器记录的手持设备相对以地球的运 动参数， 包括方向、 速度、 加速度以及运动轨迹等， 综合判断当前发生的 情况， 并根据之前一段时间或者数据库所有记录的情况以及处理方式， 同 时通过摄像头采集的数据实施对照， 实现无延时、 高效率的防抖调整操作。 如当用户乘坐的车辆发生颠簸时， 处理器会依据颠簸发生的强度和幅度， 从数据库中寻找对应的历史记录， 预设一种针队之后一段时间内的调整策 略， 来减少运算量， 从而实现零延时的效果。 智能调整由于基于传感器， 可以实现无延时、 高效率的防抖调整操作。 上述调整的多个场景， 既适用于终端目标区域为窗口模式， 也适用于 终端目标区域为全屏模式的情况， 在窗口模式时， 是一种局部调整模式， 是对显示器显示画面中一部分进行调整， 由于是局部调整， 所需要调整的 显示内容的数据量少， 因此， 可以有效减小处理器的运算量， 提高算法效 率。 在全屏模式时， 是一种全面调整模式， 是对显示器显示画面中全部进 行调整， 全屏模式有更好的用户感受， 不会因为一部分内容调整而另一部 分没有调整， 使得用户产生错觉， 而干扰正常阅读。 需要指出的是， 设定 合理的窗口大小、 每一帧调整的幅度以及累计调整的幅度的阈值， 既可以 保证防抖的效果， 又不会因为抖动过大而隐藏部分显示内容。

以上所述， 仅为本发明的较佳实施例而已， 并非用于限定本发明的保 护范围。 工业实用性

本发明实施例是根据采集的数据得到用户与终端间相对位置变化时的 参数变化量， 并根据所述参数变化量对终端目标区域需输出显示内容的位 置进行预处理， 保持所述显示内容与用户间的相对位置为相对静止， 从而 采用本发明实施例， 在所述终端目标区域按照预处理后的结果对显示内容 进行显示时， 显示内容与用户间的相对位置为相对静止， 达到有效防抖的 效果。

Claims

权利要求书

1、 一种数据显示方法， 该方法包括：

根据采集的数据得到用户与终端间相对位置变化时的参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置进行预处 理， 保持所述显示内容与用户间的相对位置为相对静止；

在所述终端目标区域按照预处理后的结果对显示内容进行显示。

2、 根据权利要求 1所述的方法， 其中， 所述终端目标区域包括： 终端 上的全屏显示区域、 或终端上的窗口显示区域。

3、 根据权利要求 1或 2所述的方法， 其中， 所述根据采集的数据得到用 户与终端间相对位置变化时的参数变化量， 具体包括：

参考坐标基于所述用户的头脸部时， 所述采集的数据至少包括采集的 用户的脸部图像数据， 根据所述用户的脸部图像数据得到用户的脸部与终 端间相对位置变化时的参数变化量。

4、 根据权利要求 3所述的方法， 其中， 所述根据所述用户的脸部图像 数据得到用户的脸部与终端间相对位置变化时的参数变化量， 具体包括： 将采集的用户的脸部图像数据中的头脸轮廓分离出来， 建立对应头脸 轮廓形状的数据模型， 根据建立的数据模型确定所述形状的中心点位置坐 标；

将针对当前实时采集的用户的脸部图像数据处理后得到的中心点位置 坐标与针对上一次采集的用户的脸部图像数据处理后得到的中心点位置坐 标进行比较， 比较得到的位移矢量值作为所述参数变化量。

5、 根据权利要求 4所述的方法， 其中， 所述根据所述参数变化量对终 端目标区域需输出显示内容的位置进行预处理， 保持所述显示内容与用户 间的相对位置为相对静止， 具体包括：

所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述位移矢量值、 所述用户与终端间的距离值和所述用户平均眼球参 数， 得到所述显示内容在所述终端目标区域上的偏移量； 根据所述偏移量 对终端目标区域上显示内容的位置进行预处理调整。

6、 根据权利要求 3所述的方法， 其中， 所述根据所述用户的脸部图像 数据得到用户的脸部与终端间相对位置变化时的参数变化量， 具体包括： 将采集的用户的脸部图像数据中的头脸轮廓分离出来， 建立对应头脸 轮廓形状的数据模型， 根据建立的数据模型确定所述形状的面积；

将针对当前实时采集的用户的脸部图像数据处理后得到的面积与针对 上一次采集的用户的脸部图像数据处理后得到的面积进行比较， 比较得到 的面积变化率值作为所述参数变化量。

7、 根据权利要求 6所述的方法， 其中， 所述根据所述参数变化量对终 端目标区域需输出显示内容的位置进行预处理， 保持所述显示内容与用户 间的相对位置为相对静止， 具体包括：

所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述面积变化率值、 所述用户与终端间的距离值和所述用户平均眼球 参数， 得到终端目标区域中显示内容大小的调整量；

根据显示内容在上一次显示刷新时的内容量、 所在显示区域以及当前 时间量， 得到用户当前注视的位置中心；

根据所述调整量和所述位置中心对终端目标区域上显示内容的位置进 行预处理调整。

8、 根据权利要求 7所述的方法， 其中， 该方法还包括： 根据用户的平 均阅读速度对所述位置中心进行干预， 所述用户的平均阅读速度根据用户 之前每次刷新终端目标区域中显示内容的时间间隔和显示内容的内容量得 到。

9、 根据权利要求 3所述的方法， 其中， 所述根据所述用户的脸部图像 数据得到用户的脸部与终端间相对位置变化时的参数变化量， 具体包括： 将采集的用户的脸部图像数据中的头脸轮廓分离出来， 建立对应头脸 轮廓形状的数据模型， 根据建立的数据模型确定脸部的中心点位置坐标， 建立脸部参考图形；

将针对当前实时采集的用户的脸部图像数据处理后得到的脸部参考图 形与针对上一次采集的用户的脸部图像数据处理后得到的脸部参考图形进 行比较， 比较得到的脸部偏转角度值作为所述参数变化量。

10、 根据权利要求 9所述的方法， 其中， 所述根据所述参数变化量对终 端目标区域需输出显示内容的位置进行预处理， 保持所述显示内容与用户 间的相对位置为相对静止， 具体包括：

根据所述脸部偏转角度值对终端目标区域上显示内容的位置进行预处 理调整， 使终端目标区域上显示内容与头部在终端显示平面方向上的偏转 角度保持一致。

11、 一种数据显示装置， 该装置包括：

采集器， 配置为采集数据；

处理器， 配置为根据采集的数据得到用户与终端间相对位置变化时的 参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置 进行预处理， 保持所述显示内容与用户间的相对位置为相对静止， 将显示 内容按照预处理后的结果输出给显示器；

显示器， 配置为在所述终端目标区域按照预处理后的结果对显示内容 进行显示。

12、 根据权利要求 11所述的装置， 其中， 所述处理器包括：

第一子处理器， 配置为参考坐标基于所述用户的头脸部时， 所述采集 的数据至少包括采集的用户的脸部图像数据， 根据所述用户的脸部图像数 据得到用户的脸部与终端间相对位置变化时的参数变化量。

13、 据权利要求 12所述的装置， 其中， 所述处理器， 还包括第二子处 理器；

所述第一子处理器， 配置为将采集的用户的脸部图像数据中的头脸轮 廓分离出来， 建立对应头脸轮廓形状的数据模型， 根据建立的数据模型确 定所述形状的中心点位置坐标； 将针对当前实时采集的用户的脸部图像数 据处理后得到的中心点位置坐标与针对上一次采集的用户的脸部图像数据 处理后得到的中心点位置坐标进行比较， 比较得到的位移矢量值作为所述 参数变化量；

第二子处理器， 配置为所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述位移矢量值、 所述用户与终端间的距离值 和所述用户平均眼球参数， 得到所述显示内容在所述终端目标区域上的偏 移量； 根据所述偏移量对终端目标区域上显示内容的位置进行预处理调整。

14、 据权利要求 12所述的装置， 其中， 所述处理器， 还包括第二子处 理器；

所述第一子处理器， 配置为将采集的用户的脸部图像数据中的头脸轮 廓分离出来， 建立对应头脸轮廓形状的数据模型， 根据建立的数据模型确 定所述形状的面积； 将针对当前实时采集的用户的脸部图像数据处理后得 到的面积与针对上一次采集的用户的脸部图像数据处理后得到的面积进行 比较， 比较得到的面积变化率值作为所述参数变化量；

第二子处理器， 配置为所述采集的数据还包括用户与终端间的距离值、 用户平均眼球参数时， 根据所述面积变化率值、 所述用户与终端间的距离 值和所述用户平均眼球参数， 得到终端目标区域中显示内容大小的调整量； 根据显示内容在上一次显示刷新时的内容量、 所在显示区域以及当前 时间量， 得到用户当前注视的位置中心；

根据所述调整量和所述位置中心对终端目标区域上显示内容的位置进 行预处理调整。

15、 据权利要求 14所述的装置， 其中， 所述第一子处理器， 还配置为 根据用户的平均阅读速度对所述位置中心进行干预， 所述用户的平均阅读 速度根据用户之前每次刷新终端目标区域中显示内容的时间间隔和显示内 容的内容量得到。

16、 据权利要求 12所述的装置， 其中， 所述处理器， 还包括第二子处 理器；

所述第一子处理器， 还配置为将采集的用户的脸部图像数据中的头脸 轮廓分离出来， 建立对应头脸轮廓形状的数据模型， 根据建立的数据模型 确定脸部的中心点位置坐标， 建立脸部参考图形；

将针对当前实时采集的用户的脸部图像数据处理后得到的脸部参考图 形与针对上一次采集的用户的脸部图像数据处理后得到的脸部参考图形进 行比较， 比较得到的脸部偏转角度值作为所述参数变化量；

所述第二子处理器， 配置为根据所述脸部偏转角度值对终端目标区域 上显示内容的位置进行预处理调整， 使终端目标区域上显示内容与头部在 终端显示平面方向上的偏转角度保持一致。

17、 一种数据显示控制方法， 该方法包括：

根据采集的数据得到用户与终端间相对位置变化时的参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置进行预处 理， 保持所述显示内容与用户间的相对位置为相对静止， 将显示内容按照 预处理后的结果输出给显示器。

18、 一种数据显示控制装置， 该装置包括：

处理器， 配置为根据采集的数据得到用户与终端间相对位置变化时的 参数变化量； 根据所述参数变化量对终端目标区域需输出显示内容的位置 进行预处理， 保持所述显示内容与用户间的相对位置为相对静止， 将显示 内容按照预处理后的结果输出给显示器。

19、 一种终端， 所述终端包括如权利要求 11至 16任一项所述的装置。