CN103207664A - 一种图像处理方法和设备 - Google Patents

Abstract

本发明公开了一种图像处理方法和电子设备，该图像处理方法应用于一显示器展现图像，包括：进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与显示界面的距离；确定显示界面当前所展现的图像，在图像中查询与观察坐标对应目标物体；获取目标物体对应的图像参数，根据目标物体对应的图像参数和人眼与显示界面的距离，调整该目标物体在图像中的显示状态，其中，显示状态包括显示清晰度和/或显示大小。本发明能够实现更加真实的图像展现，从而提高用户的观看效果。

Description

一种图像处理方法和设备

技术领域

本发明涉及图像处理技术领域，更具体的说是涉及一种图像处理方法和设备。

背景技术

图像处理是对图像信息进行加工，以满足人类的心理、视觉或者是应用需求的一种处理行为。随着科学技术的发展和人们需求的不断增长，图像处理技术的应用范围也日益广泛。

目前在计算机或者是其他图像显示器上播放图像的过程中，在显示器上仅有固定的视焦平面。也就是说对一幅图像而言，图像的景深是固定不变的，这样人眼在观看图像的过程中就不能得到很好的观看效果。例如，假设利用光场相机拍摄到的图像中有物体A、物体B和物体C，当利用显示器展现该光场相机拍摄的图像时，一般情况下，在该显示器当前所展现的图像中仅将某一物体作为了聚焦点，如将物体A作为聚焦点，则当前在显示器中显示的图像中仅有物体A清晰可见，而物体B和物体C可能就是虚化处理后的效果，但是如果用户需要看物体B，而在显示器当前的图像展现模式下，无法实现清楚的观看到物体B。如果用户向看到将物体B作为聚焦点的图像，则需要手动点击该物体B进而进行图像转换，并提取出在摄像过程中将物体B作为聚焦点的图像进行展现。可见，如果用户需要观看到比较清晰的物体，则需要手动的进行调整，影响了观看效果。

另外，对于三维图像而言，由于制作出的每幅三维图像是固定的，在利用显示器进行三维图像播放的过程中，显示器中图像的各个点的虚实效果是固定不变的，因此，无论用户从哪个角度观看三维图像，显示器中展现的图像中各个物体的虚实效果都不会有改变，从而使得用户无法获取到更加逼真的观看效果。

发明内容

有鉴于此，本发明提供一种图像处理方法和设备，以在利用显示器进行图像播放或浏览的过程中，能够实现更加真实的图像展现，从而提高用户的观看效果。

为实现上述目的，本发明提供如下技术方案：一种图像处理方法，应用于一显示器展现图像，包括：

进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与所述显示界面的距离；

确定所述显示界面当前所展现的图像，在所述图像中查询与所述观察坐标对应目标物体；

获取所述目标物体对应的图像参数，根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，调整该目标物体在所述图像中的显示状态，其中，所述显示状态包括显示清晰度和/或显示大小。

优选的，所述进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与所述显示界面的距离，包括：

利用人脸检测算法进行人脸提取，获取人脸区域，并确定人脸偏角；

在人脸区域对人眼特征进行检测，得到人眼区域，并确定人眼相对显示界面的距离；

确定人眼区域中两只眼睛的瞳孔中心点，并分别计算出两只眼睛的瞳孔中心点的移动量；

根据两只眼睛的瞳孔中心点的移动量以及人脸偏角，分别计算两只眼睛视线方向矢量；

根据所述视线方向矢量以及所述两只眼睛相对显示界面的空间坐标值，计算出人眼处于显示界面的观察坐标。

优选的，当所述图像为三维图像时，所述目标物体对应的图像参数包括：

三维图像摄像或制作时，该目标物体对应的预先设定的距离参数。

优选的，当所述图像为利用光场相机拍摄的图像时，所述目标物体对应的图像参数包括：

目标物体被拍摄时的距离参数。

优选的，所述根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，调整该目标物体在所述图像中的显示状态具体包括：

根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，并利用景深计算公式，计算出所述目标物体对应的景深；

根据所述目标物体的景深对所述图像进行虚化处理。

优选的，所述根据所述目标物体的景深对所述图像进行虚化处理，包括：

根据所述目标物体的景深确定所述图像中背景物体的虚化程度；

将所述目标物体作为图像中的聚焦点，并根据所述背景物体的虚化程度对所述背景物体进行虚化处理。

优选的，在所述根据所述人眼目标物体的景深对所述图像中的背景物体进行虚化处理，之前还包括：

根据人眼与所述显示界面的距离，确定人眼与所述图像中背景物体之间的距离；

所述在所述根据所述人眼目标物体的景深对所述图像中的背景物体进行虚化处理，包括：

根据所述人眼与所述背景物体之间的距离以及所述目标物体的景深，确定所述背景物体的虚化程度，依据所述目标物体的景深以及所述背景物体的虚化程度对所述图像进行处理。

优选的，所述根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，调整该目标物体在所述图像中的显示状态，包括：

利用所述目标物体的图像参数，并结合图像分割技术，从所述图像中分割出所述目标物体；

根据所述人眼与显示界面的距离，确定放大比例，按照所述放大比例将所述分割出的目标物体进行放大。

另一方面，本发明还提供了一种电子设备，包括：

捕获单元，用于进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与所述显示界面的距离；

目标物体确定单元，用于确定所述显示界面当前所展现的图像，在所述图像中查询与所述观察坐标对应目标物体；

参数获取单元，用于获取所述目标物体对应的图像参数；

图像调整单元，用于根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，调整该目标物体在所述图像中的显示状态，其中，所述显示状态包括显示清晰度和/或显示大小。

优选的，所述捕获单元，包括：

人脸识别单元，用于利用人脸检测算法进行人脸提取，获取人脸区域，并确定人脸偏角；

人眼识别单元，用于在人脸区域对人眼特征进行检测，得到人眼区域，并确定人眼相对显示界面的距离；

偏移量计算单元，用于确定人眼区域中两只眼睛的瞳孔中心点，并分别计算出两只眼睛的瞳孔中心点的移动量；

方向矢量计算单元，用于根据两只眼睛的瞳孔中心点的移动量以及人脸偏角，分别计算两只眼睛视线方向矢量；

观察坐标确定单元，用于根据所述视线方向矢量以及所述两只眼睛相对显示界面的空间坐标值，计算出人眼处于显示界面的观察坐标。

优选的，所述图像调整单元包括：

景深计算单元，用于根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，并利用景深计算公式，计算出所述目标物体对应的景深；

图像虚化处理单元，用于根据所述目标物体的景深对所述图像进行虚化处理。

优选的，所述图像虚化处理单元，包括：

虚化程度确定单元，用于根据所述目标物体的景深确定所述图像中背景物体的虚化程度；

图像虚化处理子单元，用于将所述目标物体作为图像中的聚焦点，并根据所述背景物体的虚化程度对所述背景物体进行虚化处理。

优选的，还包括：

距离计算单元，用于根据人眼与所述显示界面的距离，确定人眼与所述图像中背景物体之间的距离；

所述图像虚化处理单元，具体为：用于根据所述人眼与所述背景物体之间的距离以及所述目标物体的景深，确定所述背景物体的虚化程度，依据所述目标物体的景深以及所述背景物体的虚化程度对所述图像进行处理。

优选的，所述图像调整单元，包括：

图像分割单元，用于利用所述目标物体的图像参数，并结合图像分割技术，从所述图像中分割出所述目标物体；

目标物体放大单元，用于根据所述人眼与显示界面的距离，确定放大比例，按照所述放大比例将所述分割出的目标物体进行放大。

经由上述的技术方案可知，与现有技术相比，本发明公开提供了一种图像处理方法和设备，该方法包括：进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与显示界面的距离；确定显示界面当前所展现的图像，在该图像中查询与观察坐标对应目标物体；获取目标物体对应的图像参数，根据目标物体对应的图像参数和人眼与显示界面的距离，调整该目标物体在该图像中的显示状态。该方法中通过对人眼的眼球追踪确定人眼观看的图像中的目标物体，进而根据该目标物体的图像参数以及人眼与显示界面的距离，进而对该目标物体在图像中的清晰度或大小进行调整，从而使得呈现给用户的图像具有更加逼真的效果，进而提高用户的观看图像的效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1示出了本发明一种图像处理方法实施例1的流程示意图；

图2示出了根据人眼的视线方向以及人眼的空间坐标确定观察坐标的示意图；

图3示出了本发明一种图像处理方法实施例2的流程示意图；

图4示出了本发明一种图像处理方法实施例3的流程示意图；

图5示出了本发明一种电子设备实施例1的结构示意图；

图6示出了本发明一种电子设备实施例2的结构示意图；

图7示出了本发明一种电子设备实施例3的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例公开了一种图像处理方法和设备，该方法应用于显示器展现图像，该方法包括：进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与显示界面的距离；确定显示界面当前所展现的图像，在该图像中查询与该观察坐标对应目标物体；获取目标物体对应的图像参数，根据该目标物体对应的图像参数和所述人眼与显示界面的距离，调整该目标物体在所述图像中的显示状态，其中，所述显示状态包括显示清晰度和/或显示大小。该图像处理方法能够对人眼进行跟踪，从而确定出人眼在该图像中所观看的目标物体，并利用人眼与该显示界面的距离以及该目标物体的图像参数，调整该目标物体在该图像中的显示状态，以使得人眼看到的图像更加逼真，进而提高用户观看图像的效果。

参见图1，示出了本发明一种图像处理方法实施例1的流程示意图，本实施例的方法应用于一显示器展现图像，如，展现三维(3D)图像的显示器、播放光场相机拍摄的图像的显示器、以及展现二维图像的普通显示器等，本实施例的方法包括：

步骤101：进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与所述显示界面的距离。

在电子设备中设置有图像传感器，例如，CMOS图像传感器，利用图像传感器可以捕获到用户的面部图像信息，进而进行人眼跟踪定位。进行人眼跟踪定位的方式有很多，现有的人眼定位方法均适应用于本申请。

一种进行人眼跟踪定位的方式可以是，先通过定位人脸，并利用Haar算法或者是其他算法，对人眼特征进行提取，进而进行眼球定位。该过程具体包括：

首先利用人脸检测算法进行人脸提取，获取人脸区域，并确定人脸偏角。

其次，在人脸区域对人眼特征进行检测，得到人眼区域，确定人眼区域中两只眼睛的瞳孔中心点，并确定人眼与显示界面的距离。具体的可以在确定出人眼区域后，对人眼瞳孔进行提取并进行轮廓分析，进而确定出两只眼睛的瞳孔中心点。同时，确定出人眼区域后，计算出两只眼睛相对显示界面的空间坐标值，利用两只眼睛相对显示界面的空间坐标值来计算人眼与显示界面的距离。

再次，分别计算出两只眼睛的瞳孔中心点的移动量，根据两只眼睛的瞳孔中心点的移动量以及人脸偏角，分别计算两只眼睛视线方向矢量。

最后，根据所述视线方向矢量以及所述两只眼睛相对显示界面的空间坐标值，计算出人眼处于显示界面的观察坐标。其中，观察坐标是指人眼视线方向与所述显示界面的交点对应的坐标值，参见图2，示出了确定观察坐标的示意图，两只眼睛的空间坐标值分别为E1(x1，y1，z1)和E2(x2、y2，z2)，根据两只眼睛的坐标值以及视线方向矢量，可以得到人眼在显示界面上的观察坐标M(X，Y)。

以上仅是为了清楚的理解人眼跟踪方式而进行的描述，本领域技术人员可以理解，现有的其他进行人眼跟踪的方式也适用于本发明，在此不一一列举。

步骤102：确定所述显示界面当前所展现的图像，在所述图像中查询与所述观察坐标对应目标物体。

当确定了人眼视线在显示界面上的观察坐标后，需要获取该显示界面当前所记载或展现的图像或图片，为了进一步确定人眼所观看的物体为该图像或图片上的哪个具体物体，则需要查询与该观察坐标相匹配的目标物体，将该图像或图片中展现于该观察坐标处的物体作为目标物体。

其中，该目标物体可以是图像中某一个物体也可以是图像的背景区域。例如，显示界面中展现的图像为光场相机或普通相机拍摄的景物时，假设在该图像中包含物体A，物体B，物体C，以及背景区域，则根据人眼的观察坐标，该确定出的目标物体可以为物体A、物体B或者是物体C，当然也可以是景色或其他背景区域。同样的，当显示界面中展现的图片为3D图像时，在该图像中也可以有展现的物体或者是指定颜色的背景区域，则根据人眼的观察坐标确定出图像的目标物体可以是该图像中的物体，也可以是背景区域。

步骤103：获取该目标物体对应的图像参数，根据目标物体对应的图像参数和人眼与显示界面的距离，调整该目标物体在该图像中的显示状态，其中，所述显示状态包括显示清晰度和/或显示大小。

当确定出目标物体后，可以确定该目标物体对应的图像参数。图像参数也就是该目标物体所在的图像被拍摄时的图像信息，或者是在制作承载该目标物体的图像时，设定的该目标物体对应的一些图像信息，当然也可以包括该目标物体在图像中的成像信息等。如，当所述图像为利用相机拍摄的图像，例如利用光场相机拍摄的图像时，所述目标物体对应的图像参数包括：目标物体被拍摄时的距离参数。具体的可以拍摄该图像时的光圈参数值、透镜自身的焦距、感光器的单个像素的尺寸(即CMOS的像素尺寸)和该目标物体被拍摄时的拍摄距离。当图像被相机拍摄后，该图像的以上的图像参数信息便确定不变的，同时与该图像参数会与该图像一起保存。其中，该目标物体被拍摄时的拍摄距离可以理解为该目标物体作为聚焦点被拍摄时，该目标物体与拍摄点之间的距离。

当展现的图像为三维(3D)图像时，该目标物体的图像参数可以为该三维图像摄像或制作时，该目标物体对应的预先设定的距离参数。该距离参数同样包括该图像时的光圈参数值、透镜自身的焦距、感光器的单个像素的尺寸(即CMOS的像素尺寸)和该预设的该目标物体在3D图像中的呈现距离，如果图像为3D图像时，在进行图像调整时可以将分别将该目标物体对应的光圈参数值认为是预设的固定光圈参数值、透镜自身的焦距、感光器的单个像素的尺寸设定为各自对应的固定值(具体的可以根据该人眼来确定各个参数需对应的数值)，其中该预设的该目标物体在3D图像中的呈现距离是指在3D场景中存储数据结构中定义的该目标物体的空间存在位置。例如，某3D如像中有物体A和物体B，可以将物体A设定显示在场景的2米处，物体B设定显示在场景的5米处；或者将物体A设定在显示在场景的1个单位处，物体B设定在显示在场景的5个单位处，可以根据对单位的定义转换为实际的物理量。

获取了目标物体对应的图像参数后，根据该目标物体对应的图像参数和人眼与显示界面的距离，调整该目标物体在该图像中的显示状态，以提高图像展现效果，进而使得用户观看的图像更加逼真、清晰，提高了用户体验，调整该目标物体在该图像中的显示状态包括该调整该目标物体在该图像中的显示清晰度和/或显示大小(在图像中的显示比例)。

本实施例中在电子设备的显示器展现图片的过程中，进行人眼跟踪，捕获人眼处于显示界面的观察坐标以及人眼距离显示界面的距离，并确定该显示界面当前所展现的图像，进而查询与该图像中与该观察坐标对应的目标物体，之后获取该目标物体的图像参数，进而根据该目标物体的图像参数以及人眼距离显示界面的距离，调整该目标物体在该图像中的显示状态，从而根据该用户的视焦点来调整图像，使得用户观看到的图像更加清晰，提高了用户观看图像的体验。

需要说明的是，调整目标物体在该图像中的显示清晰度的方式可以通过对图像进行虚化处理来实现，对图像进行虚化处理的方式，利用高斯平滑算法，并以目标物体为中心进行平滑处理，以实现对该图像的虚化处理。也可以利用景深的方式对图像进行虚化处理，下面以根据景深对图像进行虚化为例，参见图3，示出了本发明一种图像处理方法实施例2的流程示意图，本实施例的方法应用于一显示器展现图像，本实施例的方法包括：

步骤301：进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与所述显示界面的距离。

步骤302：确定所述显示界面当前所展现的图像，在所述图像中查询与所述观察坐标对应目标物体。

步骤301和步骤302的操作过程与实施例1中的步骤101和步骤102的操作过程类似，在此不再赘述。

步骤303：获取该目标物体对应的图像参数，根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，并利用景深计算公式，计算出所述目标物体对应的景深。

本实施例中当确定了目标物体之后，获取该目标物体的图像参数，并根据目标物体对应的图像参数和人眼距离显示界面的距离，并利用景深计算公式，计算出该目标物体的景深，以后后续利用该目标物体的景深确定该图像的虚化效果。

以显示界面中当前展现的图像为照相机拍摄的照片图像为例，获取该目标物体对应的图像参数信息包括拍摄该图像时的光圈值N、透镜自身的焦距(镜头焦距)f、感光器的单个像素的尺寸(即CMOS的像素尺寸)C和该目标物体被拍摄时的拍摄距离L1，设人眼到显示界面的距离为L2，则该目标物体的景深D计算公式如下：

$D=\frac{2\mathrm{NCU}*U}{f*f}$ (公式一)

其中，U＝L1+L2。将该目标物体对应的各个距离参数代入到该公式中，则得到该目标物体的景深。

当显示界面中展现的图像为3D图像时，计算目标物体的景深的过程与上面描述的过程相似，不同之处只是在处理计算3D图像中确定的目标物体的景深时，本发明中将该目标物体中的光圈值N作为固定的值，将透镜自身的焦距(镜头焦距)f也认为是某一固定值，同样的，对于感光器的单个像素的尺寸(即CMOS的像素尺寸)C也认为是某一固定值，则将该目标物体在该3D图像中设定的呈现距离L1则可以直接读取。

步骤304：根据目标物体的景深对图像进行虚化处理。

确定出目标物体的景深，可以依据该目标物体的景深对该目标物体进行处理，同时对该图像中除该目标物体之外的区域进行虚化处理，从而将该目标物体作为人眼视线的聚焦点，使得人眼能够清楚的看到该目标物体。

在根据目标物体的景深对图像进行虚化处理时，也可以先根据所述目标物体的景深确定图像中背景物体的虚化程度，进而将目标物体作为图像中的聚焦点，并根据背景物体的虚化程度对背景物体进行虚化处理。其中，该背景物体是指该图像中除该目标物体之外所展现的物体，或者是图像中除该目标物体之外的其他区域。

在依据目标物体的景深，确定图像中背景物体的虚化程度时，可以利用如下公式，分别计算距离该目标物体不同距离处的背景物体中各点的虚化程度：

$c1=\frac{D*f*f}{2N*(U+\mathrm{du})*(U+\mathrm{du})}$ (公式二)

dc＝|c1-C|    (公式三)

其中，du表示该背景物体上的点相对于该目标物体的相对距离变化量，c1为模拟的单个像素尺寸，也就是说，在实际中感光器的单个像素的尺寸(即CMOS的像素尺寸)C是不会发生改变的，因此，此处得到的c1是在图像处理过程中假设单个像素的成像点是可变的，也是为了计算背景物体的虚化程度而得到的一个中间计算量。

其中dc表示背景物体上的距离目标物体du处的点的虚化程度。

在得到目标物体的景深D之后，在利用公式二和公式三可以确定图像中除该目标物体之外的其他点的虚化程度，进而依据该目标物体的景深以及背景物体的虚化程度，对该图像进行处理。

进一步的，本实施例中还可以根据该人眼与显示界面的距离，计算出人眼与该图像中背景物体上各点之间的距离，进而根据人眼与背景物体之间的距离以及目标物体的景深，确定背景物体的虚化程度，依据目标物体的景深以及所述背景物体的虚化程度对所述图像进行处理。这样综合考虑人眼与背景物体的距离、目标物体的景深来确定背景物体的虚化程度使得人眼观看到的图像更加逼真。

需要说明的是，在本实施例中，当显示界面中展现的图片为光场相机拍摄的图像时，在通过人眼跟踪确定了人眼处于显示界面上的观察坐标之后，还可以从光场相机拍摄的图像中，选取该光场相机将该目标物体作为聚焦点拍摄的图像，在该显示界面展现以该目标物体为聚焦点的图像，而无需用户手动调节，便在一定程度上改变了图像的展现效果。

本实施例中，通过对人眼的追踪，确定人眼处于显示界面上的观察坐标以及人眼与显示界面的距离，从而确定该显示界面当前所展现的图像中与该观察坐标对应的目标物体，进而根据该目标物体的参数信息以及人眼与显示界面的距离，并结合景深计算公式，计算出该目标物体的景深，进而根据该目标物体的景深，并将该目标物体作为聚焦点对该图像进行虚化处理，这样随着人眼的运动，人眼观看的目标物体的不同，对图像的进行不同的虚化处理，从而使得用户能够看到更加逼真的图像效果。同时对图像处理过程中无需用户手动调节，提高了图像展现效果。

本实施例是根据目标物体的景深来确定图像的虚化效果为例进行描述，但对于以目标物体为中心且将该目标物体作为聚焦点，采用其他方式对图像进行虚化也适用于本发明。

参见图4，示出了本发明一种图像处理方法实施例3的流程示意图，本实施例的方法应用于一显示器展现图像，本实施例的方法包括：

步骤401：进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与所述显示界面的距离。

步骤402：确定所述显示界面当前所展现的图像，在所述图像中查询与所述观察坐标对应目标物体。

其中，步骤401和步骤402的操作过程与实施例1中的步骤101和步骤102的操作过程相似，在此不再赘述。

步骤403：利用目标物体的图像参数，并结合图像分割技术，从该图像中分割出目标物体。

本实施例中该目标物体的图像参数可以包括实施例2中所描述的参数，还可以具体包括该目标物体在该图像中的像素灰度值、亮度值等图像参数。

在确定出人眼观看的目标物体之后，可以采用图像分割技术，从将图像中将该目标物体分割出来，以便对该分割出的该目标物体区域进行放大或者缩小等处理。

对该图像中的目标物体进行分割时，可以利用graphcut或flood算法等图像分割算法对图像进行分割处理，从图像中分割出目标物体。进一步的，为了能够使得目标物体的分割效果更好，在图像分割的过程中，可以根据graphcut或flood算法，利用颜色相近或能量相近的原理对图像进行初步分割，之后再利用图像中各个像素点的深度值，对初步分割的图像进行进一步的处理，从而将该目标物体从对应的图像的图层中分割出来。

步骤404：根据人眼与显示界面的距离，确定放大比例，按照所述放大比例将所述分割出的目标物体进行放大。

分割出目标物体后，可以根据人眼与显示界面的距离，确定该目标物体放大的比例，进而对该目标物体区域进行放大，使得该目标物体在该图像中的呈现比例变大，用户能够更加清楚的看到该目标物体，提高了观看效果。

在对该目标物体进行放大时，可以对该目标物体的边缘区域进行虚化处理或者是增加边框，以提高放大效果。

对应本发明的方法，本发明还提供了一种电子设备，该电子设备的显示器可以用于展现各种图像，参见图5示出了本发明一种电子设备实施例1的结构示意图，本实施例的电子设备包括：捕获单元510、目标物体确定单元520、参数获取单元530和图像调整单元540。

捕获单元510，用于进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与所述显示界面的距离。

目标物体确定单元520，用于确定所述显示界面当前所展现的图像，在所述图像中查询与所述观察坐标对应目标物体。

参数获取单元530，用于获取所述目标物体对应的图像参数。

图像调整单元540，用于根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，调整该目标物体在所述图像中的显示状态，其中，所述显示状态包括显示清晰度和/或显示大小。

当确定出目标物体后，可以确定该目标物体对应的图像参数。图像参数也就是该目标物体所在的图像被拍摄时的图像信息，或者是在制作承载该目标物体的图像时，设定的该目标物体对应的一些图像信息。如，当所述图像为利用相机拍摄的图像，例如利用光场相机拍摄的图像时，所述目标物体对应的图像参数包括：目标物体被拍摄时的距离参数。具体的可以拍摄该图像时的光圈参数值、透镜自身的焦距、感光器的单个像素的尺寸(即CMOS的像素尺寸)和该目标物体被拍摄时的拍摄距离。当图像被相机拍摄后，该图像的以上的图像参数信息便确定不变的，同时与该图像参数会与该图像一起保存。其中，该目标物体被拍摄时的拍摄距离可以理解为该目标物体作为聚焦点被拍摄时，该目标物体与拍摄点之间的距离。

当展现的图像为三维(3D)图像时，该目标物体的图像参数可以为该三维图像摄像或制作时，该目标物体对应的预先设定的距离参数。该距离参数同样包括该图像时的光圈参数值、透镜自身的焦距、感光器的单个像素的尺寸(即CMOS的像素尺寸)和该预设的该目标物体在3D图像中的呈现距离，如果图像为3D图像时，在进行图像调整时可以将分别将该目标物体对应的光圈参数值认为是预设的固定光圈参数值、透镜自身的焦距、感光器的单个像素的尺寸设定为各自对应的固定值(具体的可以根据该人眼来确定各个参数需对应的数值)，其中该预设的该目标物体在3D图像中的呈现距离是指在3D场景中存储数据结构中定义的该目标物体的空间存在位置。例如，某3D如像中有物体A和物体B，可以将物体A设定显示在场景的2米处，物体B设定显示在场景的5米处；或者将物体A设定在显示在场景的1个单位处，物体B设定在显示在场景的5个单位处，可以根据对单位的定义转换为实际的物理量。

其中，捕获单元510进行人眼跟踪的方式有多种，对应其中一种方式，该捕获单元510，可以包括以下单元：

人脸识别单元，用于利用人脸检测算法进行人脸提取，获取人脸区域，并确定人脸偏角。

人眼识别单元，用于在人脸区域对人眼特征进行检测，得到人眼区域，并确定人眼相对显示界面的距离。

偏移量计算单元，用于确定人眼区域中两只眼睛的瞳孔中心点，并分别计算出两只眼睛的瞳孔中心点的移动量。

方向矢量计算单元，用于根据两只眼睛的瞳孔中心点的移动量以及人脸偏角，分别计算两只眼睛视线方向矢量。

观察坐标确定单元，用于根据所述视线方向矢量以及所述两只眼睛相对显示界面的空间坐标值，计算出人眼处于显示界面的观察坐标。

参见图6，示出了本发明一种电子设备实施例2的结构示意图，本实施例与实施例1的不同之处在于：在本实施例中该图像调整单元540包括：景深计算单元541和图像虚化处理单元542。

其中，景深计算单元541，用于根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，并利用景深计算公式，计算出所述目标物体对应的景深。

图像虚化处理单元542，用于根据所述目标物体的景深对所述图像进行虚化处理。

具体的，该图像虚化处理单元542，可以包括：虚化程度确定单元和图像虚化处理子单元。

该虚化程度确定单元，用于根据所述目标物体的景深确定所述图像中背景物体的虚化程度。

图像虚化处理子单元，用于将所述目标物体作为图像中的聚焦点，并根据所述背景物体的虚化程度对所述背景物体进行虚化处理。

进一步的，本实施例还可以包括：

距离计算单元550，用于根据人眼与所述显示界面的距离，确定人眼与所述图像中背景物体之间的距离。

对应的，图像虚化处理单元，具体为：用于根据所述人眼与所述背景物体之间的距离以及所述目标物体的景深，确定所述背景物体的虚化程度，依据所述目标物体的景深以及所述背景物体的虚化程度对所述图像进行处理。

参见图7，示出了本发明一种电子设备实施例3的结构示意图，本实施例与实施例1的不同之处在于，本实施例中图像调整单元540可以包括图像分割单元543和目标物体放大单元544。

其中，图像分割单元543，用于利用所述目标物体的图像参数，并结合图像分割技术，从所述图像中分割出所述目标物体。

在图像分割的过程中，可以根据graphcut或flood算法，利用颜色相近或能量相近的原理对图像进行初步分割，之后再利用图像中各个像素点的深度值，对初步分割的图像进行进一步的处理，从而将该目标物体从对应的图像的图层中分割出来。

目标物体放大单元544，用于根据所述人眼与显示界面的距离，确定放大比例，按照所述放大比例将所述分割出的目标物体进行放大。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (14)

1.一种图像处理方法，应用于一显示器展现图像，其特征在于，包括：

进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与所述显示界面的距离；

确定所述显示界面当前所展现的图像，在所述图像中查询与所述观察坐标对应目标物体；

获取所述目标物体对应的图像参数，根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，调整该目标物体在所述图像中的显示状态，其中，所述显示状态包括显示清晰度和/或显示大小。

2.根据权利要求1所述的方法，其特征在于，所述进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与所述显示界面的距离，包括：

利用人脸检测算法进行人脸提取，获取人脸区域，并确定人脸偏角；

在人脸区域对人眼特征进行检测，得到人眼区域，并确定人眼相对显示界面的距离；

确定人眼区域中两只眼睛的瞳孔中心点，并分别计算出两只眼睛的瞳孔中心点的移动量；

根据两只眼睛的瞳孔中心点的移动量以及人脸偏角，分别计算两只眼睛视线方向矢量；

根据所述视线方向矢量以及所述两只眼睛相对显示界面的空间坐标值，计算出人眼处于显示界面的观察坐标。

3.根据权利要求1所述的方法，其特征在于，当所述图像为三维图像时，所述目标物体对应的图像参数包括：

三维图像摄像或制作时，该目标物体对应的预先设定的距离参数。

4.根据权利要求1所述的方法，其特征在于，当所述图像为利用光场相机拍摄的图像时，所述目标物体对应的图像参数包括：

目标物体被拍摄时的距离参数。

5.根据权利要求1所述的方法，其特征在于，所述根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，调整该目标物体在所述图像中的显示状态具体包括：

根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，并利用景深计算公式，计算出所述目标物体对应的景深；

根据所述目标物体的景深对所述图像进行虚化处理。

6.根据权利要求5所述的方法，其特征在于，所述根据所述目标物体的景深对所述图像进行虚化处理，包括：

根据所述目标物体的景深确定所述图像中背景物体的虚化程度；

将所述目标物体作为图像中的聚焦点，并根据所述背景物体的虚化程度对所述背景物体进行虚化处理。

7.根据权利要求5所述的方法，其特征在于，在所述根据所述人眼目标物体的景深对所述图像中的背景物体进行虚化处理，之前还包括：

根据人眼与所述显示界面的距离，确定人眼与所述图像中背景物体之间的距离；

所述在所述根据所述人眼目标物体的景深对所述图像中的背景物体进行虚化处理，包括：

根据所述人眼与所述背景物体之间的距离以及所述目标物体的景深，确定所述背景物体的虚化程度，依据所述目标物体的景深以及所述背景物体的虚化程度对所述图像进行处理。

8.根据权利要求1所述的方法，其特征在于，所述根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，调整该目标物体在所述图像中的显示状态，包括：

利用所述目标物体的图像参数，并结合图像分割技术，从所述图像中分割出所述目标物体；

根据所述人眼与显示界面的距离，确定放大比例，按照所述放大比例将所述分割出的目标物体进行放大。

9.一种电子设备，其特征在于，包括：

捕获单元，用于进行人眼的眼球跟踪，获取人眼处于显示器的显示界面上的观察坐标以及人眼与所述显示界面的距离；

目标物体确定单元，用于确定所述显示界面当前所展现的图像，在所述图像中查询与所述观察坐标对应目标物体；

参数获取单元，用于获取所述目标物体对应的图像参数；

图像调整单元，用于根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，调整该目标物体在所述图像中的显示状态，其中，所述显示状态包括显示清晰度和/或显示大小。

10.根据权利要求9所述的电子设备，其特征在于，所述捕获单元，包括：

人脸识别单元，用于利用人脸检测算法进行人脸提取，获取人脸区域，并确定人脸偏角；

人眼识别单元，用于在人脸区域对人眼特征进行检测，得到人眼区域，并确定人眼相对显示界面的距离；

偏移量计算单元，用于确定人眼区域中两只眼睛的瞳孔中心点，并分别计算出两只眼睛的瞳孔中心点的移动量；

方向矢量计算单元，用于根据两只眼睛的瞳孔中心点的移动量以及人脸偏角，分别计算两只眼睛视线方向矢量；

观察坐标确定单元，用于根据所述视线方向矢量以及所述两只眼睛相对显示界面的空间坐标值，计算出人眼处于显示界面的观察坐标。

11.根据权利要求9所述的电子设备，其特征在于，所述图像调整单元包括：

景深计算单元，用于根据所述目标物体对应的图像参数和所述人眼与显示界面的距离，并利用景深计算公式，计算出所述目标物体对应的景深；

图像虚化处理单元，用于根据所述目标物体的景深对所述图像进行虚化处理。

12.根据权利要求11所述的电子设备，其特征在于，所述图像虚化处理单元，包括：

虚化程度确定单元，用于根据所述目标物体的景深确定所述图像中背景物体的虚化程度；

图像虚化处理子单元，用于将所述目标物体作为图像中的聚焦点，并根据所述背景物体的虚化程度对所述背景物体进行虚化处理。

13.根据权利要求11所述的电子设备，其特征在于，还包括：

距离计算单元，用于根据人眼与所述显示界面的距离，确定人眼与所述图像中背景物体之间的距离；

所述图像虚化处理单元，具体为：用于根据所述人眼与所述背景物体之间的距离以及所述目标物体的景深，确定所述背景物体的虚化程度，依据所述目标物体的景深以及所述背景物体的虚化程度对所述图像进行处理。

14.根据权利要求9所述的电子设备，其特征在于，所述图像调整单元，包括：

图像分割单元，用于利用所述目标物体的图像参数，并结合图像分割技术，从所述图像中分割出所述目标物体；

目标物体放大单元，用于根据所述人眼与显示界面的距离，确定放大比例，按照所述放大比例将所述分割出的目标物体进行放大。

Images