CN101971211A - 用于修改数字图像的方法和设备 - Google Patents

Abstract

把被显示给用户(118)的数字图像(110)修改成包括所检测到的、用户(118)的至少一个特征的示象(120)，以便使用户(118)有该用户(118)就存在于由该数字图像(110)显示的场景内的印象。

Description

用于修改数字图像的方法和设备

发明领域

本发明涉及用于修改数字图像的方法和设备。

发明背景

已经开发了许多用来改进数字成像的质量的技术。特别是，已经开发了使成像更真实和有较少二维感的技术。一种已知的技术是添加由光源生成的阴影或暗影。已经开发了多种技术，例如像由GB2267409和论文IEEE Transactions on multimedia，vol.1，No.2，June 1999“AugmentedReality with Automatic Illumination Control Incorporating EllipsoidalModels”Jürgen Stauder所公开的。

然而这些技术远不够多。用户越来越多地要求在感觉上更沉浸到(immerse)他们正在观看的场景中，“仿佛他们就在那里”，尤其是在诸如视频电话那样的交互系统中。

随着能访问宽带互联网的人数的增长，IP电话(VOIP)应用正被越来越多地使用，且互联网视频电话也将更广泛地可用。

迄今为止，在这个领域中的许多研究都集中在通过信号处理手段改进视频电话的视听质量。迄今为止，高的视听质量和低的通信延迟被认为是视频电话的大的突破的关键。

即使有完美的视听质量，即使有在非常大的屏幕上的3D图像、有3D声音，以及有最小的通信延迟，但在靠媒介的个人对个人的通信(视频电话)与相同地方的个人对个人的通信之间仍旧有根本的差别。一个这样的方面涉及到以下事实：如果你和其他人在一个房间中，那么你会由于你的确实存在而影响房间中的照明状况：取决于光源的位置，你在墙壁上和/或在与你进行谈话的人身上产生阴影。对于视频电话，你并不影响另一个房间中的照明状况，所以，即使具有最高的视听质量，仍旧没有那种“仿佛你就在那里”的感觉。

发明概要

本发明寻求提供一种系统，它在图像中显示一个场景，并且当观看者在观看它时使观看者有他们就存在于该场景内的感觉。

按照本发明的一个方面，这是通过一种修改正被显示给用户的数字图像的方法而达到的，该方法包括以下步骤：检测正在观看由数字图像显示的场景的用户的至少一个特征；修改数字图像以包括所检测到的至少一个特征的示象(aspect)，以便使用户有该用户就存在于由数字图像显示的场景内的印象。

按照本发明的另一个方面，这也是通过一种用于修改正被显示给用户的数字图像的设备而达到的，该设备包括：检测装置，用于检测正在观看由数字图像显示的场景的用户的至少一个特征；和处理装置，用于修改数字图像以包括所检测到的至少一个特征的示象，以便使用户有该用户就存在于由数字图像显示的场景内的印象。

在一个实施例中，用户的所述至少一个特征是从以下项目中选择的至少一项：用户的位置；用户的轮廓；用户的视点。该示象可以是阴影。

这样，正在观看场景的用户在场景中看见他们的阴影，从而在他们观看该场景的时候，使他们有就在那里和增强的沉浸到场景内的感觉。

这个效果可以通过以下方式达到：在用户附近提供虚拟光源；确定由虚拟光源投射的用户的阴影；通过把所确定的阴影添加到数字图像上，而修改正被显示给观看者的数字图像。

数字图像可以通过以下方式而被修改：确定数字图像的每个像素是否处在所确定的阴影的区域内；以及如果确定所述像素处在所确定的阴影的区域内则修改它的亮度。

在一个实施例中，考虑用户的运动，并根据这个运动调节该示象；以及数字图像被修改成包括调节的示象。例如，通过针对特征——诸如用户的轮廓——的任何改变来修改图像而考虑用户的运动。

这样，修改的数字图像保持用户在观看场景时有用户就在该场景内的真实感。

为了增加真实感，可以确定场景内物体的深度信息，以及数字图像可包括根据深度信息来调节示象。

数字图像可以是视频图像，它包括数字图像的多个帧，以及修改数字图像的步骤包括修改每个帧的图像。

本发明的诸方面可被包括在视频电话中，其中数字图像在远侧地点被生成，并经由视听通信链路被传送以便在近侧地点显示。近侧地点远离远侧地点。为了对近侧地点的用户改进真实感，以及可能也对正进行面对面通信的远侧地点的用户改进真实感，检测被包括在数字图像的场景内的在远侧地点的物体的至少一个特征，以及数字图像把该至少一个特征的示象包括到该数字图像内。

按照本发明的再一个方面，提供了用于把具有相关联的音频的数字图像从远侧地点传送到近侧地点的系统，该系统包括：在远侧地点与近侧地点之间的视听通信链路；用于在远侧地点生成数字图像的装置；传送装置，用于把所生成的数字图像经由视听通信链路传送到近侧地点；位于近侧地点的虚拟光源；处理装置，用于确定由虚拟光源投射的、在近侧地点的用户的阴影，并通过把所确定的虚拟阴影添加到传送的数字图像上而修改所传送的数字图像；以及显示装置，用于把修改的数字图像显示给用户。

该处理装置还可以确定由虚拟光源投射的、由所生成数字图像的场景内的远侧地点的至少一个物体投射的阴影，并修改该数字图像以包括所确定的阴影。

附图简述

为了更全面地了解本发明，现在参考结合附图作出的以下的说明，其中：

图1a-d显示在并入本发明实施例的视频电话应用中的、具有显示器的近侧地点(房间)的简单示意图；

图2a-c显示在本发明另一个实施例中的、在示出“流光溢彩(Ambilight)”操作的变例的视频电话应用中的、具有显示器的近侧地点的简单示意图；

图3是使用中的、本发明的实施例的视频电话系统的简单平面图；

图4图示在图3的安排中的虚拟光源及其阴影范围；

图5图示被近侧用户感知的、在远侧地点中的虚拟阴影；

图6显示在图3的实施例的近侧地点中的摄影机安排；

图7a图示远侧图像的例子；

图7b图示按照本发明中实施例的、图7a的图像的分割的结果；

图8图示按照本发明的实施例的、验证显示器的像素是否为阴影像素的例子；

图9图示按照本发明的实施例的、验证显示器的像素是否为阴影像素的另一个例子；

图10a图示在近侧地点中看见的远侧图像，其中添加了远侧用户的阴影；

图10b图示在近侧地点中看见的图10a的远侧图像，其中添加了近侧用户的阴影。

本发明实施例的详细说明

在附图中显示了本发明的应用的例子。参照图1a，显示了包括有显示器110的空的近侧房间(或地点)100，该显示器110显示视频电话系统的远侧用户112的图像。如图1b所示，在近侧地点100(在近侧房间内)提供虚拟光源114。依据远侧用户112相对于远侧地点处环境的位置、光源114的位置和近侧用户的视点，计算远侧用户112的虚拟阴影116，并把它添加到在近侧地点100处接收和显示的图像上，以使得看起来好像远侧用户就在近侧地点100处并受到虚拟光源114影响。图1c图示在近侧地点100处移动虚拟光源114的影响，这使得虚拟阴影116发生改变。图1d图示在近侧地点的、位于虚拟光源114与显示器110之间的近侧用户118的影响。由近侧用户118投射的虚拟阴影被添加到近侧用户118所看见的显示器110上。远侧用户112的虚拟阴影116被显示在他/她后面的墙壁上。

至少一个摄影机被放置在近侧地点100处靠近显示器110的固定的预定位置，并依据摄影机视频信号来计算近侧用户118的位置。依据这个信息，确定由虚拟光源114投射的近侧用户118的虚拟阴影120。近侧用户118的虚拟阴影120被添加到所显示的图像上，且投影在远侧用户112上和他/她后面的墙壁上。为了计算阴影，考虑在近侧地点100处的虚拟光源114的位置、在两侧的用户112、118相对于显示器110的深度位置、以及在远侧地点的墙壁的深度位置，正如下面解释的。

阴影计算在近侧地点100处实时发生，并且仅仅是对于近侧用户118可见的。通过看见他/她在另一个房间中的阴影，对于近侧用户产生改进的存在感觉。为了使得效果更自然，在图像中还提供了远侧用户112的阴影116。

图2a-c图示被安装在显示屏里把光投映在墙壁上的附加光源的效果，比如由流光溢彩TV所提供的，它可以在情境光(ambilight)电视机上提供的显示器中使用。近侧房间200并入了情境光电视，它依据视频内容的分析以这样一种方式生成它的情境光的色彩和强度，即屏幕上的光印象(light impression)以感觉上舒适的方式在墙壁上延伸。结果是增强的‘沉浸的(immersiveness)’感觉。按照本实施例，情境光设置的计算考虑由安装在显示器210内或附近的已知位置处的摄影机(未示出)记录的近侧用户218的图像。由虚拟光源214投射的阴影印象220延伸超出显示器210。

参照图3到7，描述确定虚拟阴影的方法。在视频电话的例子中，在近侧地点303中的近侧用户301经由视听通信链路与在远侧地点307处的远侧用户305通信。远侧地点307远离近侧地点303，而不是如图3所示的。每个用户301、305具有显示器309、313。近侧用户301离显示器309的距离d₂是从位于显示器309附近的摄影机确定的。摄影机检测近侧用户301的运动，从而检测d₂的改变。在近侧地点303在近侧用户301的后面提供虚拟光源311，这样使得近侧用户301位于显示器309与虚拟光源311之间。虚拟光源311的精确的位置是已知的，因此从所确定的近侧用户301的位置，确定距离d₁。同样地，从位于远侧地点307处的显示器313附近的摄影机来确定远侧用户305的位置，从而确定远侧用户305离远侧显示器313的距离d₃。而且，通过摄影机确定在远侧用户305后面的墙壁315的位置，从而确定远侧用户305离墙壁315的距离d₄。

可以意识到，在远侧地点307处也可以提供虚拟光源，以便给远侧用户305提供类似的效果。为了简化起见，本实施例是参考正被近侧用户301看到的效果进行描述的。所以，为了解释本实施例，近侧地点接收来自远侧地点的视听信号，为此，近侧地点此后被看作为通信设置的接收端。远侧地点因此是传送端。

如图3所示，地点是根据坐标系被定义的，其中坐标x，y，z是实数(所以是连续定值的)。在两个房间(地点)之间的墙壁是z＝0的平面(墙壁被描绘为有某个厚度，但为了在这里解释起见，它被看作为无限薄的)。虚拟光源的位置由向量p_light＝(x_light，y_light，z_light)^t指示，其中(·)t表示向量转置，这个位置被选择一次，然后就被固定。距离d₁到d₄沿z方向，屏幕的左和右x坐标分别是x_sl和x_sr，屏幕的顶部和底部y坐标分别是y_st和y_sb(y_st和y_sb在图3上未示出)。

图4图示虚拟光源311如何产生由近侧用户301和近侧(虚拟)光源311造成的、在远侧地点307处的阴影。为了这个解释目的，显示器用连接近侧地点303与远侧地点307的墙壁上的孔替代。

阴影319的投射是虚拟的，且是通过对适当的图像像素进行数字视频处理而被添加到所显示的图像上，以使得它仅仅在近侧地点303处是可见的。

为了创建虚拟阴影，确定哪些图像像素值必须被修改。为了做到这一点，考虑近侧用户301的视点317，如图5所示。在知道虚拟光源311、近侧用户的身体301、显示器309的近侧用户的视点317(p_eye)、远侧用户的身体305、和远侧背景(墙壁315)的3D位置后，可以计算出显示器图像中应当被修改来显示阴影的像素。

当有多个近侧用户时，那么就有多个视点。原则上，从每个不同的视点看去，在显示器上呈现的阴影应当是不同的。这可以用例如基于双凸透镜设计或基于屏障式(barrier)设计的多视图显示器来完成。阴影效果的感观重要性主要是在于以下概念：在近侧房间中的用户的阴影与该同一个人的运动相一致地移动。然而，对于每个不同的视点呈现不同的阴影在感观上是不太重要的。所以，多视点的呈现可以被忽略，且只需要计算一个阴影。结果，使用普通的2D显示器就足够了。

结果，不必考虑近侧用户的精确的视点。所以，只需要视点距离值d₂，并且把视点角度设置为90度(垂直于显示器)。替换地，可以考虑近侧用户的视点位置的精确的知识。为了简化计算，如下地做出近侧视点定位的良好的近似：d₂被设置为固定值。接着使用熟知的面部检测算法，诸如由P.Viola和M.J.Jones在“Robust real-time face detection，”International Journal of Computer Vision，vol.57，no.2，pp.137-154，2004中公开的那种算法，以便找到摄影机图像中的矩形面部区域。这个区域的中心然后被取为朝向近侧用户视点的角度。

接着，实时地测量近侧用户在3D环境中占据的空间的图。这被简化为2D分割图。使用被安装在靠近显示器的固定且已知位置处的摄影机601，如图6所指示的，其中为了计算的简单性，已使摄影机对准显示器的垂直中心线。

通过使用基于背景物体(即，房间)是静止而前景物体(即，用户)是非静止的知识的已知图像物体分割技术之一，从摄影机序列中获得近侧分割掩模。一种这样的技术在文献中被称为背景减法(backgroundsubtraction)，参阅例如P Noriega和O Bernier，“Real TimeIllumination Invariant Background Subtraction Using Local KernelHistograms”，British Machine Vision Conference BMVC06(III：979)。

近端分割图(或图像)由下式表示：

D_ne(c，r)有c∈[0，W_ne-1]，r∈[0，H_ne-1]    (1)

其中c和r分别是整数列和行索引，以及W_ne和H_ne是近端分割图像的各自的水平和垂直像素量。D_ne(c，r)仅仅在其中在摄影机图像中检测到近侧用户的位置处才具有非零值。在图6所描绘的情形下，非零的D_ne(c，r)对应于近侧地点中离显示器距离d₂处的物体，即，检测到用户301的轮廓。如果距离d₂是未知的，则取决于对于给定应用的场景的几何学先验知识而把它固定到某个值。d₂的精度不是关键性的。

另外，紧跟在正常接收的图像数据之后，在每个图像帧周期需要来自远侧地点的分割图像。这个分割掩模或者是在传送端被计算出来并被发送到另一侧，或者是在接收端依据进入的视频而计算出来的(通过使用例如背景减法)，在图7a和b中给出了例子。优选地，在每个帧周期接收“深度加图像”画面，使得d₃和d₄是已知的。替换地，可以使用图像的分割和简单地预先定义d₃和d₄为某些固定值，这些值是基于应用的几何学的先验知识。

在近侧地点303处的显示器309上显示的远侧亮度图像被表示为：

I_fe(c，r)有c∈[0，W_fe-1]，r∈[0，H_fe-1]，   (2)

以及对应的分割图(或图像)被表示为：

D_fe(c，r)有

其中c和r再次分别是整数列和行索引。W_fe和H_fe是远端图像和分割图的各自的水平和垂直像素量。D_fe(c，r)在其中在摄影机图像中检测到近端个人的位置处具有非零值，而对于背景(墙壁)具有零值，见图7右面。在图6所描绘的情形下，非零的D_fe(c，r)对应于远端房间中在离显示器平面z＝0有距离d₃处的物体，以及零的D_fe(c，r)对应于在离显示器平面z＝0有距离d₃+d₄处的物体(墙壁)。

接着计算在近侧地点的屏幕上显示的图像中想要的阴影效果。

扫描图像中的每一行像素，以确定该行中的每个像素是否为阴影像素。如果它不是阴影像素，则亮度I_fe(c，r)不改变。如果它是阴影像素，则亮度I_fe(c，r)按照下式进行修改：

${\tilde{I}}_{\mathrm{fe}}(c,r)=\max \{I_{\mathrm{fe}}(c,r)-s,0\},---\left(4\right)$

其中s是反映由于阴影而造成的亮度中的想要的下降的数字。为了最具真实感，s被选择为依赖于场景的所有的几何学参数，以使得阴影强度依赖于在虚拟光源、近侧及远侧用户、和远侧墙壁之间的距离而改变。为了简单但仍旧提供逼真的效果，当阴影来自远侧用户时，s可被选择为小的常数s＝s_fe，而当阴影来自近侧用户时，s可被选择为稍大的常数s＝s_ne。

为了确定远侧图像中的像素是否为阴影像素，考虑远侧图像I_fe(c，r)中第c₁列第r₁行的像素，并计算在(x，y，z)坐标系中的对应的位置。这个位置用向量a₁表示，它被计算为：

a ₁＝(x_a1，y_a1，0)^t， $x_{a1}=|x_{\mathrm{sr}}-x_{\mathrm{sl}}|\frac{c_1}{W_{\mathrm{fe}}-1}+x_{\mathrm{sl}},$ $y_{a1}=|y_{\mathrm{sb}}-y_{\mathrm{st}}|\frac{r_1}{H_{\mathrm{fe}}-1}+y_{\mathrm{st}}.---\left(5\right)$

其中|·|表示绝对值。在图8的示例性情形下，深度图D_fe(c，r)在(c₁，r₁)处为零，所以，它被确定是对应于远端房间中的背景(墙壁)的像素。然后，通过求解以下的具有三个未知数κ、λ和μ的三个线性方程组，计算出作为穿过p_eye和a₁的线与平面z＝d₃+d₄(它是远端墙壁)的交点的点a₂的地点坐标：

${\underset{\‾}{p}}_{\mathrm{eye}}+\mathrm{\κ}({\underset{\‾}{a}}_1-{\underset{\‾}{p}}_{\mathrm{eye}})=\left(\begin{array}{c}0\\ 0\\ d_3+d_4\end{array}\right)+\mathrm{\λ}\begin{array}{}\end{array}\left(\begin{array}{c}1\\ 0\\ 0\end{array}\right)+\mathrm{\μ}\left(\begin{array}{c}0\\ 1\\ 0\end{array}\right)---\left(6\right)$

当(6)式中的求解的未知数由κ₀、λ₀和μ₀表示时，则a₂由下式给出：

${\underset{\‾}{a}}_2={\underset{\‾}{p}}_{\mathrm{eye}}+{\mathrm{\κ}}_o({\underset{\‾}{a}}_1-{\underset{\‾}{p}}_{\mathrm{eye}})=\left(\begin{array}{c}0\\ 0\\ d_3+d_4\end{array}\right)+{\mathrm{\λ}}_o\left(\begin{array}{c}1\\ 0\\ 0\end{array}\right)+{\mathrm{\μ}}_o\left(\begin{array}{c}0\\ 1\\ 0\end{array}\right)---\left(7\right)$

在图9的示例性情形下，D_fe(c，r)在(c₁，r₁)处为非零，a₂作为穿过p_eye和a₁的线与平面z＝d₃的交点被计算。这可以通过在方程6和7中设置d₄＝0而完成。

接着验证经过a₂和p_light的线是否穿越由近侧用户占据的空间。位置a₃作为那条线与平面z＝-d₂的交叉点的位置被计算，见图8，从而得到具有三个未知数的三个方程：

求解ρ和σ给出

ρ₀和σ₀，因此a₃变为：

现在把来自(x，y，z)坐标系的a₃的实数值元素转换成用于近侧分割掩模D_ne(c，r)的(c，r)坐标，由坐标(c3，r3)表示。假设分割图像D_ne(c，r)正好位于由z＝-d₂定义的垂直图像平面的坐标范围x∈[x_cl，x_cr]和y∈[y_ct，y_cb]内，见图6。图6上的坐标x_cl和x_cr定义由摄影机捕获的最左面和最右面的图像边界。同样地，(未绘出的)坐标y_ct和y_cb定义最顶部和最底部的摄影机图像边界，这样使得：

$c_3=(W_{\mathrm{ne}}-1)\left|\frac{x_{a3}-x_{\mathrm{cl}}}{x_{\mathrm{cr}}-x_{\mathrm{cl}}}\right|,$ 且 $r_3=(H_{\mathrm{ne}}-1)\left|\frac{y_{a3}-y_{\mathrm{ct}}}{y_{\mathrm{cb}}-y_{\mathrm{ct}}}\right|.---\left(10\right)$

方程(10)的c₃和r₃的值是实数，并且在被用作为图像索引之前被四舍五入到最接近的整数。替换地，为了更高的精确度，c₃和r₃不被四舍五入，而是当在非整数位置处从图像取装像素值时，应用双线性图像内插。

以同样的方式计算点a₄的位置，点a₄是经过p_eye和a₂的线与平面z＝0的交叉点，见图8和图9。最后，以类似于计算a₃、c₃和r₃的方法计算对应的远侧图像坐标c₄和r₄。

依据这些计算，现在有可能对远侧图像I_fe(c，r)中位置(c₁，r₁)处的像素是否为阴影像素作出判决。

当a₃与近侧用户的位置相符时，因此也就是当下式成立时，像素I_fe(c₁，r₁)是近侧用户的阴影像素：

D_ne(c₃，r₃)≠0.                (11)

当三个条件被满足，即像素I_fe(c₁，r₁)不是近侧用户的阴影像素、它不是属于远侧用户的像素(所以a₂是墙壁像素)、以及经过p_eye和a₂的直线与远侧用户的位置交叉时，则像素I_fe(c₁，r₁)是远侧用户的阴影像素。因此，当满足以下条件时，像素I_fe(c₁，r₁)就是远侧用户的阴影像素：

D_ne(c₃，r₃)＝0，且D_fe(c₁，r₁)＝0，且D_fe(c₄，r₄)≠0.    (12)

当方程(11)中的条件满足时，方程(4)中的阴影常数s被设置为s＝s_ne＝30(假设图像亮度值在范围[0，255]内)。当方程(12)中的条件满足时，设置s＝s_ne＝20。图10a显示一个例子，其中在左面仅仅描绘了远侧个人的虚拟阴影(对应于图1b或c的情形)，在右面的图10b中显示了近侧和远侧个人的虚拟阴影(对应于图1d的情形)。

在右面的图10b中，应注意近侧个人头部的阴影部分地落在远侧个人的脸上而阴影的其余部分落在墙壁上的效果，其中显然考虑到在这两个远侧物体之间的深度差别(阴影位置有移位)。这达到更自然的效果。

对于每个时间帧，如上所述地检测用户的当前的轮廓，以及确定当前轮廓的对应的阴影，以使得当用户移动时，阴影对应地移动。

本发明可应用于视频电话和视频会议系统，以产生“在那里”的感觉。替换地，本发明也可以应用于在虚拟环境(游戏，第二人生)中创建你自己的阴影。

本发明也可以被使用在如下的应用内，其中目的是能够捕获、共享和(重新)经历“仿佛你就在那里”的体验。为了被记录体验的逼真的完全感官的重建，例如正在观看你的假期电影，以及在观看者观看它时，让他们自己的生活阴影(life shadoW)实时地显示在假期场景中会使他们有就在那里和增强的沉浸的感觉。

虽然本发明的实施例在附图中被图示并在以上的说明中予以描述，但应明白，本发明并不限于所公开的实施例，而是能够有许多的修改，而不背离在以下权利要求中阐述的本发明的范围。

Claims (15)

1.一种修改正被显示给用户(118，218，301)的数字图像(0，210，309)的方法，该方法包括以下步骤：

-检测正在观看由数字图像(110，210，309)显示的场景的用户(118，218，301)的至少一个特征；

-修改数字图像(110，210，309)以包括所检测到的至少一个特征的示象(120，220，319)，以便使用户(118，218，301)有该用户(118，218，301)就存在于由数字图像(110，210，309)显示的场景内的印象。

2.按照权利要求1的方法，其中用户(118，218，301)的所述至少一个特征是从以下项目中选择的至少一项：

-用户(118，218，301)的位置；用户(118，218，301)的轮廓；用户(118，218，301)的视点(317)。

3.按照权利要求1或2的方法，其中所述示象是阴影(120，220，319)。

4.按照权利要求3的方法，其中检测用户的步骤还包括以下步骤：

-在用户(118，218，301)附近提供虚拟光源(114，214，311)；

-确定由虚拟光源(114，214，311)投射的用户(118，218，301)的阴影(120，220，319)；

-通过把所确定的阴影(120，220，319)添加到数字图像(110，210，309)上，而修改正被显示给用户(118，218，301)的数字图像(110，210，309)。

5.按照权利要求4的方法，其中修改数字图像(110，210，309)的步骤包括以下步骤：

-确定数字图像(110，210，309)的每个像素是否处在所确定的阴影(120，220，319)的区域内；

-如果确定所述像素是处在所确定的阴影(120，220，319)的区域内，则修改它的亮度。

6.按照前述权利要求的任一项的方法，其中检测用户(118，218，301)的步骤还包括以下步骤：

-检测用户(118，218，301)的至少一个特征的改变；以及

-修改数字图像(110，210，309)以包括根据所述至少一个特征的改变而调节的示象(120，220，319)。

7.按照前述权利要求的任一项的方法，其中所述数字图像(110，120，309)具有在场景内的物体的深度信息，以及修改数字图像(110，120，309)的步骤包括根据深度信息调节所述示象。

8.按照前述权利要求的任一项的方法，其中所述数字图像(110，120，309)是包括该数字图像的多个帧的视频图像，以及修改数字图像(110，120，309)的步骤包括修改每个帧的图像。

9.一种计算机程序产品，其包括用于实行按照前述权利要求的任一项的方法的多个程序代码部分。

10.用于修改正被显示给用户(118，218，301)的数字图像(110，210，309)的设备，该设备包括：

-检测装置，用于检测正在观看由数字图像(110，210，309)显示的场景的用户(118，218，301)的至少一个特征；

-处理装置，用于修改数字图像(110，210，309)以包括所检测到的至少一个特征的示象，以便使用户(118，218，301)有该用户(118，218，301)就存在于由数字图像(110，210，309)显示的场景内的印象。

11.按照权利要求10的设备，其中用户的所述至少一个特征是从以下项目中选择的至少一项：

-用户(118，218，301)的位置；用户(118，218，301)的轮廓；用户(118，218，301)的视点(317)。

12.按照权利要求10或11的设备，其中所述示象是阴影(120，220，319)。

13.按照权利要求12的设备，其中该设备还包括：

-位于用户(118，218，301)附近的虚拟光源(114，214，311)；以及

-所述处理装置确定由虚拟光源(114，214，311)投射的用户(118，218，301)的阴影(120，220，319)，并通过把所确定的阴影(120，220，319)添加到数字图像(110，210，309)上，而修改正被显示给用户(118，218，301)的数字图像(110，210，309)。

14.一种用于把具有相关联的音频的数字图像(309)从远侧地点(307)传送到近侧地点(303)并予以显示的系统，该系统包括：

-在远侧地点(307)与近侧地点(303)之间的视听通信链路；

-用于在远侧地点(307)生成数字图像(309)的装置；

-传送装置，用于把所生成的数字图像(309)经由视听通信链路传送到近侧地点(303)；

-位于近侧地点(303)的虚拟光源(311)；

-处理装置，用于确定由虚拟光源(311)投射的、在近侧地点(303)的用户(301)的阴影(319)，并通过把所确定的虚拟阴影(319)添加到传送的数字图像(309)上，而修改所传送的数字图像(309)；以及

-显示装置，用于把修改的数字图像(309)显示给用户(301)。

15.按照权利要求14的系统，其中所述处理装置还确定由虚拟光源(311)投射的、由所生成的数字图像(309)的场景内的远侧地点(307)的至少一个物体(305)投射的阴影，并修改该数字图像(309)以包括所确定的阴影。

Images