CN114020145A - 与数字内容进行互动的方法、装置、设备及可读存储介质 - Google Patents

Abstract

本申请公开了一种与数字内容进行互动的方法、装置、设备及可读存储介质，该方法包括：通过深度摄像头采集用户的深度图像，深度摄像头设置在用户的第一方向；根据深度图像以及深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系计算用户在投影屏幕上形成的人影的位置；投影仪设置在用户的第一方向，投影屏幕设置在用户的第二方向，第一方向与第二方向相反；根据人影的位置形成投影屏幕图像；投影屏幕图像包括人影图像；识别投影屏幕图像中的第一内容及触发动作；根据第一内容和触发动作生成第二内容，将第二内容投影至投影屏幕。通过实施本发明，当用户在投影屏幕上形成人影时，可以基于人影图像与数字内容进行互动，提高用户体验。

Description

与数字内容进行互动的方法、装置、设备及可读存储介质

技术领域

本申请涉及计算机技术领域，尤其涉及一种与数字内容进行互动的方法、装置、设备及可读存储介质。

背景技术

如果用户站在投影屏幕前，由于用户对投影光线的遮挡，会在投影屏幕上形成阴影。该阴影会造成对该阴影位置处的内容的遮挡，降低其他用户对该阴影位置处的内容的查看体验。

发明内容

有鉴于此，本申请实施例通过提供一种与数字内容进行互动的方法、装置、设备及可读存储介质，用以解决现有技术中阴影会对投影屏幕上的内容进行遮挡，降低其他用户对阴影位置处的内容的查看体验的问题。

为了解决上述问题，第一方面，本申请实施例提供了一种与数字内容进行互动的方法，包括：通过深度摄像头采集用户的深度图像，深度摄像头设置在用户的第一方向；根据深度图像以及深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系计算用户在投影屏幕上形成的人影的位置；投影仪设置在用户的第一方向，投影屏幕设置在用户的第二方向，第一方向与第二方向相反；根据人影的位置形成投影屏幕图像；投影屏幕图像包括人影图像；识别投影屏幕图像中的第一内容及触发动作；根据第一内容和触发动作生成第二内容，将第二内容投影至投影屏幕。

可选地，根据深度图像以及深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系计算用户在投影屏幕上形成的人影的位置，包括：根据深度图像计算用户的轮廓的第一位置；根据深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系将第一位置转换为以投影仪为坐标系原点的第二位置；基于投影仪与第二位置的连线，与投影屏幕的交点，确定用户在投影屏幕上形成的人影的位置。

可选地，识别投影屏幕图像中的触发动作，包括：在检测到第一内容中的第一数字内容与人影图像产生碰撞的情况下，识别到投影屏幕图像中的触发动作；或，在检测到人影图像执行了目标动作的情况下，识别到投影屏幕图像中的触发动作。

可选地，检测到第一内容中的第一数字内容与人影图像产生碰撞，包括：识别第一内容中的第一数字内容的位置；在检测到第一数字内容的位置与人影图像的位置具有交点的情况下，确认第一内容中的第一数字内容与人影图像产生碰撞。

可选地，根据第一内容和触发动作生成第二内容，包括：根据触发动作对第一内容中与人影图像具有交点的第一数字内容执行第一操作；根据执行第一操作后的第一数字内容和其余的第一数字内容生成第二内容。

可选地，检测到人影图像执行了目标动作，包括：识别人影图像的目标部位所形成的姿态；在检测到姿态为目标姿态的情况下，确认人影图像执行了目标动作。

可选地，根据第一内容和触发动作生成第二内容，包括：根据第一内容确认目标部位的位置；在目标部位的位置处生成与触发动作对应的第二内容。

第二方面，本申请实施例提供了一种与数字内容进行互动的装置，包括：采集单元，用于通过深度摄像头采集用户的深度图像，深度摄像头设置在用户的第一方向；计算单元，用于根据深度图像以及深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系计算用户在投影屏幕上形成的人影的位置；投影仪设置在用户的第一方向，投影屏幕设置在用户的第二方向，第一方向与第二方向相反；形成单元，用于根据人影的位置形成投影屏幕图像；投影屏幕图像包括人影图像；识别单元，用于识别投影屏幕图像中的第一内容及触发动作；生成单元，用于根据第一内容和触发动作生成第二内容，将第二内容投影至投影屏幕。

第三方面，本申请实施例提供了一种电子设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器执行如第一方面或第一方面任意实施方式中的与数字内容进行互动的方法。

第四方面，本申请实施例提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机指令，计算机指令用于使计算机执行如第一方面或第一方面任意实施方式中的与数字内容进行互动的方法。

本申请实施例提供的与数字内容进行互动的方法、装置、设备及可读存储介质，通过深度摄像头采集用户的深度图像，深度摄像头设置在用户的第一方向；根据深度图像以及深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系计算用户在投影屏幕上形成的人影的位置；投影仪设置在用户的第一方向，投影屏幕设置在用户的第二方向，第一方向与第二方向相反；根据人影的位置形成投影屏幕图像；投影屏幕图像包括人影图像；识别投影屏幕图像中的第一内容及触发动作；根据第一内容和触发动作生成第二内容，将第二内容投影至投影屏幕；从而当用户在投影屏幕上形成人影时，可以基于人影形成人影图像，然后基于人影图像可以与投影屏幕上的数字内容进行互动，从而对于人影对投影屏幕上的内容进行遮挡时，可以直接将被遮挡的内容从人影位置处推出，从而不会对其他用户对人影位置处的内容的查看，且从用户的角度看，就好像可以直接采用人影与数字内容进行互动一样，提高用户体验。

上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂，以下特举本申请的具体实施方式。

附图说明

图1为本申请实施例中一种与数字内容进行互动的方法的流程示意图；

图2为本申请实施例中用户的人影与屏幕上的数字内容进行互动的场景示意图；

图3为本申请实施例中一种与数字内容进行互动的装置的结构示意图；

图4为本申请实施例中一种电子设备的硬件结构示意图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请实施例提供了一种与数字内容进行互动的方法，可应用于基于用户的人影与屏幕上的数字内容进行互动的场景，如图1所示，与数字内容进行互动的方法包括：

S101.通过深度摄像头采集用户的深度图像，深度摄像头设置在用户的第一方向。

在本实施例中，第一方向为用户背对的方向，也即用户的后方。深度摄像头为3D摄像头，设置在用户的后方，深度摄像头可以采集到预设空间范围内的用户的深度图像。当用户需要与投影屏幕上的数字内容进行互动时，需要开启深度摄像头采集用户的深度图像。当该预设空间范围内具有一个或多个用户时，可以采集到该一个用户或多个用户的深度图像。例如，当多个用户站在投影屏幕前，深度摄像头可以采集多个用户的深度图像。

深度摄像头可以实时的捕捉场景中的深度数据，大大促进了视觉识别的发展，如人体姿态估计以及人体动作识别。深度数据为三维数据，包括深度数据流和骨骼数据流。因此，可以通过深度摄像头采集用户的深度图像，然后通过对第一深度图像进行分析，就可以获取到每个用户的轮廓、骨骼、手势等数据。

S102.根据深度图像以及深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系计算用户在投影屏幕上形成的人影的位置；投影仪设置在用户的第一方向，投影屏幕设置在用户的第二方向，第一方向与第二方向相反。

在本实施例中，根据深度图像可以计算得到用户的轮廓。第二方向为用户面对的方向，也即用户的前方。由于投影仪发出的光线部分投射到用户身上，在投影屏幕上形成了用户的人影，因此，如图2所示，用户站在投影屏幕前，面朝投影屏幕，背对投影仪，从而投影仪发出的光线会部分投射到用户身上，则在投影屏幕上会形成用户的人影。投影屏幕为大尺寸显示器或投影幕墙等。

在计算用户在投影屏幕上形成的人影的位置时，考虑由于投影仪发出的光线部分投射到用户身上，在投影屏幕上形成了用户的人影，因此，需要使得投影仪(相当于光源)、用户的轮廓、投影屏幕在同一个坐标系，才能计算到用户在投影屏幕上形成的人影的位置，而深度图像、投影仪和投影屏幕分别处于不同的坐标系下，因此，需要对深度图像中的人影的轮廓做位置转换，且需要计算投影屏幕与投影仪之间的距离，因此需要提前标定深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系。位置关系包括位置转换关系、距离等。

S103.根据人影的位置形成投影屏幕图像；投影屏幕图像包括人影图像。

在本实施例中，可以预设投影屏幕的尺寸。如果待投影至投影屏幕上的内容为空，则可以根据用户的人影在投影屏幕上的位置以及投影屏幕的尺寸形成投影屏幕图像，从而投影屏幕图像仅有人影图像。如果待投影至投影屏幕的内容为第一数字内容，则可以根据投影屏幕与计算机内置显示屏的配置参数确定待显示第一数字内容在投影屏幕上的位置，然后根据待显示第一数字内容在投影屏幕上的位置、用户的人影在投影屏幕上的位置以及投影屏幕的尺寸形成投影屏幕图像。从而投影屏幕图像中包括人影图像，以及第一数字内容。人影图像是数字信息，但与真实人影的形状完全重合，因此基于人影图像可以和数字界面元素进行分析。

S104.识别投影屏幕图像中的第一内容及触发动作。

在本实施例中，触发动作可以人影图像与第一数字内容进行互动的触发动作，也可以是人影图像单独执行的目标动作，也可以是第一数字内容单独执行的目标动作。识别投影屏幕图像中的第一内容，是对投影屏幕图像中的第一数字内容和人影图像中的具体内容进行识别。例如，识别人影图像中包括的具体部件以及各部件的位置；识别第一数字内容的物体、物体的类型及物体的位置等。识别投影屏幕图像中的触发动作是对人影图像的姿态或人影图像与第一数字内容的状态进行识别。识别了投影屏幕图像中的触发动作，从而可以对第一内容进行相应的操作。

S105.根据第一内容和触发动作生成第二内容，将第二内容投影至投影屏幕。

在本实施例中，可以预设触发动作对应的内容。例如，用户做出了打枪的动作，则打枪动作对应的内容可以为在用户的人影中手的位置处发射出虚拟的子弹；用户的人影碰到了子弹或三维物体或其他的内容，则触碰动作对应的内容可以为将碰到用户或用户的人影碰到的子弹或三维物体或其他内容弹开。如图2所示，用户的人影图像碰到了小球，则将小球弹开，被弹开的小球按原路返回，其余小球保存下落状态，则可以根据弹开的小球和其余的小球生成第二内容，然后将第二内容投影至投影屏幕，从用户的角度看，就好像是实际的人影与小球进行了互动。

根据第一内容和触发动作生成第二内容时，如果触发动作为人影图像与第一数字内容进行互动的触发动作，则可以对第一内容中的第一数字内容进行操作，得到第二内容；如果触发动作为人影图像单独执行的目标动作，则可以根据目标动作生成第二数字内容，得到第二内容，然后再将第二内容投影至投影屏幕，从而，从用户的角度来看，就好像是自己的人影可以直接与数字内容进行互动。

本申请实施例提供的与数字内容进行互动的方法，通过深度摄像头采集用户的深度图像，深度摄像头设置在用户的第一方向；根据深度图像以及深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系计算用户在投影屏幕上形成的人影的位置；投影仪设置在用户的第一方向，投影屏幕设置在用户的第二方向，第一方向与第二方向相反；根据人影的位置形成投影屏幕图像；投影屏幕图像包括人影图像；识别投影屏幕图像中的第一内容及触发动作；根据第一内容和触发动作生成第二内容，将第二内容投影至投影屏幕；从而当用户在投影屏幕上形成人影时，可以基于人影形成人影图像，然后基于人影图像可以与投影屏幕上的数字内容进行互动，从而对于人影对投影屏幕上的内容进行遮挡时，可以直接将被遮挡的内容从人影位置处推出，从而不会对其他用户对人影位置处的内容的查看，且从用户的角度看，就好像可以直接采用人影与数字内容进行互动一样，提高用户体验。

在一个可选的实施方式中，步骤S102，根据深度图像以及深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系计算用户在投影屏幕上形成的人影的位置，具体包括：根据深度图像计算用户的轮廓的第一位置；根据深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系将第一位置转换为以投影仪为坐标系原点的第二位置；基于投影仪与第二位置的连线，与投影屏幕的交点，确定用户在投影屏幕上形成的人影的位置。

具体地，根据深度图像可以计算到用户的轮廓的第一位置，第一位置为以深度摄像头为坐标系原点的位置。由于标定了深度摄像头与投影屏幕的位置转换关系、投影屏幕与投影仪的位置转换关系，因此，可以根据深度摄像头与投影屏幕的位置转换关系先将第一位置转换为以投影屏幕的中心点为坐标系原点的位置，然后根据投影屏幕与投影仪的位置转换关系将以投影屏幕的中心点为坐标系原点的位置转换为以投影仪为坐标系原点的第二位置。然后以投影仪为原点，做原点与第一位置的连接线，延长线与投影屏幕的交点，即为用户的人影在投影屏幕上的位置，将该位置转换为以投影屏幕的中心点为坐标系原点的位置，即得到了用户在投影屏幕上的人影的位置。

在本实施例中，由于深度图像可以识别到用户的轮廓，因此，根据深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系将第一位置转换为以投影仪为坐标系原点的第二位置，基于投影仪与第二位置的连线，与投影屏幕的交点，确定用户在投影屏幕上形成的人影的位置，是基于人影形成的原理来确定人影的位置，可以准确计算到用户在投影屏幕上的人影的位置，可以使得形成的人影图像与真实的人影完全重合，从而在基于人影与数字机内容进行互动时，更加形象具体。

在一个可选的实施例中，步骤S104中，识别投影屏幕图像中的触发动作，包括：在检测到第一内容中的第一数字内容与人影图像产生碰撞的情况下，识别到投影屏幕图像中的触发动作；或，在检测到人影图像执行了目标动作的情况下，识别到投影屏幕图像中的触发动作。

具体地，触发动作可以是人影图像主动执行的，也可以是数字内容执行的。如果人影图像执行了目标动作，且未与第一数字内容产生碰撞，则识别到投影屏幕图像中的触发动作；如果人影图像执行了目标动作，且与第一数字内容产生碰撞，则识别到投影屏幕图像中的触发动作；如果人影图像未动，第一数字内容与人影图像产生了碰撞，则识别到投影屏幕图像中的触发动作。

由于需要基于人影图像与数字内容进行互动，因此通过对第一内容中的第一数字内容与人影图像进行碰撞检测或对人影图像的目标动作进行检测，就可以识别到投影屏幕图像中的触发动作。

在一个可选的实施例中，检测到第一内容中的第一数字内容与人影图像产生碰撞，包括：识别第一内容中的第一数字内容的位置；在检测到第一数字内容的位置与人影图像的位置具有交点的情况下，确认第一内容中的第一数字内容与人影图像产生碰撞。

具体地，由于对投影屏幕图像中的第一数字内容和人影图像中的具体内容进行了识别。例如，识别人影图像中包括的具体部件以及各部件的位置；识别第一数字内容的物体、物体的类型及物体的位置等。而如果第一数字内容与人影图像产生了碰撞，则第一数字内容与人影图像的位置存在交点，如因此，在检测到第一内容中的第一数字内容与人影图像产生碰撞的过程中，可以对第一数字内容与人影图像的位置进行比较，在判定第一数字内容的位置与人影图像的位置具有交点的情况下，确认第一内容中的第一数字内容与人影图像产生碰撞。

在本实施例中，由于已知了第一数字内容和人影图像的位置，因此，在检测第一数字内容和人影图像是否产生碰撞时，将第一数字内容和人影图像的位置进行比较，可以快速、准确地确定第一数字内容和人影图像是否产生了碰撞。

在一个可选的实施例中，步骤S105中，根据第一内容和触发动作生成第二内容，包括：根据触发动作对第一内容中与人影图像具有交点的第一数字内容执行第一操作；根据执行第一操作后的第一数字内容和其余的第一数字内容生成第二内容。

具体地，第一操作可以为弹开、推开等。如果第一内容中的第一数字内容与人影图像产生碰撞，则可以将碰到用户的人影图像或用户的人影图像碰到的第一数字内容弹开。则对碰到用户的人影图像或用户的人影图像碰到的第一数字内容进行弹开后，被弹开的第一数字内容形成第二状态，例如，与原运动方向相反的方向前进。执行第一操作后的第一数字内容和其余的第一数字内容生成了第二内容。如图2所示，下落的小球碰到了用户的人影图像，则人影图像将小球弹开，被弹开的小球按原路返回，其余的小球继续下落。

在本实施例中，通过根据触发动作对第一内容中与人影图像具有交点的第一数字内容执行第一操作，从而使得人影图像与第一数字内容进行互动，并根据执行第一操作后的第一数字内容和其余的第一数字内容生成第二内容，从用户的角度看，就好像是自己的实际人影可以和第一数字内容进行互动一样，提高用户体验。

在一个可选的实施例中，检测到人影图像执行了目标动作，包括：识别人影图像的目标部位所形成的姿态；在检测到姿态为目标姿态的情况下，确认人影图像执行了目标动作。

具体地，如果人影图像未与第一数字内容进行碰撞，或投影屏幕图像中不包括第一数字内容，则可以对人影图像的目标部位所形成的姿态进行识别。目标部位可以为手、胳膊、脚等。由于执行目标动作时，会形成一定的姿态，因此，通过对目标部位所形成的姿态进行识别，可以准确识别人影图像中的目标动作。

在一个可选的实施例中，步骤S105中，根据第一内容和触发动作生成第二内容，包括：根据第一内容确认目标部位的位置；在目标部位的位置处生成与触发动作对应的第二内容。

具体地，由于对投影屏幕图像中的第一数字内容和人影图像中的具体内容进行了识别。例如，识别人影图像中包括的具体部件以及各部件的位置。因此，根据第一内容可以确定目标部位的位置。由于目标部位执行了目标动作，则应该针对目标部位执行第二操作，在目标部位的位置处生成与触发动作对应的第二内容，例如，用户手做出了打枪的姿势，则可以在用户的人影图像中手的位置处生成虚拟的子弹。

在本实施例中，通过根据第一内容确认目标部位的位置，在目标部位的位置处生成与触发动作对应的第二内容，从而可以生成人影图像的目标部位的目标动作对应的第二内容，实现基于人影图像与数字内容进行互动，从用户的角度看，就好像是自己的实际人影处可以生成第二内容，提高用户体验。

本申请实施例还提供了一种与数字内容进行互动的装置，可应用于基于用户的人影与屏幕上的数字内容进行互动的场景，如图3所示，与数字内容进行互动的装置包括：

采集单元21，用于通过深度摄像头采集用户的深度图像，深度摄像头设置在用户的第一方向；具体地实施方式详见上述方法实施例步骤S101的描述，在此不再赘述。

计算单元22，用于根据深度图像以及深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系计算用户在投影屏幕上形成的人影的位置；投影仪设置在用户的第一方向，投影屏幕设置在用户的第二方向，第一方向与第二方向相反；具体地实施方式详见上述方法实施例步骤S102的描述，在此不再赘述。

形成单元23，用于根据人影的位置形成投影屏幕图像；投影屏幕图像包括人影图像；具体地实施方式详见上述方法实施例步骤S103的描述，在此不再赘述。

识别单元24，用于识别投影屏幕图像中的第一内容及触发动作；具体地实施方式详见上述方法实施例步骤S104的描述，在此不再赘述。

生成单元25，用于根据第一内容和触发动作生成第二内容，将第二内容投影至投影屏幕。具体地实施方式详见上述方法实施例步骤S105的描述，在此不再赘述。

本申请实施例提供的与数字内容进行互动的装置，通过深度摄像头采集用户的深度图像，深度摄像头设置在用户的第一方向；根据深度图像以及深度摄像头与投影屏幕的位置关系、投影屏幕与投影仪的位置关系计算用户在投影屏幕上形成的人影的位置；投影仪设置在用户的第一方向，投影屏幕设置在用户的第二方向，第一方向与第二方向相反；根据人影的位置形成投影屏幕图像；投影屏幕图像包括人影图像；识别投影屏幕图像中的第一内容及触发动作；根据第一内容和触发动作生成第二内容，将第二内容投影至投影屏幕；从而当用户在投影屏幕上形成人影时，可以基于人影形成人影图像，然后基于人影图像可以与投影屏幕上的数字内容进行互动，从而对于人影对投影屏幕上的内容进行遮挡时，可以直接将被遮挡的内容从人影位置处推出，从而不会对其他用户对人影位置处的内容的查看，且从用户的角度看，就好像可以直接采用人影与数字内容进行互动一样，提高用户体验。

基于与前述实施例中一种与数字内容进行互动同样的发明构思，本申请实施例还提供一种电子设备，如图4所示，包括：处理器31和存储器32，其中处理器31和存储器32可以通过总线或者其他方式连接，图4中以通过总线连接为例进行说明。

处理器31可以为中央处理器(Central Processing Unit，CPU)。处理器31还可以为其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片，或者上述各类芯片的组合。

存储器32作为一种非暂态计算机可读存储介质，可用于存储非暂态软件程序、非暂态计算机可执行程序以及模块，如本申请实施例中的与数字内容进行互动对应的程序指令/模块。处理器31通过运行存储在存储器32中的非暂态软件程序、指令以及模块，从而执行处理器的各种功能应用以及数据处理，即实现上述方法实施例中的与数字内容进行互动。

存储器32可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储处理器31所创建的数据等。此外，存储器32可以包括高速随机存取存储器，还可以包括非暂态存储器，例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中，存储器32可选包括相对于处理器31远程设置的存储器，这些远程存储器可以通过网络连接至处理器31。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

上述的一个或者多个模块存储在存储器32中，当被处理器31执行时，执行如图1所示实施例中的与数字内容进行互动。

上述电子设备具体细节可以对应参阅图1所示的实施例中对应的相关描述和效果进行理解，此处不再赘述。

本领域技术人员可以理解，实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)、随机存储记忆体(Random AccessMemory，RAM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive，缩写：HDD)或固态硬盘(Solid-State Drive，SSD)等；所述存储介质还可以包括上述种类的存储器的组合。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程信息处理设备的处理器以产生一个机器，使得通过计算机或其他可编程信息处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程信息处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程信息处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种与数字内容进行互动的方法，包括：

通过深度摄像头采集用户的深度图像，所述深度摄像头设置在所述用户的第一方向；

根据所述深度图像以及所述深度摄像头与投影屏幕的位置关系、所述投影屏幕与投影仪的位置关系计算所述用户在所述投影屏幕上形成的人影的位置；所述投影仪设置在所述用户的第一方向，所述投影屏幕设置在所述用户的第二方向，所述第一方向与所述第二方向相反；

根据所述人影的位置形成投影屏幕图像；所述投影屏幕图像包括人影图像；

识别所述投影屏幕图像中的第一内容及触发动作；

根据所述第一内容和所述触发动作生成第二内容，将所述第二内容投影至所述投影屏幕。

2.根据权利要求1所述的与数字内容进行互动的方法，所述根据所述深度图像以及所述深度摄像头与投影屏幕的位置关系、所述投影屏幕与投影仪的位置关系计算所述用户在所述投影屏幕上形成的人影的位置，包括：

根据所述深度图像计算所述用户的轮廓的第一位置；

根据所述深度摄像头与投影屏幕的位置关系、所述投影屏幕与投影仪的位置关系将所述第一位置转换为以所述投影仪为坐标系原点的第二位置；

基于所述投影仪与所述第二位置的连线，与所述投影屏幕的交点，确定所述用户在所述投影屏幕上形成的人影的位置。

3.根据权利要求1所述的与数字内容进行互动的方法，识别所述投影屏幕图像中的触发动作，包括：

在检测到所述第一内容中的第一数字内容与所述人影图像产生碰撞的情况下，识别到所述投影屏幕图像中的触发动作；或，

在检测到所述人影图像执行了目标动作的情况下，识别到所述投影屏幕图像中的触发动作。

4.根据权利要求3所述的与数字内容进行互动的方法，所述检测到所述第一内容中的第一数字内容与所述人影图像产生碰撞，包括：

识别所述第一内容中的第一数字内容的位置；

在检测到所述第一数字内容的位置与所述人影图像的位置具有交点的情况下，确认所述第一内容中的第一数字内容与所述人影图像产生碰撞。

5.根据权利要求4所述的与数字内容进行互动的方法，所述根据所述第一内容和所述触发动作生成第二内容，包括：

根据所述触发动作对所述第一内容中与所述人影图像具有交点的第一数字内容执行第一操作；

根据执行第一操作后的第一数字内容和其余的第一数字内容生成第二内容。

6.根据权利要求3所述的与数字内容进行互动的方法，检测到所述人影图像执行了目标动作，包括：

识别所述人影图像的目标部位所形成的姿态；

在检测到所述姿态为目标姿态的情况下，确认所述人影图像执行了目标动作。

7.根据权利要求6所述的与数字内容进行互动的方法，所述根据所述第一内容和所述触发动作生成第二内容，包括：

根据所述第一内容确认所述目标部位的位置；

在所述目标部位的位置处生成与所述触发动作对应的第二内容。

8.一种与数字内容进行互动的装置，包括：

采集单元，用于通过深度摄像头采集用户的深度图像，所述深度摄像头设置在所述用户的第一方向；

计算单元，用于根据所述深度图像以及所述深度摄像头与投影屏幕的位置关系、所述投影屏幕与投影仪的位置关系计算所述用户在所述投影屏幕上形成的人影的位置；所述投影仪设置在所述用户的第一方向，所述投影屏幕设置在所述用户的第二方向，所述第一方向与所述第二方向相反；

形成单元，用于根据所述人影的位置形成投影屏幕图像；所述投影屏幕图像包括人影图像；

识别单元，用于识别所述投影屏幕图像中的第一内容及触发动作；

生成单元，用于根据所述第一内容和所述触发动作生成第二内容，将所述第二内容投影至所述投影屏幕。

9.一种电子设备，包括：

至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器执行如权利要求1-7任意一项所述的与数字内容进行互动的方法。

10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使计算机执行如权利要求1-7任意一项所述的与数字内容进行互动的方法。

Images