CN103365483B - 实现虚拟屏的系统及方法 - Google Patents

Abstract

本发明涉及一种实现虚拟屏的系统及方法。该实现虚拟屏的系统包括：处理模块，用于初始化三维立体屏幕及所述三维立体屏幕周围的辅助区域；采集模块，用于采集标记的图像；识别模块，用于识别出标记的位置；所述处理模块还用于当检测出标记从所述三维立体屏幕进入所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。上述实现虚拟屏的系统及方法，通过初始化三维立体屏幕及辅助区域，采集标记的图像，识别出标记的位置，检测出标记在辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件，如此防止在三维立体屏幕的边缘触控时，发生偏移而导致触控操作失效的情况，方便对显示屏幕的边缘位置进行操作。

Description

实现虚拟屏的系统及方法

【技术领域】

本发明涉及人机交互领域，特别涉及一种实现虚拟屏的系统及方法。

【背景技术】

传统的人机交互方法通常是通过交互设备与被控装置进行人机交互，例如，通过键盘或鼠标输入操作指令，被控装置响应输入的操作指令。近年来触摸屏的出现给用户带来了不少便捷。触摸屏技术的操作模式更加人性化，使得用户输入操作命令时更直观、更简单，并带给用户更加真实的体验，因此触摸屏技术已经越来越广泛的应用到各个领域。

触摸屏必须具有一层特定的触摸膜，且用户必须接触到触摸屏才能输入相应的操作指令。为了使人机交互更加便利，提出了虚拟屏的概念，即用户往往希望在自己的面前虚拟出一块屏幕(虚拟的触摸屏)。通过该虚拟屏，用户可以在远处对显示屏幕进行操控，而无需接触显示屏幕，也无需设置传统的触摸屏。然而，当用户触摸虚拟屏的边缘位置上图标时，往往由于用户的手抖造成偏离到虚拟屏的边缘之外，无法触摸到边缘位置的图标，造成操作失效。

【发明内容】

基于此，有必要提供一种方便操作显示屏幕边缘位置的实现虚拟屏的系统。

一种实现虚拟屏的系统，包括：

处理模块，用于初始化三维立体屏幕及所述三维立体屏幕周围的辅助区域；

采集模块，用于采集标记的图像；

识别模块，用于识别出标记的位置；

所述处理模块还用于当检测出标记在所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。

在其中一个实施例中，所述处理模块还用于当检测出标记从所述三维立体屏幕进入所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。

在其中一个实施例中，所述三维立体屏幕位于建立以O为坐标原点，XYZ为坐标轴的三维坐标系中，所述辅助区域在X轴、Y轴上包围所述三维立体屏幕。

在其中一个实施例中，所述处理模块还用于获取所述标记的三维坐标，且当检测出所述标记位于所述三维立体屏幕时，将所述标记的三维坐标转换为所述显示屏幕的屏幕坐标，在显示屏幕的屏幕坐标处产生触摸事件。

在其中一个实施例中，所述三维立体屏幕为平板状，所述平板状的三维立体屏幕与XY平面平行，所述处理模块还用于检测出所述标记在XY平面上从所述三维立体屏幕和辅助区域移出时，产生抬起事件。

在其中一个实施例中，所述辅助区域在Z轴上包围所述三维立体屏幕。

在其中一个实施例中，所述处理模块还用于检测出所述标记从所述三维立体屏幕和辅助区域移出时，产生抬起事件。

在其中一个实施例中，所述三维立体屏幕为长方体屏幕，所述辅助区域为包围所述三维立体屏幕的长方体区域除去三维立体屏幕所占区域后的剩余区域，所述辅助区域包括四个角区域和四个边区域，所述两个角区域之间夹着一个边区域，当所述处理模块检测出所述标记位于所述角区域且产生触控操作时，所述处理模块还用于在与所述角区域对应的显示屏幕的角位置产生触发事件，当所述处理模块检测出所述标记位于所述边区域内且产生触控操作时，所述处理模块还用于在与所述边区域对应的显示屏幕的边缘产生触发事件。

此外，还有必要提供一种方便操作显示屏幕边缘位置的实现虚拟屏的方法。

一种实现虚拟屏的方法，包括以下步骤：

初始化三维立体屏幕及所述三维立体屏幕周围的辅助区域；

采集标记的图像；

识别标记出的位置；

当检测出标记在所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。

在其中一个实施例中，所述当检测出标记在所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件的步骤具体包括：

当检测出标记从所述三维立体屏幕进入所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。

在其中一个实施例中，所述三维立体屏幕位于建立的以O为坐标原点，XYZ为坐标轴的三维坐标系中，所述辅助区域在X轴、Y轴上包围所述三维立体屏幕。

在其中一个实施例中，还包括步骤：获取所述标记的三维坐标，当检测出所述标记位于所述三维立体屏幕时，将所述标记的三维坐标转换为所述显示屏幕的屏幕坐标，在显示屏幕的屏幕坐标处产生触摸事件。

在其中一个实施例中，所述三维立体屏幕为平板状，所述平板状的三维立体屏幕与XY平面平行，所述实现虚拟屏的方法还包括步骤：当检测出所述标记在XY平面上从所述三维立体屏幕和辅助区域移出时，产生抬起事件。

在其中一个实施例中，所述辅助区域在Z轴上包围所述三维立体屏幕。

在其中一个实施例中，还包括步骤：当检测出所述标记从所述三维立体屏幕和辅助区域移出时，产生抬起事件。

在其中一个实施例中，所述三维立体屏幕为长方体屏幕，所述辅助区域为包围所述三维立体屏幕的长方体区域除去三维立体屏幕所占区域后的剩余区域，所述辅助区域包括四个角区域和四个边区域，所述两个角区域之间夹着一个边区域；

所述实现虚拟屏的方法还包括步骤：当检测出所述标记位于所述角区域内且产生触控操作时，在与所述角区域对应的显示屏幕的角位置产生触发事件；

当检测出所述标记位于所述边区域内且产生触控操作时，在与所述边区域对应的显示屏幕的边缘产生触发事件。

上述实现虚拟屏的系统及方法，通过初始化三维立体屏幕及辅助区域，采集标记的图像，识别出标记的位置，检测出标记在辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件，如此防止在三维立体屏幕的边缘触控时，发生偏移而导致触控操作失效的情况，方便对显示屏幕的边缘位置进行操作。

【附图说明】

图1为一个实施例中实现虚拟屏的系统的结构示意图；

图2为一个实施例中实现虚拟屏的原理图；

图3为一个实施例中三维立体屏幕及辅助区域的侧面示意图；

图4为另一个实施例中三维立体屏幕及辅助区域平行于XY平面的平面示意图；

图5为一个实施例中实现虚拟屏的方法的流程图。

【具体实施方式】

下面结合具体的实施例及附图对技术方案进行详细的描述。

如图1所示，在一个实施例中，一种实现虚拟屏的系统，包括采集模块10和识别模块20和处理模块30。其中：处理模块30用于初始化三维立体屏幕及三维立体屏幕周围的辅助区域；采集模块10用于采集标记的图像；识别模块20用于识别出标记的位置；处理模块30还用于当检测出标记在辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。

具体的，可预先定义触控操作与产生触发事件的对应关系，例如，标记为反光材料，当用手握住部分反光材料时，产生选中触控操作，则对显示屏幕的边缘上的某个图标产生选中指令。触发事件为处理模块30产生在显示屏幕上产生的触发指令。此外，触控操作可为在三维立体屏幕上标记相对于采集模块10所在平面的位置坐标发生变化，触发事件也可为点击显示屏幕上的某个图标(鼠标单击或双击图标)等。

在一个实施例中，处理模块30还用于当检测出标记从三维立体屏幕进入辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。如此，仅从三维立体屏幕进入辅助区域且产生触控操作，才会在显示屏的边缘产生触发事件，从三维立体屏幕及辅助区域外进入辅助区域且产生触控操作时，触控操作失效。

在一个实施例中，三维立体屏幕位于建立的以O为坐标原点，XYZ为坐标轴的三维坐标系中，辅助区域在X轴、Y轴上包围三维立体屏幕。三维立体屏幕的XY平面与采集模块10所在的平面平行。此外，三维立体屏幕可为平板状，平板状三维立体屏幕与XY平面平行。

具体的，如图2所示，以显示屏幕的中心为坐标原点O，采集模块10所在平面与显示屏幕所在的平面平行，显示屏幕所在的平面与XY平面平行，构建三维坐标系O-XYZ，初始化的三维立体屏幕和辅助区域位于三维坐标系O-XYZ中，三维立体屏幕为在显示屏幕前方虚拟的长方体屏幕，长方体屏幕的一个面平行于显示屏幕，辅助区域为包围三维立体屏幕的长方体区域除去三维立体屏幕所占区域后的剩余区域。例如，三维立体屏幕的区域中点的坐标属于集合A，A＝{(x，y，z)|-40≤x≤40，-30≤y≤30，-140≤z≤-10}，辅助区域中点的坐标属于集合B，B＝C-A，其中，C＝{(x，y，z)|-41≤x≤41，-31≤y≤31，-141≤z≤-9}，标记M在辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件，参图2所示，三维立体屏幕的abcd平面平行于显示屏幕，d的坐标为(40，-30，-140)，辅助区域的a’b’c’d’平面平行于显示屏幕，d’的坐标为(-41，-31，-141)。此外，可根据用户输入来初始化三维立体屏幕及辅助区域，用户可根据自身需要来输入三维立体屏幕的长宽高以及三维立体屏幕的位置，同时根据三维立体屏幕的坐标范围及预定延伸范围确定辅助区域的坐标范围，使得用户操作更加方便。本实施例中，辅助区域全包围三维立体屏幕。在其他实施例中，三维立体屏幕位于以显示屏幕的中心为坐标原点O，XYZ坐标轴构建的三维坐标系中，采集模块10所在平面与显示屏幕所在的平面成一定夹角，采集模块10与XY平面平行，则显示屏幕与XY平面成一定夹角，如夹角为30、60或90度等。此外，坐标原点O可根据需要选定。

在一个实施例中，处理模块30将标记在三维立体屏幕或辅助区域上的位置转换为显示屏幕的屏幕坐标，在显示屏幕的屏幕坐标位置处显示发生触摸事件的触点。其中，触摸事件是指处理模块30产生的触摸指令。当产生触摸指令时，使得触点处于按住显示屏幕的状态(相当于触摸到触摸屏)。触点对应了显示屏幕的屏幕坐标位置在显示屏幕上的位置点，可以采用图标或特定的标志来显示触点。

在一个实施例中，辅助区域在X轴和Y轴上包围三维立体屏幕，即辅助区域的X轴、Y轴上的坐标范围与三维立体屏幕的X轴、Y轴的坐标范围不同，Z轴上的坐标范围相同，例如三维立体屏幕的区域中的点的坐标属于集合A，A＝{(x，y，z)|-40≤x≤40，-30≤y≤30，-140≤z≤-10}，辅助区域中点的坐标属于集合B，B＝C-A，其中C＝{(x，y，z)|-41≤x≤41，-31≤y≤31，-140≤z≤-10}，标记在辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。

在一个实施例中，辅助区域在X轴和Y轴上包围三维立体屏幕，在Z轴方向的反方向上包围三维立体屏幕，即辅助区域的X轴、Y轴、Z轴上的坐标范围与三维立体屏幕的X轴、Y轴、Z轴的坐标范围不同，例如三维立体屏幕的区域中的点的坐标属于集合A，A＝{(x，y，z)|-40≤x≤40，-30≤y≤30，-140≤z≤-10}，辅助区域中的点的坐标属于集合B，B＝C-A，其中，C＝{(x，y，z)|-41≤x≤41，-31≤y≤31，-141≤z≤-10}，标记在辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。

因用户在空中操作标记模拟触摸真实的触摸屏，标记位于三维立体屏幕，将其在三维立体屏幕的坐标转换为显示屏幕的屏幕坐标后，且产生触控操作时，对应的为对显示屏幕的边缘图标产生触发操作，而用户操作标记时，可能因为手抖等因素，标记偏移了三维立体屏幕，导致对显示屏幕的边缘图标的触控操作失效，为此初始化时在三维立体屏幕周围初始化辅助区域，在三维立体屏幕的边缘产生触控操作而使得标记发生偏移进入辅助区域后，处理模块30仍然在显示屏幕的边缘产生触发事件，提高了在显示屏幕的边缘操作的便利性。

进一步的，在一个实施例中，采集模块10可为三维图像采集装置，例如立体视觉系统(由两台空间位置已知的摄像机及相关数据处理设备组成)、结构光系统(由一台摄像机、一台光源以及相关数据处理设备组成)或TOF(time offlight，飞行时间)深度相机等。

采集模块10用于采集标记的图像，其中，标记可为指定颜色和/或形状的物体。进一步的，在一个实施例中，标记可以为指定颜色和/或形状的反光材料。优选的，标记为圆形的反光源。在其他实施例中，标记还可以是人体的某个部位，例如可以是人的手指等。

识别模块20识别出标记在三维立体屏幕和辅助区域的位置，标记的位置是标记在三维坐标系中的坐标。具体的，识别模块20可采用传统的图像处理方法提取图像中的标记的区域，再获取标记的重心的像素坐标，从而得到标记的位置。

在一个实施例中，处理模块30获取标记的三维坐标，检测出标记位于三维立体屏幕内时，将标记的三维坐标转换为显示屏幕的屏幕坐标，在显示屏幕的屏幕坐标处产生触摸事件。具体的，由于三维立体屏幕所在的三维坐标与显示屏幕的屏幕坐标不一样，可预先建立三维坐标与屏幕坐标的对应关系。处理模块30检测出标记在三维立体屏幕的三维坐标位置后，可根据三维坐标与屏幕坐标的对应关系，将其三维坐标转换为显示屏幕的屏幕坐标，在显示屏幕的屏幕坐标位置对应的触点产生触摸事件(触摸到触摸屏)。

在一个实施例中，三维立体屏幕可为平板状，平板状三维立体屏幕与XY平面平行，当辅助区域在X轴和Y轴上包围三维立体屏幕时，处理模块30检测出标记在XY平面上从三维立体屏幕和辅助区域移出时，产生抬起事件。具体的，三维立体屏幕的区域的点的坐标属于集合A，A＝{(x，y，z)|-40≤x≤40，-30≤y≤30，-140≤z≤-10}，辅助区域中点的坐标属于集合B，B＝C-A，其中，C＝{(x，y，z)|-41≤x≤41，-31≤y＜31，-140≤z＜-10}时，处理模块30检测出标记的坐标{(x，y，z)|x＜-41∪x＞41，y＜-31∪y＞31，z＜-140∪z＞-10}时，从三维立体屏幕和辅助区域移出，产生抬起事件，即产生抬起指令，使得触点处于松开状态(相当于离开触摸屏)。而处理模块30检测出标记在辅助区域内时，仍然产生触摸事件，即产生触摸指令，使得触点仍然处于按住状态。

在一个实施例中，当辅助区域在X轴、Y轴和Z轴上反方向上包围三维立体屏幕时，处理模块30检测出标记从三维立体屏幕和辅助区域移出时，产生抬起事件。如三维立体屏幕的区域中的点的坐标属于集合A，A＝{(x，y，z)|-40≤x≤40，-30≤y≤30，-140≤z≤-10}，辅助区域中的点的坐标属于集合B，B＝C-A，其中，C＝{(x，y，z)|-41≤x≤41，-31≤y≤31，-141≤z≤-10}，处理模块30检测标记从三维立体屏幕和辅助区域移出，即从上述坐标范围内移出时，产生抬起事件，即产生抬起指令，使得触点处于松开状态。图3为三维立体屏幕及辅助区域的侧面示意图，标记从YZ平面上移出时，应移出Y的坐标范围为-31～+31，Z的坐标范围为-141～-10。

在一个实施例中，三维立体屏幕及辅助区域位于以O为坐标原点，XYZ为坐标轴的三维坐标系中，三维立体屏幕为长方体屏幕，辅助区域为包围三维立体屏幕的长方体区域除去三维立体屏幕所占区域后的剩余区域。图4为三维立体屏幕及辅助区域平行于XY平面的平面示意图，三维立体屏幕在XY平面上的坐标范围为{(x，y)|-40≤x≤40，-30≤y≤30}，辅助区域在XY平面上的坐标范围为(x，y)∈{(-41≤x＜-40)∪(40＜x≤41)，(-31≤y＜-30)∪(30＜y≤31)}∪{(-41≤x＜-40)∪(40＜x≤41)，-30≤y≤30}∪{-40≤x≤40，(-31≤y＜-30)∪(30＜y≤31)}，辅助区域被分成四个角区域{(x，y)|-41≤x＜-40，-31≤y＜-30}、{(x，y)|-41≤x＜-40，30＜y≤31}、{(x，y)|40＜x≤41，30＜y≤31}和{(x，y)|40＜x≤41，-31≤y＜-30}和四个边区域{(x，y)|-41≤x＜-40，-30≤y≤30}、{(x，y)|40＜x≤41)，-30≤y≤30}、{(x，y)|-40≤x≤40，-31≤y＜-30}{(x，y)|-40≤x≤40，30＜y≤31}。两个角区域之间夹着一个边区域。处理模块30检测出标记位于角区域{(x，y)|-41≤x＜-40，-31≤y＜-30且产生触控操作时，在显示屏幕上与该角区域对应的左下角位置产生触发事件，同理可分别在显示屏幕的左上角、右上角和右下角位置产生触发事件，其中，显示屏幕的左上角、左下角、右上角和右下角是以图4中所示X轴反方向为左、Y轴正方向为上，此处仅为说明，不作为对本方案的限定。

处理模块30检测出标记位于边区域{(x，y)|-41≤x＜-40，-30≤y≤30}时，在显示屏幕上与该边区域对应的左边缘产生触摸事件，同理可分别在显示屏幕的右边缘、上边缘和下边缘产生触发事件。

如图5所示，一种实现虚拟屏的方法，包括以下步骤：

步骤S10，初始化三维立体屏幕及三维立体屏幕周围的辅助区域。

在一个实施例中，三维立体屏幕位于建立的以O为坐标原点，XYZ为坐标轴的三维坐标系中，辅助区域在X轴、Y轴上包围三维立体屏幕。此外，三维立体屏幕可为平板状，平板状三维立体屏幕与XY平面平行。

如图2所示，以显示屏幕的中心为坐标原点O，显示屏幕所在的平面与XY平面平行，构建三维坐标系O-XYZ，初始化的三维立体屏幕和辅助区域位于三维坐标系O-XYZ中，三维立体屏幕为在显示屏幕前方虚拟的长方体屏幕，长方体屏幕的一个面平行于显示屏幕，辅助区域为包围三维立体屏幕的长方体区域除去三维立体屏幕所占区域后的剩余区域。例如，三维立体屏幕的区域中点的坐标属于集合A，A＝{(x，y，z)|-40≤x≤40，-30≤y≤30，-140≤z≤-10}，辅助区域中点的坐标属于集合B，B＝C-A，其中C＝{(x，y，z)|-41≤x≤41，-31≤y≤31，-141≤z≤-9}。此外，可根据用户输入来初始化三维立体屏幕及辅助区域，用户可根据自身需要来输入三维立体屏幕的长宽高以及三维立体屏幕的位置，同时根据三维立体屏幕的坐标范围及预定延伸范围确定辅助区域的坐标范围，使得用户操作更加方便。本实施例中，辅助区域全包围三维立体屏幕。

在其他实施例中，三维立体屏幕位于以显示屏幕的中心为坐标原点O，XYZ坐标轴构建的三维坐标系中，显示屏幕与XY平面成一定夹角，如夹角为30、60或90度等。此外，坐标原点O可根据需要选定。

在其他实施例中，辅助区域在X轴和Y轴上包围三维立体屏幕，即辅助区域的X轴、Y轴上的坐标范围与三维立体屏幕的X轴、Y轴的坐标范围不同，Z轴上的坐标范围相同，例如三维立体屏幕的区域中的点的坐标属于集合A，A＝{(x，y，z)|-40≤x≤40，-30≤y≤30，-140≤z≤-10}，辅助区域中点的坐标属于集合B，B＝C-A，其中C＝{(x，y，z)|-41≤x≤41，-31≤y≤31，-140≤z≤-10}。

在其他实施例中，辅助区域在X轴和Y轴上包围三维立体屏幕，在Z轴方向的反方向上包围三维立体屏幕，即辅助区域的X轴、Y轴、Z轴上的坐标范围与三维立体屏幕的X轴、Y轴、Z轴的坐标范围不同，例如三维立体屏幕的区域中的点的坐标属于集合A，A＝{(x，y，z)|-40≤x≤40，-30≤y≤30，-140≤z≤-10}，辅助区域中的点的坐标属于集合B，B＝C-A，其中，C＝{(x，y，z)|-41≤x≤41，-31≤y≤31，-141≤z≤-10}。

步骤S20，采集标记的图像。

具体的，标记可以为指定颜色和/或形状的物体。进一步的，在一个实施例中，标记可以为指定颜色和/或形状的反光材料。优选的，标记为圆形的反光源。在其他实施例中，标记还可以是人体的某个部位，例如可以是人的手指等。

步骤S30，识别标记出的位置。

具体的，可采用X轴、Y轴坐标表示三维立体屏幕中某一点位置的坐标。可采用传统的图像处理方法提取图像中的标记的区域，再获取标记的重心的像素坐标，从而得到标记的位置。

步骤S40，当检测出标记在辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。

具体的，可预先定义触控操作与产生触发事件的对应关系，例如，标记为反光材料，当用手握住部分反光材料时，产生选中触控操作，则对显示屏幕的边缘上的某个图标产生选中指令。触发事件为处理模块产生在显示屏幕上产生的触发指令。

在一个实施例中，步骤S40包括：当检测出标记从三维立体屏幕进入辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。如此，仅从三维立体屏幕进入辅助区域且产生触控操作，才会在显示屏的边缘产生触发事件，从三维立体屏幕及辅助区域外进入辅助区域且产生触控操作时，触控操作失效。

用户操作标记时，可能因为手抖等因素，标记偏移了三维立体屏幕，导致对显示屏幕的边缘图标的触控操作失效，为此初始化时在三维立体屏幕周围初始化辅助区域，在三维立体屏幕的边缘产生触控操作而使得标记发生偏移进入辅助区域后，仍然在显示屏幕的边缘产生触发事件，提高了在显示屏幕的边缘操作的便利性。

在一个实施例中，上述实现虚拟屏的方法，还包括步骤：获取标记的三维坐标，当检测出标记位于三维立体屏幕内时，将标记的三维坐标转换为显示屏幕的屏幕坐标，在显示屏幕的屏幕坐标处产生触摸事件。具体的，由于三维立体屏幕所在的三维坐标与显示屏幕的屏幕坐标不一样，可预先建立三维坐标与屏幕坐标的对应关系。检测出标记在三维立体屏幕的位置后，可根据三维坐标与屏幕坐标的对应关系，将其三维坐标转换为显示屏幕的屏幕坐标，在显示屏幕的屏幕坐标位置对应的触点产生触摸事件(触摸到触摸屏)。

在一个实施例中，三维立体屏幕可为平板状，平板状三维立体屏幕与XY平面平行。上述实现虚拟屏的方法，还包括步骤：当辅助区域在X轴和Y轴上包围三维立体屏幕时，检测出标记在XY平面上从三维立体屏幕和辅助区域移出时，产生抬起事件。具体的，三维立体屏幕的区域的点的坐标属于集合A，A＝{(x，y，z)|-40≤x≤40，-30≤y≤30，-140≤z≤-10}，辅助区域中点的坐标属于集合B，B＝C-A，其中，C＝{(x，y，z)|-41≤x≤41，-31≤y＜31，-140≤z＜-10}时，处理模块30检测出标记的坐标{(x，y，z)|x＜-41∪x＞41，y＜-31∪y＞31，z＜-140∪z＞-10}时，从三维立体屏幕和辅助区域移出，产生抬起事件，即产生抬起指令，使得触点处于松开状态。而检测出标记在辅助区域内时，仍然产生触摸事件，即产生触摸指令，使得触点仍然处于按住状态。

在一个实施例中，上述实现虚拟屏的方法，还包括步骤：当辅助区域在X轴、Y轴和Z轴上反方向上包围三维立体屏幕时，检测出标记从三维立体屏幕和辅助区域移出时，产生抬起事件。如三维立体屏幕的区域中的点的坐标属于集合A，A＝{(x，y，z)|-40≤x≤40，-30≤y≤30，-140≤z≤-10}，辅助区域中的点的坐标属于集合B，B＝C-A，其中，C＝{(x，y，z)|-41≤x≤41，-31≤y≤31，-141≤z≤-10}，处理模块30检测标记从三维立体屏幕和辅助区域移出，即从上述坐标范围内移出时，产生抬起事件，即产生抬起指令，使得触点处于松开状态。图3为三维立体屏幕及辅助区域的侧面示意图，标记从YZ平面上移出时，应移出Y的坐标范围为-31～+31，Z的坐标范围为-141～-10。

在一个实施例中，三维立体屏幕及辅助区域以显示屏幕所在平面为XY平面的三维坐标系中，三维立体屏幕为长方体屏幕，辅助区域为包围三维立体屏幕的长方体区域除去三维立体屏幕所占区域后的剩余区域。图4为三维立体屏幕及辅助区域平行于XY平面的平面示意图，三维立体屏幕在XY平面上的坐标范围为{(x，y)|-40≤x≤40，-30≤y≤30}，辅助区域在XY平面上的坐标范围为(x，y)∈{(-41≤x＜-40)∪(40＜x≤41)，(-31≤y＜-30)∪(30＜y≤31)}∪{(-41≤x＜-40)∪(40＜x≤41)，-30≤y≤30}∪{-40≤x≤40，(-31≤y＜-30)∪(30＜y≤31)}，辅助区域被分成四个角区域{(x，y)|-41≤x＜-40，-31≤y＜-30}、{(x，y)|-41≤x＜-40，30＜y≤31}、{(x，y)|40＜x≤41，30＜y≤31}和{(x，y)|40＜x≤41，-31≤y＜-30}和四个边区域{(x，y)|-41≤x＜-40，-30≤y≤30}、{(x，y)|40＜x≤41)，-30≤y≤30}、{(x，y)|-40≤x≤40，-31≤y＜-30}{(x，y)|-40≤x≤40，30＜y≤31}，且两个角区域之间夹着一个边区域。

在本实施例中，上述实现虚拟屏的方法，还包括步骤：检测出标记位于角区域{(x，y)|-41≤x＜-40，-31≤y＜-30}且产生触控操作时，在显示屏幕上与该角区域对应的左下角位置产生触发事件，同理可分别在显示屏幕的左上角、右上角和右下角位置产生触发事件，其中，显示屏幕的左上角、左下角、右上角和右下角是以图4中所示X轴反方向为左、Y轴正方向为上，此处仅为说明，不作为对本方案的限定。

在本实施例中，上述实现虚拟屏的方法，还包括步骤：检测出标记位于边区域{(x，y)|-41≤x＜-40，-30≤y≤30}且产生触控操作时，在显示屏幕上与该边区域对应的左边缘产生触发事件，同理可分别在显示屏幕的右边缘、上边缘和下边缘产生触发事件。

上述实现虚拟屏的系统及方法，通过初始化三维立体屏幕及辅助区域，采集标记的图像，识别出标记的位置，检测出标记在辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件，如此防止在三维立体屏幕的边缘触控时，发生偏移而导致触控操作失效的情况，方便对显示屏幕的边缘位置进行操作。

另外，检测出标记从三维立体屏幕进入辅助区域且产生触控操作时，在三维立体屏幕的边缘产生触发事件，防止在显示屏幕的边缘触控时，发生偏移而导致触控操作失效的情况，且防止了从三维屏幕及辅助区域外进入辅助区域且产生触控操作时，产生在显示屏幕的边缘产生触发事件，降低了误触控操作；辅助区域在X轴、Y轴上包围三维立体屏幕时，检测出标记从三维立体屏幕和辅助区域移出时，产生抬起事件，这样可防止用户触摸屏幕后不小心偏移出三维立体屏幕导致触控操作失效；辅助区域在X轴、Y轴和Z轴上包围三维立体屏幕时，进一步防止出现偏移导致触控操作失效，提高了在显示屏幕的边缘操作的便利性。

以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (12)

1.一种实现虚拟屏的系统，其特征在于，包括：

处理模块，用于初始化三维立体屏幕及所述三维立体屏幕周围的辅助区域；

采集模块，用于采集标记的图像；

识别模块，用于识别出标记的位置；

所述处理模块还用于当检测出标记在所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件；

所述三维立体屏幕位于建立的以O为坐标原点，XYZ为坐标轴的三维坐标系中，所述辅助区域在X轴、Y轴上包围所述三维立体屏幕；所述辅助区域在Z轴上包围所述三维立体屏幕。

2.根据权利要求1所述的实现虚拟屏的系统，其特征在于，所述处理模块还用于当检测出标记从所述三维立体屏幕进入所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。

3.根据权利要求1所述的实现虚拟屏的系统，其特征在于，所述处理模块还用于获取所述标记的三维坐标，且当检测出所述标记位于所述三维立体屏幕时，将所述标记的三维坐标转换为所述显示屏幕的屏幕坐标，在显示屏幕的屏幕坐标处产生触摸事件。

4.根据权利要求1所述的实现虚拟屏的系统，其特征在于，所述三维立体屏幕为平板状，所述平板状三维立体屏幕与XY平面平行，所述处理模块还用于检测出所述标记在XY平面上从所述三维立体屏幕和辅助区域移出时，产生抬起事件。

5.根据权利要求1所述的实现虚拟屏的系统，其特征在于，所述处理模块还用于检测出所述标记从所述三维立体屏幕和辅助区域移出时，产生抬起事件。

6.根据权利要求1或2所述的实现虚拟屏的系统，其特征在于，所述三维立体屏幕为长方体屏幕，所述辅助区域为包围所述三维立体屏幕的长方体区域除去三维立体屏幕所占区域后的剩余区域，所述辅助区域包括四个角区域和四个边区域，两个角区域之间夹着一个边区域，当所述处理模块检测出所述标记位于所述角区域且产生触控操作时，所述处理模块还用于在与所述角区域对应的显示屏幕的角位置产生触发事件，当所述处理模块检测出所述标记位于所述边区域内且产生触控操作时，所述处理模块还用于在与所述边区域对应的显示屏幕的边缘产生触发事件。

7.一种实现虚拟屏的方法，包括以下步骤：

初始化三维立体屏幕及所述三维立体屏幕周围的辅助区域；

采集标记的图像；

识别标记出的位置；

当检测出标记在所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件；

其中，所述三维立体屏幕位于建立的以O为坐标原点，XYZ为坐标轴的三维坐标系中，所述辅助区域在X轴、Y轴上包围所述三维立体屏幕；所述辅助区域在Z轴上包围所述三维立体屏幕。

8.根据权利要求7所述的实现虚拟屏的方法，其特征在于，所述当检测出标记在所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件的步骤具体包括：

当检测出标记从所述三维立体屏幕进入所述辅助区域且产生触控操作时，在显示屏幕的边缘产生触发事件。

9.根据权利要求7所述的实现虚拟屏的方法，其特征在于，还包括步骤：

获取所述标记的三维坐标，当检测出所述标记位于所述三维立体屏幕时，将所述标记的三维坐标转换为所述显示屏幕的屏幕坐标，在显示屏幕的屏幕坐标处产生触摸事件。

10.根据权利要求7所述的实现虚拟屏的方法，其特征在于，所述三维立体屏幕为平板状，所述平板状的三维立体屏幕与XY平面平行，所述实现虚拟屏的方法还包括步骤：

当检测出所述标记在XY平面上从所述三维立体屏幕和辅助区域移出时，产生抬起事件。

11.根据权利要求7所述的实现虚拟屏的方法，其特征在于，还包括步骤：

当检测出所述标记从所述三维立体屏幕和辅助区域移出时，产生抬起事件。

12.根据权利要求7或8所述的实现虚拟屏的方法，其特征在于，所述三维立体屏幕为长方体屏幕，所述辅助区域为包围所述三维立体屏幕的长方体区域除去三维立体屏幕所占区域后的剩余区域，所述辅助区域包括四个角区域和四个边区域，两个角区域之间夹着一个边区域；

所述实现虚拟屏的方法还包括步骤：

当检测出所述标记位于所述角区域内且产生触控操作时，在与所述角区域对应的显示屏幕的角位置产生触发事件；

当检测出所述标记位于所述边区域内且产生触控操作时，在与所述边区域对应的显示屏幕的边缘产生触发事件。