CN115348438B - 三维显示设备控制方法及相关装置 - Google Patents
三维显示设备控制方法及相关装置 Download PDFInfo
- Publication number
- CN115348438B CN115348438B CN202210973207.1A CN202210973207A CN115348438B CN 115348438 B CN115348438 B CN 115348438B CN 202210973207 A CN202210973207 A CN 202210973207A CN 115348438 B CN115348438 B CN 115348438B
- Authority
- CN
- China
- Prior art keywords
- user
- projection
- image
- screen
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 35
- 230000009471 action Effects 0.000 claims abstract description 100
- 238000010586 diagram Methods 0.000 claims description 23
- 238000004590 computer program Methods 0.000 claims description 16
- 230000033001 locomotion Effects 0.000 description 24
- 230000001815 facial effect Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 210000003128 head Anatomy 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000005260 corrosion Methods 0.000 description 1
- 230000007797 corrosion Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/398—Synchronisation thereof; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/363—Image reproducers using image projection screens
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了三维显示设备控制方法及相关装置，三维显示设备包括控制器、屏幕以及图像采集装置，控制器分别与屏幕和图像采集装置连接，屏幕支持三维显示，图像采集装置设于屏幕的一侧边缘，用户想要通过三维显示设备观察不同的显示内容时，可以通过多次向用户发出提示信息，并提示用户根据提示信息进行动作，当用户的动作与预设的动作特征匹配时，根据用户的位置确定屏幕的显示区域，并在显示区域内显示用户想要观看的内容，从而方便用户能够通过一个屏幕同时观察不同的显示内容，并且降低了用户的操作难度，提高了用户的操作效率。
Description
技术领域
本申请涉及显示技术领域，尤其涉及一种三维显示设备控制方法及相关装置。
背景技术
现有技术中，用户在使用三维显示设备时，通常能够使用户在不佩戴其他辅助配件的情况下，直接在显示设备上观察到三维效果，但是用户在观察具有三维效果的图像时，用户需要保持固定的距离，并且通过紧盯显示设备的方式才能够达到最好的三维效果，用户在想通过三维显示装置观察其他显示内容时，需要用户通过遥控器或其他配件对显示出的选项进行选择，但是这种方式会增加用户的操作难度，降低了用户的操作效率。
发明内容
本申请实施例提供一种三维显示设备控制方法及相关装置。
第一方面，本申请实施例提供三维显示设备控制方法，所述三维显示设备包括控制器、屏幕以及图像采集装置，所述控制器分别与所述屏幕和所述图像采集装置连接，所述屏幕支持三维显示，所述图像采集装置设于所述屏幕的一侧边缘，所述方法包括：
所述控制器通过所述屏幕显示第一提示信息，所述第一提示信息用于提示用户按照所述屏幕显示的第一动图进行操作；
所述控制器通过所述图像采集装置确定当前用户的第一动作特征；
当所述第一动作特征与所述第一动图对应的第一预设动作特征匹配时，所述控制器通过所述图像采集装置确定所述用户的第一位置信息；
所述控制器通过所述屏幕显示第二提示信息，所述第二提示信息用于提示用户按照所述屏幕显示的第二动图进行操作，所述第二动图不同于所述第一动图；
所述控制器通过所述图像采集装置确定所述用户的第二动作特征；
当所述第二动作特征与所述第二动图对应的第二预设动作特征匹配时，所述控制器通过所述图像采集装置确定所述用户的第二位置信息；
当所述第一位置信息和所述第二位置信息匹配时，根据所述用户的位置信息确定所述屏幕的显示区域；
利用所述显示区域显示信息。
可选的，所述三维显示设备还包括投影装置，所述控制器还与所述投影装置连接，所述投影装置的投影方向与所述显示单元的出光方向相同，所述方法还包括：
所述控制器根据所述用户的位置信息控制所述投影装置进行投影，所述投影装置投影出的投影图像位于所述用户的正前方，所述投影图像为用于控制所述屏幕的控制操作界面的图像；
所述控制器通过所述图像采集装置确定所述用户针对所述投影图像的操作；
所述控制器确定所述操作对应的操作命令；
所述控制器利用所述显示区域显示所述操作命令对应的反馈内容。
可选的，所述根据所述用户的位置信息控制所述投影装置进行投影，包括：
根据所述用户的位置信息确定所述投影装置的投影区域，所述屏幕包括所述投影区域；
控制所述投影装置将投影图像投射至所述投影区域。
可选的，所述根据所述用户的位置信息确定所述投影装置的投影区域，包括：
根据所述用户的位置信息确定所述投影装置的投影距离与投影角度；
根据所述投影距离与所述投影角度确定所述投影区域。
可选的，所述控制器确定所述操作对应的操作命令，包括：
通过所述图像采集装置获取用户的动作图像；
确定所述动作图像的特征点；
根据所述特征点确定所述用户在所述投影图像上的点击位置；
根据所述点击位置确定所述操作命令。
可选的，所述确定所述动作图像的特征点，包括：
对所述动作图像进行图像处理，确定动作图像进行处理后的线条图；
确定所述线条图上在所述投影区域的端点，确认端点为所述动作图像的特征点。
第二方面，本申请实施例提供一种三维显示设备控制装置，应用于三维显示设备，所述三维显示设备控制装置包括：
显示单元，用于显示第一提示信息，所述第一提示信息用于提示用户按照所述屏幕显示的第一动图进行操作；
确定单元，用于确定当前用户的第一动作特征；
确定单元，还用于当所述第一动作特征与所述第一动图对应的第一预设动作特征匹配时，所述控制器通过所述图像采集装置确定所述用户的第一位置信息；
显示单元，还用于显示第二提示信息，所述第二提示信息用于提示用户按照所述屏幕显示的第二动图进行操作，所述第二动图不同于所述第一动图；
确定单元，还用于确定所述用户的第二动作特征；
确定单元，还用于当所述第二动作特征与所述第二动图对应的第二预设动作特征匹配时，所述控制器通过所述图像采集装置确定所述用户的第二位置信息；
确定单元，还用于当所述第一位置信息和所述第二位置信息匹配时，根据所述用户的位置信息确定所述屏幕的显示区域；
显示单元，用于利用所述显示区域显示信息。
第三方面，本申请实施例提供一种三维显示设备，包括处理器、存储器、收发器以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。
第四方面，本申请实施例提供了一种计算机可读存储介质，其中，上述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，上述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。
第五方面，本申请实施例提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可以看出，在本申请实施例中，当用户想要通过所述三维显示设备观察不同的显示内容时，可以通过多次向用户发出提示信息，并提示用户根据提示信息进行动作，当用户的动作与预设的动作特征匹配时，根据用户的位置确定所述屏幕的显示区域，并在显示区域内显示用户想要观看的内容，从而方便用户能够通过一个屏幕同时观察不同的显示内容，并且降低了用户的操作难度，提高了用户的操作效率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种三维显示设备的结构示意图；
图2是本申请实施例提供的一种三维显示设备上的投影装置进行投影的示意图；
图3是本申请实施例提供的一种三维显示设备控制方法的流程示意图；
图4是本申请实施例提供的当只有一个用户时的位置示意图；
图5是本申请实施例提供的有两个用户时的位置示意图；
图6是本申请实施例提供的一种三维显示设备的结构示意图；
图7是本申请实施例提供的一种三维显示设备控制装置的结构示意图。
附图标号说明：
| 标号 | 名称 | 标号 | 名称 |
| 10 | 屏幕 | 20 | 投影装置 |
| 11 | 显示单元 | 30 | 图像采集装置 |
| 12 | 柱镜阵列 |
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
以下分别进行详细说明。
本申请的说明书和权利要求书及所述附图中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
请参照图1，所述图1为三维显示设备的结构示意图，所述三维显示设备包括屏幕10、投影装置20以及图像采集装置30，其中，所述屏幕10包括显示单元11与柱镜阵列12，所述显示单元11的出光侧设有柱镜阵列12，所述显示单元11分别包括左眼显示单元11与右眼显示单元11，左眼显示单元11与右眼显示单元11的显示图像不相同，左眼显示单元11 与右眼显示单元11发出的光线经过柱镜阵列12后，分别传输至左眼与右眼，从而利用人眼的视差特性，使用户能够通过三维显示设备上观察到三维效果的显示图像。
如图2所示，所述投影设备设于所述屏幕10的顶部，所述投影设备用于投影图像，从而方便用户根据投影图像对所述三维显示设备进行控制。可以理解的是，所述投影设备除了设于所述屏幕10的顶部，还可以设于所述屏幕10的两侧边缘或所述屏幕10的底部。
所述图像采集装置30设于所述屏幕10的一侧边缘，优选实施方式中，所述图像采集装置30设于所述屏幕10的顶部，并与所述投影装置20并排设置。
其中，所述屏幕10与所述投影装置20以及所述图像采集装置30连接，所述投影装置 20的投影方向指向所述显示单元11的出光方向一侧。
如图3，所述三维显示设备控制方法：
步骤10，所述控制器通过所述屏幕10显示第一提示信息，所述第一提示信息用于提示用户按照所述屏幕10显示的第一动图进行操作；
其中，所述第一提示信息通过图像的方式对用户进行提示，具体的，所述屏幕10在指定区域显示第一动图，所述第一动图中包括可动的标识信息，从而方便指导用户根据所述第一动图中的标识信息进行动作，在一具体实施方式中，所述第一动图包括人形的动作轮廓，方便用户直观的根据所述第一动图进行动作模仿。
步骤20：所述控制器通过所述图像采集装置30确定当前用户的第一动作特征。
其中，当所述屏幕10显示所述第一动图时，为了能够准确的获取用户的操作意图，通过所述图像采集装置30获取所述用户的第一动作特征。具体的，所述第一动作特征可以为抬起手臂，挥舞手臂，双手交叉等动作。
步骤30：当所述第一动作特征与所述第一动图对应的第一预设动作特征匹配时，所述控制器通过所述图像采集装置30确定所述用户的第一位置信息。
其中，所述第一预设动作特征为所述控制器提前保存的多个动作特征，在一具体实施方式中，所述第一预设动作特征可以为挥手，摇头或其他动作。
其中，首先判断所述第一动作特征与所述第一预设动作特征的第一匹配相似度，当第一匹配相似度大于第一预设值时，确定所述第一动作特征与所述第一预设动作特征匹配，然后获取所述用户的第一位置信息，具体的，所述第一位置信息用于表示所述屏幕10与所述用户之间的位置关系。
步骤40，所述控制器通过所述屏幕10显示第二提示信息，所述第二提示信息用于提示用户按照所述屏幕10显示的第二动图进行操作，所述第二动图不同于所述第一动图；
步骤50，当所述第二动作特征与所述第二动图对应的第二预设动作特征匹配时，所述控制器通过所述图像采集装置30确定所述用户的第二位置信息；
其中，所述第二动图可以可以包括人形的动作轮廓，从而方便指导用户根据所述第一动图中的动作轮廓进行操作。
其中，为了避免所述屏幕10在判断过程中，所述控制器对所述第一动作特征出现判断失误，在所述第一动作特征与所述第一预设动作特征匹配后，继续通过所述屏幕10显示第二提示信息。具体的，所述第二提示信息用于向用户按照第二动图，当检测到用户的的第二动作特征与第二预设动作特征匹配时，再次确定所述用户的第二位置信息。
其中，所述第二一位置信息用于表示所述屏幕10与所述用户之间的位置关系。
步骤60，当所述第一位置信息和所述第二位置信息匹配时，根据所述用户的位置信息确定所述屏幕10的显示区域；
步骤70，利用所述显示区域显示信息。
其中，当所述第一位置信息与所述第二位置信息相匹配时，表示所述用户在执行所述第一动作特征对应的动作以及执行所述第二动作特征对应的动作时位置并未发生较大变化，因此根据所述第一位置信息与所述第二位置信息确定所述用户的位置信息，再根据所述用户的位置信息确定所述屏幕10的显示区域，并通过所述显示区域显示信息，从而方便用户通过所述三维显示设备分区域观察不同的显示内容。
在本申请实施例中，当用户想要通过所述三维显示设备观察不同的显示内容时，可以通过多次向用户发出提示信息，并提示用户根据提示信息进行动作，当用户的动作与预设的动作特征匹配时，根据用户的位置确定所述屏幕10的显示区域，并在显示区域内显示用户想要观看的内容，从而方便用户能够通过一个屏幕10同时观察不同的显示内容，并且降低了用户的操作难度，提高了用户的操作效率。
在可选的实施方式中，为了方便用户通过肢体动作对所述三维显示设备进行控制，首先需要确定当前正在观看所述三维显示设备的用户，具体的，在获取当前观察所述三维显示设备的用户的动作特征，之前还包括：
控制所述图像采集装置30获取用户的面部图像；
确定所述面部图像的眼部特征数量；
当所述眼部特征数量大于或等于预设数量时，确定所述面部图像为当前正在观看所述三维显示设备的用户。
其中，当用户的面对方向与所述三维显示设备的显示方向大于或等于90度，所述图像采集装置30只能够采集用户的头部图像，但是无法采集到用户的面部图形，因此可以判定为所述用户当前并未观看所述三维显示设备。当所述三维显示设备获取用户的面部图像后，确定所述面部图像的眼部特征，具体的，当用户正在观看所述三维显示设备时，用户至少一只眼睛或两只眼睛朝向所述三维显示设备，因此当所述面部图像中的眼部特征通常为0个时，表示用户并未观看三维显示设备，当所述面部图像中的眼部特征通常为1个或2个时，表示所述用户正在观看所述三维显示设备。
在可选的实施方式中，所述当所述第一位置信息和所述第二位置信息匹配时，根据所述用户的位置信息确定所述屏幕10的显示区域，包括：
当所述第一位置信息和所述第二位置信息匹配时，确定所述用户的位置信息；
根据所述用户的位置信息确定所述屏幕10的显示区域。
其中，为了方便对用户的位置进行校准，所述三维显示设备以其中心位置建立二维坐标系，其中，所述二维坐标系所在的平面与所述屏幕10的出光面相垂直，并且以所述三维显示设备的中心位置为原点，通过所述二维坐标系，能够方便确定用户与三维显示设备之间的相对位置。
在可选的实施方式中，所述三维显示设备还可以包括测距传感器，所述测距传感器能够进行转动，从而所述三维显示设备可以通过所述测距传感器确定所述用户的相对位置。具体的，当所述测距传感器检测到用户时，确定所述测距传感器的转动角度为所述用户与三维显示设备的倾斜角度，测距传感器测量的距离为用户与三维显示设备的距离。
在一具体实施方式中，所述用户的位置信息包括目标距离与目标角度，所述用户的位置信息可以通过所述第一位置信息与所述第二位置信息取平均值的方式进行计算。举例来说，所述第一位置信息与所述第二位置信息均包括位置距离信息与角度信息，当所述第一位置信息为(15°，2.1米)，所述第二位置信息为(12°，2.5米)时，对所述第一位置信息与所述第二位置信息进行平均值计算，从而确定所述位置信息的目标角度为13.5°，目标距离为 2.3米。
在另一具体实施方式中，所述确定所述用户的位置信息，包括：
当所述动作特征与预设动作体征匹配时，以所述三维显示设备的中心位置为原点，沿着与三维显示设备的出光面相垂直的平面建立二维坐标系；
确定所述用户在所述二维坐标系中的坐标位置；
根据所述坐标位置确定所述用户的位置信息。
在可选的实施方式中，所述确定所述用户在所述二维坐标系中的坐标位置，包括：
控制所述图像采集装置30采集所述用户的用户图像；
根据所述用户图像确定所述用户在所述二维坐标系中的坐标位置。
其中，所述坐标位置为(1,0)、(2,5)或其他坐标值。
其中，为了方便确定所述用户的位置信息，所述图像采集装置30按照预设设置角度采集所述用户的用户图像，具体的，所述图像采集装置30的采集方向与所述屏幕10的出光面相垂直，当所述用户图像中检测到任一用户时，所述三维显示设备根据所述用户图像中人物的图像尺寸以及人物在所述用户图像中的位置确定所述用户在所述二维坐标系中的坐标位置，具体的，当所述用户图像中的人物的图像尺寸越小时，表示所述用户与所述三维显示设备的距离越远，当人物在所述用户图像中的位置越远离中心位置时，表示所述用户与所述三维显示设备的倾斜角度越大。
具体来说，如图4，当观看所述三维现实设备的用户的数量为1个时，在确定所述用户在所述二维坐标系中的坐标位置后，根据第一公式A＝90-arctan(y/x)确定目标角度，根据第二公式S＝(x^2+y^2)^(0.5)确定所述目标距离，其中，所述A为目标角度，所述S为目标距离，所述x为二维坐标系中用户的横坐标值，所述y为二维坐标系中用户的纵坐标值。
在一具体实施方式中，所述用户的坐标位置为(3，4)，那么根据第一公式确定所述用户的目标角度为37度，根据第二公式确定所述用户的目标距离为5米。
在另一具体实施方式中，如图5，当观看所述三维显示设备的用户数量为多个时，可以根据多个用户的坐标位置共同确定所述目标位置与目标角度，在一具体实施方式中，正在观看所述三维显示设备的用户共计两人，分别为用户1与用户2，其中用户1的坐标位置为(3,4)，用户2的坐标位置为(1,3)，那么根据第三公式
确定目标角度，根据第四公式/>
确定目标距离。在一具体实施方式中，用户1的第一距离为 5米，第一角度为37度，用户2的第一距离为3.2米，第一角度为19度；那么根据用户1与用户2的第一距离与第一角度，所述目标距离为4.1米，所述目标角度为28度。
其中，在确定所述用户的位置信息后，根据第五公式：X＝cos(90°-A)*D以及所述用户的位置信息确定所述显示区域，所述X为所述屏幕10的显示区域与所述屏幕10中心的距离，所述A为所述位置信息中的目标角度，所述D为所述位置信息中的目标距离。在一具体实施方式中，所述A为13.5°，所述D为2.3米，那么X＝0.54米，那么再确定所述用户位置在所述屏幕所在平面的投影位置与所述屏幕的中心位置的连线为显示方向，那么所述显示区域为沿着该连线的方向，并且距离所述屏幕10的中心位置的距离为0.54米的位置为所述显示区域。
在可选的实施方式中，所述三维显示设备还包括投影装置20，所述控制器还与所述投影装置20连接，所述投影装置20的投影方向与所述显示单元11的出光方向相同，所述方法还包括：
所述控制器根据所述用户的位置信息控制所述投影装置20进行投影，所述投影装置20 投影出的投影图像位于所述用户的正前方，所述投影图像为用于控制所述屏幕10的控制操作界面的图像；
所述控制器通过所述图像采集装置30确定所述用户针对所述投影图像的操作；
所述控制器确定所述操作对应的操作命令；
所述控制器利用所述显示区域显示所述操作命令对应的反馈内容。
其中，如图2所示，所述投影装置20设于所述三维显示设备的顶部。
其中，为了方便用户对所述三维显示设备进行控制，所述投影装置20的投影图像与所述三维显示设备的显示图像相同，可以理解的是，所述投影图形还可以为用于对所述三维显示设备进行调整或设置的界面。
其中，所述根据所述用户的位置信息控制所述投影装置20进行投影，包括：
根据所述用户的位置信息确定所述投影装置20的投影区域，所述屏幕10包括所述投影区域；
控制所述投影装置20将投影图像投射至所述投影区域。
其中，在所述投影装置20投射投影图像之前，需要首先根据所述用户的位置信心确定投影区域，方便用户进行操作，所述投影装置20的投影区域设于所述用户的前方。
在一具体实施方式中，所述投影区域位于所述用户与所述三维显示设备的中心位置的连线上，并靠近所述三维显示设备的一侧的30cm处位置。具体的，当所述用户的目标距离为 2.3米，目标角度为13.5度时，所述投影区域与所述屏幕10的中心法线呈13.5度角，并且与所述屏幕10的中心位置距离2.0米。
其中，在确定所述投影区域后，控制所述投影装置20在所述投影区域投射投影图像，所述投影图像为图形界面，所述图形界面包括虚拟按键及文字说明，所述文字说明用于说明所述虚拟按键的功能，所述虚拟按键能够在检测到所述用户触碰或点击后触发其对应的预设功能。
其中，所述操作命令可以为所述用户对所述投影图像进行单次点击、多次点击、长时间点击或其他动作。
在可选的实施方式中，所述控制器通过所述图像采集装置30确定所述用户针对所述投影图像的操作，包括：
通过所述图像采集装置30获取用户的动作图像；
确定所述动作图像的特征点；
根据所述特征点确定所述用户在所述投影图像上的点击位置；
根据所述点击位置确定定所述用户针对所述投影图像的操作。
其中，所述图像采集装置30采集用户的动作图像，由于用户通常通过手指对所述投影图像进行点击，因此所述图像采集装置30只需要采集所述用户的手部图像，在获取所述动作图像后，再确定所述动作图像的特征点。
其中，所述确定所述动作图像的特征点，包括：
对所述动作图像进行图像处理，确定动作图像进行处理后的线条图；
确定所述线条图上在所述投影区域的端点，确认端点为所述动作图像的特征点。
其中，为了方便根据所述动作图像确定其对应的线条图，可以首先对所述动作图像进行开运算后，再对所述动作图像进行提取骨架处理。具体的，在对动作图像进行开运算时，需要首先对图像进行腐蚀运算后再进行膨胀运算，从而用来消除小物体、在纤细点处分离物体、平滑较大物体的边界的同时并不明显改变其面积，在对动作图像进行开运算后，能够完成对动作图像的骨架提取，从而将所述原始图像中的线条细化至一个像素的宽度，方便对所述原始图像完成特征提取。
其中，在对所述动作图像进行图像处理后，所述动作图像转换为线条图，所述线条图为所述用户的肢体框架，所述线条图包括至少一个端点，当该端点位于所述投影区域时，确定该端点为所述动作图像的特征点。
在可选的实施方式中，根据所述特征点确定所述用户在所述投影图像上的点击位置。
其中，所述点击位置为所述投影图像上的任一区域。
其中，当所述用户通过手指点击所述投影图像时，所述线条图的端点位于所述投影图像上，并且所述动作图像的特征点位于所述投影图像上的某一区域，该区域用于对所述三维显示设备的运行参数进行控制或用于对所述三维显示设备的显示图像进行控制。
其中，所述操作命令为用于控制所述三维显示设备的控制命令，具体的，所述操作命令为切换频道命令，调整音量命令或其他控制命令。
其中，在确定所述点击动作信息后，所述三维显示设备判断所述点击动作信息对应区域的控制命令，在一具体实施方式中，当所述点击动作信息为点击所述投影图像的右上角的音量控制区域时，所述三维显示设备确定所述点击动作对应的区域为调大音量，那么确定所述用户的操作命令为调大音量的控制命令，所述三维显示设备在确定所述操作命令后，执行所述操作命令，并通过屏幕10向所述用于显示反馈结果，或通过所述三维显示设备的音频输出设备向用户发出提示信息。
请参阅图6，图6是本申请实施例提供的一种三维显示设备的结构示意图，如图所示，该服务设备包括处理器、存储器、收发器以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行以下步骤的指令：
所述控制器通过所述屏幕10显示第一提示信息，所述第一提示信息用于提示用户按照所述屏幕10显示的第一动图进行操作；
所述控制器通过所述图像采集装置30确定当前用户的第一动作特征；
当所述第一动作特征与所述第一动图对应的第一预设动作特征匹配时，所述控制器通过所述图像采集装置30确定所述用户的第一位置信息；
所述控制器通过所述屏幕10显示第二提示信息，所述第二提示信息用于提示用户按照所述屏幕10显示的第二动图进行操作，所述第二动图不同于所述第一动图；
所述控制器通过所述图像采集装置30确定所述用户的第二动作特征；
当所述第二动作特征与所述第二动图对应的第二预设动作特征匹配时，所述控制器通过所述图像采集装置30确定所述用户的第二位置信息；
当所述第一位置信息和所述第二位置信息匹配时，根据所述用户的位置信息确定所述屏幕10的显示区域；
利用所述显示区域显示信息。
在本申请的一实现方式中，上述程序包括还用于执行以下步骤的指令：
所述控制器根据所述用户的位置信息控制所述投影装置20进行投影，所述投影装置20 投影出的投影图像位于所述用户的正前方，所述投影图像为用于控制所述屏幕10的控制操作界面的图像；
所述控制器通过所述图像采集装置30确定所述用户针对所述投影图像的操作；
所述控制器确定所述操作对应的操作命令；
所述控制器利用所述显示区域显示所述操作命令对应的反馈内容。
在本申请的一实现方式中，在根据所述用户的位置信息控制所述投影装置20进行投影方面，上述程序包括具体用于执行以下步骤的指令：
根据所述用户的位置信息确定所述投影装置20的投影区域，所述屏幕10包括所述投影区域；
控制所述投影装置20将投影图像投射至所述投影区域。
在本申请的一实现方式中，在根据所述用户的位置信息确定所述投影装置20的投影区域方面，上述程序包括具体用于执行以下步骤的指令：
根据所述用户的位置信息确定所述投影装置20的投影距离与投影角度；
根据所述投影距离与所述投影角度确定所述投影区域。
在本申请的一实现方式中，在获取所述用户触发的点击命令方面，上述程序包括还用于执行以下步骤的指令：
通过所述图像采集装置30获取用户的动作图像；
确定所述动作图像的特征点；
根据所述特征点确定所述用户在所述投影图像上的点击位置；
根据所述点击位置确定所述操作命令。
在本申请的一实现方式中，在确定所述动作图像的特征点方面，上述程序包括具体用于执行以下步骤的指令：
对所述动作图像进行图像处理，确定动作图像进行处理后的线条图；
确定所述线条图上在所述投影区域的端点，确认端点为所述动作图像的特征点。
需要说明的是，本实施例的具体实现过程可参见上述方法实施例所述的具体实现过程，在此不再叙述。
请参阅图7，图7是本申请实施例提供的一种三维显示设备控制装置，该装置包括：
显示单元11410，用于显示第一提示信息，所述第一提示信息用于提示用户按照所述屏幕10显示的第一动图进行操作；
确定单元420，用于确定当前用户的第一动作特征；
确定单元420，还用于当所述第一动作特征与所述第一动图对应的第一预设动作特征匹配时，所述控制器通过所述图像采集装置30确定所述用户的第一位置信息；
显示单元11410，还用于显示第二提示信息，所述第二提示信息用于提示用户按照所述屏幕10显示的第二动图进行操作，所述第二动图不同于所述第一动图；
确定单元420，还用于确定所述用户的第二动作特征；
确定单元420，还用于当所述第二动作特征与所述第二动图对应的第二预设动作特征匹配时，所述控制器通过所述图像采集装置30确定所述用户的第二位置信息；
确定单元420，还用于当所述第一位置信息和所述第二位置信息匹配时，根据所述用户的位置信息确定所述屏幕10的显示区域；
显示单元11410，用于利用所述显示区域显示信息。
在本申请的一实现方式中，所述三维显示设备控制装置还包括投影单元，所述投影单元 430还用于：
所述控制器根据所述用户的位置信息控制所述投影装置20进行投影，所述投影装置20 投影出的投影图像位于所述用户的正前方，所述投影图像为用于控制所述屏幕10的控制操作界面的图像；
所述控制器通过所述图像采集装置30确定所述用户针对所述投影图像的操作；
所述控制器确定所述操作对应的操作命令；
所述控制器利用所述显示区域显示所述操作命令对应的反馈内容。
在本申请的一实现方式中，在根据所述用户的位置信息控制所述投影装置20进行投影方面，所述投影单元430具体用于：
根据所述用户的位置信息确定所述投影装置20的投影区域，所述屏幕10包括所述投影区域；
控制所述投影装置20将投影图像投射至所述投影区域。
在本申请的一实现方式中，在根据所述用户的位置信息确定所述投影装置20的投影区域方面，所述投影单元430具体用于：
根据所述用户的位置信息确定所述投影装置20的投影距离与投影角度；
根据所述投影距离与所述投影角度确定所述投影区域。
在本申请的一实现方式中，在所述控制器确定所述操作对应的操作命令方面，所述确定单元420还用于：
通过所述图像采集装置30获取用户的动作图像；
确定所述动作图像的特征点；
根据所述特征点确定所述用户在所述投影图像上的点击位置；
根据所述点击位置确定所述操作命令。
在本申请的一实现方式中，在确定所述动作图像的特征点方面，所述获取单元410具体用于：
对所述动作图像进行图像处理，确定动作图像进行处理后的线条图；
确定所述线条图上在所述投影区域的端点，确认端点为所述动作图像的特征点。
需要说明的是，确定单元420可通过处理器来实现，显示单元11410、投影单元430可通过收发器来实现。
本申请实施例还提供了一种计算机可读存储介质，其中，所述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如上述方法实施例中服务设备所描述的部分或全部步骤。
本申请实施例还提供了一种计算机程序产品，其中，所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，所述计算机程序可操作来使计算机执行如上述方法中服务设备所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
本申请实施例所描述的方法或者算法的步骤可以以硬件的方式来实现，也可以是由处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成，软件模块可以被存放于随机存取存储器(Random Access Memory，RAM)、闪存、只读存储器(Read OnlyMemory， ROM)、可擦除可编程只读存储器(Erasable Programmable ROM，EPROM)、电可擦可编程只读存储器(Electrically EPROM，EEPROM)、寄存器、硬盘、移动硬盘、只读光盘(CD-ROM) 或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器，从而使处理器能够从该存储介质读取信息，且可向该存储介质写入信息。当然，存储介质也可以是处理器的组成部分。处理器和存储介质可以位于ASIC中。另外，该ASIC可以位于接入网设备、目标网络设备或核心网设备中。当然，处理器和存储介质也可以作为分立组件存在于接入网设备、目标网络设备或核心网设备中。
本领域技术人员应该可以意识到，在上述一个或多个示例中，本申请实施例所描述的功能可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DigitalSubscriber Line， DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如，软盘、硬盘、磁带)、光介质(例如，数字视频光盘(DigitalVideo Disc，DVD))、或者半导体介质(例如，固态硬盘(Solid State Disk，SSD))等。
以上所述的具体实施方式，对本申请实施例的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本申请实施例的具体实施方式而已，并不用于限定本申请实施例的保护范围，凡在本申请实施例的技术方案的基础之上，所做的任何修改、等同替换、改进等，均应包括在本申请实施例的保护范围之内。
Claims (10)
1.一种三维显示设备控制方法，其特征在于，所述三维显示设备包括控制器、屏幕以及图像采集装置，所述控制器分别与所述屏幕和所述图像采集装置连接，所述屏幕支持三维显示，所述图像采集装置设于所述屏幕的一侧边缘，所述方法包括：
所述控制器通过所述屏幕显示第一提示信息，所述第一提示信息用于提示用户按照所述屏幕显示的第一动图进行操作；
所述控制器通过所述图像采集装置确定当前用户的第一动作特征；
当所述第一动作特征与所述第一动图对应的第一预设动作特征匹配时，所述控制器通过所述图像采集装置确定所述用户的第一位置信息；
所述控制器通过所述屏幕显示第二提示信息，所述第二提示信息用于提示用户按照所述屏幕显示的第二动图进行操作，所述第二动图不同于所述第一动图；
所述控制器通过所述图像采集装置确定所述用户的第二动作特征；
当所述第二动作特征与所述第二动图对应的第二预设动作特征匹配时，所述控制器通过所述图像采集装置确定所述用户的第二位置信息；
当所述第一位置信息和所述第二位置信息匹配时，根据所述用户的位置信息确定所述屏幕的显示区域；
利用所述显示区域显示信息。
2.根据权利要求1所述的方法，其特征在于，所述三维显示设备还包括投影装置，所述控制器还与所述投影装置连接，所述投影装置的投影方向与所述屏幕的出光方向相同，所述方法还包括：
所述控制器根据所述用户的位置信息控制所述投影装置进行投影，所述投影装置投影出的投影图像位于所述用户的正前方，所述投影图像为用于控制所述屏幕的控制操作界面的图像；
所述控制器通过所述图像采集装置确定所述用户针对所述投影图像的操作；
所述控制器确定所述操作对应的操作命令；
所述控制器利用所述显示区域显示所述操作命令对应的反馈内容。
3.根据权利要求2所述的方法，其特征在于，所述根据所述用户的位置信息控制所述投影装置进行投影，包括：
根据所述用户的位置信息确定所述投影装置的投影区域，所述屏幕包括所述投影区域；
控制所述投影装置将投影图像投射至所述投影区域。
4.根据权利要求3所述的方法，其特征在于，所述根据所述用户的位置信息确定所述投影装置的投影区域，包括：
根据所述用户的位置信息确定所述投影装置的投影距离与投影角度；
根据所述投影距离与所述投影角度确定所述投影区域。
5.根据权利要求2所述的方法，其特征在于，所述控制器确定所述操作对应的操作命令，包括：
通过所述图像采集装置获取用户的动作图像；
确定所述动作图像的特征点；
根据所述特征点确定所述用户在所述投影图像上的点击位置；
根据所述点击位置确定所述操作命令。
6.根据权利要求5所述的方法，其特征在于，所述确定所述动作图像的特征点，包括：
对所述动作图像进行图像处理，确定动作图像进行处理后的线条图；
确定所述线条图上在投影区域的端点，确认端点为所述动作图像的特征点。
7.一种三维显示设备控制装置，其特征在于，应用于三维显示设备，所述三维显示设备包括控制器、屏幕以及图像采集装置，所述三维显示设备控制装置包括：
显示单元，用于显示第一提示信息，所述第一提示信息用于提示用户按照所述屏幕显示的第一动图进行操作；
确定单元，用于确定当前用户的第一动作特征；
确定单元，还用于当所述第一动作特征与所述第一动图对应的第一预设动作特征匹配时，所述控制器通过所述图像采集装置确定所述用户的第一位置信息；
显示单元，还用于显示第二提示信息，所述第二提示信息用于提示用户按照所述屏幕显示的第二动图进行操作，所述第二动图不同于所述第一动图；
确定单元，还用于确定所述用户的第二动作特征；
确定单元，还用于当所述第二动作特征与所述第二动图对应的第二预设动作特征匹配时，所述控制器通过所述图像采集装置确定所述用户的第二位置信息；
确定单元，还用于当所述第一位置信息和所述第二位置信息匹配时，根据所述用户的位置信息确定所述屏幕的显示区域；
显示单元，用于利用所述显示区域显示信息。
8.根据权利要求7所述的三维显示设备控制装置，其特征在于，所述控制器根据所述用户的位置信息控制投影装置进行投影，所述投影装置投影出的投影图像位于所述用户的正前方，所述投影图像为用于控制所述屏幕的控制操作界面的图像；
所述控制器通过所述图像采集装置确定所述用户针对所述投影图像的操作；
所述控制器确定所述操作对应的操作命令；
所述控制器利用所述显示区域显示所述操作命令对应的反馈内容。
9.一种三维显示设备，其特征在于，包括处理器、存储器、收发器，以及一个或多个程序，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，所述程序包括用于执行如权利要求1-6任一项所述的方法中的步骤的指令。
10.一种计算机可读存储介质，其特征在于，存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如权利要求1-6任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210973207.1A CN115348438B (zh) | 2022-08-15 | 2022-08-15 | 三维显示设备控制方法及相关装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210973207.1A CN115348438B (zh) | 2022-08-15 | 2022-08-15 | 三维显示设备控制方法及相关装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN115348438A CN115348438A (zh) | 2022-11-15 |
| CN115348438B true CN115348438B (zh) | 2023-06-06 |
Family
ID=83951032
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210973207.1A Active CN115348438B (zh) | 2022-08-15 | 2022-08-15 | 三维显示设备控制方法及相关装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115348438B (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1214620A1 (en) * | 1999-09-07 | 2002-06-19 | 3Ality, Inc. | Systems for and methods of three dimensional viewing |
| CN106371595A (zh) * | 2016-08-31 | 2017-02-01 | 维沃移动通信有限公司 | 一种调出消息通知栏的方法及移动终端 |
| CN108920082A (zh) * | 2018-06-28 | 2018-11-30 | Oppo广东移动通信有限公司 | 操作控制方法、装置、存储介质及电子设备 |
| WO2022089441A1 (zh) * | 2020-10-30 | 2022-05-05 | 华为技术有限公司 | 一种跨设备的内容分享方法、电子设备及系统 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013091201A1 (zh) * | 2011-12-21 | 2013-06-27 | 青岛海信信芯科技有限公司 | 视区调整的方法和装置、能实现立体显示视频信号的设备 |
| CN106488170B (zh) * | 2015-08-28 | 2020-01-10 | 华为技术有限公司 | 视频通讯的方法和系统 |
| CN109785445B (zh) * | 2019-01-22 | 2024-03-08 | 京东方科技集团股份有限公司 | 交互方法、装置、系统及计算机可读存储介质 |
-
2022
- 2022-08-15 CN CN202210973207.1A patent/CN115348438B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1214620A1 (en) * | 1999-09-07 | 2002-06-19 | 3Ality, Inc. | Systems for and methods of three dimensional viewing |
| CN106371595A (zh) * | 2016-08-31 | 2017-02-01 | 维沃移动通信有限公司 | 一种调出消息通知栏的方法及移动终端 |
| CN108920082A (zh) * | 2018-06-28 | 2018-11-30 | Oppo广东移动通信有限公司 | 操作控制方法、装置、存储介质及电子设备 |
| WO2022089441A1 (zh) * | 2020-10-30 | 2022-05-05 | 华为技术有限公司 | 一种跨设备的内容分享方法、电子设备及系统 |
Non-Patent Citations (1)
| Title |
|---|
| 手持显控终端的屏幕自动定焦算法;徐鹏;;数字技术与应用(第11期);全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN115348438A (zh) | 2022-11-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10410089B2 (en) | Training assistance using synthetic images | |
| CN109996051B (zh) | 一种投影区域自适应的动向投影方法、装置及系统 | |
| US20130286161A1 (en) | Three-dimensional face recognition for mobile devices | |
| JP2020517027A (ja) | 顔画像品質を決定する方法および装置、電子機器ならびにコンピュータ記憶媒体 | |
| US20120293544A1 (en) | Image display apparatus and method of selecting image region using the same | |
| WO2017138995A1 (en) | Systems and methods for determining a region in an image | |
| CN109003224B (zh) | 基于人脸的形变图像生成方法和装置 | |
| WO2018053400A1 (en) | Improved video stabilization for mobile devices | |
| KR102392437B1 (ko) | 반사 기반 제어 활성화 기법 | |
| CN111527468A (zh) | 一种隔空交互方法、装置和设备 | |
| US11106278B2 (en) | Operation method for multi-monitor and electronic system using the same | |
| CN114690900B (zh) | 一种虚拟场景中的输入识别方法、设备及存储介质 | |
| CN113709544B (zh) | 视频的播放方法、装置、设备及计算机可读存储介质 | |
| JP2012238293A (ja) | 入力装置 | |
| CN110286906B (zh) | 用户界面显示方法、装置、存储介质与移动终端 | |
| US10609305B2 (en) | Electronic apparatus and operating method thereof | |
| CN111176425A (zh) | 多屏幕操作方法与使用此方法的电子系统 | |
| CN115348438B (zh) | 三维显示设备控制方法及相关装置 | |
| CN113778233B (zh) | 一种操控显示设备的方法、装置及可读介质 | |
| CN113010057B (zh) | 位姿控制方法及电子设备、计算机可读存储介质 | |
| CN116363725A (zh) | 显示设备的人像追踪方法、系统、显示设备及存储介质 | |
| US9761009B2 (en) | Motion tracking device control systems and methods | |
| CN114647983A (zh) | 显示设备及基于人像的距离检测方法 | |
| CN113938597A (zh) | 一种脸部识别方法、装置、计算机设备和存储介质 | |
| US9860480B2 (en) | Method for processing information and electronic device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |