CN116489439A - 一种显示设备及调整投屏画面位置的方法 - Google Patents

Abstract

本申请提供一种显示设备及调整投屏画面位置的方法，方法包括：响应于移动终端发出的投屏连接请求，启动摄像头，以及获取摄像头拍摄的用户图像；通过用户图像识别用户相对于屏幕中心位的方向信息；屏幕中心位为显示设备沿竖直方向的中心线位置；根据方向信息计算目标位置；接收移动终端向显示设备发送的投屏画面，以及控制显示器在目标位置显示投屏画面。所述显示设备可以通过摄像头拍摄的用户图像识别用户相对于屏幕中心的方向信息，从而自动调整移动终端向显示设备发送的投屏画面的目标位置，使投屏画面的目标位置的方向与用户的方向信息一致，便于用户查看或操控投屏画面，从而解决用户的方向信息与投屏画面方向不一致时影响用户体验的问题。

Description

一种显示设备及调整投屏画面位置的方法

技术领域

本申请涉及显示设备技术领域，尤其涉及一种显示设备及调整投屏画面位置的方法。

背景技术

显示设备可以通过无线局域网等通信方式与通信终端建立投屏连接关系，例如，镜像投屏。镜像投屏是指移动终端通过有线或无线的方式连接到显示设备，使移动终端中显示的画面投屏到显示设备中。用户在对移动终端与显示设备进行镜像投屏时，可以预先将移动终端和显示设备连接在同一个路由器组成的局域网内。移动终端要实时对移动终端所显示的内容进行录屏，并把录屏数据通过路由器转发到显示设备，显示设备进行实时解码显示。

在多窗口系统的显示设备中，显示设备可以同时显示多个播放窗口。以显示设备为智能电视为例，假设智能电视可以包括左右两个播放窗口，左边播放窗口可以显示电视主页或设置页面等，右边播放窗口可以显示终端设备的投屏画面。或者，电视主页画面可以在电视上全屏显示，而投屏画面则以悬浮窗口的方式悬浮显示在电视左侧或右侧等。

在投屏过程中，投屏画面的方向不会随着用户移动的方向而发生调整。示例性的，投屏用户在建立起投屏连接后，投屏画面是在显示设备的左侧窗口，用户也在显示设备的左侧窗口，也就是用户与投屏画面同方向，这样便于用户观看投屏画面。而当用户的方向改变时，如从显示设备左侧移动到显示设备右侧时，投屏画面并不会发生移动，就会出现用户与投屏画面方向不一致的情况，不便于用户查看投屏画面，影响用户体验。

发明内容

本申请一些实施例提供一种显示设备及调整投屏画面位置的方法，以解决用户的方向信息与投屏画面方向不一致时，影响用户体验的问题。

第一方面，本申请一些实施例提供一种显示设备，包括：

显示器，用于显示用户界面；

通信器，被配置为与移动终端建立投屏连接；

图像采集接口，被配置为连接摄像头，以采集用户图像，所述摄像头设置在显示器上边框或下边框的中心位置；

控制器，被配置为：

响应于移动终端发出的投屏连接请求，启动所述摄像头，以及，获取所述摄像头拍摄的用户图像；

通过所述用户图像识别用户相对于屏幕中心位的方向信息；所述屏幕中心位为所述显示设备沿竖直方向的中心线位置；

根据所述方向信息计算目标位置；

接收所述移动终端向所述显示设备发送的投屏画面，以及控制所述显示器在所述目标位置显示所述投屏画面。

由以上技术方案可知，上述实施例提供的显示设备可以通过摄像头拍摄的用户图像识别用户相对于屏幕中心的方向信息，从而自动调整移动终端向显示设备发送的投屏画面的目标位置，使投屏画面的目标位置的方向与用户的方向信息一致，便于用户查看或操控投屏画面，从而解决用户的方向信息与投屏画面方向不一致时影响用户体验的问题。

第二方面，本申请一些实施例提供一种显示设备，包括：

显示器，用于显示用户界面；

通信器，被配置为与移动终端建立投屏连接；

图像采集接口，被配置为连接摄像头，以采集本地视频数据，所述摄像头设置在显示器上边框或下边框的中心位置；

控制器，被配置为：

响应于移动终端发出的对健身媒资的投屏请求，启动所述摄像头，以及，获取所述摄像头拍摄的本地视频数据；

控制所述显示器在所述用户界面中全屏显示所述本地视频数据，以及控制所述显示器在所述用户界面中悬浮显示所述移动终端的健身媒资的投屏画面；

根据所述本地视频数据识别用户的头部相对于屏幕中心位的方向信息；所述屏幕中心位为显示设备沿竖直方向的中心线位置；

根据所述方向信息计算目标位置；

接收所述移动终端向所述显示设备发送的健身媒资的投屏画面，以及控制所述显示器在所述目标位置显示所述投屏画面。

由以上技术方案可知，上述实施例提供的显示设备可以根据摄像头拍摄的本地视频数据识别用户相对于显示设备屏幕中心的方向信息，从而自动调整移动终端向显示设备发送的投屏画面的目标位置。一方面可以保证目标位置的方向与用户头部方向一致，另一方面，可以保证用户位姿发生变化时，其视线高度与投屏画面的视线高度尽量一致，以提升用户跟练的体验。

第三方面，本申请一些实施例提供一种调整投屏画面位置的方法，应用于第一方面的显示设备，所述显示设备包括显示器、通信器、图像采集接口和控制器，其中，通信器被配置为与移动终端建立投屏连接，图像采集接口被配置为连接摄像头，以采集用户图像，所述摄像头设置在显示器上边框或下边框的中心位置；所述调整投屏画面位置的方法包括：

响应于移动终端发出的投屏连接请求，启动所述摄像头，以及，获取所述摄像头拍摄的用户图像；

通过所述用户图像识别用户相对于屏幕中心位的方向信息；所述屏幕中心位为所述显示设备沿竖直方向的中心线位置；

根据所述方向信息计算目标位置；

接收所述移动终端向所述显示设备发送的投屏画面，以及控制所述显示器在所述目标位置显示所述投屏画面。

由以上技术方案可知，上述实施例提供的调整投屏画面位置的方法可以通过摄像头拍摄的用户图像识别用户相对于屏幕中心的方向信息，从而自动调整移动终端向显示设备发送的投屏画面的目标位置，使投屏画面的目标位置的方向与用户的方向信息一致，便于用户查看或操控投屏画面，从而解决用户的方向信息与投屏画面方向不一致时影响用户体验的问题。

第四方面，本申请一些实施例提供一种调整投屏画面位置的方法，应用于第二方面的显示设备，所述显示设备包括显示器、通信器、图像采集接口和控制器，其中，通信器被配置为与移动终端建立投屏连接，图像采集接口被配置为连接摄像头，以采集用户图像，所述摄像头设置在显示器上边框或下边框的中心位置；所述调整投屏画面位置的方法包括：

响应于移动终端发出的对健身媒资的投屏请求，启动所述摄像头，以及，获取所述摄像头拍摄的本地视频数据；

控制所述显示器在用户界面中全屏显示所述本地视频数据，以及控制所述显示器在所述用户界面中悬浮显示所述移动终端的健身媒资的投屏画面；

根据所述本地视频数据识别用户的头部相对于屏幕中心位的方向信息；所述屏幕中心位为显示设备沿竖直方向的中心线位置；

根据所述方向信息计算目标位置；

接收所述移动终端向所述显示设备发送的健身媒资的投屏画面，以及控制所述显示器在所述目标位置显示所述投屏画面。

由以上技术方案可知，上述实施例提供的调整投屏画面位置的方法，所述方法可以根据摄像头拍摄的本地视频数据识别用户相对于显示设备屏幕中心的方向信息，从而自动调整移动终端向显示设备发送的投屏画面的目标位置。一方面可以保证目标位置的方向与用户头部方向一致，另一方面，可以保证用户位姿发生变化时，其视线高度与投屏画面的视线高度尽量一致，以提升用户跟练的体验。

附图说明

为了更清楚地说明本申请一些实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1为本申请一些实施例提供的显示设备与控制设备之间操作场景的示意图；

图2为本申请一些实施例提供的显示设备的硬件配置框图；

图3为本申请一些实施例提供的控制设备的硬件配置框图；

图4为本申请一些实施例提供的显示设备中软件配置示意图；

图5为本申请一些实施例提供的显示设备调整投屏画面位置的方法流程示意图；

图6为本申请一些实施例提供的显示设备通过用户图像识别用户相对于屏幕中心位的方向信息的流程示意图；

图7为本申请一些实施例提供的用户方向信息与屏幕中心位方向的关系示意图；

图8为本申请一些实施例提供的另一种用户方向信息与屏幕中心位方向的关系示意图；

图9为本申请一些实施例提供的显示设备在目标位置显示投屏画面的流程示意图；

图10为本申请一些实施例提供的显示设备确定第三方向的流程示意图；

图11为本申请一些实施例提供的显示设备从多个用户中识别出关键用户目标的流程示意图；

图12为本申请另一些实施例提供的显示设备调整投屏画面位置的方法流程示意图；

图13为本申请一些实施例提供的显示设备根据本地视频数据识别用户的头部相对于屏幕中心位的方向信息的流程示意图；

图14为本申请一些实施例提供的用户跟练场景示意图；

图15为本申请一些实施例提供的用户头部方向为第一方向时跟练场景示意图；

图16为本申请一些实施例提供的用户头部方向为第二方向时跟练场景示意图；

图17为本申请一些实施例提供的显示设备根据用户的位姿调整投屏画面位置的流程示意图；

图18为本申请一些实施例提供的显示设备根据用户的位姿调整投屏画面的效果示意图。

具体实施方式

为使本申请一些实施例的目的、技术方案和优点更加清楚，下面将结合本申请具体实施例及相应的附图对本申请一些实施例技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。

需要说明的是，本申请一些实施例中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请一些实施例的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。

本申请一些实施例中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。

术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。

图1为本申请一些实施例提供的显示设备与控制设备之间操作场景的示意图。如图1中示出，用户可通过移动终端300和控制设备100操作显示设备200。

在一些实施例中，移动终端300可与显示设备200安装软件应用，通过网络通信协议实现连接通信，实现一对一控制操作和数据通信的目的。也可以将移动终端300上显示音视频内容传输到显示设备200上，实现同步显示功能。

如图1中还示出，显示设备200还与服务器400通过多种通信方式进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。

显示设备200除了提供广播接收电视功能之外，还可以附加提供计算机支持功能的智能网络电视功能，包括但不限于，网络电视、智能电视、互联网协议电视(IPTV)等。

图2为本申请一些实施例提供的图1中显示设备200的硬件配置框图。

在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。

在一些实施例中，检测器230用于采集外部环境或与外部交互的信号。

在一些实施例中，显示器260包括用于呈现画面的显示屏组件，以及驱动图像显示的驱动组件，用于接收源自控制器输出的图像信号，进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面等。

在一些实施例中，通信器220是用于根据各种通信协议类型与外部设备或服务器400进行通信的组件。

在一些实施例中，控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。

在一些实施例中，用户可在显示器260上显示的图形用户界面(GUI)输入用户命令，则用户输入接口通过图形用户界面(GUI)接收用户输入命令。

在一些实施例中，用户接口280，为可用于接收控制输入的接口。

图3为本申请一些实施例提供的图1中控制设备的硬件配置框图。如图3所示，控制设备100包括控制器110、通信接口130、用户输入/输出接口、存储器、供电电源。

控制设备100被配置为控制显示设备200，以及可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起到用户与显示设备200之间交互中介作用。

在一些实施例中，控制设备100可是一种智能设备。如：控制设备100可根据用户需求安装控制显示设备200的各种应用。

在一些实施例中，如图1所示，移动终端300或其他智能电子设备，可在安装操控显示设备200的应用之后，可以起到控制设备100类似功能。

控制器110包括处理器单元112和RAM 113和ROM 114、通信接口130以及通信总线。控制器110用于控制控制设备100的运行和操作，以及内部各部件之间通信协作以及外部和内部的数据处理功能。

通信接口130在控制器110的控制下，实现与显示设备200之间控制信号和数据信号的通信。通信接口130可包括WiFi芯片131、蓝牙模块132、NFC模块133等其他近场通信模块中至少之一种。

用户输入/输出接口140，其中，输入接口包括麦克风141、触摸板142、传感器143、按键144等其他输入接口中至少一者。

在一些实施例中，控制设备100包括通信接口130和输入输出接口140中至少一者。控制设备100中配置通信接口130，如：WiFi、蓝牙、NFC等模块，可将用户输入指令通过WiFi协议、或蓝牙协议、或NFC协议编码，发送至显示设备200。

存储器190，用于在控制器的控制下存储驱动和控制控制设备100的各种运行程序、数据和应用。存储器190，可以存储用户输入的各类控制信号指令。

供电电源180，用于在控制器的控制下为控制设备100各元件提供运行电力支持。

图4为本申请一些实施例提供的图1中显示设备中软件配置示意图，在一些实施例中，将系统分为四层，从上至下分别为应用程序(Applications)层(简称“应用层”)、应用程序框架(Application Framework)层(简称“框架层”)和系统库层(简称“系统运行库层”)，以及内核层。

在一些实施例中，应用程序层中运行有至少一个应用程序，这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序、时钟程序、相机应用等；也可以是第三方开发者所开发的应用程序。

框架层为应用程序层的应用程序提供应用编程接口(Aplication PogrammingIterface，API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心，这个中心决定让应用层中的应用程序做出动作。

如图4所示，本申请一些实施例中应用程序框架层包括管理器(Managers)、内容提供者(Content Provider)和视图系统(View System)等。其中管理器包括以下模块中的至少一个：活动管理器(Activity Manager)用与和系统中正在运行的所有活动进行交互；位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问；文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息；通知管理器(Notification Manager)用于控制通知消息的显示和清除；窗口管理器(WindowManager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。

在一些实施例中，活动管理器用于：管理各个应用程序的生命周期以及通常的导航回退功能。

在一些实施例中，窗口管理器用于管理所有的窗口程序。

在一些实施例中，系统运行库层为上层即框架层提供支撑，当框架层被访问时，操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。

在一些实施例中，内核层是硬件和软件之间的层。如图4所示，内核层至少包含以下驱动中的至少一种：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器，温度传感器，触摸传感器、压力传感器等)等。

在一些实施例中，内核层还包括用于进行电源管理的电源驱动模块。

在一些实施例中，图4中的软件架构对应的软件程序和/或模块存储在图2或图3所示的第一存储器或第二存储器中。

上述移动终端300与显示设备200可以建立投屏连接，以使显示设备200可以同步播放移动终端300显示的画面内容。在本申请实施例中，移动终端300与显示设备200投屏连接时，可以通过特定的投屏连接协议。例如，通过Miracast、AirPlay、数字生活网络联盟(Digital Living Network Alliance，DLNA)、通用串行总线(Universal Serial Bus，USB)等连接协议，也可以是自开发的其他网络协议等，对此本申请不作具体限定。

示例性的，显示设备200可以通过无线局域网等通信方式与移动终端300建立投屏连接关系，例如，镜像投屏。镜像投屏是指移动终端300通过有线或无线的方式连接到显示设备200，使移动终端300中显示的画面投屏到显示设备200中。用户在对移动终端300与显示设备200进行镜像投屏时，可以预先将移动终端和显示设备连接在同一个路由器组成的局域网内。移动终端300要实时对移动终端所显示的内容进行录屏，并把录屏数据通过路由器转发到显示设备200，显示设备200进行实时解码显示。

在多窗口系统的显示设备中，显示设备200可以同时显示多个播放窗口。以显示设备200为智能电视为例，假设智能电视可以包括左右两个播放窗口，左边播放窗口可以显示电视主页或设置页面等，右边播放窗口可以显示移动终端300的投屏画面。或者，电视主页画面可以在电视上全屏显示，而投屏画面则以悬浮窗口的方式悬浮显示在电视左侧或右侧等。

在投屏过程中，投屏画面的方向不会随着用户移动的方向而发生调整。示例性的，投屏用户在建立起投屏连接后，投屏画面是在显示设备200的左侧窗口，用户也在显示设备200的左侧窗口，也就是用户与投屏画面同方向，这样便于用户观看投屏画面。而当用户的方向改变时，如从显示设备200的左侧移动到显示设备200的右侧时，投屏画面并不会发生移动，就会出现用户与投屏画面方向不一致的情况，不便于用户查看投屏画面，影响用户体验。

为了便于用户查看投屏画面，在对多窗口系统显示设备200中的投屏画面执行位置调整时，可以通过遥控指令的方式进行操控。在一些实施例中，可以通过与显示设备200配套的遥控器发送切换位置的指令，如向左或向右调整投屏画面的位置等。示例性的，用户在遥控器上按下方向键后，遥控器会将指定的键值发送至显示设备200。显示设备200在接收到该键值后，会控制显示器按照目标位置的方向调整投屏画面的位置。

但是，在上述调整方式中，需要用户频繁的切换，投屏画面不会随着用户方向的改变而进行调整，因此，在投屏画面方向与用户的方向信息不一致时，就会出现不便于用户查看投屏画面、不便于操控投屏画面的情况，进而影响用户体验。

为了解决用户的方向信息与投屏画面方向不一致时影响用户体验的问题，本申请一些实施例提供一种显示设备200。所述显示设备200包括显示器260、通信器220、图像采集接口290和控制器250。其中，通信器220被配置为与移动终端300建立投屏连接，图像采集接口290被配置为连接摄像头2901，以采集用户图像，摄像头2901设置在显示器260上边框或下边框的中心位置。该显示设备200可以通过摄像头2901拍摄的用户图像识别用户相对于显示设备200屏幕中心的方向信息，从而自动调整移动终端300向显示设备200发送的投屏画面的目标位置。

为了便于对本申请一些实施例中技术方案的理解，下面结合一些具体实施例和附图对各个步骤进行详细说明。图5为本申请一些实施例提供的显示设备调整投屏画面位置的方法流程示意图，如图5所示，显示设备200在调整投屏画面位置时，可以包括如下步骤S1-S4，具体内容如下：

步骤S1：响应于移动终端300发出的投屏连接请求，显示设备200启动摄像头2901，以及，获取摄像头2901拍摄的用户图像。

在移动终端300与显示设备200的投屏场景中，以多窗口系统的显示设备200为例，响应于移动终端300发出的投屏连接请求，移动终端300与显示设备200通过网络协议或USB线连接后，可以启动位于显示器260上边框或下边框的中心位置的摄像头2901，并获取摄像头2901拍摄的用户图像。这样，由于摄像头2901位于显示器260的中心位置，当拍摄到的用户图像中，如果用户在用户图像的中心位置，则说明该用户即位于显示设备200的中心位置。也就是说，通过摄像头2901拍摄的用户图像可以判断用户相对于显示设备200的方向信息。步骤S1执行完成后，可以执行如下步骤S2。

步骤S2：显示设备200通过用户图像识别用户相对于屏幕中心位的方向信息。

其中，屏幕中心位为显示设备200沿竖直方向的中心线位置。在一些实施例中，方向信息至少包括第一方向和第二方向，且第一方向和第二方向相反。图6为本申请一些实施例提供的显示设备通过用户图像识别用户相对于屏幕中心位的方向信息的流程示意图，如图6所示，显示设备200通过用户图像识别用户相对于屏幕中心位的方向信息时，首先可以获取显示设备200的屏幕中心位，之后，解析用户图像，以得到用户图像中用户目标的用户坐标集。获取到用户坐标集后，可以对比用户坐标集中的像素点坐标与屏幕中心位坐标，并设定比对的规则。如果用户坐标集中预设数量比例的像素点坐标大于屏幕中心位坐标，则可以确定方向信息为第一方向；如果用户坐标集中预设数量比例的像素点坐标小于屏幕中心位坐标，则可以确定方向信息为第二方向。

示例性的，图7为本申请一些实施例提供的用户方向信息与屏幕中心位方向的关系示意图，如图7所示，虚线即为显示设备200的屏幕中心位，通过解析用户图像得到用户目标的用户坐标集A。之后，对比用户坐标集A中的像素点坐标与屏幕中心位坐标。经对比，如果用户坐标集A中预设数量比例的像素点坐标大于屏幕中心位坐标，则可以确定用户的方向信息为第一方向，即图7中左侧箭头所指的方向。相反，如果用户坐标集A中预设数量比例的像素点坐标小于屏幕中心位坐标，则可以确定用户的方向信息为第二方向，即图7中右侧箭头所指的方向。其中，第一方向与第二方向相反。在一些实施例中，预设数量比例可以根据实际需求而定，可以结合像素点密度或其他相关因素来确定，本申请对此不作具体限定。步骤S2执行完成后，可以执行如下步骤S3。

步骤S3：显示设备200根据方向信息计算目标位置。

为了提升用户对投屏画面的观看体验，在一些实施例中，显示设备200可以根据用户的方向信息计算目标位置。图8为本申请一些实施例提供的另一种用户方向信息与屏幕中心位方向的关系示意图，如图8所示，显示设备200在识别出用户相对于屏幕中心位的方向信息后，可以通过用户的方向信息确定投屏画面的目标位置。示例性的，以第一方向为用户相对于屏幕中心位的左侧、第二方向为用户相对于屏幕中心位的右侧为例，为了使投屏画面与用户的方向信息一致，则投屏画面的目标位置的方向应与用户的方向信息一致。当用户在第二方向时，如图8中右侧方向时，则投屏画面也应显示在用户界面的右侧方向。步骤S3执行完成后，可以执行如下步骤S4。

步骤S4：显示设备200接收移动终端300向显示设备200发送的投屏画面，以及控制显示器260在目标位置显示投屏画面。

为了使投屏画面的目标位置的方向应与用户的方向信息一致，在一些实施例中，显示设备200可以在目标位置显示投屏画面。图9为本申请一些实施例提供的显示设备在目标位置显示投屏画面的流程示意图，如图9所示，显示设备200首先可以获取投屏画面的初始方向，之后，检测用户的方向信息。经检测，如果投屏画面的初始方向与用户的方向信息相同，则显示设备200可以控制显示器260在默认位置显示投屏画面，即无需调整投屏画面的位置。如果投屏画面的初始方向与用户的方向信息相反，则显示设备200可以控制显示器260在目标位置显示投屏画面。这样，投屏画面的目标位置的方向应与用户的方向信息一致，可以便于用户查看或操控投屏画面，提升用户的体验。

需要说明的是，在多窗口系统的显示设备200中，投屏画面目标位置的改变并不影响原来播放的页面。示例性的，投屏画面可以与原来的页面分屏显示，这样，投屏画面在第一方向显示时，原来的页面可以在第二方向显示，同样，投屏画面在第二方向显示时，投屏画面可以在第一方向显示。也就是说，在调整投屏画面目标位置的过程中，只是调整了显示的位置，并没有改变显示设备200中原有的播放内容。

为了支撑显示设备200实现在目标位置显示投屏画面，在一些实施例中，显示设备200首先可以建立移动终端300发送的投屏画面的传输通道，传输通道建立完成后，可以基于该传输通道接收移动终端300发送的投屏画面。之后，显示设备200可以解码接收到的投屏画面，解码完成后，再控制显示器260在目标位置显示该投屏画面。

在一些实施例中，方向信息还包括第三方向，该第三方向为屏幕中心位预设范围的方向。图10为本申请一些实施例提供的显示设备确定第三方向的流程示意图，如图10所示，在确定第三方向时，显示设备200首先可以计算用户坐标集中的像素点坐标与屏幕中心位坐标的差值，如果预设数量比例的像素点坐标对应的差值在差值范围内，则可以确定方向信息为第三方向。在确定为第三方向后，响应于方向信息为第三方向，显示设备200可以控制显示器260在用户界面的预设位置悬浮显示投屏画面。

示例性的，通过计算用户坐标集中的像素点坐标与屏幕中心位坐标的差值，可以获取到用户坐标集中的像素点坐标与屏幕中心位坐标之间坐标的距离差，在判定第三方向时，可以预先设定一个差值范围，如果二者之间的差值在差值范围内，则可以确定用户的方向信息为第三方向。在一些实施例中，第三方向也就是处于显示设备200屏幕中心位附近的方向，即用户处于显示设备200的中间位置附近，针对此场景，显示设备200可以控制显示器260在用户界面的预设位置悬浮显示投屏画面，如可以在左上角、右上角或其他位置等。

上述实施例适用于用户图像中仅有1个用户的场景，当用户图像中拍摄到的用户为多个时，显示设备200还可以从多个用户中识别出关键用户目标。图11为本申请一些实施例提供的显示设备从多个用户中识别出关键用户目标的流程示意图，如图11所示，显示设备200首先可以接收移动终端300发送的特征图像，之后，可以识别用户图像中的用户数量。当用户数量大于预设人数阈值时，显示设备200可以根据特征图像识别用户图像中的关键用户目标，最后，再按照关键用户目标识别用户相对于屏幕中心位的方向信息。

示例性的，预设人数阈值可以设置为1，当用户数量大于1时，显示设备200就可以根据移动终端300发送的特征图像识别用户图像中的关键用户目标。在一些实施例中，该特征图像可以包括投屏的关键用户目标的特征信息，之后，通过关键用户目标的特征信息从多个用户中识别到该关键用户目标，即确定该关键用户目标为投屏用户，再根据投屏用户的方向信息为基准来控制显示器260在目标位置显示投屏画面。

由以上技术方案可知，上述实施例提供一种显示设备200，所述显示设备200响应于移动终端发出的投屏连接请求，启动摄像头，以及，获取摄像头拍摄的用户图像；通过用户图像识别用户相对于屏幕中心位的方向信息；其中，屏幕中心位为显示设备沿竖直方向的中心线位置；根据方向信息计算目标位置；接收移动终端向显示设备发送的投屏画面，以及控制显示器在目标位置显示投屏画面。所述显示设备200可以使投屏画面的目标位置的方向与用户的方向信息一致，便于用户查看或操控投屏画面，从而解决用户的方向信息与投屏画面方向不一致时，影响用户体验的问题。

在另一些实施例中，本申请还提供一种显示设备200。所述显示设备200包括显示器260、通信器220、图像采集接口290和控制器250。其中，通信器220被配置为与移动终端300建立投屏连接，图像采集接口290被配置为连接摄像头2901，以采集本地视频数据，摄像头设置在显示器260上边框或下边框的中心位置。该显示设备200可以根据摄像头2901拍摄的本地视频数据识别用户相对于显示设备200屏幕中心的方向信息，从而自动调整移动终端300向显示设备200发送的投屏画面的目标位置。

为了便于对本申请一些实施例中技术方案的理解，下面结合一些具体实施例和附图对各个步骤进行详细说明。图12为本申请另一些实施例提供的显示设备调整投屏画面位置的方法流程示意图，如图12所示，显示设备200在调整投屏画面位置时，可以包括如下步骤S100-S500，具体内容如下：

步骤S100：响应于移动终端300发出的对健身媒资的投屏请求，显示设备200启动摄像头2901，以及，获取摄像头2901拍摄的本地视频数据。

以健身场景为例进行说明，在一些实施例中，移动终端300可以播放健身媒资，并将该健身媒资投屏到显示设备200中，则显示设备200显示的投屏画面即为移动终端300发送的健身媒资的投屏画面。用户可以根据投屏的健身媒资跟练，并在当前用户界面中查看自己的跟练情况。

响应于移动终端300发出的对健身媒资的投屏请求，移动终端300与显示设备200通过网络协议或USB线连接后，可以启动位于显示器260上边框或下边框的中心位置的摄像头2901，并获取摄像头2901拍摄的本地视频数据，并将拍摄到的本地视频数据显示到显示设备200上。这样，由于摄像头2901位于显示器260的中心位置，可以通过摄像头2901拍摄的本地视频数据判断用户相对于显示设备200的方向信息。步骤S100执行完成后，可以执行如下步骤S200。

步骤S200：显示设备200控制显示器260在用户界面中全屏显示本地视频数据，以及控制显示器260在用户界面中悬浮显示移动终端300的健身媒资的投屏画面。

为了提升用户的观看体验，在一些实施例中，显示设备200可以控制显示器260在用户界面中全屏显示本地视频数据，这样，用户就可以全屏看到自己的跟练情况。同时，可以控制显示器260在用户界面中悬浮显示移动终端300的健身媒资的投屏画面，具体悬浮的位置可以自行设定。示例性的，可以设定一个默认位置，则在执行投屏时，直接将投屏画面显示在默认位置。这样，投屏画面就可以悬浮播放，用户可以根据投屏画面中的健身媒资跟练，并实时了解到自己的位姿情况，提升用户的观看体验。步骤S200执行完成后，可以执行如下步骤S300。

步骤S300：显示设备200根据本地视频数据识别用户的头部相对于屏幕中心位的方向信息。

在一些实施例中，屏幕中心位为显示设备200沿竖直方向的中心线位置。用户在跟练的过程中，如果投屏画面的方向与用户头部方向不一致，用户需要扭头，或不断的调整位姿以适应投屏画面的方向，这样也会影响用户体验。

为了提升用户跟练过程中的体验，显示设备200可以根据本地视频数据识别用户的头部相对于屏幕中心位的方向信息。图13为本申请一些实施例提供的显示设备根据本地视频数据识别用户的头部相对于屏幕中心位的方向信息的流程示意图，如图13所示，在一些实施例中，显示设备200首先可以获取显示设备200的屏幕中心位，之后，可以提取本地视频数据中的关节点信息，以获取用户的头部坐标集，最后，再根据头部坐标集和屏幕中心位判断用户的头部相对于屏幕中心位的方向信息。

示例性的，图14为本申请一些实施例提供的用户跟练场景示意图，如图14所示，在一些实施例中，本地视频数据中的关节点信息可以为用户的骨骼点信息，可以通过用户的骨骼轮廓识别出头部坐标集，之后，再根据坐标集和屏幕中心位判断用户的头部相对于屏幕中心位的方向信息。在判断的过程中，可以参考前述实施例中用户相对于屏幕中心位的方向信息的判断方法，即步骤S2中的判断方法，在此不再重复描述。步骤S300执行完成后，可以执行如下步骤S400。

步骤S400：显示设备200根据方向信息计算目标位置。

为了提升用户对投屏画面的观看体验，在一些实施例中，显示设备200在识别出用户的头部相对于屏幕中心位的方向信息后，可以通过用户的方向信息确定投屏画面的目标位置。示例性的，方向信息可以包括第一方向和第二方向，以第一方向为用户头部相对于屏幕中心位的左侧、第二方向为用户头部相对于屏幕中心位的右侧为例，为了使投屏画面与用户头部的方向信息一致，则投屏画面的目标位置的方向应与用户头部的方向信息一致。

示例性的，图15为本申请一些实施例提供的用户头部方向为第一方向时跟练场景示意图，图16为本申请一些实施例提供的用户头部方向为第二方向时跟练场景示意图，结合图15和图16，当投屏画面显示的方向与用户头部方向一致时，用户无需调整位姿以适应投屏画面，因此会提升用户的观看体验。步骤S400执行完成后，可以执行如下步骤S500。

步骤S500：显示设备200接收移动终端300向显示设备200发送的健身媒资的投屏画面，以及控制显示器260在目标位置显示投屏画面。

为了使投屏画面的目标位置的方向应与用户的方向信息一致，在一些实施例中，显示设备200可以在目标位置显示投屏画面。具体显示方式可以参照前述实施例中步骤S4中的方式，在此不再重复描述。这样，当显示设备200识别到用户头部的方向信息位于屏幕中心位的左侧时，可以控制健身媒资的投屏画面显示在左侧。当识别到用户头部的方向信息位于屏幕中心位的右侧时，可以控制健身媒资的投屏画面显示在右侧，以提升用户跟练时的体验。投屏画面具体显示位置本申请不作限定，示例性的，可以显示在用户界面的左上角或右上角，还可以为其他位置等。

为了进一步提升用户的跟练体验，在一些实施例中，显示设备200还可以识别用户健身时的位姿变化，根据位姿的变化调整投屏画面显示的目标位置。图17为本申请一些实施例提供的显示设备根据用户的位姿调整投屏画面位置的流程示意图，如图17所示，显示设备200首先可以识别用户健身时的位姿高度，并设定位姿阈值，如果位姿高度高于位姿阈值，控制显示器260在用户界面的顶端显示投屏画面；如果位姿高度低于位姿阈值，则控制显示器260在用户界面的底端显示投屏画面。

示例性的，用户在跟练过程中，位姿会发生变化。例如，有站立状态的位姿，也有下蹲状态或卧姿状态等的位姿。投屏画面的默认位置可以为左上角或右上角，但是当用户处于下蹲状态时，就会出现不便于查看投屏画面的情况。

因此，针对该场景显示设备200可以识别用户健身时的位姿高度，当位姿高度高于位姿阈值时，显示设备200可以控制显示器260在用户界面的顶端显示投屏画面，示例性的，可以在当前用户界面的左上角或右上角显示。图18为本申请一些实施例提供的显示设备根据用户的位姿调整投屏画面的效果示意图，如图18所示，当位姿高度低于位姿阈值时，说明用户可能处于下蹲状态或卧姿状态等，则可以控制显示器260在用户界面的底端显示投屏画面。示例性的，可以在当前用户界面的左下角或右下角显示。这样，用户的视线与投屏画面的高度相当，进而可以进一步提升用户的跟练体验。

需要说明的是，当用户在下蹲状态或卧姿状态等时，如果头部也朝向第一方向或第二方向，则投屏画面的目标位置的方向也会随着改变。示例性的，当用户处于下蹲状态或卧姿状态时，如果用户头部朝向左侧，则投屏画面可以显示在当前用户界面的左下角位置，如果用户头部朝向右侧，则投屏画面可以显示在当前用户界面的右下角位置。也就是说，在调整投屏画面目标位置的过程中，一方面可以保证目标位置的方向与用户头部方向一致，另一方面，可以保证用户位姿发生变化时，其视线高度与投屏画面的视线高度尽量一致，以提升用户跟练的体验。

在一些实施例中，当用户处于屏幕中心位附近的方向时，显示设备200可以控制显示器260在用户界面的预设位置悬浮显示投屏画面，例如，可以在左上角、右上角或其他位置等。同时，还可以设定位置的显示级别，示例性的，左上角级别可以高于右上角级别，之后，结合实际情况根据位置的优先级级别显示投屏画面。

由以上技术方案可知，上述实施例中的显示设备200响应于移动终端发出的对健身媒资的投屏请求，启动摄像头，以及，获取摄像头拍摄的本地视频数据；控制显示器在用户界面中全屏显示本地视频数据，以及控制显示器在用户界面中悬浮显示移动终端的健身媒资的投屏画面；根据本地视频数据识别用户的头部相对于屏幕中心位的方向信息；屏幕中心位为显示设备沿竖直方向的中心线位置；根据方向信息计算目标位置；接收移动终端向显示设备发送的健身媒资的投屏画面，以及控制显示器在目标位置显示投屏画面。所述显示设备可以根据摄像头拍摄的本地视频数据识别用户相对于显示设备屏幕中心的方向信息，从而自动调整移动终端向显示设备发送的投屏画面的目标位置，以提升用户跟练的体验。

本申请部分实施例还提供一种调整投屏画面位置的方法，应用于显示设备200，所述显示设备包括显示器260、通信器220、图像采集接口290和控制器250。其中，通信器220被配置为与移动终端300建立投屏连接，图像采集接口290被配置为连接摄像头2901，以采集用户图像，摄像头2901设置在显示器260上边框或下边框的中心位置；所述调整投屏画面位置的方法包括：

响应于移动终端300发出的投屏连接请求，启动摄像头2901，以及，获取摄像头2901拍摄的用户图像。由于摄像头2901位于显示器260的中心位置，当拍摄到的用户图像中，如果用户在用户图像的中心位置，则说明该用户即位于显示设备200的中心位置。也就是说，通过摄像头2901拍摄的用户图像可以判断用户相对于显示设备200的方向信息。

显示设备200通过用户图像识别用户相对于屏幕中心位的方向信息。其中，屏幕中心位为显示设备200沿竖直方向的中心线位置。在一些实施例中，如果用户坐标集中预设数量比例的像素点坐标大于屏幕中心位坐标，则可以确定方向信息为第一方向；如果用户坐标集中预设数量比例的像素点坐标小于屏幕中心位坐标，则可以确定方向信息为第二方向，第一方向和第二方向相反。

显示设备200根据方向信息计算目标位置。为了使投屏画面与用户的方向信息一致，则投屏画面的目标位置的方向应与用户的方向信息一致，以提升用户对投屏画面的观看体验。

接收移动终端300向显示设备200发送的投屏画面，以及控制显示器260在目标位置显示投屏画面。在一些实施例中，显示设备200可以在目标位置显示投屏画面。如果投屏画面的初始方向与用户的方向信息相同，则显示设备200可以控制显示器260在默认位置显示投屏画面，即无需调整投屏画面的位置。如果投屏画面的初始方向与用户的方向信息相反，则显示设备200可以控制显示器260在目标位置显示投屏画面。这样，投屏画面的目标位置的方向应与用户的方向信息一致，可以便于用户查看或操控投屏画面，提升用户的体验。

由以上技术方案可知，上述实施例提供的调整投屏画面位置的方法可以使投屏画面的目标位置的方向与用户的方向信息一致，便于用户查看或操控投屏画面，从而解决用户的方向信息与投屏画面方向不一致时，影响用户体验的问题。

本申请部分实施例还提供一种调整投屏画面位置的方法，应用于显示设备200，所述显示设备包括显示器260、通信器220、图像采集接口290和控制器250。其中，通信器220被配置为与移动终端300建立投屏连接，图像采集接口290被配置为连接摄像头2901，以采集用户图像，摄像头2901设置在显示器260上边框或下边框的中心位置；所述调整投屏画面位置的方法包括：

响应于移动终端300发出的对健身媒资的投屏请求，显示设备200启动摄像头2901，以及，获取摄像头2901拍摄的本地视频数据。由于摄像头2901位于显示器260的中心位置，可以通过摄像头2901拍摄的本地视频数据判断用户相对于显示设备200的方向信息。

显示设备200控制显示器260在用户界面中全屏显示本地视频数据，以及控制显示器260在用户界面中悬浮显示移动终端300的健身媒资的投屏画面。为了提升用户的观看体验，在一些实施例中，显示设备200可以控制显示器260在用户界面中全屏显示本地视频数据，这样，用户就可以全屏看到自己的跟练情况。同时，可以控制显示器260在用户界面中悬浮显示移动终端300的健身媒资的投屏画面，具体悬浮的位置可以自行设定。

显示设备200根据本地视频数据识别用户的头部相对于屏幕中心位的方向信息。其中，屏幕中心位为显示设备沿竖直方向的中心线位置。首先可以获取显示设备200的屏幕中心位，之后，可以提取本地视频数据中的关节点信息，以获取用户的头部坐标集，最后，再根据头部坐标集和屏幕中心位判断用户的头部相对于屏幕中心位的方向信息。

显示设备200根据方向信息计算目标位置。为了使投屏画面与用户头部的方向信息一致，则投屏画面的目标位置的方向应与用户头部的方向信息一致，以提升用户对投屏画面的观看体验。

显示设备200接收移动终端300向显示设备200发送的健身媒资的投屏画面，以及控制显示器260在目标位置显示投屏画面。当显示设备200识别到用户头部的方向信息位于屏幕中心位的左侧时，可以控制健身媒资的投屏画面显示在左侧。当识别到用户头部的方向信息位于屏幕中心位的右侧时，可以控制健身媒资的投屏画面显示在右侧，以提升用户跟练时的体验。

由以上技术方案可知，上述实施例提供的调整投屏画面位置的方法可以根据摄像头拍摄的本地视频数据识别用户相对于显示设备屏幕中心的方向信息，从而自动调整移动终端向显示设备发送的投屏画面的目标位置。一方面可以保证目标位置的方向与用户头部方向一致，另一方面，可以保证用户位姿发生变化时，其视线高度与投屏画面的视线高度尽量一致，以提升用户跟练的体验。

本说明书中各个实施例之间相同相似的部分互相参照即可，在此不再赘述。

本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分的方法。

最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

为了方便解释，已经结合具体的实施方式进行了上述说明。但是，上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导，可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用，从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (10)

1.一种显示设备，其特征在于，包括：

显示器，用于显示用户界面；

通信器，被配置为与移动终端建立投屏连接；

图像采集接口，被配置为连接摄像头，以采集用户图像，所述摄像头设置在显示器上边框或下边框的中心位置；

控制器，被配置为：

响应于移动终端发出的投屏连接请求，启动所述摄像头，以及，获取所述摄像头拍摄的用户图像；

通过所述用户图像识别用户相对于屏幕中心位的方向信息；所述屏幕中心位为所述显示设备沿竖直方向的中心线位置；

根据所述方向信息计算目标位置；

接收所述移动终端向所述显示设备发送的投屏画面，以及控制所述显示器在所述目标位置显示所述投屏画面。

2.根据权利要求1所述的显示设备，其特征在于，所述方向信息至少包括第一方向和第二方向；所述第一方向和所述第二方向相反；所述控制器执行通过所述用户图像识别用户相对于屏幕中心位的方向信息的步骤，进一步被配置为：

获取显示设备的屏幕中心位；

解析所述用户图像，以得到所述用户图像中用户目标的用户坐标集；

对比所述用户坐标集中的像素点坐标与屏幕中心位坐标；

如果所述用户坐标集中预设数量比例的像素点坐标大于所述屏幕中心位坐标，确定所述方向信息为第一方向；

如果所述用户坐标集中预设数量比例的像素点坐标小于所述屏幕中心位坐标，确定所述方向信息为第二方向。

3.根据权利要求2所述的显示设备，其特征在于，所述方向信息还包括第三方向，所述第三方向为屏幕中心位预设范围的方向，所述控制器进一步被配置为：

计算所述用户坐标集中的像素点坐标与所述屏幕中心位坐标的差值；

如果预设数量比例的所述像素点坐标对应的差值在差值范围内，确定所述方向信息为第三方向；

响应于所述方向信息为第三方向，控制所述显示器在所述用户界面的预设位置悬浮显示所述投屏画面。

4.根据权利要求2所述的显示设备，其特征在于，所述控制器执行控制所述显示器在所述目标位置显示所述投屏画面的步骤，进一步被配置为：

获取所述投屏画面的初始方向；

检测用户的方向信息；

如果所述初始方向与所述方向信息相同，控制所述显示器在默认位置显示所述投屏画面；

如果所述初始方向与所述方向信息相反，控制所述显示器在所述目标位置显示所述投屏画面。

5.根据权利要求1所述的显示设备，其特征在于，所述控制器进一步被配置为：

接收移动终端发送的特征图像；所述特征图像包括投屏的关键用户目标的特征信息；

识别所述用户图像中的用户数量；

当所述用户数量大于预设人数阈值时，根据所述特征图像识别所述用户图像中的关键用户目标；

按照所述关键用户目标识别用户相对于屏幕中心位的方向信息。

6.根据权利要求1所述的显示设备，其特征在于，所述控制器进一步被配置为：

建立移动终端发送的投屏画面的传输通道；

通过所述传输通道接收所述投屏画面；

解码所述投屏画面；

控制所述显示器在所述目标位置显示所述投屏画面。

7.一种显示设备，其特征在于，包括：

显示器，用于显示用户界面；

通信器，被配置为与移动终端建立投屏连接；

图像采集接口，被配置为连接摄像头，以采集本地视频数据，所述摄像头设置在显示器上边框或下边框的中心位置；

控制器，被配置为：

响应于移动终端发出的对健身媒资的投屏请求，启动所述摄像头，以及，获取所述摄像头拍摄的本地视频数据；

控制所述显示器在所述用户界面中全屏显示所述本地视频数据，以及控制所述显示器在所述用户界面中悬浮显示所述移动终端的健身媒资的投屏画面；

根据所述本地视频数据识别用户的头部相对于屏幕中心位的方向信息；所述屏幕中心位为显示设备沿竖直方向的中心线位置；

根据所述方向信息计算目标位置；

接收所述移动终端向所述显示设备发送的健身媒资的投屏画面，以及控制所述显示器在所述目标位置显示所述投屏画面。

8.根据权利要求7所述的显示设备，其特征在于，所述控制器执行根据所述本地视频数据识别用户的头部相对于屏幕中心位的方向信息的步骤，进一步被配置为：

获取显示设备的屏幕中心位；

提取所述本地视频数据中的关节点信息，以获取用户的头部坐标集；

根据所述头部坐标集和所述屏幕中心位判断用户的头部相对于屏幕中心位的方向信息。

9.根据权利要求8所述的显示设备，其特征在于，所述控制器进一步被配置为：

识别用户健身时的位姿高度；

如果所述位姿高度高于位姿阈值，控制所述显示器在所述用户界面的顶端显示所述投屏画面；

如果所述位姿高度低于位姿阈值，控制所述显示器在所述用户界面的底端显示所述投屏画面。

10.一种调整投屏画面位置的方法，应用于显示设备，所述显示设备包括显示器、通信器、图像采集接口和控制器，其特征在于，所述调整投屏画面位置的方法包括：

响应于移动终端发出的投屏连接请求，启动所述摄像头，以及，获取所述摄像头拍摄的用户图像；

通过所述用户图像识别用户相对于屏幕中心位的方向信息；所述屏幕中心位为所述显示设备沿竖直方向的中心线位置；

根据所述方向信息计算目标位置；

接收所述移动终端向所述显示设备发送的投屏画面，以及控制所述显示器在所述目标位置显示所述投屏画面。