CN105739937B - 一种移动终端投影方法、终端设备及系统 - Google Patents

Abstract

本发明公开了一种移动终端投影方法、终端设备及系统，所述方法应用于移动终端，包括步骤：所述移动终端建立与外部设备之间的通信连接；所述移动终端调整分屏，确定屏幕投影的区域；根据所述确定的屏幕投影区域，进行与外部设备间的屏幕数据传输。基于现移动设备中Wi‑Fi Display与分屏功能，可对投影侧设备进行快速设置自定义投影区域，达到快速选择需共享给其他设备的桌面区域。该方法的实现，克服当前Wi‑Fi Display功能将整个投影端桌面投影到接收端，影响用户使用体验。同时，可很好体现出移动终端的人性化设计理。

Description

一种移动终端投影方法、终端设备及系统

技术领域

本发明涉及通信技术领域，更具体地说，涉及一种移动终端投影方法、终端设备及系统。

背景技术

随着电子产业的快速发展，移动终端智能化程度越来越高。移动终端研发公司也越来越注重智能化，人性化设计。在此移动终端快速发展的背景下，终端的便捷操作和人性化设计成为移动终端不可忽视的一部分。

在当前移动终端快速普及，越来越多的用户开始持有两个或多个移动设备，因此，Wi-Fi Display(WFD)功能随科技发展浪潮而诞生，即现移动设备中的WFD功能。该功能可以将一个设备界面及设备状况通过无线方式投影到另一个设备上，该接收设备则可以操作投影设备。

但目前Wi-Fi Display功能与移动终端分屏功能没有做有效的结合。影响了用户真正的使用体验。

发明内容

本发明要解决的技术问题在于，针对现有技术的上述缺陷，提供一种移动终端投影方法、终端设备及系统，用于将音/视频流投送给外部设备，所述外部设备包括显示屏或屏幕，所述方法包括：

移动终端建立与外部设备之间的通信连接；

确定所述移动终端屏幕投影的区域；

生成所述屏幕投影区域的音/视频流，并传送给所述外部设备。

可选地，所述移动终端建立与外部设备之间的通信连接，包括步骤：

移动终端发送WFD连接请求；

在所述移动终端处接收发现响应，所述发现响应是响应于已接收到的所述发现请求而从外部设备发送的；

移动终端建立与外部设备之间的WFD连接。

可选地，所述确定移动终端屏幕投影的区域，具体为：

当WFD连接成功后，移动终端进行投影的同时显示一投影区域选择框，根据区域选择框的位置，确定投影区域；其中，

所述移动终端接收输入信号，所述输入信号用于控制区域选择框显示和/或关闭，当区域选择框显示时对所在区域选择框内的内容投影，当区域选择框关闭时进行全屏投影，具体为：

当移动终端支持上下分屏时，则选择区域框以高度为参考值，进行显示；

当移动终端支持左右分屏时，则选择区域框以宽度为参考值，进行显示；

当移动终端支持自由分屏时，则选择区域框可以为屏幕的任意位置，进行显示。

可选地，所述生成所述屏幕投影区域的音/视频流，具体为：

移动终端在预设周期内捕捉投影区域的图像信息，对每一帧图像以时间顺序打包从而形成音/视频流。

可选地，所述生成所述屏幕投影区域的音/视频流，并传送给所述外部设备，具体为：

将所述移动终端确定投影区域的坐标点发送给所述外部设备；

所述外部设备将确定投影区域的横坐标转换为横坐标与第一预设值的比值，将纵坐标转换为纵坐标与第二预设值的比值；其中，

所述第一预设值为移动终端投影区域的宽度，所述第二预设值为移动终端投影区域的高度。

本发明还提供一种终端设备，包括：

连接模块，用于移动终端建立与外部设备之间的通信连接；

确定模块，用于确定所述移动终端屏幕投影的区域；

传输模块，用于生成所述屏幕投影区域的音/视频流，并传送给所述外部设备。

可选地，所述连接模块还用于移动终端发送WFD连接请求；

在所述移动终端处接收发现响应，所述发现响应是响应于已接收到的所述发现请求而从外部设备发送的；

移动终端建立与外部设备之间的WFD连接。

可选地，所述确定模块还用于当WFD连接成功后，移动终端进行投影的同时显示一投影区域选择框，根据区域选择框的位置，确定投影区域；其中，

所述移动终端接收输入信号，所述输入信号用于控制区域选择框显示和/或关闭，当区域选择框显示时对所在区域选择框内的内容投影，当区域选择框关闭时进行全屏投影，具体为：

当移动终端支持上下分屏时，则选择区域框以高度为参考值，进行显示；

当移动终端支持左右分屏时，则选择区域框以宽度为参考值，进行显示；

当移动终端支持自由分屏时，则选择区域框可以为屏幕的任意位置，进行显示。

可选地，所述传输模块还用于生成所述屏幕投影区域的音/视频流，具体为：

移动终端在预设周期内捕捉投影区域的图像信息，对每一帧图像以时间顺序打包从而形成音/视频流；

还用于将所述移动终端确定投影区域的坐标点发送给所述外部设备；

所述外部备将确定投影区域的横坐标转换为横坐标与第一预设值的比值，将纵坐标转换为纵坐标与第二预设值的比值；其中，

所述第一预设值为移动终端投影区域的宽度，所述第二预设值为移动终端投影区域的高度。

本发明还提供一种投影系统，包括移动终端和一个或多个外部设备，其中，

所述移动终端，用于建立与外部设备之间的通信连接，确定所述移动终端屏幕投影的区域，生成所述屏幕投影区域的音/视频流，并传送给所述外部设备；

所述一个或多个外部设备，用于发送响应于已接收到的发现请求的发现响应，与所述移动终端建立连接后显示所述音/视频流。

实施本发明的一种移动终端投影方法、终端设备及系统，具有以下有益效果：

本发明实施例的一种移动终端投影方法，可实现一对一或一对多的屏幕投影和分享，通过WFD网络，可减少对地点的依赖，可应用于多媒体会议室或视听功能教室等特定需求的场景中，实现快速组建WFD网络，实现资源共享。基于现移动设备中Wi-Fi Display与分屏功能，可对投影侧设备进行快速设置自定义投影区域，达到快速选择需共享给其他设备的桌面区域。该方法的实现，克服当前Wi-Fi Display功能将整个投影端桌面投影到接收端，影响用户使用体验。同时，可很好体现出移动终端的人性化设计理念。

附图说明

下面将结合附图及实施例对本发明作进一步说明，附图中：

图1是实现本发明各个实施例的一个可选的移动终端的硬件结构示意图；

图2是本发明一实施例的投影侧设备的搜索流程图；

图3是本发明一实施例的移动终端投影方法流程图；

图4是本发明一实施例的移动终端投影的终端示意图；

图5是本发明一实施例的可实现多屏投影控制的网络结构示意图；

图6是本发明一实施例的投影侧设备开启多个进程进行屏幕数据传输控制的示意图；

图7是图6所示的控制效果示意图；

图8是本发明一实施例终端设备的结构框图；

图9是本发明一实施例的终端设备的交互界面示意图；

图10是本发明一实施例移动终端投影系统结构示意图；

图11是本发明一实施例实现投影的移动终端结构示意图。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明，其本身并没有特定的意义。因此，"模块"与"部件"可以混合地使用。

移动终端可以以各种形式来实施。例如，本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面，假设终端是移动终端。然而，本领域技术人员将理解的是，除了特别用于移动目的的元件之外，根据本发明的实施方式的构造也能够应用于固定类型的终端。

实施例1

参见图1，为本发明实施例的终端设备的硬件结构示意图。

本发明实施例的终端设备100包括：探测连接单元101、控制单元102、显示单元103。

当终端设备100作为投影侧(Source端)时：

探测连接单元101用于执行设备发现，以搜索Wi-Fi Display服务可用的相邻其它设备。当发现其它设备时，探测连接单元101通过RTSP协议与其它设备进行交互、能力协商，以使设备100与其它设备连接。

控制单元102控制终端设备100内的基本操作。具体的，控制单元102进行控制以使得显示单元103显示的内容(屏幕数据)基于RTP通过探测连接单元101被发送给其它设备。RTP即实时传输协议。控制单元102通过显示单元103确定来自用户的输入信号形式以根据输入信号控制终端设备100。例如，根据输入信号发起设备搜索等。

当终端设备100作为接收侧(Sink端)时：

探测连接单元101还用于与投影侧的设备建立连接，接收屏幕数据。控制单元102还用于进行控制以使得显示单元103显示接收到的屏幕数据。

参见图2为本发明实施例的投影侧设备的搜索流程图。本发明实施例的搜索流程包括：

设备发现步骤：投影侧设备执行用于寻找支持Wi-Fi Display的相邻外部其它设备的设备发现。

设备连接步骤：当任一其它设备被发现时，投影侧设备设置与该设备的连接，进行交换能力并且执行协商。

播放步骤：设备利用RTSP协议进行能力协商并匹配相关参数，经过RTSP播放命令后，首先将投影侧设备的当前屏幕数据打包成视音频流，然后经过RTP协议直接将该音频流包发送到接收侧设备，投影侧的屏幕数据是通过流类型(音/视频(AV)流)发送到接收侧。RTSP即实时传输协议，属于TCP/IP协议体系中的一个应用层协议，主要负责设备能力协商。

实施例2

基于上述终端设备硬件结构以及投影侧终端的搜索流程，提出本发明设备分屏的投影方法。如图3所示，在本发明的实施例中，设备分屏的投影方法，应用于移动终端，包括步骤：

S11，移动终端建立与外部设备之间的通信连接。

应理解，移动终端相当于投影侧设备，如手机、PAD(平板电脑)等，外部设备相当于接收侧设备，所述外设备包括显示屏或屏幕，如手机、电视机、投影仪等。在一定的条件下，移动终端可转换为外部设备即转换为接收侧设备，外部设备可转换为移动终端即转换为投影侧设备，在本实施例中，投影侧设备支持分屏功能，而对接收侧设备不做限制。分屏功能是指将移动终端屏幕划分若干个区域，且每个区域为一个独立的显示区域，也可以实现应用的单窗口、双窗口、浮动窗口等形式的分屏，例如，在分屏状态下用户可以一边开着淘宝购物，一边跟朋友聊微信。

具体地，投影侧设备和接收侧设备通过Wi-Fi direct直接相互连接，而无需使用无线局域网络(WLAN)接入点(AP)等。投影侧设备发现接收侧设备。在设备发现期间，投影侧设备在预定义的信道上发送探查请求帧(probe request frame)。探查请求帧包括诸如对等(P2P)信息元素(IE)、P2P通配符SSID、通配符SSID、目的地地址、设备类型和设备ID之类的信息。接收侧设备在预定义的信道上听取探查请求帧。每个设备确定探查请求帧中的信息匹配搜索标准。如果发现匹配，则接收侧设备将具有设备描述的探查请求帧发送到投影侧设备。

S12，确定屏幕投影的区域。

具体地，在投影侧设备通过WFD进入正常的连接投影后，投影侧设备默认将整个屏幕连接到接收侧设备，同时在投影侧设备显示可选择投影的区域框，该可选区域框的位置可根据投影侧设备桌面情况进行调整，该框区域默认等于或小于当前桌面应用图标大小，用户可手动调整该投影区域大小。根据投影侧设备分屏设计情况，显示可选择区域形式，如投影侧设备只支持上下分屏，则选择区域框以高度为参考值，进行显示；如投影侧设备只支持左右分屏，则选择区域框以宽度为参考值，进行显示；如投影侧设备支持自由选择投影区域，则选择区域框可以为屏幕的任意位置，进行显示。如图4所示，本发明实施例的投影设备可以自定义投影区域，图中设备200的矩形虚线框表示可以拖动改变位置和/或大小的一个可选区域框，可选区域框内的P表示投影区域，投影侧设备将P投影区域的内容发送给接收侧设备，而为投影区域Q不受投影区域影响。

在本实施例中，投影侧设备设置触发选择区域框显示或隐藏开关，如在显示时，可设置在选择区域框长按时间t，且T<t，则关闭选择区域框，影侧设备进行全屏投影。在投影进行时，可在投影端设置长按某区域时间t，且T<t，则显示选择区域框。同理，根据影侧设备情况，设置触发选择区域框的触压按钮或按键等。

S13，生成屏幕投影区域的音/视频流，并传送给外部设备。

具体地，投影侧设备根据连接建立时创建的连接，利用底层的Wireless链路，将当前屏幕视音频数据打包，结合RTP协议传输给相应的接收侧设备。投影侧设备每隔预设时间(例如，30ms)抓取一次当前屏幕数据，打包成视音频流，并根据RTP协议将屏幕数据发送至接收侧设备。接收侧设备主要负责投影侧设备传输的屏幕数据的显示。接收侧设备将接收到的包含屏幕数据的媒体数据流进行缓存处理并显示。在另一个实施例中，投影侧设备间隔对屏幕进行截图，并根据屏幕投影区域的大小对每帧截图进行裁剪，仅保留屏幕投影区域的图像，然后将裁剪后的截图制成音/视频流，发送给外部设备。

为了使得投影侧设备中投影区域能够自适应接收侧设备屏幕大小显示投影内容，接收侧设备将投影侧设备投影区域的横坐标转换为横坐标与第一预设值的比值，将纵坐标转换为纵坐标与第二预设值的比值；其中，所述第一预设值为移动终端投影区域的宽度，所述第二预设值为移动终端投影区域的高度。例如，投影侧设备投影区域宽度为W0，高度为H0，一坐标点为(X0，Y0)，则将其转换为(X0/W0，Y0/H0)，即其被转换成了所占移动终端投影区域在宽度方向和长度方向上的比例。此外，也可按照其他方式进行转换。若接收侧设备屏幕为宽度为W1，高度为H1，接收到的坐标为(X0/W0，Y0/H0)，则接收侧设备的该点的坐标对应于投影侧设备的坐标为((X0/W0)×W1，(Y0/H0)×H1)。如图4所示，当设备200确定P为投影区域后，将P区域的内容投影到设备300，并且设备300根据投影区域大小与设备自身的显示区域进行调整，本实施例中接收侧设备300为全屏显示所接收的投影内容，且无法查看投影侧设备其他未投影区域。应理解，接收侧设备300也可以调整为某一区域显示所接收的投影内容。

应理解，本实施例中给出的投影方法不限于上述步骤顺序，移动终端也可以先确定屏幕的投影区域，再进行建立与外部设备之间的通信连接。

本发明实施例的一种移动终端投影方法，可实现一对一的屏幕投影和分享，通过WFD网络，可减少对地点的依赖，可应用于多媒体会议室或视听功能教室等特定需求的场景中，实现快速组建WFD网络，实现资源共享。基于现移动设备中Wi-Fi Display与分屏功能，可对投影侧设备进行快速设置自定义投影区域，达到快速选择需共享给其他设备的桌面区域。该方法的实现，克服当前Wi-Fi Display功能将整个投影端桌面投影到接收端，影响用户使用体验。同时，接收侧设备只对投影侧设备投影区域进行操作或观看，无法查看投影侧设备其他未投影区域，投影侧设备则未投影区域不受投影区域影响。

实施例3

基于上述实施例，本发明还提出一种多屏投影方法，相对于一个投影侧设备，有一个或多个接收侧设备。参见图5为本发明实施例的可实现多屏投影控制的网络结构示意图。

网络1000包括：一个投影侧设备200和至少一个接收侧设备300。投影侧设备200和接收侧设备300的硬件结构可参照上述图1所示。

网络1000具有与Wi-Fi点对点(P2P)网络相同的含义。在网络1000中的投影侧设备和接收侧设备通过Wi-Fi direct直接相互连接，而无需使用无线局域网络(WLAN)接入点(AP)等。

具体的，投影侧设备200在网络1000环境中执行设备发现以发现接收侧设备300。在设备发现期间，投影侧设备200在预定义的信道上发送探查请求帧(probe requestframe)。探查请求帧包括诸如对等(P2P)信息元素(IE)、P2P通配符SSID、通配符SSID、目的地地址、设备类型和设备ID之类的信息。在网络1000环境中的接收侧设备300在预定义的信道上听取探查请求帧。每个设备确定探查请求帧中的信息匹配搜索标准。如果发现匹配，则接收侧设备300将具有设备描述的探查请求帧发送到投影侧设备200。

在设备发现完成后，投影侧设备200执行服务发现以获得接收侧设备300所支持的服务。在服务发现期间，投影侧设备200将GAS初始请求发送到接收侧设备300。作为响应，接收侧设备300将具有服务信息的GAS初始响应发送到投影侧设备200。此后，投影侧设备200使用从接收侧设备300获得的设备和服务描述与接收侧设备300设立WFD连接，即图2中的设备连接建立。

应理解，本发明实施例中的每一接收侧设备300均按照上述方式建立与投影侧设备的连接。由此，可将投影侧设备200和多个接收侧设备300称为一个群组(Group)。投影侧设备300被指定为群组所有者(GO)。接收侧设备300作为群组客户端。

参见图6，设备A为投影侧设备，设备B、设备C和设备D均为接收侧设备。设备B、设备C、设备D通过Wireless与设备A相连。

设备A启动多个进程服务，每个进程分别管理和一台接收侧设备的通信。例如：子进程1对应处理设备B的通信连接数据，子进程2对应处理设备C的通信连接数据，子进程3对应处理设备D的通信连接数据。此外，设备A还启动一个父进程用于进行监听连接等。

在本发明的实施例中，每个进程都按照WFD协议进行传输。

为了实现底层的通信链路，设备A为每一台设备分配一个IP地址，且将每一接收侧设备与其IP地址的对应关系存储到一IP列表中。

在本发明的实施例中，通过IP列表，与设备A连接的任何设备都可以通过该IP列表访问到其他设备，建立TCP/IP连接，实现双向通信，这样，任何一台设备都可以将屏幕数据通过TCP/IP链路传递给其他设备。由此，可实现设备间的屏幕互投。

具体的，整个群组之间的屏幕数据传输过程包括:

(1)连接建立

在底层链路，投影侧设备按照上述执行发现的接收侧设备的发现过程，监听发现来自其它设备的连接请求。并根据发现的设备，选择指定的设备建立连接。当与多个(两个或两个以上)设备建立连接时，投影侧设备创建多个子进程分别处理与每一个设备之间的双向数据传输。

(2)屏幕数据传输

连接建立后，投影侧设备根据连接建立时创建的进程服务，利用底层的Wireless链路，将当前屏幕视音频数据打包，结合RTP协议传输给所有的接收侧设备。具体的，投影侧设备每隔预设时间(例如，30ms)抓取一次当前屏幕数据，打包成视音频流，并根据RTP协议将屏幕数据发送至接收侧设备。在另一个实施例中，投影侧设备间隔对屏幕进行截图，并根据屏幕投影区域的大小对每帧截图进行裁剪，仅保留屏幕投影区域的图像，然后将裁剪后的截图制成音/视频流，发送给外部设备。

接收侧设备主要负责投影侧设备传输的屏幕数据的显示。接收侧设备将接收到的包含屏幕数据的媒体数据流进行缓存处理并显示。参见图7，屏幕数据开始传输后，设备B、C和D接收设备A的屏幕数据并进行显示。

在本发明的实施例中，投影侧设备对建立连接的设备列表进行管理，以保证信息安全，以及防止无关设备加入，还可管理中途新设备的加入或链路中设备的退出。

本发明实施例的多屏投影控制方法，可实现一对多的屏幕投影和分享，通过WFD网络，可减少对地点的依赖；可应用于多媒体会议室或视听功能教室等特定需求的场景中，快速组建WFD网络，实现资源共享。

实施例4

参见图8，为本发明实施例给出的一种终端设备结构框图，包括：连接模块11，确定模块12，传输模块13，其中，

连接模块11，用于移动终端建立与外部设备之间的通信连接。

具体地，应理解，移动终端相当于投影侧设备，外部设备相当于接收侧设备。在一定的条件下，移动终端可转换为外部设备即转换为接收侧设备，外部设备可转换为移动终端即转换为投影侧设备，在本实施例中，投影侧设备支持分屏功能，而对接收侧设备不做限制。

具体地，投影侧设备和接收侧设备通过Wi-Fi direct直接相互连接，而无需使用无线局域网络(WLAN)接入点(AP)等。投影侧设备发现接收侧设备。在设备发现期间，投影侧设备在预定义的信道上发送探查请求帧(probe request frame)。探查请求帧包括诸如对等(P2P)信息元素(IE)、P2P通配符SSID、通配符SSID、目的地地址、设备类型和设备ID之类的信息。接收侧设备在预定义的信道上听取探查请求帧。每个设备确定探查请求帧中的信息匹配搜索标准。如果发现匹配，则接收侧设备将具有设备描述的探查请求帧发送到投影侧设备。

确定模块12，用于确定所述移动终端屏幕投影的区域。

具体地，在投影侧设备通过WFD进入正常的连接投影后，投影侧设备默认将整个屏幕连接到接收侧设备，同时在投影侧设备显示可选择投影的区域框，该可选区域框的位置可根据投影侧设备桌面情况进行调整，该框区域默认等于或小于当前桌面应用图标大小，用户可手动调整该投影区域大小。根据投影侧设备分屏设计情况，显示可选择区域形式，如投影侧设备只支持上下分屏，则选择区域框以高度为参考值，进行显示；如投影侧设备只支持左右分屏，则选择区域框以宽度为参考值，进行显示；如投影侧设备支持自由选择投影区域，则选择区域框可以为屏幕的任意位置，进行显示。

在本实施例中，投影侧设备设置触发选择区域框显示或隐藏开关，如在显示时，可设置在选择区域框长按时间t，且T<t，则关闭选择区域框，影侧设备进行全屏投影。在投影进行时，可在投影端设置长按某区域时间t，且T<t，则显示选择区域框。同理，根据影侧设备情况，设置触发选择区域框的触压按钮或按键等。

传输模块13，生成所述屏幕投影区域的音/视频流，并传送给外部设备。

具体地，投影侧设备根据连接建立时创建的连接，利用底层的Wireless链路，将当前屏幕视音频数据打包，结合RTP协议传输给相应的接收侧设备。投影侧设备每隔预设时间(例如，30ms)抓取一次当前屏幕数据，打包成视音频流，并根据RTP协议将屏幕数据发送至接收侧设备。接收侧设备主要负责投影侧设备传输的屏幕数据的显示。接收侧设备将接收到的包含屏幕数据的媒体数据流进行缓存处理。在另一个实施例中，投影侧设备间隔对屏幕进行截图，并根据屏幕投影区域的大小对每帧截图进行裁剪，仅保留屏幕投影区域的图像，然后将裁剪后的截图制成音/视频流，发送给外部设备。

为了使得投影侧设备中投影区域能够自适应接收侧设备屏幕大小显示投影内容，接收侧设备将投影侧设备投影区域的横坐标转换为横坐标与第一预设值的比值，将纵坐标转换为纵坐标与第二预设值的比值；其中，所述第一预设值为移动终端投影区域的宽度，所述第二预设值为移动终端投影区域的高度。例如，投影侧设备投影区域宽度为W0，高度为H0，一坐标点为(X0，Y0)，则将其转换为(X0/W0，Y0/H0)，即其被转换成了所占移动终端投影区域在宽度方向和长度方向上的比例。此外，也可按照其他方式进行转换。若接收侧设备屏幕为宽度为W1，高度为H1，接收到的坐标为(X0/W0，Y0/H0)，则接收侧设备的该点的坐标对应于投影侧设备的坐标为((X0/W0)×W1，(Y0/H0)×H1)。

应理解，上述实施1-3所述的实现原理和细节均适用于该实施例。

本发明实施例的一种终端设备，可实现一对一的屏幕投影和分享，通过WFD网络，可减少对地点的依赖，可应用于多媒体会议室或视听功能教室等特定需求的场景中，实现快速组建WFD网络，实现资源共享。基于现移动设备中Wi-Fi Display与分屏功能，可对投影侧设备进行快速设置自定义投影区域，达到快速选择需共享给其他设备的桌面区域。该方法的实现，克服当前Wi-Fi Display功能将整个投影端桌面投影到接收端，影响用户使用体验。同时，可很好体现出移动终端的人性化设计理念。

实施例5

本发明实施例还提供一种终端设备，其具有如图1所示的硬件结构。具体的，该终端设备包括：连接模块，用于移动终端建立与外部设备之间的通信连接；确定模块，用于所述移动终端调整分屏，确定屏幕投影的区域；传输模块，用于根据所述确定的屏幕投影区域，进行与外部设备间的屏幕数据传输并显示。

参见图9，在本发明的实施例中，终端设备可作为投影侧设备，也可作为接收侧设备。当打开屏幕投影功能时，用户可通过显示单元看到如图9左边所示的交互界面。当用户通过移动终端投影区域选择“投影画面”时，交互界面跳转为右边上侧的界面，该终端设备即作为投影侧设备，执行设备发现步骤，寻找支持Wi-Fi Display的相邻外部其它设备。当其它设备被发现时，即显示设备列表，根据用户的选择，与选择的用户设备建立连接，利用RTSP进行交换能力并且执行协商。连接建立后，终端设备通过RTSP播放命令后，将投影侧设备的屏幕数据直接发送到接收侧设备；当接收到接收侧的响应时，开始用于镜像的音频/视频(AV)流，将投影侧的屏幕数据通过流类型发送到接收侧设备。

当用户通过移动终端投影区域选择“接收画面”时，终端设备作为接收侧设备，等待投影方发起邀请，当接收到邀请，即与投影方建立连接后，即可接收投影方发送的屏幕数据。

应理解，上述实施1-3所述的实现原理和细节均适用于该实施例。

本发明实施例的一种终端设备，可实现一对一的屏幕投影和分享，通过WFD网络，可减少对地点的依赖，可应用于多媒体会议室或视听功能教室等特定需求的场景中，实现快速组建WFD网络，实现资源共享。基于现移动设备中Wi-Fi Display与分屏功能，可对投影侧设备进行快速设置自定义投影区域，达到快速选择需共享给其他设备的桌面区域，且可实现多屏互动，通过角色切换，任一设备均可进行分享，提升了用户使用体验。

实施例6

参见图10，本发明实施例还提供一种投影系统。该系统包括：

移动终端701，用于建立与外部设备之间的通信连接，确定所述移动终端屏幕投影的区域，生成所述屏幕投影区域的音/视频流，并传送给所述外部设备；

所述一个或多个外部设备702，用于发送响应于已接收到的发现请求的发现响应，与所述移动终端建立连接后显示所述音/视频流。

具体地，移动终端相当于投影侧设备，如手机、PAD(平板电脑)等，外部设备相当于接收侧设备，所述外设备包括显示屏或屏幕，如手机、电视机、投影仪等。在一定的条件下，移动终端可转换为外部设备即转换为接收侧设备，外部设备可转换为移动终端即转换为投影侧设备，在本实施例中，投影侧设备支持分屏功能，而对接收侧设备不做限制。

移动终端701还用于发送WFD连接请求，建立以与一个或多个外部设备间的WFD连接。

移动终端701还用于调整分屏，确定屏幕投影的区域，并根据所述确定的屏幕投影区域，进行与外部设备间的屏幕数据传输。其中，所述确定屏幕投影的区域包括：

当移动终端支持上下分屏时，则选择区域框以高度为参考值，进行显示；

当移动终端支持左右分屏时，则选择区域框以宽度为参考值，进行显示；

当移动终端支持自由分屏时，则选择区域框可以为屏幕的任意位置，进行显示。

在本实施例中，投影侧设备设置触发选择区域框显示或隐藏开关，如在显示时，可设置在选择区域框长按时间t，且T<t，则关闭选择区域框，影侧设备进行全屏投影。在投影进行时，可在投影端设置长按某区域时间t，且T<t，则显示选择区域框。同理，根据影侧设备情况，设置触发选择区域框的触压按钮或按键等。

一个或多个外部设备702，用于接收并显示接收到的屏幕数据。

所述外部设备还用于将确定投影区域的横坐标转换为横坐标与第一预设值的比值，将纵坐标转换为纵坐标与第二预设值的比值；其中，

所述第一预设值为移动终端投影区域的宽度，所述第二预设值为移动终端投影区域的高度。

为了使得投影侧设备中投影区域能够自适应接收侧设备屏幕大小显示投影内容，接收侧设备将投影侧设备投影区域的横坐标转换为横坐标与第一预设值的比值，将纵坐标转换为纵坐标与第二预设值的比值；其中，所述第一预设值为移动终端投影区域的宽度，所述第二预设值为移动终端投影区域的高度。例如，投影侧设备投影区域宽度为W0，高度为H0，一坐标点为(X0，Y0)，则将其转换为(X0/W0，Y0/H0)，即其被转换成了所占移动终端投影区域在宽度方向和长度方向上的比例。此外，也可按照其他方式进行转换。若接收侧设备屏幕为宽度为W1，高度为H1，接收到的坐标为(X0/W0，Y0/H0)，则接收侧设备的该点的坐标对应于投影侧设备的坐标为((X0/W0)×W1，(Y0/H0)×H1)。

移动终端701包括一显示屏且显示屏包括第一显示区域和第二显示区域；一个或多个外部设备702包括一显示屏，并根据所述移动终端确定的投影区域进行投影显示。

在本实施例中，移动终端支持分屏功能，而对外部设备不做限制。应理解，上述实施1-3所述的实现原理和细节均适用于该实施例。

本发明实施例的一种设备分屏投影系统，可实现一对一或一对多的屏幕投影和分享，通过WFD网络，可减少对地点的依赖，可应用于多媒体会议室或视听功能教室等特定需求的场景中，实现快速组建WFD网络，实现资源共享。基于现移动设备中Wi-Fi Display与分屏功能，可对投影侧设备进行快速设置自定义投影区域，达到快速选择需共享给其他设备的桌面区域。该方法的实现，克服当前Wi-Fi Display功能将整个投影端桌面投影到接收端，影响用户使用体验。同时，可很好体现出移动终端的人性化设计理念。

实施例7

参见图11，本发明一实施例的移动终端包括：输入设备、处理器903、显示屏904、无线通信单元905、音频单元906。在一个实施例中，输入设备为触摸屏2010。触摸屏2010包括触摸面板901和触摸控制器902。此外，输入设备还可为非触摸式输入设备(例如，红外输入设备等)等。

无线通信单元905可以包括一个短程通信模块(如，WiFi芯片)，用于移动终端建立与外部设备之间的通信连接。

触摸控制器902可以是单个专用集成电路(ASIC)，其可以包括一个或多个处理器子系统，处理器子系统可以包括一个或多个ARM处理器或者其它具有类似功能和性能的处理器。

触摸控制器902主要用于接收产生于触摸面板901的触摸信号，并进行处理后传输给移动终端的处理器903。这种处理例如，为将物理输入信号进行模数转换、处理得到触摸点坐标、处理得到触摸持续时间等，从而可以确定移动终端屏幕投影的区域。

处理器903接收触摸控制器902的输出，进行处理后基于该输出执行动作。所述动作包括但不限于，在预设周期(例如，30ms)内捕捉投影区域的图像信息，对每一帧图像以时间顺序打包从而形成音/视频流，并传送给所述外部设备，等等。

处理器903还与显示屏904连接。显示屏904用于向设备的用户提供UI。

音频单元906用于将处理器903生成的屏幕投影区域音/视频流转换音频信号并且输出为声音。

在一些实施例中，处理器903可以是与触摸控制器902分开的部件。在其它实施例中，处理器903可以与触摸控制器902为一合成的部件。

在一个实施例中，触摸面板901设置有分立的电容性传感器、电阻性传感器、力传感器、光学传感器或类似传感器等。

触摸面板901内包括有由导电材料制成横向和纵向的电极阵列。对于一个M行和N列电极阵列的单点触摸屏(仅能确定单点触摸的坐标)，触摸控制器902采用自电容扫描，则分别扫描M行和N列后就可以根据每一行和每一列信号来进行计算，定位手指在触摸屏上的坐标。扫描次数为M+N次。

对于一个M行和N列电极阵列的多触点触摸屏(能检测并解析多点的坐标，即多点触控)，触摸控制器902采用多触点互电容扫描，对行和列的交叉点扫描，由此，扫描次数为M×N次。

当用户的手指触摸面板，触摸面板产生触摸信号(为电信号)发送给触摸控制器902。触摸控制器902通过扫描可以得到触摸点的坐标。在一个实施例中，触摸屏2010的触摸面板901在物理上是一套独立的坐标定位系统，每次触摸的触摸点坐标上报到处理器903后，由处理器903转换为适应于显示屏904的像素坐标，以正确识别输入操作。

在本发明的描述中，需要理解的是，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。此外，在本发明的描述中，除非另有说明，“多个”的含义是两个或两个以上。

应理解，本发明实施例的终端设备、移动终端和外部设备均可以以各种形式来实施。例如，本发明中描述的设备可以包括诸如手机、移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动设备以及诸如数字TV、台式计算机等等的固定设备。

专业人员还可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

流程图中或在本发明的实施例中以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所述技术领域的技术人员所理解。

结合本文中所公开的实施例描述的方法或方法的步骤可以用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或任意其它形式的存储介质中。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，这些均属于本发明的保护之内。

Claims (8)

1.一种移动终端投影方法，用于将音/视频流投送给外部设备，所述外部设备包括显示屏或屏幕，其特征在于，所述方法包括步骤：

移动终端建立与一个或多个外部设备之间的通信连接；

确定所述移动终端屏幕投影的区域；

生成所述屏幕投影区域的音/视频流，并传送给所述外部设备；

所述移动终端支持分屏功能，分屏功能是指将移动终端屏幕划分若干个区域，且每个区域为一个独立的显示区域；所述确定移动终端屏幕投影的区域，具体为：

当WFD连接成功后，移动终端进行投影的同时显示一投影区域选择框，根据区域选择框的位置，确定投影区域；其中，

所述移动终端接收输入信号，所述输入信号用于控制区域选择框显示和/或关闭，当区域选择框显示时对所在区域选择框内的内容投影，当区域选择框关闭时进行全屏投影；当区域选择框显示时，所述移动终端根据分屏设计情况，显示可选择区域形式，具体为：

当移动终端支持上下分屏时，则选择区域框以高度为参考值，进行显示；

当移动终端支持左右分屏时，则选择区域框以宽度为参考值，进行显示；

当移动终端支持自由分屏时，则选择区域框可以为屏幕的任意位置，进行显示。

2.根据权利要求1所述的移动终端的投影方法，其特征在于，所述移动终端建立与外部设备之间的通信连接，包括步骤：

移动终端发送WFD连接请求；

在所述移动终端处接收发现响应，所述发现响应是响应于已接收到的所述发现请求而从外部设备发送的；

移动终端建立与外部设备之间的WFD连接。

3.根据权利要求1所述的移动终端投影方法，其特征在于，所述生成所述屏幕投影区域的音/视频流，具体为：

移动终端在预设周期内捕捉投影区域的图像信息，对每一帧图像以时间顺序打包从而形成音/视频流。

4.根据权利要求1所述的移动终端投影方法，其特征在于，所述生成所述屏幕投影区域的音/视频流，并传送给所述外部设备，具体为：

将所述移动终端确定投影区域的坐标点发送给所述外部设备；

所述外部设备将确定投影区域的横坐标转换为横坐标与第一预设值的比值，将纵坐标转换为纵坐标与第二预设值的比值；其中，

所述第一预设值为移动终端投影区域的宽度，所述第二预设值为移动终端投影区域的高度。

5.一种终端设备，其特征在于，包括：

连接模块，用于移动终端建立与一个或多个外部设备之间的通信连接；

确定模块，用于确定所述移动终端屏幕投影的区域；

传输模块，用于生成所述屏幕投影区域的音/视频流，并传送给所述外部设备；

所述移动终端支持分屏功能，分屏功能是指将移动终端屏幕划分若干个区域，且每个区域为一个独立的显示区域；所述确定模块还用于当WFD连接成功后，移动终端进行投影的同时显示一投影区域选择框，根据区域选择框的位置，确定投影区域；其中，

所述移动终端接收输入信号，所述输入信号用于控制区域选择框显示和/或关闭，当区域选择框显示时对所在区域选择框内的内容投影，当区域选择框关闭时进行全屏投影；当区域选择框显示时，所述移动终端根据分屏设计情况，显示可选择区域形式，具体为：

当移动终端支持上下分屏时，则选择区域框以高度为参考值，进行显示；

当移动终端支持左右分屏时，则选择区域框以宽度为参考值，进行显示；

当移动终端支持自由分屏时，则选择区域框可以为屏幕的任意位置，进行显示。

6.根据权利要求5所述的终端设备，其特征在于，所述连接模块还用于移动终端发送WFD连接请求；

在所述移动终端处接收发现响应，所述发现响应是响应于已接收到的所述发现请求而从外部设备发送的；

移动终端建立与外部设备之间的WFD连接。

7.根据权利要求5所述的终端设备，其特征在于，所述传输模块还用于生成所述屏幕投影区域的音/视频流，具体为：

移动终端在预设周期内捕捉投影区域的图像信息，对每一帧图像以时间顺序打包从而形成音/视频流；

还用于将所述移动终端确定投影区域的坐标点发送给所述外部设备；

所述外部备将确定投影区域的横坐标转换为横坐标与第一预设值的比值，将纵坐标转换为纵坐标与第二预设值的比值；其中，

所述第一预设值为移动终端投影区域的宽度，所述第二预设值为移动终端投影区域的高度。

8.一种投影系统，其特征在于，包括移动终端和一个或多个外部设备，其中，

所述移动终端采用如权利要求5～7任一项所述的终端设备，用于建立与外部设备之间的通信连接，确定所述移动终端屏幕投影的区域，生成所述屏幕投影区域的音/视频流，并传送给所述外部设备；

所述一个或多个外部设备，用于发送响应于已接收到的发现请求的发现响应，与所述移动终端建立连接后显示所述音/视频流。

Images