CN103841466B - 屏幕投影方法、计算机端和移动终端 - Google Patents

Abstract

本发明公开了一种屏幕投影方法、计算机端和移动终端，其中，所述屏幕投影方法包括：选取进行屏幕投影的移动终端，并与所述移动终端建立通信连接；接收所述移动终端发送的音视频数据；对所述音视频数据进行处理，并播放所述处理后的音视频数据。本发明实现了计算机端同步播放移动终端的音视频数据。

Description

屏幕投影方法、计算机端和移动终端

技术领域

本发明涉及计算机技术，尤其涉及一种屏幕投影方法、计算机端和移动终端。

背景技术

随着计算机技术的不断发展，计算机端出现了多种个人电脑（personalcomputer，PC）软件，比如，360手机助手、91手机助手等。其中，360手机助手是一款智能手机的资源获取平台，91手机助手是一款支持智能手机系统的PC软件。这些PC软件可以自动检测到连接的移动终端，比如，具有安卓（Android）操作系统的智能手机或平板电脑，并支持自动获取移动终端当前屏幕截图的功能，使得移动终端的屏幕截图能够在计算机端显示，即提供了一种计算机投影移动终端屏幕的技术，简称屏幕投影技术。

现有技术中计算机投影移动终端屏幕的一般过程是：当计算机端检测通用串行总线（Universal Serial Bus，USB）端口连接的移动终端时，通过调用一些命令，比如，Android命令，进行屏幕截图，使得移动终端传输图像数据至计算机端，计算机端对接收到的图像数据进行转换并显示。

但是，上述计算机投影移动终端屏幕的过程中计算机端与移动终端为有线连接，需要手动点击截图按钮，才能触发移动终端屏幕截图，并且获取到的屏幕截图均为静态图片，不能动态显示移动终端的屏幕内容，还无法获取移动终端正在播放的声音。

发明内容

有鉴于此，本发明实施例的目的在于提出一种屏幕投影方法、计算机端和移动终端，计算机端能够接收移动终端发送的音视频数据，并对接收到的音视频数据进行处理并播放已经处理后的音视频数据，实现了计算机端同步播放移动终端的音视频数据。

第一方面，本发明实施例提供了一种屏幕投影方法，所述方法包括：

选取进行屏幕投影的移动终端，并与所述移动终端建立通信连接；

接收所述移动终端发送的音视频数据；

对所述音视频数据进行处理，并播放所述处理后的音视频数据。

第二方面，本发明实施例提供了一种屏幕投影方法，所述方法包括：

与计算机端建立通信连接；

获取本地播放的音视频数据；

向所述计算机端发送所述音视频数据，以使所述计算机端对所述音视频数据进行处理，并播放所述处理后的音视频数据。

第三方面，本发明实施例提供了一种计算机端，所述计算机端包括：

选取单元，用于选取进行屏幕投影的移动终端，并与所述移动终端建立通信连接；

接收单元，用于接收所述移动终端发送的音视频数据；

处理单元，用于对所述音视频数据进行处理，并播放所述处理后的音视频数据。

第四方面，本发明实施例提供了一种移动终端，所述移动终端包括：

建立单元，用于与计算机端建立通信连接；

获取单元，用于获取本地的音视频数据；

发送单元，用于向所述计算机端发送所述音视频数据，以使所述计算机端对所述音视频数据进行处理，并播放所述处理后的音视频数据。

本发明实施例选取进行屏幕投影的移动终端，并与所述移动终端建立通信连接，接收所述移动终端发送的音视频数据，对所述音视频数据进行处理，并播放所述处理后的音视频数据，以使计算机端能够同步播放移动终端的音视频数据。

附图说明

图1是本发明第一实施例的屏幕投影方法的流程图；

图2是本发明第二实施例的屏幕投影方法的流程图；

图3是本发明第三实施例的屏幕投影方法的流程图；

图4是本发明第四实施例的屏幕投影方法的信息交互图；

图5是本发明第五实施例的计算机端的示意图；

图6是本发明第六实施例的移动终端的示意图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面结合附图对本发明具体实施例作进一步的详细描述。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部内容。

图1是本发明第一实施例的屏幕投影方法的流程图。该屏幕投影方法可以应用于计算机端。如图1所示，所述方法包括：

步骤110、选取进行屏幕投影的移动终端，并与所述移动终端建立通信连接。

具体地，计算机端选取进行屏幕投影的移动终端，其目的是计算机端选取与之同步的移动终端，并同步播放该移动终端的音视频数据。

步骤120、接收移动终端发送的音视频数据。

具体地，计算机端与移动终端建立通信连接，该通信连接可以是有线连接，比如，计算机端可以通过高清晰度多媒体接口（High Definition Multimedia Interface，HDMI）直接连接到移动终端上；该通信连接也可以是无线连接，比如，计算机端通过无线保真（Wireless Fidelity，Wi-Fi）或蓝牙等无线技术连接到移动终端上，使得该计算机端能够接收该移动终端的正在播放的音视频数据。其中，Wi-Fi是一种可以将个人电脑、手持设备等终端以无线方式互相连接的技术。但是，当有线连接时，计算机端只能连接一个移动终端，当无线连接时，计算机可以连接多个移动终端，并能根据用户需要快速切换进行屏幕投影的移动终端。

步骤130、对接收到的音视频数据进行处理，并播放所述处理后的音视频数据。

具体地，计算机端接收到移动终端发送的音视频数据，为了播放该音视频数据，则先对该音视频数据进行处理，比如，校验和解码等，再播放处理后的音视频数据。

在本实施例的一个优选实施方式中，步骤110中选取进行屏幕投影的移动终端，包括通过访问服务器平台获取当前注册的在线移动终端的注册信息，根据用户需求从所有在线移动终端中选取进行屏幕投影的移动终端对应的注册信息。。其中，所述服务器平台包括每个在线移动终端的注册信息，比如，每个在线移动终端的网络之间互连的协议（InternetProtocol，IP）地址、设备身份标识号码（Identity，ID）。

具体地，计算机端启动后，通过访问服务器平台获取当前注册的在线移动终端后，自动弹出一个列表界面，该列表界面包括获取到的所有在线移动终端，并根据用户需求从列表界面中选取进行屏幕投影的移动终端，比如，列表界面中包括多个在线的智能手机，由用户选择进行屏幕投影的智能手机。其中，服务器平台包括所有在线移动终端的在线信息，是因为每一移动终端启动应用后，自动将自身的IP地址、设备ID、监听端口、设备版本、屏幕尺寸、屏幕分辨率信息提交给服务器平台。

在本实施例的另一个优选实施方式中，步骤120中与选定的进行屏幕投影的移动终端建立通信连接，包括：

（1）根据选取的进行屏幕投影的移动终端对应的注册信息向所述进行屏幕投影的移动终端发送建立连接通知，所述建立连接通知携带有计算机端的IP地址、端口和第一验证码，其中，所述建立连接通知可以采用可扩展通讯和表示协议（The ExtensibleMessaging and Presence Protocol，XMPP）协议，也可以用其他的通信协议，其目的是用于移动终端输出音视频到该计算机端上。

（2）接收各个在线移动终端发送的建立连接申请，所述建立连接申请携带有在线移动终端的IP地址、设备ID和第二验证码。其中，建立连接申请还携带有监听端口、设备版本、屏幕尺寸、屏幕分辨率信息等信息，该建立连接申请可以采用XMPP协议，也可以用其他的通信协议。

（3）当接收到的所述在线移动终端的IP地址、设备ID，分别和所述进行屏幕投影的移动终端的IP地址、设备ID相同，且所述第一验证码和所述第二验证码相同时，则与所述在线移动终端建立通信连接，并向所述在线移动终端发送建立连接回复信息，所述建立连接回复信息为所述计算机端允许建立通信连接。

上述（2）、（3）中计算机端接收所有在线移动终端发送的建立连接申请，该建立连接申请可能是选定的进行屏幕投影的移动终端发送的建立连接申请，也可能是其他移动终端发送的建立连接申请。故计算机端接收到建立连接申请后，判断该建立连接申请是不是之前选定的进行屏幕投影的移动终端发送的，只有该建立连接申请是之前选定的进行屏幕投影的移动终端发送的时候，才建立与该移动终端的通信连接。

比如，具有安卓（Android）操作系统的智能手机（PAD）向计算机端发送建立连接申请，其采用的是XMPP协议，携带PAD的IP地址、设备ID、监听端口、设备版本、屏幕尺寸、屏幕分辨率信息和之前计算机端发来的验证码，计算机端接收到该建立连接申请后，将接收到的建立连接申请中的PAD的IP地址、设备ID和验证码，分别与用户选定的进行屏幕投影的PAD的IP地址、设备ID和验证码进行比较，当一致时才建立连接。该处理主要是为了避免由于网络延迟等问题造成的多台移动终端同时申请连接计算机端，而计算机端只接受最后一次选择的投影PAD。

图2是本发明第二实施例的屏幕投影方法的流程图。该屏幕投影方法可以应用于计算机端。如图2所示，所述方法包括：

步骤210、计算机端选取进行屏幕投影的移动终端，并与该移动终端建立无线通信连接。比如，计算机端通过Wi-Fi或蓝牙等无线技术与移动终端建立无线通信连接。

步骤220、计算机端实时接收移动终端发送的音视频数据。

步骤230、计算机端对接收到的音视频数据进行校验和解码处理，并实时播放所述处理后的音视频数据。

步骤240，根据用户需要关闭进行屏幕投影的页面窗口，并向移动终端发送终止指令，使得移动终端根据该终止指令断开与计算机端的连接，并停止捕获、生成本地数据。

图3是本发明第三实施例的屏幕投影方法的流程图。该屏幕投影方法可以应用于移动终端。如图3所示，所述方法包括：

步骤310、移动终端与计算机端建立通信连接。其中，移动终端与计算机端可以建立有线连接，也可以是无线连接。比如，PAD通过WIFI或蓝牙等无线技术连接到电脑上，使得该电脑能够接收该PAD的正在播放的音视频数据。

步骤320、移动终端获取本地播放的音视频数据。

步骤330、移动终端向计算机端发送获取到的音视频数据，以使所述计算机端对所述音视频数据进行处理，并播放所述处理后的音视频数据。

在本实施例的一个优选实施方式中，步骤310与计算机端建立通信连接，包括：

（1）移动终端接收计算机端发送的建立连接通知，所述建立连接通知携带有计算机端的IP地址、端口和第一验证码；其中，所述建立连接通知可以采用XMPP协议，也可以用其他的通信协议，其目的是用于移动终端输出音视频到该计算机端上。

（2）移动终端向计算机端发送建立连接申请，所述建立连接申请携带有在线移动终端的IP地址、设备ID和第二验证码，以使所述计算机端根据所述建立连接申请确定是否建立通信连接。其中，建立连接申请还携带有监听端口、设备版本、屏幕尺寸、屏幕分辨率信息等信息，该建立连接申请可以采用XMPP协议，也可以用其他的通信协议。

（3）移动终端接收计算机端发送的建立连接回复信息，并根据所述建立连接回复信息来建立与所述计算机端的通信连接，所述建立连接回复信息为所述计算机端允许建立通信连接时。

在本实施例的另一个优选实施方式中，步骤310之前好包括：移动终端启动应用后，自动将自身的IP地址、设备ID、监听端口、设备版本、屏幕尺寸、屏幕分辨率信息提交给服务器平台。

在本实施例的再一个优选实施方式中，步骤330之后还包括：接收计算机端发送的终止指令，根据该终止指令断开与计算机端的连接，并停止捕获、生成本地数据。

因此，本发明实施例提供的屏幕投影方法，通过选取进行屏幕投影的移动终端，并与所述移动终端建立通信连接，接收所述移动终端发送的音视频数据，对所述音视频数据进行处理，并播放所述处理后的音视频数据，以使计算机端能够同步播放移动终端的音视频数据。

图4是本发明第四实施例的屏幕投影方法的信息交互图。如图4所示，所述方法包括：

步骤401、移动终端启动，将注册信息发送至服务器平台，该注册信息包括移动终端的IP地址、设备ID、监听端口、设备版本、屏幕尺寸、屏幕分辨率信息等，并开启监听服务。其中，服务器平台只具有后台服务功能，负责设备注册维护等工作。其中，移动终端可以有一个，也可以有多个。

步骤402、当计算机端启动其控制软件后，服务器平台将当前注册的在线移动终端的注册信息发送至计算机端。其中，计算机控制软件具有前台页面和后台处理两部分，主要负责进行开关控制、建立连接、接收数据（视频、音频）、播放数据（视频、音频）等工作。

步骤403、计算机端根据用户需求从所有在线移动终端中选取进行屏幕投影的移动终端对应的注册信息。其中，图4中的移动终端指的是根据用户选定的进行屏幕投影的移动终端。

步骤404、计算机端根据选取的进行屏幕投影的移动终端对应的注册信息，向该移动终端发送建立连接通知，所述建立连接通知携带有计算机端的IP地址、端口和第一验证码。其中，具有Android辅助应用的移动终端只具有后台服务功能，负责建立连接、生成数据（视频、音频）、传输数据（视频、音频）等工作。

步骤405、移动终端向计算机端发送建立连接申请，所述建立连接申请携带有该移动终端的IP地址、设备ID和第二验证码。

步骤406、当计算机端接收到的移动终端的IP地址、设备ID，分别与之前选取的进行屏幕投影的移动终端的注册信息中的IP地址、设备ID相同，且接收到的第二验证码与之前发送的第二验证码相同时，则开始与该移动终端建立通信连接。

步骤407、计算机端向移动终端发送建立连接回复信息，所述建立连接回复信息为所述计算机端允许建立通信连接。

上述步骤406和步骤407可以是同时发生的。

步骤408、移动终端接收计算机端发送的建立连接回复信息，则开始建立与所述计算机端的通信连接，所述建立连接回复信息为所述计算机端允许建立通信连接。

步骤409、移动终端获取本地播放的音视频数据。该音视频数据是移动终端根据本地数据生成的视频流和音频流。其具体过程为移动终端开始捕获本地的输出的音视频数据，按照每秒25帧（该数据可配置）的频率进行屏幕截图，并压缩成H.264（或其他标准）视频流，同时，捕获本地播放的声音，并压缩成MP3（或其他标准）音频流。

步骤410、移动终端向所述计算机端发送所述音视频数据。其中，音视频数据是移动终端根据本地数据生成的视频流和音频流。

步骤411、计算机端对接收到的音视频数据进行校验和解码处理，并实时播放所述处理后的音视频数据。

步骤412、计算机端根据用户需要关闭进行屏幕投影的页面窗口，并向移动终端发送终止指令。

步骤413、移动终端接收计算机端发送的终止指令后，根据该终止指令断开与计算机端的连接，并停止捕获、生成本地数据。

因此，本发明实施例提供的屏幕投影方法，通过与计算机端建立通信连接，获取本地播放的音视频数据，向所述计算机端发送所述音视频数据，从而实现了计算机端能够同步播放移动终端的音视频数据。

图5是本发明第五实施例的计算机端的示意图。该搜索引擎用于执行本发明第一实施例至第四实施例的屏幕投影方法。如图5所示，所述计算机端50包括：选取单元51、接收单元52和处理单元53。

选取单元51用于选取进行屏幕投影的移动终端，并与所述移动终端建立通信连接；

接收单元52用于接收所述移动终端发送的音视频数据；

处理单元53用于对所述音视频数据进行处理，并播放所述处理后的音视频数据。

在一个实施例中，所述选取单元还用于通过访问服务器平台获取当前注册的在线移动终端的注册信息，根据用户需求从所有在线移动终端中选取进行屏幕投影的移动终端对应的注册信息；

以及，所述选取单元51还用于根据所述进行屏幕投影的移动终端对应的注册信息向所述移动终端发送建立连接通知，所述建立连接通知携带有计算机端的IP地址、端口和第一验证码；接收各个在线移动终端发送的建立连接申请，所述建立连接申请携带有在线移动终端的IP地址、设备ID和第二验证码；当接收到的所述在线移动终端的IP地址、设备ID，分别与所述所述进行屏幕投影的移动终端的注册信息中的IP地址、设备ID相同，且所述第一验证码和所述第二验证码相同时，则与所述在线移动终端建立通信连接，并向所述在线移动终端发送建立连接回复信息，所述建立连接回复信息为所述计算机端允许建立通信连接；

以及，所述选取单元51还用于与所述移动终端建立无线通信连接；

以及，所述接收单元52还用于实时接收所述移动终端发送的音视频数据；

以及，所述处理单元53还用于对所述音视频数据进行校验和解码处理，并实时播放所述处理后的音视频数据。

因此，本发明实施例提供的移动终端，通过选取进行屏幕投影的移动终端，并与所述移动终端建立通信连接，接收所述移动终端发送的音视频数据，对所述音视频数据进行处理，并播放所述处理后的音视频数据，以使计算机端能够同步播放移动终端的音视频数据。

图6是本发明第六实施例的移动终端的示意图。该移动终端用于执行本发明第一实施例至第四实施例的屏幕投影方法。如图6所示，所述移动终端60包括：建立单元61、获取单元62和发送单元63。

建立单元61用于与计算机端建立通信连接；

获取单元62用于获取本地的音视频数据；

发送单元63用于向所述计算机端发送所述音视频数据，以使所述计算机端对所述音视频数据进行处理，并播放所述处理后的音视频数据。

在一个实施例中，所述建立单元61还用于接收所述计算机端发送的建立连接通知，所述建立连接通知携带有计算机端的IP地址、端口和第一验证码；向所述计算机端发送建立连接申请，所述建立连接申请携带有移动终端的IP地址、设备ID和第二验证码，以使所述计算机端根据所述建立连接申请确定是否建立通信连接；接收所述计算机端发送的建立连接回复信息，并根据所述建立与所述计算机端的通信连接，所述建立连接回复信息为所述计算机端允许建立通信连接。

因此，本发明实施例提供的移动终端，通过与计算机端建立通信连接，获取本地播放的音视频数据，向所述计算机端发送所述音视频数据，从而实现了计算机端能够同步播放移动终端的音视频数据。

显然，本领域技术人员应该明白，上述的本发明的各模块或各步骤可以通过如上所述的通信终端实施。可选地，本发明实施例可以用计算机装置可执行的程序来实现，从而可以将它们存储在存储装置中由处理器来执行，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等；或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件的结合。

以上所述仅为本发明的优选实施例，并不用于限制本发明，对于本领域技术人员而言，本发明可以有各种改动和变化。凡在本发明的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (5)

1.一种屏幕投影方法，其特征在于，所述方法包括：

计算机端选取进行屏幕投影的移动终端，并与所述移动终端建立通信连接；

计算机端接收所述移动终端发送的音视频数据；

计算机端对所述音视频数据进行处理，并播放所述处理后的音视频数据；

其中，所述选取进行屏幕投影的移动终端，包括：

通过访问服务器平台获取当前注册的在线移动终端的注册信息，根据用户需求从所有在线移动终端中选取进行屏幕投影的移动终端对应的注册信息；

其中，所述与所述移动终端建立通信连接，包括：

根据所述进行屏幕投影的移动终端对应的注册信息向所述移动终端发送建立连接通知，所述建立连接通知携带有计算机端的IP地址、端口和第一验证码；

接收各个在线移动终端发送的建立连接申请，所述建立连接申请携带有在线移动终端的IP地址、设备ID和第二验证码；

当接收到的所述在线移动终端的IP地址、设备ID，分别与所述进行屏幕投影的移动终端的注册信息中的IP地址、设备ID相同，且所述第一验证码和所述第二验证码相同时，则与所述在线移动终端建立通信连接，并向所述在线移动终端发送建立连接回复信息，所述建立连接回复信息为所述计算机端允许建立通信连接。

2.根据权利要求1所述的屏幕投影方法，其特征在于，所述与所述移动终端建立通信连接，还包括：

与所述移动终端建立无线通信连接；

以及，所述接收所述移动终端发送的音视频数据，还包括：实时接收所述移动终端发送的音视频数据；

以及，所述对所述音视频数据进行处理，并播放所述处理后的音视频数据，还包括：对所述音视频数据进行校验和解码处理，并实时播放所述处理后的音视频数据。

3.一种屏幕投影方法，其特征在于，所述方法包括：

移动终端与计算机端建立通信连接；

移动终端获取本地播放的音视频数据；

移动终端向所述计算机端发送所述音视频数据，以使所述计算机端对所述音视频数据进行处理，并播放所述处理后的音视频数据；

其中，所述与计算机端建立通信连接，包括：

接收所述计算机端发送的建立连接通知，所述建立连接通知携带有计算机端的IP地址、端口和第一验证码；

向所述计算机端发送建立连接申请，所述建立连接申请携带有移动终端的IP地址、设备ID和第二验证码，以使所述计算机端根据所述建立连接申请确定是否建立通信连接；

接收所述计算机端发送的建立连接回复信息，并根据所述建立连接回复信息建立与所述计算机端的通信连接，所述建立连接回复信息为所述计算机端允许建立通信连接。

4.一种计算机端，其特征在于，所述计算机端包括：

选取单元，用于选取进行屏幕投影的移动终端，并与所述移动终端建立通信连接；

接收单元，用于接收所述移动终端发送的音视频数据；

处理单元，用于对所述音视频数据进行处理，并播放所述处理后的音视频数据；

其中，所述选取单元还用于通过访问服务器平台获取当前注册的在线移动终端的注册信息，根据用户需求从所有在线移动终端中选取进行屏幕投影的移动终端对应的注册信息；

以及，所述选取单元还用于根据所述进行屏幕投影的移动终端对应的注册信息向所述移动终端发送建立连接通知，所述建立连接通知携带有计算机端的IP地址、端口和第一验证码；接收各个在线移动终端发送的建立连接申请，所述建立连接申请携带有在线移动终端的IP地址、设备ID和第二验证码；当接收到的所述在线移动终端的IP地址、设备ID，分别与所述进行屏幕投影的移动终端的注册信息中的IP地址、设备ID相同，且所述第一验证码和所述第二验证码相同时，则与所述在线移动终端建立通信连接，并向所述在线移动终端发送建立连接回复信息，所述建立连接回复信息为所述计算机端允许建立通信连接；

以及，所述选取单元还用于与所述移动终端建立无线通信连接；

以及，所述接收单元还用于实时接收所述移动终端发送的音视频数据；

以及，所述处理单元还用于对所述音视频数据进行校验和解码处理，并实时播放所述处理后的音视频数据。

5.一种移动终端，其特征在于，所述移动终端包括：

建立单元，用于与计算机端建立通信连接；

获取单元，用于获取本地的音视频数据；

发送单元，用于向所述计算机端发送所述音视频数据，以使所述计算机端对所述音视频数据进行处理，并播放所述处理后的音视频数据；

其中，所述建立单元还用于接收所述计算机端发送的建立连接通知，所述建立连接通知携带有计算机端的IP地址、端口和第一验证码；向所述计算机端发送建立连接申请，所述建立连接申请携带有移动终端的IP地址、设备ID和第二验证码，以使所述计算机端根据所述建立连接申请确定是否建立通信连接；接收所述计算机端发送的建立连接回复信息，并根据所述建立连接回复信息建立与所述计算机端的通信连接，所述建立连接回复信息为所述计算机端允许建立通信连接。