CN106954099A - 第一终端显示第二终端的屏幕界面的方法及系统 - Google Patents

Abstract

本发明实施例提供了第一终端显示第二终端的屏幕界面的方法及系统，所述的方法包括：在第二终端中，对摄像头发送给HAL层的预览视频帧进行拦截；将拦截的预览视频帧替换为抓取的屏幕界面的数据，并发送至Framework层的接口；即时通讯应用调用所述接口，并将所述屏幕界面的数据发送给第一终端。本发明实施例通过用户在第一终端中打开即时通信应用程序，发起与第二终端建立视频通信连接的请求，第二终端的用户接收请求后，就可以根据接收到的界面图像远程协助第一终端的用户解决问题。

Description

第一终端显示第二终端的屏幕界面的方法及系统

技术领域

本发明涉及通信领域，特别是涉及一种基于Android系统的在即时通讯应用中第一终端显示第二终端的屏幕界面的方法及系统。

背景技术

随着智能移动终端的普及，智能移动终端的操作越来越复杂，部分人群，尤其是老年人对智能移动终端不太会使用，所以，当老年人遇到问题，而且身边又没人指导的时候，问题无法得到有效解决。一旦出现问题必须要现场解决。急需要一种远程协助手段，可以远程指导解决问题。

现有的基于智能终端的类似的远程桌面方案，需要单独搭建服务器，或者需要单独实现屏幕的编码及传输控制，所以，对用户而言，操作比较复杂，用户体验较差。

发明内容

为了解决现有远程桌面方案成本高、操作复杂的问题，本发明实施例提出了一种基于Android系统的在即时通讯应用中第一终端显示第二终端的屏幕界面的方法及系统。

为了解决上述问题，本发明实施例公开了一种基于Android系统的在即时通讯应用中基于移动终端的远程协助第一终端显示第二终端的屏幕界面的方法，包括：

在第二终端中，对摄像头发送给HAL层的预览视频帧进行拦截；

将拦截的预览视频帧替换为抓取的屏幕界面的数据，并发送至Framework层的接口；

即时通讯应用调用所述接口，并将所述屏幕界面的数据发送给第一终端。

优选的，所述方法包括：采用拦截器QCamera2HWICallbacks对所述预览视频帧进行拦截。

优选的，所述将拦截的预览视频帧替换为抓取的屏幕界面的数据具体包括：

将抓取的屏幕界面的数据的格式转换为YUV格式，并发送至所述拦截器；

所述拦截器将拦截的预览视频帧替换为YUV格式的屏幕界面的数据。

优选的，所述方法包括：按照摄像头向HAL层发送预览视频帧的速率抓取屏幕界面的数据。

相应的，本发明实施例还公开了一种基于Android系统的在即时通讯应用中第一终端显示第二终端的屏幕界面的系统，包括第一终端和第二终端；所述第二终端包括：

拦截模块，用于对摄像头发送给HAL层的预览视频帧进行拦截；

替换模块，用于将拦截的预览视频帧替换为抓取的屏幕界面的数据，并发送至Framework层的接口；

发送模块，用于在即时通讯应用调用所述接口时，将所述屏幕界面的数据发送给第一终端。

优选的，所述的拦截模块为QCamera2HWICallbacks拦截器。

优选的，所述替换模块包括：

格式转换子模块，用于将抓取的屏幕界面的数据的格式转换为YUV格式，并发送至所述拦截器；

预览视频帧替换子模块，用于所述拦截器将拦截的预览视频帧替换为YUV格式的屏幕界面的数据。

优选的，所述第二终端还包括：

屏幕界面抓取模块，用于按照摄像头向HAL层发送预览视频帧的速率抓取屏幕界面的数据。

本发明实施例包括以下优点：

在本发明实施例中，涉及本端移动终端(即第二终端)和对端移动终端(即第一终端)，二者均安装有支持视频聊天的即时通信应用程序，在本端移动终端与对端移动终端进行视频通信的过程中，用捕捉到的本端移动终端的界面图像，替换本端移动终端摄像头采集到的视频图像，然后将捕捉到的本端移动终端的界面图像发送至对端移动终端，这样，本端的用户打开即时通信应用程序，发起建立视频通信连接的请求，对端的用户接收请求后，就可以根据接收到的界面图像远程协助本端的用户解决问题。对用户而言，不仅操作简便，而且还不需要额外安装第三方软件。

附图说明

图1是本发明的一种基于Android系统的在即时通讯应用中在第一终端显示第二终端的屏幕界面的方法实施例的步骤流程图；

图2是本发明的一种基于移动终端的远程协助方法实施例的步骤流程图；

图3是本发明的一种基于Android系统的在即时通讯应用中第一终端显示第二终端的屏幕界面的系统中第二终端的结构框图；

图4是本发明的一种基于移动终端的远程协助装置实施例的结构框图。

具体实施方式

为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。

参照图1，示出了本发明的一种基于Android系统的在即时通讯应用中在第一终端显示第二终端的屏幕界面的方法实施例的步骤流程图，所述的方法具体可以包括如下步骤：

步骤101，在第二终端中，对摄像头发送给HAL层的预览视频帧进行拦截；

在本发明一种优选实施例中，采用拦截器QCamera2HWICallbacks对所述预览视频帧进行拦截。

具体的，所谓HAL层，Hardware Abstract Layer，即硬件抽象层。HAL的作用是将操作系统的其余部分表示为抽象的硬件设备，特别是去除了真正硬件所富含的瑕疵和特质。这些设备表现为操作系统的其它部分和设备可以使用的独立于机器的服务的形式(函数调用和宏)。通过使用HAL服务和间接硬件寻址，当移植到新的硬件上时，驱动程序和核心只需做很少的改动。移植HAL服务是直接的，因为所有的机器相关代码都集中在一个地方，并且移植的目标是充分定义的，即实现所有的HAL服务。

而QCamera2HWICallbacks是HAL层下的一个CPP文件，CPP是c++(即c plus plus)文件类型，比c语言较高级的编程语言，其在系统中的路径一般为root/QCamera2/HAL/QCamera2HWICallbacks.cpp。

步骤102，将拦截的预览视频帧替换为抓取的屏幕界面的数据，并发送至Framework层的接口；

Framework即架构，它是一个语言开发软件，提供了软件开发的框架，使开发更具工程性、简便性和稳定性。NET Framework通过COM Interop(COM互操作)技术支持COM+和MTS。一个传统的COM应用程序能够调用一个.NET组件，同时.NET组件(在.NET中称为.NETAssembly)也能够调用一个COM组件。这一非常强大的双向互操作特性使你可以在应用程序中混合使用两类技术。

在本发明一种优选实施例中，所述将拦截的预览视频帧替换为抓取的屏幕界面的数据具体包括：

将抓取的屏幕界面的数据的格式转换为YUV格式，并发送至所述拦截器；

所述拦截器将拦截的预览视频帧替换为YUV格式的屏幕界面的数据。

在本发明一种优选实施例中，按照摄像头向HAL层发送预览视频帧的速率抓取屏幕界面的数据。

具体的，抓取的屏幕界面的数据的格式为RGB格式，但是摄像头采集的视频图像是YUV格式，因此，需要将抓取的屏幕界面的数据的格式转换为YUV格式，并发送至所述拦截器，然后拦截器将拦截的预览视频帧替换为YUV格式的屏幕界面的数据。

而且，抓取屏幕界面的数据的速率与摄像头向HAL层发送预览视频帧的速率是相同的，例如，摄像头向HAL层发送预览视频帧的速度为每秒30帧，那么，抓取屏幕界面的数据的速率也是每秒30帧。

步骤103，即时通讯应用调用所述接口，并将所述屏幕界面的数据发送给第一终端。

参照图2，示出了本发明的一种基于移动终端的远程协助方法实施例的步骤流程图，其中，所述移动终端涉及本端移动终端和进行远程协助的对端移动终端。

在本发明实施例中，所述移动终端即移动通信终端，是指可以在移动中使用的计算机设备，其移动性主要体现在移动通信能力和便携化体积，例如：智能手机、平板电脑等，本发明实施例对此不作限制。

需要说明的是，本发明实施例中的本端移动终端和对端移动终端是为了方便描述进行远程协助的双方移动终端的关系，并不是为了限制双方移动终端在远程协助过程中的角色关系。比如，当对端移动终端向本端移动终端发起远程协助的请求时，从本端移动终端的角度看，对端就是被协助方，本端就是协助方；但是，从对端移动终端的角度看，本端是则被协助方，而对端才是协助方。所以，本端移动终端与对端移动终端的角色是相对的，并不是只能从本端移动终端向对端移动终端发送远程协助请求。

所述的方法具体可以包括如下步骤：

步骤201，当被触发进入远程协助模式时，在所述远程协助模式下，调用所述本地移动终端的摄像头。

移动终端，特别是智能移动终端，具有如下特点：

(1)在硬件体系上，移动终端具备中央处理器、存储器、输入部件和输出部件，也就是说，移动终端往往是具备通信功能的微型计算机设备。另外，移动终端可以具有多种输入方式，诸如键盘、鼠标、触摸屏、送话器和摄像头等，并可以根据需要进行调整输入。同时，移动终端往往具有多种输出方式，如受话器、显示屏等，也可以根据需要进行调整；

(2)在软件体系上，移动终端必须具备操作系统，如Android等。同时，操作系统越来越开放，基于开放的操作系统平台开发的个性化应用程序层出不穷，如通信簿、日程表、记事本、计算器以及各类游戏等，极大程度地满足了个性化用户的需求；

(3)在通信能力上，移动终端具有灵活的接入方式和高带宽通信性能，并且能根据所选择的业务和所处的环境，自动调整所选的通信方式，从而方便用户使用。移动终端可以支持GSM、WCDMA、CDMA2000、TDSCDMA、Wi-Fi以及WiMAX等，从而适应多种制式网络，不仅支持语音业务，更支持多种无线数据业务；

(4)在功能使用上，移动终端更加注重人性化、个性化和多功能化。随着计算机技术的发展，移动终端从“以设备为中心”的模式进入“以人为中心”的模式，集成了嵌入式计算、控制技术、人工智能技术以及生物认证技术等，充分体现了以人为本的宗旨。由于软件技术的发展，移动终端可以根据个人需求调整设置，更加个性化。同时，移动终端本身集成了众多软件和硬件，功能也越来越强大。

所以，在本发明实施例中，移动终端也具有操作系统，且在操作系统中安装了相应的应用程序，来实现本端移动终端与对端移动终端建立远程协助。

在本发明一种优选实施例中，所述本端移动终端和所述对端移动终端安装有相同类型的即时通信应用程序对象；所述即时通信应用程序对象具有联系人列表，所述联系人列表包括本端用户信息，和对端用户信息。

即时通信，是一种可以让使用者在网络上建立某种私人聊天室的实时通讯服务。大部分的即时通讯服务提供了状态信息的特性——显示联系人列表，联系人是否在线及能否与联系人交谈。

通常即时通信服务会在使用者联系人列表上的某人连上即时通信服务时发出讯息通知使用者，使用者便可据此与此人透过互联网开始进行实时的通讯。除了文字外，在频宽充足的前提下，大部分即时通信服务也提供视讯通讯的能力。实时传讯与电子邮件最大的不同在于不用等候，不需要每隔一段时间就按一次“传送与接收”，只要有网络，且两个人都同时在线，就能像多媒体电话一样，传送文字、档案、声音、影像给对方。

目前，在互联网上受欢迎的即时通信应用程序包括腾讯QQ、百度HI、飞信、易信、阿里旺旺、yy、Skype、Google Talk、icq、FastMsg等。在本发明实施例中，可以实现视频通讯的即时通讯应用程序都适用于本申请，本申请对即时通信应用程序对象的类型不作限制。

即时通信应用程序本身可以进行视频通信，那么，为了将远程协助与正常的视频通信区分开来，在本发明一种优选实施例中，所述本端移动终端设置有远程协助开关，当所述远程协助开关为开启状态时，表示所述本端移动终端可以进入远程协助模式。

在正常视频通信的情况下，当本端移动终端基于即时通信应用程序向对端移动终端发起视频通信的请求后，本端移动终端会调用摄像头，摄像头会将采集到的画面传送给对端移动终端，这样，对端移动终端就能看到本端移动终端采集的视频画面。就算对端移动终端没有摄像头，或者摄像头没有开启，对端移动终端也依然可以看到本端移动终端传送的视频画面。

但是，在本发明实施例中，本端移动终端中设置有远程协助开关，当远程协助开关处于开启状态时，则表示本端移动终端可以进行远程协助模式。当进行远程协助模式后，虽然本端移动终端也会调用摄像头进行视频图像采集，但是，会用本端移动终端的界面图像替换摄像头采集到的视频图像，这样，对端的用户就可以从对端移动终端看到本端移动终端的界面显示内容，从而达到远程协助的目的。

在本发明一种优选实施例中，所述进入远程协助模式的步骤包括：

当检测到用户触发的建立视频通信连接的操作时，获取本端移动终端中所述远程协助开关的状态；

若所述开关的状态为开启，则所述即时通信应用程序对象依据所述本端用户信息，和所述对端用户信息，生成建立视频通信连接的请求；

依据所述对端用户信息，将所述请求经由所述本端移动终端发送至所述对端移动终端；

接收所述对端移动终端返回的请求结果；

若所述请求结果为同意建立视频通信连接，则所述本端移动终端进入远程协助模式。

具体的，当检测到用户点击了即时通信应用程序中视频通信的图标时，会检测本端移动终端中远程协助开关的状态。因为如果不检测，就会按照正常视频通信的情况进行处理，也就是调用摄像头，然后将摄像头采集到的视频画面传送至对端移动终端，所以，为了实现远程协助，需要检测检测本端移动终端中远程协助开关是否开启，如果本端移动终端中远程协助开关为开启状态，则即时通信应用程序对象依据本端用户信息，和对端用户信息，生成建立视频通信连接的请求。

其中，用户信息可以包括用户的ID、移动终端使用的IP地址等信息，这样，本端移动终端就知道将生成的请求发送到哪里去，而且，对端的用户也能得知是谁发起的视频通信请求了。

对端移动终端接收到视频通信请求后，会将该请求通过即时通信应用程序显示给用户，让用户选择是否接受该请求。

当对端的用户接受了建立视频通信连接的请求后，对端移动终端会将请求结果发送至本端移动终端，本端移动终端接收到请求结果后，就可以与对端移动终端建立视频通信连接了，若视频通信连接成功，则表示本端移动终端进入了远程协助模式。

步骤202，捕捉本端移动终端的界面图像。

在正常视频通信的情况下，摄像头会将采集到视频画面传递给即时通信应用程序，即时通信应用程序会将采集到的视频画面经由本端移动终端发送给对端移动终端，但是在本发明实施例中，当移动终端进入远程协助模式时，除了摄像头采集视频画面外，还需要捕捉移动终端的界面图像。

在本发明一种优选实施例中，所述捕捉本端移动终端的界面图像的步骤包括：

获取所述视频图像的帧率；

按照所述帧率捕捉所述本端移动终端的界面图像。

具体的，帧率为一秒钟多少帧数据的含义。由于人类眼睛的特殊生理结构，如果所看画面之帧率高于24的时候，就会认为是连贯的，此现象称之为视觉暂留。这也就是为什么电影胶片是一格一格采集出来，然后快速播放的。

高的帧率可以得到更流畅、更逼真的动画。一般来说30帧率就是可以接受的，但是将性能提升至60帧率则可以明显提升交互感和逼真感，但是一般来说超过75帧率一般就不容易察觉到有明显的流畅度提升了。

在进行视频通信的过程中，摄像头采集的视频图像也是按照一定的帧率传递的，所以，在本发明实施例中，为了将摄像头采集到的视频图像全部替换成捕捉到的本端移动终端的界面图像，所以需要获取视频图像的帧率。

通过移动终端中的图形处理器就可以获取视频图像的帧率。在获取到视频图像的帧率后，就可以按照这个帧率来捕捉本端移动终端的每一帧界面图像了。例如，摄像头采集的视频图像的帧率是30，那么，在获取到视频图像的帧率后，按照30帧率来捕捉本端移动终端的界面图像，即，每秒捕捉30帧本端移动终端的界面图像。

需要说明的是，本端移动终端中具有界面图像捕捉装置。以智能手机为例，在正常使用智能手机的情况下，用户可以通过组合按键来进行界面图像捕捉。本申请正是利用这个界面图像捕捉装置来进行界面图像捕捉，当本端移动终端进入远程协助模式时，则自动启动该界面图像捕捉装置，按照帧率对本端移动终端的界面图像进行捕捉。

步骤203，将采集的视频图像替换成捕捉到的界面图像传送至所述对端移动终端。

在正常视频通信的过程中，本地移动终端会将摄像头采集到的视频图像传送至对端移动终端，但是在本发明实施例中，会用捕捉到的本端移动终端的界面图像替换摄像头采集到的视频图像。

具体的，摄像头采集到的视频图像首先会传递至应用层，然后即时通信应用程序通过调用应用层的camera接口来获取视频图像。而在本发明实施例中，当即时通信应用程序在调用camera接口来获取视频图像时，用捕捉的本端移动终端的界面图像替换摄像头采集的视频图像，这样，即时通信应用程序获取到的就是和视频图像相同帧率的捕捉到的本端移动终端的界面图像。

在本发明一种优选实施例中，将采集的视频图像替换成捕捉到的界面图像传送至所述对端移动终端的步骤包括：

对捕捉到的界面图像进行图像缩放；

对缩放后的图像进行YUV转换；

所述即时通信应用程序对象将转换后的YUV界面图像，经由所述本端移动终端发送至所述对端移动终端。

一般来说，即时通信应用程序的视频通信的窗口的分辨率，比移动终端的界面分辨率要小，所以，在捕捉到移动终端界面图像后，需要对界面图像进行缩放，缩放成视频通信的窗口的分辨率。

进一步，摄像头采集的视频图像是YUV数据格式，而捕捉到的本端移动终端的界面图像是RGB数据格式，因此，对捕捉到的界面图像进行图像缩放后，还需要对缩放后的界面图像进行YUV转换，而且，是对每一帧界面图像都进行YUV转换，例如，每秒捕捉30帧本端移动终端的界面图像，就需要先对30帧的界面图像进行缩放，然后，再对缩放后的30帧的界面图像进行YUV转换。也就是说，即时通信应用程序获取到的是YUV转换后的界面图像，然后经由所述本端移动终端发送至所述对端移动终端。

在本发明实施例中，在需要进行远程协助的本端移动终端、对端移动终端上安装支持视频聊天的即时通信应用程序，在本端移动终端与对端移动终端进行视频通信的过程中，用捕捉到的本端移动终端的界面图像，替换本端移动终端摄像头采集到的视频图像，然后将捕捉到的本端移动终端的界面图像发送至对端移动终端，这样，本端的用户打开即时通信应用程序，发起建立视频通信连接的请求，对端的用户接收请求后，就可以根据接收到的界面图像远程协助本端的用户解决问题。对用户而言，不仅操作简便，而且还不需要额外安装第三方软件。

需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。

参照图3，示出了本发明的一种基于Android系统的在即时通讯应用中第一终端显示第二终端的屏幕界面的系统，所述系统包括第一终端和第二终端；所述第二终端包括：

拦截模块301，用于对摄像头发送给HAL层的预览视频帧进行拦截；

替换模块302，用于将拦截的预览视频帧替换为抓取的屏幕界面的数据，并发送至Framework层的接口；

发送模块303，用于在即时通讯应用调用所述接口时，将所述屏幕界面的数据发送给第一终端。

在本发明一种优选实施例中，所述的拦截模块为QCamera2HWICallbacks拦截器。

在本发明一种优选实施例中，所述替换模块包括：

格式转换子模块，用于将抓取的屏幕界面的数据的格式转换为YUV格式，并发送至所述拦截器；

预览视频帧替换子模块，用于所述拦截器将拦截的预览视频帧替换为YUV格式的屏幕界面的数据。

在本发明一种优选实施例中，所述第二终端还包括：

屏幕界面抓取模块用于按照摄像头向HAL层发送预览视频帧的速率抓取屏幕界面的数据。

参照图4，示出了本发明的一种基于移动终端的远程协助装置实施例的结构框图，所述移动终端涉及本端移动终端和进行远程协助的对端移动终端。

所述的装置具体可以包括如下模块：

视频采集模块401，用于当被触发进入远程协助模式时，在所述远程协助模式下，调用所述本地移动终端的摄像头进行视频图像采集；

界面捕捉模块402，用于捕捉本端移动终端的界面图像；

图像发送模块403，用于将采集的视频图像替换成捕捉到的界面图像传送至所述对端移动终端。

在本发明一种优选实施例中，所述本端移动终端和所述对端移动终端安装有相同类型的即时通信应用程序对象；所述即时通信应用程序对象具有通讯录列表，所述通讯录列表包括本端用户信息，和对端用户信息。

在本发明一种优选实施例中，所述本端移动终端设置有远程协助开关，当所述远程协助开关为开启状态时，表示所述本端移动终端可以进入远程协助模式；

所述视频采集模块包括：

状态检测子模块，用于当检测到用户触发的建立视频通信连接的操作时，获取本端移动终端中所述远程协助开关的状态；

请求生成子模块，用于若所述开关的状态为开启时，则所述即时通信应用程序对象依据所述本端用户信息，和所述对端用户信息，生成建立视频通信连接的请求；

请求发送子模块，用于依据所述对端用户信息，将所述请求经由所述本端移动终端发送至所述对端移动终端；

接收子模块，用于接收所述对端移动终端返回的请求结果；

确认子模块，用于若所述请求结果为同意建立视频通信连接，则所述本端移动终端进入远程协助模式。

在本发明一种优选实施例中，所述界面捕捉模块包括：

帧率获取子模块，用于获取所述视频图像的帧率；

图像捕捉子模块，用于按照所述帧率捕捉所述本端移动终端的界面图像。

在本发明一种优选实施例中，图像发送模块包括：

数据缩放子模块，用于对捕捉到的界面图像进行图像缩放；

数据转换子模块，用于对缩放后的图像进行YUV转换；

数据发送子模块，用于所述即时通信应用程序对象将转换后的YUV界面图像，经由所述本端移动终端发送至所述对端移动终端。

对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

本领域内的技术人员应明白，本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。

以上对本发明所提供的第一终端显示第二终端的屏幕界面的方法和第一终端显示第二终端的屏幕界面的系统，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (8)

1.一种基于Android系统的在即时通讯应用中第一终端显示第二终端的屏幕界面的方法，其特征在于，包括：

在第二终端中，对摄像头发送给HAL层的预览视频帧进行拦截；

将拦截的预览视频帧替换为抓取的屏幕界面的数据，并发送至Framework层的接口；

即时通讯应用调用所述接口，并将所述屏幕界面的数据发送给第一终端。

2.根据权利要求1所述的方法，其特征在于，所述方法包括：采用拦截器QCamera2HWICallbacks对所述预览视频帧进行拦截。

3.根据权利要求1或2所述的方法，其特征在于，所述将拦截的预览视频帧替换为抓取的屏幕界面的数据具体包括：

将抓取的屏幕界面的数据的格式转换为YUV格式，并发送至所述拦截器；

所述拦截器将拦截的预览视频帧替换为YUV格式的屏幕界面的数据。

4.根据权利要求1-3中任一项所述的方法，其特征在于，所述方法包括：按照摄像头向HAL层发送预览视频帧的速率抓取屏幕界面的数据。

5.一种基于Android系统的在即时通讯应用中第一终端显示第二终端的屏幕界面的系统，其特征在于，包括第一终端和第二终端；所述第二终端包括：

拦截模块，用于对摄像头发送给HAL层的预览视频帧进行拦截；

替换模块，用于将拦截的预览视频帧替换为抓取的屏幕界面的数据，并发送至Framework层的接口；

发送模块，用于在即时通讯应用调用所述接口时，将所述屏幕界面的数据发送给第一终端。

6.根据权利要求5所述的系统，其特征在于，所述的拦截模块为QCamera2HWICallbacks拦截器。

7.根据权利要求5或6所述的系统，其特征在于，所述替换模块包括：

格式转换子模块，用于将抓取的屏幕界面的数据的格式转换为YUV格式，并发送至所述拦截器；

预览视频帧替换子模块，用于所述拦截器将拦截的预览视频帧替换为YUV格式的屏幕界面的数据。

8.根据权利要求5-7中任一项所述的系统，其特征在于，所述第二终端还包括：

屏幕界面抓取模块，用于按照摄像头向HAL层发送预览视频帧的速率抓取屏幕界面的数据。