CN106161619A - 一种基于移动终端的远程控制方法 - Google Patents

一种基于移动终端的远程控制方法 Download PDF

Info

Publication number
CN106161619A
CN106161619A CN201610520115.2A CN201610520115A CN106161619A CN 106161619 A CN106161619 A CN 106161619A CN 201610520115 A CN201610520115 A CN 201610520115A CN 106161619 A CN106161619 A CN 106161619A
Authority
CN
China
Prior art keywords
terminal
main control
method based
long
stream media
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610520115.2A
Other languages
English (en)
Inventor
范翠茹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Feixun Data Communication Technology Co Ltd
Original Assignee
Shanghai Feixun Data Communication Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Feixun Data Communication Technology Co Ltd filed Critical Shanghai Feixun Data Communication Technology Co Ltd
Priority to CN201610520115.2A priority Critical patent/CN106161619A/zh
Publication of CN106161619A publication Critical patent/CN106161619A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供的一种基于移动终端的远程控制方法，通过被控终端抓取当前屏幕信息形成流媒体文件，主控终端在本地同步播放所述流媒体文件进行实时界面的显示；通过记录主控终端点击事件发生的点击位置在被控终端接收点击位置后在当前屏幕上模拟点击事件进行触发实现远程控制；通过H.264视频编码、流媒体技术及RTP/RTCP协议，提高实时传输被控终端界面及主控终端点击位置的传输速度和传输质量，带给用户更优的操作体验。

Description

一种基于移动终端的远程控制方法
技术领域
本发明涉及远程控制领域，尤其涉及一种基于移动终端的远程控制方法。
背景技术
远程控制一般是指通过网络控制远端电脑或者其他硬件设备，目前，PC端可以实现桌面共享，操作者使用主控端电脑控制被控电脑时，就像坐在被控电脑的屏幕前一样，可以启动被控电脑的应用程序，对被控电脑进行控制。
通常远程控制工具都属于为特定平台或系统设计的具有专业用途的工具。但现在的远程控制已不仅仅是局限在端对端的电脑控制，远程控制技术已经被广泛的应用于多种多样的电子设备中，如远程控制技术对多种嵌入式设备进行远程操作，远程管理，远程监控等远程控制行为。
同样，当今社会生活中也产生了移动终端控制移动终端的需求。比如，年龄稍微大的老人对于智能手机的操作不太熟悉，对智能机不能灵活运用，在没有人教的情况下，其他人可以通过远程控制，对手机进行一些操作和设置，适合老人使用的需求，等等。
现有的远程控制工具一般分为客户端程序(client)和服务端程序(Server)两部分，通常客户端程序被安装在主控设备上，服务器端程序安装在被控制设备上。在使用时，由客户端主控设备向服务端被控设备发送控制命令，控制被控设备做出相应的响应，实现远程控制功能。
但当前的移动终端无论是内存、运算能力还是在传输能力上与电脑还存在较大的差距，在移动终端的远程控制上还存在一些难题。如如何将被控移动终端上的画面实时或者近乎实时地传输到主控手机上，如何保证传输时的质量等。这些都是远程控制领域亟待解决的问题。
发明内容
本发明针对当前技术中未对移动终端远程控制时缓存不足、传输能力不强等问题，提供了一种基于移动终端的远程控制方法。
本发明提供的技术方案如下：
一种基于移动终端的远程控制方法，包括：
当所述主控终端和被控终端通过所述服务器建立连接后；
所述被控终端抓取当前屏幕信息形成流媒体文件并实时传输给所述服务器；
所述主控终端在本地同步播放所述流媒体文件、并触发一点击事件；
所述主控终端记录所述点击事件发生的点击位置，并将所述点击位置通过
所述服务器发送至被控终端；
所述被控终端接收点击位置后在当前屏幕上模拟点击事件进行触发。
根据本发明的一优选实施例：所述主控终端及被控终端在所述服务器注册并获得唯一的ID，当所述主控终端发出远程控制请求时，所述主控终端向所述服务器发送被控终端的ID，所述服务器根据该ID查找对应被控终端，并在所述主控终端和被控终端之间建立连接。
根据本发明的一优选实施例：当服务器接收到主控终端或被控终端发送的断开指令，则服务器断开两者之间的连接。
根据本发明的一优选实施例：所述抓取当前屏幕的速率至少为20次/秒。
根据本发明的一优选实施例：所述被控终端的当前屏幕信息包括一设有点击链接的界面，在所述主控终端的点击事件中，点击位置对应在所述界面的所述点击链接位置处。
根据本发明的一优选实施例：所述被控终端对抓取的屏幕信息进行编码形成流媒体文件，通过流媒体技术将所述流媒体文件实时发送至服务器，所述主控终端同步下载所述流媒体文件后进行流媒体文件转换，并在该主控终端本地播放所述被控终端的屏幕信息。
根据本发明的一优选实施例：所述编码格式为H.264视频编码格式。
根据本发明的一优选实施例：所述流媒体技术使用RTP/RTCP协议。
根据本发明的一优选实施例：所述点击位置以X、Y坐标的形式记录，所述X坐标对应所述界面的X轴位置，所述Y坐标对应所述界面的Y轴位置。
根据本发明的一优选实施例：所述被控终端获得所述点击位置的X、Y坐标后，将该点击位置对应到被控终端的当前屏幕中，并触发该X、Y坐标对应的点击链接的点击事件。
本发明提供的一种基于移动终端的远程控制方法，通过被控终端抓取当前屏幕信息形成流媒体文件，主控终端在本地同步播放所述流媒体文件进行实时界面的显示；通过记录主控终端点击事件发生的点击位置在被控终端接收点击位置后在当前屏幕上模拟点击事件进行触发实现远程控制；通过H.264视频编码、流媒体技术及RTP/RTCP协议，提高实时传输被控终端界面及主控终端点击位置的传输速度和传输质量，带给用户更优的操作体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
为使图面简洁，各图中只示意性地表示出了与本发明相关的部分，它们并不代表其作为产品的实际结构。另外，以使图面简洁便于理解，在有些图中具有相同结构或功能的部件，仅示意性地绘示了其中的部分结构示意，或仅标出了其中的一个。在本文中，“一个”不仅表示“仅此一个”，也可以表示“多于一个”的情形。
图1是本发明实施例一的一种基于移动终端的远程控制方法的流程图；
图2是本发明实施例一的一种基于移动终端的远程控制方法的示意图；
附图标记：
1：被控终端、2：服务器、3：主控终端
具体实施方式
下面结合附图对本发明的优选实施例进行详细阐述，以使本发明的优点和特征能更易于被本领域技术人员理解，从而对本发明的保护范围做出更为清楚明确的界定。显而易见地，下面描述中的实施例仅仅是本发明的部分实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图，并获得其他的实施方式。
本发明的目的在于提供一种基于移动终端的远程控制方法，以解决当前技术中未对移动终端远程控制时缓存不足、传输能力不强等问题。以下将详细阐述本发明的一种基于移动终端的远程控制方法的原理及实施方式，使本领域技术人员不需要创造性劳动即可理解本发明的一种基于移动终端的远程控制方法。
实施例一
请参考图1，图1为一种基于移动终端的远程控制方法，包括：
S1：所述主控终端和被控终端通过所述服务器建立连接；
S2：所述被控终端抓取当前屏幕信息形成流媒体文件并实时传输给所述服务器；
S3：所述主控终端在本地同步播放所述流媒体文件、并触发一点击事件；
S4：所述主控终端记录所述点击事件发生的点击位置，并将所述点击位置通过所述服务器发送至被控终端；
S5：所述被控终端接收点击位置后在当前屏幕上模拟点击事件进行触发。
优选的，本实施例中主控终端及被控终端在服务器注册并获得唯一的ID，当主控终端发出远程控制请求时，主控终端向服务器发送被控终端的ID，服务器根据该ID查找对应被控终端，并在主控终端和被控终端之间建立连接。
优选的，本实施例中当服务器接收到主控终端或被控终端发送的断开指令，则服务器断开两者之间的连接。如图1中的步骤S6：服务器是否接受到断开指令，只要服务器接收到断开指令，即终止主控终端与被控终端之间的连接。
实施例二
在本实施例中，抓取当前屏幕的速率至少为20次/秒。
优选的，本实施例中被控终端对抓取的屏幕信息进行编码形成流媒体文件，通过流媒体技术将所述流媒体文件实时发送至服务器，主控终端同步下载所述流媒体文件后进行流媒体文件转换，并在该主控终端本地播放所述被控终端的屏幕信息。
优选的，本实施例中的编码格式为H.264视频编码格式。
H.264编码格式可以提供高质量的、连续的、流畅的图像，容错能力强，还可以在不同的网络上传输。和MPEG2和MPEG4ASP等压缩技术相比，在同等图像质量下，采用H.264技术压缩后的数据量只有MPEG2的1/8，MPEG4的1/3。显然，H.264压缩技术的采用将大大节省用户的下载时间和数据流量收费。同时，H.264视频编码格式供了解决在不稳定网络环境下容易发生的丢包等错误的必要工具，还提供了网络适应层(Network Adaptation Layer),使得H.264的文件能容易地在不同网络上传输(例如互联网，CDMA，GPRS，WCDMA，CDMA2000等)。
优选的，本实施例中，流媒体技术使用RTP/RTCP协议。
其中，实时传输协议RTP协议用以实时将流媒体文件发送至服务器，实时传输控制协议RTCP协议用以保证传输数据的顺序信及质量。RTCP协议用反馈信息的方法来提供分配数据的传输质量，进行传输流媒体文件时的拥塞控制，还可以见识网络和用来诊断网络中的问题，从而提供一个高质量的传输机制。此外，在移动终端的远程控制时，实时传输的不仅是被控终端的当前屏幕，还包括被控终端当前所播放的音频。RTCP协议为RTP源提供一个永久性的CNAME(规范性名字)的传送层标志，在一组相关的流媒体文件传输中，主控终端可以依据CNAME(规范性名字)匹配到同一时间戳下的流媒体文件，即被控终端当前屏幕与当前所播放的音频。
结合图2，被控终端1接受连接请求后，抓取被控终端1当前屏幕的显示画面，抓取速率至少为20此/秒，可形成一至少20fps(frames per second)以上的屏幕视频，并实时地采用H.264视频编码技术将所述屏幕视频压缩得到流媒体文件。被控终端1将所述流媒体文件通过流媒体技术传输至服务器2，主控终端3实时地从服务器2下载该流媒体文件，在主控终端3本地镜像码流转换并播放，即可在主控终端3之上得到被控终端1的当前屏幕。
实施例三
在本实施例中，所述被控终端的当前屏幕信息包括一设有点击链接的界面，在所述主控终端的点击事件中，点击位置对应在所述界面的所述点击链接位置处。
优选的，所述点击位置以X、Y坐标的形式记录，所述X坐标对应所述界面的X轴位置，所述Y坐标对应所述界面的Y轴位置。
优选的，所述被控终端获得所述点击位置的X、Y坐标后，将该点击位置对应到被控终端的当前屏幕中，并触发该X、Y坐标对应的点击链接的点击事件。
综上所述，本发明提供的一种基于移动终端的远程控制方法，通过被控终端抓取当前屏幕信息形成流媒体文件，主控终端在本地同步播放所述流媒体文件进行实时界面的显示；通过记录主控终端点击事件发生的点击位置在被控终端接收点击位置后在当前屏幕上模拟点击事件进行触发实现远程控制；通过H.264视频编码、流媒体技术及RTP/RTCP协议，提高实时传输被控终端界面及主控终端点击位置的传输速度和传输质量，带给用户更优的操作体验。
以上，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何不经过创造性劳动想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应该以权利要求书所限定的保护范围为准。

Claims (10)

1.一种基于移动终端的远程控制方法，涉及一主控终端、被控终端和一服务器，其特征在于：
所述主控终端和被控终端通过所述服务器建立连接；
所述被控终端抓取当前屏幕信息形成流媒体文件并实时传输给所述服务器；
所述主控终端在本地同步播放所述流媒体文件、并触发一点击事件；
所述主控终端记录所述点击事件发生的点击位置，并将所述点击位置通过所述服务器发送至被控终端；
所述被控终端接收点击位置后在当前屏幕上模拟点击事件进行触发。
2.如权利要求1所述的基于移动终端的远程控制方法，其特征在于：所述主控终端及被控终端在所述服务器注册并获得唯一的ID，当所述主控终端发出远程控制请求时，所述主控终端向所述服务器发送被控终端的ID，所述服务器根据该ID查找对应被控终端，并在所述主控终端和被控终端之间建立连接。
3.如权利要求1所述的基于移动终端的远程控制方法，其特征在于：当所述服务器接收到主控终端或被控终端发送的断开指令，则所述服务器断开两者之间的连接。
4.如权利要求1所述的基于移动终端的远程控制方法，其特征在于：所述抓取当前屏幕的速率至少为20次/秒。
5.如权利要求1所述的基于移动终端的远程控制方法，其特征在于：所述被控终端的当前屏幕信息包括一设有点击链接的界面，在所述主控终端的点击事件中，点击位置对应在所述界面的所述点击链接位置处。
6.如权利要求4所述的基于移动终端的远程控制方法，其特征在于：所述被控终端对抓取的屏幕信息进行编码形成流媒体文件，通过流媒体技术将所述流媒体文件实时发送至服务器，所述主控终端同步下载所述流媒体文件后进行流媒体文件转换，并在该主控终端本地播放所述被控终端的屏幕信息。
7.如权利要求6所述的基于移动终端的远程控制方法，其特征在于：所述编码格式为H.264视频编码格式。
8.如权利要求6所述的基于移动终端的远程控制方法，其特征在于：所述流媒体技术使用RTP/RTCP协议。
9.如权利要求5所述的基于移动终端的远程控制方法，其特征在于：所述点击位置以X、Y坐标的形式记录，所述X坐标对应所述界面的X轴位置，所述Y坐标对应所述界面的Y轴位置。
10.如权利要求9所述的基于移动终端的远程控制方法，其特征在于：所述被控终端获得所述点击位置的X、Y坐标后，将该点击位置对应到被控终端的当前屏幕中，并触发该X、Y坐标对应的点击链接的点击事件。
CN201610520115.2A 2016-07-05 2016-07-05 一种基于移动终端的远程控制方法 Pending CN106161619A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610520115.2A CN106161619A (zh) 2016-07-05 2016-07-05 一种基于移动终端的远程控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610520115.2A CN106161619A (zh) 2016-07-05 2016-07-05 一种基于移动终端的远程控制方法

Publications (1)

Publication Number Publication Date
CN106161619A true CN106161619A (zh) 2016-11-23

Family

ID=58061722

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610520115.2A Pending CN106161619A (zh) 2016-07-05 2016-07-05 一种基于移动终端的远程控制方法

Country Status (1)

Country Link
CN (1) CN106161619A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106603699A (zh) * 2016-12-28 2017-04-26 珠海金山网络游戏科技有限公司 一种实时远程控制移动终端的方法和系统
CN107071035A (zh) * 2017-04-20 2017-08-18 北京奇虎科技有限公司 移动终端远程控制方法、装置及相应的移动终端
CN107509051A (zh) * 2017-08-14 2017-12-22 宇龙计算机通信科技(深圳)有限公司 远程控制方法、装置、终端及计算机可读存储介质
CN107817962A (zh) * 2017-10-26 2018-03-20 百度在线网络技术（北京）有限公司 一种远程控制方法、装置、控制服务器及存储介质
CN108345469A (zh) * 2017-01-22 2018-07-31 北京新唐思创教育科技有限公司 一种用于在线教学通用课件的互动方法及其装置
CN108616764A (zh) * 2016-12-09 2018-10-02 中兴通讯股份有限公司 一种控制方法及设备
CN110967584A (zh) * 2019-12-18 2020-04-07 国网山东省电力公司五莲县供电公司 一种现场电能损耗测试方法及装置
CN111885015A (zh) * 2020-07-06 2020-11-03 惠州市源医科技有限公司 一种基于rtp远程控制设备的方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103414890A (zh) * 2013-07-08 2013-11-27 宇龙计算机通信科技(深圳)有限公司 远程桌面的实现方法及装置
CN104184805A (zh) * 2014-08-13 2014-12-03 Tcl通讯（宁波）有限公司 一种移动终端远程实时控制方法及系统
CN104506907A (zh) * 2014-11-25 2015-04-08 上海众应信息科技有限公司 控制端与多个远程被控终端之间的交互操作方法及系统
CN105407131A (zh) * 2015-10-12 2016-03-16 惠州Tcl移动通信有限公司 移动设备间远程控制方法以及移动设备
CN105491229A (zh) * 2015-11-26 2016-04-13 小米科技有限责任公司 远程控制移动终端的方法和装置
CN105681584A (zh) * 2016-03-21 2016-06-15 珠海格力电器股份有限公司 移动终端的远程控制方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103414890A (zh) * 2013-07-08 2013-11-27 宇龙计算机通信科技(深圳)有限公司 远程桌面的实现方法及装置
CN104184805A (zh) * 2014-08-13 2014-12-03 Tcl通讯（宁波）有限公司 一种移动终端远程实时控制方法及系统
CN104506907A (zh) * 2014-11-25 2015-04-08 上海众应信息科技有限公司 控制端与多个远程被控终端之间的交互操作方法及系统
CN105407131A (zh) * 2015-10-12 2016-03-16 惠州Tcl移动通信有限公司 移动设备间远程控制方法以及移动设备
CN105491229A (zh) * 2015-11-26 2016-04-13 小米科技有限责任公司 远程控制移动终端的方法和装置
CN105681584A (zh) * 2016-03-21 2016-06-15 珠海格力电器股份有限公司 移动终端的远程控制方法及装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108616764A (zh) * 2016-12-09 2018-10-02 中兴通讯股份有限公司 一种控制方法及设备
CN106603699A (zh) * 2016-12-28 2017-04-26 珠海金山网络游戏科技有限公司 一种实时远程控制移动终端的方法和系统
CN108345469A (zh) * 2017-01-22 2018-07-31 北京新唐思创教育科技有限公司 一种用于在线教学通用课件的互动方法及其装置
CN107071035A (zh) * 2017-04-20 2017-08-18 北京奇虎科技有限公司 移动终端远程控制方法、装置及相应的移动终端
CN107071035B (zh) * 2017-04-20 2021-03-19 北京奇虎科技有限公司 移动终端远程控制方法、装置及相应的移动终端
CN107509051A (zh) * 2017-08-14 2017-12-22 宇龙计算机通信科技(深圳)有限公司 远程控制方法、装置、终端及计算机可读存储介质
CN107817962A (zh) * 2017-10-26 2018-03-20 百度在线网络技术（北京）有限公司 一种远程控制方法、装置、控制服务器及存储介质
CN110967584A (zh) * 2019-12-18 2020-04-07 国网山东省电力公司五莲县供电公司 一种现场电能损耗测试方法及装置
CN111885015A (zh) * 2020-07-06 2020-11-03 惠州市源医科技有限公司 一种基于rtp远程控制设备的方法

Similar Documents

Publication Publication Date Title
CN106161619A (zh) 一种基于移动终端的远程控制方法
CN100380929C (zh) 图像发布系统及其控制方法
WO2008019193A3 (en) Method and apparatus for monitoring and synchronizing user interface events with network data
AU2003258912B2 (en) Audio visual media encoding system
JP5402389B2 (ja) 電子会議システム、配信管理サーバ、データ制御方法、プログラム、及び記録媒体
US20080313278A1 (en) Method and apparatus for sharing videos
CN101827251B (zh) 一种播放网络流媒体的方法、装置
JP2003517229A5 (zh)
WO2008111448A1 (ja) サーバ機能切替え装置、方法及びプログラム、並びにシンクライアントシステム及びサーバ装置
JP2009500933A (ja) 監視装置
AU2003258912A2 (en) Audio visual media encoding system
JP2007535226A (ja) テレビ会議システムでサイト情報を表示するための方法
WO2012151957A1 (zh) 服务器、客户端及利用其远程播放视频文件的方法和系统
WO2017016568A1 (de) Verfahren und telekommunikationsnetz zum streamen und zur wiedergabe von anwendungen
CN102571735A (zh) 一种多终端进行应用处理的方法、装置及系统
CN109803151A (zh) 多媒体数据流切换方法、装置、存储介质及电子装置
CN107659649A (zh) 一种基于云手机的应用托管方法
CN107027064A (zh) 无线传屏中视频文件的处理方法及装置
CN103404158A (zh) 用于恢复暂停的媒体的方法和设备
CN103095532A (zh) 网络游戏反外挂系统、方法及反外挂服务端
CN100486169C (zh) 一种集成报警功能的家用网络设备及通过其报警的方法
JP2010258894A (ja) 映像受信装置、映像受信方法及びプログラム
JP4773202B2 (ja) 電子会議システム及びドキュメント共有方法
KR20050100778A (ko) 현장중계시스템 및 그 이용방법
CN107509089B (zh) 一种移动终端分享视频片段的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20161123

RJ01 Rejection of invention patent application after publication