CN110557458A - 远程控制娱乐终端的方法、装置及5g自助银行娱乐系统 - Google Patents
远程控制娱乐终端的方法、装置及5g自助银行娱乐系统 Download PDFInfo
- Publication number
- CN110557458A CN110557458A CN201910882996.6A CN201910882996A CN110557458A CN 110557458 A CN110557458 A CN 110557458A CN 201910882996 A CN201910882996 A CN 201910882996A CN 110557458 A CN110557458 A CN 110557458A
- Authority
- CN
- China
- Prior art keywords
- terminal
- entertainment
- remote control
- audio
- operation instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
- H04L43/0811—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking connectivity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0876—Network utilisation, e.g. volume of load or congestion level
- H04L43/0894—Packet rate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/10—Active monitoring, e.g. heartbeat, ping or trace-route
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1069—Session establishment or de-establishment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
- H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
- H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/141—Setup of application sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
- H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
- H04L69/162—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields involving adaptations of sockets based mechanisms
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Environmental & Geological Engineering (AREA)
- Cardiology (AREA)
- Computing Systems (AREA)
- Medical Informatics (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Computer Security & Cryptography (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明公开了一种远程控制娱乐终端的方法、装置及5G自助银行娱乐系统,该系统包括远程控制终端、信令服务器和娱乐终端。信令服务器发送或返回远程控制终端与娱乐终端间的操作指令信息或操作指令响应信息,以及用于远程控制终端与娱乐终端的信息交互;远程控制终端上设置有浏览器,娱乐终端上设置有控制模块,利用浏览器和控制模块直接进行编码或解码,去除服务器的中间处理过程,音视频传输时间减短,有利于降低音视频传输的延迟性;远程控制终端与娱乐终端之间通过信令服务器基于WebRTC协议建立了音视频传输通道,娱乐终端的音视频数据通过音视频传输通道传输给远程控制终端上的浏览器,可进一步缩短音视频传输时间,降低音视频传输的延迟性。
Description
技术领域
本发明涉及通信技术领域,特别涉及一种远程控制娱乐终端的方法、装置及5G自助银行娱乐系统。
背景技术
现有技术中用手机、iPad等远程控制终端远程操控娱乐终端存在以下缺点:一是用户需要在远程控制终端上下载对应的远程控制终端APP,导致用户首次玩的意愿降低;二是现有的娱乐终端的直播音视频传输还需要通过服务器进行解码或编码之后才能传输到远程控制终端并显示,服务器的解码或编码过程增加了音视频传输到远程控制终端的时间,导致远程控制终端显示的音视频相对于娱乐终端动作会产生较大的延迟,从而使得游戏体验性非常差。
发明内容
本发明所要解决的技术问题是远程控制终端远程操控娱乐终端动作的过程中,用户需要在远程控制终端上下载对应的远程控制终端APP,以及远程控制终端显示的音视频相对于娱乐终端的动作会产生较大的延迟的问题。
为解决上述技术问题,本发明所采用的技术方案是提供了一种远程控制娱乐终端的方法,包括:
经由信令服务器发送远程控制终端与娱乐终端之间的操作指令信息,并经由信令服务器返回远程控制终端与娱乐终端之间的操作指令响应信息,以及用于所述远程控制终端与所述娱乐终端的信息交互;在所述远程控制终端与所述娱乐终端间建立基于WebRTC协议的音视频传输通道;
利用所述音视频传输通道传输音视频数据;发送或接收所述音视频数据并通过所述远程控制终端的浏览器和所述娱乐终端上的控制模块进行编码或解码。
在上述远程控制娱乐终端的方法中,所述远程控制终端与所述信令服务器之间采用WebSocket协议传输操作指令信息或操作指令响应信息;所述信令服务器与所述娱乐终端之间采用MQTT协议传输操作指令信息或操作指令响应信息。
在上述远程控制娱乐终端的方法中,所述经由信令服务器发送远程控制终端与娱乐终端之间的操作指令信息,并经由信令服务器返回远程控制终端与娱乐终端之间的操作指令响应信息,包括:
所述远程控制终端将所述操作指令信息发送给所述信令服务器;
所述信令服务器将所述操作指令信息转发至所述娱乐终端;
所述娱乐终端接收并解析所述操作指令信息,并返回所述操作指令响应信息;
所述信令服务器接收所述操作指令响应信息,并转发至所述远程控制终端。
在上述远程控制娱乐终端的方法中,所述WebRTC协议只建立从所述娱乐终端至所述远程控制终端的单边音视频传输通道。
在上述远程控制娱乐终端的方法中,还包括:所述娱乐终端监控网络连接,所述娱乐终端定时通过Ping命令检查所述远程控制终端、信令服务器、娱乐终端的网络连接状态以及网络速度,并显示返回信息。
在上述远程控制娱乐终端的方法中,所述娱乐终端设有Android系统总控;运行所述娱乐终端,通过所述Android系统总控定时获取源自所述远程控制终端的所述娱乐终端的重启操作指令,实现所述娱乐终端定时重启。
本发明还提供了一种远程控制娱乐终端的装置,包括:
信息交互模块,用于通过信令服务器发送或返回远程控制终端与娱乐终端间的操作指令信息或操作指令响应信息;以及用于所述远程控制终端与所述娱乐终端的信息交互,在所述远程控制终端与所述娱乐终端间建立基于WebRTC协议的音视频传输通道;
音视频传输模块,利用所述音视频传输通道传输音视频数据;发送或接收所述音视频数据并通过所述远程控制终端的浏览器和所述娱乐终端上的控制模块进行编码或解码。
在上述远程控制娱乐终端的装置中,还包括网络监控模块,所述网络监控模块定时检查所述远程控制终端、信令服务器、娱乐终端的网络连接状态以及网络速度,并显示返回信息。
在上述远程控制娱乐终端的装置中,所述娱乐终端设有Android系统总控;所述Android系统定时从所述远程控制终端获取所述娱乐终端的重启操作指令。
本发明还提供了一种5G自助银行娱乐系统,包括远程控制终端、信令服务器、娱乐终端以及上述的一种远程控制娱乐终端的装置。
与现有技术相比,本发明通过两个独立的传输通道分别来传输远程控制终端和娱乐终端之间的操作指令信息或操作指令响应信息,以及传输音视频数据,可避免发生通道拥挤现象,有利于加快指令和音视频数据的传输速度。用户直接通过远程控制终端上的浏览器下发操作指令信息,不需要在远程控制终端下载相应的APP,有利提高用户的体验性。远程控制终端与娱乐终端之间通过信令服务器基于WebRTC协议建立了音视频传输通道,通过音视频传输通道传输音视频数据,并利用浏览器和控制模块直接进行点对点编码或解码,不需再经过服务器对音视频数据进行中间处理,音视频传输时间减短,实时性高,有利于降低音视频传输的延迟性。
附图说明
图1是本发明的实施例一中远程控制娱乐终端的方法的结构框图;
图2是本发明的实施例三中5G自助银行娱乐系统的结构框图;
图3是本发明的另一个实施例中5G自助银行娱乐系统的结构框图;
图4是本发明的实施例三中5G自助银行娱乐系统的操作指令信息传输及操作指令响应信息的传输流向图;
图5是本发明的实施例三中5G自助银行娱乐系统的音视频数据的传输流向图;
图6是本发明的实施例三中5G自助银行娱乐系统的操作指令下发的流程图;
图7是本发明的实施例三中5G自助银行娱乐系统的音视频数据传输的流程图。
具体实施方式
本发明提供了一种远程控制娱乐终端的方法、装置及5G自助银行娱乐系统,以解决现有技术中远程控制终端1远程操控娱乐终端3动作的过程中,用户需要在远程控制终端1上下载对应的远程控制终端APP,以及远程控制终端1显示的音视频相对于娱乐终端3的动作会产生较大的延迟的问题。
以下结合说明书附图和具体实施例对本发明进行详细说明。
本发明的实施例一提供了一种远程控制娱乐终端的方法,在实施该方法之前,娱乐终端需向信令服务器注册,信令服务器内存储娱乐终端的识别资料信息;然后远程控制终端向信令服务器发送申请指令,请求连接对应的娱乐终端,信令服务器根据申请指令,确认是否存在相应的娱乐终端,娱乐终端是否处于忙碌状态,若存在且处于空闲状态,则将相应的娱乐终端的信息反馈给远程控制终端。
一种远程控制娱乐终端的方法,如图1所示,包括:
经由信令服务器发送远程控制终端与娱乐终端之间的操作指令信息,并经由信令服务器返回远程控制终端与娱乐终端之间的操作指令响应信息,以及用于远程控制终端与娱乐终端的信息交互。在本实施例中,远程控制终端与娱乐终端的信息交互指的是除了操作指令信息和操作指令响应信息之外,其它的指令信息传递。利用信令服务器在远程控制终端与娱乐终端间建立基于WebRTC协议的音视频传输通道。
利用音视频传输通道传输音视频数据;发送或接收音视频数据并通过远程控制终端的浏览器和娱乐终端上的控制模块进行编码或解码。
一种远程控制娱乐终端的方法,还包括:远程控制终端与信令服务器之间采用WebSocket协议传输操作指令信息或操作指令响应信息;信令服务器与娱乐终端之间采用MQTT协议传输操作指令信息或操作指令响应信息。
经由信令服务器发送远程控制终端与娱乐终端之间的操作指令信息,并经由信令服务器返回远程控制终端与娱乐终端之间的操作指令响应信息,包括:远程控制终端将操作指令信息发送给信令服务器;信令服务器将操作指令信息转发至娱乐终端;娱乐终端接收并解析操作指令信息,并返回操作指令响应信息;信令服务器接收操作指令响应信息,并转发至远程控制终端。
一种远程控制娱乐终端的方法,还包括:WebRTC协议只建立从娱乐终端至远程控制终端的单边音视频传输通道。
一种远程控制娱乐终端的方法,还包括:娱乐终端监控网络连接,娱乐终端定时通过Ping命令检查远程控制终端、信令服务器、娱乐终端的网络连接状态以及网络速度,并显示返回信息。
一种远程控制娱乐终端的方法,还包括:娱乐终端设有Android系统总控;运行娱乐终端,通过Android系统总控定时获取源自远程控制终端的娱乐终端的重启操作指令,实现娱乐终端定时重启。
本发明的实施例二提供的一种远程控制娱乐终端的装置,包括:
信息交互模块,用于通过信令服务器2发送或返回远程控制终端1与娱乐终端3间的操作指令信息或操作指令响应信息,以及用于远程控制终端1与娱乐终端3的信息交互;在远程控制终端1与娱乐终端3间建立基于WebRTC协议的音视频传输通道。
音视频传输模块,利用音视频传输通道传输音视频数据;发送或接收音视频数据并通过远程控制终端1的浏览器和娱乐终端3上的控制模块32进行编码或解码。
其中,在本实施例中,信息交互模块包括第一信息交互模块123、第二信息交互模块23和第三信息交互模块321。第一信息交互模块123设置在远程控制终端1上,第二信息交互模块23设置在信令服务器2上,第三信息交互模块321设置在娱乐终端3上。通过各部分的信息交互模块之间的通讯,进行远程控制终端1与信令服务器2之间、信令服务器2与娱乐终端3之间的操作指令信息的发送,以及操作指令响应信息的返回;进行远程控制终端1与娱乐终端3的信息交互;并在远程控制终端1与娱乐终端3间建立基于WebRTC协议的音视频传输通道。在本实施例中,音视频传输模块包括第一音视频传输模块124和第二音视频传输模块322,第一音视频传输模块124设置在远程控制终端1上,第二音视频传输模块322设置在娱乐终端3上。其中第三信息交互模块321和第二音视频传输模块322集成在娱乐终端3上的控制模块32中,在本实施例中,控制模块32是一个应用APP。
该远程控制娱乐终端的装置还包括网络监控模块34,网络监控模块34定时检查远程控制终端1、信令服务器2、娱乐终端3的网络连接状态以及网络速度,并显示返回信息。
在该远程控制娱乐终端的装置,娱乐终端3的总控是Android系统,Android系统定时从远程控制终端1获取娱乐终端3的重启操作指令,定时重启娱乐终端3。娱乐终端3一旦长时间运行,整个远程控制娱乐终端3的装置会不稳定,将导致远程控制终端1与娱乐终端3之间的连接中断。
本发明的实施例三提供了一种5G自助银行娱乐系统,包括远程控制终端1、信令服务器2、娱乐终端3、5G网络通讯模块以及实施例二中的一种远程控制娱乐终端的装置。
5G网络通讯模块将远程控制终端1、信令服务器2、娱乐终端3及远程控制娱乐终端的装置接入5G网络中,5G网络数据传输速率高,比当前的有线互联网要快,且具有较低的网络延迟,即具有更快的响应时间,其延迟时间低于1毫秒,更有助于在远程控制中降低音视频数据传输的延迟性。
其中,远程控制终端1,用于接收外部操作指令信息并发送给信令服务器2;接收并显示娱乐终端3发送的音视频数据和操作指令响应信息。
信令服务器2,与远程控制终端1基于WebSocket协议进行通讯,用于接收远程控制终端1发送的操作指令信息,并发送给娱乐终端3;同时基于WebRTC协议建立远程控制终端1与娱乐终端3之间单边的音视频传输通道。
娱乐终端3,与信令服务器2建立WebSocket通讯连接,但基于MQTT协议接收信令服务器2发送的操作指令信息,并根据操作指令信息动作,反馈操作指令响应信息;同时采集音视频数据并通过音视频传输通道直接发送给远程控制终端1。
在本实施例中,如图2所示,一个信令服务器2只对应一个远程控制终端1和一台娱乐终端3。在本发明的另一个实施例中,如图3所示,一个信令服务器2可对应多个远程控制终端1和多台娱乐终端3,可同时满足多个用户的需求,并给用户提供多种选择,当一台娱乐终端3被占用时,用户可选择处于空闲状态的娱乐终端3。
在本实施例中,如图4和图5所示,以一个信令服务器2只对应一个远程控制终端1和一台娱乐终端3的架构为例,远程控制终端1上设置有第一网络端口11,信令服务器2上设置有第二网络端口21和第三网络端口22,娱乐终端3上设置有第四网络端口31,远程控制终端1、信令服务器2和娱乐终端3采用网线接入互联网中,也即是远程控制终端1与信令服务器2之间、信令服务器2与娱乐终端3之间采用网线铺设建立通讯连接。利用网线铺设的物理连接方式,连接牢固,可解决移动网络不稳定的问题,避免因为移动网络波动或断续,造成远程控制终端1与信令服务器2之间、信令服务器2与娱乐终端3之间的通讯中断,继而造成远程控制终端1与信令服务器2之间、信令服务器2与娱乐终端3之间传送操作指令信息延迟,音视频传输延迟。在其它实施例中,信令服务器2可根据需要连接的远程控制终端1和娱乐终端3的数量设置多个第二网络端口21和多个第三网络端口22。
在本实施例中,远程控制终端1固定设置在银行内,采用触屏式的一体机,解决了用户操作中端不统一、性能不同的问题,用户在银行排队等待办理业务期间,可通过一体机观察娱乐终端3的状况,同时通过一体机发送操作指令信息控制娱乐终端3,从而无需到现场就能够使用娱乐终端3,打发时间。一体机具有超清、超大的液晶显示屏,并由配套的模具支撑,液晶显示屏嵌入模具内,可以提升整体的美观视觉效果。且一体机屏幕尺寸大、分辨率高,解决了手机、iPad等远程控制终端屏幕小、操作和视觉受限等问题,给用户带来更好的操作和视觉体验。一体机体积大,其内存容量优于手机、iPad等远程控制终端,不易发热,在一定程度上可避免因远程控制终端1发热,导致操作卡顿及音视频卡顿的现象。且一体机具有固定的电源网线连接,避免了移动网络波动的问题。
在本实施例中,如图4所示,一体机采用Windows系统,其内置浏览器12内核,例如谷歌浏览器,浏览器12内设第一信息交互模块123和第一音视频传输模块124,信令服务器2内设第二信息交互模块23,浏览器12与信令服务器2通过第一信息交互模块123和第二信息交互模块23建立WebSocket通讯,浏览器12支持WebSocket,与信令服务器2之间实时进行消息推送,向信令服务器2发送操作指令信息。WebSocket连接能够实现双向传输,占用信令服务器2的资源少,信令服务器2处理速度快,有利于减少远程控制终端1向信令服务器2发送操作指令信息的时间,继而降低游戏系统的操作延迟性。
在本实施例中,如图4所示,浏览器12内设置有用于显示娱乐终端3操作指令响应信息的第一窗口121、用于显示音视频的第二窗口122。
在本实施例中,如图4所示,娱乐终端3的控制中心是Android系统(安卓系统),Android系统内设置有网络监控模块34,用于定时检查远程控制终端1、信令服务器2、娱乐终端3的网络连接状态以及网络速度,并显示返回信息。当监测到网络出现问题,网络波动或者网络不通的情况下,Android系统通过定时Ping信令服务器2,自动修复网络。Ping也属于一个通信协议,是TCP/IP协议的一部分。利用“Ping”命令可以检查网络是否连通,可以很好地分析和判定网络故障,并提醒信令服务器2修复网络。
在本实施例中,如图4所示,娱乐终端3的控制中心是Android系统,可设置系统的定时开关机时间,保证系统的稳定性。Android系统内置控制模块32,控制模块32内设第三信息交互模块321和第二音视频传输模块322,信令服务器2与娱乐终端3之间通过第二信息交互模块23和第三信息交互模块321首先建立WebSocket通讯连接。Android系统接收信令服务器2的操作指令信息,并下发给娱乐终端3动作,然后把操作指令响应信息反馈信令服务器2,信令服务器2再将操作指令响应信息发送给远程控制终端1。
在本实施例中,如图4所示,Android系统内设置有音视频采集模块33,用于采集娱乐终端3的音视频数据。
在本实施例中,如图4所示,远程控制终端1与信令服务器2之间操作指令信息或操作指令响应信息的传输通过WebSocket协议实现,信令服务器2与娱乐终端3之间操作指令信息或操作指令响应信息的传输通过MQTT协议实现。也即是信令服务器2与Windows系统之间采用WebSocket协议进行操作指令信息或操作指令响应信息的传输,信令服务器2与Android系统之间采用MQTT协议进行操作指令信息或操作指令响应信息的传输。进一步是信令服务器2的第二信息交互模块23与浏览器12的第一信息交互模块123基于WebSocket协议进行操作指令信息或操作指令响应信息的传输,信令服务器2的第二信息交互模块23与控制模块32的第三信息交互模块321基于MQTT协议进行操作指令信息或操作指令响应信息的传输。基于MQTT协议的推送机制效率高,功耗低,在一定程度上可以减少信令服务器2向娱乐终端3发送操作指令信息的时间,有利于降低娱乐终端3的动作的延迟性,且娱乐终端3向信令服务器2传送娱乐终端3的操作指令响应信息的速度也会加快。
整个游戏系统的操作过程是:用户点击一体机上的浏览器12,进入娱乐终端3操作界面,点击相应的操作按钮,向信令服务器2发送操作指令信息,信令服务器2再将操作指令信息传输到对应的娱乐终端3上的控制模块32,控制模块32根据操作指令信息控制娱乐终端3做相应的动作,动作结束后,操作指令响应信息经信令服务器2反馈给一体机,并显示在浏览器12的第一窗口121上。
综上所述,本实施例三提供的一种5G自助银行娱乐系统采用浏览器12/信令服务器2/控制模块32的架构模式,浏览器12与信令服务器2之间基于WebSocket协议通讯,并基于WebSocket协议进行操作指令信息或操作指令响应信息的传输,信令服务器2与控制模块32之间首先基于WebSocket协议建立通讯连接,再基于MQTT协议进行操作指令信息或操作指令响应信息的传输,WebSocket协议和MQTT协议能够实现双向传输,占用信令服务器2的资源少,信令服务器2处理速度快,有利于减少远程控制终端1向娱乐终端3发送操作指令信息的时间,以及减少娱乐终端3向远程控制终端1发送操作指令响应信息的时间,娱乐终端3响应速度快,延迟时间最低可到100毫秒,实现了远程控制终端1实时操作实时响应,大大提升了娱乐终端3的娱乐感。
本实施例三提供的一种5G自助银行娱乐系统还涉及到超低延迟的音视频直播功能,现有的音视频直播技术,音视频传输协议主流为RTMP、RTSP、HLS等,浏览器并不能很好的支持,都需要信令服务器2对音视频进行编码、解码以及分发。由于音视频传输协议的限制,及信令服务器2的中间处理,造成音视频传输通常延迟在1S-5S,用户在远程控制终端1看到的音视频相对滞后,体验性差。
为解决该技术问题,在本发明的一个实施例中,如图5所示,远程控制终端1与娱乐终端3之间的音视频基于WebRTC(网页实时通信)进行传输,WebRTC支持网页浏览器进行实时语音对话或音视频对话,具有多种功能,且支持双边音视频传输。该游戏系统通过远程控制终端1一体机的浏览器12和娱乐终端3的控制模块32实现点对点直接解码和编码音视频数据,并建立P2P音视频数据传输通道来实现远程控制终端1与娱乐终端3之间音视频数据直接传输。具体的是,浏览器12内设第一音视频传输模块124,控制模块32内设第二音视频传输模块322,通过第一音视频传输模块124和第二音视频传输模块322实现点对点直接解码和编码音视频数据,并建立P2P音视频数据传输通道。
与现有技术相比,本实施例中,不需要通过信令服务器2对音视频进行编码、解码以及分发等操作,不需再经过信令服务器2的中间处理过程,音视频数据传输时间减短,有利于降低音视频数据传输的延迟性。
在本实施例中,如图5所示,进一步优化WebRTC,去除WebRTC的其它功能,并将双边音视频数据传输改为单边,娱乐终端3与远程控制终端1之间只进行单边音视频传送,即只需娱乐终端3向远程控制终端1传送音视频,并显示在远程控制终端1的浏览器12的第二窗口122上。如此设置,可减少流量占用,降低内存资源占用,降低远程控制终端1、娱乐终端3的硬件要求。且基于该协议音视频传输是通过远程控制终端1一体机的浏览器12和娱乐终端3的控制模块32直接解码播放和编码的,因此不需要在远程控制终端1、娱乐终端3上安装任何关于编解码软硬件,有利于减少系统内存资源的占用,加快系统的运行速度。可进一步缩短音视频传输时间,降低音视频传输的延迟性。
在本发明的实施例中,远程控制终端1与娱乐终端3进行音视频传输前,需通过信令服务器2进行信令沟通,连通远程控制终端1的浏览器12和娱乐终端3的控制模块32,建立浏览器12和控制模块32之间的P2P音视频传输通道,音视频传输通道建立后,浏览器12和控制模块32就可以直接进行音视频传输,不需要信令服务器2对音视频进行中间处理,达到超低延迟的目的,提升更快的视觉反馈。
根据实施例一中的一种远程控制娱乐终端的方法,该5G自助银行娱乐系统的操作指令的下发过程如图6所示,包括以下步骤:
S210、用户在远程控制终端进入娱乐终端的操作界面,基于WebSocket协议与信令服务器进行通讯连接,并基于WebSocket协议通过第一信息交互模块向信令服务器的第二信息交互模块发送操作指令信息。
S220、信令服务器首先基于WebSocket协议与娱乐终端进行通讯连接,第二信息交互模块接收操作指令信息,并基于MQTT协议向娱乐终端的第三信息交互模块发送操作指令信息。
S230、娱乐终端通过第三信息交互模块接收信令服务器发送的操作指令信息,并根据操作指令信息动作,并返回操作指令响应信息。
S240、判断娱乐终端动作是否结束,若否,则继续动作。
S250、判断娱乐终端动作是否结束,若是,则操作指令响应信息基于MQTT协议通过第三信息交互模块发送至第二信息交互模块,第二信息交互模块接收操作指令响应信息,并基于WebSocket协议将操作指令响应信息转发至第一信息交互模块。
S260、远程控制终端通过第一信息交互模块接收并在第一窗口显示操作指令响应信息。
根据实施例一中的一种远程控制娱乐终端的方法,该5G自助银行娱乐系统的音视频数据传输过程如图7所示,远程控制终端、信令服务器和娱乐终端之间首先基于WebSocket协议进行通讯握手,具体包括以下步骤:
S310、娱乐终端上的第二音视频传输模块首先创建一个初始化对象,然后打开本地音视频设备,将音视频数据封装成媒体流添加到初始化对象中。
S320、第二音视频传输模块调用初始化对象创建一个请求会话描述协议,该请求会话描述协议中保存当前音视频的相关参数。第二音视频传输模块将该请求会话描述协议保存起来,并通过信令服务器发送给远程控制终端。
S330、远程控制终端上的第一音视频传输模块接收到第二音视频传输模块传送过来的请求会话描述协议,将其保存起来,并创建一个应答会话描述协议,保存该应答会话描述协议并将它通过信令服务器发送给第二音视频传输模块。
S340、第二音视频传输模块接收第一音视频传输模块发送过来的应答会话描述协议,并保存起来。
S350、在会话描述协议的请求/应答的过程中,第一音视频传输模块和第二音视频传输模块已经根据会话描述协议的信息基于WebRTC协议建立远程控制终端与娱乐终端之间的音视频数据传输通道。
S360、娱乐终端根据操作指令信息动作的过程中,通过音视频采集模块采集娱乐终端的音视频数据,经第二音视频传输模块编码后,通过音视频数据传输通道,将音视频数据发送到第一音视频传输模块,经第一音视频传输模块解码后显示在第二窗口上。
上述的操作步骤也适应远程控制终端到娱乐终端的音视频流的传输。
以上具体结构是对本发明的较佳实施例进行了具体的说明,但并非因此限制本发明的实施方式及保护范围,熟悉本领域的技术人员在不违背本发明精神的前提下还可以做出种种的等同变形或者替换,这些等同的变形或者替换均包含在本申请权利要求所限定的范围内。
Claims (10)
1.一种远程控制娱乐终端的方法,其特征在于,包括:
经由信令服务器发送远程控制终端与娱乐终端之间的操作指令信息,并经由信令服务器返回远程控制终端与娱乐终端之间的操作指令响应信息,以及用于所述远程控制终端与所述娱乐终端的信息交互;在所述远程控制终端与所述娱乐终端间建立基于WebRTC协议的音视频传输通道;
利用所述音视频传输通道传输音视频数据;发送或接收所述音视频数据并通过所述远程控制终端的浏览器和所述娱乐终端上的控制模块进行编码或解码。
2.根据权利要求1所述的一种远程控制娱乐终端的方法,其特征在于,所述远程控制终端与所述信令服务器之间采用WebSocket协议传输所述操作指令信息或操作指令响应信息;所述信令服务器与所述娱乐终端之间采用MQTT协议传输所述操作指令信息或操作指令响应信息。
3.根据权利要求1所述的一种远程控制娱乐终端的方法,其特征在于,所述经由信令服务器发送远程控制终端与娱乐终端之间的操作指令信息,并经由信令服务器返回远程控制终端与娱乐终端之间的操作指令响应信息,包括:
所述远程控制终端将所述操作指令信息发送给所述信令服务器;
所述信令服务器将所述操作指令信息转发至所述娱乐终端;
所述娱乐终端接收并解析所述操作指令信息,并返回所述操作指令响应信息;
所述信令服务器接收所述操作指令响应信息,并转发至所述远程控制终端。
4.根据权利要求1所述的一种远程控制娱乐终端的方法,其特征在于,所述WebRTC协议只建立从所述娱乐终端至所述远程控制终端的单边音视频传输通道。
5.根据权利要求1所述的一种远程控制娱乐终端的方法,其特征在于,还包括:所述娱乐终端监控网络连接,所述娱乐终端定时通过Ping命令检查所述远程控制终端、信令服务器、娱乐终端的网络连接状态以及网络速度,并显示返回信息。
6.根据权利要求1所述的一种远程控制娱乐终端的方法,其特征在于,所述娱乐终端设有Android系统总控;
运行所述娱乐终端,通过所述Android系统总控定时获取源自所述远程控制终端的所述娱乐终端的重启操作指令,实现所述娱乐终端定时重启。
7.一种远程控制娱乐终端的装置,其特征在于,包括:
信息交互模块,用于通过信令服务器发送或返回远程控制终端与娱乐终端间的操作指令信息或操作指令响应信息;以及用于所述远程控制终端与所述娱乐终端的信息交互,在所述远程控制终端与所述娱乐终端间建立基于WebRTC协议的音视频传输通道;
音视频传输模块,利用所述音视频传输通道传输音视频数据;发送或接收所述音视频数据并通过所述远程控制终端的浏览器和所述娱乐终端上的控制模块进行编码或解码。
8.根据权利要求7所述的一种远程控制娱乐终端的装置,其特征在于:还包括网络监控模块,所述网络监控模块定时检查所述远程控制终端、信令服务器、娱乐终端的网络连接状态以及网络速度,并显示返回信息。
9.根据权利要求7所述的一种远程控制娱乐终端的装置,其特征在于:所述娱乐终端设有Android系统总控;
所述Android系统定时从所述远程控制终端获取所述娱乐终端的重启操作指令。
10.一种5G自助银行娱乐系统,其特征在于,包括远程控制终端、信令服务器、娱乐终端以及如权利要求7至9任一所述的一种远程控制娱乐终端的装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910882996.6A CN110557458A (zh) | 2019-09-18 | 2019-09-18 | 远程控制娱乐终端的方法、装置及5g自助银行娱乐系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910882996.6A CN110557458A (zh) | 2019-09-18 | 2019-09-18 | 远程控制娱乐终端的方法、装置及5g自助银行娱乐系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110557458A true CN110557458A (zh) | 2019-12-10 |
Family
ID=68740627
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910882996.6A Pending CN110557458A (zh) | 2019-09-18 | 2019-09-18 | 远程控制娱乐终端的方法、装置及5g自助银行娱乐系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110557458A (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112261088A (zh) * | 2020-09-27 | 2021-01-22 | 华数传媒网络有限公司 | 一种机顶盒远程控制方法 |
CN112261343A (zh) * | 2020-12-08 | 2021-01-22 | 之江实验室 | 一种基于WebRTC的机器人远程通话系统 |
CN112333237A (zh) * | 2020-09-30 | 2021-02-05 | 宇龙计算机通信科技(深圳)有限公司 | 一种5g工业模组及电子设备 |
CN112532744A (zh) * | 2020-12-20 | 2021-03-19 | 南京南方电讯有限公司 | 基于Android系统的视频终端及桌面远程控制方法 |
CN113452589A (zh) * | 2021-06-29 | 2021-09-28 | 张挺 | 一种广域网智能家居遥控系统及其工作方法 |
CN113593720A (zh) * | 2020-04-30 | 2021-11-02 | 京东方科技集团股份有限公司 | 一种远程会诊控制方法和控制系统、计算机设备和介质 |
CN116489307A (zh) * | 2023-04-04 | 2023-07-25 | 上海缓存命中科技有限公司 | 网络监控系统、网络监控方法、装置及相关设备 |
WO2023169066A1 (zh) * | 2022-03-09 | 2023-09-14 | 深圳Tcl新技术有限公司 | 监控回放控制方法、装置、存储介质及电子设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103036966A (zh) * | 2012-12-10 | 2013-04-10 | 周玲玲 | 移动终端远程交互测试系统和远程交互测试方法 |
CN104144316A (zh) * | 2013-05-06 | 2014-11-12 | 南京理工大学连云港研究院 | 基于流媒体技术的车载移动视频监控系统 |
CN107483548A (zh) * | 2017-07-21 | 2017-12-15 | 珠海市魅族科技有限公司 | 移动终端控制系统、方法、移动终端及存储介质 |
CN109379440A (zh) * | 2018-12-05 | 2019-02-22 | 电子科技大学 | 一种手机远程操控系统 |
CN110233716A (zh) * | 2019-05-31 | 2019-09-13 | 北京文香信息技术有限公司 | 一种通信交互方法、装置、存储介质、终端设备及服务器 |
-
2019
- 2019-09-18 CN CN201910882996.6A patent/CN110557458A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103036966A (zh) * | 2012-12-10 | 2013-04-10 | 周玲玲 | 移动终端远程交互测试系统和远程交互测试方法 |
CN104144316A (zh) * | 2013-05-06 | 2014-11-12 | 南京理工大学连云港研究院 | 基于流媒体技术的车载移动视频监控系统 |
CN107483548A (zh) * | 2017-07-21 | 2017-12-15 | 珠海市魅族科技有限公司 | 移动终端控制系统、方法、移动终端及存储介质 |
CN109379440A (zh) * | 2018-12-05 | 2019-02-22 | 电子科技大学 | 一种手机远程操控系统 |
CN110233716A (zh) * | 2019-05-31 | 2019-09-13 | 北京文香信息技术有限公司 | 一种通信交互方法、装置、存储介质、终端设备及服务器 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113593720A (zh) * | 2020-04-30 | 2021-11-02 | 京东方科技集团股份有限公司 | 一种远程会诊控制方法和控制系统、计算机设备和介质 |
CN112261088A (zh) * | 2020-09-27 | 2021-01-22 | 华数传媒网络有限公司 | 一种机顶盒远程控制方法 |
CN112261088B (zh) * | 2020-09-27 | 2022-11-15 | 华数传媒网络有限公司 | 一种机顶盒远程控制方法 |
CN112333237A (zh) * | 2020-09-30 | 2021-02-05 | 宇龙计算机通信科技(深圳)有限公司 | 一种5g工业模组及电子设备 |
CN112333237B (zh) * | 2020-09-30 | 2023-06-30 | 深圳酷源数联科技有限公司 | 一种5 g工业模组及电子设备 |
CN112261343A (zh) * | 2020-12-08 | 2021-01-22 | 之江实验室 | 一种基于WebRTC的机器人远程通话系统 |
CN112532744A (zh) * | 2020-12-20 | 2021-03-19 | 南京南方电讯有限公司 | 基于Android系统的视频终端及桌面远程控制方法 |
CN113452589A (zh) * | 2021-06-29 | 2021-09-28 | 张挺 | 一种广域网智能家居遥控系统及其工作方法 |
WO2023169066A1 (zh) * | 2022-03-09 | 2023-09-14 | 深圳Tcl新技术有限公司 | 监控回放控制方法、装置、存储介质及电子设备 |
CN116489307A (zh) * | 2023-04-04 | 2023-07-25 | 上海缓存命中科技有限公司 | 网络监控系统、网络监控方法、装置及相关设备 |
CN116489307B (zh) * | 2023-04-04 | 2023-11-28 | 上海缓存命中科技有限公司 | 网络监控系统、网络监控方法、装置及相关设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110557458A (zh) | 远程控制娱乐终端的方法、装置及5g自助银行娱乐系统 | |
CN113259706B (zh) | 直播处理方法、装置、电子设备以及存储介质 | |
WO2016197864A1 (zh) | 连接状态检测方法、装置和智能电视系统 | |
CN105763832B (zh) | 一种视频互动、控制方法及装置 | |
KR101214023B1 (ko) | 다중 멀티캐스트 스트림을 가능하게 하기 위한 연결 절차 | |
CN102480613B (zh) | 会议电视系统的终端的视频监控方法、装置及系统 | |
CN103327287B (zh) | 一种会议信号播放方法和装置、视频会议终端、移动设备 | |
CN106302365B (zh) | 一种客户端、智能电视系统和相应的数据传输方法 | |
WO2014054325A1 (ja) | 符号化制御装置および符号化制御方法 | |
WO2022111421A1 (zh) | 应用界面投屏方法、装置、设备以及存储介质 | |
CN107566855A (zh) | 频道快速切换的方法、服务器和机顶盒 | |
CN104320716A (zh) | 一种基于多终端协同的视频上行链路传输方法 | |
CN111694625A (zh) | 一种车盒向车机投屏的方法和设备 | |
EP3024225A1 (en) | System and method of video streaming | |
KR20070024183A (ko) | 데이터 전송 제어 방법 및 상기 방법에 의해 데이터를전송하는 네트워크 장치 | |
US20140099040A1 (en) | Image processing device and image processing method | |
CN104349108B (zh) | 基于可视电话终端的通信方法、系统与可视电话终端 | |
CN104581368A (zh) | 一种基于信令交互的多屏互动方法 | |
CN116527852A (zh) | 实时视频监控系统 | |
CN104244050A (zh) | 车载导航系统的流媒体播放器及播放方法 | |
CN102316300A (zh) | 视频通话的甩屏方法、系统及设备 | |
CN115884186A (zh) | 一种无线内部通话系统 | |
CN112565818B (zh) | 二三维一体化的操作站平台构建方法和电子设备 | |
CN115334068A (zh) | 一种数据传输方法、装置、终端设备和存储介质 | |
CN110740337B (zh) | 直播播放方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191210 |
|
RJ01 | Rejection of invention patent application after publication |