CN107431662A - 云输入信道管理 - Google Patents

云输入信道管理 Download PDF

Info

Publication number
CN107431662A
CN107431662A CN201680012906.2A CN201680012906A CN107431662A CN 107431662 A CN107431662 A CN 107431662A CN 201680012906 A CN201680012906 A CN 201680012906A CN 107431662 A CN107431662 A CN 107431662A
Authority
CN
China
Prior art keywords
terminal device
client terminal
server
auxiliary output
client
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680012906.2A
Other languages
English (en)
Other versions
CN107431662B (zh
Inventor
K.扬
B.科塔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment America LLC
Original Assignee
Sony Computer Entertainment America LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Computer Entertainment America LLC filed Critical Sony Computer Entertainment America LLC
Priority to CN202111489649.0A priority Critical patent/CN114363265A/zh
Publication of CN107431662A publication Critical patent/CN107431662A/zh
Application granted granted Critical
Publication of CN107431662B publication Critical patent/CN107431662B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0852Delays
    • H04L43/087Jitter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/04Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/08Protocols for interworking; Protocol conversion

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Environmental & Geological Engineering (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Communication Control (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本公开的方面涉及用于建立辅助输出以及将所述辅助输出从服务器发送至客户端装置的系统和方法,所述辅助输出将客户端装置等待时间信息考虑在内。客户端装置信息或所述辅助输出可包括加密数据分组流。

Description

云输入信道管理
技术领域
本公开涉及经由网络的数据传送。具体地讲,本公开的方面涉及用于减少被配置成在网络上操作的服务器与客户端装置之间所经历的等待时间的影响的系统和方法。
背景技术
随着数字流服务和各种基于云的计算解决方案的日益盛行,在远程装置之间快速且准确地传递大量数据的能力为重要的任务。经由网络(诸如因特网、广域网(WAN)或局域网(LAN))的共享资源将数字数据发送至目的地系统通常涉及将数据配置成被称作分组的格式化块,这些块可具有固定或可变的长度。每个数据分组通常包括:有效负载或主体,该有效负载具有被递送至目的地的基础客户端数据;以及用于路由和控制目的的某些补充信息,该信息通常至少部分容纳于该数据分组的标头内。广义上讲,网络、发送系统和接收系统可使用该补充信息来确保恰当路由和有效负载至预期目的地的递送。
然而,数字流服务和基于云的计算解决方案在利用对等待时间敏感的应用程序(诸如视频游戏)时在远程装置之间传递数据期间建立或使用的网络的品质和带宽上可能会经历限制。这些限制可能会在数据传输中导致延迟且可能会因此造成等待时间,这通常在应用程序的使用期间造成不连贯性。虽然客户端装置将尝试经由各种方法来达成最低等待时间,但难免地,各客户端装置将由于因素(诸如所传输数据的解码速度、呈现速率、输入轮询或甚至客户端的网络连接)的差异而经历不同量的等待时间。
另外,在分组交换网络上传送数据的通常不可避免的结果为分组遗失,这发生在一个或多个数据分组未能正确地到达其目的地时。分组遗失可由于各种因素而发生,包括信道拥塞、信号降级和其他原因。为了防止造成分组遗失的某些网络条件发生同时也在网络信道中有效地使用可用带宽,已开发出各种拥塞控制技术。此外,存在可合并工具以处置分组遗失的一系列传送协议,且在分组遗失发生时用于处置分组遗失的特定方法取决于在数据传递期间使用的特定传送协议。一般而言,这些传送协议可分在两个类型下面,即,可靠协议和不可靠协议,其各自存在某些折衷,且在任何情况中使用的协议的特定选择可取决于数据传递的性质。
可靠协议合并了以下保证:每个数据分组按顺序递送至其目的地,在分组遗失的情况下重新传输丢掉的分组。可靠协议经常为但并非总是连接导向的协议,且递送保证通常通过针对特定通信会期建立从接收方返回至发送方的反向信道来完成,该接收方可使用该反向信道来发送某类型的确认收据以验证正确地递送了分组。发送方可使用这些确认来在指示数据分组未能正确地到达其目的地时引导重新传输过程。可靠协议的盛行且众所周知的实例为传输控制协议(TCP),其也为连接导向的。可靠协议(诸如TCP)非常适合于其中数据的准确传递为主要关心的事且为了验证正确地递送了数据分组可容忍某量的延迟的任务,诸如发送基于文本的电子邮件、数字内容下载和其中音频/视频可缓冲于目的地系统处的媒体流服务。遗憾地,数据验证性质和数据重新传输引入了比较大的额外负荷,使许多可靠协议对于时间要求严格的应用而言为非所要的,这些应用包括实时数据传递,诸如实时音频和/或视频流、在线视频游戏和因特网电话。
相比之下,不可靠协议通常放弃如上文所描述的针对特定分组的一定类型的数据递送验证,且通常通过其既不保证每个分组到达其目的地也不确保分组以正确的顺序来递送的事实来表征。不可靠协议通常但并非总是无连接的,且通常在任何特定通信会期期间不建立固定信道。可改为基于每个数据分组中包含的补充信息来对每个数据分组独立地路由。不可靠协议的盛行且众所周知的实例为用户数据报协议(UDP),其也为无连接的。由于如UDP的不可靠协议通过放弃上文提及的可靠性性质而相对地减少了额外负荷,因此不可靠协议更好地适合于其中将等待时间减至最少为主要关心的事的时间敏感应用,诸如上文提及的实时应用。
重要地,网络条件通常随时间变化,使网络信道上发送方可用的最大位元率基于该信道上的当前负荷而变化。当发送方系统尝试以超过信道的目前可用带宽的位元率发送数据分组时,其可能会造成作为响应而触发严重分组遗失的拥塞状况。这在涉及可靠数据传送(诸如TCP)的较不时间敏感的应用中可能为可容忍的,因为保证了遗失的数据的重新传输;然而,这在许多实时应用和涉及不可靠传送的其他应用中可能为不可接受的,因为分组遗失可能达到一定程度使得接收方无法重新构建遗失的数据,由此造成非所要的结果,诸如信号的丢失。另一方面,当最大可用位元率改为远超发送方提供的位元率时,这也为非所要的,因为该网络信道的完全传输能力被低效地利用,且因此接收侧处的信号品质可能为不必要地弱。
遗憾地,以有效地利用网络信道的可用带宽而不会造成导致不可接受的分组遗失的拥塞状况的方式来使用不可靠协议传递数据为重大挑战。传统拥塞控制技术通常仅适合于可靠协议,诸如TCP,这些可靠协议使至发送方的反馈建造至传输层中;但对于许多不可靠协议(诸如UDP)为低效的,这些不可靠协议通常缺少必要的反馈,除非通过客户端在传输层上独立地添加。此外,针对TCP或其他可靠协议设计的拥塞控制或拥塞避免算法通常并非快速实时流应用或且可能不适合于涉及不可靠协议的许多数据传递应用,因为响应于拥塞而导致的位元率的指数减少可能会因此使实时信号的品质受到过多影响。此外,虽然由将位元率增加至拥塞程度而导致的分组遗失在较不时间敏感的应用中可能为可容忍的,这些应用使用TCP或其他可靠协议来重新传输数据,但分组遗失在许多实时应用中可能为不可接受的,因为会致使接收方无法重新构建该数据。
因此,此项技术中需要找到用于减少客户端的独特等待时间约束的替代手段,在正传递的数据经加密时,这些手段也适合于与UDP和其他不可靠传送协议一起使用。本公开的方面出现在该背景下。
发明内容
根据本公开的某些具体实施,在被配置成在网络上操作的服务器上执行的方法可包括经由网络连接通过该服务器从客户端装置接收客户端装置信息。该客户端装置信息可包括等待时间数据。该方法可包括确定将客户端装置等待时间信息考虑在内的辅助输出。该方法还可包括将该辅助输出从该服务器发送至该客户端装置。该客户端装置信息或该辅助输出可包括加密数据分组流。
根据本公开的某些具体实施,发送方计算系统可包括至少一个处理器单元和耦接至该至少一个处理器单元的至少一个存储器单元。该至少一个处理器单元和该至少一个存储器单元可被配置成执行方法。该方法可包括经由网络连接通过该服务器从客户端装置接收客户端装置信息。该客户端装置信息可包括等待时间数据。该方法可包括确定将客户端装置等待时间信息考虑在内的辅助输出。该方法还可包括将该辅助输出从该服务器发送至该客户端装置。该客户端装置信息或该辅助输出可包括加密数据分组流。
根据本公开的某些具体实施,一种非暂时性计算机可读介质可含有包括于其中的计算机可读指令。该等计算机可读指令可被配置成在被执行时实施方法。该方法可经由网络连接通过该服务器从客户端装置接收客户端装置信息。该客户端装置信息可包括等待时间数据。该方法可包括确定将客户端装置等待时间信息考虑在内的辅助输出。该方法还可包括将该辅助输出从该服务器发送至该客户端装置。该客户端装置信息或该辅助输出可包括加密数据分组流。
附图说明
通过结合附图来考虑以下详细描述可容易地理解本公开的教示,附图中:
图1为根据本公开的某些方面的从客户端装置侧的示例性辅助输出技术的流程图。
图2为根据本公开的某些方面的示例性系统的方块图。
图3为根据本公开的某些方面的从客户端侧的示例性辅助输出技术的流程图。
图4为根据本公开的某些方面的从服务器侧的示例性辅助输出技术的流程图。
具体实施方式
虽然以下详细描述含有许多具体细节以便进行说明,但本领域技术人员将了解到对以下细节的许多改变和更改是在本发明的范围内。因此,陈述下文描述的本公开的说明性具体实施,但决不会失去所要求的发明的一般性且不会对所要求的发明施加限制。
导言
本公开的方面涉及用于减少被配置成在网络上操作的服务器与客户端装置之间所经历的等待时间的影响的系统和方法。
根据某些方面,被配置成在网络上操作的一个或多个服务器可经由网络连接通过该服务器从一个或多个客户端装置接收客户端装置信息。该客户端装置信息可包括等待时间数据。该一个或多个服务器可确定将该客户端装置等待时间信息考虑在内的辅助输出。该服务器还可将该辅助输出从服务器发送至客户端装置。该客户端装置信息或该辅助输出可包括加密数据分组流。
进一步的细节
现在转向图1,描绘了根据本公开的某些方面响应于所接收到的客户端装置等待时间数据可如何将辅助输出提供给客户端装置的说明性实例。具体地讲,图1描绘了根据本公开的某些实施方案的用于响应于所接收到的客户端装置等待时间数据向客户端装置提供辅助输出的示例性过程流程。应指出,图1中的提供辅助输出的示例性方法可具有与图2和图3中示出的方法共同的一个或多个方面。也为重要的是要指出图1的实例仅为用于实现说明根据本公开可如何提供辅助输出的仅某些方面的目的的简化实例。
在开始时,重要的是要指出在该实例中,将辅助输出提供给正经历等待时间的客户端装置。然而,在替代具体实施中,可在其他环境下发送或触发辅助输出。如图1中所示,响应于通过服务器从一个或多个客户端装置接收到的客户端装置信息132如何提供辅助输出148一般可取决于客户端装置信息132是否指示等待时间存在(如146处所指示)。
根据某些方面,在客户端装置信息132指示客户端装置正经历等待时间146的情况下,服务器可确定应将辅助输出提供给客户端装置144以便帮助用户克服等待时间的影响。这可通过以下实例进行说明。假设经由正经历抖动(例如,按照网络上的分组等待时间随时间的变化性来测量的等待时间变化)的网络在该装置与服务器之间传输数据。一旦客户端装置已检测到该抖动,客户端装置可向服务器报告其正经历等待时间146。在接收到该信息后,服务器可确定等待时间的严重程度需要向客户端装置提供辅助输出或通过客户端装置实施辅助输出144。辅助输出的类型可取决于等待时间的严重程度。因此,作为辅助输出148的一个可能性的实例,服务器可接着将辅助指令提供给客户端装置。或者,这些指令可预先加载于客户端装置上或存储于别处,且服务器可发送触发信号,该触发信号使客户端装置执行预先加载的指令或从别处获得指令且执行这些指令。此类指令可呈脚本的形式。如本文所使用且如本领域技术人员通常所理解的,“脚本”是指针对特殊执行时间环境编写的程序,该程序可解释(而非编译)任务且使任务的执行自动化,这些任务可或者通过人类操作员逐一执行。在其中辅助指令已加载于客户端装置上的实施方案中,辅助输出148可为触发客户端装置实施预先加载的辅助指令的信号。该信号可含有指示等待时间的量的信息,使得客户端装置可根据等待时间的程度而选择适当辅助来执行。
无论是预先加载于客户端装置上、从服务器发送至客户端还是通过客户端从别处获得,辅助指令均可采取许多不同形式。举例而言且并非为了限制,来自客户端装置的一些输入组合涉及若干按钮按压且这些按钮必须在彼此相差16ms之内按下。辅助输入脚本可将按钮向下按压的此组合映射至单个按钮按压。
在辅助输出148的另一实例中,服务器可提供或触发辅助指令以使客户端装置记录用户输入之间的时间差(ΔT)。假定用户接下来的三个输入为按正方形、正方形、圆形的顺序的三个按钮按压;各输入隔开16ms。然而,由于网络抖动,服务器在第一与第二输入之间的滞后为16ms且第二与第三输入之间的滞后为33ms的情况下按正方形、正方形、圆形来接收这些输入。然而,通过执行辅助输出指令(例如脚本),客户端装置可记录已执行的输入之间的ΔT且将其发送至服务器。因此,除了这些输入之外,服务器还接收关于客户端装置处的ΔT输入的数据。因此,与原来通过服务器接收的输入定时相反,服务器接着输入用户命令,其中各输入之间有16ms的适当ΔT。
在一些具体实施中,客户端装置可自动地记录已执行的输入之间的ΔT且将其作为客户端装置信息132的部分发送至服务器。服务器可接着将从客户端装置接收到的ΔT值与这些输入到达服务器的时间的差进行比较(例如,通过取差值)且确定等待时间。服务器可接着使用所确定的等待时间来选择适当的辅助输出148。
根据某些方面,客户端装置信息还可经由加密数据分组134来发送。如图1中所示,服务器可经由安全或不安全的网络(例如UDP)来接收加密数据流134。如果该加密数据流是无序地接收到,则将需要实施诸如正向错误校正(FEC)的传统方法以便正确地解密该数据流。然而,根据本公开的某些方面,如果服务器确定该数据流由于失序传输而需要重组合140,则如142中所示,服务器可使用随每个分组包括的标头信息以便维持正确的解密次序且在解密之前重组合该数据流。
要强调的是,提供图1中描绘的示例性技术仅为了进行说明,以便突出本公开的某些方面。实际上,本公开的实施方案可将未通过图1的实例描绘的额外或替代的考虑因素考虑在内,且可能比图1中描绘的简化方案复杂。
从图1的实例中将了解,本公开的某些方面包括可提供给客户端装置的辅助输出的各种方法。这可为经由通过客户端装置更改用户体验的方式。这也可为经由将各种脚本提供给客户端装置。在任一情况中,辅助输出允许用户克服等待时间的影响。从图1的实例中还将了解,本公开的某些方面包括将经由使用分组标头信息来加密和解密的各种数据流。因此,从服务器发送至客户端装置的数据也可为加密的,且客户端装置可使用加密分组标头信息来为接收到的数据流确定适当的解密次序。
本公开的方面的某些具体实施包括针对辅助输出配置的系统。举例而言且并非为了限制,根据本公开的某些方面,图2描绘了分布式计算系统,该分布式计算系统包括至少一个服务器计算系统202和至少一个客户端装置计算系统204,且计算系统202和204被配置成经由网络传递数据。在某些具体实施中,服务器202可被配置成执行指令,这些指令具有与关于图1和/或图4描述的指令共同的一个或多个方面。在某些具体实施中,客户端装置204可被配置成执行指令,这些指令具有与上文关于图1或下文关于图3描述的指令中的一者或多者共同的一个或多个方面。服务器202和客户端装置204中的任一者或两者可被配置成具有合适的软件和/或硬件以实施本文所描述的方法的各种方面。服务器202和客户端装置204中的任一者或两者可为服务器、嵌入式系统、移动电话、个人计算机、膝上型计算机、平板计算机、便携式游戏装置、工作站、游戏控制台、可穿戴装置(诸如智能手表)及类似者。
根据某些实施方案,服务器202可为云端计算服务器,且客户端装置204可为服务器202的云端计算客户端,且客户端服务器202可被配置成使用不可靠协议经由网络299将数据流提供给客户端装置。举例而言且并非为了限制,服务器202或客户端装置204可为计算系统,该计算系统被配置成经由网络299将实时数据流(诸如实时音频流、实时视频流或实时音频/视频流)提供至至少一个服务器202或至少一个客户端装置204,该网络可为广域网(WAN),诸如因特网。该计算系统(服务器202或客户端装置204)可被配置成经由网络将数据以加密数据分组的形式发送,该加密数据分组含有被递送至接收方系统的数据。举例而言,根据本公开的各种方面,客户端装置204可将这些加密分组同时发送至接收方装置202。接收方系统202可对这些加密数据分组解密,且这些加密数据分组解密可包括指示分组在解密次序中的位置的标头。
系统202和204中的任一者(即,服务器202、客户端装置204或两者)可包括一个或多个处理器单元270,这些处理器单元可根据众所周知的架构进行配置,诸如单核、双核、四核、多核、处理器-协同处理器、单元处理器及类似者。系统202和204中的任一者还可包括一个或多个存储器单元272(例如,RAM、DRAM、ROM及类似者)。处理器单元270可执行一个或多个程序274,这些程序可存储于存储器272中,且处理器270可操作地耦接至存储器272,例如通过经由数据总线276来存取该存储器。存储器单元272可包括数据277,且处理器单元270可利用数据277来实施程序274。根据本公开的各种方面,用于系统202和204中任一者的数据277可包括(例如)从服务器202传输至客户端装置204的辅助输出数据256,和任选地包括从客户端装置204至服务器202或从服务器202至客户端装置204的客户端装置等待时间数据254的客户端装置信息252。程序274可任选地包括在通过处理器执行时执行与不安全网络上的分组的解密或辅助输出256的递送相关联的一个或多个操作的指令,诸如,例如具有与图1、图3和/或图4的方法共同的一个或多个特征的方法。举例而言,根据图1中描绘的方法的服务器侧的方面和/或客户端装置等待时间数据的发送,服务器202的程序274可包括在通过处理器270执行时使服务器响应于来自客户端装置204的等待时间数据254而将数据发送至至少一个接收装置204和/或提供辅助输出256的指令。客户端装置204的程序274可包括在通过处理器270执行时使客户端装置执行辅助输出指令256的指令,这些辅助输出指令为预先加载的或通过服务器202提供。
系统202和204中的任一者还可包括众所周知的支持电路278,诸如输入/输出(I/O)电路279、电源供应器(P/S)280、时钟(CLK)281和高速缓冲存储器282,这些支持电路可(例如)经由总线276与该系统的其他组件通信。系统202和204中的任一者可任选地包括大容量存储装置284,诸如带驱动器、CD-ROM驱动器、磁带驱动器、快闪存储器或类似者,且大容量存储装置284可存储程序和/或数据。系统202和204中的任一者还可任选地包括显示单元286。显示单元286可呈阴极射线管(CRT)、平板屏幕、触摸屏或显示文本、数字、图形符号或其他视觉对象的其他装置的形式。系统202和204中的任一者还可包括用户界面288以方便系统202/204与用户之间的交互。用户界面288可包括键盘、鼠标、光笔、游戏控制板、触摸界面或其他装置。用户界面还可包括音频I/O装置,诸如扬声器和/或麦克风。
用户可经由用户界面288与计算机系统中的任一者交互。举例而言,服务器202可为云游戏服务器,且客户端装置204可为云游戏客户端,且视频游戏用户可经由用户界面288与通过服务器202执行且流传输至客户端204的视频游戏交互。数据从服务器传输至客户端的速率可根据本公开的方面而最佳化以增强用户的体验且维持客户端侧处接收到的信号的品质。用户界面288的部分可包括图形用户界面(GUI),该图形用户界面可显示于显示单元286上以便方便用户与系统202/204的交互。系统202/204可包括网络界面290,该网络界面被配置成实现Wi-Fi、以太网端口或其他通信方法的使用。根据本公开的某些方面,网络界面290可合并合适的硬件、软件、固件或其某一组合以方便经由电信网络的通信,且可支持使用不可靠协议的数据传送。网络界面290可被配置成经由局域网和广域网(诸如因特网)实施有线或无线通信。系统202和204中的任一者可在网络上经由一个或多个数据分组299发送个接收数据和/或对文件的请求。
如图3中所示,可(例如)通过客户端装置平台204来实施一组客户端装置平台指令371。客户端装置平台指令371可形成于非暂时性计算机可读介质(诸如存储器272或大容量存储装置284)上。客户端装置平台指令371也可为过程控制程序274的一部分。如373处所指示,客户端装置平台指令371可包括用于确定将包括于客户端装置信息252中的等待时间数据254的指令,该客户端装置信息将发送至服务器202。指令371可包括用于将客户端装置信息252递送至服务器202的指令374。如果客户端装置信息252将以加密分组的形式发送,则这些后面的指令可任选地包括将分组加密次序信息插入至分组标头中的指令,使得服务器202可对这些分组解密,即便这些分组是无序地接收到。其后,在376处,这些指令可包括用于接收辅助输出356的指令且随后可包括用于执行通过所接收到的辅助输出256触发或包括于所接收到的辅助输出256中的辅助指令的指令。如果辅助输出256将以加密分组的形式接收,则这些后面的指令可任选地包括从分组标头提取分组加密次序信息的指令,使得客户端装置204可对这些分组解密,即便这些分组是无序地接收到。
如图4中所示,可(例如)通过服务器202来实施一组服务器指令481。服务器指令481可形成于非暂时性计算机可读介质(诸如存储器272或大容量存储装置284)上。服务器指令481还可为过程控制程序274的一部分。如483处所指示,指令481可包括用于从客户端装置204接收客户端装置信息252的指令。如果客户端装置信息252是以加密分组的形式接收到,则这些后面的指令可任选地包括从分组标头检索分组加密次序信息的指令,使得服务器202可对这些分组解密,即便这些分组是无序地接收到。其后,在484处,这些指令可包括用于确定客户端装置信息252是否含有等待时间数据254的指令。此外,如486处所指示,如果等待时间数据254是随客户端装置信息252一起接收到,则指令481可含有用于产生将递送至客户端装置204的辅助输出256的指令。其后,在487处,这些指令可包括用于将辅助输出256发送至客户端装置204的指令。如果辅助输出256将以加密分组的形式发送,则这些后面的指令可任选地包括将分组加密次序信息插入至分组标头中的指令,使得客户端装置204可对这些分组解密,即便这些分组是无序地接收到。
上述组件可以硬件、软件、固件或其某一组合来实施。
虽然以上是本公开的各种说明性实施方案的完整描述,但可使用各种替代、修改和等效物。因此,本发明的范围不应被理解为受以上描述所限制,而是应该改为参考所附权利要求及其等效物的全范围来确定。本文所描述的任何特征(无论是否为优选的)可与本文所描述的任何其他特征(无论是否为优选的)结合。在所附权利要求中,除了另外明确指定的情况外,不定冠词“一个(a/an)”是指跟在该冠词后的项目中的一者或多者的数量。所附权利要求不被解释为包括构件或步骤加功能限制,除了在使用短语“用于……的构件”或“用于……的步骤”的给定权利要求中明确地叙述了此类限制之外。

Claims (38)

1.一种方法,在被配置成在网络上操作的服务器中,所述方法包括:
经由网络连接通过所述服务器从客户端装置接收客户端装置信息,其中所述客户端装置信息包括等待时间数据;
确定将所述等待时间数据考虑在内的辅助输出;以及
将所述辅助输出从所述服务器发送至所述客户端装置。
2.根据权利要求1所述的方法,其中所述等待时间数据包括用户输入之间的时间的测量值。
3.根据权利要求2所述的方法,其中确定所述辅助输出包括利用所述输入时间测量值来通过所述服务器使用在所述客户端装置处生成所述输入时所用的相同时间差来实施所述输入。
4.根据权利要求1所述的方法,其中所述辅助输出含有触发已加载于所述客户端装置上的辅助指令的执行的信号。
5.根据权利要求1所述的方法,其中所述辅助输出含有将在所述客户端装置上执行的指令。
6.根据权利要求4所述的方法,其中所述指令为脚本。
7.根据权利要求5所述的方法,其中所述脚本被配置成帮助用户完成任务。
8.根据权利要求4所述的方法,其中所述脚本被配置成通过所述客户端装置更改用户体验的方式。
9.根据权利要求8所述的方法,其中通过允许更多时间用于用户输入来更改所述方式。
10.根据权利要求8所述的方法,其中通过降低人工智能资产吸引住所述用户的困难程度来更改所述方式。
11.根据权利要求8所述的方法,其中通过向所述用户呈现不同场景来更改所述方式。
12.根据权利要求1所述的方法,其中所述客户端装置信息或所述辅助输出包括加密数据分组流。
13.根据权利要求12所述的方法,其中所述加密数据分组流中的每个数据分组包括指示所述分组在解密次序中的位置的标头。
14.根据权利要求13所述的方法,进一步包括在所述分组是无序地接收时通过所述服务器使用所述加密分组的所述解密次序来重组合所述数据流。
15.根据权利要求12所述的方法,其中经由不可靠协议来发送所述数据分组流。
16.根据权利要求16所述的方法,其中所述不可靠协议为用户数据报协议(UDP)。
17.一种系统,包括:
处理器,以及
存储器,所述存储器耦接至所述处理器;
其中所述处理器被配置成执行方法,所述方法包括:
经由网络连接通过服务器从客户端装置接收客户端装置信息,其中所述客户端装置信息包括等待时间数据;
确定将所述等待时间数据考虑在内的辅助输出;以及
将所述辅助输出从所述服务器发送至所述客户端装置。
18.根据权利要求17所述的系统,其中该客户端装置信息或该辅助输出包括加密数据分组流。
19.一种其中包括有处理器可执行指令的非暂时性计算机可读介质,其中处理器对所述指令的执行使所述处理器实施方法,所述方法包括:
经由网络连接通过服务器从客户端装置接收客户端装置信息,其中所述客户端装置信息包括等待时间数据
确定将所述等待时间数据考虑在内的辅助输出;以及
将所述辅助输出从所述服务器发送至所述客户端装置。
20.根据权利要求19所述的非暂时性计算机可读介质,其中所述客户端装置信息或所述辅助输出包括加密数据分组流。
21.一种方法,包括:
经由网络连接将客户端装置信息从客户端装置发送至服务器,其中所述客户端装置信息包括等待时间数据
从所述服务器接收辅助输出,其中所述辅助输出将所述等待时间数据考虑在内;以及
通过所述客户端装置实施与所述辅助输出对应的辅助。
22.根据权利要求21所述的方法,其中所述等待时间数据包括用户输入之间的时间的测量值。
23.根据权利要求22所述的方法,其中确定所述辅助输出包括利用所述输入时间测量值来通过所述服务器使用在所述客户端装置处生成所述输入时所用的相同时间差来实施所述输入。
24.根据权利要求21所述的方法,其中所述辅助输出含有触发已加载于所述客户端装置上的辅助指令的执行的信号。
25.根据权利要求21所述的方法,其中所述辅助输出含有将在所述客户端装置上执行的指令。
26.根据权利要求24所述的方法,其中所述指令为脚本。
27.根据权利要求25所述的方法,其中所述脚本被配置成帮助用户完成任务。
28.根据权利要求24所述的方法,其中所述脚本被配置成通过所述客户端装置更改用户体验的方式。
29.根据权利要求28所述的方法,其中通过允许更多时间用于用户输入来更改所述方式。
30.根据权利要求28所述的方法,其中通过降低人工智能资产吸引住所述用户的困难程度来更改所述方式。
31.根据权利要求28所述的方法,其中通过向所述用户呈现不同场景来更改所述方式。
32.根据权利要求21所述的方法,其中所述客户端装置信息或所述辅助输出包括加密数据分组流。
33.根据权利要求32所述的方法,其中所述加密数据分组流中的每个数据分组包括指示所述分组在解密次序中的位置的标头。
34.根据权利要求33所述的方法,进一步包括在所述分组是无序地接收时通过所述服务器使用所述加密分组的所述解密次序来重组合所述数据流。
35.根据权利要求32所述的方法,其中经由不可靠协议来发送所述数据分组流。
36.根据权利要求36所述的方法,其中所述不可靠协议为用户数据报协议(UDP)。
37.一种系统,包括:
处理器,以及
存储器,所述存储器耦接至所述处理器;
其中所述处理器被配置成执行方法,所述方法包括:
经由网络连接将客户端装置信息从客户端装置发送至服务器,其中所述客户端装置信息包括等待时间数据
从所述服务器接收辅助输出,其中所述辅助输出将所述客户端装置等待时间信息考虑在内;以及
通过所述客户端装置实施与所述辅助输出对应的辅助。
38.一种其中包括有处理器可执行指令的非暂时性计算机可读介质,其中处理器对所述指令的执行使所述处理器实施方法,所述方法包括:
经由网络连接将客户端装置信息从客户端装置发送至服务器,其中所述客户端装置信息包括等待时间数据
从所述服务器接收辅助输出,其中所述辅助输出将所述客户端装置等待时间信息考虑在内;以及
通过所述客户端装置实施与所述辅助输出对应的辅助。
CN201680012906.2A 2015-03-06 2016-03-04 减少服务器与客户端装置之间等待时间影响的系统和方法 Active CN107431662B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111489649.0A CN114363265A (zh) 2015-03-06 2016-03-04 用于生成及发送辅助输出的方法及系统

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/640,506 2015-03-06
US14/640,506 US10135890B2 (en) 2015-03-06 2015-03-06 Latency-dependent cloud input channel management
PCT/US2016/021056 WO2016144821A1 (en) 2015-03-06 2016-03-04 Cloud input channel management

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202111489649.0A Division CN114363265A (zh) 2015-03-06 2016-03-04 用于生成及发送辅助输出的方法及系统

Publications (2)

Publication Number Publication Date
CN107431662A true CN107431662A (zh) 2017-12-01
CN107431662B CN107431662B (zh) 2021-12-07

Family

ID=56850051

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201680012906.2A Active CN107431662B (zh) 2015-03-06 2016-03-04 减少服务器与客户端装置之间等待时间影响的系统和方法
CN202111489649.0A Pending CN114363265A (zh) 2015-03-06 2016-03-04 用于生成及发送辅助输出的方法及系统

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202111489649.0A Pending CN114363265A (zh) 2015-03-06 2016-03-04 用于生成及发送辅助输出的方法及系统

Country Status (6)

Country Link
US (2) US10135890B2 (zh)
EP (1) EP3266168B1 (zh)
JP (1) JP6547001B2 (zh)
CN (2) CN107431662B (zh)
TW (1) TWI635727B (zh)
WO (1) WO2016144821A1 (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020194269A1 (en) * 2001-06-18 2002-12-19 Yutaka Owada Distributed processing system, distributed processing method and client terminal capable of using the method
US7020698B2 (en) * 2000-05-31 2006-03-28 Lucent Technologies Inc. System and method for locating a closest server in response to a client domain name request
EP1966713A2 (en) * 2005-12-30 2008-09-10 Ashish A Pandya Runtime adaptable search processor
CN101534325A (zh) * 2009-04-15 2009-09-16 深圳市融创天下科技发展有限公司 一种富媒体系统设计中媒体对象的动态调试方法
CN102106112A (zh) * 2008-07-28 2011-06-22 万特里克斯公司 用于时变容量的连接的流速率适应
CN102739681A (zh) * 2012-06-29 2012-10-17 奇智软件(北京)有限公司 一种登录控件进行服务器登录的方法和装置
CN103793070A (zh) * 2014-01-27 2014-05-14 百度在线网络技术(北京)有限公司 一种输入请求消息的发送方法及系统
US8903897B2 (en) * 2011-07-08 2014-12-02 Google Inc. System and method for providing interactive content to non-native application environments
CN104202119A (zh) * 2014-08-26 2014-12-10 联想(北京)有限公司 一种数据发送方法、系统及电子设备

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6731600B1 (en) * 1999-02-08 2004-05-04 Realnetworks, Inc. System and method for determining network conditions
AU2001238430A1 (en) * 2000-02-18 2001-08-27 Cedere Corporation Real time mesh measurement system stream latency and jitter measurements
US7937470B2 (en) * 2000-12-21 2011-05-03 Oracle International Corp. Methods of determining communications protocol latency
US8144837B2 (en) * 2001-01-22 2012-03-27 Dialogic Corporation Method and system for enhanced user experience of audio
US8201205B2 (en) * 2005-03-16 2012-06-12 Tvworks, Llc Upstream bandwidth management methods and apparatus
US9106800B2 (en) * 2007-08-31 2015-08-11 At&T Intellectual Property I, L.P. System and method of monitoring video data packet delivery
EP2272275B1 (en) * 2008-04-25 2016-06-08 Telefonaktiebolaget LM Ericsson (publ) Method for determining the round trip time
US20090300144A1 (en) * 2008-06-03 2009-12-03 Sony Computer Entertainment Inc. Hint-based streaming of auxiliary content assets for an interactive environment
WO2010067672A1 (ja) * 2008-12-10 2010-06-17 日本電気株式会社 データ通信システム、無線基地局、データ通信方法
US8140646B2 (en) * 2009-06-04 2012-03-20 Microsoft Corporation Network application performance enhancement using speculative execution
US9069727B2 (en) * 2011-08-12 2015-06-30 Talari Networks Incorporated Adaptive private network with geographically redundant network control nodes
US8189487B1 (en) * 2009-07-28 2012-05-29 Sprint Communications Company L.P. Determination of application latency in a network node
JP5402389B2 (ja) * 2009-08-17 2014-01-29 株式会社リコー 電子会議システム、配信管理サーバ、データ制御方法、プログラム、及び記録媒体
CN102404780A (zh) * 2010-09-09 2012-04-04 华为技术有限公司 用户感受测量方法、设备和系统
US8930979B2 (en) * 2010-11-11 2015-01-06 Time Warner Cable Enterprises Llc Apparatus and methods for identifying and characterizing latency in a content delivery network
US9007362B2 (en) * 2011-01-14 2015-04-14 Brian Mark Shuster Adaptable generation of virtual environment frames
WO2013048986A1 (en) 2011-09-26 2013-04-04 Knoa Software, Inc. Method, system and program product for allocation and/or prioritization of electronic resources
US20130091266A1 (en) * 2011-10-05 2013-04-11 Ajit Bhave System for organizing and fast searching of massive amounts of data
EP2781117A4 (en) * 2011-11-15 2015-12-16 Nokia Technologies Oy OPTIMIZING RADIO USE WITH INTERMITTENT TRAFFIC
KR101246361B1 (ko) * 2011-12-30 2013-04-04 (주)네오위즈게임즈 릴레이 서버를 이용한 렉발생 어뷰징 방지 서비스를 제공하는 방법, 서버 및 기록매체
BR112014026741B1 (pt) * 2012-04-26 2021-10-26 Qualcomm Incorporated Método para estruturar os dados de conteúdo a serem servidos utilizando um servidor de mídia, servidor de mídia e memória legível por computador
US9526980B2 (en) * 2012-12-21 2016-12-27 Microsoft Technology Licensing, Llc Client side processing of game controller input
US10616086B2 (en) * 2012-12-27 2020-04-07 Navidia Corporation Network adaptive latency reduction through frame rate control
KR20170094554A (ko) * 2013-03-29 2017-08-18 브이아이디 스케일, 인크. 조기 패킷 손실 검출 및 피드백
US9113306B2 (en) * 2013-08-02 2015-08-18 Google Inc. Predictive assistance information
US9912562B2 (en) * 2014-03-31 2018-03-06 Microsoft Technology Licensing, Llc Measuring latency in an interactive application

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7020698B2 (en) * 2000-05-31 2006-03-28 Lucent Technologies Inc. System and method for locating a closest server in response to a client domain name request
US20020194269A1 (en) * 2001-06-18 2002-12-19 Yutaka Owada Distributed processing system, distributed processing method and client terminal capable of using the method
EP1966713A2 (en) * 2005-12-30 2008-09-10 Ashish A Pandya Runtime adaptable search processor
CN102106112A (zh) * 2008-07-28 2011-06-22 万特里克斯公司 用于时变容量的连接的流速率适应
CN101534325A (zh) * 2009-04-15 2009-09-16 深圳市融创天下科技发展有限公司 一种富媒体系统设计中媒体对象的动态调试方法
US8903897B2 (en) * 2011-07-08 2014-12-02 Google Inc. System and method for providing interactive content to non-native application environments
CN102739681A (zh) * 2012-06-29 2012-10-17 奇智软件(北京)有限公司 一种登录控件进行服务器登录的方法和装置
CN103793070A (zh) * 2014-01-27 2014-05-14 百度在线网络技术(北京)有限公司 一种输入请求消息的发送方法及系统
CN104202119A (zh) * 2014-08-26 2014-12-10 联想(北京)有限公司 一种数据发送方法、系统及电子设备

Also Published As

Publication number Publication date
US10135890B2 (en) 2018-11-20
CN107431662B (zh) 2021-12-07
TW201644237A (zh) 2016-12-16
CN114363265A (zh) 2022-04-15
EP3266168A4 (en) 2018-07-25
US20160261656A1 (en) 2016-09-08
WO2016144821A1 (en) 2016-09-15
JP6547001B2 (ja) 2019-07-17
EP3266168A1 (en) 2018-01-10
TWI635727B (zh) 2018-09-11
USRE49277E1 (en) 2022-11-01
EP3266168B1 (en) 2019-07-17
JP2018510568A (ja) 2018-04-12

Similar Documents

Publication Publication Date Title
US10701072B2 (en) Apparatus and method for secure provisioning of a communication device
US10567553B2 (en) Apparatus and method for secure over the air programming of a communication device
US8149711B2 (en) Data stream control for network devices
US20210007176A1 (en) Wireless connection establishing methods and wireless connection establishing apparatuses
US20120278493A1 (en) System and/or Method for Client-Driven Server Load Distribution
CN109408015A (zh) 一种多媒体文件处理方法、发送终端和显示终端
US20210281401A1 (en) Methods, systems, and computer readable media for utilizing predetermined encryption keys in a test simulation environment
CN113422818B (zh) 一种数据级联传输方法、系统及节点设备
US9538132B2 (en) Methods, devices, and systems for controlling audio and video transmission
WO2017148419A1 (zh) 数据传输方法及服务器
KR101375133B1 (ko) 통합 sns 게이트웨이
US8239548B2 (en) Endpoint discriminator in network transport protocol startup packets
JP6393475B2 (ja) 通信アダプタ装置、通信システム、トンネル通信方法、及びプログラム
CN107431662A (zh) 云输入信道管理
CN115277649A (zh) 多媒体会议场景下的文档协同编辑的方法及装置
CN113347386A (zh) 推送媒体流的方法、拉取媒体流的方法及设备
CN115086285B (zh) 一种数据处理方法、装置、存储介质及电子设备
WO2018098761A1 (zh) 数据传输方法及设备
US20240015344A1 (en) Controlling the transmission of at least one item of content from a piece of provider equipment to an ingest node
KR101528268B1 (ko) 콘텐츠를 원격 위치들에 스트리밍하기 위한 시스템과 방법
US11234032B2 (en) Method of managing the right of access to a digital content
WO2023129183A1 (en) System, method and computer-readable medium for streaming data accessing

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant