CN110430144A - 数据处理方法、装置、电子设备以及介质 - Google Patents
数据处理方法、装置、电子设备以及介质 Download PDFInfo
- Publication number
- CN110430144A CN110430144A CN201910850222.5A CN201910850222A CN110430144A CN 110430144 A CN110430144 A CN 110430144A CN 201910850222 A CN201910850222 A CN 201910850222A CN 110430144 A CN110430144 A CN 110430144A
- Authority
- CN
- China
- Prior art keywords
- data
- transmitted
- electronic equipment
- transmission resource
- resource
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/22—Traffic shaping
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/04—Protocols for data compression, e.g. ROHC
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本公开提供了一种数据处理方法,该方法包括:获取初始待传输数据;确定第一电子设备的第一数据处理资源和第一数据传输资源,第一数据处理资源基于确定的处理方式处理初始待传输数据,得到目标待传输数据,第一数据传输资源用于将目标待传输数据传输至第二电子设备;基于第一数据处理资源和第一数据传输资源,确定用于处理初始待传输数据的处理方式;以及基于第一数据传输资源,将目标待传输数据传输至第二电子设备;第一数据传输资源是网络传输资源的至少一部分。本公开还提供了一种数据处理装置、一种电子设备、一种计算机可读存储介质。
Description
技术领域
本公开涉及一种数据处理方法、一种数据处理装置、一种电子设备以及一种计算机可读存储介质。
背景技术
在数据传输过程中,如果网络稳定性差,数据就会有积压,为保证数据的完整性,在网络恢复正常时,需要继续传输积压的数据。在相关技术中,在网络稳定性较差的情况下,通常将数据进行缓存,当网络恢复正常时,同时传输一大批数据,导致占用较大的传输带宽。如果网络稳定的间隔过短,导致无法在间隔内完成该大批数据的传输,则需要在下次网络恢复时重新传输该数据,从而造成传输资源的浪费,并且也无法保证数据传输的实时性。
发明内容
本公开的一个方面提供了一种数据处理方法,所述方法包括:获取初始待传输数据,确定第一电子设备的第一数据处理资源和第一数据传输资源,所述第一数据处理资源基于确定的处理方式处理所述初始待传输数据,得到目标待传输数据,所述第一数据传输资源用于将所述目标待传输数据传输至第二电子设备,基于所述第一数据处理资源和所述第一数据传输资源,确定用于处理所述初始待传输数据的所述处理方式,基于所述第一数据传输资源,将所述目标待传输数据传输至所述第二电子设备,所述第一数据传输资源是网络传输资源的至少一部分。
可选地,上述基于所述第一数据处理资源和所述第一数据传输资源,确定用于处理所述初始待传输数据的所述处理方式包括:在所述第一数据处理资源大于预设处理资源并且所述第一数据传输资源小于预设传输资源的情况下,确定第一处理方式处理所述初始待传输数据,在所述第一数据处理资源小于或等于所述预设处理资源并且所述第一数据传输资源大于或等于所述预设传输资源的情况下,确定第二处理方式处理所述初始待传输数据。
可选地,上述第一处理方式包括以第一压缩比处理初始待传输数据、以第一采样频率处理初始待传输数据中的至少一种,所述第二处理方式包括以第二压缩比处理初始待传输数据、以第二采样频率处理初始待传输数据中的至少一种,其中,所述第一压缩比大于所述第二压缩比,所述第一采样频率小于所述第二采样频率。
可选地,上述方法还包括:获取所述第一电子设备与所述第二电子设备的历史连通状态,基于所述历史连通状态,确定所述第一电子设备与所述第二电子设备的当前连通状态。
可选地,上述当前连通状态表征所述第一电子设备能够成功传输目标待传输数据的第一数据量,所述基于所述第一数据传输资源,将所述目标待传输数据传输至所述第二电子设备包括:基于所述第一数据传输资源和所述当前连通状态,确定所要传输的目标待传输数据的第一数据量,将所述第一数据量的目标待传输数据传输至所述第二电子设备。
可选地,上述获取初始待传输数据包括:基于所述历史连通状态,确定所述初始待传输数据的第二数据量,获取满足所述第二数据量的所述初始待传输数据。
可选地,上述基于所述第一数据处理资源和所述第一数据传输资源,确定用于处理所述初始待传输数据的所述处理方式包括:获取所述第二电子设备的第二数据处理资源和第二数据传输资源,基于所述第一数据处理资源、所述第一数据传输资源、所述第二数据处理资源以及所述第二数据传输资源,确定用于处理所述初始待传输数据的处理方式,所述第二数据传输资源是网络传输资源的至少一部分。
本公开的另一个方面提供了一种数据处理装置,所述装置包括:第一获取模块、第一确定模块、第二确定模块以及传输模块。其中,第一获取模块,获取初始待传输数据。第一确定模块,确定第一电子设备的第一数据处理资源和第一数据传输资源,所述第一数据处理资源基于确定的处理方式处理所述初始待传输数据,得到目标待传输数据,所述第一数据传输资源用于将所述目标待传输数据传输至第二电子设备。第二确定模块,基于所述第一数据处理资源和所述第一数据传输资源,确定用于处理所述初始待传输数据的所述处理方式。传输模块,基于所述第一数据传输资源,将所述目标待传输数据传输至第二电子设备;所述第一数据传输资源是网络传输资源的至少一部分。
可选地,上述基于所述第一数据处理资源和所述第一数据传输资源,确定用于处理所述初始待传输数据的所述处理方式包括:在所述第一数据处理资源大于预设处理资源并且所述第一数据传输资源小于预设传输资源的情况下,确定第一处理方式处理所述初始待传输数据,在所述第一数据处理资源小于或等于所述预设处理资源并且所述第一数据传输资源大于或等于所述预设传输资源的情况下,确定第二处理方式处理所述初始待传输数据。
可选地,上述第一处理方式包括以第一压缩比处理初始待传输数据、以第一采样频率处理初始待传输数据中的至少一种,所述第二处理方式包括以第二压缩比处理初始待传输数据、以第二采样频率处理初始待传输数据中的至少一种,其中,所述第一压缩比大于所述第二压缩比,所述第一采样频率小于所述第二采样频率。
可选地,上述装置还包括:第二获取模块以及第三确定模块。其中,第二获取模块,获取所述第一电子设备与所述第二电子设备的历史连通状态,第三确定模块,基于所述历史连通状态,确定所述第一电子设备与所述第二电子设备的当前连通状态。
可选地,上述传输模块包括:第一确定子模块以及传输子模块。其中,第一确定子模块,基于所述第一数据传输资源和所述当前连通状态,确定所要传输的目标待传输数据的第一数据量,传输子模块,将所述第一数据量的目标待传输数据传输至所述第二电子设备。
可选地,上述第一获取模块包括:第二确定子模块以及获取子模块。其中,第二确定子模块,基于所述历史连通状态,确定所述初始待传输数据的第二数据量,获取子模块,获取满足所述第二数据量的所述初始待传输数据。
可选地,上述基于所述第一数据处理资源和所述第一数据传输资源,确定用于处理所述初始待传输数据的所述处理方式包括:获取所述第二电子设备的第二数据处理资源和第二数据传输资源,基于所述第一数据处理资源、所述第一数据传输资源、所述第二数据处理资源以及所述第二数据传输资源,确定用于处理所述初始待传输数据的处理方式,所述第二数据传输资源是网络传输资源的至少一部分。
本公开的另一个方面提供了一种电子设备,包括:处理器以及存储器。其中,存储器用于存储可执行指令,其中,当所述指令被所述处理器执行时,使得所述处理器执行用于实现如上的方法。
本公开的另一方面提供了一种非易失性可读存储介质,存储有计算机可执行指令,指令在被执行时用于实现如上的方法。
本公开的另一方面提供了一种计算机程序,计算机程序包括计算机可执行指令,指令在被执行时用于实现如上的方法。
附图说明
为了更完整地理解本公开及其优势,现在将参考结合附图的以下描述,其中:
图1示意性示出了根据本公开实施例的数据处理方法和数据处理装置的应用场景;
图2示意性示出了根据本公开实施例的数据处理方法的流程图;
图3示意性示出了根据本公开另一实施例的数据处理方法的流程图;
图4示意性示出了根据本公开实施例的数据处理装置的框图;
图5示意性示出了根据本公开另一实施例的数据处理装置的框图;以及
图6示意性示出了根据本公开实施例的用于实现数据处理的计算机系统的方框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
附图中示出了一些方框图和/或流程图。应理解,方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程控制装置的处理器,从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/或流程图中所说明的功能/操作的装置。
因此,本公开的技术可以硬件和/或软件(包括固件、微代码等)的形式来实现。另外,本公开的技术可以采取存储有指令的计算机可读介质上的计算机程序产品的形式,该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。在本公开的上下文中,计算机可读介质可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,计算机可读介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。计算机可读介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
本公开的实施例提供了一种数据处理方法,该方法包括:获取初始待传输数据,确定第一电子设备的第一数据处理资源和第一数据传输资源,第一数据处理资源基于确定的处理方式处理初始待传输数据,得到目标待传输数据,第一数据传输资源用于将目标待传输数据传输至第二电子设备,基于第一数据处理资源和第一数据传输资源,确定用于处理初始待传输数据的处理方式,基于第一数据传输资源,将目标待传输数据传输至第二电子设备,第一数据传输资源是网络传输资源的至少一部分。
图1示意性示出了根据本公开实施例的数据处理方法和数据处理装置的应用场景。需要注意的是,图1所示仅为可以应用本公开实施例的场景的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,该应用场景100例如包括第一电子设备110、第二电子设备120以及网络130。
其中,第一电子设备110例如可以是服务器、各种终端设备。其中,终端设备例如可以是手机、电脑、平板等等。类似地,第二电子设备120例如也可以是服务器、各种终端设备。
根据本公开实施例,第一电子设备110例如可以将待传输数据通过网络130发送给第二电子设备120。
但是,在待传输数据的传输过程中,如果网络130的稳定性较差,可能导致传输失败,从而导致数据积压。为了保证数据的完整性,在网络130恢复正常时,需要继续传输积压的待传输数据。
因此,为了保证数据传输的成功率,第一电子设备110可以根据网络130所提供的资源确定当前所要传输的待传输数据的数据量,并对待传输数据进行处理,以将处理的待传输数据通过网络130传输至第二电子设备120,以此提高数据的传输成功率和传输效率。
下面结合图1的应用场景,参考图2~图3来描述根据本公开示例性实施方式的数据处理方法。需要注意的是,上述应用场景仅是为了便于理解本公开的精神和原理而示出,本公开的实施方式在此方面不受任何限制。相反,本公开的实施方式可以应用于适用的任何场景。
图2示意性示出了根据本公开实施例的数据处理方法的流程图。
如图2所示,该方法包括操作S210~S240。可以理解,本公开实施例不限制操作S210~S240中各个操作的执行顺序。
在操作S210,获取初始待传输数据。
在操作S220,确定第一电子设备的第一数据处理资源和第一数据传输资源,第一数据处理资源基于确定的处理方式处理初始待传输数据,得到目标待传输数据,第一数据传输资源用于将目标待传输数据传输至第二电子设备。
根据本公开实施例,第一数据处理资源例如可以是第一电子设备的计算资源,例如可以是CPU资源。第一数据传输资源例如可以是第一电子设备的带宽资源。
在第一电子设备将初始待传输数据传输给第二电子设备之前,可以首先确定第一电子设备的第一数据处理资源和第一数据传输资源,以便后续可以基于第一数据处理资源处理初始待传输数据得到目标待传输数据,以及基于第一数据传输资源将目标待传输数据传输至第二电子设备。
在操作S230,基于第一数据处理资源和第一数据传输资源,确定用于处理初始待传输数据的处理方式。
根据本公开实施例,当确认第一电子设备的第一数据处理资源和第一数据传输资源之后,第一电子设备可以根据其自身的第一数据处理资源和第一数据传输资源确定用于处理初始待传输数据的处理方式。其中,处理方式例如可以是对初始待传输数据进行压缩处理或采样处理,以使得处理得到的较小数据量的目标待传输数据,提高数据传输的成功率和传输效率。
具体地,在第一数据处理资源大于预设处理资源并且第一数据传输资源小于预设传输资源的情况下,确定第一处理方式处理初始待传输数据。
根据本公开实施例,预设处理资源例如可以是预先定义的计算资源,例如可以是预先定义的CPU资源,预设传输资源例如可以是预先定义的带宽资源。在第一电子设备当前可用的计算资源大于预先定义的CPU资源,并且当第一电子设备当前可用的带宽资源小于预先定义的带宽资源时,确定第一处理方式处理初始待传输数据得到目标待传输数据。
其中,第一处理方式例如包括以第一压缩比处理初始待传输数据、以第一采样频率处理初始待传输数据中的至少一种。换言之,在第一电子设备的当前计算资源较多、带宽资源较少的情况下,选择压缩比较大的第一压缩比对初始待传输数据进行压缩处理,得到数据量较小的目标待传输数据,以便在带宽资源较少的情况下快速传输目标待传输数据,其中,通过压缩比较大的第一压缩比对初始待传输数据进行压缩处理时所需的计算资源较多。
或者,在第一电子设备的当前计算资源较多、带宽资源较少的情况下,选择采样频率较小的第一采样频率对初始待传输数据进行采样,得到数据量较小的目标待传输数据,以便在带宽资源较少的情况下快速传输目标待传输数据。
根据本公开实施例,在第一数据处理资源小于或等于预设处理资源并且第一数据传输资源大于或等于预设传输资源的情况下,确定第二处理方式处理初始待传输数据。即,在第一电子设备当前可用的计算资源小于或等于预先定义的CPU资源,并且当第一电子设备当前可用的带宽资源大于或等于预先定义的带宽资源时,确定第二处理方式处理初始待传输数据得到目标待传输数据。
其中,第二处理方式包括以第二压缩比处理初始待传输数据、以第二采样频率处理初始待传输数据中的至少一种。换言之,在第一电子设备的当前计算资源较少、带宽资源较多的情况下,选择压缩比较小的第二压缩比对初始待传输数据进行压缩处理,得到数据量较大的目标待传输数据,以便在带宽资源较多的情况下传输数据量大的目标待传输数据,其中,通过压缩比较小的第二压缩比对初始待传输数据进行压缩处理时所需的计算资源较少。
或者,在第一电子设备的当前计算资源较少、带宽资源较多的情况下,选择采样频率较大的第二采样频率对初始待传输数据进行采样,得到数据量较大的目标待传输数据,以便在带宽资源较多的情况下传输数据量大的目标待传输数据。
可以理解,本公开实施例的第一压缩比大于第二压缩比,第一采样频率小于第二采样频率。
在操作S240,基于第一数据传输资源,将目标待传输数据传输至第二电子设备,第一数据传输资源是网络传输资源的至少一部分。其中,网络传输资源例如可以被第一电子设备或者第二电子设备使用,因此,第一电子设备的第一数据传输资源例如可以是网络传输资源中的一部分。
本公开实施例的技术方案,通过实时确定第一电子设备当前的计算资源和带宽资源,并基于当前的计算资源和带宽资源处理初始待传输数据得到目标待传输数据,以提高数据传输的成功率和传输效率,保证数据传输的实时性。
图3示意性示出了根据本公开另一实施例的数据处理方法的流程图。
如图3所示,该方法包括操作S210~S240以及操作S310~320。其中,操作S210~S240与上参考图2描述的操作相同或类似,在此不再赘述。可以理解,本公开实施例不限制操作S210~S240以及操作S310~320中各个操作的执行顺序。
在操作S310,获取第一电子设备与第二电子设备的历史连通状态。
根据本公开实施例,由于第一电子设备与第二电子设备之间的网络稳定性存在异常情况,例如网络存在间断的情况,如果在数据传输过程中网络稳定性较差将会导致数据传输失败。因此,可以基于第一电子设备与第二电子设备之间网络的历史连通状态,总结分析网络连通情况或者间断规律,以便基于网络连通情况或者间断规律决定如何处理初始待传输数据。
在操作S320,基于历史连通状态,确定第一电子设备与第二电子设备的当前连通状态。其中,当前连通状态表征第一电子设备能够成功传输目标待传输数据的第一数据量。
根据本公开实施例,例如根据网络的历史连通情况或者间断规律,分析得出网络的当前连通状态,例如分析得到当前网络的连接时长。
例如,历史连通状态包括以前的每一天在12:00-12:30的时段内网络是连通的,12:00之前或12:30之后网络不稳定或网络断开,则可以根据历史连通状态,确认当前12:00-12:30的时段内网络处于连通状态,则可以在当前12:00-12:30的时段内传输数据。其中,第一数据量例如为在当前连通状态下能够成功传输数据的数据量,例如12:00-12:30的时段内能够成功传输目标待传输数据的数据大小,例如第一数据量为100G。
根据本公开实施例,上述操作S240具体包括操作S241~S242。
在操作S241,基于第一数据传输资源和当前连通状态,确定所要传输的目标待传输数据的第一数据量。
在操作S242,将第一数据量的目标待传输数据传输至第二电子设备。
例如当前12:00-12:30的时段内网络处于连通状态,且在12:00-12:30内能够成功传输目标待传输数据的数据大小为100G,此时可以将初始待传输数据处理成数据量大小为100G的目标待传输数据,并将该100G目标待传输数据传输至第二电子设备。
或者,在另一种情况下,如果初始待传输数据和目标待传输数据的数据量大小差别不大的情况下,例如第一压缩比或第二压缩比较小,或者第一采样频率和第二采样频率较大。则可以基于历史连通状态确定初始待传输数据的第二数据量。具体地,上述操作S210例如包括S211~S212。
在操作S211,基于历史连通状态,确定初始待传输数据的第二数据量。
在操作S212,获取满足第二数据量的初始待传输数据。
例如当前12:00-12:30的时段内网络处于连通状态,且在12:00-12:30的时段内能够成功传输目标待传输数据的数据量大小为100G,则可以确定初始待传输数据的第二数据量为100G,在将初始待传输数据处理成目标待传输数据后,目标待传输数据的数据量至少不大于100G。最后,将目标待传输数据传输至第二电子设备。
在本公开实施例的技术方案中,通过总结网络不稳定性的规律,实现数据分批上传,即,在网络连通时长内传输小量数据,保证数据传输成功率。
根据本公开实施例,上述操作S230具体包括:获取第二电子设备的第二数据处理资源和第二数据传输资源,基于第一数据处理资源、第一数据传输资源、第二数据处理资源以及第二数据传输资源,确定用于处理初始待传输数据的处理方式,第二数据传输资源是网络传输资源的至少一部分。
例如,在第一电子设备将目标待传输数据传输给第二电子设备之后,第二电子设备需要利用自身的第二数据处理资源实时地对接收到的目标待传输数据进行处理,例如对接收到的目标待传输数据进行解压处理等等。或者,第二电子设备需要利用自身的第二数据传输资源将接收到的目标待传输数据传输至其他设备中进行相应操作。其中,网络传输资源例如可以被第一电子设备或者第二电子设备使用,因此,第二电子设备的第二数据传输资源例如可以是网络传输资源中的一部分。
因此,本公开实施例通过同时确定第一电子设备的第一数据处理资源和第一数据传输资源,以及第二电子设备的第二数据处理资源和第二数据传输资源,并同时基于第一数据处理资源、第一数据传输资源、第二数据处理资源以及第二数据传输资源,确定用于处理初始待传输数据的处理方式。
例如,如果第一电子设备的第一数据处理资源能够处理100G初始待传输数据得到目标待传输数据,第一数据传输资源能够传输80G目标待传输数据,且第二电子设备的第二数据处理资源能够处理70G接收到的目标待传输数据,第二数据传输资源能够传输60G接收到的目标待传输数据,则第一电子设备可以处理小于或等于100G的初始待传输数据得到小于或等于60G目标待传输数据,并将小于或等于60G目标待传输数据发送至第二电子设备,便于第二电子设备继续处理或继续传输接收到的小于或等于60G目标待传输数据。
本公开实施例通过同时确定第一电子设备和第二电子设备的计算资源和带宽资源,并根据第一电子设备和第二电子设备的计算资源和带宽资源确定数据的处理方式,同时确保第一电子设备能够及时将数据传输至第二电子设备以及确保第二电子设备能够及时处理来自第一电子设备的数据,提高了数据的传输和处理效率。
图4示意性示出了根据本公开实施例的数据处理装置的框图。
如图4所示,数据处理装置400包括第一获取模块410、第一确定模块420、第二确定模块430以及传输模块440。
第一获取模块410可以用于获取初始待传输数据。根据本公开实施例,第一获取模块410例如可以执行上文参考图2描述的操作S210,在此不再赘述。
第一确定模块420可以用于确定第一电子设备的第一数据处理资源和第一数据传输资源,第一数据处理资源基于确定的处理方式处理初始待传输数据,得到目标待传输数据,第一数据传输资源用于将目标待传输数据传输至第二电子设备。根据本公开实施例,第一确定模块420例如可以执行上文参考图2描述的操作S220,在此不再赘述。
第二确定模块430可以用于基于第一数据处理资源和第一数据传输资源,确定用于处理初始待传输数据的处理方式。根据本公开实施例,第二确定模块430例如可以执行上文参考图2描述的操作S230,在此不再赘述。
传输模块440可以用于基于第一数据传输资源,将目标待传输数据传输至第二电子设备,第一数据传输资源是网络传输资源的至少一部分。根据本公开实施例,传输模块440例如可以执行上文参考图2描述的操作S240,在此不再赘述。
根据本公开实施例,基于第一数据处理资源和第一数据传输资源,确定用于处理初始待传输数据的处理方式包括:在第一数据处理资源大于预设处理资源并且第一数据传输资源小于预设传输资源的情况下,确定第一处理方式处理初始待传输数据,在第一数据处理资源小于或等于预设处理资源并且第一数据传输资源大于或等于预设传输资源的情况下,确定第二处理方式处理初始待传输数据。
根据本公开实施例,第一处理方式包括以第一压缩比处理初始待传输数据、以第一采样频率处理初始待传输数据中的至少一种,第二处理方式包括以第二压缩比处理初始待传输数据、以第二采样频率处理初始待传输数据中的至少一种,其中,第一压缩比大于第二压缩比,第一采样频率小于第二采样频率。
图5示意性示出了根据本公开另一实施例的数据处理装置的框图。
如图5所示,数据处理装置500包括第一获取模块410、第一确定模块420、第二确定模块430、传输模块440、第二获取模块510以及第三确定模块520。其中,第一获取模块410、第一确定模块420、第二确定模块430以及传输模块440与上参考图4描述的模块相同或类似,在此不再赘述。
第二获取模块510可以用于获取第一电子设备与第二电子设备的历史连通状态。根据本公开实施例,第二获取模块510例如可以执行上文参考图3描述的操作S310,在此不再赘述。
第三确定模块520可以用于基于历史连通状态,确定第一电子设备与第二电子设备的当前连通状态。根据本公开实施例,第三确定模块520例如可以执行上文参考图3描述的操作S320,在此不再赘述。
根据本公开实施例,传输模块440例如包括:第一确定子模块441以及传输子模块442。其中,第一确定子模块441例如可以执行上文参考图3描述的操作S241,在此不再赘述。传输子模块442例如可以执行上文参考图3描述的操作S242,在此不再赘述。
根据本公开实施例,第一获取模块410例如包括:第二确定子模块411以及获取子模块412。其中,第二确定子模块411例如可以执行上文参考图3描述的操作S211,在此不再赘述。获取子模块412例如可以执行上文参考图3描述的操作S212,在此不再赘述。
根据本公开实施例,基于第一数据处理资源和第一数据传输资源,确定用于处理初始待传输数据的处理方式包括:获取第二电子设备的第二数据处理资源和第二数据传输资源,基于第一数据处理资源、第一数据传输资源、第二数据处理资源以及第二数据传输资源,确定用于处理初始待传输数据的处理方式,第二数据传输资源是网络传输资源的至少一部分。
根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
例如,第一获取模块410、第二确定子模块411、获取子模块412、第一确定模块420、第二确定模块430、传输模块440、第一确定子模块441、传输子模块442、第二获取模块510以及第三确定模块520中的任意多个可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本公开的实施例,第一获取模块410、第二确定子模块411、获取子模块412、第一确定模块420、第二确定模块430、传输模块440、第一确定子模块441、传输子模块442、第二获取模块510以及第三确定模块520中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,第一获取模块410、第二确定子模块411、获取子模块412、第一确定模块420、第二确定模块430、传输模块440、第一确定子模块441、传输子模块442、第二获取模块510以及第三确定模块520中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图6示意性示出了根据本公开实施例的用于实现数据处理的计算机系统的方框图。图6示出的计算机系统仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示,实现数据处理的计算机系统600包括处理器601、计算机可读存储介质602。该系统600可以执行根据本公开实施例的方法。
具体地,处理器601例如可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器601还可以包括用于缓存用途的板载存储器。处理器601可以是用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
计算机可读存储介质602,例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,可读存储介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
计算机可读存储介质602可以包括计算机程序603,该计算机程序603可以包括代码/计算机可执行指令,其在由处理器601执行时使得处理器601执行根据本公开实施例的方法或其任何变形。
计算机程序603可被配置为具有例如包括计算机程序模块的计算机程序代码。例如,在示例实施例中,计算机程序603中的代码可以包括一个或多个程序模块,例如包括603A、模块603B、……。应当注意,模块的划分方式和个数并不是固定的,本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合,当这些程序模块组合被处理器601执行时,使得处理器601可以执行根据本公开实施例的方法或其任何变形。
根据本公开的实施例,第一获取模块410、第二确定子模块411、获取子模块412、第一确定模块420、第二确定模块430、传输模块440、第一确定子模块441、传输子模块442、第二获取模块510以及第三确定模块520中的至少一个可以实现为参考图6描述的计算机程序模块,其在被处理器601执行时,可以实现上面描述的相应操作。
本公开还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现以上数据处理方法。
根据本公开的实施例,计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、有线、光缆、射频信号等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。
Claims (10)
1.一种数据处理方法,所述方法包括:
获取初始待传输数据;
确定第一电子设备的第一数据处理资源和第一数据传输资源,所述第一数据处理资源基于确定的处理方式处理所述初始待传输数据,得到目标待传输数据,所述第一数据传输资源用于将所述目标待传输数据传输至第二电子设备;
基于所述第一数据处理资源和所述第一数据传输资源,确定用于处理所述初始待传输数据的所述处理方式;以及
基于所述第一数据传输资源,将所述目标待传输数据传输至所述第二电子设备;所述第一数据传输资源是网络传输资源的至少一部分。
2.根据权利要求1所述的方法,其中,所述基于所述第一数据处理资源和所述第一数据传输资源,确定用于处理所述初始待传输数据的所述处理方式包括:
在所述第一数据处理资源大于预没处理资源并且所述第一数据传输资源小于预设传输资源的情况下,确定第一处理方式处理所述初始待传输数据;以及
在所述第一数据处理资源小于或等于所述预设处理资源并且所述第一数据传输资源大于或等于所述预设传输资源的情况下,确定第二处理方式处理所述初始待传输数据。
3.根据权利要求2所述的方法,其中:
所述第一处理方式包括以第一压缩比处理初始待传输数据、以第一采样频率处理初始待传输数据中的至少一种;
所述第二处理方式包括以第二压缩比处理初始待传输数据、以第二采样频率处理初始待传输数据中的至少一种;
其中,所述第一压缩比大于所述第二压缩比,所述第一采样频率小于所述第二采样频率。
4.根据权利要求1-3中任意一项所述的方法,还包括:
获取所述第一电子设备与所述第二电子设备的历史连通状态;
基于所述历史连通状态,确定所述第一电子设备与所述第二电子设备的当前连通状态。
5.根据权利要求4所述的方法,其中,所述当前连通状态表征所述第一电子设备能够成功传输目标待传输数据的第一数据量;
所述基于所述第一数据传输资源,将所述目标待传输数据传输至所述第二电子设备包括:
基于所述第一数据传输资源和所述当前连通状态,确定所要传输的目标待传输数据的第一数据量;以及
将所述第一数据量的目标待传输数据传输至所述第二电子设备。
6.根据权利要求4所述的方法,其中,所述获取初始待传输数据包括:
基于所述历史连通状态,确定所述初始待传输数据的第二数据量;以及
获取满足所述第二数据量的所述初始待传输数据。
7.根据权利要求1所述的方法,其中,所述基于所述第一数据处理资源和所述第一数据传输资源,确定用于处理所述初始待传输数据的所述处理方式包括:
获取所述第二电子设备的第二数据处理资源和第二数据传输资源;以及
基于所述第一数据处理资源、所述第一数据传输资源、所述第二数据处理资源以及所述第二数据传输资源,确定用于处理所述初始待传输数据的处理方式;
所述第二数据传输资源是网络传输资源的至少一部分。
8.一种数据处理装置,所述装置包括:
第一获取模块,获取初始待传输数据;
第一确定模块,确定第一电子设备的第一数据处理资源和第一数据传输资源,所述第一数据处理资源基于确定的处理方式处理所述初始待传输数据,得到目标待传输数据,所述第一数据传输资源用于将所述目标待传输数据传输至第二电子设备;
第二确定模块,基于所述第一数据处理资源和所述第一数据传输资源,确定用于处理所述初始待传输数据的所述处理方式;以及
传输模块,基于所述第一数据传输资源,将所述目标待传输数据传输至第二电子设备;所述第一数据传输资源是网络传输资源的至少一部分。
9.一种电子设备,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现权利要求1至7中任一项所述的方法。
10.一种计算机可读存储介质,存储有计算机可执行指令,所述指令在被执行时用于实现权利要求1至7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910850222.5A CN110430144A (zh) | 2019-09-09 | 2019-09-09 | 数据处理方法、装置、电子设备以及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910850222.5A CN110430144A (zh) | 2019-09-09 | 2019-09-09 | 数据处理方法、装置、电子设备以及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110430144A true CN110430144A (zh) | 2019-11-08 |
Family
ID=68418877
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910850222.5A Pending CN110430144A (zh) | 2019-09-09 | 2019-09-09 | 数据处理方法、装置、电子设备以及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110430144A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112631978A (zh) * | 2020-12-18 | 2021-04-09 | 北京地平线信息技术有限公司 | 传输数据的方法及装置、电子设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102045772A (zh) * | 2009-10-21 | 2011-05-04 | 华为技术有限公司 | 一种数据传输方法及装置 |
CN103188247A (zh) * | 2011-12-31 | 2013-07-03 | 深圳市金蝶友商电子商务服务有限公司 | 一种数据传输方法及系统 |
WO2017097071A1 (zh) * | 2015-12-09 | 2017-06-15 | 北京奇虎科技有限公司 | 数据压缩及解压的方法及装置 |
CN109194647A (zh) * | 2018-08-30 | 2019-01-11 | 北京金山安全软件有限公司 | 数据传输方法、装置、电子设备及存储介质 |
-
2019
- 2019-09-09 CN CN201910850222.5A patent/CN110430144A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102045772A (zh) * | 2009-10-21 | 2011-05-04 | 华为技术有限公司 | 一种数据传输方法及装置 |
CN103188247A (zh) * | 2011-12-31 | 2013-07-03 | 深圳市金蝶友商电子商务服务有限公司 | 一种数据传输方法及系统 |
WO2017097071A1 (zh) * | 2015-12-09 | 2017-06-15 | 北京奇虎科技有限公司 | 数据压缩及解压的方法及装置 |
CN109194647A (zh) * | 2018-08-30 | 2019-01-11 | 北京金山安全软件有限公司 | 数据传输方法、装置、电子设备及存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112631978A (zh) * | 2020-12-18 | 2021-04-09 | 北京地平线信息技术有限公司 | 传输数据的方法及装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112217831B (zh) | 关于物联网设备的信息交互方法、装置及设备 | |
US11349753B2 (en) | Converged routing for distributed computing systems | |
KR20220062101A (ko) | 정보 송신 방법, 장치, 판독 가능한 매체 및 전자 장치 | |
CN111818136B (zh) | 数据处理方法、装置、电子设备及计算机可读介质 | |
CN106453474A (zh) | 在不稳定网络环境中的大文件的网络传输 | |
CN110377440B (zh) | 信息处理方法和装置 | |
CN111930709B (zh) | 数据存储方法、装置、电子设备和计算机可读介质 | |
CN111314439A (zh) | 一种数据发送方法、装置和电子设备 | |
CN112434620B (zh) | 场景文字识别方法、装置、设备和计算机可读介质 | |
CN105337642B (zh) | 一种离线终端访问网络数据的方法及系统 | |
CN111263220B (zh) | 视频的处理方法、装置、电子设备及计算机可读存储介质 | |
CN103685426A (zh) | 信息处理设备和信息处理方法 | |
CN109787829B (zh) | 用于生成信息的方法及装置 | |
CN111427693B (zh) | 数据处理方法、系统、介质、服务系统及旁路卸载系统 | |
CN110430144A (zh) | 数据处理方法、装置、电子设备以及介质 | |
CN113595966A (zh) | 串口通信控制、配置、测试方法、装置、电子设备和存储介质 | |
CN110719233A (zh) | 用于发送信息的方法及装置 | |
CN107925907A (zh) | 在支持多个无线电接入接口的移动通信系统中上传数据的装置和方法 | |
CN113452630A (zh) | 数据合流方法、数据拆分方法、装置、设备及存储介质 | |
CN108616567A (zh) | 一种图片传输方法、系统、服务器、客户端及用户设备 | |
CN109842498A (zh) | 一种客户端配置方法、服务器、客户端及电子设备 | |
CN111225423B (zh) | 一种数据前转的方法和设备 | |
KR102166361B1 (ko) | 저전력 통신을 수행하기 위한 서버 및 그 동작 방법 및 저전력 통신을 수행하기 위한 스케쥴링 맵 생성 방법 | |
CN111314021A (zh) | 数据传输方法、装置、电子设备及计算机可读存储介质 | |
CN112543228A (zh) | 数据传输方法、装置、电子设备和计算机可读介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
CB03 | Change of inventor or designer information |
Inventor after: Zhao Zhiqiang Inventor after: Ma Pengcheng Inventor before: Zhao Zhiqiang |
|
CB03 | Change of inventor or designer information | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191108 |
|
RJ01 | Rejection of invention patent application after publication |