CN113839976A - 数据采样方法和装置 - Google Patents

数据采样方法和装置 Download PDF

Info

Publication number
CN113839976A
CN113839976A CN202010588237.1A CN202010588237A CN113839976A CN 113839976 A CN113839976 A CN 113839976A CN 202010588237 A CN202010588237 A CN 202010588237A CN 113839976 A CN113839976 A CN 113839976A
Authority
CN
China
Prior art keywords
sampling
data
intermediate data
interval
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010588237.1A
Other languages
English (en)
Other versions
CN113839976B (zh
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN202010588237.1A priority Critical patent/CN113839976B/zh
Publication of CN113839976A publication Critical patent/CN113839976A/zh
Application granted granted Critical
Publication of CN113839976B publication Critical patent/CN113839976B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/565Conversion or adaptation of application format or content
    • H04L67/5651Reducing the amount or size of exchanged application data

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本公开的实施例提供了一种数据采样方法和装置。该数据采样方法包括:首先基于质数表确定采样间隔序列,对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据,向服务端上传采样数据,以质数作为采样间隔对处理数据进行采样,可以在任务处理操作步骤个数不固定时避免采样间隔造成的采样盲点,使得采样数据更全面,从而使得根据采样数据得到的分析结果更准确,同时基于质数表确定采样间隔序列,使得采样间隔分布逐渐稀松,能够使得根据采样间隔得到的采样数据更符合数据分析需求,提高了采样数据的多样性。

Description

数据采样方法和装置
技术领域
本公开的实施例涉及计算机技术领域,具体涉及数据采样方法和装置。
背景技术
在比较典型的用户手持设备上部署的图像识别系统,会处理用户的摄像头采样或者音频采样等输入信号,并通过机器识别的方式进行分类,这一过程一般来说为了节约用户流量,并且考虑到用户网络的速度显示,会直接在客户端上处理较大数据容量的数据,并直接丢弃经过识别的数据,这一过程中,如果我们需要检查客户端上运行的各类数据处理算法的性能和准确性,则需要采用数据采样上传的方式,间隔若干个的算法工作轮次,对客户端的算法输出的数据进行记录并上传到服务器。
一般由系统管理员在服务器上设置数据采样的间隔数来调节。此时每个客户端,都会访问这一服务器,并获得采样的间隔N,在运行数据处理算法时,每次间隔N个数据输入,采集一个数据输入,并记录上传到服务器,此时工程师可以检查到间隔N次获取一次的数据。
发明内容
本公开的实施例提出了一种数据采样方法和装置。
第一方面,本公开的实施例提供了一种数据采样方法,该方法包括:基于质数表确定采样间隔序列;对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据;向服务端上传采样数据。
在一些实施例中,对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据,包括:确定采样间隔序列中未被使用的最小采样间隔为当前采样间隔,响应于确定当前生成的中间数据与上一个被采样的中间数据之间的生成的数据的数量达到当前采样间隔,采样当前生成的中间数据作为当前的采样数据。
在一些实施例中,对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据,还包括:响应于确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离满足预设的时间条件,在将采样间隔序列中当前采样间隔的下一个采样间隔配置为新的当前采样间隔。
在一些实施例中,对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据,还包括:响应于确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离不满足预设的时间条件,基于当前采样间隔采样中间数据。
在一些实施例中,预设的时间条件包括:当前的采样数据与上一个被采样的中间数据的采样时间的时间距离小于上一个被采样的中间数据上传服务端所消耗的时间。
第二方面,本公开的实施例提供了一种数据采样装置,该装置包括:确定单元,被配置成基于质数表确定采样间隔序列;采样单元,被配置成对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据;获取单元,被配置成向服务端上传采样数据。
在一些实施例中,采样单元,进一步被配置成:确定采样间隔序列中未被使用的最小采样间隔为当前采样间隔,响应于确定当前生成的中间数据与上一个被采样的中间数据之间的生成的数据的数量达到当前采样间隔,采样当前生成的中间数据作为当前的采样数据。
在一些实施例中,采样单元,进一步被配置成:响应于确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离满足预设的时间条件,在将采样间隔序列中当前采样间隔的下一个采样间隔配置为新的当前采样间隔。
在一些实施例中,采样单元,进一步被配置成:响应于确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离不满足预设的时间条件,基于当前采样间隔采样中间数据。
在一些实施例中,预设的时间条件包括:当前的采样数据与上一个被采样的中间数据的采样时间的时间距离小于上一个被采样的中间数据上传服务端所消耗的时间。
第三方面,本公开的实施例提供了一种电子设备,该电子设备包括:一个或多个处理器;存储装置,其上存储有一个或多个程序;当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如第一方面中任一实施例描述的数据采样方法。
第四方面,本公开的实施例提供了一种计算机可读介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如第一方面中任一实施例描述的数据采样方法。
本公开的实施例提供的数据采样方法和装置,首先基于质数表确定采样间隔序列,对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据,向服务端上传采样数据,以质数作为采样间隔对处理数据进行采样,可以在任务处理操作步骤个数不固定时避免采样间隔造成的采样盲点,使得采样数据更全面,从而使得根据采样数据得到的分析结果更准确,同时基于质数表确定采样间隔序列,使得采样间隔分布逐渐稀松,能够使得根据采样间隔得到的采样数据更符合数据分析需求,提高了采样数据的多样性。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本公开的其它特征、目的和优点将会变得更明显:
图1是本公开的一个实施例可以应用于其中的示例性系统架构图;
图2是根据本公开的实施例的数据采样方法的一个实施例的流程图;
图3是根据本公开的实施例的数据采样方法的一个应用场景的示意图;
图4是根据本公开的实施例的基于采样间隔序列进行数据采样的一种示例性流程图;
图5是根据本公开的实施例的数据采样装置的一个实施例的结构示意图;
图6是适于用来实现本公开的实施例的电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本公开作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关公开,而非对该公开的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关公开相关的部分。
需要说明的是,在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本公开。
图1示出了可以应用本公开的实施例的数据采样方法和数据采样装置的示例性系统架构100。
如图1所示,系统架构100可以包括终端设备104、105,网络106,服务器101、102、103。网络106用以在终端设备104、105与服务器101、102、103之间提供通信链路的介质。网络106可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以通过终端设备104、105通过网络106与服务器101、102、103交互,以接收或发送信息等。终端设备104、105上可以安装有各种应用,例如数据处理应用、数据分析应用、即时通信工具、社交平台软件、搜索类应用、购物类应用等。
终端设备104、105可以是硬件,也可以是软件。当终端设备为硬件时,可以是具有显示屏并且支持与服务器通信的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。当终端设备为软件时,可以安装在上述所列举的电子设备中。其可以实现成多个软件或软件模块,也可以实现成单个软件或软件模块。在此不做具体限定。
终端设备104、105可以是具有数据处理功能、数据采样功能的终端,终端设备104、105可以对某一任务进行任务处理操作,并对任务处理操作生成的中间数据进行采样,然后将采样数据上传到服务器,以获取对该任务处理操作的分析结果。
服务器101、102、103可以是提供各种服务的服务器,例如对与其建立通信连接的终端设备发送的请求进行接收的后台服务器。后台服务器可以对终端设备发送的请求进行接收和分析等处理,并生成处理结果。
需要说明的是,服务器可以是硬件,也可以是软件。当服务器为硬件时,可以是为终端设备提供各种服务的各种电子设备。当服务器为软件时,可以实现成为为终端设备提供各种服务的多个软件或软件模块,也可以实现成为为终端设备提供各种服务的单个软件或软件模块。在此不做具体限定。
需要说明的是,本公开的实施例所提供的数据采样方法可以由终端设备104、105执行。相应地,数据采样装置可以设置于终端设备104、105中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
继续参考图2,示出了根据本公开的数据采样方法的一个实施例的流程200。该数据采样方法包括如下步骤:
步骤210,基于质数表确定采样间隔序列。
在本步骤中,数据采样方法运行于其上的执行主体可以从本地读取或从服务器获取到质数表,然后根据获取到的质数表确定出采样间隔序列,该采样间隔序列中包括多个质数采样间隔。上述执行主体可以直接将质数表作为采样间隔序列,还可以将质数表中的一部分按顺序排列的质数作为采样间隔序列,还可以从质数表中根据数据处理需求选取一些质数,并将这些质数顺序排列作为采样间隔序列。作为示例,终端可以从获取的质数表中选取前5个质数作为采样间隔序列,即质数2、3、5、7、11组成采样间隔序列。本申请对于从质数表中确定采样间隔序列的方法不进行具体限定,本领域技术人员可以根据数据处理需求进行确定。
步骤220,对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据。
在本步骤中,上述执行主体可以通过内存读取、摄像扫描、语音采集或用户输入等方式获取待处理任务,该待处理任务可以是由终端设备等电子设备执行的任务,例如神经网络模型的训练任务、图像处理任务、语音处理任务等等。以及,上述执行主体可以基于获取到的待处理任务,调用与该待处理任务对应的任务处理操作,该任务处理操作可以是对待处理任务进行处理得到处理数据的操作,例如,可以是与待处理任务对应的处理算法等等。其中,任务处理操作可以由多个不同的步骤组成,各步骤之间可以是关联关系,也可以是并列关系,还可以既包括关联关系,又包括并列关系。当任务处理操作中每个步骤之间是关联关系时,当前步骤的输入数据是上一步骤的输出数据;当任务处理操作中每个步骤之间是并列关系时,当前步骤的输入数据与其他步骤的输入数据和输出数据没有关联;当任务处理操作中每个步骤之间既包括关联关系,又包括并列关系时,某一步骤的输入数据可以是上一步骤的输出数据,某一步骤的输入数据可以与其他步骤的输入数据和输出数据没有关联。
上述执行主体可以采用与待处理任务对应的任务处理操作对待处理任务进行处理,得到处理过程中生成的中间数据。上述执行主体可以依次将采样间隔序列中的采样间隔作为当前采样间隔,然后按照当前采样间隔对处理过程中生成的中间数据进行采样,分别得到采样数据。
作为示例,上述执行主体获取的采样间隔序列可以包括2、3、5、7、11,任务处理操作可以包括5个步骤,从而对待处理任务进行处理的过程中可以生成5个中间数据,即data1、data2、data3、data4、data5。上述执行主体可以依次将2、3、5、7、11作为当前采样间隔,即上述执行主体将2作为当前采样间隔,并按照当前采样间隔对中间数据进行一次采样,得到的采样数据是data2。然后上述执行主体更换采样间隔,将3作为当前采样间隔,并按照当前采样间隔对中间数据进行一次采样,得到的采样数据是data5。之后上述执行主体更换采样间隔,将5作为当前采样间隔,并按照当前采样间隔对中间数据进行一次采样,得到的采样数据是data5,上述执行主体依次将采样间隔序列中的每一个采样间隔作为当前采样间隔进行采样,获取采样数据。
在本实施例的一些可选的实现方式中,上述执行主体获取到采样间隔序列后,从采样间隔序列中确定出未被使用的最小采样间隔,作为当前采样间隔。然后上述执行主体确定当前生成的中间数据与上一个被采样的中间数据之间的生成的数据的数量,并判断该数量是否达到当前采样间隔,响应于确定当前生成的中间数据与上一个被采样的中间数据之间的生成的数据的数量达到当前采样间隔,采样当前生成的中间数据作为当前的采样数据。
作为示例,上述执行主体获取的采样间隔序列可以包括2、3、5、7、11,任务处理操作可以包括5个步骤,从而对待处理任务进行处理的过程中可以生成5个中间数据,即data1、data2、data3、data4、data5。上述执行主体2、3、5、7、11中确定出未被使用过的最小采样间隔,将未被使用过的2作为当前采样间隔。上述执行主体对待处理任务进行任务处理操作,在处理过程中依次生成中间数据data1、data2、data3、data4、data5,并在生成中间数据的同时,上述执行主体根据当前采样间隔2进行采样,当确定生成的数据的数量为2时,将数量为2对应的中间数据data2作为采样数据。此时上述执行主体确定采样间隔序列中的2已经被使用过了,则将未被使用过的3确定为当前采样间隔,并且确定当前生成的中间数据距离上次采样数据data2的数量是否为3,当确定中间数据data5距离data2的数量为3时,将data5作为采样数据。上述执行主体依次按照上述方式更新当前采样间隔,并按照当前采样间隔采样,得到采样数据。
在本实现方式中,依次按照采样间隔序列中未被使用的最小采样间隔进行采样,每一轮的采样间隔不同,获取的采样数据不同,从而可以得到每一个中间数据,使得采样数据更全面。
步骤230,向服务端上传采样数据。
在本步骤中,上述执行主体按照采样间隔序列中的采样间隔进行依次采样,得到采样数据后,将采样数据上传到服务端。服务端接收到采样数据后,根据采样数据对任务处理操作中每一操作步骤进行分析,分析每一操作步骤的数据的准确性,从而得到每一操作步骤的准确性,得到任务处理操作的分析结果。服务端将该分析结果发送给上述执行主体,上述执行主体可以将该分析结果展示给用户。
继续参考图3,图3是根据本实施例的数据采样方法的一个应用场景的示意图。在图3的应用场景中,终端301可以从服务器302获取质数表303,可以将质数表303中的质数作为采样间隔序列,即采样间隔序列包括2、3、5、7……。终端301通过摄像头获取到一张图像,并对图像应用图像处理算法,图像处理算法对图像304进行处理可以生成10个中间数据,即data1、data2、data3、data4、data5、data6、data7、data8、data9、data10。终端301可以对图像进行循环处理,以验证图像处理算法的性能,并在处理过程中按照采样间隔序列中的采样间隔依次对处理过程中生成的中间数据进行采样,得到采样数据。即终端301从采样间隔序列中确定第一轮采样间隔为2,对图像应用图像处理算法,得到中间数据data2后,确定生成的中间数据的数量达到第一轮采样间隔2,则将data2作为第一轮采样数据。然后终端301从采样间隔序列中确定第二轮采样间隔为3,此时对图像应用图像处理算法仍在进行,得到中间数据data5后,确定生成的中间数据距离第一轮采样数据data2的数量达到第二轮采样间隔3,则将data5作为第二轮采样数据。之后终端301从采样间隔序列中确定第三轮采样间隔为5,此时对图像应用图像处理算法仍在进行,得到中间数据data10后,确定生成的中间数据距离第二轮采样数据data5的数量达到第三轮采样间隔5,则将data10作为第三轮采样数据。终端301依次按照上述方式确定第N轮采样间隔,并基于第N轮采样间隔得到第N轮采样数据。终端301在获取到第一轮采样数据data2后,同时将第一轮采样数据data2上传到服务器302,以及在获取到第二轮采样数据data5后,同时将第二轮采样数据data5上传到服务器302,在获取到第三轮采样数据data10后,同时将第三轮采样数据data10上传到服务器302,终端301获取到每一轮的采样数据的时候,同时将采样数据上传到服务器302,并且下一轮的数据采样仍在进行。服务器302根据接收到的采样数据对图像处理算法进行分析,得到图像处理算法的性能分析结果,并将分析结果返回终端301。
本公开的实施例提供的数据采样方法,首先基于质数表确定采样间隔序列,对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据,向服务端上传采样数据,以质数作为采样间隔对处理数据进行采样,可以在任务处理操作步骤个数不固定时避免采样间隔造成的采样盲点,使得采样数据更全面,从而使得根据采样数据得到的分析结果更准确,同时基于质数表确定采样间隔序列,使得采样间隔分布逐渐稀松,能够使得根据采样间隔得到的采样数据更符合数据分析需求,提高了采样数据的多样性。
在本实施例的一些可选的实现方式中,上述步骤220,对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据,可以按照如下流程400执行:
步骤410,判断当前的采样数据与上一个被采样的中间数据的采样时间的时间距离是否满足预设的时间条件。
在本步骤中,上述执行主体可以获取将每一个采样数据上传到服务端所消耗的时间,以及获取任务处理操作中生成两个相邻的中间数据所用的时间。上述执行主体根据当前采样间隔,获取当前采样数据与上一个被采样的中间数据的时间间隔,然后判断该时间间隔是否满足预设的时间条件,该预设的时间条件可以包括当前的采样数据与上一个被采样的中间数据的采样时间的时间距离小于上一个被采样的中间数据上传服务端所消耗的时间,该预设时间条件用于确定采样数据所用的时长与采样数据上传服务端所消耗的时长之间的关系。
作为示例,上述执行主体通过对任务处理操作中的每一步操作进行检测,得到任务处理操作中相邻的两个中间数据生成所用的时间为0.1s,当前采样间隔为7,根据当前采样间隔采样到的当前采样数据是距离上一个被采样的中间数据有7个数据的中间数据,因此,采样到当前采样数据需要等待7个中间数据生成,从而可以确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离为0.1s*7=0.7s。
当确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离满足预设的时间条件时,执行步骤420,响应于确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离满足预设的时间条件,在将采样间隔序列中当前采样间隔的下一个采样间隔配置为新的当前采样间隔。
在本步骤中,上述执行主体通过比较当前的采样数据与上一个被采样的中间数据的采样时间的时间距离与预设的时间条件,确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离满足预设的时间条件,即当前的采样数据与上一个被采样的中间数据的采样时间的时间距离小于上一个被采样的中间数据上传服务端所消耗的时间,采样数据会在采样端造成数据积压,因此上述执行主体在将采样间隔序列中当前采样间隔的下一个采样间隔配置为新的当前采样间隔,依次增大采样间隔,实现采样数据的分散以及增大采样数据所用的时长。
采样间隔序列中的采样间隔是依次增大的,当上述执行主体确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离小于上一个被采样的中间数据上传服务端所消耗的时间时,从采样间隔序列中确定当前采样间隔的位置,并将排序在当前采样间隔的下一个采样间隔配置为新的当前采样间隔。
上述执行主体对采样数据的采样时长以及采样数据上传服务端的消耗时长进行比较,通过不断增大采样间隔,实现了采样数据的采样时长不断增大,能够减轻采样端采样数据的数据积压,同时能够根据不同的采样间隔采样到不同步骤的中间数据,使得采样数据更全面。
当确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离不满足预设的时间条件时,执行步骤430,响应于确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离不满足预设的时间条件,基于当前采样间隔采样中间数据。
在本步骤中,上述执行主体通过比较当前的采样数据与上一个被采样的中间数据的采样时间的时间距离与预设的时间条件,确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离不满足预设的时间条件,即当前的采样数据与上一个被采样的中间数据的采样时间的时间距离不小于上一个被采样的中间数据上传服务端所消耗的时间,采样数据能够及时上传服务端,不会在采样端造成数据积压,因此上述执行主体将当前采样间隔确定为最优采样间隔,按照当前采样间隔对数据进行采样获取的采样数据能够及时上传到服务端。
上述执行主体对采样数据的采样时长以及采样数据上传服务端的消耗时长进行比较,通过不断增大采样间隔获取到最优采样间隔,使得采样间隔匹配采样数据上传速度,不会造成采样数据的数据积压,避免了采样数据来不及上传造成的性能浪费的情况。
进一步参考图5,作为对上述各图所示方法的实现,本公开提供了一种数据采样装置的一个实施例。该装置实施例与图2所示的方法实施例相对应。
如图5所示,本实施例的数据采样装置500可以包括:确定单元510,被配置成基于质数表确定采样间隔序列;采样单元520,被配置成对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据;获取单元530,被配置成向服务端上传采样数据。
在本实施的一些可选的实现方式中,采样单元520,进一步被配置成:确定采样间隔序列中未被使用的最小采样间隔为当前采样间隔,响应于确定当前生成的中间数据与上一个被采样的中间数据之间的生成的数据的数量达到当前采样间隔,采样当前生成的中间数据作为当前的采样数据。
在本实施的一些可选的实现方式中,采样单元520,进一步被配置成:响应于确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离满足预设的时间条件,在将采样间隔序列中当前采样间隔的下一个采样间隔配置为新的当前采样间隔。
在本实施的一些可选的实现方式中,采样单元520,进一步被配置成:响应于确定当前的采样数据与上一个被采样的中间数据的采样时间的时间距离不满足预设的时间条件,基于当前采样间隔采样中间数据。
在本实施的一些可选的实现方式中,预设的时间条件包括:当前的采样数据与上一个被采样的中间数据的采样时间的时间距离小于上一个被采样的中间数据上传服务端所消耗的时间。
本公开的上述实施例提供的装置,首先基于质数表确定采样间隔序列,对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据,向服务端上传采样数据,以质数作为采样间隔对处理数据进行采样,可以在任务处理操作步骤个数不固定时避免采样间隔造成的采样盲点,使得采样数据更全面,从而使得根据采样数据得到的分析结果更准确,同时基于质数表确定采样间隔序列,使得采样间隔分布逐渐稀松,能够使得根据采样间隔得到的采样数据更符合数据分析需求,提高了采样数据的多样性。
如图6所示,电子设备600可以包括处理装置(例如中央处理器、图形处理器等)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储装置608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有电子设备600操作所需的各种程序和数据。处理装置601、ROM 602以及RAM603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
通常,以下装置可以连接至I/O接口605:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置606;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置607;包括例如磁带、硬盘等的存储装置608;以及通信装置609。通信装置609可以允许电子设备600与其他设备进行无线或有线通信以交换数据。虽然图6示出了具有各种装置的电子设备600,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图6中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置609从网络上被下载和安装,或者从存储装置608被安装,或者从ROM 602被安装。在该计算机程序被处理装置601执行时,执行本公开的实施例的方法中限定的上述功能。
需要说明的是,本公开的实施例的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:基于质数表确定采样间隔序列;对任务处理操作中生成的中间数据,按照采样间隔序列中的采样间隔进行依次采样,得到采样数据;向服务端上传采样数据。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的实施例的操作的计算机程序代码,程序设计语言包括面向对象的程序设计语言诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络包括局域网(LAN)或广域网(WAN)连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括确定单元、采样单元和获取单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,确定单元还可以被描述为“基于质数表确定采样间隔序列的单元”。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开的实施例中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (12)

1.一种数据采样方法,包括:
基于质数表确定采样间隔序列;
对任务处理操作中生成的中间数据,按照所述采样间隔序列中的采样间隔进行依次采样,得到采样数据;
向服务端上传所述采样数据。
2.根据权利要求1所述的方法,其中,所述对任务处理操作中生成的中间数据,按照所述采样间隔序列中的采样间隔进行依次采样,得到采样数据,包括:
确定所述采样间隔序列中未被使用的最小采样间隔为当前采样间隔,响应于确定当前生成的中间数据与上一个被采样的中间数据之间的生成的数据的数量达到所述当前采样间隔,采样所述当前生成的中间数据作为当前的采样数据。
3.根据权利要求2所述的方法,其中,所述对任务处理操作中生成的中间数据,按照所述采样间隔序列中的采样间隔进行依次采样,得到采样数据,还包括:
响应于确定所述当前的采样数据与上一个被采样的中间数据的采样时间的时间距离满足预设的时间条件,在将所述采样间隔序列中所述当前采样间隔的下一个采样间隔配置为新的当前采样间隔。
4.根据权利要求3所述的方法,其中,所述对任务处理操作中生成的中间数据,按照所述采样间隔序列中的采样间隔进行依次采样,得到采样数据,还包括:
响应于确定所述当前的采样数据与上一个被采样的中间数据的采样时间的时间距离不满足预设的时间条件,基于所述当前采样间隔采样所述中间数据。
5.根据权利要求3或4所述的方法,其中,预设的时间条件包括:所述当前的采样数据与上一个被采样的中间数据的采样时间的时间距离小于上一个被采样的中间数据上传服务端所消耗的时间。
6.一种数据采样装置,包括:
确定单元,被配置成基于质数表确定采样间隔序列;
采样单元,被配置成对任务处理操作中生成的中间数据,按照所述采样间隔序列中的采样间隔进行依次采样,得到采样数据;
获取单元,被配置成向服务端上传所述采样数据。
7.根据权利要求7所述的装置,其中,所述采样单元,进一步被配置成:
确定所述采样间隔序列中未被使用的最小采样间隔为当前采样间隔,响应于确定当前生成的中间数据与上一个被采样的中间数据之间的生成的数据的数量达到所述当前采样间隔,采样所述当前生成的中间数据作为当前的采样数据。
8.根据权利要求7所述的装置,其中,所述采样单元,进一步被配置成:
响应于确定所述当前的采样数据与上一个被采样的中间数据的采样时间的时间距离满足预设的时间条件,在将所述采样间隔序列中所述当前采样间隔的下一个采样间隔配置为新的当前采样间隔。
9.根据权利要求8所述的装置,其中,所述采样单元,进一步被配置成:
响应于确定所述当前的采样数据与上一个被采样的中间数据的采样时间的时间距离不满足预设的时间条件,基于所述当前采样间隔采样所述中间数据。
10.根据权利要求8或9所述的装置,其中,预设的时间条件包括:所述当前的采样数据与上一个被采样的中间数据的采样时间的时间距离小于上一个被采样的中间数据上传服务端所消耗的时间。
11.一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1-5中任一项所述的方法。
12.一种计算机可读介质,其上存储计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1-5中任一项所述的方法。
CN202010588237.1A 2020-06-24 2020-06-24 数据采样方法和装置 Active CN113839976B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010588237.1A CN113839976B (zh) 2020-06-24 2020-06-24 数据采样方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010588237.1A CN113839976B (zh) 2020-06-24 2020-06-24 数据采样方法和装置

Publications (2)

Publication Number Publication Date
CN113839976A true CN113839976A (zh) 2021-12-24
CN113839976B CN113839976B (zh) 2023-02-28

Family

ID=78963484

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010588237.1A Active CN113839976B (zh) 2020-06-24 2020-06-24 数据采样方法和装置

Country Status (1)

Country Link
CN (1) CN113839976B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6477553B1 (en) * 1999-01-13 2002-11-05 Philip Druck Measurement scale for non-uniform data sampling in N dimensions
CN200990662Y (zh) * 2006-12-14 2007-12-12 上海广电(集团)有限公司中央研究院 应用于atsc高清数字电视上的变频多级滤波器
CN101965703A (zh) * 2007-09-25 2011-02-02 爱立信电话股份有限公司 控制信道单元的干扰随机化
JP2012150643A (ja) * 2011-01-19 2012-08-09 Yokogawa Denshikiki Co Ltd 信号処理装置
CN105743508A (zh) * 2016-02-29 2016-07-06 卡斯柯信号有限公司 一种相异啮合码距的双通道可信采集方法
CN106452626A (zh) * 2016-10-11 2017-02-22 北京邮电大学 基于多组互质采样的宽带频谱压缩感知

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6477553B1 (en) * 1999-01-13 2002-11-05 Philip Druck Measurement scale for non-uniform data sampling in N dimensions
CN200990662Y (zh) * 2006-12-14 2007-12-12 上海广电(集团)有限公司中央研究院 应用于atsc高清数字电视上的变频多级滤波器
CN101965703A (zh) * 2007-09-25 2011-02-02 爱立信电话股份有限公司 控制信道单元的干扰随机化
JP2012150643A (ja) * 2011-01-19 2012-08-09 Yokogawa Denshikiki Co Ltd 信号処理装置
CN105743508A (zh) * 2016-02-29 2016-07-06 卡斯柯信号有限公司 一种相异啮合码距的双通道可信采集方法
CN106452626A (zh) * 2016-10-11 2017-02-22 北京邮电大学 基于多组互质采样的宽带频谱压缩感知

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
郑相全等: "一种基于不等间隔滤波器的窄带干扰抑制方法", 《无线电工程》 *

Also Published As

Publication number Publication date
CN113839976B (zh) 2023-02-28

Similar Documents

Publication Publication Date Title
CN110809189B (zh) 视频播放方法、装置、电子设备和计算机可读介质
CN111354345B (zh) 生成语音模型和语音识别的方法、装置、设备以及介质
US11659181B2 (en) Method and apparatus for determining region of interest
CN113326013A (zh) 信息交互方法、装置和电子设备
CN114928574A (zh) 信息发送方法、装置、电子设备和计算机可读介质
EP3879795A1 (en) Method and apparatus for acquiring information, device, medium and computer program product
CN111324470B (zh) 用于生成信息的方法及装置
CN109144864B (zh) 用于测试窗口的方法及装置
CN113839976B (zh) 数据采样方法和装置
CN112507676B (zh) 能源报表生成方法、装置、电子设备和计算机可读介质
CN110209849B (zh) 用于标注关键点的方法和装置
CN113407229B (zh) 用于生成离线脚本的方法及装置
CN110084298B (zh) 用于检测图像相似度的方法及装置
CN112543228A (zh) 数据传输方法、装置、电子设备和计算机可读介质
CN109933556B (zh) 用于处理信息的方法和装置
CN114764627A (zh) 基于横向联合学习参与方的数据贡献力确定方法和装置
CN109088929B (zh) 用于发送信息的方法及装置
CN112084114A (zh) 用于测试接口的方法和装置
CN111898061A (zh) 搜索网络的方法、装置、电子设备和计算机可读介质
CN112311842A (zh) 用于信息交互的方法和装置
CN111831530A (zh) 测试方法和装置
CN110619537A (zh) 用于生成信息的方法和装置
CN112883697B (zh) 工作流表单生成方法、装置、电子设备和计算机可读介质
CN110855767B (zh) 一种操作请求的响应方法、装置、设备和存储介质
CN111404824B (zh) 用于转发请求的方法、装置、电子设备和计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant