CN114401289A - 任务分批上传方法及系统 - Google Patents
任务分批上传方法及系统 Download PDFInfo
- Publication number
- CN114401289A CN114401289A CN202111666527.4A CN202111666527A CN114401289A CN 114401289 A CN114401289 A CN 114401289A CN 202111666527 A CN202111666527 A CN 202111666527A CN 114401289 A CN114401289 A CN 114401289A
- Authority
- CN
- China
- Prior art keywords
- task
- uploading
- equipment
- batch
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000004590 computer program Methods 0.000 claims description 16
- 230000005540 biological transmission Effects 0.000 abstract description 8
- 238000004364 calculation method Methods 0.000 abstract description 4
- 239000002699 waste material Substances 0.000 abstract description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000013480 data collection Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Stored Programmes (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明公开了一种任务分批上传方法及系统，方法包括：检测到设备启动时，从服务器获取配置信息，所述配置信息包括预设的拆分任务阈值及每批任务上传阈值；获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务；将若干个子任务按顺序上传至服务器。本发明实施例与现有采集功能相比，能够有效的提高车载设备与服务器之间数据传输的效率，最大化利用设备的数据采集，不造成数据的浪费；配置通过服务端配置修改，更加的灵活变动，根据不同地方的设备采用不一样的配置策略。由设备进行任务拆分，服务器端进行任务合并，减少设备的计算压力。
Description
技术领域
本发明涉及数据处理技术领域，尤其涉及一种任务分批上传方法及系统。
背景技术
随着车联网、信息产业发展，用户与车联网设备的交互愈来愈密切。但是在车联网场景中，用户需要下发指令采集大量数据的时候，例如：抓拍图片、视频等，但由于车辆经常会经过信号质量差的区域，例如拥堵所导致的信号质量变差的区域，或隧道、山区等信号质量本来就差的区域、用户的车辆行驶时长不足设备下线，这就使得服务器与车载设备之间数据传输慢、用户采集任务超时的情况，影响重要数据的正常传递，从而影响到用户的体验。为了合理的运用车载设备与服务器之间的数据传输，需要对设备和服务器之间的数据传输进行合理的拆分，以保证有效信息能够得到及时的传递。
现有的数据采集方式，由用户主动触发下发任务进行采集，例如：用户需要抓拍50张图片，设备采集完毕然后进行回传，在然后通过微信、app等渠道推送至用户端。
现有的数据采集方式地用户下发采集的任务数量过于大的时候，会导致设备因为大量的采集而发生任务超时，可能设备在处理到一半的时候，任务已经超时了，导致已经处理了的另外一半任务无法正常回传。
因此现有技术还有待于进一步发展。
发明内容
针对上述技术问题，本发明实施例提供了一种任务分批上传方法及系统，能够解决现有技术中数据采集方式当用户下发采集的任务数量过于大的时候，会导致设备因为大量的采集而发生任务超时，可能设备在处理到一半的时候，任务已经超时了，导致已经处理了的另外一半任务无法正常回传的技术问题。
本发明实施例的第一方面提供一种任务分批上传方法，包括：
检测到设备启动时，从服务器获取配置信息，所述配置信息包括预设的拆分任务阈值及每批任务上传阈值；
获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务；
将若干个子任务按顺序上传至服务器。
可选地，检测到设备启动时，从服务器获取配置信息前，还包括：
获取用户设置的任务采集的有效期，将所述有效期存储在服务器中。
可选地，获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务，还包括：
获取拆分后生成的最后一个子任务，将最后一个子任务中添加结束标识。
可选地，所述将若干个子任务按顺序上传至服务器，包括：
检测到在所述有效期内，是否接收到所述结束标识；
若未接收到结束标识，则将设备上传的子任务缓存至内存数据库，直至在有效期内接收到结束标识；
若在有效期接收到结束标识，则判定数据采集成功，将内存数据库存储的全部子任务数据推送给用户。
可选地，所述若未接收到结束标识，则将设备上传的子任务缓存至内存数据库，包括：
若未接收结束标识，则获取当前时间距离有效期的结束时间；
若当前时间距离有效期的结束时间大于等于预设时长，则设备上传的子任务缓存至内存数据库，直至在有效期内接收到结束标识；
若当前时间距离有效期的结束时间小于预设时长，则将内存数据库存储的子任务数据推送给用户。
本发明实施例第二方面提供了一种任务分批上传系统，所述系统包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现以下步骤：
检测到设备启动时，从服务器获取配置信息，所述配置信息包括预设的拆分任务阈值及每批任务上传阈值；
获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务；
将若干个子任务按顺序上传至服务器。
可选地，所述计算机程序被所述处理器执行时还实现以下步骤：
获取用户设置的任务采集的有效期，将所述有效期存储在服务器中。
可选地，所述计算机程序被所述处理器执行时还实现以下步骤：
获取拆分后生成的最后一个子任务，将最后一个子任务中添加结束标识。
可选地，所述计算机程序被所述处理器执行时还实现以下步骤：
检测到在所述有效期内，是否接收到所述结束标识；
若未接收到结束标识，则将设备上传的子任务缓存至内存数据库，直至在有效期内接收到结束标识；
若在有效期接收到结束标识，则判定数据采集成功，将内存数据库存储的全部子任务数据推送给用户。
本发明实施例第三方面提供了一种非易失性计算机可读存储介质，其特征在于，所述非易失性计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行时，可使得所述一个或多个处理器执行上述的任务分批上传方法。
本发明实施例提供的技术方案中，在检测到设备启动时，从服务器获取配置信息，所述配置信息包括预设的拆分任务阈值及每批任务上传阈值；获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务；将若干个子任务按顺序上传至服务器。本发明实施例与现有采集功能相比，能够有效的提高车载设备与服务器之间数据传输的效率，最大化利用设备的数据采集，不造成数据的浪费；配置通过服务端配置修改，更加的灵活变动，根据不同地方的设备采用不一样的配置策略。由设备进行任务拆分，服务器端进行任务合并，减少设备的计算压力。
附图说明
图1为本发明实施例中一种任务分批上传方法的一实施例的流程示意图；
图2为本发明实施例中一种任务分批上传系统的另一实施例的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
以下结合附图对本发明实施例进行详细的描述。
请参阅图1，图1为本发明实施例中一种任务分批上传方法的一个实施例的流程示意图。如图1所示，包括：
步骤S100、检测到设备启动时，从服务器获取配置信息，所述配置信息包括预设的拆分任务阈值及每批任务上传阈值；
步骤S200、获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务；
步骤S300、将若干个子任务按顺序上传至服务器。
具体实施时，本发明实施例设备启动便从后台拉取配置信息，配置信息含：拆分任务的最小值以及每批任务上传的最大值，例如：当用户下发采集数95时，后台配置的拆分任务的最小值A为30，每批任务上传的最大值B为10的时候，表示95大于拆分任务的最小值A(30)，将100拆分成10个子订单每个订单不超过上传的最大值B(10),如果用户下发采集20时，则表示不需要进行拆分。
设备通过判断采集任务是否达到任务拆分阈值，达到阈值则按照每个任务最大值进行任务拆分，将大任务拆分为N个子任务，将采集到的子任务按顺序上传。
进一步地，检测到设备启动时，从服务器获取配置信息前，还包括：
获取用户设置的任务采集的有效期，将所述有效期存储在服务器中。
具体地，用户通过APP下发采集任务N小时有效，服务端记录任务的过期时间在下发至设备。N为正整数。一般Success有效性为24小时，根据下发任务决定，用户如果填写N＝12小时，则为12小时。
进一步地，获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务，还包括：
获取拆分后生成的最后一个子任务，将最后一个子任务中添加结束标识。
具体实施时，与设备侧约定好，设备在上传数据包时带上是否订单拆分标识batchType(表示与设备根据拉取的配置是否拆单，在不满足配置前提设备则不进行拆单)，若订单未拆分，则直接推送至用户侧。若订单上传了已拆分标识batchType，与设备侧约定好，总是在拆分订单的最后一笔订单上传带上结束标识。
进一步地，将若干个子任务按顺序上传至服务器，包括：
检测到在所述有效期内，是否接收到所述结束标识；
若未接收到结束标识，则将设备上传的子任务缓存至内存数据库，直至在有效期内接收到结束标识；
若在有效期接收到结束标识，则判定数据采集成功，将内存数据库存储的全部子任务数据推送给用户。
具体实施时，结束标识可采用Success(总成功采集图片，表示订单采集完结)，不是最后一笔子订单则无需携带，若服务端未收到结束标识，则将设备上报的子订单先缓存到Redis内存数据库，等待设备上报结束标识，若设备在任务超时前上传Success结束标识，则对比Success与将缓存数据数量是否一致，如果一致，则已经完整接收设备采集数据，取出缓存数据一并推送至用户。如果不一致(因为会因为各种网络问题导致任务时序错乱)，则设置等待时间M，超出M未收到Success结束标识则将任务推送至用户。其中Redis(RemoteDictionary Server)，即远程字典服务，是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。Redis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括string(字符串)、list(链表)、set(集合)、zset(sorted set--有序集合)和hash(哈希类型)。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作，而且这些操作都是原子性的。在此基础上，redis支持各种不同方式的排序。与memcached一样，为了保证效率，数据都是缓存在内存中。区别的是redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件，并且在此基础上实现了master-slave(主从)同步。Redis是一个高性能的key-value数据库。redis的出现，很大程度补偿了memcached这类key/value存储的不足，在部分场合可以对关系数据库起到很好的补充作用。它提供了Java，C/C++，C#，PHP，JavaScript，Perl，Object-C，Python，Ruby，Erlang等客户端，使用很方便。
Redis支持主从同步。数据可以从主服务器向任意数量的从服务器上同步，从服务器可以是关联其他从服务器的主服务器。这使得Redis可执行单层树复制。存盘可以有意无意的对数据进行写操作。由于完全实现了发布/订阅机制，使得从数据库在任何地方同步树时，可订阅一个频道并接收主服务器完整的消息发布记录。同步对读取操作的可扩展性和数据冗余很有帮助。
进一步地，若未接收到结束标识，则将设备上传的子任务缓存至内存数据库，包括：
若未接收结束标识，则获取当前时间距离有效期的结束时间；
若当前时间距离有效期的结束时间大于等于预设时长，则设备上传的子任务缓存至内存数据库，直至在有效期内接收到结束标识；
若当前时间距离有效期的结束时间小于预设时长，则将内存数据库存储的子任务数据推送给用户。
具体实施时，若一直未收到Success结束标识，定时作业进行定期检测，在任务即将过期前，将采集到的数据推送给用户。尽量将任务拆的细，这样就保证采集到的数据能正常上传而不会造成数据的浪费，例如配置为：拆分任务的最小值A为30，每批任务上传的最大值B为10，实际根据设备的类型进行配置，3G设备可以稍微低一点，A可以配置为20，B为5。定时作业指一个检测作业，会隔一段时间查询一下未完成的任务是否快到期了，如果快到期，则将已上报的数据进行组装上传。检测频率为5分钟一次。任务即将过期前是指一般是在任务快到期一个小时内，即1到60分钟，可根据需要进行设定。设备的类型判断原理是每个打包出去的设备都会有个固定的key，一种设备类型都会为一个固定key，不同设备类型key不一样，后台根据key进行配置。
本发明实施例与现有采集功能相比，本发明提出的平台及传输方法能够有效的提高车载设备与服务器之间数据传输的效率，最大化利用设备的数据采集，不造成数据的浪费。
配置通过服务端配置修改，更加的灵活变动，根据不同地方的设备采用不一样的配置策略。
由设备进行任务拆分，服务端进行任务合并，减少设备的计算压力。
服务兼容拆分与不拆分形式，扩展性更强。
在一些其他的实施例中，也可通过服务端将订单进行拆分，所有拆分合并工作由服务端进行完成，设备端则只需要按任务上传，减少计算量。
或者是在任务生成时加入延时任务系统，通过延时系统自动触发即将超时任务上传。具体方法为：在生成任务时，设定任务的到期时间，定时任务会每秒轮询所有任务，将过期任务放到过期任务队列(通过Redis订阅消息实现)，系统通过订阅Redis消息队列，写入到队列后即可读取到。
需要说明的是，上述各步骤之间并不必然存在一定的先后顺序，本领域普通技术人员，根据本发明实施例的描述可以理解，不同实施例中，上述各步骤可以有不同的执行顺序，亦即，可以并行执行，亦可以交换执行等等。
上面对本发明实施例中的任务分批上传方法进行了描述，下面对本发明实施例中的任务分批上传系统进行描述，请参阅图2，图2是本发明实施例中一种任务分批上传系统的另一实施例的硬件结构示意图，如图2所示，系统10包括：存储器101、处理器102及存储在存储器上并可在处理器上运行的计算机程序，计算机程序被处理器101执行时实现以下步骤：
检测到设备启动时，从服务器获取配置信息，所述配置信息包括预设的拆分任务阈值及每批任务上传阈值；
获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务；
将若干个子任务按顺序上传至服务器。
具体的实施步骤与方法实施例相同，此处不再赘述。
可选地，计算机程序被处理器101执行时还实现以下步骤：
获取用户设置的任务采集的有效期，将所述有效期存储在服务器中。
具体的实施步骤与方法实施例相同，此处不再赘述。
可选地，计算机程序被处理器101执行时还实现以下步骤：
获取拆分后生成的最后一个子任务，将最后一个子任务中添加结束标识。
具体的实施步骤与方法实施例相同，此处不再赘述。
可选地，计算机程序被处理器101执行时还实现以下步骤：
检测到在所述有效期内，是否接收到所述结束标识；
若未接收到结束标识，则将设备上传的子任务缓存至内存数据库，直至在有效期内接收到结束标识；
若在有效期接收到结束标识，则判定数据采集成功，将内存数据库存储的全部子任务数据推送给用户。
具体的实施步骤与方法实施例相同，此处不再赘述。
可选地，计算机程序被处理器101执行时还实现以下步骤：
若未接收结束标识，则获取当前时间距离有效期的结束时间；
若当前时间距离有效期的结束时间大于等于预设时长，则设备上传的子任务缓存至内存数据库，直至在有效期内接收到结束标识；
若当前时间距离有效期的结束时间小于预设时长，则将内存数据库存储的子任务数据推送给用户。
具体的实施步骤与方法实施例相同，此处不再赘述。
本发明实施例提供了一种非易失性计算机可读存储介质，计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行，例如，执行以上描述的图1中的方法步骤S100至步骤S300。
作为示例，非易失性存储介质能够包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦ROM(EEPROM)或闪速存储器。易失性存储器能够包括作为外部高速缓存存储器的随机存取存储器(RAM)。通过说明并非限制，RAM可以以诸如同步RAM(SRAM)、动态RAM、(DRAM)、同步DRAM(SDRAM)、双数据速率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、Synchlink DRAM(SLDRAM)以及直接Rambus(兰巴斯)RAM(DRRAM)之类的许多形式得到。本发明实施例中所描述的操作环境的所公开的存储器组件或存储器旨在包括这些和/或任何其他适合类型的存储器中的一个或多个。
以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种任务分批上传方法，其特征在于，包括：
检测到设备启动时，从服务器获取配置信息，所述配置信息包括预设的拆分任务阈值及每批任务上传阈值；
获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务；
将若干个子任务按顺序上传至服务器。
2.根据权利要求1所述的任务分批上传方法，其特征在于，所述检测到设备启动时，从服务器获取配置信息前，还包括：
获取用户设置的任务采集的有效期，将所述有效期存储在服务器中。
3.根据权利要求2所述的任务分批上传方法，其特征在于，所述获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务，还包括：
获取拆分后生成的最后一个子任务，将最后一个子任务中添加结束标识。
4.根据权利要求3所述的任务分批上传方法，其特征在于，所述将若干个子任务按顺序上传至服务器，包括：
检测到在所述有效期内，是否接收到所述结束标识；
若未接收到结束标识，则将设备上传的子任务缓存至内存数据库，直至在有效期内接收到结束标识；
若在有效期接收到结束标识，则判定数据采集成功，将内存数据库存储的全部子任务数据推送给用户。
5.根据权利要求4所述的任务分批上传方法，其特征在于，所述若未接收到结束标识，则将设备上传的子任务缓存至内存数据库，包括：
若未接收结束标识，则获取当前时间距离有效期的结束时间；
若当前时间距离有效期的结束时间大于等于预设时长，则设备上传的子任务缓存至内存数据库，直至在有效期内接收到结束标识；
若当前时间距离有效期的结束时间小于预设时长，则将内存数据库存储的子任务数据推送给用户。
6.一种任务分批上传系统，其特征在于，所述系统包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现以下步骤：
检测到设备启动时，从服务器获取配置信息，所述配置信息包括预设的拆分任务阈值及每批任务上传阈值；
获取设备采集的任务数据，若任务数据达到预设的拆分任务阈值，根据预设的每批任务上传阈值对任务进行拆分，生成若干个子任务；
将若干个子任务按顺序上传至服务器。
7.根据权利要求6所述的任务分批上传系统，其特征在于，所述计算机程序被所述处理器执行时还实现以下步骤：
获取用户设置的任务采集的有效期，将所述有效期存储在服务器中。
8.根据权利要求7所述的任务分批上传系统，其特征在于，所述计算机程序被所述处理器执行时还实现以下步骤：
获取拆分后生成的最后一个子任务，将最后一个子任务中添加结束标识。
9.根据权利要求8所述的任务分批上传系统，其特征在于，所述计算机程序被所述处理器执行时还实现以下步骤：
检测到在所述有效期内，是否接收到所述结束标识；
若未接收到结束标识，则将设备上传的子任务缓存至内存数据库，直至在有效期内接收到结束标识；
若在有效期接收到结束标识，则判定数据采集成功，将内存数据库存储的全部子任务数据推送给用户。
10.一种非易失性计算机可读存储介质，其特征在于，所述非易失性计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行时，可使得所述一个或多个处理器执行权利要求1-5任一项所述的任务分批上传方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111666527.4A CN114401289B (zh) | 2021-12-31 | 2021-12-31 | 任务分批上传方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111666527.4A CN114401289B (zh) | 2021-12-31 | 2021-12-31 | 任务分批上传方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114401289A true CN114401289A (zh) | 2022-04-26 |
| CN114401289B CN114401289B (zh) | 2024-08-16 |
Family
ID=81228551
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111666527.4A Active CN114401289B (zh) | 2021-12-31 | 2021-12-31 | 任务分批上传方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114401289B (zh) |
Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017101606A1 (zh) * | 2015-12-15 | 2017-06-22 | 北京奇虎科技有限公司 | 一种数据采集分析系统和方法 |
| CN108399186A (zh) * | 2018-01-12 | 2018-08-14 | 联动优势科技有限公司 | 一种数据采集方法及装置 |
| CN110086565A (zh) * | 2019-03-14 | 2019-08-02 | 深圳和而泰数据资源与云技术有限公司 | 数据传输与存储方法 |
| WO2019196224A1 (zh) * | 2018-04-09 | 2019-10-17 | 平安科技（深圳）有限公司 | 制度信息处理方法、装置、计算机设备和存储介质 |
| CN110719245A (zh) * | 2018-07-11 | 2020-01-21 | 中国移动通信集团浙江有限公司 | 一种物联网数据传输方法及系统 |
| WO2020019437A1 (zh) * | 2018-07-25 | 2020-01-30 | 平安科技（深圳）有限公司 | 终端运行数据的监控方法、装置、终端设备及介质 |
| CN110955516A (zh) * | 2019-10-30 | 2020-04-03 | 深圳供电局有限公司 | 批量任务处理方法、装置、计算机设备和存储介质 |
| CN110995784A (zh) * | 2019-11-05 | 2020-04-10 | 北京奇艺世纪科技有限公司 | 数据传输方法、系统及存储介质 |
| CN111225041A (zh) * | 2019-12-26 | 2020-06-02 | 的卢技术有限公司 | 一种实现延时消息队列的方法及系统 |
| US20210004332A1 (en) * | 2019-07-02 | 2021-01-07 | Microsoft Technology Licensing, Llc | Per-tenant incremental outward distributed proactive caching |
| CN112990727A (zh) * | 2021-03-26 | 2021-06-18 | 中国人民财产保险股份有限公司深圳市分公司 | 一种机器人任务执行控制方法、装置、系统及介质 |
| WO2021143025A1 (zh) * | 2020-01-15 | 2021-07-22 | 平安科技（深圳）有限公司 | 物联网数据传输方法、装置、介质及电子设备 |
| CN113590414A (zh) * | 2021-06-30 | 2021-11-02 | 济南浪潮数据技术有限公司 | 一种服务器集群信息采集缓存方法、装置、设备及介质 |
| WO2021217630A1 (zh) * | 2020-04-30 | 2021-11-04 | 上海华东汽车信息技术有限公司 | 车辆数据上传方法、装置、计算机设备和存储介质 |
| WO2021238902A1 (zh) * | 2020-05-25 | 2021-12-02 | 中兴通讯股份有限公司 | 数据导入方法、装置、服务平台及存储介质 |
-
2021
- 2021-12-31 CN CN202111666527.4A patent/CN114401289B/zh active Active
Patent Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017101606A1 (zh) * | 2015-12-15 | 2017-06-22 | 北京奇虎科技有限公司 | 一种数据采集分析系统和方法 |
| CN108399186A (zh) * | 2018-01-12 | 2018-08-14 | 联动优势科技有限公司 | 一种数据采集方法及装置 |
| WO2019196224A1 (zh) * | 2018-04-09 | 2019-10-17 | 平安科技（深圳）有限公司 | 制度信息处理方法、装置、计算机设备和存储介质 |
| CN110719245A (zh) * | 2018-07-11 | 2020-01-21 | 中国移动通信集团浙江有限公司 | 一种物联网数据传输方法及系统 |
| WO2020019437A1 (zh) * | 2018-07-25 | 2020-01-30 | 平安科技（深圳）有限公司 | 终端运行数据的监控方法、装置、终端设备及介质 |
| CN110086565A (zh) * | 2019-03-14 | 2019-08-02 | 深圳和而泰数据资源与云技术有限公司 | 数据传输与存储方法 |
| US20210004332A1 (en) * | 2019-07-02 | 2021-01-07 | Microsoft Technology Licensing, Llc | Per-tenant incremental outward distributed proactive caching |
| CN110955516A (zh) * | 2019-10-30 | 2020-04-03 | 深圳供电局有限公司 | 批量任务处理方法、装置、计算机设备和存储介质 |
| CN110995784A (zh) * | 2019-11-05 | 2020-04-10 | 北京奇艺世纪科技有限公司 | 数据传输方法、系统及存储介质 |
| CN111225041A (zh) * | 2019-12-26 | 2020-06-02 | 的卢技术有限公司 | 一种实现延时消息队列的方法及系统 |
| WO2021143025A1 (zh) * | 2020-01-15 | 2021-07-22 | 平安科技（深圳）有限公司 | 物联网数据传输方法、装置、介质及电子设备 |
| WO2021217630A1 (zh) * | 2020-04-30 | 2021-11-04 | 上海华东汽车信息技术有限公司 | 车辆数据上传方法、装置、计算机设备和存储介质 |
| WO2021238902A1 (zh) * | 2020-05-25 | 2021-12-02 | 中兴通讯股份有限公司 | 数据导入方法、装置、服务平台及存储介质 |
| CN112990727A (zh) * | 2021-03-26 | 2021-06-18 | 中国人民财产保险股份有限公司深圳市分公司 | 一种机器人任务执行控制方法、装置、系统及介质 |
| CN113590414A (zh) * | 2021-06-30 | 2021-11-02 | 济南浪潮数据技术有限公司 | 一种服务器集群信息采集缓存方法、装置、设备及介质 |
Non-Patent Citations (2)
| Title |
|---|
| CHENGHAO XU; WEI SONG: "Efficient data uploading for mobile crowdsensing via team collaborating and matching", 《IEEE TRANSACTIONS ON GREEN COMMUNICATIONS AND NETWORKING》, vol. 6, no. 1, 2 September 2021 (2021-09-02), pages 645, XP011900737, DOI: 10.1109/TGCN.2021.3109740 * |
| 邱金波;邱旭华;张秋晶;吴洁华: "基于物联网三层架构的家居设备控制系统设计", 《科学技术创新》, 5 May 2021 (2021-05-05), pages 168 - 169 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114401289B (zh) | 2024-08-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11507594B2 (en) | Bulk data distribution system | |
| US10812846B1 (en) | Methods and apparatuses for a caching recommendation engine | |
| CN110995811B (zh) | 一种数据更新方法及装置 | |
| CN111221469B (zh) | 同步缓存数据的方法、装置和系统 | |
| US20170132271A1 (en) | Scalable enterprise content management | |
| CN112559475B (zh) | 数据实时捕获和传输方法及系统 | |
| EP3508985A1 (en) | Scalable synchronization with cache and index management | |
| CN111008246B (zh) | 数据库日志同步方法、装置、计算机设备及可读存储介质 | |
| CN111177159B (zh) | 一种数据处理的系统、方法和数据更新设备 | |
| CN112019605B (zh) | 数据流的数据分发方法和系统 | |
| CN106326013A (zh) | 一种分布式文件系统的磁盘配额管理系统及方法 | |
| CN110995566A (zh) | 一种消息数据推送方法、系统及装置 | |
| CN109726024A (zh) | 一种消息延时投递方法、装置及设备 | |
| CN111753012A (zh) | 数据同步方法、装置、设备及存储介质 | |
| CN115309819A (zh) | 数据处理方法、装置、系统、计算机设备和存储介质 | |
| US20220222272A1 (en) | System and method for transferring and synchronizing student information system (sis) data | |
| CN114401289A (zh) | 任务分批上传方法及系统 | |
| CN113872792A (zh) | 基于自适应时间窗口的日志消息去重 | |
| CN110866068B (zh) | 一种基于hdfs的公告数据存储方法及其装置 | |
| CN115473858A (zh) | 数据传输方法和流式数据传输系统 | |
| CN108228613B (zh) | 数据的读取方法及装置 | |
| CN112131198B (zh) | 一种日志分析方法、装置及电子设备 | |
| CN112286946B (zh) | 数据处理方法、服务器和介质 | |
| CN112749142A (zh) | 句柄管理方法和系统 | |
| CN115357619A (zh) | 数据的缓存方法、装置、服务器及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |