CN110321358A - 一种用户数据整编的方法及装置 - Google Patents

一种用户数据整编的方法及装置 Download PDF

Info

Publication number
CN110321358A
CN110321358A CN201910560726.3A CN201910560726A CN110321358A CN 110321358 A CN110321358 A CN 110321358A CN 201910560726 A CN201910560726 A CN 201910560726A CN 110321358 A CN110321358 A CN 110321358A
Authority
CN
China
Prior art keywords
unbounded
user data
obstruction queue
obstruction
queue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910560726.3A
Other languages
English (en)
Inventor
麦英健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Power Supply Bureau Co Ltd
Original Assignee
Shenzhen Power Supply Bureau Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Power Supply Bureau Co Ltd filed Critical Shenzhen Power Supply Bureau Co Ltd
Priority to CN201910560726.3A priority Critical patent/CN110321358A/zh
Publication of CN110321358A publication Critical patent/CN110321358A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2365Ensuring data consistency and integrity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2457Query processing with adaptation to user needs
    • G06F16/24578Query processing with adaptation to user needs using ranking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5016Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals the resource being the memory
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5022Mechanisms to release resources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computational Linguistics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种用户数据整编的方法,包括获取用户数据,并将所获取的用户数据存放至初始为空的基于链表的无界非阻塞队列中;获取无界非阻塞队列的下一周期检测时间;待无界非阻塞队列的下一周期检测时间到达时,若判定无界非阻塞队列中存放的用户数据的数量大于预设值,则对无界非阻塞队列中存放的用户数据进行整编并存入预设的数据库中,且进一步清空无界非阻塞队列。实施本发明,能够有效缓解终端上报数据过于集中时CPU及内存占用过多的问题,用以保证数据的完整性。

Description

一种用户数据整编的方法及装置
技术领域
本发明涉及电力数据智能化技术领域,尤其涉及一种用户数据整编的方法及装置。
背景技术
随着云计算、大数据、人工智能等技术的快速发展,智能电网的建设速度逐渐加快。在此背景下,通过智能电网的配用电系统收集到的数据量爆发式增长,这些数据的有效使用,将非常有助于智能电网业务的精细化关联。然而,智能电网业务的精细化为用户和企业带来便捷和利益的同时,随之而来的各类应用也不断增加,因此给后台数据处理装置带来很大的压力。
现有技术中,由于终端上报的数据分为用户登录数据、核心功能使用数据、核心功能完成数据、核心功能错误数据等不同类型数据,使得后台数据处理装置往往需要根据数据类型分别进行处理,一旦终端上报数据过于集中,会导致后台数据处理装置的CPU及内存占用过多,甚至会出现宕机而造成数据丢失。
因此,亟需一种用户数据整编的方法,能够有效缓解终端上报数据过于集中时CPU及内存占用过多的问题,用以保证数据的完整性。
发明内容
本发明实施例所要解决的技术问题在于,提供一种用户数据整编的方法及装置,能够有效缓解终端上报数据过于集中时CPU及内存占用过多的问题,用以保证数据的完整性。
为了解决上述技术问题,本发明实施例提供了一种用户数据整编的方法,所述方法包括以下步骤:
获取用户数据,并将所获取的用户数据存放至初始为空的基于链表的无界非阻塞队列中;
获取所述无界非阻塞队列的下一周期检测时间;
待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量大于预设值,则对所述无界非阻塞队列中存放的用户数据进行整编并存入预设的数据库中,且进一步清空所述无界非阻塞队列。
其中,所述方法进一步包括:
待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量小于所述预设值,则等待一定时间后,对所述无界非阻塞队列中存放的用户数据进行整编并存入所述预设的数据库中,且进一步清空所述无界非阻塞队列。
其中,所述对所述无界非阻塞队列中存放的用户数据进行整编并存入所述预设的数据库中的具体步骤包括:
对所述无界非阻塞队列中存放的用户数据进行索引查询,将行为、设备类型、用户、部门及版本都相同的多条用户数据仅处理为一条记录但会累加计数,将行为、设备类型、用户、部门及版本之中任一个相异的多条用户数据均保留为一条记录;
确定周期写入所述预设的数据库中的时间,并在每一周期写入所述预设的数据库中的时间达到时,将所述无界非阻塞队列处理后的记录均写入所述预设的数据库中。
其中,所述方法进一步包括:
在所述无界非阻塞队列处理后的记录均写入所述预设的数据库之前,会对所述无界非阻塞队列处理后的记录增加关键字索引。
其中,所述方法进一步包括:
确定所述无界非阻塞队列处理后的记录均写入所述预设的数据库的当前时间,并删除所述预设的数据库中距离当前时间超出三个月的记录。
本发明实施例还提供了一种用户数据整编的装置,包括:
数据存放单元,用于获取用户数据,并将所获取的用户数据存放至初始为空的基于链表的无界非阻塞队列中;
检测时间获取单元,用于获取所述无界非阻塞队列的下一周期检测时间;
第一数据整编单元,用于待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量大于预设值,则对所述无界非阻塞队列中存放的用户数据进行整编并存入预设的数据库中,且进一步清空所述无界非阻塞队列。
其中,还包括:
第二数据整编单元,用于待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量小于所述预设值,则等待一定时间后,对所述无界非阻塞队列中存放的用户数据进行整编并存入所述预设的数据库中,且进一步清空所述无界非阻塞队列。
实施本发明实施例,具有如下有益效果:
本发明基于链表的无界非阻塞队列来存放用户数据,并在无界非阻塞队列的下一周期检测时间到达时,根据用户数据的数量与预设值进行对比来启动整编或推迟启动整编,从而有利于用户数据过于集中时加快处理能力,避免数据库的频繁读取及写入,不仅释放CPU及内存的占用率,还能保证数据的完整性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,根据这些附图获得其他的附图仍属于本发明的范畴。
图1为本发明实施例提供的一种用户数据整编的方法的流程图;
图2为本发明实施例提供的一种用户数据整编的方法的应用场景的流程图;
图3为本发明实施例提供的一种用户数据整编的装置的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述。
如图1所示,为本发明实施例中,提供的一种用户数据整编的方法,所述方法包括以下步骤:
步骤S1、获取用户数据,并将所获取的用户数据存放至初始为空的基于链表的无界非阻塞队列中;
具体过程为,预先初始化一个基于链表的无界非阻塞队列ConcurrentLinkedQueue,将用户数据存放至该无界非阻塞队列中。
应当说明的是,用户数据包括功能编码、功能操作码、操作完成时长、功能完成总时长、用户所在部门、设备编号(Client ID)、设备类型(Android、PC、iOS)、上报时间、用户姓名、用户ID、操作是否成功、数据来源、终端版本号
可以理解的是,在用户数据存放至该无界非阻塞队列之前,还可以对用户数据进行预处理,比如根据用户编号,审核用户姓名和所在部门,标定具体行为类型和发生时间,为了避免同一天内重复上报数据,减轻网络流量和处理压力。
步骤S2、获取所述无界非阻塞队列的下一周期检测时间;
具体过程为,预先设置无界非阻塞队列的周期检测时间,并根据当前时间,对应获取无界非阻塞队列的每一次周期检测时间。例如,设置周期检测时间为5秒,根据当前时间,可以判断出距离下一次周期检测的具体时间。
步骤S3、待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量大于预设值,则对所述无界非阻塞队列中存放的用户数据进行整编并存入预设的数据库中,且进一步清空所述无界非阻塞队列。
具体过程为,待无界非阻塞队列的下一周期检测时间到达时,若无界非阻塞队列中存放的用户数据的数量大于预设值(如200),则会立即启动一个基于Runner的数据整编线程来处理无界非阻塞队列中的用户数据,并存入预设的数据库(如MySQL)中,且进一步将无界非阻塞队列重新归为空,为下次用户数据存放及整理做准备,这样有利于用户数据过于集中时加快处理能力,避免数据库(如MySQL)的频繁读取及写入,不仅释放CPU及内存的占用率,还能保证数据的完整性。
当然,对于无界非阻塞队列的下一周期检测时间到达时,若无界非阻塞队列中存放的用户数据的数量小于预设值(如200),会先等待一定时间(如30秒)后,启动基于Runner的数据整编线程来处理无界非阻塞队列中的用户数据,并存入预设的数据库(如MySQL)中,且进一步将无界非阻塞队列重新归为空,这样能避免占用无界非阻塞队列,同时也能避免数据库(如MySQL)的频繁读取及写入,不仅释放CPU及内存的占用率,还能保证数据的完整性。
此时,数据整编线程对无界非阻塞队列中存放的用户数据进行整编具体如下:
对无界非阻塞队列中存放的用户数据进行索引查询,将行为、设备类型、用户、部门及版本都相同的多条用户数据仅处理为一条记录但会累加计数,将行为、设备类型、用户、部门及版本之中任一个相异的多条用户数据均保留为一条记录;即同一行为、同一设备类型、同一用户、同一部门及同一版本的多条用户数据仅为一条记录,但数量为相应加一的方式累加;而只要多条用户数据中存在不同行为、不同设备类型、不同用户、不同部门及不同版本之中一种情况,则都会单独作为一条记录;
确定周期写入预设的数据库中的时间(比如30秒),并在每一周期写入预设的数据库中的时间达到时,将无界非阻塞队列处理后的记录均写入预设的数据库(如MySQL)中。
当然,还可以在无界非阻塞队列处理后的记录均写入预设的数据库(如MySQL)之前,会对无界非阻塞队列处理后的记录增加关键字索引,增加查询效率。
当然,还可以确定无界非阻塞队列处理后的记录均写入预设的数据库的当前时间,并删除预设的数据库中距离当前时间超出三个月的记录,这样能够避免预设的数据库(如MySQL)因历史数据堆积而导致性能下降的问题。
如图2所示,为本发明实施例中的一种用户数据整编的方法的应用场景图。在图2中,终端为用户数据报送的移动设备,服务端为预装有用户数据整编方法的服务器。
用户使用终端的核心功能时,用户会按照终端上报规则调用服务端提供的Http接口,将用户操作核心功能行为数据及时上报给数据采集服务端。
服务端采用SpringBoot+Hibernate+Dubbo+Shiro+MySQL架构设计,在启动时会初始化一个基于链表的无界非阻塞队列ConcurrentLinkedQueue来存放用户数据,同时会启动一个基于Runner的数据整编线程来处理这个队列中的用户数据。
服务端接口接收到终端上报的数据,首先根据用户编号到服务端高速缓存JVM中查询用户姓名和所在部门进行审核,重新对用户数据进行预处理并放入无界非阻塞队列ConcurrentLinkedQueue中。数据整编线程根据无界非阻塞队列的周期检测时间对队列中的数据进行读取,如果队列中的数据大于等于200则立即进行数据整编,如果数据小于200,数据整编线程等待30秒后再进行数据整编。整编后的数据每30秒进行一次持久化操作,写入MySQL数据库中,并且添加定时任务,对MySQL数据库中三个月之前的历史数据进行清理。
如图3所示,为本发明实施例中提供的一种用户数据整编的装置,包括:
数据存放单元10,用于获取用户数据,并将所获取的用户数据存放至初始为空的基于链表的无界非阻塞队列中;
检测时间获取单元20,用于获取所述无界非阻塞队列的下一周期检测时间;
第一数据整编单元30,用于待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量大于预设值,则对所述无界非阻塞队列中存放的用户数据进行整编并存入预设的数据库中,且进一步清空所述无界非阻塞队列。
其中,还包括:
第二数据整编单元40,用于待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量小于所述预设值,则等待一定时间后,对所述无界非阻塞队列中存放的用户数据进行整编并存入所述预设的数据库中,且进一步清空所述无界非阻塞队列。
实施本发明实施例,具有如下有益效果:
本发明基于链表的无界非阻塞队列来存放用户数据,并在无界非阻塞队列的下一周期检测时间到达时,根据用户数据的数量与预设值进行对比来启动整编或推迟启动整编,从而有利于用户数据过于集中时加快处理能力,避免数据库的频繁读取及写入,不仅释放CPU及内存的占用率,还能保证数据的完整性。
值得注意的是,上述装置实施例中,所包括的各个单元只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以存储于一计算机可读取存储介质中,所述的存储介质,如ROM/RAM、磁盘、光盘等。
以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。

Claims (7)

1.一种用户数据整编的方法,其特征在于,所述方法包括以下步骤:
获取用户数据,并将所获取的用户数据存放至初始为空的基于链表的无界非阻塞队列中;
获取所述无界非阻塞队列的下一周期检测时间;
待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量大于预设值,则对所述无界非阻塞队列中存放的用户数据进行整编并存入预设的数据库中,且进一步清空所述无界非阻塞队列。
2.如权利要求1所述的用户数据整编的方法,其特征在于,所述方法进一步包括:
待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量小于所述预设值,则等待一定时间后,对所述无界非阻塞队列中存放的用户数据进行整编并存入所述预设的数据库中,且进一步清空所述无界非阻塞队列。
3.如权利要求1或2所述的用户数据整编的方法,其特征在于,所述对所述无界非阻塞队列中存放的用户数据进行整编并存入所述预设的数据库中的具体步骤包括:
对所述无界非阻塞队列中存放的用户数据进行索引查询,将行为、设备类型、用户、部门及版本都相同的多条用户数据仅处理为一条记录但会累加计数,将行为、设备类型、用户、部门及版本之中任一个相异的多条用户数据均保留为一条记录;
确定周期写入所述预设的数据库中的时间,并在每一周期写入所述预设的数据库中的时间达到时,将所述无界非阻塞队列处理后的记录均写入所述预设的数据库中。
4.如权利要求3所述的用户数据整编的方法,其特征在于,所述方法进一步包括:
在所述无界非阻塞队列处理后的记录均写入所述预设的数据库之前,会对所述无界非阻塞队列处理后的记录增加关键字索引。
5.如权利要求3所述的用户数据整编的方法,其特征在于,所述方法进一步包括:
确定所述无界非阻塞队列处理后的记录均写入所述预设的数据库的当前时间,并删除所述预设的数据库中距离当前时间超出三个月的记录。
6.一种用户数据整编的装置,其特征在于,包括:
数据存放单元,用于获取用户数据,并将所获取的用户数据存放至初始为空的基于链表的无界非阻塞队列中;
检测时间获取单元,用于获取所述无界非阻塞队列的下一周期检测时间;
第一数据整编单元,用于待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量大于预设值,则对所述无界非阻塞队列中存放的用户数据进行整编并存入预设的数据库中,且进一步清空所述无界非阻塞队列。
7.如权利要求6所述的用户数据整编的装置,其特征在于,还包括:
第二数据整编单元,用于待所述无界非阻塞队列的下一周期检测时间到达时,若判定所述无界非阻塞队列中存放的用户数据的数量小于所述预设值,则等待一定时间后,对所述无界非阻塞队列中存放的用户数据进行整编并存入所述预设的数据库中,且进一步清空所述无界非阻塞队列。
CN201910560726.3A 2019-06-26 2019-06-26 一种用户数据整编的方法及装置 Pending CN110321358A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910560726.3A CN110321358A (zh) 2019-06-26 2019-06-26 一种用户数据整编的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910560726.3A CN110321358A (zh) 2019-06-26 2019-06-26 一种用户数据整编的方法及装置

Publications (1)

Publication Number Publication Date
CN110321358A true CN110321358A (zh) 2019-10-11

Family

ID=68120372

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910560726.3A Pending CN110321358A (zh) 2019-06-26 2019-06-26 一种用户数据整编的方法及装置

Country Status (1)

Country Link
CN (1) CN110321358A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112671795A (zh) * 2020-12-30 2021-04-16 南方电网深圳数字电网研究院有限公司 基于即时通讯的安全防护方法、装置、系统及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106131138A (zh) * 2016-06-27 2016-11-16 浪潮软件股份有限公司 一种基于非阻塞队列的展示数据实时推送系统和方法
CN107391274A (zh) * 2017-06-29 2017-11-24 武汉斗鱼网络科技有限公司 离线消息的处理方法及装置
CN107422994A (zh) * 2017-08-02 2017-12-01 郑州云海信息技术有限公司 一种提高数据读写性能的方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106131138A (zh) * 2016-06-27 2016-11-16 浪潮软件股份有限公司 一种基于非阻塞队列的展示数据实时推送系统和方法
CN107391274A (zh) * 2017-06-29 2017-11-24 武汉斗鱼网络科技有限公司 离线消息的处理方法及装置
CN107422994A (zh) * 2017-08-02 2017-12-01 郑州云海信息技术有限公司 一种提高数据读写性能的方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112671795A (zh) * 2020-12-30 2021-04-16 南方电网深圳数字电网研究院有限公司 基于即时通讯的安全防护方法、装置、系统及存储介质

Similar Documents

Publication Publication Date Title
EP2924594B1 (en) Data encoding and corresponding data structure in a column-store database
US9712646B2 (en) Automated client/server operation partitioning
CN103370691B (zh) 管理缓冲器溢出状况
CN102906751A (zh) 一种数据存储、数据查询的方法及装置
CN103392169B (zh) 排序方法和系统
CN109241159B (zh) 一种数据立方体的分区查询方法、系统及终端设备
CN111339078A (zh) 数据实时存储方法、数据查询方法、装置、设备、介质
CN104462222A (zh) 一种卡口车辆通行数据的分布式存储方法及系统
CN106503008B (zh) 文件存储方法和装置及文件查询方法和装置
CN104298736A (zh) 数据集合连接方法、装置及数据库系统
CN100378663C (zh) 将应用程序动态下载到用户识别模块的方法、系统及模块
CN109842621A (zh) 一种减少token存储数量的方法及终端
CN108228432A (zh) 一种分布式链路跟踪、分析方法及服务器、全局调度器
CN110321364B (zh) 信用卡管理系统的交易数据查询方法、装置及终端
CN114490060A (zh) 内存分配方法、装置、计算机设备和计算机可读存储介质
CN110321358A (zh) 一种用户数据整编的方法及装置
CN112860412A (zh) 业务数据处理方法、装置、电子设备及存储介质
CN106919566A (zh) 一种基于海量数据的查询统计方法及系统
CN110569315B (zh) 基于数据仓库的数据处理方法和装置
US9659061B2 (en) Method for efficient aggregation of numerous data using sparse bit sets
CN110188069B (zh) 一种csv文件存储方法、装置及计算机设备
CN105468603B (zh) 数据选择方法及装置
CN112650931A (zh) 一种内容推荐方法
CN112402955B (zh) 游戏日志记录方法及系统
CN110750563A (zh) 多模型数据处理方法、系统、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20191011