CN104462443A - 数据处理方法和装置 - Google Patents

数据处理方法和装置 Download PDF

Info

Publication number
CN104462443A
CN104462443A CN201410779228.5A CN201410779228A CN104462443A CN 104462443 A CN104462443 A CN 104462443A CN 201410779228 A CN201410779228 A CN 201410779228A CN 104462443 A CN104462443 A CN 104462443A
Authority
CN
China
Prior art keywords
parameter
parameter value
relational expression
value
data processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410779228.5A
Other languages
English (en)
Other versions
CN104462443B (zh
Inventor
何恺铎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Gridsum Technology Co Ltd
Original Assignee
Beijing Gridsum Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Gridsum Technology Co Ltd filed Critical Beijing Gridsum Technology Co Ltd
Priority to CN201410779228.5A priority Critical patent/CN104462443B/zh
Publication of CN104462443A publication Critical patent/CN104462443A/zh
Application granted granted Critical
Publication of CN104462443B publication Critical patent/CN104462443B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24553Query execution of query operations

Abstract

本发明公开了一种数据处理方法和装置。其中,该数据处理方法包括:获取查询第一参数的查询请求和预先保存的参数集合;读取参数集合中预存的与第一参数存在关联关系的多个第二参数、及多个第二参数与第一参数的第一关系式;从数据库中查询各个第二参数的第二参数值;使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值。通过本发明,解决了现有技术中生成新的归因模型需重新实现所有数据的计算逻辑,导致开发成本高的问题,实现了降低归因模型的开发成本的效果。

Description

数据处理方法和装置
技术领域
本发明涉及数据处理领域,具体而言,涉及一种数据处理方法和装置。
背景技术
目前,归因模型已成为高级网站分析中的重要内容。主流的归因模型有First Click、Last Click、Average Click等,这些归因模型的建模思路是基于基础数据(如PV,转化等)按用户长期访问发生的行为通过某种计算方法进行贡献分配,以得出客观合理的渠道贡献。
其中,PV为Page View,即页面浏览量,是评价网站流量最常用的指标之一。
现有技术在实现归因模型时,需要针对每一种模型设计并实现计算方法,并将所有历史数据使用此计算方法进行运行,得出结果后将其输出至数据库以供查询。在归因计算过程中,一般需要回溯用户的整个生命周期,因此归因计算是计算密集型的应用。
由于现有的归因模型往往逻辑比较简单(如First Click将贡献100%分配至用户的第一次访问),不能够适应复杂的客户需求。若按照特定的客户需求(如,已有较为简单的归因模型的计算结果,但是客户要求得到与现有计算结果相关的其他计算结果)增添一套全新的归因模型,则需要重新回溯用户的整个生命周期,以实现该归因计算逻辑并对数据重新进行归因计算,需要较大的开发成本并增加了系统运行负担。此外,当归因计算逻辑或权重参数需要有所修改时,此归因模型亦需要重新修改和计算,计算所需时间长。
针对现有技术中生成新的归因模型需重新实现所有数据的计算逻辑,导致开发成本高的问题,目前尚未提出有效的解决方案。
发明内容
本发明的主要目的在于提供一种数据处理方法和装置,以解决现有技术中生成新的归因模型需重新实现所有数据的计算逻辑,导致开发成本高的问题。
为了实现上述目的,根据本发明实施例的一个方面,提供了一种数据处理方法。
根据本发明的数据处理方法包括:获取查询第一参数的查询请求和预先保存的参数集合;读取参数集合中预存的与第一参数存在关联关系的多个第二参数、及多个第二参数与第一参数的第一关系式;从数据库中查询各个第二参数的第二参数值;使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值。
进一步地,在从数据库中查询各个第二参数的第二参数值之后,数据处理方法还包括:将第二参数值按照查询请求中的查询维度合并得到数据表,其中,查询维度为第一参数的属性。
进一步地,使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值包括:从数据表中查询各个查询维度的第二参数值;按照查询维度计算第二参数值对应第一关系式的值,得到多个第一参数值。
进一步地,读取参数集合中预存的与第一参数存在关联关系的多个第二参数、及多个第二参数与第一参数的第一关系式包括:读取与第一参数存在关联关系的多个第二参数;基于关联关系确定多个第二参数之间的算术关系;保存关联关系和算术关系生成第一关系式。
进一步地,使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值包括:解析第一关系式得到第二关系式,其中,第二关系式包括各个第二参数值的第一节点和第一参数值的第二节点,各个第一节点之间具有算术关系,第二节点与各个第一节点之间具有关联关系;将各个第二参数值输入至对应的第一节点;计算第二参数值对应算术关系的值,得到第二节点的第一参数值。
为了实现上述目的,根据本发明实施例的另一方面,提供了一种数据处理装置。
根据本发明的数据处理装置包括:获取模块,用于获取查询第一参数的查询请求和预先保存的参数集合;读取模块,用于读取参数集合中预存的与第一参数存在关联关系的多个第二参数、及多个第二参数与第一参数的第一关系式;查询模块,用于从数据库中查询各个第二参数的第二参数值;计算模块,用于使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值。
进一步地,数据处理装置还包括:合并模块,用于在从数据库中查询各个第二参数的第二参数值之后,将第二参数值按照查询请求中的查询维度合并得到数据表,其中,查询维度为第一参数的属性。
进一步地,计算模块包括:查询子模块,用于从数据表中查询各个查询维度的第二参数值;第一计算子模块,用于按照查询维度计算第二参数值对应第一关系式的值,得到多个第一参数值。
进一步地,读取模块包括:读取子模块,用于读取与第一参数存在关联关系的多个第二参数;确定模块,用于基于关联关系确定多个第二参数之间的算术关系;保存模块,用于保存关联关系和算术关系生成第一关系式。
进一步地,计算模块包括:解析模块,用于解析第一关系式得到第二关系式,其中,第二关系式包括各个第二参数值的第一节点和第一参数值的第二节点,各个第一节点之间具有算术关系,第二节点与各个第一节点之间具有关联关系;输入模块,用于将各个第二参数值输入至对应的第一节点;第二计算子模块,用于计算第二参数值对应算术关系的值,得到第二节点的第一参数值。
采用本发明实施例,在获取查询第一参数的查询请求和预先保存的参数集合之后,读取参数集合中预存的与第一参数存在关联关系的多个第二参数及多个第二参数与第一参数的第一关系式,从数据库中查询各个第二参数的第二参数值,然后使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值。在本发明上述实施例中,基于与第一参数(如新生成的归因模型)存在关联关系的多个第二参数(如已有的基础归因模型),使用第二参数与第一参数的第一关系式计算第一参数的参数值,无需重新设计归因模型并按照新设计的归因模型计算历史数据,避免了现有技术中开发额外的归因模型的问题,降低了归因模型的开发成本。通过本发明实施例,解决了现有技术中生成新的归因模型需重新实现所有数据的计算逻辑,导致开发成本高的问题,实现了降低归因模型的开发成本的效果。
附图说明
构成本申请的一部分的附图用来提供对本发明的进一步理解,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的数据处理方法的流程图;
图2是根据本发明实施例的一种可选的通过第二参数得到第一参数的示意图;以及
图3是根据本发明实施例的数据处理装置的示意图。
具体实施方式
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例提供了一种数据处理方法。
图1是根据本发明实施例的数据处理方法的流程图。如图1所示,该数据处理方法可以包括步骤如下:
步骤S102,获取查询第一参数的查询请求和预先保存的参数集合。
步骤S104,读取参数集合中预存的与第一参数存在关联关系的多个第二参数、及多个第二参数与第一参数的第一关系式。
步骤S106,从数据库中查询各个第二参数的第二参数值。
步骤S108,使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值。
采用本发明实施例,在获取查询第一参数的查询请求和预先保存的参数集合之后,读取参数集合中预存的与第一参数存在关联关系的多个第二参数及多个第二参数与第一参数的第一关系式,从数据库中查询各个第二参数的第二参数值,然后使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值。在本发明上述实施例中,基于与第一参数(如新生成的归因模型)存在关联关系的多个第二参数(如已有的基础归因模型),使用第二参数与第一参数的第一关系式计算第一参数的参数值,无需重新设计归因模型并按照新设计的归因模型计算历史数据,避免了现有技术中开发额外的归因模型的问题,降低了归因模型的开发成本。通过本发明实施例,解决了现有技术中生成新的归因模型需重新实现所有数据的计算逻辑,导致开发成本高的问题,实现了降低归因模型的开发成本的效果。
在上述的实施例中,第一参数可以是新生成的归因模型,第一参数值可以为新的归因模型的值;第二参数可以是基础归因模型,第二参数值可以为基础归因模型的值,其中,第一参数与第二参数存在关联关系;预先保存的参数集合(即保存有多个基础归因模型的集合)中保存有预先获取的第二参数的基础归因模型。
根据本发明上述实施例,在从数据库中查询各个第二参数的第二参数值之后,该数据处理方法还可以包括:将第二参数值按照查询请求中的查询维度合并得到数据表,其中,查询维度为第一参数的属性。可选地,第一参数的属性可以为:网页的点击率、和点击时间等。
具体地,参数集合中保存有各个第二参数及其参数值,第二参数及其参数值可以为基础归因模型及对应的模型的值。
图2是根据本发明实施例的一种可选的通过第二参数计算第一参数的示意图。下面结合图2详细介绍本发明上述实施例。
如图2所示,一个第二参数为计算周一的网页点击率的基础归因模型(即图2所示的FirstClick),该基础归因模型的第二参数值为按三个时段记录的周一的网页点击率,即8:00-16:00的网页点击率为200(即第二参数值),16:00-24:00的网页点击率为300(即第二参数值),00:00-8:00的网页点击率为100(即第二参数值);另一个第二参数为计算周二的网页点击率的基础归因模型(即图2所示的LastClick),该基础归因模型的第二参数值为按三个时段记录的周二的网页点击率,即8:00-16:00的网页点击率为150(即第二参数值),16:00-24:00的网页点击率为200(即第二参数值),00:00-8:00的网页点击率为50(即第二参数值),那么在将第二参数合并为数据表时,将相同时段的网页点击率放在同一行中,具体如图2的数据表所示。
在本发明的上述实施例中,使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值可以包括:从数据表中查询各个查询维度的第二参数值;按照查询维度计算第二参数值对应第一关系式的值,得到多个第一参数值。
具体地,从数据表中查询各个查询维度的第二参数值,使用第二参数值按照查询维度和第一关系式计算第一参数值,即从保存有各个第二参数及其参数值的数据表中读取各个查询维度对应的第二参数值,然后使用第二参数值,根据查询维度与第一关系式计算第一参数值。
根据本发明上述实施例,读取参数集合中预存的与第一参数存在关联关系的多个第二参数、及多个第二参数与第一参数的第一关系式可以包括:读取与第一参数存在关联关系的多个第二参数;基于关联关系确定多个第二参数之间的算术关系;保存关联关系和算术关系生成第一关系式。
具体地,读取与第一参数存在关联关系的多个第二参数,基于第一参数与第二参数的关联关系确定多个第二参数之间的算术关系,并保存该关联关系和算术关系生成第一关系式。
在上述的实施例中,基于第一参数与第二参数的关联关系,确定多个第二参数之间通过四则运算组合得到第一参数的计算方法即多个第二参数之间的算术关系。
在如图2所示的实施例中,若查询请求为获取周二与周一的网页点击率的差别的请求,参数集合中的两个基础归因模型(即上述实施例中的第二参数)分别为:FirstClick和LastClick,那么根据本发明上述实施例,若要获取周二与周一的网页点击率的差别,首先按照记录网页点击率的时间段将周一与周二的网页点击率合并到数据表中,根据第一参数与第二参数的关联关系可以得到,若要计算第一参数,计算FirstClick的第二参数值与LastClick的第二参数值之差即可,即确定多个第二参数之间的算术关系为FirstClick的第二参数值减去LastClick的第二参数值,保存该关联关系与算术关系生成第一关系式,即第一参数=FirstClick的第二参数值-LastClick的第二参数值。
进一步地,使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值可以包括:解析第一关系式得到第二关系式,其中,第二关系式包括各个第二参数值的第一节点和第一参数值的第二节点,各个第一节点之间具有算术关系,第二节点与各个第一节点之间具有关联关系;将各个第二参数值输入至对应的第一节点;计算第二参数值对应算术关系的值,得到第二节点的第一参数值。
具体地,将算术关系的第一关系式解析为计算机程序可以识别的计算公式,即将第一关系式解析为输入第二参数值即可通过程序计算得到第一参数值的第二关系式,其中,第二关系式中包括两个节点,各个第二参数值对应的第一节点之间具有与第一公式的算术关系的计算逻辑相同的关联关系。
通过本发明上述实施例,基于现有的基础归因模型的第二参数及其参数值,通过计算机程序使用简单的四则运算组合计算第一参数值,无需重新开发额外的归因模型,节省了开发归因模型的开发成本;并且通过计算机程序使用简单的四则运算组合计算第一参数值,无需现有技术中基于额外开发的归因模型,通过回溯用户的整个生命周期以获得第一参数值,降低了计算机的系统运行负荷。
在本发明的一个可选的实施例中,可以通过如下的数据处理方法实现本发明。
具体地,该数据处理方法可以包括如下步骤:
步骤S1,根据用户需求,使用四则运算组合基础归因模型,形成新派生模型的计算公式。
在该实施例中,用户需求通过上述实施例中的查询请求实现;新派生模型的计算公式即本发明上述实施例中的第一关系式。
步骤S2,根据计算公式中的基础归因模型,分别进行贡献查询得到各个数据。
具体地,根据计算公式中的基础归因模型,按照查询请求中的查询维度在数据库中进行贡献查询并得到各个数据,对应上述实施例中的从数据库中查询参数集合得到第二参数值。
其中,数据即为发明上述实施例中的第二参数值。
步骤S3,将查询到的数据按查询维度进行合并,得到数据表。
具体地,将查询到的数据按照查询请求中的查询维度合并,得到数据表。
步骤S4,使用解析器解析新派生模型的计算公式,生成表达式树。
其中,解析器为将新派生模型的计算公式解析为计算机可以识别的计算公式的程序,表达式树即为本发明上述实施例中的第二关系式。
步骤S5,基于表达式树和数据表,计算用户请求查询的数据。
具体地,将数据表中的各个行作为数据输入值,按照表达式树计算各个行对应的数据(即本发明上述实施例中的第二参数值),从而快速地计算出每一行的维度值(即数据)所对应的新派生模型的贡献值(即本发明上述实施例中的第一参数值)。
通过本发明上述实施例,在现有的基础归因模型的基础上,进行基础模型的组合搭配,通过四则运算和加权等方式形成新的归因模型,以达到加强和修正现有模型的目的。在上述实施例中,无需额外的模型开发成本和计算成本,直接在现有基础归因模型的查询结果上进行运算得出结果,灵活度高,成本小;并且,由于本发明实施例采用了简单的四则运算和加权的形式生成计算公式,计算简单快速,可以支持公式参数的实时调整。
在上述的实施例中,使用一个或多个已有归因模型及其查询数据,使用四则运算将已有归因模型及其查询数据组合成派生归因模型,按照派生归因模型进行计算后所得出的贡献值即为派生模型下该维度的维度值。
本发明实施例还提供了一种数据处理装置。该装置可以通过本发明上述实施例中的数据处理方法实现其功能。
图3是根据本发明实施例的数据处理装置的示意图。如图3所示,该数据处理装置可以包括:获取模块10、读取模块30、查询模块50以及计算模块70。
其中,获取模块10用于获取查询第一参数的查询请求和预先保存的参数集合;读取模块30用于读取参数集合中预存的与第一参数存在关联关系的多个第二参数、及多个第二参数与第一参数的第一关系式;查询模块50用于从数据库中查询各个第二参数的第二参数值;计算模块70用于使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值。
采用本发明实施例,在获取查询第一参数的查询请求和预先保存的参数集合之后,读取参数集合中预存的与第一参数存在关联关系的多个第二参数及多个第二参数与第一参数的第一关系式,从数据库中查询各个第二参数的第二参数值,然后使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值。在本发明上述实施例中,基于与第一参数(如新生成的归因模型)存在关联关系的多个第二参数(如已有的基础归因模型),使用第二参数与第一参数的第一关系式计算第一参数的参数值,无需重新设计归因模型并按照新设计的归因模型计算历史数据,避免了现有技术中开发额外的归因模型的问题,降低了归因模型的开发成本。通过本发明实施例,解决了现有技术中生成新的归因模型需重新实现所有数据的计算逻辑,导致开发成本高的问题,实现了降低归因模型的开发成本的效果。
在上述的实施例中,第一参数可以是新生成的归因模型,第一参数值可以为新的归因模型的值;第二参数可以是基础归因模型,第二参数值可以为基础归因模型的值,其中,第一参数与第二参数存在关联关系;预先保存的参数集合(即保存有多个基础归因模型的集合)中保存有预先获取的第二参数的基础归因模型。
根据本发明上述实施例,数据处理装置还可以包括:合并模块,用于在从数据库中查询各个第二参数的第二参数值之后,将第二参数值按照查询请求中的查询维度合并得到数据表,其中,查询维度为第一参数的属性。可选地,第一参数的属性可以为:网页的点击率、和点击时间等。
具体地,参数集合中保存有各个第二参数及其参数值,第二参数及其参数值可以为基础归因模型及对应的模型的值。
在上述实施例中,从数据表中读取各个第二参数及其参数值,并将各个第二参数及其参数值保存在一个数据表中,以便在按照第一关系式计算第一参数时使用。
在本发明的上述实施例中,计算模块可以包括:查询子模块,用于从数据表中查询各个查询维度的第二参数值;第一计算子模块,用于按照查询维度计算第二参数值对应第一关系式的值,得到多个第一参数值。
具体地,从数据表中查询各个查询维度的第二参数值,使用第二参数值按照查询维度和第一关系式计算第一参数值,即从保存有各个第二参数及其参数值的数据表中读取各个查询维度对应的第二参数值,然后使用第二参数值,根据查询维度与第一关系式计算第一参数值。
根据本发明上述实施例,读取模块可以包括:读取子模块,用于读取与第一参数存在关联关系的多个第二参数;确定模块,用于基于关联关系确定多个第二参数之间的算术关系;保存模块,用于保存关联关系和算术关系生成第一关系式。
具体地,读取与第一参数存在关联关系的多个第二参数,基于第一参数与第二参数的关联关系确定多个第二参数之间的算术关系,并保存该关联关系和算术关系生成第一关系式。
在上述的实施例中,基于第一参数与第二参数的关联关系,确定多个第二参数之间通过四则运算组合得到第一参数的计算方法即多个第二参数之间的算术关系。
进一步地,计算模块可以包括:解析模块,用于解析第一关系式得到第二关系式,其中,第二关系式包括各个第二参数值的第一节点和第一参数值的第二节点,各个第一节点之间具有算术关系,第二节点与各个第一节点之间具有关联关系;输入模块,用于将各个第二参数值输入至对应的第一节点;第二计算子模块,用于计算第二参数值对应算术关系的值,得到第二节点的第一参数值。
具体地,将算术关系的第一关系式解析为计算机程序可以识别的计算公式,即将第一关系式解析为输入第二参数值即可通过程序计算得到第一参数值的第二关系式,其中,第二关系式中包括两个节点,各个第二参数值对应的第一节点之间具有与第一公式的算术关系的计算逻辑相同的关联关系。
通过本发明上述实施例,基于现有的基础归因模型的第二参数及其参数值,通过计算机程序使用简单的四则运算组合计算第一参数值,无需重新开发额外的归因模型,节省了开发归因模型的开发成本;并且通过计算机程序使用简单的四则运算组合计算第一参数值,无需现有技术中基于额外开发的归因模型,通过回溯用户的整个生命周期以获得第一参数值,降低了计算机的系统运行负荷。
本实施例中所提供的各个模块与方法实施例对应步骤所提供的使用方法相同、应用场景也可以相同。当然,需要注意的是,上述模块涉及的方案可以不限于上述实施例中的内容和场景,且上述模块可以运行在计算机终端或移动终端,可以通过软件或硬件实现。
从以上的描述中,可以看出,本发明实现了如下技术效果:
采用本发明实施例,在获取查询第一参数的查询请求和预先保存的参数集合之后,读取参数集合中预存的与第一参数存在关联关系的多个第二参数及多个第二参数与第一参数的第一关系式,从数据库中查询各个第二参数的第二参数值,然后使用第一关系式对多个第二参数的第二参数值进行计算,得到第一参数的第一参数值。在本发明上述实施例中,基于与第一参数(如新生成的归因模型)存在关联关系的多个第二参数(如已有的基础归因模型),使用第二参数与第一参数的第一关系式计算第一参数的参数值,无需重新设计归因模型并按照新设计的归因模型计算历史数据,避免了现有技术中开发额外的归因模型的问题,降低了归因模型的开发成本。通过本发明实施例,解决了现有技术中生成新的归因模型需重新实现所有数据的计算逻辑,导致开发成本高的问题,实现了降低归因模型的开发成本的效果。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种数据处理方法,其特征在于,包括:
获取查询第一参数的查询请求和预先保存的参数集合;
读取所述参数集合中预存的与所述第一参数存在关联关系的多个第二参数、及多个所述第二参数与所述第一参数的第一关系式;
从数据库中查询各个所述第二参数的第二参数值;
使用所述第一关系式对多个所述第二参数的第二参数值进行计算,得到所述第一参数的第一参数值。
2.根据权利要求1所述的数据处理方法,其特征在于,在从数据库中查询各个所述第二参数的第二参数值之后,所述数据处理方法还包括:
将所述第二参数值按照所述查询请求中的查询维度合并得到数据表,其中,所述查询维度为所述第一参数的属性。
3.根据权利要求2所述的数据处理方法,其特征在于,使用所述第一关系式对多个所述第二参数的第二参数值进行计算,得到所述第一参数的第一参数值包括:
从所述数据表中查询各个所述查询维度的所述第二参数值;
按照所述查询维度计算所述第二参数值对应所述第一关系式的值,得到多个所述第一参数值。
4.根据权利要求1所述的数据处理方法,其特征在于,读取所述参数集合中预存的与所述第一参数存在关联关系的多个第二参数、及多个所述第二参数与所述第一参数的第一关系式包括:
读取与所述第一参数存在所述关联关系的多个所述第二参数;
基于所述关联关系确定多个所述第二参数之间的算术关系;
保存所述关联关系和所述算术关系生成所述第一关系式。
5.根据权利要求4所述的数据处理方法,其特征在于,使用所述第一关系式对多个所述第二参数的第二参数值进行计算,得到所述第一参数的第一参数值包括:
解析所述第一关系式得到第二关系式,其中,所述第二关系式包括各个所述第二参数值的第一节点和所述第一参数值的第二节点,各个所述第一节点之间具有所述算术关系,所述第二节点与各个所述第一节点之间具有所述关联关系;
将各个所述第二参数值输入至对应的所述第一节点;
计算所述第二参数值对应所述算术关系的值,得到所述第二节点的所述第一参数值。
6.一种数据处理装置,其特征在于,包括:
获取模块,用于获取查询第一参数的查询请求和预先保存的参数集合;
读取模块,用于读取所述参数集合中预存的与所述第一参数存在关联关系的多个第二参数、及多个所述第二参数与所述第一参数的第一关系式;
查询模块,用于从数据库中查询各个所述第二参数的第二参数值;
计算模块,用于使用所述第一关系式对多个所述第二参数的第二参数值进行计算,得到所述第一参数的第一参数值。
7.根据权利要求6所述的数据处理装置,其特征在于,所述数据处理装置还包括:
合并模块,用于在从数据库中查询各个所述第二参数的第二参数值之后,将所述第二参数值按照所述查询请求中的查询维度合并得到数据表,其中,所述查询维度为所述第一参数的属性。
8.根据权利要求7所述的数据处理装置,其特征在于,所述计算模块包括:
查询子模块,用于从所述数据表中查询各个所述查询维度的所述第二参数值;
第一计算子模块,用于按照所述查询维度计算所述第二参数值对应所述第一关系式的值,得到多个所述第一参数值。
9.根据权利要求6所述的数据处理装置,其特征在于,所述读取模块包括:
读取子模块,用于读取与所述第一参数存在所述关联关系的多个所述第二参数;
确定模块,用于基于所述关联关系确定多个所述第二参数之间的算术关系;
保存模块,用于保存所述关联关系和所述算术关系生成所述第一关系式。
10.根据权利要求9所述的数据处理装置,其特征在于,所述计算模块包括:
解析模块,用于解析所述第一关系式得到第二关系式,其中,所述第二关系式包括各个所述第二参数值的第一节点和所述第一参数值的第二节点,各个所述第一节点之间具有所述算术关系,所述第二节点与各个所述第一节点之间具有所述关联关系;
输入模块,用于将各个所述第二参数值输入至对应的所述第一节点;
第二计算子模块,用于计算所述第二参数值对应所述算术关系的值,得到所述第二节点的所述第一参数值。
CN201410779228.5A 2014-12-15 2014-12-15 数据处理方法和装置 Active CN104462443B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410779228.5A CN104462443B (zh) 2014-12-15 2014-12-15 数据处理方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410779228.5A CN104462443B (zh) 2014-12-15 2014-12-15 数据处理方法和装置

Publications (2)

Publication Number Publication Date
CN104462443A true CN104462443A (zh) 2015-03-25
CN104462443B CN104462443B (zh) 2018-02-02

Family

ID=52908478

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410779228.5A Active CN104462443B (zh) 2014-12-15 2014-12-15 数据处理方法和装置

Country Status (1)

Country Link
CN (1) CN104462443B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105224690A (zh) * 2015-10-30 2016-01-06 上海达梦数据库有限公司 生成并选择对应含参语句的执行计划的方法及系统
CN105512204A (zh) * 2015-11-27 2016-04-20 英业达科技有限公司 数据提供方法
CN108171528A (zh) * 2016-12-07 2018-06-15 阿里巴巴集团控股有限公司 一种归因方法及归因系统
CN109522521A (zh) * 2018-11-16 2019-03-26 北京中创碳投科技有限公司 一种数据处理方法、装置和计算机设备
CN110704751A (zh) * 2019-10-22 2020-01-17 北京字节跳动网络技术有限公司 数据处理方法、装置、电子设备及存储介质
CN111125118A (zh) * 2019-12-27 2020-05-08 同盾(广州)科技有限公司 关联数据查询方法、装置、设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101035041A (zh) * 2007-02-02 2007-09-12 南京邮电大学 基于贝叶斯方法的无线传感器网络的节点失效预警方法
CN101141820A (zh) * 2007-10-22 2008-03-12 中兴通讯股份有限公司 一种3g网卡定位实现方法、装置及系统
CN101320442A (zh) * 2007-06-05 2008-12-10 上海博拉软件有限公司 基于物流管理平台实现货物实时跟踪监控的方法
US20140358963A1 (en) * 2013-06-03 2014-12-04 International Business Machines Corporation Information retrieval from a database system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101035041A (zh) * 2007-02-02 2007-09-12 南京邮电大学 基于贝叶斯方法的无线传感器网络的节点失效预警方法
CN101320442A (zh) * 2007-06-05 2008-12-10 上海博拉软件有限公司 基于物流管理平台实现货物实时跟踪监控的方法
CN101141820A (zh) * 2007-10-22 2008-03-12 中兴通讯股份有限公司 一种3g网卡定位实现方法、装置及系统
US20140358963A1 (en) * 2013-06-03 2014-12-04 International Business Machines Corporation Information retrieval from a database system

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105224690A (zh) * 2015-10-30 2016-01-06 上海达梦数据库有限公司 生成并选择对应含参语句的执行计划的方法及系统
CN105224690B (zh) * 2015-10-30 2019-06-18 上海达梦数据库有限公司 生成并选择对应含参语句的执行计划的方法及系统
CN105512204A (zh) * 2015-11-27 2016-04-20 英业达科技有限公司 数据提供方法
CN108171528A (zh) * 2016-12-07 2018-06-15 阿里巴巴集团控股有限公司 一种归因方法及归因系统
CN108171528B (zh) * 2016-12-07 2022-02-25 阿里巴巴集团控股有限公司 一种归因方法及归因系统
CN109522521A (zh) * 2018-11-16 2019-03-26 北京中创碳投科技有限公司 一种数据处理方法、装置和计算机设备
CN110704751A (zh) * 2019-10-22 2020-01-17 北京字节跳动网络技术有限公司 数据处理方法、装置、电子设备及存储介质
CN110704751B (zh) * 2019-10-22 2023-04-07 北京字节跳动网络技术有限公司 数据处理方法、装置、电子设备及存储介质
CN111125118A (zh) * 2019-12-27 2020-05-08 同盾(广州)科技有限公司 关联数据查询方法、装置、设备及介质
CN111125118B (zh) * 2019-12-27 2021-05-07 同盾(广州)科技有限公司 关联数据查询方法、装置、设备及介质

Also Published As

Publication number Publication date
CN104462443B (zh) 2018-02-02

Similar Documents

Publication Publication Date Title
CN104462443A (zh) 数据处理方法和装置
US11257005B2 (en) Training method and training system for machine learning system
US10356191B2 (en) System and method for separating content site visitor profiles
RU2607621C2 (ru) Способ, система и машиночитаемый носитель данных для группирования в социальных сетях
US20160246852A1 (en) Systems and Methods for Quantile Estimation in a Distributed Data System
CN104135507A (zh) 一种防盗链的方法和装置
US20170091689A1 (en) Continuously variable resolution of resource allocation
WO2017003496A1 (en) Infrastructure benchmarking based on dynamic cost modeling
Wang et al. A deterministic global optimization algorithm for generalized geometric programming
JP6748312B2 (ja) メディアミックスモデリングにおけるバイアスを除去するためのシステムおよび方法
CN105404974A (zh) 一种数据资产化方法、装置及管理平台
Smithamol et al. TMM: trust management middleware for cloud service selection by prioritization
CN104182544A (zh) 分析数据库的维度剖析方法及装置
CN115686499A (zh) 生成请求报文的方法、装置、存储介质以及电子设备
CN106909495A (zh) 一种数据的窗口统计方法、装置及系统
CN103646093A (zh) 搜索引擎数据处理方法和平台
US20170235847A1 (en) Data partioning based on end user behavior
US20220174125A1 (en) System and method for separating content site visitor profiles
US9384356B2 (en) Obscuring internet tendencies
US10726367B2 (en) Resource allocation forecasting
Zhang et al. An Adaptive Recommendation Method Based on Small-World Implicit Trust Network.
Gupta et al. OWA operator‐based hybrid framework for outlier reduction in web mining
Sakai et al. Division charts as granules and their merging algorithm for rule generation in nondeterministic data
Wu et al. A hybrid recommendation approach for hierarchical items
CN111368146A (zh) 一种路径信息的查询方法及装置、存储介质和处理器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: Parallel processed data prcessing method and apparatus thereof

Effective date of registration: 20190531

Granted publication date: 20180202

Pledgee: Shenzhen Black Horse World Investment Consulting Co., Ltd.

Pledgor: Beijing Guoshuang Technology Co.,Ltd.

Registration number: 2019990000503

CP02 Change in the address of a patent holder
CP02 Change in the address of a patent holder

Address after: 100083 No. 401, 4th Floor, Haitai Building, 229 North Fourth Ring Road, Haidian District, Beijing

Patentee after: BEIJING GRIDSUM TECHNOLOGY Co.,Ltd.

Address before: 100086 Beijing city Haidian District Shuangyushu Area No. 76 Zhichun Road cuigongfandian 8 layer A

Patentee before: BEIJING GRIDSUM TECHNOLOGY Co.,Ltd.