CN111078679A - 数据报表的生成方法、生成装置和计算机可读存储介质 - Google Patents
数据报表的生成方法、生成装置和计算机可读存储介质 Download PDFInfo
- Publication number
- CN111078679A CN111078679A CN201911334038.1A CN201911334038A CN111078679A CN 111078679 A CN111078679 A CN 111078679A CN 201911334038 A CN201911334038 A CN 201911334038A CN 111078679 A CN111078679 A CN 111078679A
- Authority
- CN
- China
- Prior art keywords
- cell
- data
- condition
- conditions
- generating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2428—Query predicate definition using graphical user interfaces, including menus and forms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2457—Query processing with adaptation to user needs
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Human Computer Interaction (AREA)
- Mathematical Physics (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了数据报表的生成方法、生成装置和计算机可读存储介质。所述数据报表的生成方法包括以下步骤:对单元格数据库中的全部单元格数据信息进行筛选过滤,获取生成数据报表所需的界面条件;对所述界面条件进行清洗归并,获取生成数据报表所需的数据采集条件;根据所述数据采集条件进行筛选过滤,获取生成数据报表所需的可用单元格数据信息;对所述可用单元格数据信息进行展示,以生成所述数据报表。本发明能够避免数据报表在生成后样式复杂的问题,由此便于用户的查询浏览。
Description
技术领域
本发明涉及数据查询和处理的技术领域,具体而言,涉及数据报表的生成方法、生成装置和计算机可读存储介质。
背景技术
随着计算机技术的不断发展,采用计算机进行数据录入、导出、查询和展示的产品受到了用户的欢迎。此类产品基于表格的数据模型而构建,并通过模型展示数据,以便用户快速获取所需的信息。
随着用户业务以及需求的愈加复杂,本领域出现了需要对表格中数据进行不规则展示或根据多个条件进行综合展示的需求。
在相关技术中,虽然用户可以在表格上设置查询条件,但表格中的单元格都是通过数据查询后的单元格扩展而得到的。其不便于展示复杂样式的数据报表或展示根据多个条件筛选获得的报表。
因此,相关技术中存在的问题之一是:数据报表在生成后的样式复杂,用户查询浏览不便。
发明内容
本发明旨在解决上述技术问题的至少之一。
为此,本发明的第一目的在于提供一种数据报表的生成方法。
本发明的第二目的在于提供一种数据报表的生成装置。
本发明的第三目的在于提供一种计算机可读存储介质。
为实现本发明的第一目的,本发明的实施例提供了一种数据报表的生成方法,其包括以下步骤:对单元格数据库中的全部单元格数据信息进行筛选过滤,获取生成数据报表所需的界面条件;对界面条件进行清洗归并,获取生成数据报表所需的数据采集条件;根据数据采集条件进行筛选过滤,获取生成数据报表所需的可用单元格数据信息;对可用单元格数据信息进行展示,以生成数据报表。
为了满足用户愈加复杂多变的数据查询需求,本实施例提出了区别于相关技术的数据报表的生成方法,其通过在界面条件中进一步配置数据采集条件,而使得表格数据处理产品能够实现在多个或多维度条件下的复杂数据查询筛选功能,由此简单而灵活地向用户展示其所需的数据,帮助用户提高效率,节约时间。
另外,本发明上述实施例提供的技术方案还可以具有如下附加技术特征:
上述技术方案中,界面条件包括:外部传入条件、行头单元格查询条件、行头单元格隐含条件、列头单元格查询条件和列头单元格隐含条件。对单元格数据库中的全部单元格数据信息进行筛选过滤,获取生成数据报表所需的界面条件的步骤具体包括:获取外部传入条件;在外部传入条件的范围内,获取行头单元格查询条件和行头单元格隐含条件;在外部传入条件的范围内,获取列头单元格查询条件和列头单元格隐含条件。
本实施例的界面条件为获取生成数据报表所需的前提性条件。对于表格数据处理产品的界面上展示的表格,表格的单元格上设置了不同的查询条件,针对于不同的查询条件,表格要展示不同条件下对应的数据。那么,为了生成数据报表,则首先需要完成界面条件的准备。即:为了获得用户所需的数据报表,本实施例首先需要按照用户输入或给出的指令,而按照要求对单元格数据库中的全部单元格数据信息进行筛选过滤。其中,界面条件的数量可以为一个,也可以为多个。
上述任一技术方案中,对界面条件进行清洗归并,获取生成数据报表所需的数据采集条件的步骤具体包括:获取外部传入条件、行头单元格查询条件、行头单元格隐含条件、列头单元格查询条件和列头单元格隐含条件中的重复条件和/或相同条件;在重复条件和/或相同条件中,采用靠近单元格数据信息的条件,覆盖远离单元格数据信息的条件,以对重复条件和/或相同条件进行清洗归并,并获取生成数据报表所需的数据采集条件。
本实施例采用了就近原则,即:采用靠近单元格数据信息的条件,覆盖远离单元格数据信息的条件。对于区域或单元格上不同的查询条件,通过采用以上的就近原则,本实施例可满足复杂条件下不同单元格展示不同数据的要求。
上述任一技术方案中,对界面条件进行清洗归并,获取生成数据报表所需的数据采集条件的步骤具体包括:由上至下地对在界面条件下展示的单元格数据信息进行轮询处理,通过轮询处理采集全部的可用条件信息;将可用条件信息置于单元格数据信息的行头上,和/或将可用条件信息置于单元格数据信息的列头上,以对界面条件进行清洗归并,并获取生成数据报表所需的数据采集条件。
通过在数据采集条件的采集过程中对查询的单元格区域做轮询处理,可由此采集到所有用到的可用条件信息,并将其置于行头列头上。按照从上到下行的顺序,轮询每个单元格的行头或者列头,把采集到的条件信息整理,分类到单元格上,则可实现对界面条件进行清洗归并。
上述任一技术方案中,根据数据采集条件进行筛选过滤,获取生成数据报表所需的可用单元格数据信息的步骤具体包括:根据数据采集条件,采用数据采集条件下展示的全部单元格数据信息中的每一个单元格数据信息作为一个查询线程,进行查询并获得查询结果;按照单元格数据信息的位置,对查询结果中包括的单元格数据信息进行交集处理,以获得可用单元格数据信息。
在本实施例中实施了分解查询的步骤,由于分成多个查询请求,以不同的线程执行查询,可通过多线程而提高查询速度。
上述任一技术方案中,数据采集条件包括行头数据采集条件和列头数据采集条件;按照单元格数据信息的位置,对查询结果中包括的单元格数据信息进行交集处理,以获得可用单元格数据信息的步骤具体包括:对通过行头数据采集条件查询获得的单元格数据信息进行过滤处理;采用经过过滤处理的单元格数据信息,与通过列头数据采集条件查询获得的单元格数据信息进行交集处理。
上述任一技术方案中,在按照单元格数据信息的位置,对查询结果中包括的单元格数据信息进行交集处理,以获得可用单元格数据信息的步骤中,采用映射归约模型,对查询结果中包括的单元格数据信息进行交集处理。
本实施例可通过映射归约模型的数据处理框架对查询结果进行扩展查询。
为实现本发明的第二目的,本发明的实施例提供了一种数据报表的生成装置,其包括:存储器,存储有计算机程序;处理器,执行计算机程序;其中,处理器在执行计算机程序时,实现如本发明任一实施例的数据报表的生成方法的步骤。
本发明实施例的数据报表的生成装置实现如本发明任一实施例的数据报表的生成方法的步骤,因此其具有如本发明任一实施例的数据报表的生成方法的全部有益效果,在此不再赘述。
为实现本发明的第三目的,本发明的实施例提供了一种计算机可读存储介质,其包括:计算机可读存储介质存储有计算机程序,计算机程序被执行时,实现如本发明任一实施例的数据报表的生成方法的步骤。
本发明实施例的计算机可读存储介质实现如本发明任一实施例的数据报表的生成方法的步骤,因此其具有如本发明任一实施例的数据报表的生成方法的全部有益效果,在此不再赘述。
本发明的附加方面和优点将在下面的描述部分中变得明显,或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明实施例的数据报表的生成方法的第一步骤流程图;
图2为本发明实施例的数据报表的生成方法的第二步骤流程图;
图3为采用本发明实施例的数据报表的生成方法列出的界面条件的示例图;
图4为本发明实施例的数据报表的生成方法的第三步骤流程图;
图5为本发明实施例的数据报表的生成方法的第四步骤流程图;
图6为采用本发明实施例的数据报表的生成方法列出的行头单元格查询条件的示例图;
图7为采用本发明实施例的数据报表的生成方法列出的列头单元格查询条件的示例图;
图8为采用本发明实施例的数据报表的生成方法列出的行头单元格查询条件在经过清洗归并后的示例图;
图9为本发明实施例的数据报表的生成方法的第五步骤流程图;
图10为采用本发明实施例的数据报表的生成方法在经过交集处理后获得的查询条件的第一示例图;
图11为采用本发明实施例的数据报表的生成方法在经过交集处理后获得的查询条件的第二示例图;
图12为采用本发明实施例的数据报表的生成方法在经过交集处理后获得的单元格数据信息的第一示例图;
图13为采用本发明实施例的数据报表的生成方法在经过交集处理后获得的单元格数据信息的第二示例图;
图14为本发明实施例的数据报表的生成装置的系统组成示意图。
其中,附图标记与部件名称之间的对应关系为:
100:数据报表的生成装置,102:存储器,104:处理器。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述的其他方式来实施,因此,本发明的保护范围并不受下面公开的具体实施例的限制。
下面参照附图描述本发明一些实施例的技术方案。
本发明的以下实施例提供了一些数据报表的生成方法、数据报表的生成装置和计算机可读存储介质。本发明实施例的目的在于使得数据报表在生成后,以更为简单的样式向用户展示,由此便于用户的查询和浏览,以帮助用户快速而准确地获取所需的信息。
具体而言,例如Excel的表格数据处理产品正被广泛地应用于企业的日常管理和个人的日常生活之中。尤其,对于各类企业用户而言,表格数据处理产品便于企业进行高效的管理和大规模的数据采集分析。然而,随着企业业务内容的逐渐繁多,用户在表格数据处理产品中的进行的表头设计和实施的数据筛选流程都愈加复杂。尤其,用户对多层或多维度复杂数据筛选查询的需求不断增多。并且,由于对数据分析维度的不断增加,有时针对同一个分析模型,用户往往需要生成多个报表,以展示或反映不同观察角度下的不同数据查询和筛选结果。
为了满足用户愈加复杂多变的数据查询需求,本发明通过以下实施例提出了区别于相关技术的数据报表的生成方法,其通过在界面条件中进一步配置数据采集条件,而使得表格数据处理产品能够实现在多个或多维度条件下的复杂数据查询筛选功能,由此简单而灵活地向用户展示其所需的数据,帮助用户提高效率,节约时间。
实施例1
如图1所示,本实施例提供了一种数据报表的生成方法,其包括以下步骤:
S102.对单元格数据库中的全部单元格数据信息进行筛选过滤,获取生成数据报表所需的界面条件;
S104.对界面条件进行清洗归并,获取生成数据报表所需的数据采集条件;
S106.根据数据采集条件进行筛选过滤,获取生成数据报表所需的可用单元格数据信息;
S108.对可用单元格数据信息进行展示,以生成数据报表。
在本实施例中,单元格数据库是指由输入或导入于表格数据处理产品之中的全部数据所构成的数据内容。比如:一个公司之中全部工作人员的全部信息,这些信息可包括姓名、性别、年龄、名族、入职时间、所在部门、所任职位、工作地区、在职状态等等。通过对单元格数据库中数据信息的查询统计,可获得在一个或几个条件下,所对应的相关信息。比如,可通过对单元格数据库中数据信息的查询统计,获取一个公司之中女性员工的数量,或获取一个公司之中于某年某月入职的女性员工的数量,以及获取一个公司之中于某年某月入职并且仍在在职的汉族女性员工的数量。
本实施例的界面条件为获取生成数据报表所需的前提性条件。对于表格数据处理产品的界面上展示的表格,表格的单元格上设置了不同的查询条件,针对于不同的查询条件,表格要展示不同条件下对应的数据。那么,为了生成数据报表,则首先需要完成界面条件的准备。即:为了获得用户所需的数据报表,本实施例首先需要按照用户输入或给出的指令,而按照要求对单元格数据库中的全部单元格数据信息进行筛选过滤。其中,界面条件的数量可以为一个,也可以为多个。
在获得了界面条件后,本实施例对界面条件进行清洗归并,通过清洗归,可获取生成数据报表所需的数据采集条件,在本实施例的数据采集条件下展示的单元格数据信息的样式更为简单,由此使得用户的浏览查询也更为高效。因此,本实施例通过根据数据采集条件,对单元格数据信息进行处理,使得表格数据处理产品能够实现在多个或多维度条件下的复杂数据查询筛选功能,由此向用户展示简单易读的数据查询结果。
实施例2
本实施例提供了一种数据报表的生成方法,除上述实施例1的技术特征,本实施例还进一步包括了以下技术特征。
界面条件包括:外部传入条件、行头单元格查询条件、行头单元格隐含条件、列头单元格查询条件和列头单元格隐含条件。
其中,如图2所示,对单元格数据库中的全部单元格数据信息进行筛选过滤,获取生成数据报表所需的界面条件的步骤具体包括:
S202.获取外部传入条件;
S204.在外部传入条件的范围内,获取行头单元格查询条件和行头单元格隐含条件;
S206.在外部传入条件的范围内,获取列头单元格查询条件和列头单元格隐含条件。
举例而言,在如图3所示的数据信息之中,外部传入条件是通过针对整表或整个单元格数据库中的全部单元格数据信息进行的数据过滤而获得的。比如,图3的示例中以“入职年”作为整表的过滤条件或外部传入条件。
行头单元格查询条件是指图3中在第一列第三行的“女性”单元格上设置了“性别=女”的查询条件,在“省份”下方的其他单元格上设置了“员工类型=xx”的查询条件。其中,“xx”为在岗职工、外籍及港澳台职工等等。
行头单元格隐含条件为图3中的“大区”和“省份”单元格,行头单元格隐含条件未设置查询条件,但会按照成员扩展“大区”和“省份”作为字段,其成员会在数据浏览态展开。
列头单元格查询条件指,在“其中:女性”单元格上设置了“性别=女”的查询条件,“少数民族”、“汉族”单元格上设置了“民族!=汉族”、“民族=汉族”的查询条件。
单元格“年龄段”会展开成员,展开后的单元格都作为列头单元格隐含条件在列头上。
实施例3
本实施例提供了一种数据报表的生成方法,除上述任一实施例的技术特征,本实施例还进一步包括了以下技术特征。
如图4所示,对界面条件进行清洗归并,获取生成数据报表所需的数据采集条件的步骤具体包括:
S402.获取外部传入条件、行头单元格查询条件、行头单元格隐含条件、列头单元格查询条件和列头单元格隐含条件中的重复条件和/或相同条件;
S404.在重复条件和/或相同条件中,采用靠近单元格数据信息的条件,覆盖远离单元格数据信息的条件,以对重复条件和/或相同条件进行清洗归并,并获取生成数据报表所需的数据采集条件。
具体而言,图3中当前的条件设置仍然较为复杂,要查询的单元格数据信息是按照行头单元格查询条件、列头单元格查询条件、外部传入条件等综合查询后的结果,甚至会有一些查询条件是重复或相同的。
为了应对和解决上述情况,本实施例采用了就近原则,即:采用靠近单元格数据信息的条件,覆盖远离单元格数据信息的条件。由于离单元格最近的查询条件会覆盖外部的相同查询条件,例如在单元格E6上设置“入职年=2005”覆盖外部传入的“入职年”查询条件。对于区域或单元格上不同的查询条件,通过采用以上的就近原则,本实施例可满足复杂条件下不同单元格展示不同数据的要求。
实施例4
本实施例提供了一种数据报表的生成方法,除上述任一实施例的技术特征,本实施例还进一步包括了以下技术特征。
如图5所示,对界面条件进行清洗归并,获取生成数据报表所需的数据采集条件的步骤具体包括:
S502.由上至下地对在界面条件下展示的单元格数据信息进行轮询处理,通过轮询处理采集全部的可用条件信息;
S504.将可用条件信息置于单元格数据信息的行头上,和/或将可用条件信息置于单元格数据信息的列头上,以对界面条件进行清洗归并,并获取生成数据报表所需的数据采集条件。
通过在数据采集条件的采集过程中对查询的单元格区域做轮询处理,可由此采集到所有用到的可用条件信息,并将其置于行头列头上。按照从上到下行的顺序,轮询每个单元格的行头或者列头,把采集到的条件信息整理,分类到单元格上,则可实现对界面条件进行清洗归并。
举例而言,图6展示了在清洗归并之前的行头查询条件,图7展示了在清洗归并之前的列头查询条件。在经过以上步骤的清洗归并,可获得图8中的清洗归并之后的行头查询条件。如图8所示,经过清洗、归并之后,单元格上的条件信息会相应地有所改变。
实施例5
本实施例提供了一种数据报表的生成方法,除上述任一实施例的技术特征,本实施例还进一步包括了以下技术特征。
如图9所示,根据数据采集条件进行筛选过滤,获取生成数据报表所需的可用单元格数据信息的步骤具体包括:
S902.根据数据采集条件,采用数据采集条件下展示的全部单元格数据信息中的每一个单元格数据信息作为一个查询线程,进行查询并获得查询结果;
S904.按照单元格数据信息的位置,对查询结果中包括的单元格数据信息进行交集处理,以获得可用单元格数据信息。
通过按照表格上的行头单元格查询条件和列头单元格查询条件,以每个单元格作为一个查询线程,执行查询,并在查询完成后按照单元格位置,对查询到的数据做交集处理,则可最终得到如图10和图11所示的数据。其中,各个单元格内执行的查询条件亦列于图10和图11。
在本实施例中实施了分解查询的步骤,由于分成多个查询请求,以不同的线程执行查询,可通过多线程而提高查询速度。
实施例6
本实施例提供了一种数据报表的生成方法,除上述任一实施例的技术特征,本实施例还进一步包括了以下技术特征。
数据采集条件包括行头数据采集条件和列头数据采集条件。按照单元格数据信息的位置,对查询结果中包括的单元格数据信息进行交集处理,以获得可用单元格数据信息的步骤具体包括:对通过行头数据采集条件查询获得的单元格数据信息进行过滤处理;采用经过过滤处理的单元格数据信息,与通过列头数据采集条件查询获得的单元格数据信息进行交集处理。
具体而言,如图12和图13所示,在本实施例中,在做交集处理时,首先对行头查询到的数据集做成员过滤,使扩展单元格中的成员符合查询条件,然后再与列头上的数据集做交集处理。其中,在针对“大区”和“省份”的成员做过滤后,拿到一行的数据集,也就是具体某个大区、某个省份的数据集,然后再与列头上的数据集做交集。
实施例7
本实施例提供了一种数据报表的生成方法,除上述任一实施例的技术特征,本实施例还进一步包括了以下技术特征。
在按照单元格数据信息的位置,对查询结果中包括的单元格数据信息进行交集处理,以获得可用单元格数据信息的步骤中,采用映射归约模型,对查询结果中包括的单元格数据信息进行交集处理。
映射归约(MapReduce)模型为一种编程模型,其用于大规模数据集的并行运算。其指定一个映射(Map)函数,用来把一组键值对映射成一组新的键值对,指定并发的归约(Reduce)函数,用来保证所有映射的键值对中的每一个共享相同的键组。本实施例可通过映射归约模型的数据处理框架对查询结果进行扩展查询。
实施例8
如图14所示,本实施例提供了一种数据报表的生成装置100,其包括:存储器102和处理器104。存储器102存储有计算机程序;处理器104执行计算机程序;其中,处理器104在执行计算机程序时,实现如本发明任一实施例的数据报表的生成方法的步骤。
实施例9
本实施例提供了一种计算机可读存储介质,其包括:计算机可读存储介质存储有计算机程序,计算机程序被执行时,实现如本发明任一实施例的数据报表的生成方法的步骤。
具体实施例
本实施例提供了一种基于关系型数据库查询构建的表格数据模型以及相应的数据报表的生成方法。本实施例具体包括以下技术特征或步骤。
一.实现表格数据模型前的界面条件准备
如图3所示,假设在界面上存在表格,表格的单元格上设置了不同的查询条件,针对于不同的查询条件表格要展示不同条件的数据,其设置条件或界面条件具体包括:
1.外部传入条件:针对于整表的数据过滤,在以下示例中“入职年”作为整表的过滤条件;
2.行头单元格查询条件:以“女性”单元格上设置了“性别=女”的查询条件,在“省份”下方的其他单元格上设置了“员工类型=xx”的查询条件。其中,“xx”为在岗职工、外籍及港澳台职工等等;
3.行头单元格隐含条件:行头单元格隐含条件未设置查询条件,但会按照成员扩展“大区”和“省份”作为字段,其成员会在数据浏览态展开;
4.列头单元格查询条件:在“其中:女性”单元格上设置了“性别=女”的查询条件,“少数民族”、“汉族”单元格上设置了“民族!=汉族”、“民族=汉族”的查询条件;
5.列头单元格隐含条件:单元格“年龄段”会展开成员,展开后的单元格都作为列头单元格隐含条件在列头上。
二.条件采集
图3界面中的条件设置很复杂,要查询的单元格,是按照行头、列头、外部条件等综合查询后的结果,甚至会有条件的重复,这种情况下就要实现就近原则:离单元格最近的条件会覆盖外部的相同条件,例如在单元格E6上设置“入职年=2005”覆盖外部传入的“入职年”条件。
条件采集过程中要对查询的单元格区域做轮询,要采集到所有用到的有用条件信息,置于行头列头上;在示例中,按照从上到下行的顺序,轮询每个单元格的行头或者列头,把采集到的条件信息整理,分类到单元格上。在采集之前示例中单元格上的查询条件如图6和图7所示。采集之后,通过条件的清洗、归并,单元格上的条件信息会有所改变,具体如图8所示。
三.数据查询
按照表格上行头列头采集到的条件,每个单元格作为一个查询线程,执行查询,查询数据库。查询完成后按照单元格位置,对查询到的数据做交集处理,最终得到图10和图11的符合单元格内的条件的数据。
其中,单元格上最终会执行的查询条件如下:在做交集处理时,首先对行头查询到的数据集做成员过滤,使扩展单元格中的成员符合查询条件,然后再与列头上的数据集做交集处理。比如,图10中,在针对“大区”、“省份”上的成员做过滤后,拿到一行的数据集,也就是具体某个大区、某个省份的数据集,然后再与列头上的数据集做交集。
本方法提高了在表格上实现多条件查询构建分组、交叉数据模型的易用性,通过在界面上的配置查询条件,实现复杂条件的单元格查询,同时具备对于查询请求分为多线程,多请求查询不同数据来源的能力,同时,查询后的数据可以在内存中或者在大数据处理框架中进行结果处理,最终生成可在页面展示的表格数据模型。
通过本实施例获得的表格数据处理产品可以轻松支持分组,交叉及嵌套分组交叉等复杂数据构建表格的要求,通过数据模型方便地展示表格数据,从而达到查看分析的目的。其中,本实施例解决了表格样式和查询方式以及查询条件复杂的问题。并且,本实施例避免了相关技术中按照单元格轮询去生成结构化查询语言(Structured Query Language,简称SQL)查询带来的耗费大量系统资源并不断请求数据库造成的查询效率低的问题。此外,本实施例可通过例如MapReduce框架的数据处理框架进行扩展查询。最后,本实施例使得复杂样式的表格通过可视化的简单易懂的条件设置,从而准确地查出数据并正确地展示,并可在数据查询后使用内存运算对数据做查询后处理,最终生成可展现的表格数据模型。
综上,本发明实施例的有益效果为:
1.本发明的实施例适用于各种复杂样式的报表,可简单而灵活地向用户展示其所需的数据,帮助用户提高效率,节约时间。
2.对于区域或单元格上不同的查询条件,本发明的实施例根据就近原则,采用靠近所述单元格数据信息的条件覆盖远离所述单元格数据信息的条件,由此满足复杂条件下不同单元格展示不同数据的要求。
3.本发明的实施例采用所述数据采集条件下展示的全部所述单元格数据信息中的每一个单元格数据信息作为一个查询线程,进行查询并获得查询结果,通过分解查询,以分成多个查询请求以及不同的线程执行查询的方式,提高了查询速度和查询效率。
在本说明书的描述中,术语“一个实施例”、“一些实施例”、“具体实施例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或实例。而且,描述的具体特征、结构、材料或特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
以上仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种数据报表的生成方法,其特征在于,包括以下步骤:
对单元格数据库中的全部单元格数据信息进行筛选过滤,获取生成数据报表所需的界面条件;
对所述界面条件进行清洗归并,获取生成数据报表所需的数据采集条件;
根据所述数据采集条件进行筛选过滤,获取生成数据报表所需的可用单元格数据信息;
对所述可用单元格数据信息进行展示,以生成所述数据报表。
2.根据权利要求1所述的数据报表的生成方法,其特征在于,所述界面条件包括:
外部传入条件、行头单元格查询条件、行头单元格隐含条件、列头单元格查询条件和列头单元格隐含条件。
3.根据权利要求2所述的数据报表的生成方法,其特征在于,所述对单元格数据库中的全部单元格数据信息进行筛选过滤,获取生成数据报表所需的界面条件的步骤具体包括:
获取所述外部传入条件;
在所述外部传入条件的范围内,获取所述行头单元格查询条件和所述行头单元格隐含条件;
在所述外部传入条件的范围内,获取所述列头单元格查询条件和所述列头单元格隐含条件。
4.根据权利要求3所述的数据报表的生成方法,其特征在于,所述对所述界面条件进行清洗归并,获取生成数据报表所需的数据采集条件的步骤具体包括:
获取所述外部传入条件、所述行头单元格查询条件、所述行头单元格隐含条件、所述列头单元格查询条件和所述列头单元格隐含条件中的重复条件和/或相同条件;
在所述重复条件和/或所述相同条件中,采用靠近所述单元格数据信息的条件,覆盖远离所述单元格数据信息的条件,以对所述重复条件和/或所述相同条件进行清洗归并,并获取生成数据报表所需的数据采集条件。
5.根据权利要求3所述的数据报表的生成方法,其特征在于,所述对所述界面条件进行清洗归并,获取生成数据报表所需的数据采集条件的步骤具体包括:
由上至下地对在所述界面条件下展示的所述单元格数据信息进行轮询处理,通过所述轮询处理采集全部的可用条件信息;
将所述可用条件信息置于所述单元格数据信息的行头上,和/或将所述可用条件信息置于所述单元格数据信息的列头上,以对所述界面条件进行清洗归并,并获取生成所述数据报表所需的所述数据采集条件。
6.根据权利要求1至5中任一项所述的数据报表的生成方法,其特征在于,所述根据所述数据采集条件进行筛选过滤,获取生成数据报表所需的可用单元格数据信息的步骤具体包括:
根据所述数据采集条件,采用所述数据采集条件下展示的全部所述单元格数据信息中的每一个单元格数据信息作为一个查询线程,进行查询并获得查询结果;
按照所述单元格数据信息的位置,对所述查询结果中包括的所述单元格数据信息进行交集处理,以获得所述可用单元格数据信息。
7.根据权利要求6所述的数据报表的生成方法,其特征在于,
所述数据采集条件包括行头数据采集条件和列头数据采集条件;
所述按照所述单元格数据信息的位置,对所述查询结果中包括的所述单元格数据信息进行交集处理,以获得所述可用单元格数据信息的步骤具体包括:
对通过所述行头数据采集条件查询获得的所述单元格数据信息进行过滤处理;
采用经过所述过滤处理的所述单元格数据信息,与通过所述列头数据采集条件查询获得的所述单元格数据信息进行交集处理。
8.根据权利要求6所述的数据报表的生成方法,其特征在于,在所述按照所述单元格数据信息的位置,对所述查询结果中包括的所述单元格数据信息进行交集处理,以获得所述可用单元格数据信息的步骤中,采用映射归约模型,对所述查询结果中包括的所述单元格数据信息进行所述交集处理。
9.一种数据报表的生成装置,其特征在于,包括:
存储器,存储有计算机程序;
处理器,执行所述计算机程序;
其中,所述处理器在执行所述计算机程序时,实现如权利要求1至8中任一项所述的数据报表的生成方法的步骤。
10.一种计算机可读存储介质,其特征在于,包括:
所述计算机可读存储介质存储有计算机程序,所述计算机程序被执行时,实现如权利要求1至8中任一项所述的数据报表的生成方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911334038.1A CN111078679B (zh) | 2019-12-23 | 2019-12-23 | 数据报表的生成方法、生成装置和计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911334038.1A CN111078679B (zh) | 2019-12-23 | 2019-12-23 | 数据报表的生成方法、生成装置和计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111078679A true CN111078679A (zh) | 2020-04-28 |
CN111078679B CN111078679B (zh) | 2023-06-16 |
Family
ID=70316732
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911334038.1A Active CN111078679B (zh) | 2019-12-23 | 2019-12-23 | 数据报表的生成方法、生成装置和计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111078679B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113342821A (zh) * | 2021-06-29 | 2021-09-03 | 深圳前海微众银行股份有限公司 | 报表配置方法、装置、设备及计算机存储介质 |
CN115470251A (zh) * | 2022-08-23 | 2022-12-13 | 陕西天诚软件有限公司 | 一种大数据分析展示装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103064689A (zh) * | 2013-01-04 | 2013-04-24 | 大唐软件技术股份有限公司 | 一种动态生成报表页面的实现方法及系统 |
CN104346377A (zh) * | 2013-07-31 | 2015-02-11 | 克拉玛依红有软件有限责任公司 | 一种基于唯一标识的数据集成和交换方法 |
CN104361137A (zh) * | 2014-12-10 | 2015-02-18 | 用友软件股份有限公司 | 报表取数条件生成装置和方法 |
CN106156886A (zh) * | 2016-06-30 | 2016-11-23 | 亿阳安全技术有限公司 | 一种基于运营商系统数据补全规则应用流程的方法及系统 |
CN107169076A (zh) * | 2017-05-10 | 2017-09-15 | 北京京东尚科信息技术有限公司 | 用于二维数据清洗的方法、系统及计算机可读存储介质 |
CN110168515A (zh) * | 2016-09-15 | 2019-08-23 | 英国天然气控股有限公司 | 用于分析数据关系以支持查询执行的系统 |
CN110555021A (zh) * | 2018-03-26 | 2019-12-10 | 深圳先进技术研究院 | 数据存储方法、查询方法及相关装置 |
-
2019
- 2019-12-23 CN CN201911334038.1A patent/CN111078679B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103064689A (zh) * | 2013-01-04 | 2013-04-24 | 大唐软件技术股份有限公司 | 一种动态生成报表页面的实现方法及系统 |
CN104346377A (zh) * | 2013-07-31 | 2015-02-11 | 克拉玛依红有软件有限责任公司 | 一种基于唯一标识的数据集成和交换方法 |
CN104361137A (zh) * | 2014-12-10 | 2015-02-18 | 用友软件股份有限公司 | 报表取数条件生成装置和方法 |
CN106156886A (zh) * | 2016-06-30 | 2016-11-23 | 亿阳安全技术有限公司 | 一种基于运营商系统数据补全规则应用流程的方法及系统 |
CN110168515A (zh) * | 2016-09-15 | 2019-08-23 | 英国天然气控股有限公司 | 用于分析数据关系以支持查询执行的系统 |
CN107169076A (zh) * | 2017-05-10 | 2017-09-15 | 北京京东尚科信息技术有限公司 | 用于二维数据清洗的方法、系统及计算机可读存储介质 |
CN110555021A (zh) * | 2018-03-26 | 2019-12-10 | 深圳先进技术研究院 | 数据存储方法、查询方法及相关装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113342821A (zh) * | 2021-06-29 | 2021-09-03 | 深圳前海微众银行股份有限公司 | 报表配置方法、装置、设备及计算机存储介质 |
CN113342821B (zh) * | 2021-06-29 | 2023-04-07 | 深圳前海微众银行股份有限公司 | 报表配置方法、装置、设备及计算机存储介质 |
CN115470251A (zh) * | 2022-08-23 | 2022-12-13 | 陕西天诚软件有限公司 | 一种大数据分析展示装置 |
Also Published As
Publication number | Publication date |
---|---|
CN111078679B (zh) | 2023-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10817534B2 (en) | Systems and methods for interest-driven data visualization systems utilizing visualization image data and trellised visualizations | |
Vo et al. | SATO: a spatial data partitioning framework for scalable query processing | |
US8937618B2 (en) | Graphical representations of corporate networks | |
US9934299B2 (en) | Systems and methods for interest-driven data visualization systems utilizing visualization image data and trellised visualizations | |
CN108197237B (zh) | 可视化数据采集到展现系统 | |
WO2016041373A1 (zh) | 一种数据查询的方法及装置 | |
CN110955717A (zh) | 一种基于大数据的可视化动态展示方法及其系统 | |
US20160179852A1 (en) | Visualizing Large Data Volumes Utilizing Initial Sampling and Multi-Stage Calculations | |
CN108241627A (zh) | 一种异构数据存储查询方法和系统 | |
US20180329963A1 (en) | Embedded Analytics and Transactional Data Processing | |
EP2526479A1 (en) | Accessing large collection object tables in a database | |
CN111078679B (zh) | 数据报表的生成方法、生成装置和计算机可读存储介质 | |
CN105843842A (zh) | 一种大数据环境下多维聚集查询与展示系统及方法 | |
Haynes et al. | High performance analysis of big spatial data | |
Tešendić et al. | Business intelligence in the service of libraries | |
CN110597851B (zh) | 一种基于大数据的数据处理及报表展示方法 | |
CN111914013A (zh) | 基于pandas库与InfluxDB数据库的数据管理方法、系统、终端及介质 | |
Girsang et al. | Business intelligence for construction company acknowledgement reporting system | |
US8577903B2 (en) | Sequenced query processing in data processing system | |
CN110362591B (zh) | 一种报表展现方法和装置 | |
Macura | Integration of data from heterogeneous sources using ETL technology | |
US20120166465A1 (en) | Query transformation | |
US10990255B1 (en) | Hierarchical data display | |
CN113886465A (zh) | 一种用于汽车物流的大数据分析平台 | |
Novak et al. | Prototype of a Web ETL tool |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |