CN102915237A - 根据用户应用程序要求改写数据质量规则的方法和系统 - Google Patents

根据用户应用程序要求改写数据质量规则的方法和系统 Download PDF

Info

Publication number
CN102915237A
CN102915237A CN2012102249537A CN201210224953A CN102915237A CN 102915237 A CN102915237 A CN 102915237A CN 2012102249537 A CN2012102249537 A CN 2012102249537A CN 201210224953 A CN201210224953 A CN 201210224953A CN 102915237 A CN102915237 A CN 102915237A
Authority
CN
China
Prior art keywords
data
rule
little
quality
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012102249537A
Other languages
English (en)
Other versions
CN102915237B (zh
Inventor
M·N·达尼
A·古普塔
M·K·莫哈尼亚
G·温卡塔查利亚赫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of CN102915237A publication Critical patent/CN102915237A/zh
Application granted granted Critical
Publication of CN102915237B publication Critical patent/CN102915237B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G06F16/2365—Ensuring data consistency and integrity
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/258—Data format conversion from or to a database
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Quality & Reliability (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及根据用户应用程序要求修改数据质量规则的方法和系统。在把数据质量规则应用于从数据源获得的数据集期间，连同一组公共规则一起，从数据源取回数据，所述一组公共规则被配置成以按照该组公共规则中的一条或多条预定的数据质量规则的方式，格式化取回的数据。利用至少一个可编辑微件，调整至少一条预定的数据质量规则，以形成适合于供指定应用程序使用的一组修改的数据质量规则。所述一组修改的数据质量规则被应用于取回的数据。

Description

根据用户应用程序要求改写数据质量规则的方法和系统
技术领域
本发明的各实施例涉及当从一个或多个数据源提取数据时，建立数据质量的规则。
背景技术
当把数据从一个或多个数据源加载到系统中，供应用程序之用时，数据一般必须经历某种数据质量分析和/或数据清理，以确保数据适合于供应用程序使用。根据将使用数据的特定应用程序，对相同数据的数据质量要求可不同(例如，不同的客户端和/或客户端的不同部分可能对数据质量有不同的要求)。然而，尽管能够建立确保提供具有某种格式的数据的某些通用数据质量规则，不过这些规则通常是用与应用程序相关的逻辑或者在从数据源提取数据的系统源设定和建立的。改变一些或者所有的数据质量规则一般要求应用程序或者源系统代码的改变。因此，一般不能在运行时修改数据质量规则，而是需要在数据处理循环期间评估数据质量规则，然后只在处理循环之后进行所述改变。
由于适用于一个应用程序的具体规则可能不适用于另一个应用程序，因此难以为从一个或多个数据源取回数据的许多应用程序确保严格的数据质量。
发明内容
在本发明的一个例证实施例中，提供一种用于对从至少一个数据源获得的数据集应用数据质量规则的计算机实现方法。所述方法包括连同一组公共规则一起，从所述至少一个数据源取回数据，所述一组公共规则被配置成以按照该组公共规则中的一条或多条预定的数据质量规则的方式，格式化取回的数据，利用至少一个可编辑微件，调整至少一条预定的数据质量规则，以形成适合于供指定应用程序使用的一组修改的数据质量规则，和把所述一组修改的数据质量规则应用于取回的数据。
在本发明的另一个例证实施例中，提供一种用于对从至少一个数据源获得的数据集应用数据质量规则的系统。所述系统包括连同一组公共规则一起，从所述至少一个数据源取回数据的源系统，所述一组公共规则被配置成以按照该组公共规则中的一条或多条预定的数据质量规则的方式，格式化取回的数据，和从所述源系统接收取回的数据和一组公共规则的客户端。所述客户端包括微件模块，所述微件模块包含至少一个可编辑微件，以及所述客户端还配置有逻辑模块，用于：利用所述至少一个可编辑微件，调整至少一条预定的数据质量规则，以形成适合于供客户端的指定应用程序使用的一组修改的数据质量规则，和把所述一组修改的数据质量规则应用于取回的数据。
在本发明的另一个例证实施例中，提供一种用于对从至少一个数据源获得的数据集应用数据质量规则的计算机程序产品。所述计算机程序产品包括具有在其中具体化计算机可读程序代码的计算机可读存储介质。所述计算机可读程序代码被配置成连同一组公共规则一切，接收从所述至少一个数据源取回的数据，所述一组公共规则被配置成以按照该组公共规则中的一条或多条预定的数据质量规则的方式，格式化取回的数据，利用至少一个可编辑微件，调整至少一条预定的数据质量规则，以形成适合于供指定应用程序使用的一组修改的数据质量规则，和把所述一组修改的数据质量规则应用于取回的数据。
当考虑以下详细说明，尤其是当结合附图考虑以下详细说明时，本发明实施例的以上和另外的特征和优点将变得明显，附图中，各个图中的相同附图标记表示相同的组件。
附图说明
图1是按照本发明的取回实现可单独调整的数据质量规则的数据的系统的例证实施例的示意图。
图2描述用于根据应用程序和/或用户规范，改写特定客户端应用程序的数据质量规则的例证微件的GUI图像。
图3是图解说明按照本发明的例证实施例，生成微件的方式的流程图。
图4是表示按照本发明的例证实施例，对一组数据应用数据质量规则，以便生成微件的示意图。
图5是图解说明按照本发明的例证实施例的图1的系统的操作，包括定制微件以改写一组通用数据质量规则，从而供客户端应用程序使用的方式的流程图。
图6描述按照本发明的例证实施例，与微件相关的GUI图像，所述GUI图像可以允许修改/定制与所述微件相关的数据质量规则。
具体实施方式
本发明的实施例提供把数据质量规则应用于从数据源获得的数据集。连同一组公共规则，从数据源取回数据，所述一组公共规则被配置成以按照该组公共规则中的一条或多条预定的数据质量规则的方式，格式化取回的数据。利用至少一个可编辑微件，调整至少一条预定的数据质量规则，以形成适合于供指定应用程序之用的一组修改的数据质量规则，然后把所述修改的一组数据质量规则应用于取回的数据。本发明的实施例便于修改或定制可用于不同客户端系统的每个不同应用程序的一组公共数据质量规则。
图1中描述了实现本发明的特征的系统的例证实施例。系统包括通过源系统(在图1中称为数据质量规则数据库12)，从一个或多个数据源6、8、10访问数据的多个客户端2、4。虽然图1中只示出了两个客户端2、4和三个数据源6、8、10，不过注意这只是简单表示，并且所述系统并不局限于所述数字。相反，可以为系统提供任何适当数目的客户端和数据源。质量规则数据库12被配置成根据来自客户端2、4的数据查询，从数据源6、8、10取回或提取数据，然后把数据提供给请求所述数据的客户端(例如，通过任何适当的提取、传送和加载处理)。数据库12还包括任何适当数目的不同类型或不同组的公共或通用数据质量规则，所述数据质量规则在数据被提供给进行查询的客户端之前，根据选择的规则类型，对数据应用统一的规则。一组公共规则包括固定的并且适合于为向数据源请求数据的每个客户端，以相同方式提取和格式化所述数据的规则。
客户端2、4，数据质量规则数据库12和数据源6、8、10可以相互远离，并通过直接连接或者任何适当的网络通信(如图1中所示的不同系统组件之间的箭头所示)。例如，可以实现网络，以便于利用任何适当的通信媒体(例如，广域网(WAN)、局域网(LAN)、因特网、企业内部网等)，在两个或更多个系统组件之间传送任何类型的数据和/或其它信息。另一方面，客户端2、4，数据质量规则数据库12和数据源6、8、10中的一个或多个可以彼此在本地，并通过任何适当的本地通信媒体(例如，局域网(LAN)、硬连线、无线链路、企业内部网等)通信。此外，客户端2、4，数据质量规则数据库12和数据源6、8、10中的任意两个或更多个，和移植数据库4可被实现成单一系统组件内的子组件。
客户端2、4，数据质量规则数据库12和数据源6、8、10都可以用任何常规的或者其它计算机系统实现，所述计算机系统可以配备提供图形用户界面或其它界面(例如，提供命令行提示、微件和/或其它菜单屏幕等)，以向用户请求与期望数据和分析有关的信息的显示器或监视器，基本部分(例如包括处理器、存储器和/或内部或外部通信装置(例如，调制解调器、网卡等))，可选输入装置(例如，键盘、鼠标或其它输入装置)，和任何可从市场上获得和/或定制的软件(例如，服务器/通信软件、分析和/或其它类型的模块、浏览器/界面软件等)。
数据质量规则数据库包括数据质量规则模块14，在数据被提供给客户端之前，可从数据质量规则模块14对从数据源取回的数据应用一组公共的数据质量规则。数据质量规则模块14可以包括将根据对特定应用程序和/或根据数据查询取回的特定多列数据或者数据记录的要求，应用于数据的所选数目的不同多组预定数据质量规则。数据质量规则可以是将对数据进行的任何系列的逻辑运算，比如将应用于数据的约束，或者将对数据采取的动作(例如，根据规则内被满足的条件，对数据的修改)。在例证实施例中，从数据源内的表格获得的记录的一列数据中的数据串可包括诸如“MR SMITH JOHN HAROLD”之类的姓名(例如，业务经理姓名、联系人姓名等)。可从数据质量规则模块14选择特定规则，所述规则把字符串的数据分成不同的类别，比如：
(1)头衔：MR
名字：JOHN
中名：HAROLD
姓：SMITH
在另一个例子中，数据源的表格中的某列的字符串可以是指定国家代码、地区、城市、数据类型和数据代码(例如，表示与在特定城市内的账户有关的信息)的一系列数字，比如‘1234567890123’。出自数据质量规则模块14的规则可把所述字符串的数据分成以下不同类别，供特定应用程序使用：
(2)国家代码(3位)-地区(2位)-城市(3位)-类型(1位)-账户代码(5位)：132-34-567-8-9101234
数据质量规则数据库12把出自数据质量规则模块14的一个或多个规则应用于从一个或多个数据源6、8、10获得的数据，并把这样的数据(具有根据数据规则的要求，分成不同类别的数据串)提供给进行查询的客户端。例如，客户端2包括应用程序App1(20)，而客户端4包括不同的应用程序App2(24)。任意一个客户端可以利用数据库12，向一个或多个数据源6、8、10请求数据。在数据质量规则模块14中提供的相同一组数据质量规则可被应用于每个客户端2、4请求的相同类型的数据。
不过，客户端2的应用程序App1(20)可能要求以从数据质量规则模块14的数据质量规则所应用的通用或公共规则格式稍微修订或修改的格式提供数据。另外，客户端4的应用程序App2(24)也可具有稍微不同于App1，并且相对于模块14的数据质量规则所应用的公共规则格式稍微修订的格式要求。在存在对将应用于从数据源接收的数据的数据格式具有稍微不同或修改要求的多个客户端和/或多个应用程序的情况下，难以提供能够预期应用程序或者利用该应用程序的用户为处理来自数据源的数据而需要的每种可能格式类型的一组完整的数据规则。
作为一种例证情形，考虑上面的示例(1)，其中数据规则可把诸如“MR SMITH JOHN HAROLD”之类的姓名串分成供各种客户端应用程序使用的公共格式。在这种情况下，可能存在要求姓名串呈不同格式，以供应用程序使用的许多不同的客户端应用程序。例如，一种应用程序可能要求姓名串呈以下格式：“Mr John Harold SMITH”；再一种应用程序可能要求姓名呈以下格式：“John Smith”；又一种应用程序可能要求姓名串呈以下格式：“Mr.Smith”；另一种应用程序可能要求姓名串呈以下格式：“John H.Smith”。
在另一个例证情形中，考虑上面的示例(2)，其中数据规则可把数字型数据串，比如“1234567890123”分成包括如在示例(2)中提到的不同类别的公共格式。不同的客户端应用程序还可能要求格式方面的更多差异。例如，一种应用程序可能要求字符串格式为除去国家代码的地区-城市-类型-代码(例如，34-567-8-901234)；再一种应用程序可能要求字符串格式仅仅是代码(例如，901234)；另一种应用程序可能只要求城市信息(例如，567)。
一组公共的数据质量规则是由源系统(比如图1的系统中的数据质量规则数据库12)，或者利用客户端应用程序实现的逻辑应用的预定规则。不过，在不在源系统或者为应用程序改变源代码的情况下，不能容易地改变或改写这样的规则。由于对使用从数据源取回的数据的特定客户端应用程序来说，在任何时候可能都期望或要求修改，因此这会是一项乏味并且费时的任务。
按照本发明的实施例，每个客户端具备一个或多个图形用户界面(GUI)元件或微件，所述GUI元件或微件允许客户端用户对于待使用的应用程序和/或根据变化的客户端应用程序要求和/或用户偏好或规范，微调或改写规则。重新参见图1，客户端2包括GUI微件模块22，所述GUI微件模块22包括配置成按照对应用程序App1(20)的客户端要求，进一步调整或改写将应用于从数据质量规则数据库12接收的数据的规则的多个微件。客户端4还包括GUI微件模块26，所述GUI微件模块26包括为App2(24)进行相同功能的多个微件。
微件模块22、26的微件包含GUI菜单，所述GUI菜单包括便于对从数据库12接收的数据进行操作或调整，从而进一步根据用户规范，改写供客户端应用程序之用的数据的任何适当类型的可调整控制对象，包括但不限于切换开启/关闭按钮，复选框，可选择的菜单和/或图标，可填写的栏。从而，微件允许根据客户端应用程序和/或用户对特定情形的要求，进一步编辑和改写将应用于数据源取回的数据的一组公共规则。
如上所述，系统的数据质量规则数据库12可被配置成在数据被传送给客户端之前，利用从模块14获得的数据质量规则，对从一个或多个数据源6、8、10取回或提取的数据记录应用规则。另外注意系统还可被配置成使得数据质量规则数据库12把从一个或多个数据源取回的数据记录，连同来自模块14的一组公共的数据质量规则一起提供给客户端，客户端随后应用为供客户端应用程序使用而用微件改写的数据质量规则。例如，微件可被配置成包括与从一个或多数据源获得的数据（包括元数据）相关的信息，以及还包括由数据库12的数据质量模块14提供的与数据相关的一组公共数据质量规则，使得微件把所述规则应用于所述数据。
图2中描述可用于改写用于应用程序的一组公共规则的微件的例证实施例。图2中描述的微件与数据实体相联系(其中数据实体与相同实体类别，例如，产品、客户、雇员等中的一系列记录相联系)，以及每个实体微件与数据表的感兴趣的并且包括将按某种方式格式化以供客户端应用程序使用的数据的确定各列相关。例如，图2中描述了产品实体微件30(与产品数据相关)和客户实体微件40(与客户数据相关)。也可生成另外的微件，所述微件具有能够被修改，以包括关于和特定实体相关的数据列的具体信息的基本模板(表示成微件50)。每个微件还包括“编辑规则”按钮，所述“编辑规则”按钮便于用户以选择的方式，编辑与该实体相关的数据质量规则，如下所述。
微件，比如图2中所示的微件30-50可以按照如图3的流程图中所示的处理生成。特别地，最初通过从自数据源获得的数据的数据表中选择属性(例如，列)，定义实体微件(步骤100)。例如，参见产品实体微件30，与该微件相关的属性是产品名称，品牌名称，数量和类型。对客户实体微件40来说，与该微件相关的属性是姓名、地址1(第一地址框)、地址2(第二地址框)和产品。随后为实体微件选择与选择的数据属性对应的模式，并依据该微件分组与实体微件相关的所有规则(步骤110)。所述模式可以人工定义，或者用基于上下文的模式发现方法发现。微件使数据属性的修改更容易(例如，按照与产品实体微件30中的产品名称属性相关并且可由该微件控制的可编辑规则，改变该属性的数据值)。
图4中描述了示意性示出通过对来自数据源的数据31应用公共或通用规则集32，生成产品实体微件30的例证实施例。来自数据源的数据31包括产品属性(例如，杂货店仓库存货的不同产品的列表)。确定数据的模式，以帮助确立规则集32的哪条规则将被应用于该微件。
在例证情形下，可能存在从数据质量模块14获得的、适用于将由客户端2的应用程序App1(20)使用的数据的多组规则。假定两条规则(规则1和规则2)适用于产品实体微件30的产品名称属性。这两条规则是依据该属性分组的，并且可访问，以供微件选择和/或修改(例如，通过选择该微件的“编辑规则”按钮)。
根据人为规则，使和微件有关的每条规则参数化(步骤120)。特别地，为不同的人为规则选择参数，参数定义根据人为规则的被满足条件，要采取的动作(例如，如果条件被满足，那么把特定参数应用于与该微件相关的数据)。借助微件的规则参数化可包括新规则的增加，现有规则的修改和/或现有规则的删除。
在为特定应用程序生成实体微件之后，可以利用微件的“编辑规则”功能，根据应用程序或用户规范，把每组公共规则修改成一组新的定制或者改写的规则。
现在参考图5的流程图，说明图1的系统的操作的例证实施例，包括一组规则的定制或改写(利用诸如微件30之类的实体微件)。在该处理中，按照图3中描述的处理，生成了实体微件(比如保存在客户端2的微件模块22中的实体微件30)。客户端2的查询导致从一个或多个数据源6、8、10获得数据记录(步骤150)。把来自数据质量规则数据库12的数据质量规则模块14的一组或多组公共规则应用于所述数据记录(步骤160)。这些公共规则都相同，从而对从数据源6、8、10获得的相同或相似的数据(例如，在表的相同列中，或者相同或相似的数据记录中的数据)应用相同类型的修改，而与哪个客户端或哪个客户端应用程序在进行查询无关。可例如根据数据属性，确定关于从数据质量规则模块14应用哪些规则的决策(例如，所选数据表的不同数据列可能与特定的一组或多组公共规则相关)。对从数据源获得的一组或多组公共或通用规则的应用可由数据质量规则数据库12执行，或者另一方面，可由客户端2执行。
从客户端2的微件模块22选择一个或多个实体微件(步骤170)。用户访问微件的“编辑规则”特征，以在客户端应用程序(比如App1)的运行期间，利用应用于数据的修改的人为结果，生成改写规则(步骤190)。换句话说，微件的“编辑规则”特征允许用户有选择地修改应用于数据的一组或多组公共规则。客户端应用程序输出已根据一个或多个实体微件应用的改写规则修改的数据(例如，在图形显示中)(步骤200)。另外，通过用户在应用程序的运行期间的任何时间，选择任意微件的“编辑规则”特征，在应用程序的运行期间可进一步更改已改写的规则(步骤210)。例如，如果用户希望改变特定数据属性的显示，那么用户可选择适当微件的“编辑规则”特征，以进行这样的改变，从而允许在客户端应用程序的运行期间进行改变。
参考图6，说明描述示出微件（产品实体微件30）的“编辑规则”特征的GUI界面35的例证实施例。本例证实施例表示根据客户端应用程序和/或用户规范，可如何调整关于数量属性的规则。示出了例证记录“12OZ FIZZY CORP CHEESE CAN”，其中微件修改数据质量规则，以转换该数据记录和/或与产品实体微件30相关的每个数据记录的数量计量单位(对该特定记录来说，计量单位从“OZ”修改成“OUNCES”，以便输出或显示)。从而，微件修改数据质量规则，使得该记录(和选择的具有产品数量信息的其它记录)的输出或显示具有修订的数量值。对于与这种产品记录相关的其它属性，也可以设定或调整其它修改(例如，对与产品名称、品牌名称和类型相关的数据的修改)。另外，可以访问其它实体微件，以有选择地编辑与微件相关的规则。可在客户端应用程序的运行期间，进一步进行对微件的这种调整或修改(例如，“在飞行中”或者在应用程序的运行时期间应用)。
图1的系统被配置成使得源系统或数据质量规则数据库12可向每个客户端(例如，客户端2和客户端4)提供一组或多组预定的公共规则，每个客户端利用保存在客户端的微件模块内的微件，修改或改写所述规则。规则是根据客户端的特殊要求，或者每个客户端的指定应用程序的要求改写的。从而，客户端2和客户端4都可接收用数据库12的数据质量规则模块14保存的相同的一组公共规则。不过，每个客户端可以按照客户端自己的规范(例如，根据对不同的客户端应用程序APP1或APP2的不同要求)，修改并从而定制所述规则，使得客户端2的改写或者修改的一组数据质量规则不同于客户端4的改写或者修改的一组数据质量规则。
从而，本发明的实施例便于根据特定应用程序或用户规范，修改和改写应用于数据的一组公共或通用规则。这不同于典型系统，在典型系统中，由源系统应用数据质量规则，以及改变或定制数据质量规则会是冗长和复杂的过程(例如，要求应用规则的代码的变化)。在本发明的实施例中，一组公共/通用的规则被应用于从数据源获得的数据(例如，在数据质量规则数据库和/或由特定的客户端应用所述一组公共/通用的规则)，而特定的客户端可利用一个或多个微件，单独进行对数据质量规则的修改。微件可包括特定实体的所有信息，包括与实体相关的数据的元数据，待应用于与实体相关的数据的一组或多组公共规则，和这种规则的定制特征。通过确定数据模式和与模式中的数据相关的规则，可以生成实体微件。
要理解上面说明和在附图中图解所示的实施例仅仅表示实现根据应用程序的要求和/或用户规范或偏好，改写待应用于数据的数据质量规则的实施例的许多方式中的一些方式。
本发明实施例的布局或环境可包括按照任何期望的方式布置的任何数目的计算机或其它处理系统(例如，客户端或最终用户系统，服务器系统等)和数据库或其它储存库，本发明实施例可以适用于任何期望类型的计算环境(例如，云计算、客户端-服务器、网络计算、大型机、独立系统等)。本发明实施例采用的计算机或其它处理系统可用任意数目的任何个人或其它类型的计算机或处理系统(IBM兼容型、膝上型、PDA、移动装置等)实现，并且可以包括任何可从市场上获得的操作系统，和任何可从市场上获得的或者定制的软件(例如，浏览器软件、通信软件、服务器软件、清理和数据质量分析软件等)。这些系统可以包括任何类型的监视器和输入装置(例如，键盘、鼠标、语音识别等)，以输入和/或查看信息。
应明白的是本发明实施例的软件(例如，数据集市、间隔(gap)报告模块、规则模板模块、例示规则模块等)可以用任何期望的计算机语言实现，并可由计算机领域的普通技术人员根据包含在说明书中的功能说明和附图中图解说明的流程图开发。此外，这里对执行各种功能的软件的任何引用通常指的是在软件控制下，执行这些功能的计算机系统或处理器。另一方面，本发明实施例的计算机系统可用任何类型的硬件和/或其它处理电路来实现。
计算机或其它处理系统的各种功能可以任何方式分布在任意数目的软件和/或硬件模块或单元、处理或计算机系统和/或电路之间，其中计算机或处理系统可以被布置成在本地或者彼此远离，并通过任何适当的通信介质(例如LAN、WAN、企业内部网、因特网、硬连线、调制解调器连接、无线等)通信。例如，本发明实施例的功能可以任何方式分布在各种最终用户/客户端和服务器系统，和/或任何其它中间处理装置之间。可按照实现这里说明的功能的任何方式，修改以上说明和在流程图中图解所示的软件和/或算法。另外，可按照完成期望操作的任何顺序执行流程图或说明中的功能。
本发明实施例的软件可存在于可记录介质(例如，磁或光介质、磁光介质、软盘、CD-ROM、DVD、存储装置等)，供在独立系统或者用网络或其它通信介质连接的系统上使用。
通信网络可以用任意数目的任何类型的通信网络(例如，LAN、WAN、因特网、企业内部网、VPN等)实现。本发明实施例的计算机或其它处理系统可包括借助任何常规协议或者其它协议，通过网络通信的任何常规通信装置或者其它通信装置。计算机或其它处理系统可以利用任何类型的连接(例如，有线、无线等)接入网络。本地通信介质可以用任何适当的介质(例如，局域网(LAN)、硬连线、无线链路、企业内部网等)实现。
系统可以采用任何数目的任意常规或者其它数据库、数据仓库或存储结构(例如，文件、数据库、数据结构、数据或其它储存库等)保存信息。数据库结构可以用任何数目的任意常规或者其它数据库、数据仓库或存储结构(例如，文件、数据库、数据结构、数据或其它储存库等)实现，以保存信息。数据库和/或其它存储结构可以远离计算机或其它处理系统，或者在计算机或其它处理系统本地，并可以保存任何期望的数据。
本发明的实施例可用于分析代表任何信息的任意类型(例如，布尔、字符、字母数字、符号等)的数据。此外，本发明实施例可用于分析来自任何类型的存储单元、系统或装置(例如，数据库、文件、存储装置、数据结构、处理装置、各种固定或移动计算机或处理系统或装置，等等)的数据。从一个或多个数据集分析的数据可以是任何大小，并包括任何类型的数据和元数据。
本发明实施例可以采用任意数目的任何类型的用户界面(例如，图形用户界面(GUI)、命令行、提示等)来获得或提供信息(例如，获得待进行的期望分析的信息，提供图表或其它数据可视化，等等)，其中所述界面可包括按照任何方式排列的任意信息。所述界面可包括布置在任意位置以通过任何适当的输入装置(例如，鼠标、键盘等)输入/显示信息和启动期望动作的任意数目的任何类型的输入或执行机构(例如，按钮、图标、栏、框、链接等)。界面屏幕可包括按照任何方式，在屏幕之间导航的任何适当的执行器(例如，链接、选项卡等)。
本发明的实施例并不局限于以上说明的特定任务或算法，相反可以用于为任何类型的处理，分析和生成来自任何数据源的数据的可视化显示。
这里使用的术语只是用于说明特定的实施例，并不意图限制本发明。这里使用的单数形式意图还包括复数形式，除非上下文明确地另有所示。另外要明白当用在说明书中时，术语“包括”、“包含”、“具有”等指定陈述的特征、整数、步骤、操作、元件和/或组件的存在，但不排除存在或增加一个或多个其它特征、整数、步骤、操作、元件、组件和/或它们的群体。
以下的权利要求中的所有装置或步骤加功能要素的对应结构、材料、动作和等同物意图包括与明确主张的其它要求保护的要素结合地实现功能的任何结构、材料或动作。本发明的说明只是出于举例说明的目的给出的，而不是穷尽的，也不意图把本发明局限于公开的形式。对本领域的普通技术人员来说，许多修改和变化是显而易见的，而不脱离本发明的范围和精神。选择和说明实施例是为了更好地解释本发明的原理和实际应用，和使本领域的其他普通技术人员能够理解本发明的具有适合于预期的特定应用的各种修改的各个实施例。
本领域的技术人员会理解，本发明的各个方面可被具体体现成系统、方法或计算机程序产品。因而，本发明的各个方面可以采取纯硬件实施例，纯软件实施例(包括固件、驻留软件、微代码等)，或者结合这里通常都可被称为“电路”、“模块”或“系统”的软件和硬件特征的实施例的形式。此外，本发明的各个方面可以采取包含在一个或多个计算机可读介质中的计算机程序产品的形式，所述一个或多个计算机可读介质具有包含于其中的计算机可读程序代码。
可以利用一个或多个计算机可读介质的任意组合。计算机可读介质可以是计算机可读信号介质或计算机可读存储介质。计算机可读存储介质可以是例如但不限于电、磁、光、电磁、红外或半导体系统、设备或装置，或者它们的任意适当组合。计算机可读存储介质的更具体例子(非穷举列表)可包括：具有一条或多条导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦可编程只读存储器(EPROM或闪速存储器)、光纤、便携式光盘只读存储器(CD-ROM)、光存储装置、磁存储装置，或者它们的任意适当组合。在本文的上下文中，计算机可读存储介质可以是能够包含或保存供指令执行系统、设备或装置使用的，或者结合指令执行系统、设备或装置使用的程序的任何有形介质。
计算机可读信号介质可包括计算机可读程序代码包含在其中，例如，包含在基带中，或者体现为载波的一部分的传播数据信号。这种传播信号可以采取任意各种形式，包括但不限于电磁、光，或者它们的任意适当组合。计算机可读信号介质可以是不是计算机可读存储介质但能够传递、传播或传送供指令执行系统、设备或装置使用的，或者结合指令执行系统、设备或装置使用的程序的任何计算机可读介质。
包含在计算机可读介质上的程序代码可利用任何适当的介质传送，包括但不限于无线、有线、光缆、RF等，或者它们的任何适当组合。
可用一种或多种编程语言，包括诸如Java、Smalltalk、C++之类的面向对象的编程语言，和诸如“C”编程语言或类似编程语言之类的常规过程编程语言的任意组合，编写执行本发明的各个方面的操作的计算机程序代码。计算机可读程序代码可完全在用户的计算机上运行，部分在用户的计算机上运行，作为独立的软件包，部分在用户的计算机上运行并且部分在远程计算机上运行，或者完全在远程计算机或服务器上运行。在后一情况下，远程计算机可通过任意类型的网络，包括局域网(LAN)或广域网(WAN)，连接到用户的计算机，或者可实现与外部计算机的连接(例如，利用因特网服务提供商，经因特网实现与外部计算机的连接)。
参考按照本发明的各个实施例的方法、设备(系统)和计算机程序产品的流程图说明和/或方框图，说明了本发明的各个方面。要明白流程图说明和/或方框图的每个方框，以及流程图说明和/或方框图中的各个方框的组合可用计算机程序指令实现。计算机程序指令可被提供给通用计算机、专用计算机或者其它可编程数据处理设备的处理器，从而产生机器，以致借助计算机或其它可编程数据处理设备的处理器运行的指令产生实现在流程图和/或方框图的一个或多个方框中指定的功能/动作的装置。
计算机程序指令也可被保存在计算机可读介质中，所述计算机可读介质能够指令计算机、其它可编程数据处理设备或者其它装置按特定方式运行，以致保存在计算机可读介质中的指令产生制成品，所述制成品包括实现在流程图和/或方框图的一个或多个方框中指定的功能/动作的指令。
计算机程序指令也可被加载到计算机、其它可编程数据处理设备或其它装置上，使得在计算机、其它可编程设备或其它装置上执行一系列的操作步骤，从而产生计算机实现的处理，以致在计算机或其它可编程设备上执行的指令提供实现在流程图和/或方框图的一个或多个方框中指定的功能/动作的处理。
附图中的流程图和方框图图解说明按照本发明的各个实施例的系统、方法和计算机程序产品的可能实现的体系结构、功能和操作。在这方面，流程图或方框图中的每个方框可代表包含实现指定逻辑功能的一个或多个可执行指令的模块、程序段或一部分代码。另外应注意，在一些备选实现中，在方框中表示的功能可不按照附图中所示的顺序发生。例如，接连表示的两个方框事实上可以基本同时地执行，或者各个方框有时可按照相反的顺序执行，取决于所涉及的功能。另外要注意方框图和/或流程图说明的每个方框，以及方框图和/或流程图说明中的各个方框的组合可用实现指定功能或动作的基于专用硬件的系统，或者专用硬件和计算机指令的组合实现。

Claims (14)

1.一种用于对从至少一个数据源获得的数据集应用数据质量规则的计算机实现方法，包括：
连同一组公共规则一起，从所述至少一个数据源取回数据，所述一组公共规则被配置成以按照该组公共规则中的一条或多条预定的数据质量规则的方式，格式化取回的数据；
利用至少一个可编辑微件，调整至少一条预定的数据质量规则，以形成适合于供指定应用程序使用的一组修改的数据质量规则；和
把所述一组修改的数据质量规则应用于取回的数据。
2.按照权利要求1所述的方法，其中每个微件与定义数据记录的类别的实体相关，并且所述一组修改的数据质量规则被应用于取回的数据的各个记录或各列。
3.按照权利要求1所述的方法，还包括：
在指定应用程序的运行期间，为至少一个微件编辑所述一组修改的数据质量规则。
4.按照权利要求1所述的方法，还包括：
通过从所述至少一个数据源的数据表中选择属性来生成微件，并利用所述微件来分组选择的属性。
5.按照权利要求4所述的方法，其中每个可编辑微件便于独立于与该微件相关的一个属性，修改应用于与该微件相关的另一个属性的预定数据质量规则。
6.按照权利要求4所述的方法，其中每个可编辑微件包含列举与该微件相关的属性的第一图形用户界面，和包含便于修改预定数据质量规则的至少一个可编辑栏的至少一个另外的图形用户界面。
7.按照权利要求1所述的方法，其中所述一组公共规则被提供给第一客户端和第二客户端，所述第一客户端利用第一可编辑微件调整至少一个预定的数据质量规则，以形成第一组修改的数据质量规则，以及所述第二客户端利用第二可编辑微件调整至少一个预定的数据质量规则，以形成与所述第一组修改的数据质量规则不同的第二组修改的数据质量规则。
8.一种用于对从至少一个数据源获得的数据集应用数据质量规则的系统，所述系统包括：
连同一组公共规则一起，从所述至少一个数据源取回数据的源系统，所述一组公共规则被配置成以按照该组公共规则中的一条或多条预定的数据质量规则的方式，格式化取回的数据；和
从源系统接收取回的数据和一组公共规则的客户端，其中所述客户端包括微件模块，所述微件模块包含至少一个可编辑微件，以及所述客户端还配置有逻辑模块，用于：
利用所述至少一个可编辑微件，调整至少一条预定的数据质量规则，以形成适合于供客户端的指定应用程序使用的一组修改的数据质量规则；和
把所述一组修改的数据质量规则应用于取回的数据。
9.按照权利要求8所述的系统，其中每个微件与定义数据记录的类别的实体相关，以及所述客户端配置有把所述一组修改的数据质量规则应用于取回的数据的各个记录或各列的逻辑模块。
10.按照权利要求8所述的系统，其中所述客户端还配置有在客户端运行指定应用程序期间，为至少一个微件编辑所述一组修改的数据质量规则的逻辑模块。
11.按照权利要求8所述的系统，其中所述客户端还配置有通过从所述至少一个数据源的数据表中选择属性来生成微件，并利用所述微件来分组选择的属性的逻辑模块。
12.按照权利要求11所述的系统，其中每个可编辑微件便于独立于与该微件相关的一个属性，修改应用于与该微件相关的另一个属性的预定数据质量规则。
13.按照权利要求11所述的系统，其中每个可编辑微件包含列举与该微件相关的属性的第一图形用户界面，和包含便于修改预定数据质量规则的至少一个可编辑栏的至少一个另外的图形用户界面。
14.按照权利要求8所述的系统，其中所述源系统把从所述至少一个数据源取回的数据和所述一组公共规则提供给多个客户端。
CN201210224953.7A 2011-06-30 2012-06-29 根据用户应用程序要求改写数据质量规则的方法和系统 Active CN102915237B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/173,371 2011-06-30
US13/173,371 US9330148B2 (en) 2011-06-30 2011-06-30 Adapting data quality rules based upon user application requirements

Publications (2)

Publication Number Publication Date
CN102915237A true CN102915237A (zh) 2013-02-06
CN102915237B CN102915237B (zh) 2016-06-29

Family

ID=47355339

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210224953.7A Active CN102915237B (zh) 2011-06-30 2012-06-29 根据用户应用程序要求改写数据质量规则的方法和系统

Country Status (3)

Country Link
US (4) US9330148B2 (zh)
CN (1) CN102915237B (zh)
DE (1) DE102012210401A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106815010A (zh) * 2016-12-09 2017-06-09 武汉斗鱼网络科技有限公司 一种操作数据库的方法及装置
CN107066614A (zh) * 2017-05-09 2017-08-18 北京京东尚科信息技术有限公司 数据生成方法和装置
CN112181254A (zh) * 2020-10-10 2021-01-05 武汉中科通达高新技术股份有限公司 数据质量管理方法及装置
CN114579553A (zh) * 2022-03-07 2022-06-03 中国标准化研究院 一种数据质量保证方法

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9330148B2 (en) 2011-06-30 2016-05-03 International Business Machines Corporation Adapting data quality rules based upon user application requirements
US9158559B2 (en) * 2012-01-27 2015-10-13 Microsoft Technology Licensing, Llc Roaming of note-taking application features
US9507949B2 (en) * 2012-09-28 2016-11-29 Intel Corporation Device and methods for management and access of distributed data sources
US9418241B2 (en) * 2013-02-15 2016-08-16 Infosys Limited Unified platform for big data processing
US10409802B2 (en) 2015-06-12 2019-09-10 Ab Initio Technology Llc Data quality analysis
US10853317B2 (en) * 2015-08-07 2020-12-01 Adp, Llc Data normalizing system
US11151100B2 (en) * 2016-10-17 2021-10-19 Sap Se Performing data quality functions using annotations
US10185728B2 (en) 2016-12-19 2019-01-22 Capital One Services, Llc Systems and methods for providing data quality management
US10936665B2 (en) 2018-08-09 2021-03-02 Sap Se Graphical match policy for identifying duplicative data
US20210014228A1 (en) * 2019-07-08 2021-01-14 Rong-Der HONG Method of delegating data editing authority of product items
US12073211B2 (en) 2019-11-21 2024-08-27 Schlumberger Technology Corporation Widget delivery workflow system and method
CN111047295B (zh) * 2019-12-13 2023-04-07 红云红河烟草(集团)有限责任公司 一种卷烟制丝加工过程的数据采集方法
CN112416978B (zh) * 2020-11-23 2024-09-27 广州南方卫星导航仪器有限公司 一种数据质检方案传输方法、装置和系统
US11921698B2 (en) 2021-04-12 2024-03-05 Torana Inc. System and method for data quality assessment

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1549162A (zh) * 2003-05-21 2004-11-24 联想(北京)有限公司 可扩展的安全信息处理方法及系统
CN1695152A (zh) * 2001-07-05 2005-11-09 电脑联合想象公司 用于转换商务处理策略数据的系统和方法
US7219327B1 (en) * 1999-07-01 2007-05-15 Affinity Internet, Inc. Extensible data model for use in an integrated platform for creating a distribution multiapplication online presence
CN101930370A (zh) * 2010-09-09 2010-12-29 上海普元信息技术股份有限公司 Soa应用系统服务集成中实现数据转换的系统结构及其方法

Family Cites Families (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4542509A (en) 1983-10-31 1985-09-17 International Business Machines Corporation Fault testing a clock distribution network
US4849905A (en) 1987-10-28 1989-07-18 International Business Machines Corporation Method for optimized RETE pattern matching in pattern-directed, rule-based artificial intelligence production systems
US5426727A (en) * 1989-01-20 1995-06-20 Asahi Kogaku Kogyo K.K. High-quality character generating system and method for use therein
GB8918553D0 (en) 1989-08-15 1989-09-27 Digital Equipment Int Message control system
US5390286A (en) 1990-03-26 1995-02-14 Digital Equipment Corporation Reticular discrimination network for specifying real-time conditions
US5179633A (en) 1990-06-29 1993-01-12 Digital Equipment Corporation Method and apparatus for efficiently implementing read-type procedural attachments in rete-like pattern matching environment
JPH06342396A (ja) 1990-07-02 1994-12-13 Internatl Business Mach Corp <Ibm> 共有データのアクセスを直列化する方法及び装置
JP3586472B2 (ja) 1991-06-25 2004-11-10 富士ゼロックス株式会社 情報表示方法および情報表示装置
JP3606330B2 (ja) * 1991-07-09 2005-01-05 津田駒工業株式会社 ジェットルームの緯入れ制御方法および装置
JPH07500437A (ja) 1991-10-24 1995-01-12 インテル　コーポレイシヨン データ処理システム
US5361370A (en) 1991-10-24 1994-11-01 Intel Corporation Single-instruction multiple-data processor having dual-ported local memory architecture for simultaneous data transmission on local memory ports and global port
US5522080A (en) 1991-10-24 1996-05-28 Intel Corporation Centralized control SIMD processor having different priority levels set for each data transfer request type and successively repeating the servicing of data transfer request in a predetermined order
US5452101A (en) 1991-10-24 1995-09-19 Intel Corporation Apparatus and method for decoding fixed and variable length encoded data
US5428377A (en) * 1992-08-11 1995-06-27 Xerox Corporation Color spatial filtering for thermal ink jet printers
US5423038A (en) 1992-10-14 1995-06-06 Davis; Marilyn Specialized data management method
US5353401A (en) * 1992-11-06 1994-10-04 Ricoh Company, Ltd. Automatic interface layout generator for database systems
US5319556A (en) * 1992-12-11 1994-06-07 The United States Of America As Represented By The Secretary Of The Navy Adaptive trajectory selection apparatus and method
US5619619A (en) 1993-03-11 1997-04-08 Kabushiki Kaisha Toshiba Information recognition system and control system using same
JP3441111B2 (ja) * 1993-06-17 2003-08-25 松下電器産業株式会社 実装基板生産システムおよびメンテナンス指示システム
EP0632384A1 (en) 1993-06-30 1995-01-04 International Business Machines Corporation High speed and programmable array clock generator circuit for abist semiconductor memory chips
EP0632468A1 (en) 1993-06-30 1995-01-04 International Business Machines Corporation Fast data compression circuit for semiconductor memory chips including an abist structure
JP3274541B2 (ja) * 1993-07-06 2002-04-15 株式会社日立製作所 浄水場管理支援方法及び支援システム
US5485618A (en) 1993-12-15 1996-01-16 Borland International, Inc. Methods and interface for building command expressions in a computer system
US5557619A (en) 1994-04-04 1996-09-17 International Business Machines Corporation Integrated circuits with a processor-based array built-in self test circuit
US5684478A (en) 1994-12-06 1997-11-04 Cennoid Technologies, Inc. Method and apparatus for adaptive data compression
US5712978A (en) * 1994-12-30 1998-01-27 Lucent Technologies Inc. System for control of remote processors
US5778370A (en) 1995-08-25 1998-07-07 Emerson; Mark L. Data village system
US5751704A (en) 1996-03-01 1998-05-12 Lucent Technologies Inc. Technique for minimizing the variance of interference in packetized interference-limited wireless communication systems
GB9604987D0 (en) 1996-03-08 1996-05-08 Ibm Data management system and method for replicated data
US6138123A (en) 1996-07-25 2000-10-24 Rathbun; Kyle R. Method for creating and using parallel data structures
US5850343A (en) * 1996-08-26 1998-12-15 Nakamura; Kaoru Machine tool control system
US6208941B1 (en) * 1996-09-16 2001-03-27 University Of Utah Research Foundation Method and apparatus for analysis of chromatographic migration patterns
US6061724A (en) * 1997-01-29 2000-05-09 Infovista Sa Modelling process for an information system, in particular with a view to measuring performance and monitoring the quality of service, and a measurement and monitoring system implementing this process
US6031990A (en) * 1997-04-15 2000-02-29 Compuware Corporation Computer software testing management
US5983227A (en) * 1997-06-12 1999-11-09 Yahoo, Inc. Dynamic page generator
US6115693A (en) * 1998-04-17 2000-09-05 Andersen Consulting Llp Quality center and method for a virtual sales and service center
US20040230559A1 (en) * 1999-08-09 2004-11-18 Mark Newman Information processing device and information processing method
US6542180B1 (en) * 2000-01-07 2003-04-01 Mitutoyo Corporation Systems and methods for adjusting lighting of a part based on a plurality of selected regions of an image of the part
US7478103B2 (en) * 2001-08-24 2009-01-13 Rightnow Technologies, Inc. Method for clustering automation and classification techniques
US20090106353A1 (en) * 2001-09-19 2009-04-23 Belovich Steven G Method and system for providing an event auditing client server software arrangement
US20030125996A1 (en) * 2001-12-13 2003-07-03 International Business Machines Corporation System and method for managing capacity of professional and technical services
EP1476221A4 (en) * 2002-02-01 2008-04-23 Cleveland Clinic Foundation ADJUSTABLE SIMULATION DEVICE AND USE METHOD THEREFOR
US20060020641A1 (en) * 2002-03-25 2006-01-26 Data Quality Solutions Business process management system and method
US7246144B2 (en) * 2002-03-25 2007-07-17 Data Quality Solutions Method and system for managing a plurality of enterprise business systems
JP2005521947A (ja) * 2002-03-25 2005-07-21 データ クオリティー ソリューションズ、インコーポレイテッド ビジネス・プロセス・マネジメントを企業する方法及びシステム
US20040083199A1 (en) 2002-08-07 2004-04-29 Govindugari Diwakar R. Method and architecture for data transformation, normalization, profiling, cleansing and validation
US20090024584A1 (en) * 2004-02-13 2009-01-22 Blue Vector Systems Radio frequency identification (rfid) network system and method
US20050182739A1 (en) 2004-02-18 2005-08-18 Tamraparni Dasu Implementing data quality using rule based and knowledge engineering
US7546543B2 (en) * 2004-06-25 2009-06-09 Apple Inc. Widget authoring and editing environment
US8453065B2 (en) * 2004-06-25 2013-05-28 Apple Inc. Preview and installation of user interface elements in a display environment
US8566732B2 (en) * 2004-06-25 2013-10-22 Apple Inc. Synchronization of widgets and dashboards
US8463872B2 (en) * 2004-07-02 2013-06-11 Broadsoft Casabi, Llc Method and apparatus for a family center
US7505868B1 (en) * 2005-01-31 2009-03-17 Hewlett-Packard Development Company, L.P. Performing quality determination of data
US8224830B2 (en) 2005-03-19 2012-07-17 Activeprime, Inc. Systems and methods for manipulation of inexact semi-structured data
WO2006116455A2 (en) * 2005-04-26 2006-11-02 Applera Corporation System for genetic surveillance and analysis
US20080214152A1 (en) * 2005-09-14 2008-09-04 Jorey Ramer Methods and systems of mobile dynamic content presentation
US7954064B2 (en) * 2005-10-27 2011-05-31 Apple Inc. Multiple dashboards
WO2008028064A2 (en) * 2006-08-31 2008-03-06 Ramasubramaniyam Sethuraman System and method for providing a graphical user interface for disparate applications
US7565332B2 (en) * 2006-10-23 2009-07-21 Chipin Inc. Method and system for providing a widget usable in affiliate marketing
US20080098290A1 (en) * 2006-10-23 2008-04-24 Carnet Williams Method and system for providing a widget for displaying multimedia content
US8560840B2 (en) * 2006-10-23 2013-10-15 InMobi Pte Ltd. Method and system for authenticating a widget
US10007895B2 (en) * 2007-01-30 2018-06-26 Jonathan Brian Vanasco System and method for indexing, correlating, managing, referencing and syndicating identities and relationships across systems
US20080222232A1 (en) * 2007-03-06 2008-09-11 Allen Stewart O Method and Apparatus for Widget and Widget-Container Platform Adaptation and Distribution
WO2008115553A1 (en) * 2007-03-20 2008-09-25 The University Of North Carolina At Chapel Hill Methods, systems, and computer readable media for automatically generating customizable user interfaces using proagramming patterns
US20080301016A1 (en) * 2007-05-30 2008-12-04 American Express Travel Related Services Company, Inc. General Counsel's Office Method, System, and Computer Program Product for Customer Linking and Identification Capability for Institutions
US20090043799A1 (en) * 2007-08-06 2009-02-12 Morris Robert P Methods And Apparatus For Using Annotated User Interface Widgets In Search Operations
US20090044144A1 (en) * 2007-08-06 2009-02-12 Morris Robert P Methods And Apparatus For Sharing User Interface Widget Annotations
US20090094223A1 (en) * 2007-10-05 2009-04-09 Matthew Berk System and method for classifying search queries
US20140258032A1 (en) * 2007-11-14 2014-09-11 Panjiva, Inc. Transaction facilitating marketplace platform
US8626618B2 (en) * 2007-11-14 2014-01-07 Panjiva, Inc. Using non-public shipper records to facilitate rating an entity based on public records of supply transactions
US8234193B2 (en) * 2008-03-03 2012-07-31 Wildfire Interactive, Inc. Method and system for providing online promotions through a social network-based platform
WO2009154483A1 (en) * 2008-06-20 2009-12-23 Business Intelligence Solutions Safe B.V. Methods, apparatus and systems for data visualization and related applications
US8892534B2 (en) 2008-07-03 2014-11-18 Sap Se System and method for integrating data quality metrics into enterprise data management processes
US20120110027A1 (en) 2008-10-28 2012-05-03 Fernando Falcon Audience measurement system
US9032312B2 (en) * 2008-12-15 2015-05-12 Mastercard International Incorporated Platform for generating composite applications
US20150026260A1 (en) * 2009-03-09 2015-01-22 Donald Worthley Community Knowledge Management System
US8380661B2 (en) * 2010-10-05 2013-02-19 Accenture Global Services Limited Data migration using communications and collaboration platform
US20120102530A1 (en) * 2010-10-20 2012-04-26 Rovi Technologies Corporation Method and apparatus for providing a programming guide via multiple receiving devices
US20120166412A1 (en) * 2010-12-22 2012-06-28 Yahoo! Inc Super-clustering for efficient information extraction
US9330148B2 (en) 2011-06-30 2016-05-03 International Business Machines Corporation Adapting data quality rules based upon user application requirements

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7219327B1 (en) * 1999-07-01 2007-05-15 Affinity Internet, Inc. Extensible data model for use in an integrated platform for creating a distribution multiapplication online presence
CN1695152A (zh) * 2001-07-05 2005-11-09 电脑联合想象公司 用于转换商务处理策略数据的系统和方法
CN1549162A (zh) * 2003-05-21 2004-11-24 联想(北京)有限公司 可扩展的安全信息处理方法及系统
CN101930370A (zh) * 2010-09-09 2010-12-29 上海普元信息技术股份有限公司 Soa应用系统服务集成中实现数据转换的系统结构及其方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106815010A (zh) * 2016-12-09 2017-06-09 武汉斗鱼网络科技有限公司 一种操作数据库的方法及装置
CN106815010B (zh) * 2016-12-09 2021-01-01 武汉斗鱼网络科技有限公司 一种操作数据库的方法及装置
CN107066614A (zh) * 2017-05-09 2017-08-18 北京京东尚科信息技术有限公司 数据生成方法和装置
CN112181254A (zh) * 2020-10-10 2021-01-05 武汉中科通达高新技术股份有限公司 数据质量管理方法及装置
CN114579553A (zh) * 2022-03-07 2022-06-03 中国标准化研究院 一种数据质量保证方法

Also Published As

Publication number Publication date
US10331635B2 (en) 2019-06-25
US20130006992A1 (en) 2013-01-03
CN102915237B (zh) 2016-06-29
US10318500B2 (en) 2019-06-11
US9323814B2 (en) 2016-04-26
US20160188640A1 (en) 2016-06-30
US20160188688A1 (en) 2016-06-30
DE102012210401A1 (de) 2013-01-03
US9330148B2 (en) 2016-05-03
US20130007629A1 (en) 2013-01-03

Similar Documents

Publication Publication Date Title
CN102915237A (zh) 根据用户应用程序要求改写数据质量规则的方法和系统
EP3451154B1 (en) Embedded analytics for applications and interfaces across multiple platforms
CN103970527B (zh) 为报表生成提供辅助覆盖的方法和系统
CN106067080B (zh) 提供可配置工作流能力
US9043750B2 (en) Automated generation of two-tier mobile applications
EP3740880A1 (en) Pick and applicator for use with a stringed instrument
US10579678B2 (en) Dynamic hierarchy generation based on graph data
US11922140B2 (en) Platform for integrating back-end data analysis tools using schema
KR102397495B1 (ko) 노 코드 애플리케이션 개발 및 운영 시스템과 그 서비스 방법
KR101944973B1 (ko) 사용자 정의 erp 펑션 공유 방법 및 시스템
US20150293947A1 (en) Validating relationships between entities in a data model
CN112199086A (zh) 自动编程控制系统、方法、装置、电子设备及存储介质
KR101951719B1 (ko) 그래픽 인터페이스 기반으로 이벤트 동작을 프로그래밍 하는 웹 레포팅 디자인 시스템
US11966957B2 (en) Methods and systems for modular personalization center
US20230316382A1 (en) Methods and systems for automated personalization
US20190138282A1 (en) System and methods for development of visual business applications
CN104541297A (zh) 销售预测器(spe)的可扩展性
US10884765B1 (en) Object configuration dynamic graphical user interface
US10255564B2 (en) Context specific resource editors
KR101351079B1 (ko) 데이터베이스와 연동되는 프로그램을 제어하는 서비스 제공 방법 및 시스템
Liu Apache spark machine learning blueprints
Galliano The importance of data visualization tools in modern enterprises. Cost-effective solutions and empowering of an open source project.
Abraham et al. Hands-On Machine Learning with Azure: Build powerful models with cognitive machine learning and artificial intelligence
CN118467877A (zh) 页面设计方法、系统、电子设备及存储介质
Duarte A Model-Driven Approach for Mobile Business Intelligence

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant