CN103984702A - 一种基于xbrl报告数据搭建商业智能行业分析云的系统及方法 - Google Patents

Abstract

本发明涉及可扩展商业报告语言、云计算技术和商务智能技术领域，特别涉及一种基于XBRL报告数据搭建商业智能行业分析云的系统及方法。本发明采用先进的云计算和商务智能技术，将大量非结构化、半结构化的XBRL报告数据采用商务智能的数据挖掘和分析方法进行装载、整理和计算，形成行业数据中心并进行行业数据分析建模，从中提取出具有潜在价值的关键数据，来为企业进行商业决策、政府机构进行经济决策提供PaaS和SaaS层的数据平台和服务。

Description

一种基于XBRL报告数据搭建商业智能行业分析云的系统及方法

技术领域

本发明涉及可扩展商业报告语言、云计算技术和商务智能技术领域，特别涉及一种基于XBRL报告数据搭建商业智能行业分析云的系统及方法。

背景技术

XBRL（可扩展商业报告语言，eXtensible Business Reporting Language）是 XML在商业报告领域的用于财务报告信息交换的一种应用，是目前应用于非结构化信息处理尤其是财务信息处理的最新标准和技术。它采用一种电子标签来明确定义某个信息，从而便于各种应用程序读取。XBRL还描述了不同信息之间的关系，给出了计算各种比率的公式，提供了可供参照的会计准则和其他相关信息源，甚至可以将信息转化为不同的人类语言。

XBRL技术框架主要由3个部分组成：XBRL规范（Specification）、XBRL分类标准（Taxonomy）和XBRL实例文档（Instance）。XBRL规范是一份由官方制定的技术说明书，它是XBRL分类标准产生的依据，是XBRL技术的总纲。规范定义了XBRL的各种专业术语，规范了XBRL文档的结构，说明了如何建立分类标准以及实例文档，并对XBRL标签做出统一的规定，要求文件开发者共同使用，以利于实现标准资料的互换。XBRL分类标准是对会计报告内容标准的描述与分类，包括一个核心模式文件和定义、计算、列报（展示）、标签、参考（引用）这五个链接库文件。XBRL实例文档是一个包含企业财务报告信息的XML文档，代表了运用分类标准标记的财务实例的元素数据集合。XBRL的这种技术结构使得XBRL具有良好的动态分析功能，当搜索引擎找到所需的信息时，能够进一步追踪找到数据的最初来源及其它与该信息有关的资料。

中国已于2008年11月12日成立了XBRL中国地区组织。财政部自2010年开始组织实施企业会计准则通用分类标准在国有大中型企业和上市公司的实施应用，实施范围在不断扩大。随着实施企业的不断增多，目前上海证交所、深圳证交所均可提供XBRL数据服务，还有很多非上市企业也纳入XBRL报告报送范围，如何对XBRL数据进行有效利用，发掘数据中的价值迫在眉睫。

云计算（Cloud Computing）是一种新兴互联网技术，它提供一种通过基于互联网的计算方式来共享软硬件资源和信息，并可以按需求为计算机和其他设备提供高可用的、便捷的、按需的网络访问和计算能力。

云计算可以认为包括以下几个层次的服务：基础设施即服务（IaaS），平台即服务（PaaS）和软件即服务（SaaS）。

其中PaaS实际上是指将软件研发的平台作为一种服务，以SaaS的模式提交给用户。

BI（Business Intelligence）即商务智能，它是一套由数据仓库（或数据集市）、查询报表、数据分析、数据挖掘、数据备份和恢复等部分组成的完整的解决方案，是用来将企业中现有的数据进行有效的整合，快速准确的提供报表、查询和分析等决策依据，从而帮助企业做出明智的经营决策的技术及其应用。商业智能系统的数据来自企业其他业务系统，并将企业中现有的数据转化为知识。

发明内容

为了解决现有技术的问题，本发明提供了一种基于XBRL报告数据搭建商业智能行业分析云的系统及方法，采用先进的云计算和商务智能技术，将大量非结构化、半结构化的XBRL报告数据采用商务智能的数据挖掘和分析方法进行装载、整理和计算，形成行业数据中心并进行行业数据分析建模，从中提取出具有潜在价值的关键数据，来为企业进行商业决策、政府机构进行经济决策提供PaaS和SaaS层的数据平台和服务。

本发明所采用的技术方案如下：

一种基于XBRL报告数据搭建商业智能行业分析云的系统，由XBRL分类标准管理器，XBRL报告数据采集器，XBRL报告编辑器，XBRL云数据中心，数据挖掘服务和行业分析云平台构成，其中：

XBRL分类标准管理器：用以实现XBRL通用分类标准和行业扩展分类标准的导入、编制修改、更新发布；

XBRL报告数据采集器：根据预定义好的接口方法，实现XBRL数据的自动采集；

XBRL报告编辑器：完成XBRL报告数据的手工导入和数据编辑修正；

XBRL云数据中心：用以存放自动采集和手工录入的XBRL报告数据；

数据挖掘服务：以系统服务的方式定期实现将云数据中心的XBRL报告数据，根据每份报告数据适配的通用分类标准和各行业标准进行数据整理，并计算出相应行业指标数据完成行业数据自动更新；

行业分析云平台：对行业数据以列表、图形、表格的形式进行展现，以起到统计分析和辅助决策的目的。

一种基于XBRL报告数据搭建商业智能行业分析云的方法，包括以下步骤： 

步骤A，使用XBRL分类标准管理器，导入和定义XBRL分类标准；

步骤B，使用XBRL报告数据采集器，定义数据采集接口，实现XBRL数据的自动采集；

步骤C，配置和运行数据挖掘服务，实现通过步骤B采集到的报告数据与步骤A的分类标准间进行适配，并自动计算预定义的行业指标；

步骤D，通过商业智能分析工具进行行业分析建模，实现以报表、查询、图形等方式进行信息呈现的行业分析云平台和应用。

数据挖掘服务按需定义其运行的频次、不同的服务器分别计算不同的行业和行业指标范围，用以分散数据处理密度和计算量，以提高计算性能和并发处理能力。

行业分析云平台提供预置的行业比较、企业对标、行业指标等分析模型，并支持按需扩展。

XBRL报告编缉器运行在客户端，支持XBRL实例文档的导入、编缉修改，保存数据到XBRL云数据中心。

XBRL报告数据采集器是部署运行在服务器上，根据预定义的采集接口，定期自动获取报告数据并保存数据到XBRL云数据中心。

XBRL分类标准编辑器实现通用分类标准的导入和维护，并支持行业扩展分类标准的定义修改。

XBRL报告数据采集器部署运行在多台数据采集服务器上，根据预定义的采集接口，定期自动获取并保存数据到统一的XBRL云数据中心。

XBRL报告数据采集器的采集接口支持包括但不限于CGI、Web Services、asp.Net，JSP、asp、PHP等多种返回XBRL实例文档的调用方法，获取数据时支持企业标识和报送期间传参，返回XBRL实例文档中应包含行业标识。

XBRL报告数据采集器会根据采集接口定义的数据更新标识进行比较，对XBRL报告数据进行增量采集。

XBRL报告数据采集器对XBRL报告数据进行分行业、年度期间、单位进行数据归档。

XBRL报告编辑器可以打开采集到的企业XBRL实例文档，并可以对实例文档进行浏览和编辑修改，修改后保存到统一的云数据中心。

XBRL报告编辑器可以手工导入企业XBRL实例文档，并按行业特性保存到统一的XBRL云数据中心。

统一的云数据中心是一套数据仓库系统，用以保存自动采集和手工更新的企业XBRL实例文档。

统一的云数据中心通过元数据管理、数据标准管理和数据模型管理等措施，保证数据仓库中XBRL数据的质量和适应行业数据分析需求的变化。

数据挖掘服务部署在多台服务器上，以系统服务的方式定期分工抽取云数据中心的XBRL报告数据，对抽取到的企业XBRL报告数据与其对应的行业扩展分类标准进行元素适配整理后，按时间序列回写XBRL云数据中心企业XBRL元素数据表。

数据挖掘服务根据企业行业设定、行业指标设定、指标公式设定实现定期按行业读取XBRL云数据中心企业XBRL元素数据表，计算企业指标数据和行业指标数据。

数据挖掘服务依赖的企业行业设定、行业指标设定、指标公式设定是XBRL云数据中心数据模型管理的产出物，支持预定义，并可以根据实际情况变化适时调整，调整后的设定在后续的指标数据计算加以体现。

行业分析云平台，包括行业数据分析模型和一整套报表、查询和图形展现工具。

行业分析云平台通过对行业指标数据进行分析建模，提供多维度、多主题的行业分析，如行业发展趋势、行业投资回报对比、企业行业对标、同行企业排名等。

行业分析云平台以行业数据为基础提供包括报表、查询、图形等多种展现视图，为企业经营决策、政府经济管理提供支持。

行业分析云平台支持提供数据下载、模型扩展定制等增值服务。

本发明提供的技术方案带来的有益效果是：

通过提供XBRL分类标准管理实现行业扩展分类标准的导入和维护，来完成XBRL报告数据的标准化对应，使行业数据分析成为可能。通过利用XBRL数据采集器和数据挖掘服务，对XBRL数据从数据采集、元素匹配到生成行业指标数据，实现了完全自动化，无需人工干预；数据采集和数据挖掘过程的更新判断机制，提高了程序运行效率和资源利用效率。XBRL数据编辑器功能的加入，对保持行业数据的完整性是有益的补充。对于数据挖掘中的行业数据建模、行业分析中的分析模型，均支持在具体实施过程中进行丰富扩展。通过云数据中心的方式提供分析服务、数据下载服务、定制增值服务等，可以有效地利用资源，集合更多的智力成果，更好地做到科学决策。

附图说明

图1为本发明的一种基于XBRL报告数据搭建商业智能行业分析云的系统的总体技术架构图；

图2是为本发明的一种基于XBRL报告数据搭建商业智能行业分析云的方法的实现XBRL数据采集的流程图；

图3是为本发明的一种基于XBRL报告数据搭建商业智能行业分析云的方法的XBRL数据挖掘服务的流程图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。

实施例一

示例：

场景：目前，上海证券交易所、深圳证券交易所要求上市公司报送XBRL财务报告数据，各自提供所辖上市公司XBRL报告数据分析功能，并提供XBRL数据下载服务。需要建立一个统一的行业分析平台，实现对沪深两地上市公司XBRL报表行业数据的整合挖掘，以分析上市公司各行业经济发展水平，为经济决策和建立经济档案提供数据支持。

步骤一：

通过XBRL分类标准管理器将由财政部、XBRL中国地区组织等机构部门定义好的各行业扩展分类标准导入到XBRL云数据中心。各行业扩展分类标准均应包含：核心模式文件、定义连接库文件、计算链接库文件、列报连接库文件、标签链接库文件、参考链接库文件；各行业扩展分类标准在数据库中按行业标识分类保存。

对于未建立起行业扩展分类标准的，可以应用通用分类标准或通过XBRL分类标准管理器进行标准建立 。

步骤二：

根据上海证券交易所、深圳证券交易所提供XBRL数据服务协议说明，定义两个XBRL数据采集接口。

将XBRL数据采集器程序部署到服务器上，并定义数据采集任务，每个任务包括目标接口、数据采集频率和数据采集范围。本实施例定义两个任务：目标接口分别对应已定义的两个数据采集接口；数据采集频率定义为每月更新；数据采集范围可以是所有上市公司数据、某行业或特定企业编号范围，本实施例分别选定所有上市公司数据。

XBRL数据采集器程序，定期扫描定义的任务和接口信息，本实实施例达到任务时间点时，分别调用请求上交所和深交所的XBRL数据服务，根据返回结果判断数据是否更新，对更新数据进行下载并保存到XBRL云数据中心。

步骤三：

定义数据挖掘任务，每个任务设置对应行业、指标范围、执行周期和时间；可以对任务进行组合编排,一个任务可以包含多个子任务，包含多个子任务的组合任务只合并和编排了子任务对应行业和指标范围及计算顺序，需单独指定执行周期和时间。本实施例分行业单独定义数据挖掘任务。

将XBRL数据挖掘服务程序分别部署在多台数据挖掘服务器上，并保持服务的运行状态。

XBRL数据挖掘服务扫描数据挖掘任务，当达到任务执行时点，对任务涉及行业、指标及企业XBRL数据进行分析是否有数据更新。

当数据有更新时，根据行业指标数据建模，首先匹配行业扩展分类标准和XBRL报表数据元素，然后根据行业指标和元素计算关系，进行行业指标计算和企业指标计算，并将指标数据写入XBRL云数据中心，同时进行数据挖掘记录和任务执行日志，任务结束。

当XBRL数据挖掘服务判断数据无更新时，记录任务执行日志，任务结束。

XBRL数据挖掘服务在各个服务器上依8、9、10的方式运行，直至所有行业指标数据计算完成一个周期的数据挖掘过程。

步骤四：

用户使用计算机、平板电脑、PDA、移动终端等设备，打开浏览器输入行业分析云平台web服务器地址，即可以对行业数据进行分析展现。利用这些有价值的信息，来辅助经济和经营决策。

更进一步地应用，用户可以订阅BI行业分析云提供的行业数据下载和模型定制等增值服务。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (6)

1.一种基于XBRL报告数据搭建商业智能行业分析云的系统，由XBRL分类标准管理器，XBRL报告数据采集器，XBRL报告编辑器，XBRL云数据中心，数据挖掘服务和行业分析云平台构成，其中：

XBRL分类标准管理器：用以实现XBRL通用分类标准和行业扩展分类标准的导入、编制修改、更新发布；

XBRL报告数据采集器：根据预定义好的接口方法，实现XBRL数据的自动采集；

XBRL报告编辑器：完成XBRL报告数据的手工导入和数据编辑修正；

XBRL云数据中心：用以存放自动采集和手工录入的XBRL报告数据；

数据挖掘服务：以系统服务的方式定期实现将云数据中心的XBRL报告数据，根据每份报告数据适配的通用分类标准和各行业标准进行数据整理，并计算出相应行业指标数据完成行业数据自动更新；

行业分析云平台：对行业数据以列表、图形、表格的形式进行展现，以起到统计分析和辅助决策的目的。

2.一种基于XBRL报告数据搭建商业智能行业分析云的方法，包括以下步骤： 

步骤A，使用XBRL分类标准管理器，导入和定义XBRL分类标准；

步骤B，使用XBRL报告数据采集器，定义数据采集接口，实现XBRL数据的自动采集；

步骤C，配置和运行数据挖掘服务，实现通过步骤B采集到的报告数据与步骤A的分类标准间进行适配，并自动计算预定义的行业指标；

步骤D，通过商业智能分析工具进行行业分析建模，实现以报表、查询、图形等方式进行信息呈现的行业分析云平台和应用。

3.根据权利要求1所述的一种基于XBRL报告数据搭建商业智能行业分析云的方法，其特征在于：所述的数据挖掘服务按需定义其运行的频次、不同的服务器分别计算不同的行业和行业指标范围，用以分散数据处理密度和计算量，以提高计算性能和并发处理能力。

4.根据权利要求1所述的一种基于XBRL报告数据搭建商业智能行业分析云的方法，其特征在于：所述的行业分析云平台提供预置的行业比较、企业对标、行业指标等分析模型，并支持按需扩展。

5.根据权利要求1所述的一种基于XBRL报告数据搭建商业智能行业分析云的方法，其特征在于：所述的XBRL报告编缉器运行在客户端，支持XBRL实例文档的导入、编缉修改，保存数据到XBRL云数据中心。

6.根据权利要求1所述的一种基于XBRL报告数据搭建商业智能行业分析云的方法，其特征在于：所述的XBRL报告数据采集器是部署运行在服务器上，根据预定义的采集接口，定期自动获取报告数据并保存数据到XBRL云数据中心。