CN101873226A - 一种统计报表系统的数据入库方法和装置 - Google Patents
一种统计报表系统的数据入库方法和装置 Download PDFInfo
- Publication number
- CN101873226A CN101873226A CN201010205875A CN201010205875A CN101873226A CN 101873226 A CN101873226 A CN 101873226A CN 201010205875 A CN201010205875 A CN 201010205875A CN 201010205875 A CN201010205875 A CN 201010205875A CN 101873226 A CN101873226 A CN 101873226A
- Authority
- CN
- China
- Prior art keywords
- information
- statistical
- statistical server
- form system
- measurement data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/14—Charging, metering or billing arrangements for data wireline or wireless communications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24568—Data stream processing; Continuous queries
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/14—Charging, metering or billing arrangements for data wireline or wireless communications
- H04L12/1428—Invoice generation, e.g. customization, lay-out, database processing, algorithms for calculating the bill or formatting invoices as WWW pages
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种统计报表系统的数据入库方法和装置,方法包括:业务数据库定时搜索统计报表系统所需的业务信息,并上传至统计服务器;业务处理机定时搜索话单信息,并上传至统计服务器;现网设备定时搜索本设备的测量数据信息,并上传至统计服务器;统计服务器将接收的业务信息或话单信息或测量数据信息处理后入库。本发明所述方法,可以实现业务信息、话单信息和测量数据信息三类数据自动入库,满足了IPTV业务对报表统计灵活和高效的需求,并为数据统计和数据挖掘带来了便利。
Description
技术领域
本发明涉及网络电视IPTV业务领域,特别涉及一种基于IPTV业务的统计报表系统的数据入库方法和装置。
背景技术
IPTV统计报表系统为报表统计提供数据,其源数据包括IPTV业务信息、话单文件、各设备定时上报的测量数据等。其中业务信息包括:用户信息、业务区信息、栏目信息、内容信息、节目信息、节点信息等,这些信息是通过IPTV业务管理门户进行管理和维护的,被分散的保存在一个或多个关系型数据库系统中;业务话单信息是业务处理机根据用户的订购、媒体服务信息等实时生成的一系列文本文件;测量数据则是为了监控现网设备的业务运行情况、系统负载情况等由各设备自动上报到统计报表系统所在的物理设备上的。以上三种不同数据源类型的数据分散在不同的设备上,不能够满足IPTV业务的灵活、高效的报表统计需求,因此,需要把相关数据部署到一台单独的服务器上,即在服务器上部署专门的数据库管理系统,用于存储业务数据库信息、业务话单入库和各设备的测量数据等。
发明内容
本发明的目的在于提供一种基于IPTV业务的、能够实现三类数据源类型的数据自动入库方法和装置,解决了不同数据源类型的数据分散在不同设备上,而造成的数据统计和数据挖掘困难的问题。
根据本发明的一个方面,提供的一种统计报表系统的数据入库方法包括:
A)业务数据库定时搜索统计报表系统所需的业务信息,并上传至统计服务器;
B)业务处理机定时搜索话单信息,并上传至统计服务器;
C)现网设备定时搜索本设备的测量数据信息,并上传至统计服务器;
D)统计服务器将接收的业务信息或话单信息或测量数据信息处理后入库。
根据本发明的另一个方面,提供的一种统计报表系统得数据入库装置包括:
业务数据库部分,用于定时搜索统计报表系统所需的业务信息,并上传至统计服务器部分;
业务处理机部分,用于定时搜索话单信息,并上传至统计服务器部分;
现网设备部分,用于定时搜索现网设备的测量数据信息,并上传至统计服务器部分;
统计服务器部分,用于将接收的业务信息或话单信息或测量数据信息处理后入库。
与现有技术相比较,本发明的有益效果在于,本发明将三种不同数据源类型的数据集中存放,使IPTV业务的报表统计更加灵活和高效,为数据统计和数据挖掘带来了便利。
附图说明
图1是本发明的统计服务器在统计报表系统中的位置;
图2是本发明实施例提供的IPTV业务信息入库示意图;
图3是本发明实施例提供的IPTV话单信息入库示意图;
图4是本发明实施例提供的IPTV各设备测量数据信息入库示意图;
图5是本发明实施例提供的统计报表系统的数据入库装置。
具体实施方式
以下结合附图对本发明的优选实施例进行详细说明,应当理解,以下所说明的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
图1显示了本发明的统计服务器在统计报表系统中的位置,如图1所示,统计服务器接收来自业务数据库搜集的业务信息、来自业务处理机搜集的话单信息、来自内容分发网络CDN或电子节目菜单EPG等现网设备搜集的测量数据信息,并将这三种不同数据源类型的信息插入到统计服务器中相应的数据库中,完成业务信息、话单信息、数据测量信息的入库。
图2显示了本发明实施例提供的IPTV业务信息入库示意图,如图2所示,业务信息入库的方法具体为:
业务数据库根据部署的定时任务,定时自动搜集统计报表系统所需要的业务信息;
将这些业务信息按照信息类型生成一个一个的文本文件,并整理成一个业务信息压缩包;
通过FTP协议,将该业务信息压缩包上传到统计服务器的指定目录下;
统计服务器根据部署的定时任务,定时扫描指定目录下是否有业务信息压缩包;
若扫描到指定目录下存在业务信息压缩包,则执行解包处理得到关于业务信息的文本文件,然后使用统计服务器的数据库系统提供的文本信息导入工具将文本文件中的业务信息导入到统计服务器中相应的数据库表中,完成业务信息的入库。
上述业务数据库可以有一台或一台以上。
图3显示了本发明实施例提供的IPTV话单信息入库示意图,如图3所示,话单信息入库的方法具体为:
业务处理机根据部署的定时任务,定时自动搜集统计报表系统所需要的话单信息;
将这些话单信息生成一个一个的文本文件,并整理成一个话单信息压缩包;
通过FTP协议,将该话单信息压缩包上传到统计服务器的指定目录下;
统计服务器根据部署的定时任务,定时扫描指定目录下是否有话单信息压缩包;
若扫描到指定目录下存在话单信息压缩包,则执行解包处理得到关于话单信息的文本文件,并按照话单类型对文本文件中的话单信息进行话单分拣,整理出用户订购话单、媒体服务话单等;
使用统计服务器的数据库系统提供的文本信息导入工具将话单信息导入到统计服务器中相应的数据库表中,完成话单信息的入库。
上述业务处理机可以有一台或多台。
图4显示了本发明实施例提供的IPTV各设备测量数据信息入库示意图,如图4所示,测量数据信息入库的方法具体为:
EPG、CDN等现网设备根据其上部署的定时任务,定时自动搜集本设备的测量数据信息;
通过HTTP协议,将该测量数据信息发送至统计服务器的指定端口上;
统计服务器的服务端口上接收到测量数据信息以后,自动将该信息转换成一条数据库插入语句,并在数据库中执行,完成测量数据的入库。
上述现网设备包括一台或一台以上的EPG、CDN,还可以包括CP等其它的现网设备。
图5显示了本发明实施例提供的统计报表系统的数据入库装置,如图5所示,装置包括业务数据库部分、业务处理机部分、现网设备部分、统计服务器部分。
所述业务数据库部分包括一台或一台以上业务数据库,用于定时搜索统计报表系统所需的业务信息,并上传至统计服务器部分;
所述业务处理机部分包括一台或一台以上业务处理机,用于定时搜索话单信息,并上传至统计服务器;
所述现网设备部分包括一台或一台以上现网设备,用于定时搜索现网设备的测量数据信息,并上传至统计服务器部分;
所述统计服务器部分,用于将接收的业务信息或话单信息或测量数据信息处理后入库。
所述装置的工作原理是:
所述业务数据库部分根据部署的定时任务,自动搜集业务信息,将所搜集的业务信息按业务信息的类型生成相应的文本文件,并整理成一个业务信息压缩包上传至统计服务器部分的指定目录下;所述统计服务器部分通过定时扫描所述指定目录,发现业务信息压缩包后,对业务信息压缩包进行解包处理,得到相应的文本文件,并把文本文件中的文本信息导入到统计报表系统的统计服务器的数据库中。
所述业务处理机部分包括一台或一台以上业务处理机,其根据部署的定时任务,自动搜集话单信息,将所搜集的话单信息生成相应的文本文件,并整理成一个话单信息压缩包上传至统计服务器部分的指定目录下;所述统计服务器部分通过定时扫描所述指定目录,发现话单信息压缩包后,对话单信息压缩包进行解包处理,得到相应的文本文件,并按照类型把文本文件中的话单信息分拣,如分拣成用户订购话单、媒体服务话单等,并导入到统计报表系统的统计服务器的数据库中。
所述现网设备部分其根据部署的定时任务,自动搜集本设备的测量数据信息,并将所搜集的测量数据信息上传至统计服务器部分的指定端口处;所述统计服务器的服务端口接收到测量数据后,将其转换成数据库插入语,在数据库中执行。
本发明所述方法可以自动搜集业务信息、话单信息、测量数据信息三种不用数据源类型的数据,并将这三种数据集中存放在统计服务器上,满足了IPTV业务对报表统计灵活和高效的需求,并为数据统计和数据挖掘带来了便利。
尽管上文对本发明进行了详细说明,但是本发明不限于此,本技术领域技术人员可以根据本发明的原理进行各种修改。因此,凡按照本发明原理所作的修改,都应当理解为落入本发明的保护范围。
Claims (10)
1.一种统计报表系统的数据入库方法,其特征在于,包括:
A)业务数据库定时搜索统计报表系统所需的业务信息,并上传至统计服务器;
B)业务处理机定时搜索话单信息,并上传至统计服务器;
C)现网设备定时搜索本设备的测量数据信息,并上传至统计服务器;
D)统计服务器将接收的业务信息或话单信息或测量数据信息处理后入库。
2.根据权利要求1所述的一种统计报表系统的数据入库方法,其特征在于,所述步骤A)具体为:
根据部署的定时任务,自动搜集业务信息,将所搜集的业务信息按业务信息的类型生成相应的文本文件,并整理成一个业务信息压缩包上传至统计服务器的指定目录下。
3.根据权利要求1所述的一种统计报表系统的数据入库方法,其特征在于,所述步骤B)具体为:
根据部署的定时任务,自动搜集话单信息,将所搜集的话单信息生成相应的文本文件,并整理成一个话单信息压缩包上传至统计服务器的指定目录下。
4.根据权利要求1所述的一种统计报表系统的数据入库方法,其特征在于,所述步骤C)具体为:
根据部署的定时任务,自动搜集本设备的测量数据信息,并将所搜集的测量数据信息上传至统计服务器的服务端口下。
5.根据权利要求2、3、4所述的一种统计报表系统的数据入库方法,其特征在于,所述步骤D)具体为:
统计服务器通过定时扫描所述指定目录,发现业务信息压缩包或话单信息压缩包后,对业务信息压缩包或话单信息压缩包进行解包处理,得到相应的文本文件,并将其中的文本信息导入到统计报表系统的数据库表中;
统计服务器的服务端口接收到测量数据信息后,将其转换成数据库插入语,在数据库中执行。
6.一种统计报表系统的数据入库装置,其特征在于,包括:
业务数据库部分,用于定时搜索统计报表系统所需的业务信息,并上传至统计服务器部分;
业务处理机部分,用于定时搜索话单信息,并上传至统计服务器部分;
现网设备部分,用于定时搜索现网设备的测量数据信息,并上传至统计服务器部分;
统计服务器部分,用于将接收的业务信息或话单信息或测量数据信息处理后入库。
7.根据权利要求6所述的一种统计报表系统的数据入库装置,其特征在于,所述业务数据库部分包括一台或一台以上业务数据库,其根据部署的定时任务,自动搜集业务信息,将所搜集的业务信息按业务信息的类型生成相应的文本文件,并整理成一个业务信息压缩包上传至统计服务器部分的指定目录下。
8.根据权利要求6所述的一种统计报表系统的数据入库装置,其特征在于,所述业务处理机部分包括一台或一台以上业务处理机,其根据部署的定时任务,自动搜集话单信息,将所搜集的话单信息生成相应的文本文件,并整理成一个话单信息压缩包上传至统计服务器部分的指定目录下。
9.根据权利要求6所述的一种统计报表系统的数据入库装置,其特征在于,所述现网设备部分包括一台或一台以上现网设备,其根据部署的定时任务,自动搜集本设备的测量数据信息,并将所搜集的测量数据信息上传至统计服务器部分的服务端口处。
10.根据权利要求8、9、10所述的一种统计报表系统的数据入库装置,其特征在于,所述统计服务器部分包括一台统计服务器,其通过定时扫描所述指定目录,发现业务信息压缩包或话单信息压缩包后,对业务信息压缩包或话单信息压缩包进行解包处理,将相应的文本文件中的文本信息导入到统计报表系统的数据库表中,并且统计服务器的服务端口接收测量数据信息后,将其转换成数据库插入语,在数据库中执行。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010205875A CN101873226A (zh) | 2010-06-21 | 2010-06-21 | 一种统计报表系统的数据入库方法和装置 |
PCT/CN2011/075681 WO2011160552A1 (zh) | 2010-06-21 | 2011-06-13 | 一种统计报表系统的数据入库方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010205875A CN101873226A (zh) | 2010-06-21 | 2010-06-21 | 一种统计报表系统的数据入库方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101873226A true CN101873226A (zh) | 2010-10-27 |
Family
ID=42997902
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010205875A Pending CN101873226A (zh) | 2010-06-21 | 2010-06-21 | 一种统计报表系统的数据入库方法和装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN101873226A (zh) |
WO (1) | WO2011160552A1 (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011160552A1 (zh) * | 2010-06-21 | 2011-12-29 | 中兴通讯股份有限公司 | 一种统计报表系统的数据入库方法和装置 |
CN102739692A (zh) * | 2011-03-31 | 2012-10-17 | 新奥特(北京)视频技术有限公司 | 一种应用于体育赛事信息系统中的报表上传方法和装置 |
WO2015196812A1 (zh) * | 2014-06-27 | 2015-12-30 | 中兴通讯股份有限公司 | 网络通信系统中动态上报话单的方法及装置 |
CN108182285A (zh) * | 2018-01-29 | 2018-06-19 | 中国平安人寿保险股份有限公司 | 信息处理方法、终端及计算机可读存储介质 |
CN108549659A (zh) * | 2018-03-12 | 2018-09-18 | 中城泰信(苏州)科技发展股份有限公司 | 一种数据仓库管理系统及管理方法 |
CN110222084A (zh) * | 2019-05-06 | 2019-09-10 | 北京奇安信科技有限公司 | 热点设备监控信息的上报方法及装置、存储介质、终端 |
CN110795483A (zh) * | 2019-10-21 | 2020-02-14 | 北京奇艺世纪科技有限公司 | 一种数据统计方法、装置及电子设备 |
WO2022012248A1 (zh) * | 2020-07-13 | 2022-01-20 | 长鑫存储技术有限公司 | 半导体器件测量数据的处理方法、处理系统、计算机设备及计算机可读存储介质 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105701149A (zh) * | 2015-12-31 | 2016-06-22 | 合肥大多数信息科技有限公司 | 一种基于浏览器的单据自动处理方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080285463A1 (en) * | 2007-05-14 | 2008-11-20 | Cisco Technology, Inc. | Tunneling reports for real-time internet protocol media streams |
CN101321262A (zh) * | 2008-07-11 | 2008-12-10 | 中国网络通信集团公司 | 网络电视增值业务系统及实现业务组合的方法 |
CN101477526A (zh) * | 2008-12-31 | 2009-07-08 | 中兴通讯股份有限公司 | 一种实现统计报表定制的方法及系统 |
CN101694661A (zh) * | 2009-10-22 | 2010-04-14 | 中兴通讯股份有限公司 | 一种统计报表生成方法、装置和统计服务器 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101873226A (zh) * | 2010-06-21 | 2010-10-27 | 中兴通讯股份有限公司 | 一种统计报表系统的数据入库方法和装置 |
-
2010
- 2010-06-21 CN CN201010205875A patent/CN101873226A/zh active Pending
-
2011
- 2011-06-13 WO PCT/CN2011/075681 patent/WO2011160552A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080285463A1 (en) * | 2007-05-14 | 2008-11-20 | Cisco Technology, Inc. | Tunneling reports for real-time internet protocol media streams |
CN101321262A (zh) * | 2008-07-11 | 2008-12-10 | 中国网络通信集团公司 | 网络电视增值业务系统及实现业务组合的方法 |
CN101477526A (zh) * | 2008-12-31 | 2009-07-08 | 中兴通讯股份有限公司 | 一种实现统计报表定制的方法及系统 |
CN101694661A (zh) * | 2009-10-22 | 2010-04-14 | 中兴通讯股份有限公司 | 一种统计报表生成方法、装置和统计服务器 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011160552A1 (zh) * | 2010-06-21 | 2011-12-29 | 中兴通讯股份有限公司 | 一种统计报表系统的数据入库方法和装置 |
CN102739692A (zh) * | 2011-03-31 | 2012-10-17 | 新奥特(北京)视频技术有限公司 | 一种应用于体育赛事信息系统中的报表上传方法和装置 |
WO2015196812A1 (zh) * | 2014-06-27 | 2015-12-30 | 中兴通讯股份有限公司 | 网络通信系统中动态上报话单的方法及装置 |
CN105262714A (zh) * | 2014-06-27 | 2016-01-20 | 中兴通讯股份有限公司 | 网络通信系统中动态上报话单的方法及装置 |
CN108182285A (zh) * | 2018-01-29 | 2018-06-19 | 中国平安人寿保险股份有限公司 | 信息处理方法、终端及计算机可读存储介质 |
CN108182285B (zh) * | 2018-01-29 | 2021-03-02 | 中国平安人寿保险股份有限公司 | 信息处理方法、终端及计算机可读存储介质 |
CN108549659A (zh) * | 2018-03-12 | 2018-09-18 | 中城泰信(苏州)科技发展股份有限公司 | 一种数据仓库管理系统及管理方法 |
CN108549659B (zh) * | 2018-03-12 | 2021-08-06 | 中城泰信(苏州)科技发展股份有限公司 | 一种数据仓库管理系统及管理方法 |
CN110222084A (zh) * | 2019-05-06 | 2019-09-10 | 北京奇安信科技有限公司 | 热点设备监控信息的上报方法及装置、存储介质、终端 |
CN110795483A (zh) * | 2019-10-21 | 2020-02-14 | 北京奇艺世纪科技有限公司 | 一种数据统计方法、装置及电子设备 |
WO2022012248A1 (zh) * | 2020-07-13 | 2022-01-20 | 长鑫存储技术有限公司 | 半导体器件测量数据的处理方法、处理系统、计算机设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
WO2011160552A1 (zh) | 2011-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101873226A (zh) | 一种统计报表系统的数据入库方法和装置 | |
CN103379362B (zh) | 视频点播方法和系统 | |
CN107103047B (zh) | 一种查询广告投放异常原因的方法及装置 | |
CN103457907A (zh) | 一种多媒体内容分发方法、设备及系统 | |
CN103209087A (zh) | 分布式日志统计处理方法和系统 | |
CN105025318A (zh) | 一种应用程序的异常日志信息的反馈方法及装置 | |
CN1842152A (zh) | 一种基于电子节目指南信息实现预约录制的方法及系统 | |
CN101980529A (zh) | 支持三网融合的视频服务系统 | |
CN103581764B (zh) | 适于hls视频文件下载存储方法、下载存储系统及播放系统 | |
CN104601370A (zh) | 一种信息处理方法及云端服务器 | |
CN106559681A (zh) | 一种cmmb超级热点平台 | |
CN108900387A (zh) | 一种分流设备动态监控系统 | |
CN102833111A (zh) | 一种可视化http数据监管方法及装置 | |
CN110888985A (zh) | 一种报警信息处理方法、装置、电子设备及存储介质 | |
CN111859127A (zh) | 消费数据的订阅方法、装置及存储介质 | |
CN105260365A (zh) | 终端信息的处理方法和装置 | |
CN103036746B (zh) | 基于网络中间点的网页响应时间被动测量方法及系统 | |
CN102298609B (zh) | 文档收集系统和方法 | |
CN102810093A (zh) | 基于用户信息的云架构paat页面自适应系统及方法 | |
CN107396145B (zh) | 一种打通iptv,ott资源的广告投放方法及广告投放系统 | |
CN103914465A (zh) | 基于用户兴趣图谱实现智能化订制收听音频的系统和方法 | |
CN104281680A (zh) | 用于获取网站资源的数据处理系统、方法及装置 | |
CN108055588A (zh) | 通过二维码实现数字电视用户选购节目及采集数据的方法 | |
CN102833594A (zh) | 一种网络协议电视iptv节目搜索方法、装置及系统 | |
CN105763382A (zh) | 一种基于端到端业务监控的实现方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20101027 |