CN107749875A - 一种大数据人工智能分析系统 - Google Patents

一种大数据人工智能分析系统 Download PDF

Info

Publication number
CN107749875A
CN107749875A CN201710941681.5A CN201710941681A CN107749875A CN 107749875 A CN107749875 A CN 107749875A CN 201710941681 A CN201710941681 A CN 201710941681A CN 107749875 A CN107749875 A CN 107749875A
Authority
CN
China
Prior art keywords
big data
data
server
unit
arranging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710941681.5A
Other languages
English (en)
Other versions
CN107749875B (zh
Inventor
陆川
陈文军
张明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Star Era Aerospace Technology Co Ltd
Original Assignee
四川省电科互联网加产业技术研究院有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 四川省电科互联网加产业技术研究院有限公司 filed Critical 四川省电科互联网加产业技术研究院有限公司
Priority to CN201710941681.5A priority Critical patent/CN107749875B/zh
Publication of CN107749875A publication Critical patent/CN107749875A/zh
Application granted granted Critical
Publication of CN107749875B publication Critical patent/CN107749875B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/565—Conversion or adaptation of application format or content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22—Parsing or analysis of headers

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明涉及一种大数据人工智能分析系统，解决的是实时性差的技术问题，通过采用包括依次并联的计算服务器、系统服务器、业务编排装置及大数据获取机构组合，大数据服务器组合包括多个并联的大数据获取机构；所述业务编排装置包括知识编排单元，与知识编排单元连接的编排执行单元及格式转换单元，所述格式转换单元还与编排执行单元连接，所述知识编排单元还与系统服务器连接；所述计算服务器包括至少2个计算服务器，所述系统服务器与计算服务器数量匹配的技术方案，较好的解决了该问题，可用于大数据智能分析中。

Description

一种大数据人工智能分析系统
技术领域
本发明涉及通信领域，具体涉及一种大数据人工智能分析系统。
背景技术
目前门户网站之间、网络媒体之间同质化非常严重。未来的媒体和门户网站应充分利用大数据和关系链，在为用户筛选、推荐最适合的内容，提供近乎量身打造的新闻资讯的同时，使他们体验社交媒体的感受。从理论到实践，大数据的发展为掌握了大量数据源的媒体和门户网站提供了转型的良好契机。媒体应对大数据时代的另一个挑战是数据加工能力的匮乏。当前大数据建设缺乏专门的数据分析方法、使用体系和高端专业人才，很多媒体没有专门的数据管理和分析部门和专家。如果软件跟不上，却一窝蜂地投身数据平台的搭建，对媒体长远发展不利。
现有的大数据分析系统有设置多个数据中心或计算平台等机构。大数据获取后的数以及相关参数，往往会被多个平台所需要。这些业务系统分布位置不同。另外，业务平台间还可能需要和大数据获取平台实时交互。现有的系统存在实时性差的问题。因此，提供一种高效稳定的大数据分析系统就很有必要。
发明内容
本发明所要解决的技术问题是现有技术中存在的实时性差的技术问题。提供一种新的大数据人工智能分析系统，该大数据人工智能分析系统具有实时高效、部署方便的特点。
为解决上述技术问题，采用的技术方案如下：
一种大数据人工智能分析系统，所述大数据人工智能分析系统包括依次并联的计算服务器、系统服务器、业务编排装置及大数据获取机构组合，大数据服务器组合包括多个并联的大数据获取机构；所述业务编排装置包括知识编排单元，与知识编排单元连接的编排执行单元及格式转换单元，所述格式转换单元还与编排执行单元连接，所述知识编排单元还与系统服务器连接；
所述计算服务器包括至少2个计算服务器，所述系统服务器与计算服务器数量匹配；所述计算服务器存储有大数据以及拥有计算能力；所述系统服务器用于调用系统及拟分析大数据供计算服务器进行计算；所述知识编排单元用于判定是否需要数据业务编排；所述编排执行单元用于根据知识编排单元进行数据业务编排以及判定是否需要数据格式转换；所述格式转换单元用于将编排执行单元传来的数据进行格式转换。
本发明的工作原理：在大数据获取机构侧部署业务编排装置，用于对多个系统服务器的业务流程进行编排。在通信网络中部署知识编排单元，该单元将业务编排的方案进行计算决策之后，将数据转发路径反馈给网络，由网络最终将数据发送给系统服务器主站。在知识编排单元侧，部署格式转换单元，当大数据获取机构的协议及大数据格式同系统服务器的协议及数据格式不一致时，将数据包发给格式转换单元进行格式转换之后再发给网关。在通信网络中，配置大数据获取机构的目的地址为知识编排单元；所有系统服务器的数据转发过程中，配置所有业务数据包转发的下一跳地址为知识编排单元。
上述方案中，为优化，进一步地，所述知识编排单元中存储由数据转发信息表，所述格式转换单元中存储由数据格式转换信息表，所述编排执行单元中存储由业务编排信息表。
进一步地，所述数据业务编排过程包括去掉TCP及IP包头的业务数据内容，添加大数据获取机构协议ID及系统服务器协议ID。
进一步地，所述数据格式转换包括匹配过程标识码与数据格式处理过程，所述过程标识码为匹配大数据获取机构协议ID与系统服务器协议ID的组合。
进一步地，所述一个系统服务器匹配至少2个计算服务器。
本发明的有益效果：
效果一，通过对于协议转换需要的判定，能够提高实时性，克服现有技术不能够兼顾实时性与通信成本的问题；
效果二，当业务发生变更时，不需要对大量终端进行重新配置，可维护性高；
效果三，大数据获取机构可适配多个系统服务器的业务处理协议，与系统服务器进行直接通信，不需要额外增加协议转换装置，这样成本与部署难度都将大大降低；
效果四，系统服务器需要对业务终端下发实时交互指令时，能够将该指令下发给大数据获取机构；
效果五，系统服务器可以获取大数据获取机构的生数据与熟数据。
附图说明
下面结合附图和实施例对本发明进一步说明。
图1，大数据人工智能分析系统示意图。
图2，大数据人工智能分析系统工作流程中大数据传输示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。
实施例1
本实施例提供一种大数据人工智能分析系统，如图1，所述大数据人工智能分析系统包括依次并联的计算服务器、系统服务器、业务编排装置及大数据获取机构组合，大数据服务器组合包括多个并联的大数据获取机构；所述业务编排装置包括知识编排单元，与知识编排单元连接的编排执行单元及格式转换单元，所述格式转换单元还与编排执行单元连接，所述知识编排单元还与系统服务器连接；
所述计算服务器包括至少2个计算服务器，所述系统服务器与计算服务器数量匹配；所述计算服务器存储有大数据以及拥有计算能力；所述系统服务器用于调用系统及拟分析大数据供计算服务器进行计算；所述知识编排单元用于判定是否需要数据业务编排；所述编排执行单元用于根据知识编排单元进行数据业务编排以及判定是否需要数据格式转换；所述格式转换单元用于将编排执行单元传来的数据进行格式转换。
本实施例的工作流程：如图2，系统初始化；大数据获取机构发起上传数据或系统服务器启动下发数据；知识编排单元对大数据获取机构协议类型与系统服务器协议类型进行匹配，成功则直接进行发送，无需进行编排；失败则知识编排单元向编排执行单元发出数据编排请求，业务编排单元重组数据，之后判定格式是否匹配，不匹配则返回给格式转换单元进行格式转换，将格式转换后的数据回发给编排执行单元，发给目的地址。
具体地，所述知识编排单元中存储由数据转发信息表，所述格式转换单元中存储由数据格式转换信息表，所述编排执行单元中存储由业务编排信息表。知识编排单元的判断依据来自数据转发信息表，格式转换单元的格式转换依据格式转换信息表，编排执行单元的编排依据来自业务编排信息表。
详细地，所述数据业务编排过程包括去掉TCP及IP包头的业务数据内容，添加大数据获取机构协议ID及系统服务器协议ID。
详细地，所述数据格式转换包括匹配过程标识码与数据格式处理过程，所述过程标识码为匹配大数据获取机构协议ID与系统服务器协议ID的组合。
具体地，所述一个系统服务器匹配至少2个计算服务器。
尽管上面对本发明说明性的具体实施方式进行了描述，以便于本技术领域的技术人员能够理解本发明，但是本发明不仅限于具体实施方式的范围，对本技术领域的普通技术人员而言，只要各种变化只要在所附的权利要求限定和确定的本发明精神和范围内，一切利用本发明构思的发明创造均在保护之列。

Claims (5)

1.一种大数据人工智能分析系统，其特征在于：所述大数据人工智能分析系统包括依次并联的计算服务器、系统服务器、业务编排装置及大数据获取机构组合，大数据服务器组合包括多个并联的大数据获取机构；所述业务编排装置包括知识编排单元，与知识编排单元连接的编排执行单元及格式转换单元，所述格式转换单元还与编排执行单元连接，所述知识编排单元还与系统服务器连接；
所述计算服务器包括至少2个计算服务器，所述系统服务器与计算服务器数量匹配；
所述计算服务器存储有大数据以及拥有计算能力；
所述系统服务器用于调用系统及拟分析大数据供计算服务器进行计算；
所述知识编排单元用于判定是否需要数据业务编排；
所述编排执行单元用于根据知识编排单元进行数据业务编排以及判定是否需要数据格式转换；
所述格式转换单元用于将编排执行单元传来的数据进行格式转换。
2.根据权利要求1所述的大数据人工智能分析系统，其特征在于：所述知识编排单元中存储由数据转发信息表，所述格式转换单元中存储由数据格式转换信息表，所述编排执行单元中存储由业务编排信息表。
3.根据权利要求1所述的大数据人工智能分析系统，其特征在于：所述数据业务编排过程包括去掉TCP及IP包头的业务数据内容，添加大数据获取机构协议ID及系统服务器协议ID。
4.根据权利要求3所述的大数据人工智能分析系统，其特征在于：所述数据格式转换包括匹配过程标识码与数据格式处理过程，所述过程标识码为匹配大数据获取机构协议ID与系统服务器协议ID的组合。
5.根据权利要求1所述的大数据人工智能分析系统，其特征在于：所述一个系统服务器匹配至少2个计算服务器。
CN201710941681.5A 2017-10-11 2017-10-11 一种大数据人工智能分析系统 Active CN107749875B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710941681.5A CN107749875B (zh) 2017-10-11 2017-10-11 一种大数据人工智能分析系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710941681.5A CN107749875B (zh) 2017-10-11 2017-10-11 一种大数据人工智能分析系统

Publications (2)

Publication Number Publication Date
CN107749875A true CN107749875A (zh) 2018-03-02
CN107749875B CN107749875B (zh) 2021-01-08

Family

ID=61255275

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710941681.5A Active CN107749875B (zh) 2017-10-11 2017-10-11 一种大数据人工智能分析系统

Country Status (1)

Country Link
CN (1) CN107749875B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109639693A (zh) * 2018-12-20 2019-04-16 南方电网科学研究院有限责任公司 一种智能配用电业务编排方法及配用电通信一体化终端

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101729541A (zh) * 2009-11-26 2010-06-09 广东宇天信通通信科技有限公司 多业务平台的资源访问方法及系统
CN103338206A (zh) * 2013-07-10 2013-10-02 中兴智能交通（无锡）有限公司 一种基于数据总线技术实现数据交换的方法及装置
JP2014010703A (ja) * 2012-06-29 2014-01-20 International Business Maschines Corporation 情報処理システムの連携を支援するシステム、装置および連携方法
CN104156832A (zh) * 2014-08-28 2014-11-19 国家电网公司 系统间数据核对方法及装置
CN104901919A (zh) * 2014-03-03 2015-09-09 中辉世纪传媒发展有限公司 一种适应于不同终端接入的方法及装置
CN105631012A (zh) * 2015-12-29 2016-06-01 湖北睛彩视讯科技有限公司 一种新媒体大数据智能分析系统
CN105657053A (zh) * 2016-03-04 2016-06-08 浪潮软件集团有限公司 基于soa架构的数据集成交换平台
CN106160757A (zh) * 2016-07-25 2016-11-23 深圳博科智能科技有限公司 一种扩大蓝牙控制范围的方法及蓝牙中继网关
CN106331024A (zh) * 2015-06-30 2017-01-11 中兴通讯股份有限公司 访问云数据的方法及装置
CN106920204A (zh) * 2017-03-20 2017-07-04 泰华智慧产业集团股份有限公司 接口服务的发布方法及系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101729541A (zh) * 2009-11-26 2010-06-09 广东宇天信通通信科技有限公司 多业务平台的资源访问方法及系统
JP2014010703A (ja) * 2012-06-29 2014-01-20 International Business Maschines Corporation 情報処理システムの連携を支援するシステム、装置および連携方法
CN103338206A (zh) * 2013-07-10 2013-10-02 中兴智能交通（无锡）有限公司 一种基于数据总线技术实现数据交换的方法及装置
CN104901919A (zh) * 2014-03-03 2015-09-09 中辉世纪传媒发展有限公司 一种适应于不同终端接入的方法及装置
CN104156832A (zh) * 2014-08-28 2014-11-19 国家电网公司 系统间数据核对方法及装置
CN106331024A (zh) * 2015-06-30 2017-01-11 中兴通讯股份有限公司 访问云数据的方法及装置
CN105631012A (zh) * 2015-12-29 2016-06-01 湖北睛彩视讯科技有限公司 一种新媒体大数据智能分析系统
CN105657053A (zh) * 2016-03-04 2016-06-08 浪潮软件集团有限公司 基于soa架构的数据集成交换平台
CN106160757A (zh) * 2016-07-25 2016-11-23 深圳博科智能科技有限公司 一种扩大蓝牙控制范围的方法及蓝牙中继网关
CN106920204A (zh) * 2017-03-20 2017-07-04 泰华智慧产业集团股份有限公司 接口服务的发布方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109639693A (zh) * 2018-12-20 2019-04-16 南方电网科学研究院有限责任公司 一种智能配用电业务编排方法及配用电通信一体化终端
CN109639693B (zh) * 2018-12-20 2022-02-15 南方电网科学研究院有限责任公司 一种智能配用电业务编排方法及配用电通信一体化终端

Also Published As

Publication number Publication date
CN107749875B (zh) 2021-01-08

Similar Documents

Publication Publication Date Title
CN103795596B (zh) 可编程控制的sdn网络测量系统和测量方法
CN104951524B (zh) 一种用于数据库运维的移动平台及其使用方法
CN105989539B (zh) 一种金融交易行情获取系统以及获取方法
CN103761309B (zh) 一种运营数据处理方法及系统
CN103516802B (zh) 一种实现跨异构虚拟交换机无缝迁移的方法和装置
CN108769121A (zh) 智能工业装备物联网数据采集系统及采集数据的上传方法
CN108183770A (zh) 一种无人机自动飞行许可管理方法
CN102369690A (zh) 网络流量的分析
CN106295985A (zh) 一种台区线损管理系统及管理方法
CN101447892A (zh) 分布式测试方法和系统、以及测试服务器
CN106302027A (zh) 一种sdn控制器性能测试仪及测试方法
CN110769032A (zh) 一种电网设备故障快速检测与维护的系统及方法
CN102387028A (zh) 网络系统、管理服务器及oam试验管理方法
CN109151025A (zh) 基于url的负载均衡方法、装置、计算机存储介质及设备
CN107078935A (zh) 网络即服务业务跨域协同方法、协同设备和控制设备
CN108566369A (zh) 基于工业大数据的数据采集系统及方法
CN108566390A (zh) 一种卫星应用层安全协议的实现方法及卫星消息监听与分发服务系统
CN107749875A (zh) 一种大数据人工智能分析系统
CN104601418B (zh) 多个一户一vlan捆绑认证机制出口下多网融合传输系统
CN104317868B (zh) 一种基于单前置多scada应用的调控一体化方法
CN205986955U (zh) 智慧城市物联网云数据对接管理装置
CN103560937B (zh) 数据访问方法和入口服务器
CN106330511A (zh) 网元设备及数据通信网络开通的方法
CN110535840A (zh) 数据传输方法、装置以及存储介质
CN109861872A (zh) 一种提升业务质量的配电通信网架构

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20180828

Address after: 610000 (Sichuan) free trade pilot area, Chengdu high tech Zone, 200 floor 3, 200 Tianfu five street.

Applicant after: Chengdu star era Aerospace Technology Co., Ltd.

Address before: 610015 Shuangliu District, Chengdu, Sichuan. Shuangxing Road, Gong Xing street, Southwest Airport Economic Development Zone, Shuangliu District

Applicant before: Sichuan Dianke Internet Technology Research Institute and Industry Co. Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant