CN108241648A - 一种数据处理方法及装置 - Google Patents

一种数据处理方法及装置 Download PDF

Info

Publication number
CN108241648A
CN108241648A CN201611209044.0A CN201611209044A CN108241648A CN 108241648 A CN108241648 A CN 108241648A CN 201611209044 A CN201611209044 A CN 201611209044A CN 108241648 A CN108241648 A CN 108241648A
Authority
CN
China
Prior art keywords
data
trade center
interconnection
largest
center cell
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611209044.0A
Other languages
English (en)
Inventor
王东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201611209044.0A priority Critical patent/CN108241648A/zh
Priority to PCT/CN2017/118113 priority patent/WO2018113789A1/zh
Publication of CN108241648A publication Critical patent/CN108241648A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/14Details of searching files based on file metadata
    • G06F16/148File search processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例公开了一种数据处理方法,应用于第一大数据交易中心单元,包括:接收来自大数据需求方单元的第一数据请求消息,其中,第一数据请求消息用于请求下发第一属性的数据,第一大数据交易中心单元为大数据需求方单元的签约服务器;响应第一数据请求消息,在本地查找是否存在第一属性的数据;如果不存在,则向与自身互联的第二大数据交易中心单元发送第二数据请求消息,其中,第二数据请求消息用于请求返回第一属性的数据;接收来自第二大数据交易中心单元的第一属性的数据,并将第一属性的数据发送给大数据需求方单元。本发明实施例同时公开了一种数据处理装置。

Description

一种数据处理方法及装置
技术领域
本发明涉及数据处理领域,尤其涉及一种数据处理方法及装置。
背景技术
目前大数据成为当前业界的技术热点,特别是随着云计算业务的部署,大数据作为其最重要的业务应用,被寄予厚望。
大数据的主要特点是体量(Volume)大、种类(Variety)多、速度(Velocity)快以及价值(Value)高等特点,并同时伴随着多源、异构以及海量的数据特征。大数据所涉及的数据类型包括结构化(Structured)、半结构化(Semi-Structured)以及非结构化(Un-Structured)等类型。大数据所涉及的数据对象包括文字、语音、视频、图像、网页、传感器数据等,相应地,这也就要求大数据交易系统可以有针对性地区分和处理不同数据对象所对应的数据承载格式,比如:文本文件、音频文件、适配文件、图像文件、网页文件、传感器数据文件以及相应的实时/准实时流媒体数据等不同格式。
尽管目前大数据正在逐步应用于各个行业,但是随着数据体量的逐步增加,所涉及数据种类的日益繁杂,所生成速度的迅速提升以及对于交叉领域对于数据融合及其潜在价值利用的巨大需求,对数据开放、数据共享,特别是通过数据交易的手段所实现的数据交换的需求越来越大。而在现阶段,产业内所建设的数据交易中心还都处于各自独立的阶段,彼此间无法互联互通,而如果数据需求方需要获取分属于各个数据交易中心签约的数据提供商所能提供的数据,则需要分别和各个数据交易中心以及各个数据提供商签署商业合同,并需要配置多个不同的数据交易软件,甚至使用不同的数据交易协议,方能从多个数据交易中心获取所需数据提供商的数据,这样,一方面不便于数据需求方及时有效地获取目标交易数据(需要遍历所有数据交易中心才能查询到满足需求的最佳目标交易数据),另一方面更加浪费了数据需求方的资源(包括人力资源、软件资源、计算资源和存储资源等),更重要的是,各自彼此独立的数据交易中心所拥有的大体量的、种类繁多的、高速变化的大数据无法发挥出通过数据聚合所能体现出的巨大价值,极大地浪费了数据资源。
发明内容
有鉴于此,本发明实施例期望提供一种数据处理方法及装置,从而实现大数据交易中心的开放性、互联性以及共享性。
为达到上述目的,本发明的技术方案是这样实现的:
第一方面,本发明实施例提供一种数据处理方法,应用于第一大数据交易中心单元,包括:接收来自大数据需求方单元的第一数据请求消息,其中,所述第一数据请求消息用于请求下发第一属性的数据,所述第一大数据交易中心单元为所述大数据需求方单元的签约服务器;响应所述第一数据请求消息,在本地查找是否存在所述第一属性的数据;如果不存在,则向与自身互联的第二大数据交易中心单元发送第二数据请求消息,其中,所述第二数据请求消息用于请求返回所述第一属性的数据;接收来自所述第二大数据交易中心单元的所述第一属性的数据,并将所述第一属性的数据发送给所述大数据需求方单元。
第二方面,本发明实施例提供一种数据处理装置,包括:互联数据交易模块以及互联数据模块,其中,所述互联数据交易模块,用于接收来自大数据需求方单元的第一数据请求消息,其中,所述第一数据请求消息用于请求下发第一属性的数据,所述第一大数据交易中心单元为所述大数据需求方单元的签约服务器;还用于将所述第一属性的数据发送给所述大数据需求方单元;所述互联数据模块,用于响应所述第一数据请求消息,在本地查找是否存在所述第一属性的数据;如果不存在,则通过互联数据接口向与自身互联的第二大数据交易中心单元发送第二数据请求消息,其中,所述第二数据请求消息用于请求返回所述第一属性的数据;通过所述互联数据接口接收来自所述第二大数据交易中心单元的所述第一属性的数据。
本发明实施例提供了一种数据处理方法及装置,在大数据交易中心单元接收到来自大数据需求方单元的数据请求后,可以在本地不存在大数据需求方单元所需的目标数据时,通过互联的其他大数据交易中心单元来获取该目标数据,并将接收该目标数据发送给大数据需求方单元。这样,实现了各个大数据交易中心单元的数据资源的整合共享,提高了数据的利用率,从而,大数据需求方单元就能够及时有效地获取目标数据,而不需要遍历所有的数据交易中心单元才能查询到满足需求的目标数据。进而,降低了用户的资源浪费,节省了用户时间,提高了用户体验。
附图说明
图1-1为本发明实施例中的大数据交易中心互联系统的结构示意图;
图1-2为本发明实施例中的大数据交易中心互联单元的结构示意图;
图1-3为本发明实施例中的大数据交易中心互联单元的连接示意图;
图2-1为本发明实施例中的数据处理方法的第一种流程示意图;
图2-2为本发明实施例中的数据处理方法的第二种流程示意图
图3为本发明实施例中的数据处理装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
图1-1为本发明实施例中的大数据交易中心互联系统的结构示意图,参见图1-1所示,该大数据交易中心互联系统100可以包括:大数据供应方单元101,大数据交易中心互联单元102以及大数据需求方单元103。
这里,大数据交易中心互联单元由互联的至少两个大数据交易中心单元组成,例如,仍然参见图1-1所示,大数据交易中心互联单元102可以包含大数据交易中心单元102a、大数据交易中心单元102b和大数据交易中心单元102c。
其中,大数据供应方单元,用于采集数据源的数据并将该数据导入给大数据交易中心互联单元;大数据交易中心互联单元,用于导入来自大数据供方单元的数据,并根据大数据交易中心单元的请求导出相应的数据给大数据需求方单元;大数据需求方单元,用于接收来自于大数据交易中心互联单元的数据。
在具体实施过程中,大数据交易中心互联单元中的每一个大数据交易中心单元都可以包括:互联数据交易模块、互联数据模块、互联控制模块、互联安全模块以及互联管理模块。在实际应用中,互联数据交易模块用于实现大数据交易中心互联单元与大数据需求方单元之间的数据交易,可以向大数据需求方单元发送所需要的目标数据;互联数据模块用于实现各个大数据交易中心单元之间的数据整合、共享、处理、存储、分发等;互联控制模块用于控制各个大数据交易中心单元之间的互联连接的建立和断开;互联安全模块用于在各个大数据交易中心单元进行互联连接时,进行安全认证、访问控制、数据版权管理认证等,以保证大数据交易中心单元之间彼此互联的安全,以实现数据共享之间的安全保护;互联管理模块用于实现各个大数据交易中心单元之间的互联的管理和维护,还可以在互联连接的基础上实现数据连接、监管连接、安全连接、交易连接等功能的管理。
示例性地,图1-2为本发明实施例中的大数据交易中心互联单元的结构示意图,参见图1-2所示,大数据交易中心互联单元包含3个大数据交易中心单元,大数据交易中心单元102a包括:互联数据交易模块1021a、互联数据模块1022a、互联控制模块1023a、互联安全模块1024a、互联管理模块1025a以及互联信息监管模块1026a;大数据交易中心单元102b包括:互联数据交易模块1021b、互联数据模块1022b、互联控制模块1023b、互联安全模块1024b、互联管理模块1025b以及互联信息监管模块1026b;大数据交易中心单元102c包括:互联数据交易模块1021c、互联数据模块1022c、互联控制模块1023c、互联安全模块1024c、互联管理模块1025c以及互联信息监管模块1026c。
在实际应用中,结合图1-2及图1-3所示,大数据交易中心互联单元102还包括互联数据交易接口1041、互联数据接口1042、互联控制接口1043、互联安全接口1044、互联管理接口1045以及互联信息监管接口1046。互联数据交易接口用于将各个互联数据交易模块彼此之间以及其与大数据需求方单元连接;互联数据接口用于连接各个互联数据模块;互联控制接口用于连接各个互联控制模块;互联安全接口用于连接各个互联安全模块;互联管理接口用于连接各个互联管理模块。
下面结合上述系统,对本发明实施例的数据处理方法进行说明。
图2-1为本发明实施例中的数据处理方法的第一种流程示意图,参见图2-1所示,该方法包括:
S201:大数据需求方单元向第一大数据交易中心单元发送第一数据请求消息;
其中,第一数据请求消息用于请求下发第一属性的数据,第一大数据交易中心单元为数据需求方的签约服务器。
这里,大数据需求方单元向自身签约的大数据交易中心单元请求数据服务,以获得第一属性的数据,比如,后缀为.doc格式的文本文件、GIF格式的图片、MP3格式的音频文件等,以实际大数据需求方单元的需求为准,本发明实施例不做具体限定。
S202:第一大数据交易中心单元响应第一数据请求消息,在本地查找是否存在第一属性的数据;
这里,第一大数据交易中心单元在接收到第一数据请求消息后,就会在本地中查找第一属性的数据,如果确定在本地存在第一属性的数据,就可以向大数据需求方单元发送该第一属性的数据,但是,如果确定在本地并不存在该第一属性的数据,就可以向其他互联的大数据交易中心单元请求该第一属性的数据。
S203:如果不存在,则第一大数据交易中心单元向与自身互联的第二大数据交易中心单元发送第二数据请求消息;
其中,第二数据请求消息用于请求返回第一属性的数据。
在本发明其它实施例中,S203可以包括:第一大数据交易中心单元根据预先存储的数据业务目录,确定第一属性的数据对应的第二大数据交易中心单元;向第二大数据交易中心单元发送第二数据请求消息。
这里,在每一个大数据交易中心单元中均存储有与自身互联的各个大数据交易中心单元的数据业务目录。通过该数据业务目录,第一大数据交易中心单元就能够确定在哪个大数据交易中心单元中存储有第一属性的数据,进而将第二数据请求发送给该大数据交易中心单元,即第二大数据交易中心单元。
那么,在本发明其它实施例中,在第一大数据交易中心单元接收来自数据需求方的第一数据请求消息之后,该数据处理方法还包括:第一大数据交易中心单元向第二大数据交易中心单元发送自身的数据业务目录,并接收来自第二大数据交易中心单元的数据业务目录;保存第二大数据交易中心单元的数据业务目录。
S204:第二大数据交易中心单元向第一大数据交易中心单元发送第一属性的数据;
这里,第二大数据交易中心单元在接收到第二数据请求消息后,就会从本地获取第一属性的数据,并将该第一属性的数据发送给第一大数据交易中心单元。
S205:第一大数据交易中心单元将第一属性的数据发送给大数据需求方单元。
这里,第一大数据交易中心单元在接收到第一属性的数据后,就可以将该第一属性的数据发送给大数据需求方单元。
在本发明其它实施例中,为了实现各个大数据交易中心单元之间的数据资源整合共享,各个大数据交易中心单元之间还需要建立互联连接,那么,在S201之前,上述方法还可以包括:根据预设的互联策略,第一大数据交易中心单元与第二大数据交易中心单元建立互联连接。
这里,第一大数据交易中心单元可以根据管理员的配置与第二大数据交易中心单元建立互联连接,当然,一个大数据交易中心单元可以与至少一个其它大数据交易中心单元建立互联连接。
在具体实施过程中,第一大数据交易中心单元可以通过主动方式来与其它大数据交易中心单元建立互联连接,也可以通过被动方式来与其它大数据交易中心单元建立互联连接,这里,本发明实施例不做具体限定。
图2-2为本发明实施例中的数据处理方法的第二种流程示意图,参见图2-2所示,下面分别详细说明第一大数据交易中心单元如何采用主动方式和被动方式来建立互联。
首先,详细说明第一大数据交易中心单元用主动方式建立互联的过程。
第一大数据交易中心单元可以主动发起与第二大数据交易中心单元建立互联。那么,上述方法还可以包括:第一大数据交易中心单元根据互联策略向第二大数据交易中心单元发送第二互联请求消息,其中,第二互联请求消息中携带有自身的身份标识,该身份标识用于指示第二大数据交易中心单元进行身份认证和访问控制;然后,接收来自第二大数据交易中心单元的第二互联响应消息,其中,第二互联响应消息用于通知已与第二大数据交易中心单元建立互联关系。
其次,详细说明第一大数据交易中心单元用被动方式建立互联的过程。
第一大数据交易中心单元可以侦听由第二大数据交易中心单元根据预设的互联策略发送的第一互联请求消息,其中,第一互联请求消息中会携带有第二大数据交易中心单元的身份标识;然后,根据身份信息,对第二大数据交易中心单元进行身份认证;如果认证通过,则对第二大数据交易中心单元进行访问控制;如果第二服务器被授予交叉访问控制权,则向第二大数据交易中心单元发送第一互联响应消息,第一互联响应消息用于通知已与第二大数据交易中心单元建立互联关系。
在实际应用中,为了保证数据共享的安全性,在各个大数据交易中心单元建立互联时,可以通过约定的身份标识来进行身份认证,也可以通过口令校验进行身份认证,当然,还可以采用其他方式的安全认证,这里,本发明实施例不做具体限定。
在具体实施过程中,为了实现大数据的数据聚合、数据交易、互联监管、或互联管理等功能,第一大数据交易中心单元还可以与第二大数据交易中心单元建立控制连接、安全连接、管理连接、监管连接、数据连接以及交易连接中的一种或多种组合。
进一步地,第一大数据交易中心单元在接收到来自第二大数据交易中心单元的第一属性的数据后,上述方法还可以包括:第一大数据交易中心单元向第二大数据交易中心单元发送退出消息,并在确认数据交易完成之后,断开与第二大数据交易中心单元之间的互联连接。
具体地,在数据请求较少时,为了节省系统资源,在大数据交易中心单元从其他大数据交易中心单元获得了所需的目标数据之后,可以先向其他大数据交易中心单元发送一个退出消息,通知其他大数据交易中心单元它已经接收到所需的数据,并且即将与其他大数据交易中心单元断开互联。当然,为了保证数据交易的完整性,还需要在断开连接之前,先确认当前数据交易是否完成,如在合作到期之前的正常交易不能中断,确认是否有合作到期之后的交易仍被发起,合作方缓存的数据的清除,交易相关所有权益各方用户的通知等。这样,就可以在确定当前数据交易完成后,与其他大数据交易中心单元断开互联。直至下次接收到数据交易请求或者互联请求后,再进行连接。
在实际应用中,在确定大数据交易中心互联系统中的所有大数据交易中心单元的互联连接都断开后,还可以进行相关的释放系统资源的工作,如清除相关缓存数据、拆除连接链路等,由本领域技术人员在具体实施过程中来确定。
由上述内容可知,在本发明其它实施例中,由于大数据交易中心互联系统将各个大数据交易中心单元进行了互联连接,实现了对各个大数据交易中心单元的数据进行整合,从而,大数据需求方单元就可以从大数据交易中心互联系统中的多个大数据交易中心单元获取所需数据。这样,通过本发明实施例所提供的数据处理方法,可以实现大数据交易中心单元的开放性、互联性以及共享性,提高了数据的利用率,从而,用户就能够及时有效地获取目标数据,而不需要遍历所有的大数据交易中心单元才能查询到满足需求的目标数据。进而,降低了用户的资源浪费,节省了用户时间,提高了用户体验。
基于同一发明构思,本发明实施例还提供一种数据处理装置,与上述一个或者多个实施例中的大数据交易中心单元一致。
图3为本发明实施例中的数据处理装置的结构示意图,参见图3所示,该数据处理装置30包括:互联数据交易模块301以及互联数据模块302,其中,互联数据交易模块301,用于接收来自大数据需求方单元的第一数据请求消息,其中,第一数据请求消息用于请求下发第一属性的数据,第一大数据交易中心单元为大数据需求方单元的签约服务器;还用于将第一属性的数据发送给大数据需求方单元;互联数据模块302,用于响应第一数据请求消息,在本地查找是否存在第一属性的数据;如果不存在,则通过互联数据接口向与自身互联的第二大数据交易中心单元发送第二数据请求消息,其中,第二数据请求消息用于请求返回第一属性的数据;通过互联数据接口接收来自第二大数据交易中心单元的第一属性的数据。
进一步地,互联数据模块,还用于根据预先存储的数据业务目录,确定第一属性的数据对应的第二大数据交易中心单元;通过互联数据连接接口向第二大数据交易中心单元发送第二数据请求消息。
进一步地,互联数据模块,还用于通过互联数据接口向第二大数据交易中心单元发送自身的数据业务目录,并通过互联数据接口接收来自第二大数据交易中心单元的数据业务目录;保存第二大数据交易中心单元的数据业务目录。
进一步地,上述数据处理装置还包括:互联控制模块,用于根据预设的互联策略,通过互联控制接口与第二大数据交易中心单元建立互联连接。
进一步地,互联控制模块,还用于侦听由第二大数据交易中心单元根据互联策略发送的第一互联请求消息,其中,第一互联请求消息中携带有第二大数据交易中心单元的身份标识;上述数据处理装置还包括:互联安全模块,用于根据身份标识,对第二大数据交易中心单元进行身份认证;如果认证通过,则对第二大数据交易中心单元进行访问控制;如果第二服务器被授予交叉访问控制权,则向第二大数据交易中心单元发送第一互联响应消息,其中,第一互联响应消息用于通知已与第二大数据交易中心单元建立互联关系。
进一步地,互联控制模块,还用于根据互联策略,通过互联控制接口向第二大数据交易中心单元发送第二互联请求消息,其中,第二互联请求消息中携带有自身的身份标识,身份标识用于指示第二大数据交易中心单元进行身份认证和访问控制;通过互联控制接口接收来自第二大数据交易中心单元的第二互联响应消息,其中,第二互联响应消息用于通知已与第二大数据交易中心单元建立互联关系。
进一步地,上述数据处理装置还包括:互联管理模块,用于通过互联管理接口与第二大数据交易中心单元建立控制连接、安全连接、管理连接、监管连接、数据连接以及交易连接中的一种或多种组合。
进一步地,互联控制模块,用于通过互联控制接口向第二大数据交易中心单元发送退出消息,并在确认数据交易完成之后,断开与第二大数据交易中心单元之间的互连连接。
需要说明的是:以上装置实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果,因此不做赘述。对于本发明装置实施例中未披露的技术细节,请参照本发明方法实施例的描述而理解,为节约篇幅,因此不再赘述。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解,在本发明的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其它变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其它要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元;既可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(Read Only Memory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (16)

1.一种数据处理方法,应用于第一大数据交易中心单元,其特征在于,包括:
接收来自大数据需求方单元的第一数据请求消息,其中,所述第一数据请求消息用于请求下发第一属性的数据,所述第一大数据交易中心单元为所述大数据需求方单元的签约服务器;
响应所述第一数据请求消息,在本地查找是否存在所述第一属性的数据;
如果不存在,则向与自身互联的第二大数据交易中心单元发送第二数据请求消息,其中,所述第二数据请求消息用于请求返回所述第一属性的数据;
接收来自所述第二大数据交易中心单元的所述第一属性的数据,并将所述第一属性的数据发送给所述大数据需求方单元。
2.根据权利要求1所述的方法,其特征在于,所述向与自身互联的第二大数据交易中心单元发送第二数据请求消息,包括:
根据预先存储的数据业务目录,确定所述第一属性的数据对应的所述第二大数据交易中心单元;
向所述第二大数据交易中心单元发送所述第二数据请求消息。
3.根据权利要求1所述的方法,其特征在于,在所述向与自身互联的第二大数据交易中心单元发送第二数据请求消息之前,所述方法还包括:
向所述第二大数据交易中心单元发送自身的数据业务目录,并接收来自所述第二大数据交易中心单元的数据业务目录;
保存所述第二大数据交易中心单元的数据业务目录。
4.根据权利要求1所述的方法,其特征在于,在所述接收来自大数据需求方单元的第一数据请求之前,所述方法还包括:
根据预设的互联策略,与所述第二大数据交易中心单元建立互联连接。
5.根据权利要求4所述的方法,其特征在于,所述根据预设的互联策略,与所述第二大数据交易中心单元建立互联连接,包括:
侦听由所述第二大数据交易中心单元根据所述互联策略发送的第一互联请求消息,其中,所述第一互联请求消息中携带有所述第二大数据交易中心单元的身份标识;
根据所述身份标识,对所述第二大数据交易中心单元进行身份认证;
如果认证通过,则对所述第二大数据交易中心单元进行访问控制;
如果所述第二服务器被授予交叉访问控制权,则向所述第二大数据交易中心单元发送第一互联响应消息,其中,所述第一互联响应消息用于通知已与所述第二大数据交易中心单元建立互联关系。
6.根据权利要求4所述的方法,其特征在于,所述根据预设的互联策略,与所述第二大数据交易中心单元建立互联连接,包括:
根据所述互联策略向所述第二大数据交易中心单元发送第二互联请求消息,其中,所述第二互联请求消息中携带有自身的身份标识,所述身份标识用于指示所述第二大数据交易中心单元进行身份认证和访问控制;
接收来自所述第二大数据交易中心单元的第二互联响应消息,其中,所述第二互联响应消息用于通知已与所述第二大数据交易中心单元建立互联关系。
7.根据权利要求1所述的方法,其特征在于,在所述接收来自大数据需求方单元的第一数据请求消息之后,所述方法还包括:
与所述第二大数据交易中心单元建立控制连接、安全连接、管理连接、监管连接、数据连接以及交易连接中的一种或多种组合。
8.根据权利要求1所述的方法,其特征在于,所述接收来自所述第二大数据交易中心单元的所述第一属性的数据之后,所述方法还包括:
向所述第二大数据交易中心单元发送退出消息,并在确认数据交易完成之后,断开与所述第二大数据交易中心单元之间的互联连接。
9.一种数据处理装置,其特征在于,所述装置包括:互联数据交易模块以及互联数据模块,其中,
所述互联数据交易模块,用于接收来自大数据需求方单元的第一数据请求消息,其中,所述第一数据请求消息用于请求下发第一属性的数据,所述第一大数据交易中心单元为所述大数据需求方单元的签约服务器;还用于将所述第一属性的数据发送给所述大数据需求方单元;
所述互联数据模块,用于响应所述第一数据请求消息,在本地查找是否存在所述第一属性的数据;如果不存在,则通过互联数据接口向与自身互联的第二大数据交易中心单元发送第二数据请求消息,其中,所述第二数据请求消息用于请求返回所述第一属性的数据;通过所述互联数据接口接收来自所述第二大数据交易中心单元的所述第一属性的数据。
10.根据权利要求9所述的装置,其特征在于,所述互联数据模块,还用于根据预先存储的数据业务目录,确定所述第一属性的数据对应的所述第二大数据交易中心单元;通过所述互联数据连接接口向所述第二大数据交易中心单元发送所述第二数据请求消息。
11.根据权利要求9所述的装置,其特征在于,所述互联数据模块,还用于通过所述互联数据接口向所述第二大数据交易中心单元发送自身的数据业务目录,并通过所述互联数据接口接收来自所述第二大数据交易中心单元的数据业务目录;保存所述第二大数据交易中心单元的数据业务目录。
12.根据权利要求9所述的装置,其特征在于,所述装置还包括:互联控制模块,用于根据预设的互联策略,通过互联控制接口与所述第二大数据交易中心单元建立互联连接。
13.根据权利要求12所述的装置,其特征在于,所述互联控制模块,还用于侦听由所述第二大数据交易中心单元根据所述互联策略发送的第一互联请求消息,其中,所述第一互联请求消息中携带有所述第二大数据交易中心单元的身份标识;
所述装置还包括:互联安全模块,用于根据所述身份标识,对所述第二大数据交易中心单元进行身份认证;如果认证通过,则对所述第二大数据交易中心单元进行访问控制;如果所述第二服务器被授予交叉访问控制权,则向所述第二大数据交易中心单元发送第一互联响应消息,其中,所述第一互联响应消息用于通知已与所述第二大数据交易中心单元建立互联关系。
14.根据权利要求12所述的装置,其特征在于,所述互联控制模块,还用于根据所述互联策略,通过所述互联控制接口向所述第二大数据交易中心单元发送第二互联请求消息,其中,所述第二互联请求消息中携带有自身的身份标识,所述身份标识用于指示所述第二大数据交易中心单元进行身份认证和访问控制;通过所述互联控制接口接收来自所述第二大数据交易中心单元的第二互联响应消息,其中,所述第二互联响应消息用于通知已与所述第二大数据交易中心单元建立互联关系。
15.根据权利要求9所述的装置,其特征在于,所述装置还包括:互联管理模块,用于通过互联管理接口与所述第二大数据交易中心单元建立控制连接、安全连接、管理连接、监管连接、数据连接以及交易连接中的一种或多种组合。
16.根据权利要求9所述的装置,其特征在于,所述互联控制模块,用于通过所述互联控制接口向所述第二大数据交易中心单元发送退出消息,并在确认数据交易完成之后,断开与所述第二大数据交易中心单元之间的互连连接。
CN201611209044.0A 2016-12-23 2016-12-23 一种数据处理方法及装置 Pending CN108241648A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201611209044.0A CN108241648A (zh) 2016-12-23 2016-12-23 一种数据处理方法及装置
PCT/CN2017/118113 WO2018113789A1 (zh) 2016-12-23 2017-12-22 一种数据处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611209044.0A CN108241648A (zh) 2016-12-23 2016-12-23 一种数据处理方法及装置

Publications (1)

Publication Number Publication Date
CN108241648A true CN108241648A (zh) 2018-07-03

Family

ID=62624678

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611209044.0A Pending CN108241648A (zh) 2016-12-23 2016-12-23 一种数据处理方法及装置

Country Status (2)

Country Link
CN (1) CN108241648A (zh)
WO (1) WO2018113789A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110298753A (zh) * 2019-06-06 2019-10-01 上海数据交易中心有限公司 数据交易系统及方法、可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101222424A (zh) * 2007-12-24 2008-07-16 中国电信股份有限公司 内容分发网络和该网络中基于内容的调度方法
US20110125873A1 (en) * 2009-11-24 2011-05-26 Verizon Patent And Licensing, Inc. System and method for providing sensor overlay networks
CN101764839B (zh) * 2009-12-23 2013-01-23 成都市华为赛门铁克科技有限公司 一种数据访问方法以及统一资源定位符服务器
CN103368617A (zh) * 2013-06-28 2013-10-23 东莞宇龙通信科技有限公司 智能设备交互系统和智能设备交互方法
CN104092647A (zh) * 2013-11-25 2014-10-08 腾讯科技(深圳)有限公司 网络访问方法、系统及客户端

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101697168B (zh) * 2009-10-22 2011-10-19 中国科学技术大学 一种分布式文件系统动态元数据管理方法及系统
CN103503400B (zh) * 2011-11-04 2017-04-12 华为技术有限公司 重定向的方法、装置和系统
CN103368966B (zh) * 2013-07-18 2016-08-17 北京网鼎芯睿科技有限公司 服务器系统和数据流的传输方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101222424A (zh) * 2007-12-24 2008-07-16 中国电信股份有限公司 内容分发网络和该网络中基于内容的调度方法
US20110125873A1 (en) * 2009-11-24 2011-05-26 Verizon Patent And Licensing, Inc. System and method for providing sensor overlay networks
CN101764839B (zh) * 2009-12-23 2013-01-23 成都市华为赛门铁克科技有限公司 一种数据访问方法以及统一资源定位符服务器
CN103368617A (zh) * 2013-06-28 2013-10-23 东莞宇龙通信科技有限公司 智能设备交互系统和智能设备交互方法
CN104092647A (zh) * 2013-11-25 2014-10-08 腾讯科技(深圳)有限公司 网络访问方法、系统及客户端

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110298753A (zh) * 2019-06-06 2019-10-01 上海数据交易中心有限公司 数据交易系统及方法、可读存储介质

Also Published As

Publication number Publication date
WO2018113789A1 (zh) 2018-06-28

Similar Documents

Publication Publication Date Title
CN102882758B (zh) 虚拟私云接入网络的方法、网络侧设备和数据中心设备
Mahmood et al. Fog computing: Concepts, principles and related paradigms
CN108418782A (zh) 经代理安全会话的粒度卸载
CN103535004B (zh) 用于促进匿名音频和视频通信的方法和基于web的系统
CN104145451B (zh) 报文处理方法、深度包检测请求网元和深度包检测设备
US20100043050A1 (en) Federating policies from multiple policy providers
Zhang et al. A survey of computational offloading in mobile cloud computing
CN102845123A (zh) 虚拟私云的连接方法及隧道代理服务器
CN104221333A (zh) 用于促进多个网络中的通信会话的系统和方法
Schmitt et al. Data exchange with the MQTT protocol: Dynamic bridge approach
EP3096492B1 (en) Page push method and system
Kyryk et al. Load balancing method in edge computing
CN108241648A (zh) 一种数据处理方法及装置
EP3155772B1 (en) A new instant messaging(im) routing method and router
CN102857509A (zh) 一种具备病毒防护功能的云计算系统
WO2013097636A1 (en) Establishing dynamic connection
CN111914272A (zh) 一种移动边缘计算环境下起源数据的加密检索方法与系统
CN103401751A (zh) 因特网安全协议隧道建立方法和装置
Sayler et al. Jobber: Automating {Inter-Tenant} Trust in the Cloud
CN103841221A (zh) 策略执行方法、系统、策略执行设备及控制设备
CN103618790A (zh) 一种获取api服务的方法及系统
Kumari et al. A secure fog computing architecture for ioT based smart manufacturing system
Chen Systematic review of applying service oriented architecture in networking
JP2014519672A (ja) クラウドベースのid管理(c−idm)を実装するための方法および仮想idmサーバー
CN106649298A (zh) 一种基于物联网跨领域建立关联的方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination