CN109327487B - 大数据传输方法、设备及可读存储介质 - Google Patents

大数据传输方法、设备及可读存储介质 Download PDF

Info

Publication number
CN109327487B
CN109327487B CN201710642535.2A CN201710642535A CN109327487B CN 109327487 B CN109327487 B CN 109327487B CN 201710642535 A CN201710642535 A CN 201710642535A CN 109327487 B CN109327487 B CN 109327487B
Authority
CN
China
Prior art keywords
big data
transmission
request
transmission path
path establishment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710642535.2A
Other languages
English (en)
Other versions
CN109327487A (zh
Inventor
林良书
施南翔
尼凌飞
黄震宇
张昊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Group Shanghai Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Group Shanghai Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Group Shanghai Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN201710642535.2A priority Critical patent/CN109327487B/zh
Publication of CN109327487A publication Critical patent/CN109327487A/zh
Application granted granted Critical
Publication of CN109327487B publication Critical patent/CN109327487B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/06—Network architectures or network communication protocols for network security for supporting key management in a packet data network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/083—Network architectures or network communication protocols for network security for authentication of entities using passwords
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/535—Tracking the activity of the user

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明的实施例提供了一种大数据传输方法、设备及可读存储介质，方法包括根据接收自应用端的传输路径建立请求生成传送请求，其中，所述传输路径建立请求及传送请求中均至少包括大数据产品设置参数；将所述传送请求发送至大数据平台，使得所述大数据平台根据所述传送请求中的大数据产品设置参数，生成所述传输路径建立指令；接收所述大数据平台发送的传输路径建立指令；以及，将所述传输路径建立指令转发至对应的应用端，使得所述应用端根据该传输路径建立指令与所述大数据平台建立接口连接，并与所述大数据平台进行大数据传输。本发明在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。

Description

大数据传输方法、设备及可读存储介质
技术领域
本发明涉及数据传输技术领域，具体涉及一种大数据传输方法、设备及可读存储介质。
背景技术
通信网络蕴含着丰富的大数据能力，包括用户群位置、用户群行为轨迹、用户群常驻商圈、用户群客户资料、栅格化地图等非实时性大数据能力，以及用户群呼叫行为、用户群短信行为、用户群开关机行为、用户群位置更新行为、矢量地图等实时性大数据能力。通信网络的大数据能力为互联网、企业、行业应用所迫切需求，应用基于大数据能力可实现人流统计、广告投放设计、店铺选址、商圈人流统计、实时人流分布、实时商圈人流分布、实时人流监控预警、实时事件营销等服务；而大数据传输具有广阔的市场前景和重要的应用价值，是目前能力开放领域的一大热点。
目前大数据传输的方式有两种，一种为能力开放平台通过大数据能力调用接口接入大数据平台的大数据能力，封装为大数据能力API并开放给应用端，使得应用端与大数据平台进行大数据传输，如图1所示；另一种为大数据平台直接开放大数据实时接口或文件接口给应用端，使得应用端与大数据平台进行大数据传输，如图2所示。
而第一种方式存在数据传送效率较低，接口性能开销较大，难以满足大数据能力开放大量数据传送的需求，特别是实时性大数据能力开放大量数据实时传送的需求；第二种方式存在应用非法使用大数据API产品的安全风险。
发明内容
针对现有技术中的缺陷，本发明提供一种大数据传输方法、设备及可读存储介质，在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。
为解决上述技术问题，本发明提供以下技术方案：
第一方面，本发明提供了一种大数据传输方法，所述方法包括：
根据接收自应用端的传输路径建立请求生成传送请求，其中，所述传输路径建立请求及传送请求中均至少包括大数据产品设置参数；
将所述传送请求发送至大数据平台，使得所述大数据平台根据所述传送请求中的大数据产品设置参数，生成所述传输路径建立指令；
接收所述大数据平台发送的传输路径建立指令；
以及，将所述传输路径建立指令转发至对应的应用端，使得所述应用端根据该传输路径建立指令与所述大数据平台建立接口连接，并与所述大数据平台进行大数据传输。
进一步地，所述根据接收自应用端的传输路径建立请求生成传送请求包括：
接收应用端发送的传输路径建立请求，其中，所述传输路径建立请求中包括鉴权信息和大数据产品设置参数；
根据所述传输路径建立请求中的鉴权信息对该应用端进行鉴权，并在鉴权成功后生成与该传输路径建立请求对应的传送请求，其中，所述传送请求包括所述大数据产品设置参数；
以及，向大数据平台发送所述传送请求。
进一步地，所述传输路径建立指令中包括大数据传送地址、协议、密钥及所述大数据产品设置参数。
第二方面，本发明还提供了一种大数据传输方法，所述方法包括：
向能力开放平台发送传输路径建立请求，其中，所述传输路径建立请求中至少包括大数据产品设置参数，使得所述能力开放平台根据所述传输路径建立请求中的大数据产品设置参数生成传送请求，并将该所述传送请求发送至大数据平台，使得所述大数据平台根据该传送请求中的大数据产品设置参数生成传输路径建立指令；
接收所述能力开放平台转发的所述传输路径建立指令；
根据所述传输路径建立指令与所述大数据平台建立大数据传送接口连接；
以及，根据所述大数据传送接口与所述大数据平台进行大数据传输。
进一步地，所述传输路径建立请求中还包括鉴权信息，使得所述能力开放平台根据所述传输路径建立请求中的鉴权信息对该应用端进行鉴权。
进一步地，所述根据所述传输路径建立指令与所述大数据平台建立大数据传送接口连接，包括：
根据所述传输路径建立指令向所述大数据平台发送接口连接请求，其中，所述接口连接请求中包括对应的所述传输路径建立指令中的传送密钥；
在所述大数据平台确认所述接口连接请求中的传送密钥并建立大数据传送接口后，根据所述大数据传送接口与所述大数据平台进行大数据传输。
第三方面，本发明还提供了一种大数据传输设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现所述方法的步骤。
第四方面，本发明还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现所述方法的步骤。
第五方面，本发明还提供了一种大数据传输设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现所述方法的步骤。
第六方面，本发明还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现所述方法的步骤。
由上述技术方案可知，本发明所述的一种大数据传输方法、设备及可读存储介质，方法包括根据接收自应用端的传输路径建立请求生成传送请求，其中，所述传输路径建立请求及传送请求中均至少包括大数据产品设置参数；将所述传送请求发送至大数据平台，使得所述大数据平台根据所述传送请求中的大数据产品设置参数，生成所述传输路径建立指令；接收所述大数据平台发送的传输路径建立指令；以及，将所述传输路径建立指令转发至对应的应用端，使得所述应用端根据该传输路径建立指令与所述大数据平台建立接口连接，并与所述大数据平台进行大数据传输。本发明在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性；满足了大数据API产品的订购、计费、运营、维护、安全要求；并通过基于协商信息建立的大数据传送接口(实时接口或文件接口)，实现大数据批量传送；能够在满足大数据API产品的订购、计费、运营、维护、安全要求的前提下，有效提高大数据能力开放的数据传送效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是背景技术中的第一种大数据传输方式的示意图；
图2是背景技术中的第二种大数据传输方式的示意图；
图3是本发明的实施例一中的一种大数据传输方法的一种具体实施方式的流程示意图；
图4是本发明的实施例一中的一种大数据传输方法的另一种具体实施方式的流程示意图；
图5是本发明的实施例二中的一种大数据传输方法的一种具体实施方式的流程示意图；
图6是本发明的实施例二中的一种大数据传输方法的另一种具体实施方式的流程示意图；
图7是本发明的实施例二中的一种大数据传输方法的再一种具体实施方式的流程示意图；
图8是本发明的一种大数据传输方法的流程示意图；
图9是本发明大数据能力开放系统进行数据传输的示意图；
图10是本发明实施例三的一种大数据传输系统的一种具体实施方式的结构示意图；
图11是本发明实施例四的一种大数据传输系统的另一种具体实施方式的结构示意图；
图12是本发明实施例五和六中的一种大数据传输设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明的实施例一提供了一种大数据传输方法的一种具体实施方式，参见图3，该大数据传输方法具体包括如下内容：
步骤101：根据接收自应用端的传输路径建立请求生成传送请求，其中，所述传输路径建立请求及传送请求中均至少包括大数据产品设置参数。
在步骤101中，应用端向能力开放平台发送传输路径建立请求，能力开放平台接收应用端发送的传输路径建立请求，且所述传输路径建立请求中包括鉴权信息和大数据产品参数设置方式。可以理解的是，传输路径建立请求是应用端在需要请求使用大数据API产品时，生成的一种大数据能力API请求，且该传输路径建立请求中携带有鉴权头域以及大数据API产品参数设置方式，此处的大数据API产品参数设置方式即为所述大数据产品参数设置方式，以大数据API产品为人流监控预警产品为例，所述大数据产品参数设置方式包括对“监控区域”，“监控时间段”，“预警人口密度阈值”等参数的设置。
步骤102：将所述传送请求发送至大数据平台，使得所述大数据平台根据所述传送请求中的大数据产品设置参数，生成所述传输路径建立指令。
在步骤102中，能力开放平台根据所述传输路径建立请求中的鉴权信息对该应用端进行鉴权，并在鉴权成功后能力开放平台向大数据平台发送与该传输路径建立请求对应的传送请求。可以理解的是，能力开放平台根据传输路径建立请求中的鉴权头域，对应用端是否能够使用大数据平台的大数据API产品进行鉴权；以及，能力开放平台可以通过软件架构风格RESTful(Representational State Transfer)接口向大数据平台发送传送请求，且传送请求中携带传送要求，其中的传送要求包括传送实时性要求(实时性、非实时性)及传送参数要求等，其中的传送实时性要求可以为实时性或非实时性，传送参数要求中包括应用端对大数据API产品的参数设置。
步骤103：接收所述大数据平台发送的传输路径建立指令。
在步骤103中，能力开放平台接收所述大数据平台发送的传输路径建立指令。可以理解的是，大数据平台根据传送请求生成包括大数据传送地址、传送协议和传送参数的协商结果，以及用于大数据传送鉴权的传送密钥的传输路径建立指令，并通过RESTful接口发送给能力开放平台，能力开放平台接收所述大数据平台发送的传输路径建立指令。其中，大数据传送地址包括：大数据平台传送大数据的IP地址及端口号；传送协议包括：SDTP等实时接口协议或者FTP等文件接口协议；传送参数包括：大数据API产品的全部参数，即包括默认参数设置和应用端参数设置。
步骤104：将所述传输路径建立指令转发至对应的应用端，使得所述应用端根据该传输路径建立指令与所述大数据平台建立接口连接，并与所述大数据平台进行大数据传输。
在步骤104中，能力开放平台将所述传输路径建立指令转发至对应的应用端，使得所述应用端根据该传输路径建立指令中的大数据传送地址、协议、密钥及所述大数据产品参数设置方式等与所述大数据平台建立接口连接，进而与所述大数据平台进行大数据传输，将与所述大数据平台通信连接的各通信网络网元中的数据通过所述大数据平台的调取，发送给应用端。
从上述描述可知，本发明的实施例通过应用端与大数据平台建立接口连接，提高了数据的传输效率，能够有效满足大量数据的实时性传输的需求；以及，在应用端与大数据平台建立接口连接之前，通过能力开放平台对所述应用端进行鉴权及传输路径建立请求的转发，保证了数据传输的安全性。可知，本发明提供的大数据传输方法，在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。
在一种具体实施方式中，步骤101具体包括如下内容：
接收应用端发送的传输路径建立请求，其中，所述传输路径建立请求中包括鉴权信息和大数据产品设置参数；
根据所述传输路径建立请求中的鉴权信息对该应用端进行鉴权，并在鉴权成功后生成与该传输路径建立请求对应的传送请求，其中，所述传送请求包括所述大数据产品设置参数；
以及，向大数据平台发送所述传送请求。
从上述描述可知，本发明的实施例通过应用端与大数据平台建立接口连接，提高了数据的传输效率，能够有效满足大量数据的实时性传输的需求；以及，在应用端与大数据平台建立接口连接之前，通过能力开放平台对所述应用端进行鉴权及传输路径建立请求的转发，保证了数据传输的安全性。可知，本发明提供的大数据传输方法，在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。
在一种具体实施方式中，在步骤101中的所述根据所述传输路径建立请求中的鉴权信息对该应用端进行鉴权之后，所述大数据传输方法还包括：若对所述应用端进行鉴权成功，则向所述应用端发送鉴权成功信息。
可以理解的是，在能力开放平台对所述应用端进行鉴权成功后，能力开放平台向所述应用端发送鉴权成功信息；该鉴权成功信息为大数据能力API响应信息，使得应用端能够及时获知是否鉴权成功。
从上述描述可知，本发明的实施例保证了建立数据传输路径的可靠性。
在一种具体实施方式中，参见图4，在步骤104之后，所述大数据传输方法还包括：
步骤105：接收所述应用端发送的传输路径建立指令确认信息。
在步骤105中，能力开放平台接收所述应用端发送的传输路径建立指令确认信息，以完成应用端请求大数据平台中数据的前导协商。
从上述描述可知，本发明的实施例保证了建立数据传输路径的可靠性。
本发明的实施例二提供了一种大数据传输方法的另一种具体实施方式，参见图5，该大数据传输方法具体包括如下内容：
步骤201：向能力开放平台发送传输路径建立请求，其中，所述传输路径建立请求中至少包括大数据产品设置参数，使得所述能力开放平台根据所述传输路径建立请求中的大数据产品设置参数生成传送请求，并将该所述传送请求发送至大数据平台，使得所述大数据平台根据该传送请求中的大数据产品设置参数生成传输路径建立指令。
在步骤201中，所述传输路径建立请求中还包括鉴权信息，使得所述能力开放平台根据所述传输路径建立请求中的鉴权信息对该应用端进行鉴权。应用端向能力开放平台发送传输路径建立请求，且所述传输路径建立请求中包括鉴权信息和大数据产品参数设置方式。可以理解的是，应用端在向能力开放平台发送传输路径建立请求前，在能力开放平台提供的门户或产品超市完成大数据API产品的订购。传输路径建立请求是应用端在需要请求使用大数据API产品时，生成的一种大数据能力API请求，且该传输路径建立请求中携带有鉴权头域以及大数据API产品参数设置方式，此处的大数据API产品参数设置方式即为所述大数据产品参数设置方式，以大数据API产品为人流监控预警产品为例，所述大数据产品参数设置方式包括对“监控区域”，“监控时间段”，“预警人口密度阈值”等参数的设置。
步骤202：接收所述能力开放平台转发的所述传输路径建立指令。
在步骤202中，应用端接收所述能力开放平台转发的传输路径建立指令，所述传输路径建立指令中包括大数据传送地址、协议、密钥及所述大数据产品参数设置方式。其中，大数据传送地址包括：大数据平台传送大数据的IP地址及端口号；传送协议包括：SDTP等实时接口协议或者FTP等文件接口协议；传送参数包括：大数据API产品的全部参数，即包括默认参数设置和应用端参数设置。
步骤203：根据所述传输路径建立指令与所述大数据平台建立大数据传送接口连接。
在步骤203中，应用端根据所述传输路径建立指令向所述大数据平台发送接口连接请求。可以理解的是，应用端根据大数据传送地址、传送协议和传送参数，访问大数据平台，并携带传送密钥，请求与大数据平台建立大数据传送接口。
步骤204：根据所述大数据传送接口与所述大数据平台进行大数据传输。
在步骤204中，大数据平台通过检查传送密钥进行大数据传送鉴权，如传送密钥正确，向应用端返回大数据传送接口建立响应，建立大数据传送接口；应用端在所述大数据平台确认所述接口连接请求中的传送密钥并建立大数据传送接口后，根据所述大数据传送接口与所述大数据平台进行大数据传输。可以理解的是，应用端和大数据平台之间进行大数据批量传送，采用SDTP等实时接口协议，或者FTP等文件接口协议。
从上述描述可知，本发明的实施例通过应用端与大数据平台建立接口连接，提高了数据的传输效率，能够有效满足大量数据的实时性传输的需求；以及，在应用端与大数据平台建立接口连接之前，通过能力开放平台对所述应用端进行鉴权及传输路径建立请求的转发，保证了数据传输的安全性。可知，本发明提供的大数据传输方法，在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。
在一种具体实施方式中，步骤203具体包括如下内容：
根据所述传输路径建立指令向所述大数据平台发送接口连接请求，其中，所述接口连接请求中包括对应的所述传输路径建立指令中的传送密钥；
在所述大数据平台确认所述接口连接请求中的传送密钥并建立大数据传送接口后，根据所述大数据传送接口与所述大数据平台进行大数据传输。
从上述描述可知，本发明的实施例通过应用端与大数据平台建立接口连接，提高了数据的传输效率，能够有效满足大量数据的实时性传输的需求。
在一种具体实施方式中，参见图6，在步骤202之前，所述大数据传输方法还包括：
步骤20A：接收所述能力开放平台发送的鉴权成功信息。
可以理解的是，在能力开放平台对所述应用端进行鉴权成功后，能力开放平台向所述应用端发送鉴权成功信息；应用端接收所述能力开放平台发送的鉴权成功信息；其中。该鉴权成功信息为大数据能力API响应信息，使得应用端能够及时获知是否鉴权成功。
从上述描述可知，本发明的实施例保证了建立数据传输路径的可靠性。
在一种具体实施方式中，参见图7，在步骤202之后，所述大数据传输方法还包括：
步骤20B：根据所述传输路径建立指令，向所述能力开放平台发送传输路径建立指令确认信息。
可以理解的是，应用端根据所述传输路径建立指令，向所述能力开放平台发送传输路径建立指令确认信息，使得能力开放平台接收所述应用端发送的传输路径建立指令确认信息，以完成应用端请求大数据平台中数据的前导协商。
从上述描述可知，本发明的实施例保证了建立数据传输路径的可靠性。
为进一步的说明本方案，本发明还提供了一种大数据传输方法的应用端实例，参见图8，该大数据传输方法的应用端实例具体包括如下内容：
应用端一种基于前导协商的大数据能力开放系统实现大数据传输方法，其中的基于前导协商的大数据能力开放系统由应用端、能力开放平台、大数据平台、通信网络网元组成。应用端在能力开放平台完成大数据API产品的订购和应用端鉴权，能力开放平台面向应用端提供大数据能力API；能力开放平台与大数据平台之间通过大数据协商接口(RESTful接口)连接，进行大数据传送地址、传送协议和传送参数的协商；应用端与大数据平台之间动态建立大数据传送接口(实时接口或文件接口)；大数据平台连接通信网络中各个网元，抽取通信网络网元蕴含的各类大数据能力。基于前导协商的大数据能力开放系统如图9所示。
大数据传输方法的应用端实例具体包括如下内容：
1)应用端在能力开放平台提供的门户或产品超市完成大数据API产品的订购。
2)应用端请求使用大数据API产品，向能力开放平台发送大数据能力API请求，携带鉴权头域，携带大数据API产品参数设置(以人流监控预警产品为例，产品参数设置包括对“监控区域”，“监控时间段”，“预警人口密度阈值”等参数进行设置)。
3)能力开放平台根据大数据能力API请求中的鉴权头域，对应用端使用大数据API产品进行鉴权，鉴权成功后，向应用端返回大数据能力API响应。
4)能力开放平台代表应用端通过RESTful接口向大数据平台发送协商请求，携带传送要求，包括传送实时性要求(实时性、非实时性)、传送参数要求(包括应用端对大数据API产品的参数设置)等。
5)大数据平台根据协商请求生成包括大数据传送地址(大数据平台传送大数据的IP地址、端口号)、传送协议(SDTP等实时接口协议、或者FTP等文件接口协议)和传送参数(大数据API产品的全部参数、包括默认参数设置和应用端参数设置)的协商结果，以及用于大数据传送鉴权的传送密钥，并通过RESTful接口发送给能力开放平台。
6)能力开放平台向应用端发送大数据能力API请求，携带大数据平台返回的大数据传送地址、传送协议和传送参数，以及传送密钥。
7)应用端收到大数据能力API请求后，向能力开放平台返回大数据能力API响应。前导协商完成。
8)应用端根据大数据传送地址、传送协议和传送参数，访问大数据平台，并携带传送密钥，请求与大数据平台建立大数据传送接口。
9)大数据平台通过检查传送密钥进行大数据传送鉴权，如传送密钥正确，向应用端返回大数据传送接口建立响应，建立大数据传送接口。
10)应用端和大数据平台之间进行大数据批量传送，采用SDTP等实时接口协议，或者FTP等文件接口协议。
在上述描述中，本应用端实例包括：首先，应用端在能力开放平台订购大数据API产品。然后，应用端请求使用大数据API产品，向能力开放平台发送大数据能力API请求，携带大数据API产品参数设置；能力开放平台完成对应用端使用API产品的鉴权后，返回大数据能力API响应，并代表应用端到大数据平台进行协商，携带传送要求；大数据平台根据协商请求生成包括大数据传送地址、传送协议和传送参数的协商结果，以及传送密钥，并通过能力开放平台返回给应用端，完成前导协商。最后，应用端根据协商的大数据传送地址、传送协议和传送参数，以及传送密钥，与大数据平台建立大数据传送接口(实时接口或文件接口)，实现大数据批量传送。
从上述描述可知，大数据传输方法有效解决了现有技术的上述缺陷。本申请提案中，应用端请求使用大数据API产品时，向能力开放平台发送大数据能力API请求，携带大数据API产品参数设置；能力开放平台完成对应用端使用API产品的鉴权后，返回大数据能力API响应，并代表应用端到大数据平台进行协商，携带传送要求；大数据平台根据协商请求生成包括大数据传送地址、传送协议和传送参数的协商结果，以及传送密钥，并通过能力开放平台返回给应用端，完成前导协商；应用端根据协商的大数据传送地址、传送协议和传送参数，以及传送密钥，与大数据平台建立大数据传送接口(实时接口或文件接口)，实现大数据批量传送。本申请的方法通过基于API的大数据API产品订购/使用流程，以及基于RESTful接口的前导协商机制，满足了大数据API产品的订购、计费、运营、维护、安全要求；并通过基于协商信息建立的大数据传送接口(实时接口或文件接口)，实现大数据批量传送；能够在满足大数据API产品的订购、计费、运营、维护、安全要求的前提下，有效提高大数据能力开放的数据传送效率。
本发明的实施例三提供了一种大数据传输系统的一种具体实施方式，参见图10，该大数据传输系统具体包括如下内容：
传输路径建立请求接收单元11，用于根据接收自应用端的传输路径建立请求生成传送请求，其中，所述传输路径建立请求及传送请求中均至少包括大数据产品设置参数。
传输路径建立指令生成单元12，用于将所述传送请求发送至大数据平台，使得所述大数据平台根据所述传送请求中的大数据产品设置参数，生成所述传输路径建立指令。
传输路径建立指令接收单元13，用于接收所述大数据平台发送的传输路径建立指令。
传输路径建立指令转发单元14，用于将所述传输路径建立指令转发至对应的应用端，使得所述应用端根据该传输路径建立指令与所述大数据平台建立接口连接，并与所述大数据平台进行大数据传输。
从上述描述可知，本发明的实施例通过应用端与大数据平台建立接口连接，提高了数据的传输效率，能够有效满足大量数据的实时性传输的需求；以及，在应用端与大数据平台建立接口连接之前，通过能力开放平台对所述应用端进行鉴权及传输路径建立请求的转发，保证了数据传输的安全性。可知，本发明提供的大数据传输方法，在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。
本发明的实施例四提供了一种大数据传输系统的另一种具体实施方式，参见图11，该大数据传输系统具体包括如下内容：
传输路径建立请求发送单元21，用于向能力开放平台发送传输路径建立请求，其中，所述传输路径建立请求中至少包括大数据产品设置参数，使得所述能力开放平台根据所述传输路径建立请求中的大数据产品设置参数生成传送请求，并将该所述传送请求发送至大数据平台，使得所述大数据平台根据该传送请求中的大数据产品设置参数生成传输路径建立指令。
传输路径建立指令接收单元22，用于接收所述能力开放平台转发的所述传输路径建立指令。
大数据传送接口建立单元23，用于根据所述传输路径建立指令与所述大数据平台建立大数据传送接口连接。
大数据传输单元24，用于根据所述大数据传送接口与所述大数据平台进行大数据传输。
从上述描述可知，本发明的实施例通过应用端与大数据平台建立接口连接，提高了数据的传输效率，能够有效满足大量数据的实时性传输的需求；以及，在应用端与大数据平台建立接口连接之前，通过能力开放平台对所述应用端进行鉴权及传输路径建立请求的转发，保证了数据传输的安全性。可知，本发明提供的大数据传输方法，在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。
本发明的实施例五提供了一种大数据传输设备的一种具体实施方式，参见图12，该大数据传输设备具体包括如下内容：
处理器(processor)801、存储器(memory)802、通信接口(CommunicationsInterface)803和总线804；
其中，所述处理器801、存储器802、通信接口803通过所述总线804完成相互间的通信；所述通信接口803用于该自动放通设备与计费系统的通信设备之间的信息传输；
所述处理器801用于调用所述存储器802中的计算机程序，所述处理器执行所述计算机程序时实现下述步骤：
步骤101：根据接收自应用端的传输路径建立请求生成传送请求，其中，所述传输路径建立请求及传送请求中均至少包括大数据产品设置参数。
步骤102：将所述传送请求发送至大数据平台，使得所述大数据平台根据所述传送请求中的大数据产品设置参数，生成所述传输路径建立指令。
步骤103：接收所述大数据平台发送的传输路径建立指令。
步骤104：将所述传输路径建立指令转发至对应的应用端，使得所述应用端根据该传输路径建立指令与所述大数据平台建立接口连接，并与所述大数据平台进行大数据传输。
从上述描述可知，本发明的实施例通过应用端与大数据平台建立接口连接，提高了数据的传输效率，能够有效满足大量数据的实时性传输的需求；以及，在应用端与大数据平台建立接口连接之前，通过能力开放平台对所述应用端进行鉴权及传输路径建立请求的转发，保证了数据传输的安全性。可知，本发明提供的大数据传输方法，在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。
本发明的实施例六提供了一种大数据传输设备的另一种具体实施方式，参见图12，该大数据传输设备具体包括如下内容：
处理器(processor)801、存储器(memory)802、通信接口(CommunicationsInterface)803和总线804；
其中，所述处理器801、存储器802、通信接口803通过所述总线804完成相互间的通信；所述通信接口803用于该自动放通设备与计费系统的通信设备之间的信息传输；
所述处理器801用于调用所述存储器802中的计算机程序，所述处理器执行所述计算机程序时实现下述步骤：
步骤201：向能力开放平台发送传输路径建立请求，其中，所述传输路径建立请求中至少包括大数据产品设置参数，使得所述能力开放平台根据所述传输路径建立请求中的大数据产品设置参数生成传送请求，并将该所述传送请求发送至大数据平台，使得所述大数据平台根据该传送请求中的大数据产品设置参数生成传输路径建立指令。
步骤202：接收所述能力开放平台转发的所述传输路径建立指令。
步骤203：根据所述传输路径建立指令与所述大数据平台建立大数据传送接口连接。
步骤204：根据所述大数据传送接口与所述大数据平台进行大数据传输。
从上述描述可知，本发明的实施例通过应用端与大数据平台建立接口连接，提高了数据的传输效率，能够有效满足大量数据的实时性传输的需求；以及，在应用端与大数据平台建立接口连接之前，通过能力开放平台对所述应用端进行鉴权及传输路径建立请求的转发，保证了数据传输的安全性。可知，本发明提供的大数据传输方法，在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。
本发明的实施例七提供了一种计算机可读存储介质的一种具体实施方式，
计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现如下步骤：
步骤101：根据接收自应用端的传输路径建立请求生成传送请求，其中，所述传输路径建立请求及传送请求中均至少包括大数据产品设置参数。
步骤102：将所述传送请求发送至大数据平台，使得所述大数据平台根据所述传送请求中的大数据产品设置参数，生成所述传输路径建立指令。
步骤103：接收所述大数据平台发送的传输路径建立指令。
步骤104：将所述传输路径建立指令转发至对应的应用端，使得所述应用端根据该传输路径建立指令与所述大数据平台建立接口连接，并与所述大数据平台进行大数据传输。
从上述描述可知，本发明的实施例通过应用端与大数据平台建立接口连接，提高了数据的传输效率，能够有效满足大量数据的实时性传输的需求；以及，在应用端与大数据平台建立接口连接之前，通过能力开放平台对所述应用端进行鉴权及传输路径建立请求的转发，保证了数据传输的安全性。可知，本发明提供的大数据传输方法，在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。
本发明的实施例八提供了一种计算机可读存储介质的另一种具体实施方式，
计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现如下步骤：
步骤201：向能力开放平台发送传输路径建立请求，其中，所述传输路径建立请求中至少包括大数据产品设置参数，使得所述能力开放平台根据所述传输路径建立请求中的大数据产品设置参数生成传送请求，并将该所述传送请求发送至大数据平台，使得所述大数据平台根据该传送请求中的大数据产品设置参数生成传输路径建立指令。
步骤202：接收所述能力开放平台转发的所述传输路径建立指令。
步骤203：根据所述传输路径建立指令与所述大数据平台建立大数据传送接口连接。
步骤204：根据所述大数据传送接口与所述大数据平台进行大数据传输。
从上述描述可知，本发明的实施例通过应用端与大数据平台建立接口连接，提高了数据的传输效率，能够有效满足大量数据的实时性传输的需求；以及，在应用端与大数据平台建立接口连接之前，通过能力开放平台对所述应用端进行鉴权及传输路径建立请求的转发，保证了数据传输的安全性。可知，本发明提供的大数据传输方法，在提高了数据的传输效率并有效满足大量数据的实时性传输的需求的基础上，还保证了数据传输的安全性。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所描述的大数据传输系统等实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台大数据传输设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上各实施例仅用以说明本发明的实施例的技术方案，而非对其限制；尽管参照前述各实施例对本发明的实施例进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明的实施例各实施例技术方案的范围。

Claims (10)

1.一种大数据传输方法，其特征在于，所述方法包括：
根据接收自应用端的传输路径建立请求生成传送请求，其中，所述传输路径建立请求及传送请求中均至少包括大数据产品设置参数；
将所述传送请求发送至大数据平台，使得所述大数据平台根据所述传送请求中的大数据产品设置参数，生成所述传输路径建立指令；
接收所述大数据平台发送的传输路径建立指令；
以及，将所述传输路径建立指令转发至对应的应用端，使得所述应用端根据该传输路径建立指令与所述大数据平台建立接口连接，并与所述大数据平台进行大数据传输。
2.根据权利要求1所述的方法，其特征在于，所述根据接收自应用端的传输路径建立请求生成传送请求包括：
接收应用端发送的传输路径建立请求，其中，所述传输路径建立请求中包括鉴权信息和大数据产品设置参数；
根据所述传输路径建立请求中的鉴权信息对该应用端进行鉴权，并在鉴权成功后生成与该传输路径建立请求对应的传送请求，其中，所述传送请求包括所述大数据产品设置参数；
以及，向大数据平台发送所述传送请求。
3.根据权利要求1所述的方法，其特征在于，所述传输路径建立指令中包括大数据传送地址、协议、密钥及所述大数据产品设置参数。
4.一种大数据传输方法，其特征在于，所述方法包括：
应用端向能力开放平台发送传输路径建立请求，其中，所述传输路径建立请求中至少包括大数据产品设置参数，使得所述能力开放平台根据所述传输路径建立请求中的大数据产品设置参数生成传送请求，并将该所述传送请求发送至大数据平台，使得所述大数据平台根据该传送请求中的大数据产品设置参数生成传输路径建立指令；
接收所述能力开放平台转发的所述传输路径建立指令；
根据所述传输路径建立指令与所述大数据平台建立大数据传送接口连接；
以及，根据所述大数据传送接口与所述大数据平台进行大数据传输。
5.根据权利要求4所述的方法，其特征在于，所述传输路径建立请求中还包括鉴权信息，使得所述能力开放平台根据所述传输路径建立请求中的鉴权信息对该应用端进行鉴权。
6.根据权利要求4所述的方法，其特征在于，所述根据所述传输路径建立指令与所述大数据平台建立大数据传送接口连接，包括：
根据所述传输路径建立指令向所述大数据平台发送接口连接请求，其中，所述接口连接请求中包括对应的所述传输路径建立指令中的传送密钥；
在所述大数据平台确认所述接口连接请求中的传送密钥并建立大数据传送接口后，根据所述大数据传送接口与所述大数据平台进行大数据传输。
7.一种大数据传输设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至3任一项所述方法的步骤。
8.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1至3任一项所述方法的步骤。
9.一种大数据传输设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求4至6任一项所述方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求4至6任一项所述方法的步骤。
CN201710642535.2A 2017-07-31 2017-07-31 大数据传输方法、设备及可读存储介质 Active CN109327487B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710642535.2A CN109327487B (zh) 2017-07-31 2017-07-31 大数据传输方法、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710642535.2A CN109327487B (zh) 2017-07-31 2017-07-31 大数据传输方法、设备及可读存储介质

Publications (2)

Publication Number Publication Date
CN109327487A CN109327487A (zh) 2019-02-12
CN109327487B true CN109327487B (zh) 2021-05-25

Family

ID=65244995

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710642535.2A Active CN109327487B (zh) 2017-07-31 2017-07-31 大数据传输方法、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN109327487B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103685535A (zh) * 2013-12-20 2014-03-26 广东电子工业研究院有限公司 一种大规模分布异构数据处理的云数据库系统接口设计
CN105228131A (zh) * 2015-11-05 2016-01-06 上海斐讯数据通信技术有限公司 运算数据的协助处理方法、系统及终端设备
CN106161520A (zh) * 2015-04-02 2016-11-23 朗新科技股份有限公司 大数据应用平台及基于其的交互方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IN2013MU02097A (zh) * 2013-06-20 2015-06-05 Tata Consultancy Services Ltd

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103685535A (zh) * 2013-12-20 2014-03-26 广东电子工业研究院有限公司 一种大规模分布异构数据处理的云数据库系统接口设计
CN106161520A (zh) * 2015-04-02 2016-11-23 朗新科技股份有限公司 大数据应用平台及基于其的交互方法
CN105228131A (zh) * 2015-11-05 2016-01-06 上海斐讯数据通信技术有限公司 运算数据的协助处理方法、系统及终端设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
大数据环境下电信数据服务能力开放研究;刘春;《电信科学》;20140331;全文 *

Also Published As

Publication number Publication date
CN109327487A (zh) 2019-02-12

Similar Documents

Publication Publication Date Title
CN105188055B (zh) 无线网络接入方法、无线接入点以及服务器
US9130908B2 (en) Transmitting device, receiving device, and operation method thereof
US9048428B2 (en) Enabling communication between source and target mail transfer agents
CN103716379A (zh) 针对网络实时通信(webrtc)交互式会话的企业策略的分布式应用,以及相关的方法、系统和计算机可读媒体
CN102811335B (zh) 建立视频会话的方法、设备和系统
CN109005220B (zh) 物联网终端的业务实现方法及物联网接入网关
CN108897631A (zh) 消息推送方法、装置、设备及存储介质
WO2017084442A1 (zh) 一种移动支付方法及装置
US20150150113A1 (en) Isolation proxy server system
CN105825409A (zh) 一种电子发票消息推送系统及方法
CN107911398A (zh) 身份信息的认证方法、装置以及系统
CN111431787A (zh) 一种隧道建立方法、装置及计算机可读存储介质
CN105281987B (zh) 路由器及数据上传方法、装置、系统
JP2016509286A (ja) トラフィックステアリング方法、デバイス、及びシステム
CN108696860A (zh) 虚拟sim卡实现方法、装置、sim服务器及终端
CN110351383A (zh) 业务处理方法、设备及可读存储介质
CN109327487B (zh) 大数据传输方法、设备及可读存储介质
CN110943992B (zh) 一种入口认证系统、方法、装置、计算机设备和存储介质
CN106385516B (zh) 一种设置业务转移的方法、装置及终端
US20160381147A1 (en) Information transmission method and apparatus
CN117336346A (zh) 一种ippbx与pms对接状态转换方法、终端设备及介质
CN106506660B (zh) 一种联机请求处理方法、服务器及系统
CN106330495A (zh) 一种核心网网元处理终端注册拥塞的方法及装置
CN105912477B (zh) 一种目录读取的方法、装置及系统
WO2018112796A1 (zh) 业务数据策略的控制方法、运营商设备和服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant