CN108241541A - 数据传输的方法和装置 - Google Patents

Abstract

本发明公开了一种数据传输的方法和装置。其中，该方法包括：获取逗号分隔型取值格式文件，逗号分隔型取值格式文件中包括存储键值key的数据列，键值key为用于在数据库中查找对应数据的索引值；对逗号分隔型取值格式文件进行解析，得到数据列中存储的键值key；依据键值key在数据库中查找对应的数据；根据查找到的数据生成数据对象；将数据对象提交到媒体端。本发明解决了在提交数据至媒体端过程中存在的过程繁杂的技术问题。

Description

数据传输的方法和装置

技术领域

本发明涉及互联网应用技术领域，具体而言，涉及一种数据传输的方法和装置。

背景技术

随着互联网技术的进步，特别是针对不同客户对网络服务的需求，产生了各种服务互联网需求的应用技术，其中，相关技术中通过使用逗号分隔型取值格式(CommaSeparated Values，简称CSV)文件实现与媒体端之间的信息传输。

现在的CSV文件提供的信息包括：账户名称，计划名称，单元名称，关键词名称等。提交数据至媒体端的过程如下：首先，在数据库中创建实体表对应的临时表，然后把CSV中上述数据填充到临时表中；其次，通过临时表中数据名称来与数据库实体表做关联，查找对应该数值名称在数据库中的key值，并将key值填充到临时表中；第三，通过临时表中的Key值再次与实体表关联把CSV文件中没有提供的数据填充到临时表中；最后，从临时表中把对应数据读取出来，生成新的数据对象提交至媒体端。

由上可知，上述提交数据至媒体端的方式存在的问题是：步骤繁多、实现过程复杂；在数据库中存在重复名称时，很可能无法查到所需的key值来做匹配，并且这个bug一旦出现根本无解，只能人工删除数据库中对应的数据，导致处理效率降低。

针对上述在提交数据至媒体端过程中存在的过程繁杂的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种数据传输的方法和装置，以至少解决在提交数据至媒体端过程中存在的过程繁杂的技术问题。

根据本发明实施例的一个方面，提供了一种数据传输的方法，包括：获取逗号分隔型取值格式文件，逗号分隔型取值格式文件中包括存储键值key的数据列，键值key为用于在数据库中查找对应数据的索引值；对逗号分隔型取值格式文件进行解析，得到数据列中存储的键值key；依据键值key在数据库中查找对应的数据；根据查找到的数据生成数据对象；将数据对象提交到媒体端。

可选的，在生成数据对象后，该方法还包括：获取数据对象的属性；从逗号分隔型取值格式文件中提取数据内容；将数据内容赋值给数据对象的属性，得到数据对象对应的属性值。

进一步地，可选的，在得到数据对象对应的属性值后，该方法还包括：判断数据内容是否已全部赋值给数据对象的属性；如果否，则继续将数据内容赋值给数据对象的属性，直至数据内容全部赋值给数据对象的属性。

可选的，在数据内容全部赋值给数据对象的属性后，该方法还包括：判断数据对象的属性中是否还存在未被赋值的属性；如果是，则将未被赋值的数据对象的属性清除。

进一步地，可选的，将数据对象提交到媒体端，包括：将未被赋值的数据对象的属性清除后，剩余的数据对象的属性及对应的属性值组成json字符串；发送json字符串至媒体端。

根据本发明实施例的另一个方面，提供了一种数据传输的装置，包括：获取模块，用于获取逗号分隔型取值格式文件，逗号分隔型取值格式文件中包括存储键值key的数据列，键值key为用于在数据库中查找对应数据的索引值；解析模块，用于对逗号分隔型取值格式文件进行解析，得到数据列中存储的键值key；查询模块，用于依据键值key在数据库中查找对应的数据；生成模块，用于根据查找到的数据生成数据对象；上传模块，用于将数据对象提交到媒体端。

可选的，该装置还包括：属性获取模块，用于在生成数据对象后，获取数据对象的属性；数据提取模块，用于从逗号分隔型取值格式文件中提取数据内容；第一赋值模块，用于将数据内容赋值给数据对象的属性，得到数据对象对应的属性值。

进一步地，可选的，该装置还包括：第一判断模块，用于在得到数据对象对应的属性值后，判断数据内容是否已全部赋值给数据对象的属性；第二赋值模块，用于在判断所述数据内容未全部赋值给所述数据对象的属性后，继续将数据内容赋值给数据对象的属性，直至数据内容全部赋值给数据对象的属性。

可选的，该装置还包括：第二判断模块，用于在数据内容全部赋值给数据对象的属性后，判断数据对象的属性中是否还存在未被赋值的属性；数据清除模块，用于在判断所述数据对象的属性中还存在未被赋值的属性后，将未被赋值的数据对象的属性清除。

进一步地，可选的，上传模块包括：封装单元，用于将未被赋值的数据对象的属性清除后，剩余的数据对象的属性及对应的属性值组成json字符串；上传单元，用于发送json字符串至媒体端。

在本发明实施例中，通过获取逗号分隔型取值格式文件，逗号分隔型取值格式文件中包括存储键值key的数据列，键值key为用于在数据库中查找对应数据的索引值；对逗号分隔型取值格式文件进行解析，得到数据列中存储的键值key；依据键值key在数据库中查找对应的数据；根据查找到的数据生成数据对象；将数据对象提交到媒体端，达到了简化操作步骤的目的，从而实现了提升数据传输效率的技术效果，进而解决了在提交数据至媒体端过程中存在的过程繁杂的技术问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的数据传输的方法的流程示意图；

图2是根据本发明实施例的数据传输的装置的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

实施例一

根据本发明实施例，提供了一种数据传输的方法的方法实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

图1是根据本发明实施例的数据传输的方法的流程示意图，如图1所示，该方法包括如下步骤：

步骤S102，获取逗号分隔型取值格式文件，逗号分隔型取值格式文件中包括存储键值key的数据列，键值key为用于在数据库中查找对应数据的索引值；

步骤S104，对逗号分隔型取值格式文件进行解析，得到数据列中存储的键值key；

步骤S106，依据键值key在数据库中查找对应的数据；

步骤S108，根据查找到的数据生成数据对象；

具体的，上述步骤S108中根据查找到的数据生成数据对象是将物理数据转化为内存数据的过程。

步骤S110，将数据对象提交到媒体端。

本申请实施例提供的数据传输的方法中，通过获取逗号分隔型取值格式文件，逗号分隔型取值格式文件中包括存储键值key的数据列，键值key为用于在数据库中查找对应数据的索引值；对逗号分隔型取值格式文件进行解析，得到数据列中存储的键值key；依据键值key在数据库中查找对应的数据；根据查找到的数据生成数据对象；将数据对象提交到媒体端，达到了简化操作步骤的目的，从而实现了提升数据传输效率的技术效果，进而解决了在提交数据至媒体端过程中存在的过程繁杂的技术问题。

可选的，在步骤S108中生成数据对象后，本申请实施例提供的数据传输的方法还包括：

Step1，获取数据对象的属性；

Step2，从逗号分隔型取值格式文件中提取数据内容；

Step3，将数据内容赋值给数据对象的属性，得到数据对象对应的属性值。

进一步地，可选的，在Step3中得到数据对象对应的属性值后，本申请实施例提供的数据传输的方法还包括：

Step4，判断数据内容是否已全部赋值给数据对象的属性；

Step5，如果否，则继续将数据内容赋值给数据对象的属性，直至数据内容全部赋值给数据对象的属性。

可选的，在Step5中数据内容全部赋值给数据对象的属性后，本申请实施例提供的数据传输的方法还包括：

Step6，判断数据对象的属性中是否还存在未被赋值的属性；

Step7，如果是，则将未被赋值的数据对象的属性清除。

进一步地，可选的，步骤S110中将数据对象提交到媒体端，包括：

Step1，将未被赋值的数据对象的属性清除后，剩余的数据对象的属性及对应的属性值组成json字符串；

Step2，发送json字符串至媒体端。

由上可知，本申请实施例提供的数据传输的方法可以不在通过名称去查找对应key值，而是在用户提供的CSV文件中添加key值对应的列，这样就不需要通过名称去查找对应的key值，省略了创建临时表，再通过临时表与对应的物料表关联去查找对应的key，简化了当前的执行步骤。通过key值读取数据库中的数据，sql语句简单而明了很利于开发人员对程序的维护工作。而且在大数据量的情况下程序的性能会有很大的提升。并将以前需要六七个步骤才能提交给媒体的数据，简化成了两到三步就可以完成。

在本申请实施例提供的数据传输的方法中在编程方面大大简化了程序“批量大师”在操作物料上传至媒体端的程序的复杂性，是的编程实现的方式简单明了，同时也很利于程序人员对代码的维护工作，可读性强。

在大数据量的情况下可以很好的提高程序的性能。因为简化了很多步骤减少了程序的IO操作(IO操作很费时间)，而且通过值类型操作效率是要高于字符串的(key是值类型数据；名称是字符串类型数据)。

本申请实施例提供的数据传输的方法通过提供Key值来填充对应的数据。并在”批量大师”在给媒体端大批量上传数据时通过指定的key值来查找去数据库中查找对应的数据，避免了根据名称所带来的繁琐的程序逻辑，同时数据库中key值设计的都是值类型的数据，而名称一般都是字符串类型的数据，所以在大批量数据的情况下程序的性能也会有很大的提高。

实施例二

图2是根据本发明实施例的数据传输的装置的结构示意图，如图2所示，该装置包括：

获取模块22，用于获取逗号分隔型取值格式文件，逗号分隔型取值格式文件中包括存储键值key的数据列，键值key为用于在数据库中查找对应数据的索引值；解析模块24，用于对逗号分隔型取值格式文件进行解析，得到数据列中存储的键值key；查询模块26，用于依据键值key在数据库中查找对应的数据；生成模块28，用于根据查找到的数据生成数据对象；上传模块30，用于将数据对象提交到媒体端。

本申请实施例提供的数据传输的装置中，通过获取逗号分隔型取值格式文件，逗号分隔型取值格式文件中包括存储键值key的数据列，键值key为用于在数据库中查找对应数据的索引值；对逗号分隔型取值格式文件进行解析，得到数据列中存储的键值key；依据键值key在数据库中查找对应的数据；根据查找到的数据生成数据对象；将数据对象提交到媒体端，达到了简化操作步骤的目的，从而实现了提升数据传输效率的技术效果，进而解决了在提交数据至媒体端过程中存在的过程繁杂的技术问题。

可选的，本申请实施例提供的数据传输的装置还包括：属性获取模块，用于在生成数据对象后，获取数据对象的属性；数据提取模块，用于从逗号分隔型取值格式文件中提取数据内容；第一赋值模块，用于将数据内容赋值给数据对象的属性，得到数据对象对应的属性值。

进一步地，可选的，本申请实施例提供的数据传输的装置还包括：第一判断模块，用于在得到数据对象对应的属性值后，判断数据内容是否已全部赋值给数据对象的属性；第二赋值模块，用于在判断数据内容未全部赋值给数据对象的属性后，继续将数据内容赋值给数据对象的属性，直至数据内容全部赋值给数据对象的属性。

可选的，本申请实施例提供的数据传输的装置还包括：第二判断模块，用于在数据内容全部赋值给数据对象的属性后，判断数据对象的属性中是否还存在未被赋值的属性；数据清除模块，用于在判断数据对象的属性中还存在未被赋值的属性后，将未被赋值的数据对象的属性清除。

进一步地，可选的，上传模块30包括：封装单元，用于将未被赋值的数据对象的属性清除后，剩余的数据对象的属性及对应的属性值组成json字符串；上传单元，用于发送json字符串至媒体端。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种数据传输的方法，其特征在于，包括：

获取逗号分隔型取值格式文件，所述逗号分隔型取值格式文件中包括存储键值key的数据列，所述键值key为用于在数据库中查找对应数据的索引值；

对所述逗号分隔型取值格式文件进行解析，得到所述数据列中存储的键值key；

依据所述键值key在数据库中查找对应的数据；

根据查找到的所述数据生成数据对象；

将所述数据对象提交到媒体端。

2.根据权利要求1所述的方法，其特征在于，在生成数据对象后，所述方法还包括：

获取所述数据对象的属性；

从所述逗号分隔型取值格式文件中提取数据内容；

将所述数据内容赋值给所述数据对象的属性，得到所述数据对象对应的属性值。

3.根据权利要求2所述的方法，其特征在于，在得到所述数据对象对应的属性值后，所述方法还包括：

判断所述数据内容是否已全部赋值给所述数据对象的属性；

如果否，则继续将所述数据内容赋值给所述数据对象的属性，直至所述数据内容全部赋值给所述数据对象的属性。

4.根据权利要求3所述的方法，其特征在于，在所述数据内容全部赋值给所述数据对象的属性后，所述方法还包括：

判断所述数据对象的属性中是否还存在未被赋值的属性；

如果是，则将未被赋值的数据对象的属性清除。

5.根据权利要求4所述的方法，其特征在于，所述将所述数据对象提交到媒体端，包括：

将未被赋值的数据对象的属性清除后，剩余的数据对象的属性及对应的属性值组成json字符串；

发送所述json字符串至所述媒体端。

6.一种数据传输的装置，其特征在于，包括：

获取模块，用于获取逗号分隔型取值格式文件，所述逗号分隔型取值格式文件中包括存储键值key的数据列，所述键值key为用于在数据库中查找对应数据的索引值；

解析模块，用于对所述逗号分隔型取值格式文件进行解析，得到所述数据列中存储的键值key；

查询模块，用于依据所述键值key在数据库中查找对应的数据；

生成模块，用于根据查找到的所述数据生成数据对象；

上传模块，用于将所述数据对象提交到媒体端。

7.根据权利要求6所述的装置，其特征在于，所述装置还包括：

属性获取模块，用于在生成数据对象后，获取所述数据对象的属性；

数据提取模块，用于从所述逗号分隔型取值格式文件中提取数据内容；

第一赋值模块，用于将所述数据内容赋值给所述数据对象的属性，得到所述数据对象对应的属性值。

8.根据权利要求7所述的装置，其特征在于，所述装置还包括：

第一判断模块，用于在得到所述数据对象对应的属性值后，判断所述数据内容是否已全部赋值给所述数据对象的属性；

第二赋值模块，用于在判断所述数据内容未全部赋值给所述数据对象的属性后，继续将所述数据内容赋值给所述数据对象的属性，直至所述数据内容全部赋值给所述数据对象的属性。

9.根据权利要求8所述的装置，其特征在于，所述装置还包括：

第二判断模块，用于在所述数据内容全部赋值给所述数据对象的属性后，判断所述数据对象的属性中是否还存在未被赋值的属性；

数据清除模块，用于在判断所述数据对象的属性中还存在未被赋值的属性后，将未被赋值的数据对象的属性清除。

10.根据权利要求9所述的装置，其特征在于，所述上传模块包括：

封装单元，用于将未被赋值的数据对象的属性清除后，剩余的数据对象的属性及对应的属性值组成json字符串；

上传单元，用于发送所述json字符串至所述媒体端。