CN110278162A - 一种数据传输方法及装置 - Google Patents

Abstract

本发明涉及数据传输技术领域，具体是一种数据传输方法及装置，所述方法包括：设置数据处理线程和数据发送线程，所述数据处理线程和数据发送线程独立访问待发送队列；所述数据处理线程执行以下步骤：接收车辆发送的数据，确定所述数据的重要性等级；获取所述待发送队列的占用率；根据所述待发送队列的占用率和所述数据的重要性等级确定目标数据；将所述目标数据写入预设的缓冲区中；当满足预设发送条件时，将所述缓冲区链接到待发送队列。本发明的一种数据传输方法及装置能够在网络不稳定或者系统阻塞时保持车辆数据传输的稳定性和实时性，并降低数据丢失的概率。

Description

一种数据传输方法及装置

技术领域

本发明涉及数据传输技术领域，特别涉及一种数据传输方法及装置。

背景技术

随着汽车行业的快速发展，车辆功能越来越多也越来越复杂，如何远程监控与服务整车系统、实时全面的采集车辆的状态信息和相关数据，作为提高车辆动力性能、经济性能、安全性能的重要手段和方法，也是检测和管理整车系统并解决故障的有效措施。随着技术的不断发展以及对车辆运行信息要求的不断提高，要求车辆向服务器传输的数据越来越多，对数据传输网络的要求也越来越高。

由于网络技术本身存在着不稳定性，数据传输过程中容易出现部分数据丢失的问题，且因为网络不稳定的随机性，导致了数据丢失也具有随机性，这就使得整个传输处于不稳定的状况，进而有可能对车辆的安全运行造成不利影响。同时，当网络较差时会出现大量数据的堆积，导致重要数据得不到及时的传输和数据传输的实时性降低。因此有必要设计一种能够解决网络波动或者系统阻塞时车辆数据传输稳定性差、实时性差的问题的数据传输方法。

发明内容

针对现有技术的上述问题，本发明的目的在于提供一种数据传输方法及装置，能够在网络不稳定或者系统阻塞时保持车辆数据传输的稳定性和实时性。

为了解决上述问题，本发明提供一种数据传输方法，所述方法设置数据处理线程和数据发送线程，所述数据处理线程和数据发送线程独立访问待发送队列；

所述数据处理线程执行以下步骤：

接收车辆发送的数据，确定所述数据的重要性等级；

获取所述待发送队列的占用率；

根据所述待发送队列的占用率和所述数据的重要性等级确定目标数据；

将所述目标数据写入预设的缓冲区中；

当满足预设发送条件时，将所述缓冲区链接到待发送队列。

进一步地，所述数据发送线程执行以下步骤：

获取所述待发送队列的成员数量；

根据所述成员数量判断所述待发送队列是否为空；

如果所述待发送队列非空，将位于所述待发送队列队首的缓冲区发送至目标设备。

进一步地，所述将位于所述待发送队列队首的缓冲区发送至目标设备之后，所述数据发送线程还执行步骤：

根据所述成员数量计算所述待发送队列的占用率。

进一步地，所述数据处理线程在对所述待发送队列进行访问时，对所述待发送队列加锁，以禁止其他线程对所述待发送队列进行访问。

进一步地，所述待发送队列被所述数据发送线程访问时，如果接收到所述数据处理线程的访问请求，则挂起所述数据发送线程以使所述数据发送线程进入等待状态。

具体地，所述数据的重要性等级包括第一等级、第二等级和第三等级，第一等级数据的重要性大于第二等级数据和第三等级数据，第二等级数据的重要性大于第三等级数据；

所述根据所述待发送队列的占用率和所述数据的重要性等级确定目标数据包括：

如果所述待发送队列的占用率小于或等于第一占用率，将第一等级数据、第二等级数据和第三等级数据作为目标数据；

如果所述待发送队列的占用率大于第一占用率小于第二占用率，将第一等级数据和第二等级数据作为目标数据；

如果所述待发送队列的占用率大于或等于第二占用率，将第一等级数据作为目标数据。

具体地，所述预设发送条件包括：

所述缓冲区中的数据量到达预设阈值；

或者，从开始向所述缓冲区中写入数据时开始计时，计时时间到达预设的时间阈值。

本发明另一方面保护一种数据传输装置，包括数据处理模块和数据发送模块；

所述数据处理模块包括：

第一确定单元，用于在接收车辆发送的数据后，确定所述数据的重要性等级；

第一获取单元，用于获取所述待发送队列的占用率；

第二确定单元，用于根据所述待发送队列的占用率和所述数据的重要性等级确定目标数据；

写入单元，用于将所述目标数据写入预设的缓冲区中；

第一发送单元，用于当满足预设发送条件时，将所述缓冲区链接到待发送队列；

所述数据发送模块包括：

第二获取单元，用于获取所述待发送队列的成员数量；

判断单元，用于根据所述成员数量判断所述待发送队列是否为空；

第二发送单元，用于当所述待发送队列非空时，将位于所述待发送队列队首的缓冲区发送至目标设备。

进一步地，所述数据发送模块还包括：

计算单元，用于根据所述成员数量计算所述待发送队列的占用率。

本发明另一方面保护一种计算机可读存储介质，所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现上述的数据传输方法。

由于上述技术方案，本发明具有以下有益效果：

(1)本发明的一种数据传输方法通过设置独立访问待发送队列的数据处理线程和数据发送线程，并且使得数据处理线程的优先级高于数据发送线程，能够减少数据处理过程中因发送线程占用导致的数据漏处理。

(2)本发明的一种数据传输方法的数据处理线程中通过待发送队列的占用率和数据的重要性等级确定传输的数据，在网络不稳定或者系统阻塞导致大量数据堆积时筛选重要性等级高的数据进行传输，能够保证重要数据得到及时处理的可靠性，降低损失。

附图说明

为了更清楚地说明本发明的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍。显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它附图。

图1是本发明实施例提供的数据传输方法的数据处理线程执行步骤图；

图2是本发明实施例提供的数据传输方法的数据发送线程执行步骤图；

图3是本发明实施例提供的数据传输装置的结构示意图；

图4是本发明实施例提供的数据传输装置的数据处理模块的结构示意图；

图5是本发明实施例提供的数据传输装置的数据发送模块的结构示意图；

图6是本发明实施例提供的数据传输过程示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例1

参考说明书附图1至图6，本发明实施例提供一种数据传输方法，所述方法设置数据处理线程和数据发送线程，所述数据处理线程和数据发送线程独立访问待发送队列；

所述数据处理线程执行以下步骤：

S101：接收车辆发送的数据，确定所述数据的重要性等级。

具体地，所述数据的重要性等级包括第一等级、第二等级和第三等级，第一等级数据的重要性大于第二等级数据和第三等级数据，第二等级数据的重要性大于第三等级数据。

本发明实施例中，可以根据数据的类型来确定数据的重要性等级，具体重要性等级包括的数据类型可以事先进行设定。在一个具体的实施例中，需要采集车辆自动驾驶数据，所述第一等级数据可以包括转向、加减速、挡位、速度等数据，所述第二等级数据可以包括灯光、里程、燃油等数据，所述第三等级数据可以包括定位、车内温度等数据。

S102：获取所述待发送队列的占用率。

本发明实施例中，可以从所述数据处理线程和数据发送线程的共享内存中读取所述待发送队列的占用率。

S103：根据所述待发送队列的占用率和所述数据的重要性等级确定目标数据。

具体地，所述根据所述待发送队列的占用率和所述数据的重要性等级确定目标数据包括：

如果所述待发送队列的占用率小于或等于第一占用率，将第一等级数据、第二等级数据和第三等级数据作为目标数据；

如果所述待发送队列的占用率大于第一占用率小于第二占用率，将第一等级数据和第二等级数据作为目标数据；

如果所述待发送队列的占用率大于或等于第二占用率，将第一等级数据作为目标数据。

在一个可能的实施例中，还可以根据所述待发送队列的占用率确定所述待发送队列的等级，再根据所述待发送队列的等级和所述数据的重要性等级确定目标数据。具体地，根据所述待发送队列的占用率确定所述待发送队列的等级包括：如果所述待发送队列的占用率小于或等于第一占用率，所述待发送队列的等级为三级；如果所述待发送队列的占用率大于第一占用率小于第二占用率，所述待发送队列的等级为二级；如果所述待发送队列的占用率大于或等于第二占用率，所述待发送队列的等级为一级。根据所述待发送队列的等级和所述数据的重要性等级确定目标数据包括：如果所述待发送队列的等级为三级，将第一等级数据、第二等级数据和第三等级数据作为目标数据；如果所述待发送队列等级为二级，将第一等级数据和第二等级数据作为目标数据；如果所述待发送队列的等级为一级，将第一等级数据作为目标数据。

需要说明的是，所述数据的重要性等级不仅限于三个等级，在一些可能的实施例中，所述数据的重要性等级还可以设定为其他数量，相应地，所述待发送队列的占用率也可以分为相同数量个区间，可以对应每个区间确定不同重要性等级的数据为需要传输的目标数据。

S104：将所述目标数据写入预设的缓冲区中。

S105：当满足预设发送条件时，将所述缓冲区链接到待发送队列。

具体地，所述预设发送条件包括：

所述缓冲区中的数据量到达预设阈值；

或者，从开始向所述缓冲区中写入数据时开始计时，计时时间到达预设的时间阈值。

本发明实施例中，在数据接收阶段，可以将数据集中放置在缓冲区中，当所述缓冲区满或者计时时间超时时将所述缓冲区链接到待发送队列中，等待数据发送线程处理。数据接收阶段对数据进行批量化处理能够提高数据传输的效率，超时发送原则能够确保长时间内仅有极少量数据写入缓冲区时数据传输过程不延迟。

进一步地，所述数据发送线程执行以下步骤：

S201：获取所述待发送队列的成员数量。

S202：根据所述成员数量判断所述待发送队列是否为空。

本发明实施例中，可以通过所述成员数量来判断所述待发送队列是否为空，当所述成员数量为零时，判断所述待发送队列为空，当所述成员数量不为零时，判断所述待发送队列非空。

在一个可能的实施例中，还可以通过一个计数器来判断所述待发送队列是否为空，每次将所述缓冲区链接至待发送队列时计数器加一，每次将待发送队列队首的缓冲区发送至目标设备时计数器减一，当所述计数器为零时，判断所述待发送队列为空，当所述计数器不为零时，判断所述待发送队列非空。

S203：如果所述待发送队列非空，将位于所述待发送队列队首的缓冲区发送至目标设备。

本发明实施例中，所述目标设备可以为计算机或者云端服务器等。

进一步地，所述将位于所述待发送队列队首的缓冲区发送至目标设备之后，所述数据发送线程还执行步骤：

根据所述成员数量计算所述待发送队列的占用率。

本发明实施例中，所述待发送队列的占用率存储在共享内存中，所述数据处理线程可以从所述共享内存中读取所述待发送队列的占用率。所述待发送队列的占用率为所述成员数量减一后与所述待发送队列的总大小的比值。

本发明实施例中，所述数据处理线程在对所述待发送队列进行访问时，对所述待发送队列加锁，以禁止其他线程对所述待发送队列进行访问。具体地，所述数据处理线程在向所述待发送队列写入数据时，不允许其他线程对所述待发送队列写入或者读出数据，以确保待发送队列数据完整性。

本发明实施例中，所述待发送队列被所述数据发送线程访问时，如果接收到所述数据处理线程的访问请求，则挂起所述数据发送线程以使所述数据发送线程进入等待状态。具体地，所述数据处理线程的优先级高于所述数据发送线程，所述数据处理线程可以在任意时刻打断所述数据发送线程对所述待发送队列的访问，但是所述数据发送线程不能打断所述数据处理线程对所述待发送队列的访问。

本发明实施例还提供一种数据传输装置300，包括数据处理模块310和数据发送模块320；

所述数据处理模块310包括：

第一确定单元311，用于在接收车辆发送的数据后，确定所述数据的重要性等级；

第一获取单元312，用于获取所述待发送队列的占用率；

第二确定单元313，用于根据所述待发送队列的占用率和所述数据的重要性等级确定目标数据；

写入单元314，用于将所述目标数据写入预设的缓冲区中；

第一发送单元315，用于当满足预设发送条件时，将所述缓冲区链接到待发送队列；

所述数据发送模块320包括：

第二获取单元321，用于获取所述待发送队列的成员数量；

判断单元322，用于根据所述成员数量判断所述待发送队列是否为空；

第二发送单元323，用于当所述待发送队列非空时，将位于所述待发送队列队首的缓冲区发送至目标设备。

进一步地，所述数据发送模块还包括：

计算单元324，用于根据所述成员数量计算所述待发送队列的占用率。

本发明实施例还提供一种计算机可读存储介质，所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现上述方法实施例提供的数据传输方法。

可选择地，在本发明实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

本发明的一种数据传输方法及装置具有以下有益效果：

(1)本发明的一种数据传输方法通过设置独立访问待发送队列的数据处理线程和数据发送线程，并且使得数据处理线程的优先级高于数据发送线程，能够减少数据处理过程中因发送线程占用导致的数据漏处理。

(2)本发明的一种数据传输方法的数据处理线程中通过待发送队列的占用率和数据的重要性等级确定传输的数据，在网络不稳定或者系统阻塞导致大量数据堆积时筛选重要性等级高的数据进行传输，能够保证重要数据得到及时处理的可靠性，降低损失。

上述说明已经充分揭露了本发明的具体实施方式。需要指出的是，熟悉该领域的技术人员对本发明的具体实施方式所做的任何改动均不脱离本发明的权利要求书的范围。相应地，本发明的权利要求的范围也并不仅仅局限于前述具体实施方式。

Claims (10)

1.一种数据传输方法，其特征在于，包括：

设置数据处理线程和数据发送线程，所述数据处理线程和数据发送线程独立访问待发送队列；

所述数据处理线程执行以下步骤：

接收车辆发送的数据，确定所述数据的重要性等级；

获取所述待发送队列的占用率；

根据所述待发送队列的占用率和所述数据的重要性等级确定目标数据；

将所述目标数据写入预设的缓冲区中；

当满足预设发送条件时，将所述缓冲区链接到待发送队列。

2.根据权利要求1所述的方法，其特征在于：

所述数据发送线程执行以下步骤：

获取所述待发送队列的成员数量；

根据所述成员数量判断所述待发送队列是否为空；

如果所述待发送队列非空，将位于所述待发送队列队首的缓冲区发送至目标设备。

3.根据权利要求2所述的方法，其特征在于，所述将位于所述待发送队列队首的缓冲区发送至目标设备之后，所述数据发送线程还执行步骤：

根据所述成员数量计算所述待发送队列的占用率。

4.根据权利要求1或2所述的方法，其特征在于：

所述数据处理线程在对所述待发送队列进行访问时，对所述待发送队列加锁，以禁止其他线程对所述待发送队列进行访问。

5.根据权利要求1或2所述的方法，其特征在于：

所述待发送队列被所述数据发送线程访问时，如果接收到所述数据处理线程的访问请求，则挂起所述数据发送线程以使所述数据发送线程进入等待状态。

6.根据权利要求1或2所述的方法，其特征在于，所述数据的重要性等级包括第一等级、第二等级和第三等级，第一等级数据的重要性大于第二等级数据和第三等级数据，第二等级数据的重要性大于第三等级数据；

所述根据所述待发送队列的占用率和所述数据的重要性等级确定目标数据包括：

如果所述待发送队列的占用率小于或等于第一占用率，将第一等级数据、第二等级数据和第三等级数据作为目标数据；

如果所述待发送队列的占用率大于第一占用率小于第二占用率，将第一等级数据和第二等级数据作为目标数据；

如果所述待发送队列的占用率大于或等于第二占用率，将第一等级数据作为目标数据。

7.根据权利要求1或2所述的方法，其特征在于，所述预设发送条件包括：

所述缓冲区中的数据量到达预设阈值；

或者，从开始向所述缓冲区中写入数据时开始计时，计时时间到达预设的时间阈值。

8.一种数据传输装置，其特征在于，包括数据处理模块和数据发送模块；

所述数据处理模块包括：

第一确定单元，用于在接收车辆发送的数据后，确定所述数据的重要性等级；

第一获取单元，用于获取所述待发送队列的占用率；

第二确定单元，用于根据所述待发送队列的占用率和所述数据的重要性等级确定目标数据；

写入单元，用于将所述目标数据写入预设的缓冲区中；

第一发送单元，用于当满足预设发送条件时，将所述缓冲区链接到待发送队列；

所述数据发送模块包括：

第二获取单元，用于获取所述待发送队列的成员数量；

判断单元，用于根据所述成员数量判断所述待发送队列是否为空；

第二发送单元，用于当所述待发送队列非空时，将位于所述待发送队列队首的缓冲区发送至目标设备。

9.根据权利要求8所述的装置，其特征在于，所述数据发送模块还包括：

计算单元，用于根据所述成员数量计算所述待发送队列的占用率。

10.一种计算机可读存储介质，其特征在于，所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现权利要求1-7任意一项所述的数据传输方法。