CN110536173A - 数据流链路中的元件连接的方法及装置 - Google Patents

Abstract

本申请公开了一种数据流链路中的元件连接的方法及装置，属于终端技术领域。在本申请中，连接源元件和数据解析元件时，获取在源元件中添加的第一衬垫的功能集，根据第一衬垫的功能集调整待连接的数据解析元件的第二衬垫的功能集，使第一衬垫的功能集和第二衬垫的功能集匹配，通过功能集匹配后的第一衬垫和第二衬垫，连接源元件和数据解析元件。由于本申请是直接通过第一衬垫的功能集对第二衬垫的功能集进行调整，使第一衬垫的功能集和第二衬垫的功能集匹配，因此，相较于相关技术中根据第一衬垫的功能集从多种数据解析元件中查找与第一衬垫匹配的第二衬垫，缩短了匹配需要的时间，减少了视频流数据传输的时延。

Description

数据流链路中的元件连接的方法及装置

技术领域

本申请涉及终端技术领域，特别涉及一种数据流链路中的元件连接的方法及装置。

背景技术

GStreamer是一个基于插件的开源多媒体框架库，利用GStreamer可以构建一系列流媒体应用。GStreamer中包括多种元件，通过这些元件可以构建用于解析RTSP(Real TimeStreaming Protocol，实时流传输协议)数据流的管道。其中，各个元件均包括衬垫，该衬垫是两个元件之间的连接接口，每个衬垫具有一个功能集，用于限制流入或流出相应元件的数据的类型。当两个元件通过衬垫连接之后，如果两个元件的衬垫的功能集不匹配，则这两个元件通过衬垫连接之后将无法传输数据。

相关技术中，用于解析RTSP数据流的管道中包括有源元件和数据解析元件。其中，为了保证源元件可以向连接的数据解析元件传输未解析的视频流数据，终端可以从源元件中获取待传输的视频流数据的数据类型，之后，终端可以调用Gstreamer中的typefind组件，根据该视频流数据的数据类型，获取传输该视频流数据的源元件的衬垫的功能集，根据源元件的衬垫的功能集从Gstreamer包括的多种解析元件中匹配能够解析该视频流数据的数据解析元件，也即衬垫的功能集与源元件的衬垫的功能集相同的数据解析元件。将源元件与匹配到的数据解析元件通过衬垫连接起来。

由此可见，相关技术需要调用typefind组件在GStreamer的众多解析元件中匹配能够解析当前视频流数据的解析元件，以保证两个元件连接之后可以实现数据的传输。由于GStreamer中包括的解析元件数量较多，因此，可能需要进行多次匹配才能找到相应的解析元件，因此耗费的时间较长，加大了视频流数据传输的时延。

发明内容

本申请实施例提供了一种数据流链路中的元件连接的方法及装置，可用于解决通过在众多数据解析元件中查找与源元件相匹配的数据解析元件来将源元件和数据解析元件连接起来时，耗费的时间较长所引起的视频流数据传输时延过大的问题。所述技术方案如下：

一方面，提供了一种数据流链路中的元件连接的方法，所述方法包括：

获取第一衬垫的功能集，所述第一衬垫是指在源元件中添加的衬垫；

根据所述第一衬垫的功能集对第二衬垫的功能集进行调整，以使调整后的第二衬垫的功能集与所述第一衬垫的功能集匹配，所述第二衬垫是指待与所述源元件连接的数据解析元件的衬垫；

通过功能集匹配后的所述第一衬垫和所述第二衬垫，连接所述源元件和所述数据解析元件。

可选地，所述根据所述第一衬垫的功能集对第二衬垫的功能集进行调整，包括：

根据所述第一衬垫的功能集，生成功能集配置信息；

根据所述功能集配置信息，对所述第二衬垫的功能集进行调整。

可选地，所述根据所述第一衬垫的功能集，生成功能集配置信息，包括：

根据所述第一衬垫的功能集生成功能集模板；

根据所述功能集模板生成字符串，将所述字符串作为所述功能集配置信息，所述字符串用于描述所述第一衬垫的功能集。

可选地，所述根据所述功能集配置信息，对所述第二衬垫的功能集进行调整，包括：

将所述功能集配置信息写入所述第二衬垫的功能集，得到调整后的第二衬垫的功能集。

可选地，所述通过功能集匹配后的所述第一衬垫和所述第二衬垫，连接所述源元件和所述数据解析元件，包括：

获取所述源元件的标识、所述第一衬垫的标识、所述数据解析元件的标识和所述第二衬垫的标识；

根据所述源元件的标识、所述第一衬垫的标识、所述数据解析元件的标识和所述第二衬垫的标识，通过调用衬垫连接函数接口，连接所述源元件和所述数据解析元件。

可选地，所述获取第一衬垫的功能集之前，还包括：

检测由所述源元件触发的用于指示已完成衬垫添加的衬垫添加信号；

当检测到所述衬垫添加信号时，执行所述通过调用指定回调函数，获取第一衬垫的功能集的步骤。

另一方面，提供了一种数据流链路中的元件连接的装置，所述装置包括：

获取模块，用于获取第一衬垫的功能集，所述第一衬垫是指在源元件中添加的衬垫；

匹配模块，用于根据所述第一衬垫的功能集对第二衬垫的功能集进行调整，以使调整后的第二衬垫的功能集与所述第一衬垫的功能集匹配，所述第二衬垫是指待与所述源元件连接的数据解析元件的衬垫；

连接模块，用于通过功能集匹配后的所述第一衬垫和所述第二衬垫，连接所述源元件和所述数据解析元件。

可选地，所述匹配模块包括：

生成单元，用于根据所述第一衬垫的功能集，生成功能集配置信息；

调整单元，用于根据所述功能集配置信息，对所述第二衬垫的功能集进行调整。

可选地，所述生成单元包括：

第一生成子单元，用于根据所述第一衬垫的功能集生成功能集模板；

第二生成子单元，用于根据所述功能集模板生成字符串，将所述字符串作为所述功能集配置信息，所述字符串用于描述所述第一衬垫的功能集。

可选地，所述调整单元具体用于：

将所述功能集配置信息写入所述第二衬垫的功能集，得到调整后的第二衬垫的功能集。

可选地，所述连接模块包括：

获取单元，用于获取所述源元件的标识、所述第一衬垫的标识、所述数据解析元件的标识和所述第二衬垫的标识；

连接单元，用于根据所述源元件的标识、所述第一衬垫的标识、所述数据解析元件的标识和所述第二衬垫的标识，通过调用衬垫连接函数接口，连接所述源元件和所述数据解析元件。

可选地，所装置还包括：

检测模块，用于检测由所述源元件触发的用于指示已完成衬垫添加的衬垫添加信号；

调用模块，用于当检测到所述衬垫添加信号时，执行所述通过调用指定回调函数，获取第一衬垫的功能集的步骤。

另一方面，提供了一种数据流链路中的元件连接的装置，所述装置包括处理器、通信接口、存储器和通信总线；

其中，所述处理器、所述通信接口和所述存储器通过所述通信总线完成相互间的通信；

所述存储器用于存放计算机程序；

所述处理器用于执行所述存储器上所存放的程序，以实现前述提供的数据流链路中的元件连接的方法。

另一方面，提供了一种计算机可读存储介质，所述存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现前述提供的数据流链路中的元件连接方法的步骤。

本申请实施例提供的技术方案带来的有益效果至少包括：

在本申请实施例中，连接源元件和数据解析元件时，获取在源元件中添加的第一衬垫的功能集，根据第一衬垫的功能集调整待连接的数据解析元件的第二衬垫的功能集，使第一衬垫的功能集和第二衬垫的功能集匹配，通过功能集匹配后的第一衬垫和第二衬垫，连接源元件和数据解析元件。由于本申请是直接通过第一衬垫的功能集对第二衬垫的功能集进行调整，使第一衬垫的功能集和第二衬垫的功能集匹配，因此，相较于相关技术中根据第一衬垫的功能集从多种数据解析元件中查找与第一衬垫匹配的第二衬垫，缩短了匹配需要的时间，减少了视频流数据传输的时延。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的一种数据流传输系统示意图；

图2是本申请实施例提供的一种数据流链路中的元件连接的方法流程图；

图3是本申请实施例提供的一种数据流链路中的元件连接装置结构示意图；

图4是本申请实施例提供的一种匹配模块的结构示意图；

图5是本申请实施例提供的一种连接模块的结构示意图；

图6是本申请实施例提供的一种用于数据流链路中的元件连接终端的结构示意图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。

在对本申请实施例进行详细的解释说明之前，先对本申请实施例涉及的应用场景予以介绍。

在网络上传输视频或音频通常采用流式传输，即视频、音频等媒体由服务器向用户终端连续、实时的传送，用户端不需要等到整个文件全部下载完成，只需待数据达到一定的数量后，即可进行播放，这样，可以缩短用户等待的时间。当用户端播放从服务器收到的视频流数据时，可以先对该视频流数据进行解析。当前，用户端可以通过由GStreamer框架下提供的多个元件连接得到的管道来对视频流数据进行解析。本申请实施例提供的数据流链路中的元件连接的方法，即可以用于对管道中的源元件和数据解析元件进行连接，以对视频流数据进行解析。

接下来对本申请实施例提供的数据流链路中的元件连接的方法所涉及的系统架构进行介绍。

图1是本申请实施例提供的一种数据流传输系统示意图。如图1所示，该数据流传输系统100包括服务器101和用户端102。服务器101和用户端102之间通过无线或有线方式连接以进行通信。

其中，服务器101在接收到用户端102发送的视频流数据获取请求后，可以根据该视频流数据获取请求，从存储的视频流数据中获取用户端102请求的视频流数据，服务器101可以对获取的视频流数据进行处理，再通过流式协议将经过处理的视频流数据传输给用户端102，供用户在线观看视频。可选地，服务器也可以实时接收其他用户端正在上传的直播视频流数据，再通过流式协议将该直播视频流数据传输给用户端102，供用户在线观看直播。

用户端102可以接收服务器101传输的视频流数据并进行播放。在进行播放前，用户端102可以通过连接多个元件形成管道，之后，通过该管道对视频流数据进行解析，之后，用户端102可以对解析后的视频流数据进行播放。

在本申请实施例中，服务器101可以是用于上述视频流传输的一台服务器或者一个服务器集群。用户端102可以为智能手机、平板电脑、台式电脑等设备，本申请实施例对此不做限定。

接下来对本申请实施例提供的数据流链路中的元件连接的方法进行介绍。

图2是本申请实施例提供的一种数据流链路中的元件连接的方法流程图。该方法可以应用于终端中，该终端可以是指图1中的用户端102。如图2所示，该方法包括以下步骤：

步骤201：检测由源元件触发的用于指示已完成衬垫添加的衬垫添加信号。

在本申请实施例中，终端在接收到服务器发送的视频流数据之后，可以调用工厂函数创建多个元件，其中，多个元件中包括源元件和数据解析元件。在创建多个元件之后，终端可以对该多个元件进行连接，以形成管道，以便后续通过该管道来解析视频流数据。

需要说明的是，源元件是管道中的第一个元件，也即，源元件是管道的入口。该源元件可以将终端接收到的视频流数据输出至下一个元件，也即数据解析元件，由数据解析元件对该视频流数据进行解析。其中，为了保证源元件能够将视频流数据传输至数据解析元件，源元件与数据解析元件可以通过各自的衬垫进行连接。基于此，该源元件可以在获取的视频流数据达到指定数量后，添加一个第一衬垫，该第一衬垫为源衬垫。源元件可以通过该第一衬垫连接数据解析元件，进而向数据解析元件传输视频流数据。

当源元件添加第一衬垫后，源元件可以触发衬垫添加信号。当终端检测到该源元件触发的衬垫添加信号，即可以调用指定回调函数来执行步骤202-204，以实现源元件与数据解析元件之间的连接。

需要说明的是，每个管道包含一个总线，总线可以将管道的消息分发到该管道的各个元件中。终端可以在管道的总线上设置一个消息处理器，并通过这个消息处理器来侦听管道的消息。另外，终端可以在管道中定义衬垫添加信号的信号标识，并将该信号标识与指定回调函数进行绑定。其中，该指定回调函数即为前述介绍的用于实现源元件与数据解析元件的连接的函数。总线可以轮询消息处理器是否接收到消息。在本申请实施例中，当源元件触发衬垫添加信号后，总线可以通过消息处理器接收该衬垫添加信号。之后，总线可以通过前述的绑定关系调用指定回调函数，进而通过该指定回调函数来实现步骤202-204。其中，终端可以获取源元件的标识。之后，终端可以调用绑定函数，将该源元件的标识、定义的信号标识和指定回调函数的函数名作为绑定函数的参数，进而将该信号标识与指定回调函数绑定在一起。

示例性地，终端使用GStreamer的总线时，可以通过调用gst_bus_add_watch函数，在管道的总线上设置消息处理器，并通过该消息处理器来侦听管道。终端在管道的总线上设置了一个消息处理器后，可以将信号标识与指定回调函数进行绑定。其中，绑定函数可以为g_signal_connect函数，指定回调函数的函数名可以为“cb_new_rtspsrc_pad”，源元件的标识为source，定义的衬垫添加信号的信号标识为pad added。终端可以通过调用g_signal_connect函数，将source，“pad-added”，cb_new_rtspsrc_pad，rtppay作为g_signal_connect函数的参数，调用g_signal_connect(source,"pad-added",G_CALLBACK(cb_new_rtspsrc_pad),rtppay)函数，将“pad added”和“cb_new_rtspsrc_pad”函数绑定在一起，其中，rtppay为传递给指定回调函数的参数。在此基础上，在源元件衬垫添加完成后，源元件可以触发衬垫添加信号，也即pad added信号。总线上的消息处理器在检测到padadded信号时，根据之前的绑定关系，可以调用与该pad added信号绑定的指定回调函数。

在另一种可能的实现方式下，终端可以不用在总线上设置一个消息处理器，而是通过管道内部的主循环使总线轮询是否接收到消息，当总线侦听到该衬垫添加信号后，可以调用指定回调函数，进而通过该指定回调函数来实现步骤202-204。

示例性地，在这种实现方式下，终端可以通过调用gst_bus_peek()函数，该函数可以使总线直接侦听是否有新的消息。

在又一种可能的实现方式时下，用户可以基于Gstreamer框架创建一个新的元件，该元件用于当检测到衬垫添加信号时直接调用指定回调函数。终端可以将用户创建的元件连接在管道中。当源元件发出衬垫添加信号时，该元件可以检测衬垫添加信号。在该元件检测到衬垫添加信号后，可以直接调用指定回调函数，进而通过该指定回调函数来实现步骤202-204。

步骤202：当检测到衬垫添加信号时，获取第一衬垫的功能集，第一衬垫是指在源元件中添加的衬垫。

需要说明的是，由于将衬垫添加信号与指定回调函数进行了绑定，因此，当消息处理器检测到衬垫添加信号后，即可以调用与其绑定的指定回调函数，并通过该指定回调函数来获取第一衬垫的功能集，并通过该指定回调函数来实现下述步骤203和204，以此来完成源元件和数据解析元件之间的连接。

步骤203：根据第一衬垫的功能集对第二衬垫的功能集进行调整，以使调整后的第二衬垫的功能集与第一衬垫的功能集匹配，第二衬垫是指待与源元件连接的数据解析元件的衬垫。

其中，数据解析元件可以包括源衬垫和接收衬垫，源衬垫可以用于向该数据解析元件的下一个元件输出视频流数据，接收衬垫可以用于接收源元件输出的视频流数据。其中，该第二衬垫即为该数据解析元件的接收衬垫。

在本申请实施例中，源元件和数据解析元件间通过衬垫连接，衬垫可以限制通过它的视频流数据的类型，只有当源元件的衬垫和数据解析元件的衬垫允许通过的视频流数据的类型匹配时，才可以通过衬垫将源元件和数据解析元件连接起来。衬垫的功能集用于描述可以通过衬垫的视频流数据类型，因此，可以将源元件的衬垫的功能集和数据解析元件的衬垫的功能集进行匹配，从而使得源元件的衬垫和数据解析元件的衬垫允许通过的视频流数据的类型相同，这样，就可以通过衬垫将源元件和数据解析元件连接起来。基于此，终端在通过调用回调函数获取第一衬垫的功能集后，可以继续通过该回调函数对第一衬垫的功能集进行处理，将经过处理的第一衬垫的功能集写入第二衬垫中，以使第二衬垫的功能集和第一衬垫的功能集匹配。

示例性地，在对第二衬垫的功能集进行调整时，终端可以根据第一衬垫的功能集，生成功能集配置信息，根据功能集配置信息，对第二衬垫的功能集进行调整。

其中，终端可以根据第一衬垫的功能集生成功能集模板，根据功能集模板生成字符串，将字符串作为功能集配置信息。其中，该字符串用于描述第一衬垫的功能集。

需要说明的是，终端可以通过调用功能集模板获取函数复制第一衬垫的功能集，并将复制得到的功能集作为描述衬垫的功能集模板。获得功能集模板后，终端可以通过调用字符串转化函数将这个用于描述衬垫的功能集模板转化为字符串，也即，使用该字符串描述功能集模板。

示例性地，上述功能集模板获取函数可以为“gst_pad_get_pad_template_caps”函数，假设第一衬垫的标识为srcpad，终端可以将第一衬垫的标识作为该功能集模板获取函数的参数，调用gst_pad_get_pad_template_caps(srcpad)函数，从而复制第一衬垫的功能集，并将复制得到第一衬垫的功能集作为功能集模板caps。之后，终端可以调用字符串转化函数“gst_caps_to_string”，并将功能集模板caps作为该字符串转化函数的参数，通过该字符串转换函数将该功能集模板caps转化为字符串。此时，该字符串可以用于描述功能集模板caps，也即该字符串可以用于描述第一衬垫的功能集。

终端在根据功能集模板生成用于描述第一衬垫的功能集的字符串之后，可以将该字符串作为功能集配置信息，并将该功能集配置信息写入第二衬垫的功能集，从而得到调整后的第二衬垫的功能集。

终端在将用于描述第一衬垫的功能集配置信息写入到第二衬垫的功能集内之后，第二衬垫的功能集中相当于包含了第一衬垫的功能集，这样，第一衬垫允许通过的数据类型，第二衬垫也是允许通过的，也即第二衬垫与第一衬垫是匹配的。如此，源元件与数据解析元件通过第一衬垫和第二衬垫连接之后，通过第一衬垫输出的视频流数据的数据类型必然是第二衬垫所允许通过的数据类型，这样，数据解析元件即可以通过第二衬垫成功接收源元件传输的视频流数据。

步骤204：通过功能集匹配后的第一衬垫和第二衬垫，连接源元件和数据解析元件。

其中，由于通过功能集匹配后的第二衬垫允许通过第一衬垫所允许通过的数据类型的视频流数据，因此，在对第二衬垫的功能集进行调整得到与第一衬垫相匹配的功能集之后，终端可以直接通过匹配后的第一衬垫和第二衬垫连接源元件和数据解析元件。

需要说明的是，终端可以获取源元件的标识、第一衬垫的标识、数据解析元件的标识和第二衬垫的标识，根据源元件的标识、第一衬垫的标识、数据解析元件的标识和第二衬垫的标识，通过调用衬垫连接函数接口，连接源元件和数据解析元件。

其中，源元件的标识可以为源元件的名称，第一衬垫的标识可以为第一衬垫的名称，数据解析元件的标识可以为数据解析元件的名称，第二衬垫的标识可以为第二衬垫的名称。终端在获取源元件的标识，第一衬垫的标识，数据解析元件的标识和第二衬垫的标识后，可以调用衬垫连接函数，将获取到的各个标识作为衬垫连接函数的参数，通过该衬垫连接函数连接第一衬垫和第二衬垫。由于第一衬垫和第二衬垫允许通过的视频流数据类型相同，因此通过第一衬垫和第二衬垫连接的源元件和数据解析元件间可以进行视频流数据的传输。

示例性的，该衬垫连接函数可以为“gst_element_link_pads”函数，源元件的标识可以为source，第一衬垫的标识即源元件的衬垫的标识可以为srcpad，数据解析元件的标识可以为parser，第二衬垫即数据解析元件的衬垫的标识可以为sinkpad。终端获取到source，srcpad，parser，sinkpad这几个标识后，可以将source，srcpad，parser，sinkpad作为“gst_element_link_pads”函数的参数，调用gst_element_link_pads(source，“srcpad”，parser，“sinkpad”)函数，通过源元件的衬垫srcpad和数据解析元件的衬垫sinkpad，将源元件source和数据解析元件parser连接起来。

在本申请实施例中，连接源元件和数据解析元件时，获取在源元件中添加的第一衬垫的功能集，根据第一衬垫的功能集调整待连接的数据解析元件的第二衬垫的功能集，使第一衬垫的功能集和第二衬垫的功能集匹配，通过功能集匹配后的第一衬垫和第二衬垫，连接源元件和数据解析元件。由于本申请是直接通过第一衬垫的功能集对第二衬垫的功能集进行调整，使第一衬垫的功能集和第二衬垫的功能集匹配，因此，相较于相关技术中根据第一衬垫的功能集从多种数据解析元件中查找与第一衬垫匹配的第二衬垫，缩短了匹配需要的时间，减少了视频流数据传输的时延。

接下来对本申请实施例提供的数据流链路中的元件连接的装置进行介绍。

参见图3，本申请实施例提供了一种数据流链路中的元件连接的装置300，该数据流链路中的元件连接的装置可以应用于用户端中，该装置300包括：

获取模块301，用于获取第一衬垫的功能集，第一衬垫是指在源元件中添加的衬垫；

匹配模块302，用于根据第一衬垫的功能集对第二衬垫的功能集进行调整，以使调整后的第二衬垫的功能集与第一衬垫的功能集匹配，第二衬垫是指待与源元件连接的数据解析元件的衬垫；

连接模块303，用于通过功能集匹配后的第一衬垫和第二衬垫，连接源元件和数据解析元件。

可选地，参见图4，该匹配模块302包括：

生成单元3021，用于根据第一衬垫的功能集，生成功能集配置信息；

调整单元3022，用于根据功能集配置信息，对第二衬垫的功能集进行调整。

可选地，该生成单元3021包括：

第一生成子单元，用于根据第一衬垫的功能集生成功能集模板；

第二生成子单元，用于根据功能集模板生成字符串，将字符串作为功能集配置信息，字符串用于描述第一衬垫的功能集。

可选地，该调整单元具体用于：

将功能集配置信息写入第二衬垫的功能集，得到调整后的第二衬垫的功能集。

可选地，参见图5，该连接模块303包括：

获取单元3031，用于获取源元件的标识、第一衬垫的标识、数据解析元件的标识和第二衬垫的标识；

连接单元3032，用于根据源元件的标识、第一衬垫的标识、数据解析元件的标识和第二衬垫的标识，通过调用衬垫连接函数接口，连接源元件和数据解析元件。

可选地，该装置还包括：

检测模块，用于检测由源元件触发的用于指示已完成衬垫添加的衬垫添加信号；

调用模块，用于当检测到衬垫添加信号时，执行通过调用指定回调函数，获取第一衬垫的功能集的步骤；

在本申请实施例中，通过创建一系列元件并把它们连接起来,从而让数据流在这个被连接的各个元件之间传输，其中这一系列元件包括源元件和数据解析元件。在连接源元件和数据解析元件时，获取在源元件中添加的第一衬垫的功能集，根据第一衬垫的功能集调整待连接的数据解析元件的第二衬垫的功能集，通过功能集匹配后的第一衬垫和第二衬垫，连接源元件和数据解析元件。由于本申请是直接通过第一衬垫的功能集对第二衬垫的功能集进行调整，因此，相较于现有技术中根据第一衬垫的功能集从多种解析元件中寻找与第一衬垫匹配的第二衬垫，缩短了匹配需要的时间，减少视频流数据传输的时延。

需要说明的是：上述实施例提供的数据流链路中的元件连接装置在数据流链路中的元件连接时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的数据流链路中的元件连接的方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。

图6是根据一示例性实施例示出的一种用于数据流链路中的元件连接的终端600的结构框图。其中，该终端600可以是笔记本电脑、台式电脑等。

通常，终端600包括有：处理器601和存储器602。

处理器601可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器601可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)、PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器601也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(Central ProcessingUnit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器601可以在集成有GPU(Graphics Processing Unit，图像处理器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器601还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。

存储器602可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器602还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器602中的非暂态的计算机可读存储介质用于存储至少一个指令，其中，，该至少一个指令用于被处理器601所执行以实现本申请中方法实施例提供的数据流链路中的元件连接的方法。

在一些实施例中，终端600还可选包括有：外围设备接口603和至少一个外围设备。处理器601、存储器602和外围设备接口603之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口603相连。具体地，外围设备包括：射频电路604、触摸显示屏605、摄像头606、音频电路607、定位组件608和电源609中的至少一种。

外围设备接口603可被用于将I/O(Input/Output，输入/输出)相关的至少一个外围设备连接到处理器601和存储器602。在一些实施例中，处理器601、存储器602和外围设备接口603被集成在同一芯片或电路板上；在一些其他实施例中，处理器601、存储器602和外围设备接口603中的任意一个或两个可以在单独的芯片或电路板上实现，本实施例对此不加以限定。

射频电路604用于接收和发射RF(Radio Frequency，射频)信号，也称电磁信号。射频电路604通过电磁信号与通信网络以及其他通信设备进行通信。射频电路604将电信号转换为电磁信号进行发送，或者，将接收到的电磁信号转换为电信号。可选地，射频电路604包括：天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路604可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于：万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity，无线保真)网络。在一些实施例中，射频电路604还可以包括NFC(Near Field Communication，近距离无线通信)有关的电路，本申请对此不加以限定。

显示屏605用于显示UI(User Interface，用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏605是触摸显示屏时，显示屏605还具有采集在显示屏605的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器601进行处理。此时，显示屏605还可以用于提供虚拟按钮和/或虚拟键盘，也称软按钮和/或软键盘。在一些实施例中，显示屏605可以为一个，设置终端600的前面板；在另一些实施例中，显示屏605可以为至少两个，分别设置在终端600的不同表面或呈折叠设计；在再一些实施例中，显示屏605可以是柔性显示屏，设置在终端600的弯曲表面上或折叠面上。甚至，显示屏605还可以设置成非矩形的不规则图形，也即异形屏。显示屏605可以采用LCD(LiquidCrystal Display，液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。需要说明的是，在本申请实施例中，当该终端600为横屏终端时，该终端600的显示屏的宽高比大于1，例如，该终端600的显示屏的宽高比可以为16:9或4:3。当该终端600为竖屏终端时，则该终端600的显示屏的宽高比小于1，例如，该终端600的显示屏的宽高比可以为9:18或3:4等。

摄像头组件606用于采集图像或视频。可选地，摄像头组件606包括前置摄像头和后置摄像头。通常，前置摄像头设置在终端的前面板，后置摄像头设置在终端的背面。在一些实施例中，后置摄像头为至少两个，分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种，以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality，虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中，摄像头组件606还可以包括闪光灯。闪光灯可以是单色温闪光灯，也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合，可以用于不同色温下的光线补偿。

音频电路607可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波，并将声波转换为电信号输入至处理器601进行处理，或者输入至射频电路604以实现语音通信。出于立体声采集或降噪的目的，麦克风可以为多个，分别设置在终端600的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器601或射频电路604的电信号转换为声波。扬声器可以是传统的薄膜扬声器，也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时，不仅可以将电信号转换为人类可听见的声波，也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中，音频电路607还可以包括耳机插孔。

定位组件608用于定位终端600的当前地理位置，以实现导航或LBS(LocationBased Service，基于位置的服务)。定位组件608可以是基于美国的GPS(GlobalPositioning System，全球定位系统)、中国的北斗系统或欧盟的伽利略系统的定位组件。

电源609用于为终端600中的各个组件进行供电。电源609可以是交流电、直流电、一次性电池或可充电电池。当电源609包括可充电电池时，该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池，无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。

在一些实施例中，终端600还包括有一个或多个传感器610。该一个或多个传感器610包括但不限于：加速度传感器611、陀螺仪传感器612、压力传感器613、指纹传感器614、光学传感器615以及接近传感器616。

加速度传感器611可以检测以终端600建立的坐标系的三个坐标轴上的加速度大小。比如，加速度传感器611可以用于检测重力加速度在三个坐标轴上的分量。处理器601可以根据加速度传感器611采集的重力加速度信号，控制触摸显示屏605以横向视图或纵向视图进行用户界面的显示。加速度传感器611还可以用于游戏或者用户的运动数据的采集。

陀螺仪传感器612可以检测终端600的机体方向及转动角度，陀螺仪传感器612可以与加速度传感器611协同采集用户对终端600的3D动作。处理器601根据陀螺仪传感器612采集的数据，可以实现如下功能：动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。

压力传感器613可以设置在终端600的侧边框和/或触摸显示屏605的下层。当压力传感器613设置在终端600的侧边框时，可以检测用户对终端600的握持信号，由处理器601根据压力传感器613采集的握持信号进行左右手识别或快捷操作。当压力传感器613设置在触摸显示屏605的下层时，由处理器601根据用户对触摸显示屏605的压力操作，实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。

指纹传感器614用于采集用户的指纹，由处理器601根据指纹传感器614采集到的指纹识别用户的身份，或者，由指纹传感器614根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时，由处理器601授权该用户执行相关的敏感操作，该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器614可以被设置终端600的正面、背面或侧面。当终端600上设置有物理按键或厂商Logo时，指纹传感器614可以与物理按键或厂商Logo集成在一起。

光学传感器615用于采集环境光强度。在一个实施例中，处理器601可以根据光学传感器615采集的环境光强度，控制触摸显示屏605的显示亮度。具体地，当环境光强度较高时，调高触摸显示屏605的显示亮度；当环境光强度较低时，调低触摸显示屏605的显示亮度。在另一个实施例中，处理器601还可以根据光学传感器615采集的环境光强度，动态调整摄像头组件606的拍摄参数。

接近传感器616，也称距离传感器，通常设置在终端600的前面板。接近传感器616用于采集用户与终端600的正面之间的距离。在一个实施例中，当接近传感器616检测到用户与终端600的正面之间的距离逐渐变小时，由处理器601控制触摸显示屏605从亮屏状态切换为息屏状态；当接近传感器616检测到用户与终端600的正面之间的距离逐渐变大时，由处理器601控制触摸显示屏605从息屏状态切换为亮屏状态。

也即是，本申请实施例不仅提供了一种终端，包括处理器和用于存储处理器可执行指令的存储器，其中，处理器被配置为执行图2所示的数据流链路中的元件连接的方法，而且，本申请实施例还提供了一种计算机可读存储介质，该存储介质内存储有计算机程序，该计算机程序被处理器执行时可以实现图2所示的数据流链路中的元件连接的方法。

本申请实施例还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述图2所示实施例提供的数据流链路中的元件连接的方法。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。

以上所述仅为本申请的可选实施例，并不用以限制本申请，凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (12)

1.一种数据流链路中的元件连接的方法，其特征在于，所述方法包括：

获取第一衬垫的功能集，所述第一衬垫是指在源元件中添加的衬垫；

根据所述第一衬垫的功能集对第二衬垫的功能集进行调整，以使调整后的第二衬垫的功能集与所述第一衬垫的功能集匹配，所述第二衬垫是指待与所述源元件连接的数据解析元件的衬垫；

通过功能集匹配后的所述第一衬垫和所述第二衬垫，连接所述源元件和所述数据解析元件。

2.根据权利要求1所述的方法，其特征在于，所述根据所述第一衬垫的功能集对第二衬垫的功能集进行调整，包括：

根据所述第一衬垫的功能集，生成功能集配置信息；

根据所述功能集配置信息，对所述第二衬垫的功能集进行调整。

3.根据权利要求2所述的方法，其特征在于，所述根据所述第一衬垫的功能集，生成功能集配置信息，包括：

根据所述第一衬垫的功能集生成功能集模板；

根据所述功能集模板生成字符串，将所述字符串作为所述功能集配置信息，所述字符串用于描述所述第一衬垫的功能集。

4.根据权利要求2或3所述的方法，其特征在于，所述根据所述功能集配置信息，对所述第二衬垫的功能集进行调整，包括：

将所述功能集配置信息写入所述第二衬垫的功能集，得到调整后的第二衬垫的功能集。

5.根据权利要求1-4任一所述的方法，其特征在于，所述通过功能集匹配后的所述第一衬垫和所述第二衬垫，连接所述源元件和所述数据解析元件，包括：

获取所述源元件的标识、所述第一衬垫的标识、所述数据解析元件的标识和所述第二衬垫的标识；

根据所述源元件的标识、所述第一衬垫的标识、所述数据解析元件的标识和所述第二衬垫的标识，通过调用衬垫连接函数接口，连接所述源元件和所述数据解析元件。

6.根据权利要求1-4任一所述的方法，其特征在于，所述获取第一衬垫的功能集之前，还包括：

检测由所述源元件触发的用于指示已完成衬垫添加的衬垫添加信号；

当检测到所述衬垫添加信号时，执行所述获取第一衬垫的功能集的步骤。

7.一种数据流链路中的元件连接的装置，其特征在于，所述装置包括：

获取模块，用于获取第一衬垫的功能集，所述第一衬垫是指在源元件中添加的衬垫；

匹配模块，用于根据所述第一衬垫的功能集对第二衬垫的功能集进行调整，以使调整后的第二衬垫的功能集与所述第一衬垫的功能集匹配，所述第二衬垫是指待与所述源元件连接的数据解析元件的衬垫；

连接模块，用于通过功能集匹配后的所述第一衬垫和所述第二衬垫，连接所述源元件和所述数据解析元件。

8.根据权利要求7所述的装置，其特征在于，所述匹配模块包括：

生成单元，用于根据所述第一衬垫的功能集，生成功能集配置信息；

调整单元，用于根据所述功能集配置信息，对所述第二衬垫的功能集进行调整。

9.根据权利要求8所述的装置，其特征在于，所述生成单元包括：

第一生成子单元，用于根据所述第一衬垫的功能集生成功能集模板；

第二生成子单元，用于根据所述功能集模板生成字符串，将所述字符串作为所述功能集配置信息，所述字符串用于描述所述第一衬垫的功能集。

10.根据权利要求8或9所述的装置，其特征在于，所述调整单元具体用于：

将所述功能集配置信息写入所述第二衬垫的功能集，得到调整后的第二衬垫的功能集。

11.根据权利要求7-10任一所述的装置，其特征在于，所述连接模块包括：

获取单元，用于获取所述源元件的标识、所述第一衬垫的标识、所述数据解析元件的标识和所述第二衬垫的标识；

连接单元，用于根据所述源元件的标识、所述第一衬垫的标识、所述数据解析元件的标识和所述第二衬垫的标识，通过调用衬垫连接函数接口，连接所述源元件和所述数据解析元件。

12.根据权利要求7-10任一所述的装置，其特征在于，所述装置还包括：

检测模块，用于检测由所述源元件触发的用于指示已完成衬垫添加的衬垫添加信号；

调用模块，用于当检测到所述衬垫添加信号时，执行所述通过调用指定回调函数，获取第一衬垫的功能集的步骤。