CN107729523A - 数据服务方法、电子装置及存储介质 - Google Patents

Abstract

本发明提供了一种数据服务方法，包括：获取步骤：获取数据服务请求；配置步骤：解析所述数据服务请求，根据解析结果配置算法链；执行步骤：执行所配置的算法链，从数据库中的原始数据中获取目标数据；输出步骤：输出所述目标数据。本发明还提供一种电子装置及存储介质。利用本发明可以使提供的数据服务具有良好的可扩展性、可靠性、时效性和可运维性。

Description

数据服务方法、电子装置及存储介质

技术领域

本发明涉及计算机技术领域，尤其涉及一种数据服务方法、电子装置及存储介质。

背景技术

随着互联网技术的发展，人类拥有的信息量呈现爆炸式增长。为了让人们能够快速地在海量数据中获取所需要的数据，市场上出现了各种数据服务引擎，这些数据服务引擎能够根据人们的输入提供相应的数据服务。例如关键词检索、查询知识百科、查找关联词等。

然而，目前的数据服务引擎通常提供的数据服务功能较为单一，在需要扩展多种数据服务功能时，可扩展性较差，而且提供数据服务的可靠性、时效性和可运维性不足。

发明内容

鉴于以上原因，有必要提供一种数据服务方法，可以使提供的数据服务具有良好的可扩展性、可靠性和可运维性，且处理效率可以得到提升。

为实现上述目的，本发明提供一种数据方法，该方法包括：获取步骤：获取数据服务请求；配置步骤：解析所述数据服务请求，根据解析结果配置算法链；执行步骤：执行所配置的算法链，从数据库中的原始数据中获取目标数据；输出步骤：输出所述目标数据。

优选地，所述配置步骤包括：解析所述数据服务请求，确定该数据服务请求对应的各个计算需求；确定各个计算需求对应的算子和算子组合规则；从程序配置文件中获取所确定的算子；根据所获取的算子和所述算子组合规则配置算法链。

优选地，所述算法链由各个计算需求对应的算子串行构成。

可选地，每个计算需求对应一个或多个相同算子，所述一个或多个相同算子在所述算法链中并行执行，并按照预设优先顺序输出执行结果。

可选地，所述原始数据在数据库中的存储格式包括：简单类型：主键只有一项相关内容和权重；无序列表：主键有多项相关内容，该多项相关内容之间为无序的；有序列表：主键有多项相关内容，该多项相关内容之前为有序的。

可选地，所述输出步骤包括：格式化输出所述目标数据。

为实现上述目的，本发明还提供一种电子装置，该电子装置包括存储器和处理器，所述存储器中包括数据服务程序，该数据服务程序被所述处理器执行时实现如下步骤：获取步骤：获取数据服务请求；配置步骤：解析所述数据服务请求，根据解析结果配置算法链；执行步骤：执行所配置的算法链，从数据库中的原始数据中获取目标数据；输出步骤：输出所述目标数据。

优选地，所述配置步骤包括：解析所述数据服务请求，确定该数据服务请求对应的各个计算需求；确定各个计算需求对应的算子和算子组合规则；从程序配置文件中获取所确定的算子；根据所获取的算子和所述算子组合规则配置算法链。

优选地，所述算法链由各个计算需求对应的算子串行构成。

可选地，每个计算需求对应一个或多个相同算子，所述一个或多个相同算子在所述算法链中并行执行，并按照预设优先顺序输出执行结果。

可选地，所述原始数据在数据库中的存储格式包括：简单类型：主键只有一项相关内容和权重；无序列表：主键有多项相关内容，该多项相关内容之间为无序的；有序列表：主键有多项相关内容，该多项相关内容之前为有序的。

可选地，所述输出步骤包括：格式化输出所述目标数据。

此外，为实现上述目的，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质中包括数据服务程序，该数据服务程序被处理器执行时，实现如上所述的数据服务方法的任意步骤。

本发明提出的数据服务方法、电子装置及计算机可读存储介质，在接收到数据服务请求后，可以通过算法链中的算子以流水线的方式对在线数据服务请求进行响应，且对算法链中的算子输入输出的数据格式进行封装处理，使数据格式保持统一，从而使算子之间具有松耦合性，而算子之间的数据又紧密结合，因此提供的数据服务具有良好的可扩展性、可靠性、时效性和可运维性。

附图说明

图1为本发明电子装置较佳实施例的运行环境示意图；

图2为本发明电子装置与客户端较佳实施例的交互示意图；

图3为图1中数据服务程序的程序模块图；

图4为算法链中的算子示意图；

图5为一个示例中用户的输入界面示意图；

图6为一个示例中目标数据的展示界面示意图；

图7为本发明数据服务方法较佳实施例的流程图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

下面将参考若干具体实施例来描述本发明的原理和精神。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本领域的技术人员知道，本发明的实施方式可以实现为一种方法、装置、设备、系统或计算机程序产品。因此，本发明可以具体实现为完全的硬件、完全的软件(包括固件、驻留软件、微代码等)，或者硬件和软件结合的形式。

根据本发明的实施例，提出了一种数据服务方法、电子装置及存储介质。

参照图1所示，为本发明电子装置较佳实施例的运行环境示意图。

该电子装置1可以是服务器、便携式计算机、桌上型计算机等具有存储和运算功能的终端设备。

该电子装置1包括存储器11、处理器12、网络接口13及通信总线14。所述网络接口13可选地可以包括标准的有线接口和无线接口(如WI-FI接口)。通信总线14用于实现上述组件之间的连接通信。

存储器11包括至少一种类型的可读存储介质。所述至少一种类型的可读存储介质可为如闪存、硬盘、多媒体卡、卡型存储器等的非易失性存储介质。在一些实施例中，所述可读存储介质可以是所述电子装置1的内部存储单元，例如该电子装置1的硬盘。在另一些实施例中，所述可读存储介质也可以是所述电子装置1的外部存储器11，例如所述电子装置1上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。

在本实施例中，所述存储器11的可读存储介质通常用于存储安装于所述电子装置1的数据服务程序10及程序配置文件、存储有原始数据的数据库等。所述存储器11还可以用于暂时地存储已经输出或者将要输出的数据。

处理器12在一些实施例中可以是一中央处理器(Central Processing Unit,CPU)，微处理器或其他数据处理芯片，用于运行存储器11中存储的程序代码或处理数据，例如执行数据服务程序10等。

图1仅示出了具有组件11-14以及数据服务程序10的电子装置1，但是应理解的是，并不要求实施所有示出的组件，可以替代的实施更多或者更少的组件。

可选地，该电子装置1还可以包括用户接口，用户接口可以包括输入单元比如键盘(Keyboard)、语音输入装置比如麦克风(microphone)等具有语音识别功能的设备、语音输出装置比如音响、耳机等。可选地，用户接口还可以包括标准的有线接口、无线接口。

可选地，该电子装置1还可以包括显示器，显示器也可以称为显示屏或显示单元。在一些实施例中可以是LED显示器、液晶显示器、触控式液晶显示器以及有机发光二极管(Organic Light-Emitting Diode，OLED)显示器等。显示器用于显示在电子装置1中处理的信息以及用于显示可视化的用户界面。

可选地，该电子装置1还包括触摸传感器。所述触摸传感器所提供的供用户进行触摸操作的区域称为触控区域。此外，这里所述的触摸传感器可以为电阻式触摸传感器、电容式触摸传感器等。而且，所述触摸传感器不仅包括接触式的触摸传感器，也可包括接近式的触摸传感器等。此外，所述触摸传感器可以为单个传感器，也可以为例如阵列布置的多个传感器。用户可以通过触摸所述触控区域启动数据服务程序10。

此外，该电子装置1的显示器的面积可以与所述触摸传感器的面积相同，也可以不同。可选地，将显示器与所述触摸传感器层叠设置，以形成触摸显示屏。该装置基于触摸显示屏侦测用户触发的触控操作。

该电子装置1还可以包括射频(Radio Frequency，RF)电路、传感器和音频电路等等，在此不再赘述。

参阅图2所示，为本发明电子装置与客户端较佳实施例的交互示意图。所述数据服务程序10运行于电子装置1中，在图2中所述电子装置1的较佳实施例为服务器。所述电子装置1通过网络与客户端2连接。所述客户端2可以运行于各类终端设备中，例如智能手机、便携式计算机等。用户通过客户端2登录至所述电子装置1后，通过所述数据服务方法，可以为用户提供各种数据服务，例如从海量病例中查询相似病例、以关键词查询关联词、查询疾病百科等。

在图1所示的电子装置1较佳实施例的运行环境示意图中，包含可读存储介质的存储器11中可以包括操作系统、数据服务程序10、程序配置文件及数据库。处理器12执行存储器11中存储的数据服务程序10时实现如下步骤：

获取步骤：获取数据服务请求；

配置步骤：解析所述数据服务请求，根据解析结果配置算法链；

执行步骤：执行所配置的算法链，从数据库中的原始数据中获取目标数据；

输出步骤：输出所述目标数据。

其中，所述配置步骤包括：

解析所述数据服务请求，确定该数据服务请求对应的各个计算需求；

确定各个计算需求对应的算子和算子组合规则；

从程序配置文件中获取所确定的算子；

根据所获取的算子和所述算子组合规则配置算法链。

具体原理请参照下述图3关于数据服务程序10的程序模块图及图7关于数据服务方法较佳实施例的流程图的介绍。

参照图3所示，为图1中数据服务程序10的程序模块图。在本实施例中，数据服务程序10被分割为多个模块，该多个模块被存储于存储器11中，并由处理器12执行，以完成本发明。本发明所称的模块是指能够完成特定功能的一系列计算机程序指令段。

所述数据服务程序10可以被分割为：获取模块110、配置模块120、执行模块130及输出模块140。

获取模块110，用于获取数据服务请求。在本实施例中，可以从客户端的用户界面中获取用户输入的数据服务请求，例如输入关键词并请求查询该关键词的关联词。

配置模块120，用于解析所述数据服务请求，根据解析结果配置算法链。

具体而言，电子装置1的程序配置文件中存储有若干个算子(也称为插件)。每个算子分别对应一个特定的计算需求。例如算子CommonHead对应的计算需求为从页面获取输入数据并存入系统通用数据结构MyTupleList，而算子Hanlp对应的计算需求为关键词抽取。所述算子由开发人员预先按照规则编写开发并存入程序配置文件中，供所述数据服务程序10在提供数据服务时调用，从而进行数据处理。

由此，所述配置模块120具体用于：

解析所述数据服务请求，确定该数据服务请求对应的各个计算需求；

确定各个计算需求对应的算子和算子组合规则；

从程序配置文件中获取所确定的算子；

根据所获取的算子和所述算子组合规则配置算法链。

执行模块130，用于执行所配置的算法链，从数据库中的原始数据中获取目标数据。

其中，所述算法链采用串行模式，即所述算法链由各个计算需求对应的算子串行构成。当执行所述算法链对应的程序时，即按照所述顺序依次执行各计算需求对应的算子，前一个计算需求对应的算子执行完毕后，输出中间数据给下一个计算需求对应的算子，下一个计算需求对应的算子再对此中间数据进行计算后输出，依此类推，最终的计算需求对应的算子执行完毕后输出结果数据。这一过程类似于流水线处理过程，将算法链以流水线方式拆分为若干计算需求对应的算子，每个计算需求对应的算子处理数据将结果传递给下一个计算需求对应的算子，通过这种流水线模块化的处理方式，可以提高数据服务的运行效率。

此外，为了提高所述算法链的可靠性，增加容错机制，所述算法链中的每个计算需求可以对应一个或多个相同算子，所述一个或多个相同算子在所述算法链中并行执行，并按照预设优先顺序输出执行结果。

例如，所述算法链的结构可以参看图4所示，其中container代表一个步骤的计算，即一个计算需求。而一个container里包含的operator，即具体的算子，其执行一个具体的计算需求。为了提高算法链的可靠性，一个container里可以包含若干个相同的operator，这若干个相同的operator以并行方式执行，并对每个operator设置主线程计时。各个operator的执行结果的取用具有优先顺序。当当前operator的主线程计时超时却仍未返回执行结果，则放弃该operator的执行结果，而等待返回下一个优先级的operator的执行结果。

在本实施例中，所述数据库中预先存储有若干原始数据，例如某个词语及该词语的关联词和关联度数据，某种病症及其三种症状和相应的治疗措施数据等。所述原始数据在数据库中的存储格式可以为以下三种：

1、简单类型

简单类型适用于主键只有一项相关内容和权重的情况，其存储可抽象为id，name，doc(weight#info)。例如，原始数据为词语“感冒”，与“感冒”关联度最高的词语“发烧”，关联度“1”，该原始数据用简单类型可以以如下格式存储在数据库中：

字段	id	name	doc	create_date
					类型	int	text	text	date
举例	1	感冒#1	1#发烧	2017-03-17

2、无序列表

无序列表适用于主键有多项相关内容，而这些相关内容间是无序的情况，可以将每项相关内容的权重都存为1来代表无序。其存储可抽象为id，name，doc(key1#weight#info1*key2#weight#info2*…keyn#weight#infon)。例如，原始数据为病症“感冒”，以及“感冒”的三种症状“头疼”、“流涕”、“喉咙疼”，该原始数据用无序列表可以以如下格式存储在数据库中：

3、有序列表

有序列表适用于主键有多项相关内容，这些相关内容间是有序的情况，可以用每项相关内容的权重来表示有序。其存储可抽象为id，name，doc(key1#weight1#info1*key2#weight2#info2*…keyn#weightn#infon)。例如，原始数据为词语“域内”，以该词语的10个关联词和关联度，该原始数据用有序列表可以以如下格式存储在数据库中：

由上，执行模块130通过执行所配置的算法链对应的程序，从数据库的所述原始数据中获取目标数据。例如，针对实现查找相似病例功能的算法链为：

算子Hanlp—>算子Retrieval—>算子Scoring—>算子HeapSort—>算子RetrievalDoc

上述算子Hanlp、Retrieval、Scoring、HeapSort、RetrievalDoc的功能依次为：对中文切词、获取可能符合要求的文档ID、通过BM25算法对文档ID打分、对打分结果通过堆排序方式排序、通过文档ID取回文档正文。通过依次执行上述算子，即可以从数据库中的病例原始数据里获得用户请求的相似病例作为目标数据。

输出模块140，用于输出所述目标数据。为了适应各种不同来源、不同格式、不同字段数、不同类型的输入数据，可以对所述目标数据进行格式化，即统一规范化处理。例如，可以对所述目标数据按照MyTupleList(Key，Weight，Info)这一三元组形式输出。

在图4中，“InputResult”、“OutputResult”为用于在算子间传递中间结果的共用数据结构，可以采用封装方式对输出数据进行格式化，即统一规范化。例如，在本实施例中可以通过工具类PGToolT和RAOTool实现功能的选择和封装，而对各种格式数据的类作为IDaoBasic的接口来实现，对外输出均为MyTupleList(Key，Weight，Info)这一三元组形式。

下面举一个具体实施例，在本实施例中，数据库中存储的原始数据为若干条关联词记录，每条记录由一个词语及其10个关联度最高的词语和关联度信息组成，如下所示，为词语“域内”及其10个关联词和关联度数据：

域内#1，区域内，1.0，分布区，0.28298，脑区，0.2413，区内，0.2016，胳膊，0.15518，区域，0.12988，区域间，0.12308，纵横，0.09344，CDF，0.08009，廓清，0.06984。

由于关联词的关联度不同，是存在顺序性的，因此若采用有序列表的格式将所述原始数据存入PostgreSQL(PG)数据库，则入库后该原始数据的形式如下：

获取模块110获取数据服务请求，所述数据服务请求是根据用户的输入信息生成的，用户的输入界面例如图5所示。

配置模块120获取数据服务请求后，解析该数据服务请求，确定该数据服务请求为查询词语“域内”的关联词，并按照关联度升序(或降序)输出该词语的关联词和关联度。

根据所述数据服务请求，配置模块120确定计算需求为(1)、从用户界面中获取查询key(域内)，其对应的算子为“CommonHead”；(2)、根据该查询key，从数据库Redis或PostgreSQL(PG)中拉取相应数据，其对应的算子为“Retrieval”。根据所述算子“CommonHead”和“Retrieval”以所述各计算需求对应的算子组合规则，配置模块120配置算法链如下：

10001#022#base

10001#022#8002；

Com:CommonHeadV2#-1#-1#1；

Retr:RetrievalV2#6#1#2_2。

其中“10001#022#base”和“10001#022#8002”为算法号，所述算法号即指示所述各计算需求对应的算子组合规则。

执行模块130执行所配置的算法链，即算法链中的各算子按照顺序依次执行，对数据库的所述词语“域内”及其10个关联词和关联度数据进行处理后，获取目标数据，并格式化输出目标数据。在一个实施例中，所述目标数据的展示界面例如图6所示。

参阅图7所示，为本发明数据服务方法较佳实施例的流程图。电子装置1的处理器12执行存储器11中存储的数据服务程序10时实现数据服务方法的如下步骤：

S10，获取模块110获取数据服务请求。

S20，配置模块120解析所述数据服务请求，根据解析结果配置算法链。具体而言，配置模块120用于解析所述数据服务请求，确定该数据服务请求对应的各个计算需求；确定各个计算需求对应的算子和算子组合规则；从程序配置文件中获取所确定的算子；根据所获取的算子和所述算子组合规则配置算法链。

S30，执行模块130执行所配置的算法链，从数据库中的原始数据中获取目标数据。可选地，所述算法链可以由各个计算需求对应的算子串行构成。可选地，每个计算需求对应一个或多个相同算子，所述一个或多个相同算子在所述算法链中并行执行，并按照预设优先顺序输出执行结果。所述原始数据在数据库中的存储格式例如可以包括简单类型：主键只有一项相关内容和权重；无序列表：主键有多项相关内容，该多项相关内容之间为无序的；有序列表：主键有多项相关内容，该多项相关内容之前为有序的。

S40，输出模块140输出所述目标数据。可选地，所述输出模块140可以格式化输出所述目标数据。

本实施例提出的数据服务方法，在接收到数据服务请求后，可以通过算法链中的算子以流水线的方式对在线数据服务请求进行响应，且对算法链中的算子输入输出的数据格式进行封装处理，使数据格式保持统一，从而使算子之间具有松耦合性，而算子之间的数据又紧密结合，因此提供的数据服务具有良好的可扩展性、可靠性、时效性和可运维性。

此外，本发明实施例还提出一种计算机可读存储介质，所述计算机可读存储介质可以是硬盘、多媒体卡、SD卡、闪存卡、SMC、只读存储器(ROM)、可擦除可编程只读存储器(EPROM)、便携式紧致盘只读存储器(CD-ROM)、USB存储器等等中的任意一种或者几种的任意组合。所述计算机可读存储介质中包括程序配置文件、存储有原始数据的数据库及数据服务程序10等，所述数据服务程序10被所述处理器12执行时实现如下操作：

获取步骤：获取数据服务请求；

配置步骤：解析所述数据服务请求，根据解析结果配置算法链；

执行步骤：执行所配置的算法链，从数据库中的原始数据中获取目标数据；

输出步骤：输出所述目标数据。

其中，所述配置步骤包括：

解析所述数据服务请求，确定该数据服务请求对应的各个计算需求；

确定各个计算需求对应的算子和算子组合规则；

从程序配置文件中获取所确定的算子；

根据所获取的算子和所述算子组合规则配置算法链。

本发明之计算机可读存储介质的具体实施方式与上述数据服务方法以及电子装置1的具体实施方式大致相同，在此不再赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种数据服务方法，应用于计算装置，其特征在于，该方法包括：

获取步骤：获取数据服务请求；

配置步骤：解析所述数据服务请求，根据解析结果配置算法链；

执行步骤：执行所配置的算法链，从数据库中的原始数据中获取目标数据；

输出步骤：输出所述目标数据。

2.如权利要求1所述的数据服务方法，其特征在于，所述配置步骤包括：

解析所述数据服务请求，确定该数据服务请求对应的各个计算需求；

确定各个计算需求对应的算子和算子组合规则；

从程序配置文件中获取所确定的算子；

根据所获取的算子和所述算子组合规则配置算法链。

3.如权利要求2所述的数据服务方法，其特征在于，所述算法链由各个计算需求对应的算子串行构成。

4.如权利要求2所述的数据服务方法，其特征在于，每个计算需求对应一个或多个相同算子，所述一个或多个相同算子在所述算法链中并行执行，并按照预设优先顺序输出执行结果。

5.如权利要求1所述的数据服务方法，其特征在于，所述原始数据在数据库中的存储格式包括：

简单类型：主键只有一项相关内容和权重；

无序列表：主键有多项相关内容，该多项相关内容之间为无序的；

有序列表：主键有多项相关内容，该多项相关内容之前为有序的。

6.如权利要求1所述的数据服务方法，其特征在于，所述输出步骤包括：

格式化输出所述目标数据。

7.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中包括数据服务程序，该数据服务程序被所述处理器执行时实现如下步骤：

获取步骤：获取数据服务请求；

配置步骤：解析所述数据服务请求，根据解析结果配置算法链；

执行步骤：执行所配置的算法链，从数据库中的原始数据中获取目标数据；

输出步骤：输出所述目标数据。

8.如权利要求7所述的电子装置，其特征在于，所述配置步骤包括：

解析所述数据服务请求，确定该数据服务请求对应的各个计算需求；

确定各个计算需求对应的算子和算子组合规则；

从程序配置文件中获取所确定的算子；

根据所获取的算子和所述算子组合规则配置算法链。

9.如权利要求8所述的电子装置，其特征在于，每个计算需求对应一个或多个相同算子，所述一个或多个相同算子在所述算法链中并行执行，并按照预设优先顺序输出执行结果。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中包括数据服务程序，所述数据服务程序被处理器执行时，实现如权利要求1至6中任一项所述的数据服务方法的步骤。