CN105843866A - 基于云搜索平台的数据搜索方法及系统 - Google Patents

基于云搜索平台的数据搜索方法及系统 Download PDF

Info

Publication number
CN105843866A
CN105843866A CN201610154447.3A CN201610154447A CN105843866A CN 105843866 A CN105843866 A CN 105843866A CN 201610154447 A CN201610154447 A CN 201610154447A CN 105843866 A CN105843866 A CN 105843866A
Authority
CN
China
Prior art keywords
data
search platform
protocol
cloud
type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610154447.3A
Other languages
English (en)
Inventor
刘晨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CHANJET INFORMATION TECHNOLOGY Co Ltd
Original Assignee
CHANJET INFORMATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CHANJET INFORMATION TECHNOLOGY Co Ltd filed Critical CHANJET INFORMATION TECHNOLOGY Co Ltd
Priority to CN201610154447.3A priority Critical patent/CN105843866A/zh
Publication of CN105843866A publication Critical patent/CN105843866A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提出了一种基于云搜索平台的数据搜索方法及系统,其中,基于云搜索平台的数据搜索方法包括:根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,得到解析数据和操作信息;根据所述操作信息,在云搜索平台对所述解析数据进行操作。通过本发明的技术方案,提供了一种基于云搜索平台的通用数据服务,通过对数据的解析使得来自不同应用的格式不同的数据在解析后均能为云搜索平台所用,提升了数据搜索期间的数据可读性和有效性,同时,也提升了数据传输发便利性和安全性,减少后期数据变化带来的影响,降低开发难度。

Description

基于云搜索平台的数据搜索方法及系统
技术领域
本发明涉及计算机技术领域,具体而言,涉及一种基于云搜索平台的数据搜索方法和一种基于云搜索平台的数据搜索系统。
背景技术
目前,云搜索平台为不同应用提供搜索服务的同时,往往伴随大量的不同的数据需求,然而,不同应用使用的数据格式往往有多不相同,如果为每个应用都采取专门的搜索平台定制服务,会造成研发成本极高,而如果多种数据格式不同的应用仅采用普通的云搜索平台,则会出现数据格式无法通用的弊端,不能满足用户的实际需求。
因此需要一种新的技术方案,可以提升数据可读性和有效性,并降低开发难度。
发明内容
本发明正是基于上述问题,提出了一种新的技术方案,可以提升数据可读性和有效性,并降低开发难度。
有鉴于此,本发明的一方面提出了一种基于云搜索平台的数据搜索方法,包括:根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,得到解析数据和操作信息;根据所述操作信息,在云搜索平台对所述解析数据进行操作。
在该技术方案中,可以根据云搜索平台通用数据协议对来自多个应用的数据进行解析,比如,提取该数据的字段信息、类型信息和操作信息,接下来,云搜索平台可以根据该数据的字段信息、类型信息和操作信息等内容执行搜索操作,比如,可以根据提取的该数据的字段信息避免数据传输过程中的重复字段带来的臃肿,提升传输效率,再比如,也可以根据提取的该数据的类型信息将数据拆解为可供云搜索平台使用的形式。通过该技术方案,提供了一种基于云搜索平台的通用数据服务,通过对数据的解析使得来自不同应用的格式不同的数据在解析后均能为云搜索平台所用,提升了数据搜索期间的数据可读性和有效性,同时,也提升了数据传输发便利性和安全性,减少后期数据变化带来的影响,降低开发难度。
在上述技术方案中,优选地,所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,包括:根据所述云搜索平台通用数据协议,将所述来自多个应用的数据拆解为数据头和数据体。
在该技术方案中,可是首先将来自多个应用的数据拆解为数据头和数据体,以便进一步对拆分后的数据头和数据体采取处理,其中,数据头为对数据及操作信息的描述,而数据体则为数据内容,由于本云搜索平台通用数据协议是对数据进行封装,其网络传输使用json(一种轻量级数据交换格式)进行序列化。
在上述任一技术方案中,优选地,所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,还包括:对拆解得到的所述数据头和所述数据体分别进行解析,其中,对所述数据头的解析对象包括:数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段;对所述数据体进行解析,包括:通过所述协议接口对数据内容进行解压、解密。
在该技术方案中,对于数据版本,由于应用升级可能导致数据变化,云搜索平台可以根据此信息分配不同的处理逻辑,避免应用大的升级变动产生的影响。对于数据类型,以数据模型为驱动的云搜索平台,为每个数据定义了数据类型,此信息用于映射模型信息,搜索该模型的数据。数据字段即已定义的数据字段信息,字段类型即描述数据字段类型的信息,加密类型即已定义的数据加密类型,压缩类型即已定义的压缩数据算法,操作信息即描述该数据操作的信息,包括增加、删除和/或修改操作,域信息即描述此数据属于哪个应用的信息,以及扩展字段即描述应用附加的信息。由于数据体包括数据内容,对数据体的解析即对数据内容的解压、解密等操作。经过上述解析过程,云搜索平台可获取数据方方面面的属性信息,也就是说,对数据的解析使得格式不同的数据在解析后均能为云搜索平台所用,从而便于进一步根据操作信息对该数据进行通用操作处理,提升了数据可读性和有效性。
在上述任一技术方案中,优选地,在所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析之前,还包括:为所述来自多个应用的数据定义数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段。
在该技术方案中,可以预先为数据定义数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段等属性,从而便于云搜索平台解析得到对应的内容,提升了数据可读性和有效性。
在上述任一技术方案中,优选地,在所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析之前,还包括:对所述来自多个应用的数据进行数据压缩,并提取冗余字段。
在该技术方案中,可以预先对数据进行压缩、去冗余处理,以减少数据长度,提升处理效率。
本发明的另一方面提出了一种基于云搜索平台的数据搜索系统,包括:协议解析单元,根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,得到解析数据和操作信息;数据操作单元,根据所述操作信息,在云搜索平台对所述解析数据进行操作。
在该技术方案中,可以根据云搜索平台通用数据协议对来自多个应用的数据进行解析,比如,提取该数据的字段信息、类型信息和操作信息,接下来,云搜索平台可以根据该数据的字段信息、类型信息和操作信息等内容执行搜索操作,比如,可以根据提取的该数据的字段信息避免数据传输过程中的重复字段带来的臃肿,提升传输效率,再比如,也可以根据提取的该数据的类型信息将数据拆解为可供云搜索平台使用的形式。通过该技术方案,提供了一种基于云搜索平台的通用数据服务,通过对数据的解析使得来自不同应用的格式不同的数据在解析后均能为云搜索平台所用,提升了数据搜索期间的数据可读性和有效性,同时,也提升了数据传输发便利性和安全性,减少后期数据变化带来的影响,降低开发难度。
在上述技术方案中,优选地,所述协议解析单元包括:数据拆解单元,根据所述云搜索平台通用数据协议,将所述来自多个应用的数据拆解为数据头和数据体。
在该技术方案中,可是首先将来自多个应用的数据拆解为数据头和数据体,以便进一步对拆分后的数据头和数据体采取处理,其中,数据头为对数据及操作信息的描述,而数据体则为数据内容,由于本云搜索平台通用数据协议是对数据进行封装,其网络传输使用json(一种轻量级数据交换格式)进行序列化。
在上述任一技术方案中,优选地,所述协议解析单元用于:对拆解得到的所述数据头和所述数据体分别进行解析,其中,对所述数据头的解析对象包括:数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段;以及所述协议解析单元还用于:通过所述协议接口对数据内容进行解压、解密。
在该技术方案中,对于数据版本,由于应用升级可能导致数据变化,云搜索平台可以根据此信息分配不同的处理逻辑,避免应用大的升级变动产生的影响。对于数据类型,以数据模型为驱动的云搜索平台,为每个数据定义了数据类型,此信息用于映射模型信息,搜索该模型的数据。数据字段即已定义的数据字段信息,字段类型即描述数据字段类型的信息,加密类型即已定义的数据加密类型,压缩类型即已定义的压缩数据算法,操作信息即描述该数据操作的信息,包括增加、删除和/或修改操作,域信息即描述此数据属于哪个应用的信息,以及扩展字段即描述应用附加的信息。由于数据体包括数据内容,对数据体的解析即对数据内容的解压、解密等操作。经过上述解析过程,云搜索平台可获取数据方方面面的属性信息,也就是说,对数据的解析使得格式不同的数据在解析后均能为云搜索平台所用,从而便于进一步根据操作信息对该数据进行通用操作处理,提升了数据可读性和有效性。
在上述任一技术方案中,优选地,还包括:预定义单元,在所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析之前,为所述来自多个应用的数据定义数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段。
在该技术方案中,可以预先为数据定义数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段等属性,从而便于云搜索平台解析得到对应的内容,提升了数据可读性和有效性。
在上述任一技术方案中,优选地,还包括:数据预处理单元,在所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析之前,对所述来自多个应用的数据进行数据压缩,并提取冗余字段。
在该技术方案中,可以预先对数据进行压缩、去冗余处理,以减少数据长度,提升处理效率。
通过以上技术方案,提供了一种基于云搜索平台的通用数据服务,通过对数据的解析使得来自不同应用的格式不同的数据在解析后均能为云搜索平台所用,提升了数据搜索期间的数据可读性和有效性,同时,也提升了数据传输发便利性和安全性,减少后期数据变化带来的影响,降低开发难度。
附图说明
图1示出了根据本发明的一个实施例的基于云搜索平台的数据搜索方法的流程图;
图2示出了根据本发明的一个实施例的基于云搜索平台的数据搜索装置的框图;
图3示出了根据本发明的一个实施例的云搜索平台通用数据协议的结构示意图;
图4示出了根据本发明的一个实施例的云搜索平台通用数据协议的应用示意图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述的其他方式来实施,因此,本发明的保护范围并不受下面公开的具体实施例的限制。
图1示出了根据本发明的一个实施例的基于云搜索平台的数据搜索方法的流程图。
如图1所示,根据本发明的一个实施例的基于云搜索平台的数据搜索方法,包括:
步骤102,根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,得到解析数据和操作信息;
步骤104,根据所述操作信息,在云搜索平台对所述解析数据进行操作。
在该技术方案中,可以根据云搜索平台通用数据协议对来自多个应用的数据进行解析,比如,提取该数据的字段信息、类型信息和操作信息,接下来,云搜索平台可以根据该数据的字段信息、类型信息和操作信息等内容执行搜索操作,比如,可以根据提取的该数据的字段信息避免数据传输过程中的重复字段带来的臃肿,提升传输效率,再比如,也可以根据提取的该数据的类型信息将数据拆解为可供云搜索平台使用的形式。通过该技术方案,提供了一种基于云搜索平台的通用数据服务,通过对数据的解析使得来自不同应用的格式不同的数据在解析后均能为云搜索平台所用,提升了数据搜索期间的数据可读性和有效性,同时,也提升了数据传输发便利性和安全性,减少后期数据变化带来的影响,降低开发难度。
在上述技术方案中,优选地,步骤102包括:根据所述云搜索平台通用数据协议,将所述来自多个应用的数据拆解为数据头和数据体。
在该技术方案中,可是首先将来自多个应用的数据拆解为数据头和数据体,以便进一步对拆分后的数据头和数据体采取处理,其中,数据头为对数据及操作信息的描述,而数据体则为数据内容,由于本云搜索平台通用数据协议是对数据进行封装,其网络传输使用json(一种轻量级数据交换格式)进行序列化。
在上述任一技术方案中,优选地,步骤102还包括:对拆解得到的所述数据头和所述数据体分别进行解析,其中,对所述数据头的解析对象包括:数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段;对所述数据体进行解析,包括:通过所述协议接口对数据内容进行解压、解密。
在该技术方案中,对于数据版本,由于应用升级可能导致数据变化,云搜索平台可以根据此信息分配不同的处理逻辑,避免应用大的升级变动产生的影响。对于数据类型,以数据模型为驱动的云搜索平台,为每个数据定义了数据类型,此信息用于映射模型信息,搜索该模型的数据。数据字段即已定义的数据字段信息,字段类型即描述数据字段类型的信息,加密类型即已定义的数据加密类型,压缩类型即已定义的压缩数据算法,操作信息即描述该数据操作的信息,包括增加、删除和/或修改操作,域信息即描述此数据属于哪个应用的信息,以及扩展字段即描述应用附加的信息。由于数据体包括数据内容,对数据体的解析即对数据内容的解压、解密等操作。经过上述解析过程,云搜索平台可获取数据方方面面的属性信息,也就是说,对数据的解析使得格式不同的数据在解析后均能为云搜索平台所用,从而便于进一步根据操作信息对该数据进行通用操作处理,提升了数据可读性和有效性。
在上述任一技术方案中,优选地,在步骤102之前,还包括:为所述来自多个应用的数据定义数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段。
在该技术方案中,可以预先为数据定义数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段等属性,从而便于云搜索平台解析得到对应的内容,提升了数据可读性和有效性。
在上述任一技术方案中,优选地,在步骤102之前,还包括:对所述来自多个应用的数据进行数据压缩,并提取冗余字段。
在该技术方案中,可以预先对数据进行压缩、去冗余处理,以减少数据长度,提升处理效率。
图2示出了根据本发明的一个实施例的基于云搜索平台的数据搜索装置的框图。
如图2所示,根据本发明的一个实施例的基于云搜索平台的数据搜索装置200,包括:协议解析单元202和数据操作单元204。
其中,协议解析单元202用于根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,得到解析数据和操作信息;数据操作单元204用于根据所述操作信息,在云搜索平台对所述解析数据进行操作。
在该技术方案中,可以根据云搜索平台通用数据协议对来自多个应用的数据进行解析,比如,提取该数据的字段信息、类型信息和操作信息,接下来,云搜索平台可以根据该数据的字段信息、类型信息和操作信息等内容执行搜索操作,比如,可以根据提取的该数据的字段信息避免数据传输过程中的重复字段带来的臃肿,提升传输效率,再比如,也可以根据提取的该数据的类型信息将数据拆解为可供云搜索平台使用的形式。通过该技术方案,提供了一种基于云搜索平台的通用数据服务,通过对数据的解析使得来自不同应用的格式不同的数据在解析后均能为云搜索平台所用,提升了数据搜索期间的数据可读性和有效性,同时,也提升了数据传输发便利性和安全性,减少后期数据变化带来的影响,降低开发难度。
在上述技术方案中,优选地,协议解析单元202包括:数据拆解单元2022,根据所述云搜索平台通用数据协议,将所述来自多个应用的数据拆解为数据头和数据体。
在该技术方案中,可是首先将来自多个应用的数据拆解为数据头和数据体,以便进一步对拆分后的数据头和数据体采取处理,其中,数据头为对数据及操作信息的描述,而数据体则为数据内容,由于本云搜索平台通用数据协议是对数据进行封装,其网络传输使用json(一种轻量级数据交换格式)进行序列化。
在上述任一技术方案中,优选地,协议解析单元202用于:对拆解得到的所述数据头和所述数据体分别进行解析,其中,对所述数据头的解析对象包括:数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段;以及协议解析单元202还用于:通过所述协议接口对数据内容进行解压、解密。
在该技术方案中,对于数据版本,由于应用升级可能导致数据变化,云搜索平台可以根据此信息分配不同的处理逻辑,避免应用大的升级变动产生的影响。对于数据类型,以数据模型为驱动的云搜索平台,为每个数据定义了数据类型,此信息用于映射模型信息,搜索该模型的数据。数据字段即已定义的数据字段信息,字段类型即描述数据字段类型的信息,加密类型即已定义的数据加密类型,压缩类型即已定义的压缩数据算法,操作信息即描述该数据操作的信息,包括增加、删除和/或修改操作,域信息即描述此数据属于哪个应用的信息,以及扩展字段即描述应用附加的信息。由于数据体包括数据内容,对数据体的解析即对数据内容的解压、解密等操作。经过上述解析过程,云搜索平台可获取数据方方面面的属性信息,也就是说,对数据的解析使得格式不同的数据在解析后均能为云搜索平台所用,从而便于进一步根据操作信息对该数据进行通用操作处理,提升了数据可读性和有效性。
在上述任一技术方案中,优选地,还包括:预定义单元206,在所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析之前,为所述来自多个应用的数据定义数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段。
在该技术方案中,可以预先为数据定义数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段等属性,从而便于云搜索平台解析得到对应的内容,提升了数据可读性和有效性。
在上述任一技术方案中,优选地,还包括:数据预处理单元208,在所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析之前,对所述来自多个应用的数据进行数据压缩,并提取冗余字段。
在该技术方案中,可以预先对数据进行压缩、去冗余处理,以减少数据长度,提升处理效率。
图3示出了根据本发明的一个实施例的云搜索平台通用数据协议的结构示意图。
如图3所示,云搜索平台通用数据协议可以对来自不同应用的不同格式的数据进行解析,具体地,云搜索平台通用数据协议可以将数据拆分为数据头和数据体,数据头为对数据及操作信息的描述,而数据体则为数据内容。
其中,对于数据版本,由于应用升级可能导致数据变化,云搜索平台可以根据此信息分配不同的处理逻辑,避免应用大的升级变动产生的影响。对于数据类型,以数据模型为驱动的云搜索平台,为每个数据定义了数据类型,此信息用于映射模型信息,搜索该模型的数据。数据字段即已定义的数据字段信息,字段类型即描述数据字段类型的信息,加密类型即已定义的数据加密类型,压缩类型即已定义的压缩数据算法,操作信息即描述该数据操作的信息,包括增加、删除和/或修改操作,域信息即描述此数据属于哪个应用的信息,以及扩展字段即描述应用附加的信息。
数据体包括Map(容器)、List(链表)、Object(对象)和加密串等数据内容,对数据体的解析即对数据内容的解压/压缩、解密/加密等操作。
经过上述解析过程,云搜索平台可获取数据方方面面的属性信息,也就是说,对数据的解析使得格式不同的数据在解析后均能为云搜索平台所用,从而便于进一步根据操作信息对该数据进行通用操作处理,提升了数据可读性和有效性。
图4示出了根据本发明的一个实施例的云搜索平台通用数据协议的应用示意图。
如图4所示,可以通过云搜索平台通用数据协议对来自应用1、应用2、……、应用N的不同格式的数据进行封装,经消息服务后,再通过云搜索平台通用数据协议对封装内容进行解析,从而使云搜索平台可以获取能够顺利处理的有效数据。
其中,各应用均可通过协议接口访问云搜索平台通用数据协议,另外,在封装前,可以对来自多个应用的不同格式的数据进行压缩和去冗余字段,以减少数据长度。
在上述技术方案中,还包括:
定义数据域信息,用来告知云搜索平台该数据属于哪个应用;
定义数据类型,用来告知云搜索平台该数据是应用下哪个数据模型数据;
定义数据版本,不同的数据版本表示不同版本不同的数据处理逻辑,降低升级改动带来的影响;
定义加密类型,通过公私密钥方式加密解密数据,可降低数据传输过程中安全风险;
定义应用扩展信息,可用来满足部分应用扩展需求;
设置操作信息,可告知云搜索平台该数据要进行什么操作;
云搜索平台使用该数据协议解析应用发过来的数据,获取上述信息。
通过上述技术方案,减少了与各应用讨论和定义数据需求的时间,降低了需求变更带来的研发劳动成本,提高了平台搜索服务研发的效率。
具体来说,数据字段提取在批量数据传输过程中重复字段信息带来的臃肿,提高了效率;数据操作信息使得云搜索平台可以根据操作类型处理数据;数据类型使得云搜索平台可以根据数据类型映射搜索模型;数据扩展信息使得云搜索平台可以根据扩展信息满足扩展需求;根据不同的域信息,为不同应用提供搜索服务;描述字段类型信息,可以方便数据还原与转换处理;对数据进行压缩,可便于批量数据传输。
通过上述技术方案,提升了数据可读性,不同应用的数据从形式和结构上多种多样,但是可以根据数据的特点,将数据分成数据头和数据体两部分,这样所有数据都具有了统一的结构,方便理解、解析和处理。
通过上述技术方案,提升了数据通用性,各个应用的数据格式是不同的,云搜索平台通用协议接口会对各应用的数据进行拆解装载,通过数据头定义的信息既能满足一般数据的统一结构形式,又能满足数据的扩展性需求。
通过上述技术方案,提升了数据安全性,数据安全可以使用专网,但是考虑到成本等原因云搜索平台通用数据协议提供数据加密/解密接口,可有效对需要保密的数据进行加密/解密。
通过上述技术方案,提升了数据高效性,云搜索平台通用数据协议会对数据进行拆解,提取公共属性字段,减少数据冗余,也提供了压缩算法,降低数据包大小,最终提高数据传输效率。
通过上述技术方案,还可以降低成本,应用与搜索平台的对接,往往伴随着多次的数据需求变更,带来了巨大的劳动成本,搜索平台实现数据形式的统一,可以节省了用与搜索平台双方对数据各方面定义讨论的时间和开发成本,又能简化后期数据的维护的复杂度。
以上结合附图详细说明了本发明的技术方案,通过本发明的技术方案,提供了一种基于云搜索平台的通用数据服务,通过对数据的解析使得来自不同应用的格式不同的数据在解析后均能为云搜索平台所用,提升了数据搜索期间的数据可读性和有效性,同时,也提升了数据传输发便利性和安全性,减少后期数据变化带来的影响,降低开发难度。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于云搜索平台的数据搜索方法,其特征在于,包括:
根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,得到解析数据和操作信息;
根据所述操作信息,在云搜索平台对所述解析数据进行操作。
2.根据权利要求1所述的基于云搜索平台的数据搜索方法,其特征在于,所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,包括:
根据所述云搜索平台通用数据协议,将所述来自多个应用的数据拆解为数据头和数据体。
3.根据权利要求2所述的基于云搜索平台的数据搜索方法,其特征在于,所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,还包括:
对拆解得到的所述数据头和所述数据体分别进行解析,其中,
对所述数据头的解析对象包括:数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段;
对所述数据体进行解析,包括:
通过所述协议接口对数据内容进行解压、解密。
4.根据权利要求3所述的基于云搜索平台的数据搜索方法,其特征在于,在所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析之前,还包括:
为所述来自多个应用的数据定义数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段。
5.根据权利要求3或4所述的基于云搜索平台的数据搜索方法,其特征在于,在所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析之前,还包括:
对所述来自多个应用的数据进行数据压缩,并提取冗余字段。
6.一种基于云搜索平台的数据搜索系统,其特征在于,包括:
协议解析单元,根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析,得到解析数据和操作信息;
数据操作单元,根据所述操作信息,在云搜索平台对所述解析数据进行操作。
7.根据权利要求6所述的基于云搜索平台的数据搜索系统,其特征在于,所述协议解析单元包括:
数据拆解单元,根据所述云搜索平台通用数据协议,将所述来自多个应用的数据拆解为数据头和数据体。
8.根据权利要求7所述的基于云搜索平台的数据搜索系统,其特征在于,所述协议解析单元用于:
对拆解得到的所述数据头和所述数据体分别进行解析,其中,对所述数据头的解析对象包括:数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段;以及
所述协议解析单元还用于:
通过所述协议接口对数据内容进行解压、解密。
9.根据权利要求8所述的基于云搜索平台的数据搜索系统,其特征在于,还包括:
预定义单元,在所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析之前,为所述来自多个应用的数据定义数据版本、数据类型、数据字段、字段类型、加密类型、压缩类型、操作信息、域信息和扩展字段。
10.根据权利要求8或9所述的基于云搜索平台的数据搜索系统,其特征在于,还包括:
数据预处理单元,在所述根据云搜索平台通用数据协议,经协议接口对来自多个应用的数据进行解析之前,对所述来自多个应用的数据进行数据压缩,并提取冗余字段。
CN201610154447.3A 2016-03-17 2016-03-17 基于云搜索平台的数据搜索方法及系统 Pending CN105843866A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610154447.3A CN105843866A (zh) 2016-03-17 2016-03-17 基于云搜索平台的数据搜索方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610154447.3A CN105843866A (zh) 2016-03-17 2016-03-17 基于云搜索平台的数据搜索方法及系统

Publications (1)

Publication Number Publication Date
CN105843866A true CN105843866A (zh) 2016-08-10

Family

ID=56588369

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610154447.3A Pending CN105843866A (zh) 2016-03-17 2016-03-17 基于云搜索平台的数据搜索方法及系统

Country Status (1)

Country Link
CN (1) CN105843866A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108390850A (zh) * 2018-01-03 2018-08-10 阿里巴巴集团控股有限公司 数据处理方法、装置、电子设备和服务器

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1825845A (zh) * 2005-02-25 2006-08-30 北京中科富星信息技术有限公司 一种通用移动查询方法
CN101655843A (zh) * 2008-08-21 2010-02-24 中国移动通信集团公司 一种信息获取方法、信息搜索方法及其装置和系统
CN104215853A (zh) * 2014-09-03 2014-12-17 国网上海市电力公司 一种电能质量监测系统数据采集方法
CN104410702A (zh) * 2014-12-08 2015-03-11 畅捷通信息技术股份有限公司 远程服务请求方法、响应方法、请求装置与响应装置
US20150169777A1 (en) * 2011-10-03 2015-06-18 Black Hills Ip Holdings, Llc System and method for tracking patent ownership change

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1825845A (zh) * 2005-02-25 2006-08-30 北京中科富星信息技术有限公司 一种通用移动查询方法
CN101655843A (zh) * 2008-08-21 2010-02-24 中国移动通信集团公司 一种信息获取方法、信息搜索方法及其装置和系统
US20150169777A1 (en) * 2011-10-03 2015-06-18 Black Hills Ip Holdings, Llc System and method for tracking patent ownership change
CN104215853A (zh) * 2014-09-03 2014-12-17 国网上海市电力公司 一种电能质量监测系统数据采集方法
CN104410702A (zh) * 2014-12-08 2015-03-11 畅捷通信息技术股份有限公司 远程服务请求方法、响应方法、请求装置与响应装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108390850A (zh) * 2018-01-03 2018-08-10 阿里巴巴集团控股有限公司 数据处理方法、装置、电子设备和服务器
CN108390850B (zh) * 2018-01-03 2020-10-02 阿里巴巴集团控股有限公司 数据处理方法、装置、电子设备和服务器

Similar Documents

Publication Publication Date Title
US11487897B2 (en) Generating and processing obfuscated sensitive information
CN102708336B (zh) 基于关键数据和定制模板分离的电子文档处理方法及系统
CN105320613A (zh) 用于动态数据存储的系统及方法
Hu et al. Health drive: Mobile healthcare onboard vehicles to promote safe driving
Omer et al. Privacy-preserving of SVM over vertically partitioned with imputing missing data
Hussaini Cyber security in cloud using blowfish encryption
CN105843866A (zh) 基于云搜索平台的数据搜索方法及系统
CN114301670A (zh) 基于ipv6地址的终端认证方法、装置、设备及介质
Chou et al. A Webpage Data Hiding Method by Using Tag and CSS Attribute Setting
KR20200086586A (ko) 온톨로지 기반의 프레임을 이용한 지식 추출 시스템
CN108156134A (zh) 一种基于FPGA的Spice协议解析系统
CN105491023B (zh) 一种面向电力物联网的数据隔离交换和安全过滤方法
CN107122494A (zh) 基于社团发现的主题模型构建方法
CN109670186A (zh) 基于机器学习的生成式摘要方法和装置
CN114116987B (zh) 一种基于语义化网络的信息交换系统
EP3012817A1 (en) Storage count verification system
Mahmudur Rahman et al. FedPseudo: Pseudo value-based Deep Learning Models for Federated Survival Analysis
Lot et al. Machine Learning and Crystal Structure Prediction of Molecular Crystals
Brennaf et al. Communication Efficient on Symmetric and Asymmetric Encrypted Anonymous Federated Learning
Hoffmann Pham et al. From plague to coronavirus: On the value of ship traffic data for epidemic modeling
Thanh Binh et al. A bi-level encoding scheme for the clustered shortest-path tree problem in multifactorial optimization
Hammock et al. Trait Data Integration from the Perspective of a Data Aggregator
Kiri Taksande et al. Dual Connectivity Support in 5G Networks: An SDN based approach
Elantamilan et al. EDPP: Intelligent and Robust Data Sharing Framework using Enhanced Data Preserving Paradigm
Mezzomo Bonaldo et al. A class of elliptic equations involving a general nonlocal integrodifferential operators with sign-changing weight functions

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160810

RJ01 Rejection of invention patent application after publication