CN105681477A - 一种数据访问方法和一种服务器 - Google Patents
一种数据访问方法和一种服务器 Download PDFInfo
- Publication number
- CN105681477A CN105681477A CN201610218072.2A CN201610218072A CN105681477A CN 105681477 A CN105681477 A CN 105681477A CN 201610218072 A CN201610218072 A CN 201610218072A CN 105681477 A CN105681477 A CN 105681477A
- Authority
- CN
- China
- Prior art keywords
- data
- resource
- storage
- request
- intended
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/565—Conversion or adaptation of application format or content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
- G06F16/288—Entity relationship models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/3331—Query processing
- G06F16/334—Query execution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例提供一种数据访问方法和一种服务器,所述数据访问方法应用于数据访问系统,所述数据访问系统包括所述服务器和本地终端。用户只需要通过本地终端发送数据请求,由本地终端将所述数据请求发送至服务器,服务器根据用户输入的数据请求在临时数据库查找与所述数据请求对应的资源表述,根据资源表述在原始数据库查找欲获取数据,通过数据转换器将存储在原始数据库中的嵌套存储模型下的数据转换为临时数据库中二维表存储模型下的待输出数据,将转换后的数据直接发送给用户,解决了用户访问不同存储模型的非关系型数据时需要设置多个专用的访问接口才能进行多种存储模型的数据访问的技术问题。
Description
技术领域
本发明涉及数据访问领域,具体而言,涉及一种数据访问方法和一种服务器。
背景技术
随着云计算、社交网络等互联网技术的快速发展,网络数据量正在以极快的速度增长,数据灵活多变,数据类型呈多样化。为了分析和利用这些庞大的数据资源,必须依赖有效的数据管理技术。传统的关系型数据库技术在数据处理、系统扩展性等方面遇到了巨大的障碍,无法胜任大规模数据存储的任务。与此同时,非关系型数据库NoSQL(NotOnlySQL)技术迅速发展,因其具有非关系型、分布式、开源及水平扩展等特性,是有效解决大数据存储和分析的有效途径。
目前,越来越多的非关系型数据库如MongoDB、HBase、Redis等成为大数据存储的解决方案。NoSQL数据库弱化了一致性约束以满足,从而提升了横向扩展性和可用性,非常适合海量的结构化和半结构化数据的存储。与传统的关系型数据库相比,NoSQL数据库种类繁多,数据模型(如键/值、列存储、文档型、图型等)多样且灵活,各种数据库的访问方式多为数据库本身提供的API或命令行,在数据模型和访问方式上缺乏统一的标准。随着云数据库的提出,多种数据库并存的存储架构也已成为大数据存储解决方案,在存储层部署多种异构的数据库,不同类型的服务数据分发在合适的存储系统上,这样便充分利用了各种数据库的优势。由于各种数据库接口的不同,访问不同的数据库需要对应的访问接口,如何提供一种统一的非关系型数据库访问接口已成为一个研究热点。在数据集成领域,数据仓库是一种面向数据处理分析的数据集成方案,但是这种方案是主要用于对历史数据进行处理后支持决策分析,没有将重点放在为上层应用提供数据服务,并不能满足数据使用者实时的数据相互需求。另外,对于数据使用者来说,多数据源意味着需要使用多种存储系统的技术才能访问所有的数据,如果数据源发生改变,数据的最终结果就需要重新构建,这无疑增加了开发者的难度和应用的复杂度。
大数据的出现给信息技术领域带来了新的挑战,非关系型数据库相比传统的关系型数据库更适合大数据量的信息的存储。但是不同的非关系型数据的数据存储模型不同,数据访问方式不一致,构建多元异构的大数据存储系统变得十分复杂。因此,如何解决非关系型数据库统一访问的问题是目前面临的一大课题。
发明内容
有鉴于此,本发明实施例的目的在于提供一种数据访问方法和一种服务器。
本发明实施例提供的一种数据访问方法,应用于服务器,所述服务器运行于数据访问系统,所述数据访问系统还包括本地终端,所述服务器包括临时数据库和原始数据库,所述原始数据库包括非关系型数据库,所述方法包括:接收本地终端发送的数据请求,所述数据请求包括数据获取请求;在所述临时数据库中查找与所述数据获取请求对应的资源表述,所述资源表述包括资源内容和资源地址,所述资源内容包括原始数据的提示信息,所述资源地址指向原始数据库中的所述非关系型数据库中的所述原始数据的存储空间;根据所述资源地址在所述原始数据库的所述原始数据中查找与所述资源内容对应的欲获取数据;将查找到的所述欲获取数据发送给本地终端。
本发明实施例提供的一种服务器,应用于数据访问系统,所述服务器包括临时数据库和原始数据库,所述原始数据库包括非关系型数据库,所述非关系型数据库中存储有嵌套存储模型下的原始数据,所述数据访问系统还包括本地终端,所述服务器包括:数据请求接收单元,用于接收本地终端发送的数据请求,所述数据请求包括数据获取请求;资源表述查找单元,用于在临时数据库中查找与所述数据获取请求对应的资源表述,所述资源表述包括资源内容和资源地址,所述资源内容包括原始数据的提示信息,所述资源地址指向所述原始数据库中的所述非关系型数据库中的所述原始数据的存储空间;欲获取数据查找单元,用于根据所述资源地址在原始数据库的所述原始数据中查找与所述资源内容对应的欲获取数据;欲获取数据发送单元,用于将查找到的所述欲获取数据发送给本地终端。
与现有技术相比,本发明的数据访问方法和服务器,数据访问方法应用于数据访问系统,所述数据访问系统包括服务器和本地终端,服务器包括临时数据库和非关系型数据库,原始数据库包含非关系型数据库,非关系型数据库存储有嵌套存储模型下的原始数据,服务器接收本地终端发送的数据请求,在临时数据库中查找与所述数据获取请求对应的资源表述,根据所述资源表述在原始数据库中查找欲获取的数据,。用户只需要通过本地终端发送数据请求,由本地终端将所述数据请求发送至服务器,服务器根据用户输入的数据请求在临时数据库查找与所述数据请求对应的资源表述,根据资源表述在原始数据库查找欲获取数据,通过数据转换器将存储在原始数据库中的嵌套存储模型下的数据转换为临时数据库中二维表存储模型下的待输出数据,将转换后的数据直接发送给用户,解决了用户访问不同存储模型的非关系型数据时需要设置多个专用的访问接口才能进行多种存储模型的数据访问的技术问题。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本发明较佳实施例提供的服务器与本地终端进行交互的示意图。
图2为本发明较佳实施例提供的服务器的方框示意图。
图3为本发明较佳实施例提供的数据访问方法的流程图。
图4为本发明较佳实施例提供的数据访问方法的流程图。
图5为本发明较佳实施例提供的数据访问方法的流程图。
图6为本发明较佳实施例提供的数据访问方法的流程图。
图7为本发明较佳实施例提供的数据访问方法的流程图。
图8为本发明较佳实施例提供的服务器的功能模块示意图。
图9为本发明较佳实施例提供的服务器的功能模块示意图。
图10为本发明较佳实施例提供的服务器的功能模块示意图。
图11为本发明较佳实施例提供的服务器的功能模块示意图。
图12为本发明较佳实施例提供的服务器的欲获取数据发送单元的功能模块示意图。
具体实施方式
下面将结合本发明实施例中附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1
如图1所示,是本发明较佳实施例提供的服务器101与本地终端102进行交互的示意图。所述服务器101通过网络与一个或多个本地终端102进行通信连接,以进行数据通信或交互。所述服务器101可以是网络服务器101、数据库服务器101等,本实施例所提供的服务器101优选为多个数据库服务器101集成系统,所述服务器101可以包括外设接口和内设数据库,所述外设接口可以为统一访问接口,所述内设数据库可以包括临时数据库和原始数据库,所述统一访问接口用于接收本地终端102发送的数据请求,并将接接收的数据请求发送至所述数据库,将所述数据库反馈的数据和信息显示反馈至本地终端102。
所述服务器101包括临时数据库和原始数据库,所述原始数据库包含多个非关系型数据库,多个所述非关系型数据库的种类可以包括多种,其数据模型(如键/值、列存储、文档性、图型等)多样且灵活,多种数据库的访问方式多为数据库本身提供的API或命令行,在数据模型和访问方式上标准不统一,根据其存储模型特征可以将所述非关系型数据库中存储的数据的存储模型定义为嵌套存储模型,嵌套存储模型下的数据一般不能直接提供给用户使用。所述临时数据库可以优选为关系型数据库,临时数据库存储有资源表述,所述资源表述与原始数据库中存储的数据存在映射关系,所述资源表述可以包括资源内容和资源地址,所述资源内容可以为资源地址所指向原始数据库中的非关系型数据库的存储空间存储的原始数据的提示信息。所述临时数据库优选为关系型数据库,临时数据库中数据的存储模型可以为二维表存储模型,二维表存储模型下的数据可以直接提供给用户使用。
所述本地终端102可以是个人电脑(personalcomputer,PC)、平板电脑、智能手机、个人数字助理(personaldigitalassistant,PDA)等。
如图2所示,是所述服务器200的方框示意图。所述服务器200包括数据访问装置201、存储器202、存储控制器203、处理器204、外设接口206、输入输出单元207和显示单元205等。
所述存储器202、存储控制器203、处理器204、外设接口206、输入输出单元207、显示单元205等,各元件相互之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述数据访问装置201包括至少一个可以软件或固件(firmware)的形式存储于所述存储器202中或固化在所述服务器200终端设备的操作系统(operatingsystem,OS)中的软件功能模块。所述处理器204用于执行存储器202中存储的可执行模块,例如所述数据访问装置201包括的软件功能模块或计算机程序。
其中,存储器202可以是,但不限于,随机存取存储器202(RandomAccessMemory,RAM),只读存储器202(ReadOnlyMemory,ROM),可编程只读存储器202(ProgrammableRead-OnlyMemory,PROM),可擦除只读存储器202(ErasableProgrammableRead-OnlyMemory,EPROM),电可擦除只读存储器202(ElectricErasableProgrammableRead-OnlyMemory,EEPROM)等。其中,存储器202用于存储程序,所述处理器204在接收到执行指令后,执行所述程序,前述本发明实施例任一实施例揭示的流过程定义的服务器200所执行的方法可以应用于处理器204中,或者由处理器204实现。
处理器204可能是一种集成电路芯片,具有信号的处理能力。上述的处理器204可以是通用处理器204,包括中央处理器204(CentralProcessingUnit,简称CPU)、网络处理器204(NetworkProcessor,简称NP)等;还可以是数字信号处理器204(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器204可以是微处理器204或者该处理器204也可以是任何常规的处理器204等。
所述外设接口206将各种输入/输入装置耦合至处理器204以及存储器202。在一些实施例中,外设接口206,处理器204以及存储控制器203可以在单个芯片中实现。在其他一些实例中,他们可以分别由独立的芯片实现。
输入输出单元207用于提供给用户输入数据实现用户与所述服务器200(或本地终端)的交互。所述输入输出单元207可以是,但不限于,鼠标和键盘等。
显示单元205在所述服务器200(或本地终端)与用户之间提供一个交互界面(例如用户操作界面)或用于显示图像数据给用户参考。在本实施例中,所述显示单元205可以是液晶显示器或触控显示器。若为触控显示器,其可为支持单点和多点触控操作的电容式触控屏或电阻式触控屏等。支持单点和多点触控操作是指触控显示器能感应到来自该触控显示器上一个或多个位置处同时产生的触控操作,并将该感应到的触控操作交由处理器204进行计算和处理。
请参阅图3,是本发明较佳实施例提供的应用于图2所示的服务器的数据访问方法的流程图。下面将对图3所示的具体流程进行详细阐述。
步骤S301,接收本地终端发送的数据请求,所述数据请求包括数据获取请求。
用户在需要获取数据时,在本地终端输入数据请求,所述数据请求可以为数据获取请求,所述数据获取请求可以包括欲获取数据的目录信息,所述欲获取数据可以为单个的数据,或者是一定存储单元的数据集合等。本地终端在接收到用户输入的数据请求后,将所述数据请求发送至服务器。
步骤S302,在临时数据库中查找与所述数据获取请求对应的资源表述,所述资源表述包括资源内容和资源地址,所述资源内容包括原始数据的提示信息,所述资源地址指向原始数据库中的所述非关系型数据库中的所述原始数据的存储空间。
临时数据库中预设有与原始数据库中存储的每个所述原始数据对应的资源表述,所述资源表述可以包括资源内容和资源地址。所述资源内容包括原始数据的提示信息,可以为数据目录,或者数据存储行列的主键等,也可以包括数据的表达格式,如XML、JSON等。所述资源地址为该资源内容所指向的数据在原始数据库中的原始数据的存储地址,可以使用统一资源标识符(UniformResourceIdentifier,或URI))来命名和描述资源的地址。
服务器在接收到所述本地终端发送的数据请求后,在临时数据库存储的资源表述库中,查找与所述数据获取请求对应的资源表述。
步骤S303,根据所述资源地址在原始数据库的所述原始数据中所述资源内容对应的欲获取数据。
服务器在临时数据库查找到与所述数据请求对应的资源表述后,首先根据所述资源地址查找该所述资源地址所指向的存储区域,在查找的所述存储区域内查找所述资源内容所指向的数据,所述欲获取数据包含于原始数据库中嵌套存储模型中。
步骤S304,将查找到的所述欲获取数据发送给本地终端。
服务器在原始数据库中查找到与所述数据获取请求对应点哦欲获取数据后,将所查找到的欲获取数据进行模型转换,将嵌套存储模型下的数据转换为二维表存储模型下的数据,将转换后的数据发送至本地终端,由本地终端将查找到的用户欲获取的数据反馈给用户。
上述本发明实施例提供的数据访问方法,应用于数据访问系统,所述数据访问系统包括服务器和本地终端,服务器包括原始数据库和临时数据库,所述原始数据库中存储有多个非关系型数据库,本地终端用于接收用户输入的数据请求,服务器根据数据请求在临时数据库查找与所述数据请求对应的数据表述,根据所述数据表述在原始数据库中查找欲获取的数据,将原始数据库中查找到的嵌套存储模型下的数据转换为二维表存储模型下的数据,由临时数据库将二维表存储模型下的数据反馈至本地终端。解决了现有技术的用户在需要获取非关系型数据库存储的数据时需要建立与该非关系型数据库对应的访问接口、且需要进行存储模型转换之后才能使用的技术问题,达到了用户通过统一访问接口可以直接访问多个非关系型数据库,获取二维表存储模型下的数据的技术效果。
上述实施例提供的数据访问方法中,通过在临时数据库查找与所述数据请求对应的资源表述,临时数据库存储的所述资源表述与原始数据库存储的数据存在一一映射关系,资源表述包括资源内容和资源地址,资源内容指向原始数据库存储的原始数据的数据提示信息,资源地址指向该数据在原始数据库中存储位置,则原始数据库和中间层的映射关系可以参阅图4,是本发明较佳实施例提供的应用于图2所示的服务器的数据访问方法的流程图,下面将对图4所示的具体流程进行具体阐释。
S401:将所述原始数据库存储的每个所述原始数据转换成资源内容。
原始数据库中包含多个非关系型数据库,所述非关系型数据库中存储有嵌套存储模型下的原始数据。将原始数据库存储的所有数据均转换成资源内容,其转换方式可以有多种,例如可以使用哈希函数对于每个数据存储单元内的数值进行摘要提取,将数据抽象成数据提示信息,所述资源内容即可包括所述数据提示信息,每个原始数据均可对应一个资源内容。
S402:为所述数据添加资源地址。
完成对于原始数据库的资源内容转换后,根据数据库在原始数据库中的地址为所述数据添加资源地址,所述资源地址的添加方式可以为添加统一资源定位符,方便服务器根据所述资源地址即可找到所需要的数据。
S403:根据每个所述原始数据的所述资源内容和所述资源地址为每个所述原始数据添加资源表述。
将上述步骤获取的与数据对应的资源内容和所述统一资源定位符组合为资源表述,为所述数据添加与其对应的资源表述,则建立了资源表述与数据的一一映射关系。
S404:将所述每个资源表述存储在所述临时数据库。
将上述步骤中获取的与原始数据库中存储的数据对应的资源表述存储在临时数据库中,即可形成临时数据库中的资源表述与原始数据库中存储的数据的一一映射关系,根据临时数据库中存储的资源表述即可在原始数据库中相应的位置查找所需获取的数据。
实施例2
上述实施例提供的数据访问方法,服务器在接收到用户输入的数据请求之后,根据临时数据库中存储的资源表述,在原始数据库中查找到用户欲获取的数据。考虑到用户需求的数据为常用的二维表存储模型下的数据,因此考虑增加存储模型转换过程,将多种嵌套存储模型下的数据转换成用户可以直接使用的二维表存储模型下的数据。请参阅图5,是本发明较佳实施例提供的应用于图2所示的服务器的数据访问方法的流程图,下面将对图5所示的具体流程进行具体阐释。所述原始数据库的数据存储格式为嵌套存储模型,所述临时数据库的数据存储格式为二维表存储模型,所述步骤S304:将查找到的所述欲获取数据发送给本地终端,具体包括:
S501:将嵌套存储模型下的所述欲获取数据通过数据转换机制转换为二维表存储模型下的待输出数据。
原始数据库中的多个非关系型数据库的存储模型可能为多种,每个非关系型数据库自有其预设的存储模型,根据其存储模型可以统称为嵌套存储模型,例如行键式非关系型数据库为:行健、列族、列组等的嵌套存储模型。将原始数据库中的嵌套存储模型下的所述欲获取数据通过数据转换机制转换为二维表存储模型下的待输出数据,二维表存储模型为关系型数据库中应用的常用存储模型,用户可以直接使用。所述数据转换机制可以有多种,例如可以使用MapReduce对原始数据库中二维表存储模型下的数据进行并行处理,并行处理之后按照关系型数据库的存储方式嵌套式地存储在临时数据库。使用MapReduce对原始数据库中二维表存储模型下的数据进行并行处理的过程可以包括:将非关系型数据库中的数据划分成多个行片段,并行获取多个行片段的行健、列组、列标识符和数值等,可以在临时数据库中设置行存储表、列存储表和单元格存储表,并行将多个行片段的行健存储在行存储表中,将多个行片段的列组和列标识符存储在列存储表中,将数值存储在单元格存储表中,即实现了将嵌套存储模型下的数据转换为二维表存储模型,为用户可以直接使用的数据存储模式。
S502:将所述二维表存储模型下的所述待输出数据发送至本地终端。
将上述步骤中转化后的二维表存储模型下的所述待输出数据发送至本地终端,本地终端将所获取的数据反馈给用户,即可完成数据获取过程。
考虑到用户对于某些数据的查找频率较高,若每次接收到用户输入的数据获取请求之后均进行一次查找操作,则会增加较多的查找步骤和查找时间和数据存储模型的转换过程,因此考虑将以查找的数据暂存在临时数据库,以应对用户在一定时间段内对于该数据的多次查找操作。请参阅图6,是本发明较佳实施例提供的应用于图2所示的服务器的数据访问方法的流程图,下面将对图6所示的具体流程进行具体阐释。所述步骤S304:将查找到的所述欲获取数据发送给本地终端之后,所述方法还可以包括:
S601:将所查找到的所述欲获取数据存储在临时数据库。
临时数据库在获取原始数据库发送的转换为二维表存储模型下的数据之后,将该数据反馈至本地终端之后,同时存储在临时数据库的存储空间内。
S602:在第一预设时间段内监测是否接收到所述本地终端发送的所述数据获取请求,其中,所述获取请求包括存储在所述临时数据库的所述欲获取数据。
服务器设置第一预设时间,所述第一预设之间可以根据某些数据的使用频率进行设定。在所述第一预设时间段内监测接收到的数据获取请求中,是否又包含与所存储的所述欲存储数据对应的数据获取请求。
S603:若是,将存储在所述临时数据库的所述欲获取数据发送至本地终端。
服务器在获取某数据并将其存储在临时数据库之后,在第一监测时间段内,监测是否再次接收到欲获取该数据的数据获取请求,若监测到再次接收到欲获取该数据的数据获取请求,则将存储在所述临时数据库的所述欲获取数据直接发送至本地终端,由本地终端将该数据反馈至用户。若在第一监测时间段内未再次接收到与该数据对应的数据获取请求,则将存储在临时数据库中的该数据删除,以节省临时数据库的存储空间。
本实施例既能减少在接收到某数据的获取请求时的多次获取操作,又能保证临时数据库的存储空间不会过分被占用饱和影响正常使用。
实施例3
考虑到用户对于数据库的使用除了常用的数据获取过程外,还包括数据添加、数据更新和数据删除等操作,因此为服务器增加数据添加等操作功能。请参阅图7,是本发明较佳实施例提供的应用于图2所示的服务器的数据访问方法的流程图,下面将对图7所示的具体流程进行具体阐释。所述数据请求还包括数据添加请求,所述方法还包括:
S701:接收所述本地终端发送的数据添加请求,所述数据添加请求包括欲存储数据;
S702:为所述欲存储数据添加资源表述;
S703:将所述欲存储数据和与所述欲存储数据对应的所述资源表述存储在临时数据库中;
S704:在第二预设时间段内监测是否接收所述数据获取请求,其中,所述数据获取请求包含所述欲存储数据;
S705:若否,则根据所述欲存储数据的资源表述将所述欲存储数据存储到原始数据库中。
本地终端在接收到用户输入的数据添加请求之后,将所述数据添加请求发送至服务器。服务器为所述欲存储数据添加资源表述,添加资源表述的方式可以包括上述实施例中的方式,先将数据抽象成数据提示信息,将所述数据提示信息包含在资源内容内,在原始数据库中建立存储该欲存储数据的存储空间,根据该存储空间的地址建立该数据的资源地址,组合所述资源内容和所述资源地址为该数据添加资源表述,将所述资源表述存储在临时数据库中。考虑到新存储数据的使用频率,可以优先将所述欲存储数据和资源表述均存储在临时数据库中。
服务器设定第二预设时间段,在第二预设时间段内监测是否接收与所述欲存储数据对应的所述数据获取请求,若接收到包含该欲存储数据的数据获取请求,则将所存储的数据直接发送至本地终端,由本地终端反馈给查询的用户。若没有接收到与所述欲存储数据对应的数据获取请求,则根据所述资源表述内的资源地址将该欲存储数据存储到原始数据库中。将上述数据存储在原始数据库之前,所述方法还可以包括转换过程,将二维表存储模型下的数据转换为其存储空间所在的非关系型数据库所需要的嵌套存储模型。
当然,用户还可以对于所述数据访问系统进行数据更新、数据删除的常用操作。例如,用户可通过上述本地终端为访问接口,输入数据删除或者更新操作,由服务器针对于原始数据库中存储的数据执行数据更新或者删除操作,以满足用户的常用操作需求。
上述本发明实施例提供的数据访问方法,针对于现有技术的数据库,在用户需要获取菲关系型数据库中的数据时需要建立与该非关系型数据库对应的访问接口、且需要进行存储模型转换之后才能使用的技术问题,本发明提供的数据访问方法,应用于数据访问系统,所述数据访问系统包括本地终端和服务器,建立针对于多种非关系型数据库的统一访问接口,用户通过本地终端输入数据请求,所述数据请求包括数据获取请求,服务器根据数据请求在临时数据库查找与所述数据请求对应的数据表述,根据所述数据表述在原始数据库中查找欲获取的数据,将原始数据库中查找到的嵌套存储模型下的数据转换为二维表存储模型下的数据,由临时数据库将二维表存储模型下的数据反馈至本地终端。临时数据库同时将所获取的数据存储,在接收到与该数据对应的数据获取请求时可以直接将存储的数据发送至本地终端。所述数据添加请求还可以包括数据添加请求,为欲存储数据添加资源表述,将欲存储数据进行存储模型转换之后存储到原始数据库中,达到了用户可以通过统一访问接口即可实现对于多种不同类型的菲关系型数据库的访问和交互的技术效果。
实施例4
请参阅图8,是本发明较佳实施例提供的图2所示的服务器800的功能模块示意图。所述服务器应用于数据访问系统,所述服务器包括临时数据库和原始数据库,所述原始数据库包括非关系型数据库,所述非关系型数据库中存储有嵌套存储模型下的的原始数据,所述数据访问系统还包括本地终端,所述服务器包括:
数据请求接收单元801,用于接收本地终端发送的数据请求,所述数据请求包括数据获取请求;
资源表述查找单元802,用于在临时数据库中查找与所述数据获取请求对应的资源表述,所述资源表述包括资源内容和资源地址,所述资源内容包括原始数据的提示信息,所述资源地址指向所述原始数据库中的所述非关系型数据库中的所述原始数据的存储空间;
欲获取数据查找单元803,用于根据所述资源地址在原始数据库的所述原始数据中查找与所述资源内容对应的欲获取数据;
欲获取数据发送单元804,用于将查找到的所述欲获取数据发送给本地终端。
请参阅图9,是本发明较佳实施例提供的图2所示的服务器900的功能模块示意图。所述服务器包还括:
资源内容转换单元901,用于将所述原始数据库存储的每个所述原始数据转换成资源内容;
资源地址添加单元902,用于为每个所述原始数据添加所述资源地址;
资源表述添加单元903,用于根据所述资源内容和所述资源地址为每个所述原始数据添加资源表述;
资源表述存储单元904,用于将每个所述资源表述存储在所述临时数据库。
请参阅图10,是本发明较佳实施例提供的图2所示的服务器1000的功能模块示意图。所述服务器还可以包括:
临时数据库数据存储单元1001,用于将所查找到的所述欲获取数据存储在临时数据库;
第一监测单元1002,用于在第一预设时间段内监测是否接收到所述本地终端发送的所述数据获取请求,所述数据获取请求包括存储在所述临时数据库的所述欲获取数据的数据获取请求;
临时数据库数据发送单元1003,用于将存储在所述临时数据库的所述欲获取数据发送至本地终端。
请参阅图11,是本发明较佳实施例提供的图2所示的服务器的功能模块示意图。所述数据请求还包括数据添加请求,所述临时数据库存储单元还用于将所述欲存储数据存储在所述临时数据库中,所述服务器1100还包括:
数据添加请求接收单元1101,用于接收所述本地终端发送的数据添加请求,所述数据添加请求包括欲存储数据;
欲存储数据资源表述构建单元1102,用于为所述欲存储数据添加资源表述;
第二监测单元1103,用于在第二预设时间段内监测是否接收所述数据获取请求,其中,所述数据获取请求包含所述欲存储数据;
原始数据库数据存储单元1104,用于根据所述欲存储数据的资源表述将所述欲存储数据存储到所述原始数据库中。
请参阅图12,本发明较佳实施例提供的图2所述的服务器的功能模块示意图。所述临时数据库的数据存储格式为二维表存储模型,所述欲获取数据发送单元1200包括:
存储模型转换单元1201,用于将嵌套存储模型下的所述欲获取数据通过数据转换机制转换为二维表存储模型下的待输出数据;
待输出数据发送单元1202,用于将所述二维表存储模型下的待输出数据发送至本地终端。
上述本发明实施例提供的服务器,针对于现有技术的数据库,在用户需要获取菲关系型数据库中的数据时需要建立与该非关系型数据库对应的访问接口、且需要进行存储模型转换之后才能使用的技术问题,本发明提供的数据访问服务器,应用于数据访问系统,所述数据访问系统还包括本地终端,建立针对于多种非关系型数据库的统一访问接口,用户通过本地终端输入数据请求,所述数据请求包括数据获取请求,服务器根据数据请求在临时数据库查找与所述数据请求对应的数据表述,根据所述数据表述在原始数据库中查找欲获取的数据,将原始数据库中查找到的嵌套存储模型下的数据转换为二维表存储模型下的数据,由临时数据库将二维表存储模型下的数据反馈至本地终端。临时数据库同时将所获取的数据存储,在接收到与该数据对应的数据获取请求时可以直接将存储的数据发送至本地终端。所述数据添加请求还可以包括数据添加请求,为欲存储数据添加资源表述,将欲存储数据进行存储模型转换之后存储到原始数据库中,达到了用户可以通过统一访问接口即可实现对于多种不同类型的菲关系型数据库的访问和交互的技术效果。本发明提供的服务器的具体实施过程可参照上述方法实施例,具体过程不再一一赘述。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。
Claims (10)
1.一种数据访问方法,其特征在于,应用于服务器,所述服务器包括在数据访问系统中,所述数据访问系统还包括本地终端,所述服务器包括临时数据库和原始数据库,所述原始数据库包括存储有原始数据的非关系型数据库,所述方法包括:
接收本地终端发送的数据请求,所述数据请求包括数据获取请求;
在所述临时数据库中查找与所述数据获取请求对应的资源表述,所述资源表述包括资源内容和资源地址,所述资源内容包括所述原始数据的提示信息,所述资源地址指向原始数据库中的所述非关系型数据库中的所述原始数据的存储空间;
根据所述资源地址在所述原始数据库的所述原始数据中查找与所述资源内容对应的欲获取数据;
将查找到的所述欲获取数据发送给本地终端。
2.根据权利要求1所述的数据访问方法,其特征在于,所述的接收本地终端发送的数据请求之前,所述方法还包括:
将所述原始数据库存储的每个所述原始数据转换成所述资源内容;
为每个所述原始数据添加所述资源地址;
根据每个所述原始数据的所述资源内容和所述资源地址为每个所述原始数据添加资源表述;
将每个所述资源表述存储在所述临时数据库。
3.根据权利要求1所述的数据访问方法,其特征在于,所述的将查找到所述欲获取数据发送给本地终端之后,所述方法还包括:
将所查找到的所述欲获取数据存储在临时数据库;
在第一预设时间段内监测是否接收到所述本地终端发送的所述数据获取请求,其中,所述获取请求对应于存储在所述临时数据库的所述欲获取数据;
若是,将存储在所述临时数据库的所述欲获取数据发送至本地终端。
4.根据权利要求1所述的数据访问方法,其特征在于,所述数据请求还包括数据添加请求,所述方法还包括:
接收所述本地终端发送的数据添加请求,所述数据添加请求包括欲存储数据;
为所述欲存储数据添加资源表述;
将所述欲存储数据和与所述欲存储数据对应的所述资源表述存储在临时数据库中;
根据所述欲存储数据的资源表述将所述欲存储数据存储到所述原始数据库中。
5.根据权利要求1所述的数据访问方法,其特征在于,所述原始数据库的数据存储格式包括嵌套存储模型,所述临时数据库的数据存储格式包括二维表存储模型,所述的将查找到的所述欲获取数据发送给本地终端,具体包括:
将嵌套存储模型下的所述欲获取数据通过数据转换机制转换为二维表存储模型下的待输出数据;
将所述二维表存储模型下的所述待输出数据发送至本地终端。
6.一种服务器,其特征在于,应用于数据访问系统,所述服务器包括临时数据库和原始数据库,所述原始数据库包括存储原始数据的非关系型数据库,所述数据访问系统还包括本地终端,所述服务器包括:
数据请求接收单元,用于接收本地终端发送的数据请求,所述数据请求包括数据获取请求;
资源表述查找单元,用于在临时数据库中查找与所述数据获取请求对应的资源表述,所述资源表述包括资源内容和资源地址,所述资源内容包括原始数据的提示信息,所述资源地址指向所述原始数据库中的所述非关系型数据库中的所述原始数据的存储空间;
欲获取数据查找单元,用于根据所述资源地址在原始数据库的所述原始数据中查找与所述资源内容对应的欲获取数据;
欲获取数据发送单元,用于将查找到的所述欲获取数据发送给本地终端。
7.根据权利要求6所述的服务器,其特征在于,所述服务器还包括:
资源内容转换单元,用于将所述原始数据库存储的每个所述原始数据转换成资源内容;
资源地址添加单元,用于为每个所述原始数据添加所述资源地址;
资源表述添加单元,用于根据所述资源内容和所述资源地址为每个所述原始数据添加资源表述;
资源表述存储单元,用于将每个所述资源表述存储在所述临时数据库。
8.根据权利要求6所述的服务器,其特征在于,所述服务器包括:
临时数据库数据存储单元,用于将所查找到的所述欲获取数据存储在临时数据库;
第一监测单元,用于在第一预设时间段内监测是否接收到所述本地终端发送的所述数据获取请求,所述数据获取请求包括存储在所述临时数据库的所述欲获取数据的数据获取请求;
临时数据库数据发送单元,用于将存储在所述临时数据库的所述欲获取数据发送至本地终端。
9.根据权利要求6所述的服务器,其特征在于,所述数据请求还包括数据添加请求,所述临时数据库存储单元还用于将欲存储数据存储在所述临时数据库中,所述服务器还包括:
数据添加请求接收单元,用于接收所述本地终端发送的数据添加请求,所述数据添加请求包括欲存储数据;
欲存储数据资源表述构建单元,用于为所述欲存储数据添加资源表述;
原始数据库数据存储单元,用于根据所述欲存储数据的资源表述将所述欲存储数据存储到所述原始数据库中。
10.根据权利要求6所述的服务器,其特征在于,所述原始数据库的数据存储格式包括嵌套存储模型,所述临时数据库的数据存储格式包括二维表存储模型,所述欲获取数据发送单元包括:
存储模型转换单元,用于将嵌套存储模型下的所述欲获取数据通过数据转换机制转换为二维表存储模型下的待输出数据;
待输出数据发送单元,用于将所述二维表存储模型下的待输出数据发送至本地终端。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610218072.2A CN105681477B (zh) | 2016-04-08 | 2016-04-08 | 一种数据访问方法和一种服务器 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610218072.2A CN105681477B (zh) | 2016-04-08 | 2016-04-08 | 一种数据访问方法和一种服务器 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105681477A true CN105681477A (zh) | 2016-06-15 |
CN105681477B CN105681477B (zh) | 2018-11-16 |
Family
ID=56308739
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610218072.2A Expired - Fee Related CN105681477B (zh) | 2016-04-08 | 2016-04-08 | 一种数据访问方法和一种服务器 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105681477B (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106294665A (zh) * | 2016-08-05 | 2017-01-04 | 浪潮软件股份有限公司 | 一种学籍数据存储的方法和装置 |
CN107241387A (zh) * | 2017-05-12 | 2017-10-10 | 腾讯科技(深圳)有限公司 | 数据请求的处理方法、装置及系统 |
CN109003216A (zh) * | 2018-08-20 | 2018-12-14 | 西安创艺教育培训中心有限公司 | 基于二维码扫描的云教育学习平台 |
CN109063057A (zh) * | 2018-07-20 | 2018-12-21 | 玖富金科控股集团有限责任公司 | 数据库查询方法、终端、服务器、计算机可读介质及设备 |
CN110032604A (zh) * | 2019-02-02 | 2019-07-19 | 阿里巴巴集团控股有限公司 | 数据存储装置、转译装置及数据库访问方法 |
CN110888929A (zh) * | 2019-12-06 | 2020-03-17 | 秒针信息技术有限公司 | 数据处理方法、装置、数据节点及存储介质 |
CN112667738A (zh) * | 2020-12-24 | 2021-04-16 | 山东鲁能软件技术有限公司 | 一种兼容实时数据库与关系数据库的可视化系统及方法 |
CN112765197A (zh) * | 2020-12-30 | 2021-05-07 | 金蝶软件(中国)有限公司 | 数据查询方法、装置、计算机设备和存储介质 |
CN112965984A (zh) * | 2021-05-18 | 2021-06-15 | 鲁班(北京)电子商务科技有限公司 | 一种执行数据库事务的方法及装置 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110113036A1 (en) * | 2009-11-09 | 2011-05-12 | Sam Idicula | Efficient file access in a large repository using a two-level cache |
CN103390015A (zh) * | 2013-01-16 | 2013-11-13 | 华北电力大学 | 基于统一索引的海量数据联合存储方法及检索方法 |
CN103577440A (zh) * | 2012-07-27 | 2014-02-12 | 阿里巴巴集团控股有限公司 | 一种非关系型数据库中的数据处理方法和装置 |
CN104267932A (zh) * | 2014-08-12 | 2015-01-07 | 广州华多网络科技有限公司 | 数据库操作方法、装置及服务器 |
CN104462362A (zh) * | 2014-12-08 | 2015-03-25 | 曙光信息产业(北京)有限公司 | 一种数据存储、查询、加载方法及装置 |
CN104504137A (zh) * | 2014-12-31 | 2015-04-08 | 深圳市科漫达智能管理科技有限公司 | 数据存储方法及系统 |
-
2016
- 2016-04-08 CN CN201610218072.2A patent/CN105681477B/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110113036A1 (en) * | 2009-11-09 | 2011-05-12 | Sam Idicula | Efficient file access in a large repository using a two-level cache |
CN103577440A (zh) * | 2012-07-27 | 2014-02-12 | 阿里巴巴集团控股有限公司 | 一种非关系型数据库中的数据处理方法和装置 |
CN103390015A (zh) * | 2013-01-16 | 2013-11-13 | 华北电力大学 | 基于统一索引的海量数据联合存储方法及检索方法 |
CN104267932A (zh) * | 2014-08-12 | 2015-01-07 | 广州华多网络科技有限公司 | 数据库操作方法、装置及服务器 |
CN104462362A (zh) * | 2014-12-08 | 2015-03-25 | 曙光信息产业(北京)有限公司 | 一种数据存储、查询、加载方法及装置 |
CN104504137A (zh) * | 2014-12-31 | 2015-04-08 | 深圳市科漫达智能管理科技有限公司 | 数据存储方法及系统 |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106294665A (zh) * | 2016-08-05 | 2017-01-04 | 浪潮软件股份有限公司 | 一种学籍数据存储的方法和装置 |
CN107241387A (zh) * | 2017-05-12 | 2017-10-10 | 腾讯科技(深圳)有限公司 | 数据请求的处理方法、装置及系统 |
CN109063057A (zh) * | 2018-07-20 | 2018-12-21 | 玖富金科控股集团有限责任公司 | 数据库查询方法、终端、服务器、计算机可读介质及设备 |
CN109003216A (zh) * | 2018-08-20 | 2018-12-14 | 西安创艺教育培训中心有限公司 | 基于二维码扫描的云教育学习平台 |
CN110032604B (zh) * | 2019-02-02 | 2021-12-07 | 北京奥星贝斯科技有限公司 | 数据存储装置、转译装置及数据库访问方法 |
CN110032604A (zh) * | 2019-02-02 | 2019-07-19 | 阿里巴巴集团控股有限公司 | 数据存储装置、转译装置及数据库访问方法 |
US11226961B2 (en) | 2019-02-02 | 2022-01-18 | Beijing Oceanbase Technology Co., Ltd. | Data storage apparatus, translation apparatus, and database access method |
US11797533B2 (en) | 2019-02-02 | 2023-10-24 | Beijing Oceanbase Technology Co., Ltd. | Data storage apparatus, translation apparatus, and database access method |
CN110888929A (zh) * | 2019-12-06 | 2020-03-17 | 秒针信息技术有限公司 | 数据处理方法、装置、数据节点及存储介质 |
CN110888929B (zh) * | 2019-12-06 | 2022-03-29 | 秒针信息技术有限公司 | 数据处理方法、装置、数据节点及存储介质 |
CN112667738A (zh) * | 2020-12-24 | 2021-04-16 | 山东鲁能软件技术有限公司 | 一种兼容实时数据库与关系数据库的可视化系统及方法 |
CN112667738B (zh) * | 2020-12-24 | 2023-03-14 | 山东鲁能软件技术有限公司 | 一种兼容实时数据库与关系数据库的可视化系统及方法 |
CN112765197A (zh) * | 2020-12-30 | 2021-05-07 | 金蝶软件(中国)有限公司 | 数据查询方法、装置、计算机设备和存储介质 |
CN112765197B (zh) * | 2020-12-30 | 2024-04-30 | 金蝶软件(中国)有限公司 | 数据查询方法、装置、计算机设备和存储介质 |
CN112965984A (zh) * | 2021-05-18 | 2021-06-15 | 鲁班(北京)电子商务科技有限公司 | 一种执行数据库事务的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN105681477B (zh) | 2018-11-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105681477A (zh) | 一种数据访问方法和一种服务器 | |
CN103210386B (zh) | 混合联合搜索的方法、系统和设备 | |
CN111061766A (zh) | 一种业务数据的处理方法、装置、计算机设备及存储介质 | |
CN104823170A (zh) | 分布式缓存群集管理 | |
CN104735631A (zh) | 同步操作短信数据的方法及系统 | |
CN104978183A (zh) | 一种图标构造方法,及终端设备 | |
TWI235946B (en) | Method and system of displaying data | |
CN102571919B (zh) | 工作站动态远程控制终端的方法和系统 | |
CN102546811A (zh) | 一种为移动终端安装浏览器插件的方法与设备 | |
CN109756584A (zh) | 域名解析方法、域名解析装置及计算机可读存储介质 | |
WO2014146450A1 (en) | Method, device and system for data searching | |
CN102957681A (zh) | 嵌入式浏览器、智能家电设备及智能物联网系统 | |
US8977616B2 (en) | Methods, apparatuses and computer program products for generating indexes using a journal in a key value memory device | |
CN112905600A (zh) | 数据查询方法、装置和存储介质及电子设备 | |
CN104361040A (zh) | 一种定制查询的方法及装置 | |
CN105530222A (zh) | 多终端之间的连接建立方法、装置和系统 | |
WO2024160268A1 (zh) | 页面渲染方法、装置、设备及存储介质 | |
CN104243565A (zh) | 获取配置数据的方法和装置 | |
CN105930354A (zh) | 存储模型转换方法和装置 | |
JP2018072958A (ja) | データ提供装置及びデータ提供方法 | |
CN102982034A (zh) | 互联网站内信息的搜索方法和搜索系统 | |
CN102332019B (zh) | 一种web网站转换到wap网站的方法及系统 | |
CN103167627A (zh) | 一种基于wifi无线局域网实现手机文件共享的系统及方法 | |
CN111367996A (zh) | 基于kv索引的热数据增量同步方法及装置 | |
CN103533085A (zh) | 一种远程控制计算机的方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20181116 |