CN105740373B - 基于分布式内存的虚拟现实平台数据查询方法 - Google Patents

基于分布式内存的虚拟现实平台数据查询方法 Download PDF

Info

Publication number
CN105740373B
CN105740373B CN201610055492.3A CN201610055492A CN105740373B CN 105740373 B CN105740373 B CN 105740373B CN 201610055492 A CN201610055492 A CN 201610055492A CN 105740373 B CN105740373 B CN 105740373B
Authority
CN
China
Prior art keywords
model data
query
index
power station
distributed memory
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610055492.3A
Other languages
English (en)
Other versions
CN105740373A (zh
Inventor
袁成
倪祺
陈宁
胡为进
谈雪晶
陈锦华
沈保国
田晓声
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHANGHAI SHINE ENERGY INFO-TECH Co Ltd
State Grid Shanghai Electric Power Co Ltd
Original Assignee
SHANGHAI SHINE ENERGY INFO-TECH Co Ltd
State Grid Shanghai Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHANGHAI SHINE ENERGY INFO-TECH Co Ltd, State Grid Shanghai Electric Power Co Ltd filed Critical SHANGHAI SHINE ENERGY INFO-TECH Co Ltd
Priority to CN201610055492.3A priority Critical patent/CN105740373B/zh
Publication of CN105740373A publication Critical patent/CN105740373A/zh
Application granted granted Critical
Publication of CN105740373B publication Critical patent/CN105740373B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2453—Query optimisation
    • G06F16/24534—Query rewriting; Transformation
    • G06F16/24539—Query rewriting; Transformation using cached or materialised query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2471—Distributed queries

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种基于分布式内存的虚拟现实平台数据查询方法，包括步骤：S1：根据电站或线路的电压等级和所属单位分别在第一索引集合和第二索引集合中检索得到第一id集合和第二id集合，并取得两个id集合的交集；S2：判断两个id集合的交集是否为空集，若为是，则执行步骤S3，若为否，则执行步骤S4；S3：根据电压等级和所属单位在数据库中查询得到电站或线路的台账信息和模型数据，并在第一索引集合和第二索引集合中新建对应的索引条目，以及根据台账信息中的id在分布式内存系统中存储得到的模型数据；S4：根据交集中的id在分布式内存系统中查询并读取对应的模型数据。与现有技术相比，本发明具有查询效率高，使用体验好等优点。

Description

基于分布式内存的虚拟现实平台数据查询方法
技术领域
本发明涉及一种数据查询技术，尤其是涉及一种基于分布式内存的虚拟现实平台数据查询方法。
背景技术
虚拟现实和大数据环境下，利用传统的数据库，访问海量数据，存在着性能瓶颈，这样会导致信息不能及时被显示在客户端的输出设备上。为保证在规定时间，从海量数据中查询出想要的数据，我们引入的分布式内存。目前的查询方案，是直接从数据库中查询，由于数据库中的数据量很大，再加上多人访问时，数据库的承受压力有限，导致了查询性能很低，数据不能及时显示到客户端上，现有的内存方案是把数据缓存到服务器的内存中，这种方法虽然实现起来比较简单，但是数据同步起来比较费时。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种基于分布式内存的虚拟现实平台数据查询方法。
本发明的目的可以通过以下技术方案来实现：
一种基于分布式内存的虚拟现实平台数据查询方法，包括步骤：
S1：根据电站或线路的电压等级和所属单位分别在第一索引集合和第二索引集合中检索得到第一id集合和第二id集合，并取得两个id集合的交集；
S2：判断两个id集合的交集是否为空集，若为是，则执行步骤S3，若为否，则执行步骤S4；
S3：根据电压等级和所属单位在数据库中查询得到电站或线路的台账信息和模型数据，并在第一索引集合和第二索引集合中新建对应的索引条目，以及根据台账信息中的id在分布式内存系统中存储得到的模型数据；
S4：根据交集中的id在分布式内存系统中查询并读取对应的模型数据。
由于客户端要根据电压等级和所属单位查询数据，所以，我们要在分布式内存中，建立一个根据电压等级匹配出相应id的set集合和根据所属单位匹配出相应的id的set集合，然后去求两个集合的交集，得到最后的id，再根据id去查询数据。
所述第一索引集合中存储有电压等级和id之间的对照关系，所述第二索引集合中存储有所属单位和id之间的对照关系。
所述步骤S3具体包括步骤：
S31：根据电站或线路的电压等级和所属单位在数据库中查询得到电站或线路的台账信息和模型数据，其中，所述台账信息包括电站或线路的id、名称、电压等级和所属单位；
S32：根据台账信息中的id和电压等级在第一索引集合中新建用于表征电压等级和id之间对照关系的索引条目；
S33：根据台账信息中的id和所属单位在第二索引集合中新建用于表征所属单位和id之间对照关系的索引条目；
S34：根据台账信息中的id将得到的模型数据存储至分布式内存系统中。
所述步骤S4具体包括步骤：
S41：根据交集中的id在分布式内存系统中查询对应的模型数据；
S42：判断是否存在对应的模型数据，若为是，则执行步骤S43，若为否，则执行步骤S44；
S43：读取查询得到的模型数据；
S44：根据id在数据库中查询得到电站或线路的台账信息和模型数据，以及根据id在分布式内存系统中存储得到的模型数据。
所述电站或线路台账数据中的id由其对应模型数据的查询次数确定。
每隔第一设定时间，各电站或线路台账数据中的id更新一次，当id更新时，在第一索引集合和第二索引集合中更新对应的索引条目，并根据更新后id在分布式内存系统中存储模型数据。
所述查询次数为自id更新时刻起往前追溯第二设定时间期间内的查询次数。
与现有技术相比，本发明具有以下优点：
1)利用分布式内存可以提升数据的访问速度，同时，也减少了服务器的访问压力，减少用户等待时间，使数据及时反馈到客户端，提升用户体验感，在一些实时的环境下，利用分布式内存还可以保证数据的实时性。
2)在虚拟现实平台下，利用分布式内存，可以更快的查询台帐信息，方便用户快速定位到所查询的电站或者线路，提高虚拟现实平台的响应速度与表现性能。
3)将关键词拆分后分别在第一索引集合和第二索引集合中检索得到第一id集合和第二id集合，提高检索效率。
4)id由对应模型数据的查询次数确定，可以提高内存的应用效率。
附图说明
图1为本发明的主要步骤流程示意图。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
一种基于分布式内存的虚拟现实平台数据查询方法，如图1所示，包括步骤：
S1：根据电站或线路的电压等级和所属单位分别在第一索引集合和第二索引集合中检索，由于一个电压等级可以对应多个id，一个所述单位也可以对应多个id，因此会检索得到第一id集合和第二id集合，取得两个id集合的交集，其中，第一索引集合中存储有电压等级和id之间的对照关系，第二索引集合中存储有所属单位和id之间的对照关系；
S2：判断两个id集合的交集是否为空集，若为是，则执行步骤S3，若为否，则执行步骤S4；
S3：根据电压等级和所属单位在数据库中查询得到电站或线路的台账信息和模型数据，并在第一索引集合和第二索引集合中新建对应的索引条目，以及根据台账信息中的id在分布式内存系统中存储得到的模型数据，具体包括步骤：
S31：根据电站或线路的电压等级和所属单位在数据库中查询得到电站或线路的台账信息和模型数据，其中，台账信息包括电站或线路的id、名称、电压等级和所属单位；
S32：根据台账信息中的id和电压等级在第一索引集合中新建用于表征电压等级和id之间对照关系的索引条目；
S33：根据台账信息中的id和所属单位在第二索引集合中新建用于表征所属单位和id之间对照关系的索引条目；
S34：根据台账信息中的id将得到的模型数据存储至分布式内存系统中。
S4：根据交集中的id在分布式内存系统中查询并读取对应的模型数据，但是由于分布式内存系统的容量是有限的，一部分的模型数据可能会再更新中被覆盖，因此该步骤具体包括步骤：
S41：根据交集中的id在分布式内存系统中查询对应的模型数据；
S42：判断是否存在对应的模型数据，若为是，则执行步骤S43，若为否，则执行步骤S44；
S43：读取查询得到的模型数据；
S44：根据id在数据库中查询得到电站或线路的台账信息和模型数据，以及根据id在分布式内存系统中存储得到的模型数据。
此外，电站或线路台账数据中的id由其对应模型数据的查询次数确定。每隔第一设定时间(例如为10分钟)，各电站或线路台账数据中的id更新一次，当id更新时，在第一索引集合和第二索引集合中更新对应的索引条目，并根据更新后id在分布式内存系统中存储模型数据，其中，查询次数为自id更新时刻起往前追溯第二设定时间期间内的查询次数。第二设定时间可以采用与第一设定时间相同的设定，当为10分钟时，即为最近10分钟内的查询次数，查询次数越多，其在分布式内存系统中存储的数据越不容易被覆盖。

Claims (2)

1.一种基于分布式内存的虚拟现实平台数据查询方法，其特征在于，包括步骤：
S1：根据电站或线路的电压等级和所属单位分别在第一索引集合和第二索引集合中检索得到第一id集合和第二id集合，并取得两个id集合的交集，
S2：判断两个id集合的交集是否为空集，若为是，则执行步骤S3，若为否，则执行步骤S4；
S3：根据电压等级和所属单位在数据库中查询得到电站或线路的台账信息和模型数据，并在第一索引集合和第二索引集合中新建对应的索引条目，以及根据台账信息中的id在分布式内存系统中存储得到的模型数据，
S4：根据交集中的id在分布式内存系统中查询并读取对应的模型数据；
所述第一索引集合中存储有电压等级和id之间的对照关系，所述第二索引集合中存储有所属单位和id之间的对照关系；
所述步骤S3具体包括步骤：
S31：根据电站或线路的电压等级和所属单位在数据库中查询得到电站或线路的台账信息和模型数据，其中，所述台账信息包括电站或线路的id、名称、电压等级和所属单位，
S32：根据台账信息中的id和电压等级在第一索引集合中新建用于表征电压等级和id之间对照关系的索引条目，
S33：根据台账信息中的id和所属单位在第二索引集合中新建用于表征所属单位和id之间对照关系的索引条目，
S34：根据台账信息中的id将得到的模型数据存储至分布式内存系统中；
所述电站或线路台账数据中的id由其对应模型数据的查询次数确定；
每隔第一设定时间，各电站或线路台账数据中的id更新一次，当id更新时，在第一索引集合和第二索引集合中更新对应的索引条目，并根据更新后id在分布式内存系统中存储模型数据；
所述查询次数为自id更新时刻起往前追溯第二设定时间期间内的查询次数。
2.根据权利要求1所述的一种基于分布式内存的虚拟现实平台数据查询方法，其特征在于，所述步骤S4具体包括步骤：
S41：根据交集中的id在分布式内存系统中查询对应的模型数据；
S42：判断是否存在对应的模型数据，若为是，则执行步骤S43，若为否，则执行步骤S44；
S43：读取查询得到的模型数据；
S44：根据id在数据库中查询得到电站或线路的台账信息和模型数据，以及根据id在分布式内存系统中存储得到的模型数据。
CN201610055492.3A 2016-01-27 2016-01-27 基于分布式内存的虚拟现实平台数据查询方法 Active CN105740373B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610055492.3A CN105740373B (zh) 2016-01-27 2016-01-27 基于分布式内存的虚拟现实平台数据查询方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610055492.3A CN105740373B (zh) 2016-01-27 2016-01-27 基于分布式内存的虚拟现实平台数据查询方法

Publications (2)

Publication Number Publication Date
CN105740373A CN105740373A (zh) 2016-07-06
CN105740373B true CN105740373B (zh) 2019-11-08

Family

ID=56247722

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610055492.3A Active CN105740373B (zh) 2016-01-27 2016-01-27 基于分布式内存的虚拟现实平台数据查询方法

Country Status (1)

Country Link
CN (1) CN105740373B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101533406A (zh) * 2009-04-10 2009-09-16 北京锐安科技有限公司 一种海量数据查询方法
CN103631910A (zh) * 2013-11-26 2014-03-12 烽火通信科技股份有限公司 一种分布式数据库多列复合查询的系统及方法
CN104731922A (zh) * 2015-03-26 2015-06-24 江苏物联网研究发展中心 基于分布式数据库HBase的结构化数据的快速检索系统及方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9478065B2 (en) * 2013-03-14 2016-10-25 Robert Bosch Gmbh System and method for remote generation of indirect illumination sources in three-dimensional graphics

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101533406A (zh) * 2009-04-10 2009-09-16 北京锐安科技有限公司 一种海量数据查询方法
CN103631910A (zh) * 2013-11-26 2014-03-12 烽火通信科技股份有限公司 一种分布式数据库多列复合查询的系统及方法
CN104731922A (zh) * 2015-03-26 2015-06-24 江苏物联网研究发展中心 基于分布式数据库HBase的结构化数据的快速检索系统及方法

Also Published As

Publication number Publication date
CN105740373A (zh) 2016-07-06

Similar Documents

Publication Publication Date Title
CN104376053B (zh) 一种基于海量气象数据的存储与检索方法
KR102407510B1 (ko) 데이터 저장 및 조회 방법, 장치, 기기 및 매체
CN102184222B (zh) 一种在大数据量存储中快速检索的方法
EP2874077B1 (en) Stateless database cache
CN105373541B (zh) 数据库的数据操作请求的处理方法和系统
CN102867070A (zh) 更新key-value分布式存储系统缓存的方法
CN109597829B (zh) 一种实现可搜索加密关系型数据库缓存的中间件方法
CN103955533B (zh) 一种基于缓冲队列的页面树形数据获取装置及方法
WO2017096892A1 (zh) 索引构建方法、查询方法及对应装置、设备、计算机存储介质
CN106294772A (zh) 分布式内存列式数据库的缓存管理方法
CN104572856A (zh) 一种服务起源数据的融合存储方法
CN110737682A (zh) 一种缓存操作方法、装置、存储介质和电子设备
CN111913960A (zh) 一种表单处理方法及相关设备
CN105930388A (zh) 一种基于函数依赖关系的olap分组聚集方法
CN107273443B (zh) 一种基于大数据模型元数据的混合索引方法
CN108241709A (zh) 一种数据集成方法、装置和系统
CN104462134A (zh) 一种检索方法与系统
CN105357297A (zh) 一种数据缓存的系统及方法
WO2023184908A1 (zh) 一种多租户共享数据的处理方法和系统
CN111046106A (zh) 缓存数据同步方法、装置、设备及介质
CN104750860B (zh) 一种不确定数据的数据存储方法
CN111737537B (zh) 基于图数据库的poi推荐方法、设备及介质
CN105930354A (zh) 存储模型转换方法和装置
CN105740374B (zh) 基于分布式内存的三维平台数据模糊查询方法
CN105740373B (zh) 基于分布式内存的虚拟现实平台数据查询方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant