CN114281889A - Smg-vme-dsss数据共享切片服务 - Google Patents

Smg-vme-dsss数据共享切片服务 Download PDF

Info

Publication number
CN114281889A
CN114281889A CN202111392114.1A CN202111392114A CN114281889A CN 114281889 A CN114281889 A CN 114281889A CN 202111392114 A CN202111392114 A CN 202111392114A CN 114281889 A CN114281889 A CN 114281889A
Authority
CN
China
Prior art keywords
service
data
group
sharing
enterprise
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111392114.1A
Other languages
English (en)
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daohebang Guangzhou Electronic Information Technology Co ltd
Original Assignee
Daohebang Guangzhou Electronic Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daohebang Guangzhou Electronic Information Technology Co ltd filed Critical Daohebang Guangzhou Electronic Information Technology Co ltd
Publication of CN114281889A publication Critical patent/CN114281889A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/4401—Bootstrapping
    • G06F9/4418—Suspend and resume; Hibernate and awake
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/448—Execution paradigms, e.g. implementations of programming paradigms
    • G06F9/4482—Procedural
    • G06F9/4484—Executing subprograms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5016—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals the resource being the memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5022—Mechanisms to release resources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Multi Processors (AREA)
  • Computer And Data Communications (AREA)
  • Stored Programmes (AREA)

Abstract

本发明SMG‑VME‑DSSS共享数据切片服务；本发明在传统数据库改造成为超大数据库，集团企业只需要一个域名即可完成集团企业数据绑定实现将企业的产品推给全世界，实现数据隔离，共享访问服务，可以实现数据秒切服务，可以实现集团的可迭代算力输出，可以实现集团的分布式存储输出；可以实现数据标准化，数据格式化，并实现超集团算力共享，可实现超集团大数据神经网络系统，可实现超大集团宏观经济精准调控，本发明是一次开发处处运行，打通了用户信息孤岛，对实现低碳经济有非常大的助力,结合afs(n)智能合约可实现超大集团智慧互联网。

Description

SMG-VME-DSSS数据共享切片服务
技术领域
本发明是为解决分布式环境下各集团企业如何进行快速的算力（计算）共享，存储共享，数据隔离独享，以及数据共享；数据格式化，接口标准化。数据格式化，接口标准化还是个全新的领域，这个领域是为打通信息孤岛，提高神经网络。
本发明可实现数据库基于域名隔离的企业级用户隔离访问,亦可将多个域名映射到一个域名.所有域名数据按数据库切片进行访问。
该发明极大的节省存储空间,与成本.如果不这样做,传统做法把整个物理数据库完全复制，一个服务器需要启动几个数据库；而目前方法只需要一个超级数据库，可支持上万级企业用户/节点，传统模式仅支持3-5个客户/节点，效率大幅提升；此法:可被称为支持企业运营商级裂变能力。
支持数据秒切换服务，该发明为DSSS数据共享切片服务是SAAS 的一种。
现有技术： 是整个数据库的copy. 一台服务器只能复制2-3个企业用户，服务器就跑不动，因为是整个数据库copy。导致程序难以维护更新。
本发明可实现数据切片秒切，秒部署。单服务器支持100000企业客户.数据隔离，共享，传统技术难以做到。
本项发明，依赖于SMG-VME可迭代分布式操作系统，具体参国家专利申请号：2021113373306,电子申请案卷编号:364636644，得以继承实现。亦可单独作为核心产品服务模块单独定制数据共享切片服务输出；可以作为SAAS 服务输出使用。
专利审查：截至2021-11-23网络搜索暂无同案例。
背景技术
随着工业互联网，万物智能互联，分布式计算，大数据推衍发展，超大规模数据的计算与存储摆在面前。本发明主要是研究并行计算引擎，超大规模数据存储与计算而针对性设计出一套可行的框架。对外进行算力输出构建IAAS,SAAS系统。超集团企业共享算力，共享存储。提升CPU使用效率，内存存储效率，提升分布式数据存储能力。
发明内容
图1 为可宇宙可迭代操作系统推衍vme(n)，参专利申请号2021113373306；
图2 vme(n) 组件架构图 ，参专利申请号2021113373306；
图3本发明mbs SMG-VME-DSSS数据共享切片服务;
本发明处于mbs(n)图3,409 .DSSS 图3，40902 数据共享切片服务，图3,40902。
通过改造传统数据库图3，4090200 多个table(n) ，增加字段zoneid 指向主域名来构建数据库大表指针。当企业用户通过访问$domain图3，40901，自动通过exeSql引擎图3，40903 进行数据隔离访问；多个企业可以通过配置mapzone 图3，4090201,指向一个基础域名亦可指向独特域名实现数据共享，独立访问。 base图3，40900 为基础商城框架，由所有企业共享。结合DSSS 图3，40902 实现企业独特的数据商务活动。所有企业共享base，就会实现接口标准化，数据格式化；算力共享，数据共享。
一种基于数据库共享切片服务算法，其特征：
1.1 将传统数据库任意表通过增加zoneid->域名指针，按照物理空间组合为超大表；
1.2 将所有的表以1.1方式改造; 上述改造通过sql执行脚本可批量工程执行;
1.3 过建立配置mapzone 映射注册表增加企业域名与mapzoneid绑定，可支持m:1共享模式,m:m 独享模式；
1.4 可导入基础base库，实现商城的基础服务，绑定企业zoneid可实现企业数据的隔离与共享服务；
1.5 通过java exeSql sql执行解析器，调用程序数据库操作；执行器会自动按zoneid进行隔离访问。这个要改造程序代码对凡是对数据库的操作统一exeSql 代替，或使用本项目下的Putter操作操作数据库；因为中间件封装了zoneid绑定；在执行时需要动态传入全局变量 访问者主域名；
1.6 通过1.1,1.2,1.3,1.4,1.5实现集团企业数据隔离与访问；实现接口标准化，数据格式化，数据切片共享；最终实现算力共享，存储共享;
1.7 base基础商城；可以将其比喻为一个大香肠，里边参杂各种表服务；每一层为一维度，保护了各类表的服务的综合调用，企业数据放在这一层，而其他企业数据放在另外一层，互不影响，数据物理隔离，对企业客户可以切一片香肠切片为其服务，各大企业共享香肠服务；每一切片物理层代表其私有数据；通过域名隔离；所有企业可以共享base基础架构服务;
1.8 基于1.3,1.7 可实现m:1数据映射服务，几家企业可以共享一组基础数据服务；亦可m:m独享私有数据隔离服务。无论共享还是独享，核心接口数据会接入国家神经网络大数据中心，可以实现超大集团的大数据采集，以及宏观经济精准调控；
2. 一种基于VME可迭代分布式操作系统共享切片服务系统，其特征：
2.1 因为vme(n) 可迭代：符合规则f(n)=f(n+1);
2.2 基于2.1 vme 实现的共享切片base服务属于mbs(n)项目子服务，mbs(n)是可迭代，故base服务亦可迭代；
3. 一种基于基于vme可迭代分布式操作系统实现的数据即切片共享服务算力共享系统，其特征：
3.1 基于1,2 所示，集团企业只需要提交域名即可实现数据隔离独享，共享数据切片服务；
3.2 本发明支持数据格式化输入、输出服务；
3.3 本发持数据接口标准化服务；
3.4 前端为mbs(n)基础可迭代商城服务,后端是基于vme(n)可迭代分布式操作系统服务,为系统模式系统，电商的实现；
3.5 基于3.1，3.2，3.3，3.4 当大多数企业使用本服务即可实现超大集团数据共享切片服务，实现超大集团数据格式化服务，接口标准化服务，数据共享隔离服务，即可实现算力共享，存储力共享服务；
3.6 因为所有基础服务是通过引用而非拷贝；所有服务共享一组程序集库，基于3.5只需要集群同步共享程序集即可完成所有集团企业的算力可迭代升级。
一种打通用户信息孤岛商业模型服务，其特征:
4.1 基于mbs(n) base(n) 数据服务；因为vme(n)可迭代，mbs(n)可迭代，故base(n)可迭代；
4.2 基于4.1 base(n) 用户存在afs(n)分布式存储系统上是独立第三方业务平台，由此得到，用户是均衡的分散存储在数据节点片上；
4.3 基于制定hash算法，4.1 ,4.2 base(n) 迭代裂变出的子系统用户亦是同样分布式存储；
4.4 基于4.3 制定hash算法，相同的用户总是独立保存在afs(n)数据节点上，故，用户具有全局性，与业务非相关性;
4.5 基于4.3,4.1 裂变出的mbs(n)子商城系统，用户具有相通性；设A,B集团都是基于mbs裂变的商城；则有用户X在A注册了，则可自动登录B集团；用户Y在B集团注册了，则亦可登录A集团；实现用户一次注册，处处登录；打通了信息孤岛。
5. 本发明现实意义：
本发明在传统数据库改造成为超大数据库，集团企业只需要一个域名即可完成集团企业数据绑定实现将企业的产品推给全世界，实现数据隔离，共享访问服务，可以实现数据秒切服务，可以实现集团的可迭代算力输出，可以实现集团的分布式存储输出；可以实现数据标准化，数据格式化，并实现超集团算力共享，可实现超集团大数据神经网络系统，可实现超大集团宏观经济精准调控，本发明是一次开发处处运行，打通了用户信息孤岛，对实现低碳经济有非常大的助力,结合afs(n)智能合约可实现超大集团智慧互联网。

Claims (4)

1.一种基于数据库共享切片服务算法，其特征：
1.1将传统数据库任意表通过增加zoneid->域名指针，按照物理空间组合为超大表；
1.2将所有的表以1.1方式改造; 上述改造通过sql执行脚本可批量工程执行;
1.3过建立配置mapzone 映射注册表增加企业域名与mapzoneid绑定；
1.4可导入基础base库，实现商城的基础服务，绑定企业zoneid可实现企业数据的隔离与共享服务；
1.5通过exeSql sql执行解析器，调用程序数据库操作；执行器会自动按zoneid进行隔离访问;
1.6通过1.1,1.2,1.3,1.4,1.5实现集团企业数据隔离与访问；实现接口标准化，数据格式化，数据切片共享；最终实现算力共享，存储共享;
1.7 base基础商城；可以将其比喻为一个大香肠，里边参杂各种表服务；对企业客户可以切一片香肠切片为其服务，各大企业共享香肠服务；每一切片物理层代表其私有数据；通过域名隔离；所有企业可以共享base基础架构服务;
1.8基于1.3,1.7 可实现m:1数据映射服务，几家企业可以共享一组基础数据服务；亦可m:m独享私有数据隔离服务。
2.一种基于VME可迭代分布式操作系统共享切片服务系统，其特征：
2.1 因为vme(n) 可迭代：符合规则f(n)=f(n+1);
基于2.1 vme 实现的共享切片base服务属于mbs(n)项目子服务，mbs(n)是可迭代，故base服务亦可迭代。
3.一种基于基于vme可迭代分布式操作系统实现的数据即切片共享服务算力共享系统，其特征：
3.1基于权利1，2 所示，集团企业只需要提交域名即可实现数据隔离独享，共享数据切片服务；
3.2 本发明支持数据格式化输入、输出服务；
3.3 本发持数据接口标准化服务；
3.4前端为mbs(n)基础可迭代商城服务,后端是基于vme(n)可迭代分布式操作系统服务,为系统模式系统，电商的实现；
3.5基于3.1，3.2，3.3，3.4 当大多数企业使用本服务即可实现超大集团数据共享切片服务，实现超大集团数据格式化服务，接口标准化服务，数据共享隔离服务，即可实现算力共享，存储力共享服务；
3.6因为所有基础服务是通过引用而非拷贝；所有服务共享一组程序集库，基于3.5只需要集群同步共享程序集即可完成所有集团企业的算力可迭代升级。
4.一种打通用户信息孤岛商业模型服务，其特征:
4.1基于mbs(n) base(n) 数据服务；因为vme(n)可迭代，mbs(n)可迭代，故base(n)可迭代；
4.2基于4.1 base(n) 用户存在afs(n)分布式存储系统上是独立第三方业务平台，由此得到， 用户是均衡的分散存储在数据节点片上；
4.3基于制定hash算法，4.1 ,4.2 base(n) 迭代裂变出的子系统用户亦是同样分布式存储；
4.4基于4.3 制定hash算法，相同的用户总是独立保存在afs(n)数据节点上，故，用户具有全局性，与业务非相关性;
4.5 基于4.3,4.1 裂变出的mbs(n)子商城系统，用户具有相通性；设A,B集团都是基于mbs裂变的商城；则有用户X在A注册了，则可自动登录B集团；用户Y在B集团注册了，则亦可登录A集团；实现用户一次注册，处处登录；打通了信息孤岛。
CN202111392114.1A 2021-11-15 2021-11-23 Smg-vme-dsss数据共享切片服务 Pending CN114281889A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN2021113373306 2021-11-15
CN202111337330 2021-11-15

Publications (1)

Publication Number Publication Date
CN114281889A true CN114281889A (zh) 2022-04-05

Family

ID=80390145

Family Applications (5)

Application Number Title Priority Date Filing Date
CN202111375039.8A Pending CN114138898A (zh) 2021-11-15 2021-11-20 Smg-vme-afs可迭代分布式存储系统
CN202111381552.8A Pending CN114138410A (zh) 2021-11-15 2021-11-21 SMG-vmecloneVMOS可迭代虚拟机克隆操作系统
CN202111381353.7A Pending CN114157460A (zh) 2021-11-15 2021-11-22 SMG-VME-aDDoS基于VME-TCP-IP反DDoS攻击防御系统
CN202111392114.1A Pending CN114281889A (zh) 2021-11-15 2021-11-23 Smg-vme-dsss数据共享切片服务
CN202210154742.4A Pending CN114510335A (zh) 2021-11-15 2022-02-21 Smg-vme可迭代分布式操作系统

Family Applications Before (3)

Application Number Title Priority Date Filing Date
CN202111375039.8A Pending CN114138898A (zh) 2021-11-15 2021-11-20 Smg-vme-afs可迭代分布式存储系统
CN202111381552.8A Pending CN114138410A (zh) 2021-11-15 2021-11-21 SMG-vmecloneVMOS可迭代虚拟机克隆操作系统
CN202111381353.7A Pending CN114157460A (zh) 2021-11-15 2021-11-22 SMG-VME-aDDoS基于VME-TCP-IP反DDoS攻击防御系统

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202210154742.4A Pending CN114510335A (zh) 2021-11-15 2022-02-21 Smg-vme可迭代分布式操作系统

Country Status (1)

Country Link
CN (5) CN114138898A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116094769B (zh) * 2022-12-22 2024-03-01 燕山大学 一种抵御虚假数据注入攻击的港口微电网控制方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040187032A1 (en) * 2001-08-07 2004-09-23 Christoph Gels Method, data carrier, computer system and computer progamme for the identification and defence of attacks in server of network service providers and operators
CN102291390B (zh) * 2011-07-14 2014-06-04 南京邮电大学 一种基于云计算平台的防御拒绝服务攻击的方法
US9171147B2 (en) * 2012-07-31 2015-10-27 Thomas C. Logan Process and system for strengthening password security
CN109327426A (zh) * 2018-01-11 2019-02-12 白令海 一种防火墙攻击防御方法

Also Published As

Publication number Publication date
CN114138410A (zh) 2022-03-04
CN114510335A (zh) 2022-05-17
CN114157460A (zh) 2022-03-08
CN114138898A (zh) 2022-03-04

Similar Documents

Publication Publication Date Title
Liu et al. A task scheduling algorithm based on classification mining in fog computing environment
CN109857755B (zh) 一种规则校验方法及装置
US20020035559A1 (en) System and method for a decision engine and architecture for providing high-performance data querying operations
CN104160381A (zh) 多租户环境中租户特定数据集的管理
Bergman et al. Permissioned blockchains and distributed databases: A performance study
EP2831774A1 (en) Method and system for centralized issue tracking
CN104484472A (zh) 一种混合多种异构数据源的数据库集群及实现方法
CN101945126A (zh) 森林资源异构数据分布式管理系统
Yan et al. A parallel algorithm for mining constrained frequent patterns using MapReduce
CN114281889A (zh) Smg-vme-dsss数据共享切片服务
US11704327B2 (en) Querying distributed databases
Chen et al. SOAr-DSGrid: service-oriented architecture for distributed simulation on the grid
CN113127906A (zh) 基于c/s架构的统一权限管理平台、方法及存储介质
CN110109912A (zh) 一种标识符生成方法和装置
US11727022B2 (en) Generating a global delta in distributed databases
Chihoub et al. 10 ConsistencyManagement in Cloud Storage Systems
Carstoiu et al. High performance eventually consistent distributed database Zatara
Wan et al. Smart Contract Service Optimization in Blockchain-Cloud Collaborative Computing
Tian et al. Horae: causal consistency model based on hot data governance
Cosulschi et al. Implementing bfs-based traversals of rdf graphs over mapreduce efficiently
Kuhring et al. StreamChain: Rethinking Blockchain for Datacenters
Yang et al. DCAB: An Effective Data Collection and Analysis Service for Blockchain
US20230247111A1 (en) Runtime module conversion
CN117539962B (zh) 数据处理方法、装置、计算机设备和存储介质
CN114268540B (zh) 规则引擎的优化方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination