CN105681414A - 一种避免Hbase数据热点的方法及系统 - Google Patents
一种避免Hbase数据热点的方法及系统 Download PDFInfo
- Publication number
- CN105681414A CN105681414A CN201610024940.3A CN201610024940A CN105681414A CN 105681414 A CN105681414 A CN 105681414A CN 201610024940 A CN201610024940 A CN 201610024940A CN 105681414 A CN105681414 A CN 105681414A
- Authority
- CN
- China
- Prior art keywords
- major key
- region
- data
- hbase
- regions
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
- H04L67/1004—Server selection for load balancing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Medicines Containing Antibodies Or Antigens For Use As Internal Diagnostic Agents (AREA)
- Computer And Data Communications (AREA)
Abstract
Description
Claims (10)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610024940.3A CN105681414B (zh) | 2016-01-14 | 2016-01-14 | 一种避免Hbase数据热点的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610024940.3A CN105681414B (zh) | 2016-01-14 | 2016-01-14 | 一种避免Hbase数据热点的方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105681414A true CN105681414A (zh) | 2016-06-15 |
CN105681414B CN105681414B (zh) | 2019-01-01 |
Family
ID=56300794
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610024940.3A Active CN105681414B (zh) | 2016-01-14 | 2016-01-14 | 一种避免Hbase数据热点的方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105681414B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108629196A (zh) * | 2017-03-21 | 2018-10-09 | 北京京东尚科信息技术有限公司 | 数据存储和查询的方法、装置、电子设备和可读存储介质 |
CN110019528A (zh) * | 2017-12-26 | 2019-07-16 | 中国移动通信集团湖北有限公司 | 数据库操作负载均衡方法、装置、设备及介质 |
CN110427377A (zh) * | 2019-08-02 | 2019-11-08 | 北京博睿宏远数据科技股份有限公司 | 数据处理方法、装置、设备和存储介质 |
CN110888919A (zh) * | 2019-12-04 | 2020-03-17 | 阳光电源股份有限公司 | 基于HBase的对大数据统计分析的方法及装置 |
CN111259012A (zh) * | 2020-01-20 | 2020-06-09 | 中国平安人寿保险股份有限公司 | 数据均匀化方法、装置、计算机设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012034470A1 (zh) * | 2010-09-13 | 2012-03-22 | 腾讯科技(深圳)有限公司 | 一种基于哈希算法的数据存储方法及装置 |
CN104158902A (zh) * | 2014-08-27 | 2014-11-19 | 浙江宇视科技有限公司 | 一种基于请求数的Hbase数据块分配方法及装置 |
US20150205885A1 (en) * | 2014-01-20 | 2015-07-23 | Alibaba Group Holding Limited | CREATING NoSQL DATABASE INDEX FOR SEMI-STRUCTURED DATA |
CN105187498A (zh) * | 2015-08-10 | 2015-12-23 | 携程计算机技术(上海)有限公司 | HBase表的Region分配方法及系统 |
-
2016
- 2016-01-14 CN CN201610024940.3A patent/CN105681414B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012034470A1 (zh) * | 2010-09-13 | 2012-03-22 | 腾讯科技(深圳)有限公司 | 一种基于哈希算法的数据存储方法及装置 |
US20150205885A1 (en) * | 2014-01-20 | 2015-07-23 | Alibaba Group Holding Limited | CREATING NoSQL DATABASE INDEX FOR SEMI-STRUCTURED DATA |
CN104158902A (zh) * | 2014-08-27 | 2014-11-19 | 浙江宇视科技有限公司 | 一种基于请求数的Hbase数据块分配方法及装置 |
CN105187498A (zh) * | 2015-08-10 | 2015-12-23 | 携程计算机技术(上海)有限公司 | HBase表的Region分配方法及系统 |
Non-Patent Citations (1)
Title |
---|
吴旭等: "基于HBase的网络社区海量数据存储优化研究", 《中国科技论文在线》 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108629196A (zh) * | 2017-03-21 | 2018-10-09 | 北京京东尚科信息技术有限公司 | 数据存储和查询的方法、装置、电子设备和可读存储介质 |
CN110019528A (zh) * | 2017-12-26 | 2019-07-16 | 中国移动通信集团湖北有限公司 | 数据库操作负载均衡方法、装置、设备及介质 |
CN110427377A (zh) * | 2019-08-02 | 2019-11-08 | 北京博睿宏远数据科技股份有限公司 | 数据处理方法、装置、设备和存储介质 |
CN110427377B (zh) * | 2019-08-02 | 2023-12-26 | 北京博睿宏远数据科技股份有限公司 | 数据处理方法、装置、设备和存储介质 |
CN110888919A (zh) * | 2019-12-04 | 2020-03-17 | 阳光电源股份有限公司 | 基于HBase的对大数据统计分析的方法及装置 |
CN110888919B (zh) * | 2019-12-04 | 2023-06-30 | 阳光电源股份有限公司 | 基于HBase的对大数据统计分析的方法及装置 |
CN111259012A (zh) * | 2020-01-20 | 2020-06-09 | 中国平安人寿保险股份有限公司 | 数据均匀化方法、装置、计算机设备及存储介质 |
CN111259012B (zh) * | 2020-01-20 | 2024-03-12 | 中国平安人寿保险股份有限公司 | 数据均匀化方法、装置、计算机设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN105681414B (zh) | 2019-01-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105681414A (zh) | 一种避免Hbase数据热点的方法及系统 | |
KR101502896B1 (ko) | 맵 리듀스를 이용한 분산 메모리 클러스터 제어 장치 및 방법 | |
CN107329837B (zh) | 一种负载均衡的方法和单元、分布式NewSQL数据库系统 | |
CN106874437B (zh) | 面向数据库一体机的内存数据仓库行列存储转换实现方法 | |
CN107145537B (zh) | 一种表格数据导入方法及系统 | |
CN102542071B (zh) | 一种分布式处理数据的系统及方法 | |
CN103473239B (zh) | 一种非关系型数据库数据更新方法和装置 | |
CN101354726B (zh) | 一种机群文件系统的内存元数据管理方法 | |
EP3238106A1 (en) | Compaction policy | |
CN106611064B (zh) | 分布式关系数据库的数据处理方法和装置 | |
CN108932256A (zh) | 分布式数据重分布控制方法、装置及数据管理服务器 | |
CN102411542A (zh) | 动态分级存储系统和方法 | |
CN104573119A (zh) | 云计算中面向节能的Hadoop分布式文件系统存储策略 | |
CN104903887A (zh) | 灵活的分布式大规模并行处理(mpp)系统和方法 | |
CN103488687A (zh) | 用于大数据的搜索系统和搜索方法 | |
CN106339475A (zh) | 一种海量数据的分布式存储系统 | |
CN106095589A (zh) | 一种分配分区的方法、装置及系统 | |
CN102222107A (zh) | 数据存取系统及其数据存取方法 | |
CN103095806A (zh) | 一种面向大电网的实时数据库系统的负载均衡管理系统 | |
CN106407191A (zh) | 一种数据处理方法及服务器 | |
CN104111924A (zh) | 一种数据库系统 | |
CN107590257A (zh) | 一种数据库管理方法及装置 | |
CN108052569A (zh) | 数据库访问方法、装置、计算机可读存储介质和计算设备 | |
CN100549961C (zh) | 机架空间分配方法及装置 | |
CN106960020A (zh) | 一种创建索引表的方法及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB03 | Change of inventor or designer information |
Inventor after: Lei Guo Inventor after: Ye Chunsheng Inventor after: Che Xinyi Inventor after: Cheng Taomu Inventor after: Wang Min Inventor after: Liu Junhui Inventor before: Lei Guo Inventor before: Ye Chunsheng Inventor before: Che Xinyi Inventor before: Cheng Taomu Inventor before: Liu Junhui |
|
COR | Change of bibliographic data | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP03 | Change of name, title or address | ||
CP03 | Change of name, title or address |
Address after: 401120 No.2, 7th floor, Fenghuang a building, No.18, Qingfeng North Road, Yubei District, Chongqing Patentee after: Broid Technology Co.,Ltd. Address before: 518057 No.1, area a, 3 / F, building B1, Shenzhen digital technology park, 002 Gaoxin South 7th Road, Nanshan District, Shenzhen City, Guangdong Province Patentee before: SHENZHEN BROADTECH Co.,Ltd. |