CN101556590A - 一种分类存取海量小文件的方法 - Google Patents
一种分类存取海量小文件的方法 Download PDFInfo
- Publication number
- CN101556590A CN101556590A CNA2008101035784A CN200810103578A CN101556590A CN 101556590 A CN101556590 A CN 101556590A CN A2008101035784 A CNA2008101035784 A CN A2008101035784A CN 200810103578 A CN200810103578 A CN 200810103578A CN 101556590 A CN101556590 A CN 101556590A
- Authority
- CN
- China
- Prior art keywords
- database
- file
- picture
- server
- classification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种分类存取海量小文件的方法，首先设置文件服务器，将目录设为共享，可以被网络中的其他服务器所能访问；然后设置数据库服务器，以便在数据库中存储软件系统的数据和图片文件的对应关系。文件系统和数据库系统的关系如图一；最后按照数据库中的对应关系，入库程序按照数据库存储的表关系形成文件系铳的图片目录层次，当用户访问图片时，按照图二的流程获得文件服务器上的图片内容。本发明使得将海量图片文件用数据库中的分类方法进行划分目录和存取，极大的提高了图片数据的存取速度和准确性。
Description
技术领域：
本发明涉及一种分类存取海量小文件的方法，特备涉及一种图片文件的存取方法，配合数据库的快速查询定位功能，将海量图片文件用数据库中的分类方法进行划分目录和存取，极大的提高了图片数据的存取速度和准确性。
背景技术：
数据的存取是软件应用的重要的组成部分，数据的快速和准确存取决定着软件服务的性能，用户需要快速响应的内容服务。本发明旨在提高数据的存取速度，由于数据库处理二进制文件性能很慢，通过在文件系统中存取图片文件可以获得更快的响应速度，同时采用数据库的管理方式对文件进行组织。
发明内容：
本发明涉及一种图片文件的存取方法，使用共享文件系统中，存储配合数据库的快速查询定位功能，将海量图片文件用数据库中的分类方法进行划分目录和存取，极大的提高了图片数据的存取速度和准确性。
本发明所述的一种分类存取海量小文件的方法，该方法至少包括如下的步骤：
步骤1：设置文件服务器，将目录设为共享，可以被网络中的其他服务器所能访问。
步骤2：设置数据库服务器，以便在数据库中存储软件系统的数据和图片文件的对应关系。文件系统和数据库系统的关系如图1。
步骤3：按照数据库中的对应关系，入库程序按照数据库存储的表关系形成文件系统的图片目录层次，当用户访问图片时，按照图2的流程获得文件服务器上的图片内容。
本发明涉及的一种图片文件的存取方法，使得将海量图片文件用数据库中的分类方法进行划分目录和存取，极大的提高了图片数据的存取速度和准确性。
附图说明：
图1为本发明中所提到的数据库和文件系统关系图。。
图2为本发明的流程图。
具体实施方式：
参见图2，本发明的主要步骤如下：
步骤1：设置文件服务器，将目录设为共享，可以被网络中的其他服务器所能访问。
步骤2：设置数据库服务器，以便在数据库中存储软件系统的数据和图片文件的对应关系。文件系统和数据库系统的关系如图1。
步骤3：按照数据库中的对应关系，入库程序按照数据库存储的表关系形成文件系统的图片目录层次，当用户访问图片时，按照图2的流程获得文件服务器上的图片内容。
本发明的技术要点为：文件系统服务器和其他服务器操作系统不同，需要设置操作系统间能互相访问的服务，使得其他服务器能够访问共享硬盘。服务器上通过磁盘映射的方式或其他方法将文件服务器上的共享目录映射成固定的盘符的磁盘。这样在系统中就能够像使用本机磁盘一样来使用共享目录。数据库服务器存储相应的字符型数据，并设置图片文件在文件系统中的目录设置规则。
上述技术方法实施时将图片存储从数据库中剥离出来的好处在于充分运用操作系统操作文件的快速性和数据库系统的可管理性和字符类内容的获取速度，能够有效发挥操作系统和数据库的优势。
最后所应说明的是，以上实施例仅用以说明而并非限制本发明所描述的技术方案；因此，尽管本说明书参照上述的实施例对本发明已进行了详细的说明，但是，本领域的普通技术人员应当理解，仍然可以对本发明进行修改或者等同地替换；而一切不脱离本发明的精神和范围的技术方案及其改进，其均应涵盖在本发明的权利要求范围当中。
Claims (2)
1、一种分类存取海量小文件的方法，其特征在于：该方法至少包括如下的步骤：
步骤1：设置文件服务器，将目录设为共享，可以被网络中的其他服务器所能访问。
步骤2：设置数据库服务器，以便在数据库中存储软件系统的数据和图片文件的对应关系。
步骤3：按照数据库中的对应关系，入库程序按照数据库存储的表关系形成文件系统的图片目录层次，当用户访问图片时，按照图二的流程获得文件服务器上的图片内容。
2、根据权利要求1所述一种分类存取海量小文件的方法，其特征在于按照数据库中的对应关系，入库程序按照数据库存储的表关系形成文件系统的图片目录层次，当用户访问图片时，按照图二的流程获得文件服务器上的图片内容。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CNA2008101035784A CN101556590A (zh) | 2008-04-09 | 2008-04-09 | 一种分类存取海量小文件的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CNA2008101035784A CN101556590A (zh) | 2008-04-09 | 2008-04-09 | 一种分类存取海量小文件的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN101556590A true CN101556590A (zh) | 2009-10-14 |
Family
ID=41174707
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CNA2008101035784A Pending CN101556590A (zh) | 2008-04-09 | 2008-04-09 | 一种分类存取海量小文件的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101556590A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102594862A (zh) * | 2010-12-17 | 2012-07-18 | 瑞士电信公司 | 数字内容管理 |
| CN103020315A (zh) * | 2013-01-10 | 2013-04-03 | 中国人民解放军国防科学技术大学 | 一种基于主从分布式文件系统的海量小文件存储方法 |
| CN107317723A (zh) * | 2017-05-27 | 2017-11-03 | 北京金山安全软件有限公司 | 一种数据处理方法及服务器 |
-
2008
- 2008-04-09 CN CNA2008101035784A patent/CN101556590A/zh active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102594862A (zh) * | 2010-12-17 | 2012-07-18 | 瑞士电信公司 | 数字内容管理 |
| CN103020315A (zh) * | 2013-01-10 | 2013-04-03 | 中国人民解放军国防科学技术大学 | 一种基于主从分布式文件系统的海量小文件存储方法 |
| CN103020315B (zh) * | 2013-01-10 | 2015-08-19 | 中国人民解放军国防科学技术大学 | 一种基于主从分布式文件系统的海量小文件存储方法 |
| CN107317723A (zh) * | 2017-05-27 | 2017-11-03 | 北京金山安全软件有限公司 | 一种数据处理方法及服务器 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10235093B1 (en) | Restoring snapshots in a storage system | |
| US10530888B2 (en) | Cached data expiration and refresh | |
| US10275489B1 (en) | Binary encoding-based optimizations at datastore accelerators | |
| US8489550B2 (en) | Multi-tenancy data storage and access method and apparatus | |
| US8214355B2 (en) | Small table: multitenancy for lots of small tables on a cloud database | |
| EP2863310B1 (en) | Data processing method and apparatus, and shared storage device | |
| US11146654B2 (en) | Multitier cache framework | |
| US10706022B2 (en) | Space-efficient secondary indexing on distributed data stores | |
| KR20190020105A (ko) | 스트리밍 데이터의 분배 처리 방법 및 디바이스 | |
| CN107016027A (zh) | 实现业务信息快速搜索的方法和装置 | |
| CN102710763B (zh) | 一种分布式缓存池化、分片及故障转移的方法及系统 | |
| US11657025B2 (en) | Parallel processing of filtered transaction logs | |
| US9684686B1 (en) | Database system recovery using non-volatile system memory | |
| US11775480B2 (en) | Method and system for deleting obsolete files from a file system | |
| CN110737682A (zh) | 一种缓存操作方法、装置、存储介质和电子设备 | |
| CN104239353B (zh) | 一种web分类控制和日志审计的方法 | |
| US10146833B1 (en) | Write-back techniques at datastore accelerators | |
| CN101556590A (zh) | 一种分类存取海量小文件的方法 | |
| US11580152B1 (en) | Using path-based indexing to access media recordings stored in a media storage service | |
| US11093493B1 (en) | Dynamically switching between query and scan for optimizing table reads | |
| CN112464049B (zh) | 号码详单下载方法、装置和设备 | |
| CN104933066A (zh) | 一种数据处理的方法和系统 | |
| Mosharraf et al. | Improving query execution performance in big data using cuckoo filter | |
| CN113253931B (zh) | 一种适用于rabbitmq自动切换使用云数据盘的方法 | |
| US9864761B1 (en) | Read optimization operations in a storage system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20091014 |