CN113611333A - 一种光盘库集群系统及读写方法 - Google Patents
一种光盘库集群系统及读写方法 Download PDFInfo
- Publication number
- CN113611333A CN113611333A CN202110796636.1A CN202110796636A CN113611333A CN 113611333 A CN113611333 A CN 113611333A CN 202110796636 A CN202110796636 A CN 202110796636A CN 113611333 A CN113611333 A CN 113611333A
- Authority
- CN
- China
- Prior art keywords
- optical disk
- optical
- disc
- library
- optical disc
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B7/00—Recording or reproducing by optical means, e.g. recording using a thermal beam of optical radiation by modifying optical properties or the physical structure, reproducing using an optical beam at lower power by sensing optical properties; Record carriers therefor
- G11B7/004—Recording, reproducing or erasing methods; Read, write or erase circuits therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/0643—Management of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0662—Virtualisation aspects
- G06F3/0664—Virtualisation aspects at device level, e.g. emulation of a storage device or system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0673—Single storage device
- G06F3/0674—Disk device
- G06F3/0677—Optical disk device, e.g. CD-ROM, DVD
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B19/00—Driving, starting, stopping record carriers not specifically of filamentary or web form, or of supports therefor; Control thereof; Control of operating function ; Driving both disc and head
- G11B19/20—Driving; Starting; Stopping; Control thereof
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
本发明涉及计算机数据存储技术领域,为一种光盘库集群系统及读写方法,包括至少一个主光盘库节点和从光盘库节点,所有节点通过网络连接。光盘库节点内部包括节点控制器、光驱组、机械驱动器和光盘机械装置;光盘控制器通过机械驱动器驱动光盘机械装置在光驱组和光盘架之间自动放置。主光盘库节点包括额外的磁盘或固态盘作为系统缓存区。从光盘库节点将自己内部的光盘驱动器通过iSCSI协议构成主光盘库节点的虚拟光盘驱动器,而主光盘库节点统一管理自己内部的光盘驱动器和远程虚拟光盘驱动器,也能统一管理自己内部和远程的机械驱动器和光盘机械装置。该方案能够通过网络方便地扩展系统容量,能够统一管理和存取所有光盘。
Description
技术领域
本发明涉及计算机数据存储技术领域,具体涉及一种光盘库集群系统及读写方法。
背景技术
大数据时代数据是重要生产要素,因此需要一种能够廉价、方便、可靠、可信地长期保存海量数据的存储设备、系统和机制。光盘是一种适合廉价长期可信存储数据的存储介质。在无需特殊保存环境要求的情况下,蓝光光盘能够可靠地保存数据长达50年,玻璃光盘能够保存数据超过数千年。光盘是由毫米级别的塑料片和微米级别的膜涂层构成,其基础材料成本较低,在大量生产的情况下,光盘的成本可以降到很低。目前常用的蓝光光盘的容量为25GB、50GB、100GB等。容量为500GB的蓝光光盘也在逐渐进入消费者市场。
但是当前单张光盘容量和性能仍然有限,远低于主流到磁盘、固态盘和磁带。因此只能通过光盘库形式,通过系统保存上万光盘,并集成几十个光驱实现并发性能的提升。现有光盘库包括日本松下公司、索尼公司,中国的中国华录集团和广东紫晶信息存储有限公司都开发出大型光盘库,在一个机柜范围内能够容纳上万张光盘,并使用定制化、精密的机械部件在光盘驱动器和光盘柜之间交换光盘。这种光盘库结构是一种“巨石”结构,也就是针对万张光盘专门设计定制的硬件和机械子系统,由于主要部件,尤其是机械部件是定制的,因此造成整体制造成本高。此外,由于机械部件和光盘库结构的整体定制,只能以光盘库整体为单位进行扩展增容,多个光盘库中的光盘和数据很难统一管理。因此整体成本和扩展性限制当前光盘库的广泛使用。
这些光盘库往往使用包含几十张光盘的光盘匣作为单位,例如华录和松下把12张光盘放置在一个专门的光盘匣中。而紫晶光电的ZL6120和ZL12240光盘库也使用12张光盘作为一组统一进行机械存取。在读取时,需要把光盘匣中的所有光盘自动机械地放到12个光驱中;在回收光盘时,需要把相应光驱中光盘自动机械地放到光盘匣中,这种光盘匣结构增加了机械复杂度。而且光盘匣本身也占据空间,因此会降低光盘库整体的光盘放置密度。
为了更好地利用光盘在长期数据保存方面的优势,迫切的需要一种基于光盘库集群系统,提高海量光盘使用方便性和整体效率。
发明内容
本发明提供了一种光盘库集群系统及读写方法,解决了以上所述的光盘存储密度低且存取效率低的的技术问题。
本发明为解决上述技术问题提供了一种光盘库集群系统,包括通过高速网络互联而成的多个光盘库节点,所述光盘库节点包括光盘库控制器、光驱组、机械驱动器、光盘机械装置以及用于放置光盘的光盘架;
所述光盘库控制器通过内部总线连接光驱组和机械驱动器,以控制驱动所述机械驱动器执行光盘物理交换;
所述机械驱动器用于驱动光盘机械装置在光驱组和光盘架之间自动放置光盘。
可选地,所述光盘库节点包含至少一个主光盘库节点和从光盘库节点;
所述从光盘库节点的控制器通过网络连接到主光盘库节点的控制器,将从光盘库节点的内部光驱通过iSCSI协议虚拟成为主光盘库节点的逻辑光驱;
所述主光盘库节点的控制器统一管理自己内部的物理光驱和远程的逻辑光驱,通过iSCSI协议读写远程逻辑光驱中的光盘数据,并控制从光盘库节点的控制器执行内部的光盘物理交换。
可选地,所述主光盘库节点内部包括高速存储区,所述高速存储区包含至少一个硬盘或固态盘,且所有光盘库节点、硬盘或固态盘、光驱、光盘、光盘架物理位置统一编址;
当有新光盘库节点加入时,将其节点标识和内部硬盘、光驱、光盘、光盘架物理位置向所述光盘库集群系统注册,并将新光盘库节点的光驱通过iSCSI注册到主光盘库节点。
可选地,所述主光盘库节点的控制器通过文件系统对外提供标准文件视图,维护光盘库集群系统内所有文件到高速存储区或光盘之间的存储关系;
具体地,执行文件写操作时,首先把文件数据写入高速存储区,再刻录到空白物理光盘,将该文件路径和文件名、相应的光盘标识,记录到光盘文件位置记录表中;
执行文件读操作时,根据文件路径和文件名查找是否在高速存储区中,如果在则立刻返回,如果不在,则查找光盘文件位置记录表,确定该文件所在光盘、以及该光盘存储的节点,进而读取该光盘中的请求数据。
可选地,所述文件系统整体建立在主光盘库节点的高速存储区的本地文件系统内,所述本地文件系统用于保存所述文件系统和/或文件所在的光盘标识。
本发明还提供了一种用于光盘库集群系统的读写方法,包括以下步骤:
S1,根据读取文件请求中携带的文件路径及文件名,检索本地文件系统中相应路径是否有该文件数据内容;
S2,若没有,确认该文件数据内容仅有所保存文件数据的光盘标识,则查找光盘文件位置记录表,确定该文件所在光盘、以及该光盘存储的节点,进而读取该光盘中的请求数据。
可选地,所述S1之前还包括:新文件首先在本地文件系统中相应路径创建,并写入数据,并标记该文件为未刻录;
光盘库集群文件系统定期将未刻录文件批量写到一个逻辑光盘镜像中;当逻辑光盘镜像写满后,将该光盘镜像设置为只读,并根据刻录策略将该镜像刻录到本地或者远程光盘库节点中的空盘光盘中;刻录完成后将光盘镜像删除。
可选地,定期遍历本地文件系统的全部目录,从最底层目录开始遍历到根目录,将每个目录内满足刻录条件的未刻录文件写入光盘镜像中,当逻辑光盘镜像写满后,将该光盘镜像设置为只读;
然后创建一个新的光盘镜像,继续将剩余未刻录文件写入其中,如此循环直到所有未刻录文件写入光盘镜像中;
最后查找空光盘,依次将只读光盘镜像刻录到相应空光盘中。
可选地,所述刻录策略包括:在选择刻录空光盘时,优先选择存在光驱空闲的光盘库节点,然后选择机械取盘时间最短的空光盘,调度相应光盘库节点的机械装置取盘并进行刻录;若仍存在光驱空闲的光盘库节点,无需等待取盘和刻录完成,重复过程使得多个光盘库能够并发刻录。
可选地,当空光盘进入光驱时,光驱所在光盘库节点通过iSCSI协议将该光驱作为主光盘库节点的iSCSI虚拟光驱,主光盘库节点能够将本地快速存储区中的只读光盘镜像通过iSCSI协议刻录到虚拟光驱中的空光盘;
当刻录完成时,检查光盘中的刻录数据和光盘镜像数据是否一致,如果不一致,或者发生读光盘错误,则重新选择新的空光盘刻录。
有益效果:本发明提供了一种光盘库集群系统及读写方法,包括至少一个主光盘库节点和从光盘库节点,所有节点通过网络连接。光盘库节点内部包括节点控制器、光驱组、机械驱动器和光盘机械装置;光盘控制器通过机械驱动器驱动光盘机械装置在光驱组和光盘架之间自动放置。主光盘库节点包括额外的磁盘或固态盘作为系统缓存区。从光盘库节点将自己内部的光盘驱动器通过iSCSI协议构成主光盘库节点的虚拟光盘驱动器,而主光盘库节点统一管理自己内部的光盘驱动器和远程虚拟光盘驱动器,也能统一管理自己内部和远程的机械驱动器和光盘机械装置。该方案能够通过网络方便地扩展系统容量,能够统一管理和存取所有光盘。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,并可依照说明书的内容予以实施,以下以本发明的较佳实施例并配合附图详细说明如后。本发明的具体实施方式由以下实施例及其附图详细给出。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1为本发明光盘库集群系统及读写方法的系统架构示意图;
图2为本发明光盘库集群系统及读写方法的存取过程示意图;
图3为本发明光盘库集群系统及读写方法的光盘文件位置记录表;
图4为本发明光盘库集群系统及读写方法的文件系统记录表;
图5为本发明光盘库集群系统及读写方法的读取文件的流程图;
图6为本发明光盘库集群系统及读写方法的写入文件的流程图。
具体实施方式
以下结合附图对本发明的原理和特征进行描述,所举实例只用于解释本发明,并非用于限定本发明的范围。在下列段落中参照附图以举例方式更具体地描述本发明。根据下面说明和权利要求书,本发明的优点和特征将更清楚。需说明的是,附图均采用非常简化的形式且均使用非精准的比例,仅用以方便、明晰地辅助说明本发明实施例的目的。
需要说明的是,当组件被称为“固定于”另一个组件,它可以直接在另一个组件上或者也可以存在居中的组件。当一个组件被认为是“连接”另一个组件,它可以是直接连接到另一个组件或者可能同时存在居中组件。当一个组件被认为是“设置于”另一个组件,它可以是直接设置在另一个组件上或者可能同时存在居中组件。本文所使用的术语“垂直的”、“水平的”、“左”、“右”以及类似的表述只是为了说明的目的。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
如图1所示,本发明提供了一种光盘库集群系统,包括通过高速网络互联而成的多个光盘库节点,所述光盘库节点包括光盘库控制器、光驱组、机械驱动器、光盘机械装置以及用于放置光盘的光盘架;所述光盘库控制器通过内部总线连接光驱组和机械驱动器,以控制驱动所述机械驱动器执行光盘物理交换;所述机械驱动器用于驱动光盘机械装置在光驱组和光盘架之间自动放置光盘。
具体地,光盘库集群系统由多个光盘库节点通过高速网络互联而构成,光盘库节点包括光盘库控制器、光驱组、机械驱动器、光盘机械装置,和放置光盘的光盘架;光盘库控制器通过内部总线连接光驱组和机械驱动器;机械驱动器能够驱动光盘机械装置在光驱组和光盘架之间自动放置光盘;光盘库控制器能够命令驱动机械驱动器执行光盘物理交换。
光盘库集群包含至少一个主光盘库节点和从光盘库节点。主光盘库节点内部额外包含一个或者多个硬盘(磁盘或者固态盘)构成的高速存储区。光盘库集群为内部所有光盘库节点、硬盘、光驱、光盘、光盘架物理位置统一编址。从光盘库节点控制器通过网络连接到主光盘库节点控制器,将从光盘库节点的内部光驱通过iSCSI协议虚拟成为主光盘库节点的逻辑光驱。主光盘库节点控制器能够统一管理自己内部的物理光驱和远程的逻辑光驱,能够通过iSCSI协议读写远程逻辑光驱中的光盘数据,能够命令从光盘库节点控制器执行内部的光盘物理交换。如图1所示,本发明实施例提供了一种光盘库集群架构示意图,包括主光盘库节点使用高速网络连接客户端。
如图2所示,本发明实施例还提供了一种光盘库集群系统的存取过程示意图。如图3所示,本发明实施例还提供了一张光盘文件位置记录表。光盘库集群系统内部的主光盘库节点控制器通过光盘库集群文件系统对外提供标准文件视图,维护光盘库集群内所有文件到高速存储区或者光盘之间的存储关系。主光盘库控制器中的高速存储区构成光盘库集群的高速缓存。执行文件写操作时,首先将文件数据写入高速缓存中,之后在刻录到空白物理光盘。之后,将该文件路径和文件名、相应光盘的标识,记录到光盘文件位置记录表中。执行文件读操作时,根据文件路径和文件名查找是否在高速缓存中,如果在则立刻返回,如果不在,则查找光盘文件位置记录表,确定该文件所在光盘、以及该光盘存储的节点,进而读取该光盘中的请求数据。
如图4所示,本发明实施例还提供了一张光盘库集群文件系统记录表。光盘库集群文件系统整体建立在主光盘库节点高速存储区上的本地文件系统,也即是两个文件系统中的目录/文件一一对应,本地文件系统中的文件要不就是保存光盘库集群文件系统中的对应文件数据,要不就是保存光盘库集群文件系统中的该对应文件所在光盘标识。
本发明实施例还提供了一种光盘库集群系统的读写方法,如图5所示为光盘库集群系统读取文件的流程图,读文件过程首先检查主光盘库节点的本地文件系统中相应路径是否有该文件数据内容。如有则返回相应文件数据;如果没有,确认该文件内容仅有所保存文件数据的光盘标识,则查找光盘文件位置记录表,确定该文件所在光盘、以及该光盘存储的节点,进而读取该光盘中的请求数据。
其中写入文件的流程图如图6所示,新文件首先在本地文件系统中相应路径创建,并写入数据,之后标记该文件为未刻录。而光盘库集群文件系统定期将未刻录文件批量写到一个逻辑光盘镜像中。当逻辑光盘镜像写满后,将该光盘镜像设置为只读,并根据刻录策略将该镜像刻录到本地或者远程光盘库节点中的空光盘中。一旦刻录完成,则可将该光盘镜像删除。光盘库集群文件系统定期遍历本地文件系统的全部目录,从最底层目录开始遍历到根目录,将每个目录内满足刻录条件的未刻录文件写入光盘镜像中,当逻辑光盘镜像写满后,将该光盘镜像设置为只读;然后创建一个新的光盘镜像,继续将剩余未刻录文件写入其中,如此直到所有未刻录文件写入光盘镜像中。然后查找为空光盘,依次将只读光盘镜像刻录到相应空光盘中。
刻录策略是在选择刻录空光盘时,优先选择存在光驱空闲的光盘库节点,然后选择机械取盘时间最短的空光盘,之后调度相应光盘库节点的机械装置取盘并进行刻录;如果仍存在光驱空闲的光盘库节点,无需等待取盘和刻录完成,可以重复过程,使得多个光盘库能够并发刻录。
刻录条件可以是未刻录文件的创建时间超过一定时间段;或者是未刻录文件属于特定类型;或者是同时考虑文件创建时间和类型。
当所确定的空光盘进入光驱时,光驱所在光盘库节点通过iSCSI协议将该光驱作为主光盘库节点的iSCSI虚拟光驱,主光盘库节点能够将本地快速存储区中的只读光盘镜像数据流式地通过iSCSI协议刻录到虚拟光驱中的空光盘。当刻录完成时,检查光盘中的刻录数据和光盘镜像数据是否一致,如果不一致,或者发生读光盘错误,则重新选择新的空光盘刻录。
可选的方案,当有新光盘库节点加入时,将其节点标识和内部硬盘、光驱、光盘、光盘架物理位置向光盘库集群系统注册,并且将节点的光驱通过iSCSI注册到主光盘库节点。
可选的方案,光盘库集群系统内部的主光盘库节点控制器通过光盘库集群文件系统对外提供标准文件视图,维护光盘库集群内所有文件到高速存储区或者光盘之间的存储关系。主光盘库控制器中的高速存储区构成光盘库集群的高速缓存。执行文件写操作时,首先将文件数据写入高速缓存中,之后在刻录到空白物理光盘。之后,将该文件路径和文件名、相应光盘的标识,记录到光盘文件位置记录表中。执行文件读操作时,根据文件路径和文件名查找是否在高速缓存中,如果在则立刻返回,如果不在,则查找光盘文件位置记录表,确定该文件所在光盘、以及该光盘存储的节点,进而读取该光盘中的请求数据。
可选的方案,光盘库集群文件系统整体建立在主光盘库节点高速存储区上的本地文件系统,也即是两个文件系统中的目录/文件一一对应,本地文件系统中的文件要不就是保存光盘库集群文件系统中的对应文件数据,要不就是保存光盘库集群文件系统中的该对应文件所在光盘标识。
可选的方案,新文件首先在本地文件系统中相应路径创建,并写入数据,之后标记该文件为未刻录。而光盘库集群文件系统定期将未刻录文件批量写到一个逻辑光盘镜像中。当逻辑光盘镜像写满后,将该光盘镜像设置为只读,并根据刻录策略将该镜像刻录到本地或者远程光盘库节点中的空光盘中。一旦刻录完成,则可将该光盘镜像删除。
可选的方案,读文件过程首先检查主光盘库节点的本地文件系统中相应路径是否有该文件数据内容。如有则返回相应文件数据;如果没有,确认该文件内容仅有所保存文件数据的光盘标识,则查找光盘文件位置记录表,确定该文件所在光盘、以及该光盘存储的节点,进而读取该光盘中的请求数据。
可选的方案,光盘库集群文件系统定期遍历本地文件系统的全部目录,从最底层目录开始遍历到根目录,将每个目录内满足刻录条件的未刻录文件写入光盘镜像中,当逻辑光盘镜像写满后,将该光盘镜像设置为只读;然后创建一个新的光盘镜像,继续将剩余未刻录文件写入其中,如此直到所有未刻录文件写入光盘镜像中。然后查找为空光盘,依次将只读光盘镜像刻录到相应空光盘中。
可选的方案,刻录策略是在选择刻录空光盘时,优先选择存在光驱空闲的光盘库节点,然后选择机械取盘时间最短的空光盘,之后调度相应光盘库节点的机械装置取盘并进行刻录;如果仍存在光驱空闲的光盘库节点,无需等待取盘和刻录完成,可以重复过程,使得多个光盘库能够并发刻录。
可选的方案,刻录条件可以是未刻录文件的创建时间超过一定时间段;或者是未刻录文件属于特定类型;或者是同时考虑文件创建时间和类型。
可选的方案,当所确定的空光盘进入光驱时,光驱所在光盘库节点通过iSCSI协议将该光驱作为主光盘库节点的iSCSI虚拟光驱,主光盘库节点能够将本地快速存储区中的只读光盘镜像数据流式地通过iSCSI协议刻录到虚拟光驱中的空光盘。当刻录完成时,检查光盘中的刻录数据和光盘镜像数据是否一致,如果不一致,或者发生读光盘错误,则重新选择新的空光盘刻录。
可选的方案,当有新光盘库节点加入时,将其节点标识和内部硬盘、光驱、光盘、光盘架物理位置向光盘库集群系统注册,并且将节点的光驱通过iSCSI注册到主光盘库节点。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
最后应当说明的是:以上实施例仅用以说明本发明的技术方案而非对其限制,尽管参照上述实施例对本发明进行了详细的说明,所属领域的普通技术人员应当理解:依然可以对本发明的具体实施方式进行修改或者等同替换,而未脱离本发明精神和范围的任何修改或者等同替换,其均应涵盖在本发明的权利要求保护范围之内。
Claims (10)
1.一种光盘库集群系统,其特征在于,包括通过高速网络互联而成的多个光盘库节点,所述光盘库节点包括光盘库控制器、光驱组、机械驱动器、光盘机械装置以及用于放置光盘的光盘架;
所述光盘库控制器通过内部总线连接光驱组和机械驱动器,以控制驱动所述机械驱动器执行光盘物理交换;
所述机械驱动器用于驱动光盘机械装置在光驱组和光盘架之间自动放置光盘。
2.根据权利要求1所述的光盘库集群系统,其特征在于,所述光盘库节点包含至少一个主光盘库节点和从光盘库节点;
所述从光盘库节点的控制器通过网络连接到主光盘库节点的控制器,将从光盘库节点的内部光驱通过iSCSI协议虚拟成为主光盘库节点的逻辑光驱;
所述主光盘库节点的控制器统一管理自己内部的物理光驱和远程的逻辑光驱,通过iSCSI协议读写远程逻辑光驱中的光盘数据,并控制从光盘库节点的控制器执行内部的光盘物理交换。
3.根据权利要求2所述的光盘库集群系统,其特征在于,所述主光盘库节点内部包括高速存储区,所述高速存储区包含至少一个硬盘或固态盘,且所有光盘库节点、硬盘或固态盘、光驱、光盘、光盘架物理位置统一编址;
当有新光盘库节点加入时,将其节点标识和内部硬盘、光驱、光盘、光盘架物理位置向所述光盘库集群系统注册,并将新光盘库节点的光驱通过iSCSI注册到主光盘库节点。
4.根据权利要求3所述的光盘库集群系统,其特征在于,所述主光盘库节点的控制器通过文件系统对外提供标准文件视图,维护光盘库集群系统内所有文件到高速存储区或光盘之间的存储关系;
具体地,执行文件写操作时,首先把文件数据写入高速存储区,再刻录到空白物理光盘,将该文件路径和文件名、相应的光盘标识,记录到光盘文件位置记录表中;
执行文件读操作时,根据文件路径和文件名查找是否在高速存储区中,如果在则立刻返回,如果不在,则查找光盘文件位置记录表,确定该文件所在光盘、以及该光盘存储的节点,进而读取该光盘中的请求数据。
5.根据权利要求4所述的光盘库集群系统,其特征在于,所述文件系统整体建立在主光盘库节点的高速存储区的本地文件系统内,所述本地文件系统用于保存所述文件系统和/或文件所在的光盘标识。
6.一种用于如权利要求1至5任一项所述的光盘库集群系统的读写方法,其特征在于,包括以下步骤:
S1,根据读取文件请求中携带的文件路径及文件名,检索本地文件系统中相应路径是否有该文件数据内容;
S2,若没有,确认该文件数据内容仅有所保存文件数据的光盘标识,则查找光盘文件位置记录表,确定该文件所在光盘、以及该光盘存储的节点,进而读取该光盘中的请求数据。
7.根据权利要求6所述的光盘库集群系统,其特征在于,所述S1之前还包括:新文件首先在本地文件系统中相应路径创建,并写入数据,并标记该文件为未刻录;
光盘库集群文件系统定期将未刻录文件批量写到一个逻辑光盘镜像中;当逻辑光盘镜像写满后,将该光盘镜像设置为只读,并根据刻录策略将该镜像刻录到本地或者远程光盘库节点中的空盘光盘中;刻录完成后将光盘镜像删除。
8.根据权利要求7所述的光盘库集群系统,其特征在于:定期遍历本地文件系统的全部目录,从最底层目录开始遍历到根目录,将每个目录内满足刻录条件的未刻录文件写入光盘镜像中,当逻辑光盘镜像写满后,将该光盘镜像设置为只读;
然后创建一个新的光盘镜像,继续将剩余未刻录文件写入其中,如此循环直到所有未刻录文件写入光盘镜像中;
最后查找空光盘,依次将只读光盘镜像刻录到相应空光盘中。
9.根据权利要求7所述的光盘库集群系统,其特征在于,所述刻录策略包括:在选择刻录空光盘时,优先选择存在光驱空闲的光盘库节点,然后选择机械取盘时间最短的空光盘,调度相应光盘库节点的机械装置取盘并进行刻录;若仍存在光驱空闲的光盘库节点,无需等待取盘和刻录完成,重复过程使得多个光盘库能够并发刻录。
10.根据权利要求9所述的光盘库集群系统,其特征在于,当空光盘进入光驱时,光驱所在光盘库节点通过iSCSI协议将该光驱作为主光盘库节点的iSCSI虚拟光驱,主光盘库节点能够将本地快速存储区中的只读光盘镜通过iSCSI协议刻录到虚拟光驱中的空光盘;
当刻录完成时,检查光盘中的刻录数据和光盘镜像数据是否一致,如果不一致,或者发生读光盘错误,则重新选择新的空光盘刻录。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110796636.1A CN113611333B (zh) | 2021-07-14 | 2021-07-14 | 一种光盘库集群系统及读写方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110796636.1A CN113611333B (zh) | 2021-07-14 | 2021-07-14 | 一种光盘库集群系统及读写方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113611333A true CN113611333A (zh) | 2021-11-05 |
CN113611333B CN113611333B (zh) | 2023-08-08 |
Family
ID=78304646
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110796636.1A Active CN113611333B (zh) | 2021-07-14 | 2021-07-14 | 一种光盘库集群系统及读写方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113611333B (zh) |
Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1145497A (ja) * | 1997-07-24 | 1999-02-16 | Nippon Telegr & Teleph Corp <Ntt> | 光ディスクライブラリ装置およびデータ記録・再生方法ならびにデータ記録・再生プログラムを記録した記録媒体 |
US5884298A (en) * | 1996-03-29 | 1999-03-16 | Cygnet Storage Solutions, Inc. | Method for accessing and updating a library of optical discs |
CN1265492A (zh) * | 2000-03-31 | 2000-09-06 | 清华同方光盘股份有限公司 | 即插即用的超大容量虚拟光盘存储系统的实现方法 |
CN1387124A (zh) * | 2002-05-14 | 2002-12-25 | 清华同方光盘股份有限公司 | 直接联网超大容量虚拟镜像光盘服务器的实现方法 |
WO2006085357A1 (ja) * | 2005-02-08 | 2006-08-17 | Fujitsu Limited | ディスクアレイ装置の記憶制御装置および冗長性復旧方法 |
CN101201801A (zh) * | 2006-12-11 | 2008-06-18 | 南京理工大学 | 视频点播系统的分级存储管理方法 |
CN101299695A (zh) * | 2007-04-30 | 2008-11-05 | 北京亚细亚智业科技有限公司 | 一种基于以太网的集群式多级存储管理系统及方法 |
CN101714376A (zh) * | 2009-12-02 | 2010-05-26 | 苏州互盟信息存储技术有限公司 | 光盘库阵列 |
CN103514916A (zh) * | 2013-09-24 | 2014-01-15 | 中经云数据存储科技(北京)有限公司 | 光盘库、用于光盘库的数据异步并行读写方法及控制装置 |
JP2014026683A (ja) * | 2012-07-25 | 2014-02-06 | Hitachi-Lg Data Storage Inc | 光ディスクライブラリ装置、データアーカイブシステム及び光ディスク記録方法 |
CN103617802A (zh) * | 2013-11-28 | 2014-03-05 | 中经云数据存储科技(北京)有限公司 | 基于光存储阵列的数据读写权限控制方法以及光存储系统 |
CN104598164A (zh) * | 2014-12-25 | 2015-05-06 | 武汉光忆科技有限公司 | 光盘交换和数据存储分离的光盘库系统及数据读写方法 |
CN204376954U (zh) * | 2015-01-13 | 2015-06-03 | 中国华录·松下电子信息有限公司 | 基于光存储的蓝光光盘库云存储系统 |
CN105022697A (zh) * | 2015-05-19 | 2015-11-04 | 江苏蓝深远望系统集成有限公司 | 基于磁盘缓存的虚拟光盘库存储系统替换算法 |
CN106649467A (zh) * | 2016-09-27 | 2017-05-10 | 上海爱数信息技术股份有限公司 | 一种蓝光光盘库归档管理方法及系统 |
CN206788860U (zh) * | 2017-06-13 | 2017-12-22 | 华录光存储研究院(大连)有限公司 | 基于蓝光光盘库的分布式文件系统 |
CN107704211A (zh) * | 2017-10-31 | 2018-02-16 | 武汉光忆科技有限公司 | 一种磁光电混合光盘库及其管理方法和管理系统 |
CN108022606A (zh) * | 2017-11-22 | 2018-05-11 | 苏州互盟信息存储技术有限公司 | 近线光盘库、数据分级存储方法及系统 |
CN108446392A (zh) * | 2018-03-23 | 2018-08-24 | 北京星震维度信息技术有限公司 | 光盘库的管理系统及方法 |
-
2021
- 2021-07-14 CN CN202110796636.1A patent/CN113611333B/zh active Active
Patent Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5884298A (en) * | 1996-03-29 | 1999-03-16 | Cygnet Storage Solutions, Inc. | Method for accessing and updating a library of optical discs |
JPH1145497A (ja) * | 1997-07-24 | 1999-02-16 | Nippon Telegr & Teleph Corp <Ntt> | 光ディスクライブラリ装置およびデータ記録・再生方法ならびにデータ記録・再生プログラムを記録した記録媒体 |
CN1265492A (zh) * | 2000-03-31 | 2000-09-06 | 清华同方光盘股份有限公司 | 即插即用的超大容量虚拟光盘存储系统的实现方法 |
CN1387124A (zh) * | 2002-05-14 | 2002-12-25 | 清华同方光盘股份有限公司 | 直接联网超大容量虚拟镜像光盘服务器的实现方法 |
WO2006085357A1 (ja) * | 2005-02-08 | 2006-08-17 | Fujitsu Limited | ディスクアレイ装置の記憶制御装置および冗長性復旧方法 |
CN101201801A (zh) * | 2006-12-11 | 2008-06-18 | 南京理工大学 | 视频点播系统的分级存储管理方法 |
CN101299695A (zh) * | 2007-04-30 | 2008-11-05 | 北京亚细亚智业科技有限公司 | 一种基于以太网的集群式多级存储管理系统及方法 |
CN101714376A (zh) * | 2009-12-02 | 2010-05-26 | 苏州互盟信息存储技术有限公司 | 光盘库阵列 |
JP2014026683A (ja) * | 2012-07-25 | 2014-02-06 | Hitachi-Lg Data Storage Inc | 光ディスクライブラリ装置、データアーカイブシステム及び光ディスク記録方法 |
CN103514916A (zh) * | 2013-09-24 | 2014-01-15 | 中经云数据存储科技(北京)有限公司 | 光盘库、用于光盘库的数据异步并行读写方法及控制装置 |
CN103617802A (zh) * | 2013-11-28 | 2014-03-05 | 中经云数据存储科技(北京)有限公司 | 基于光存储阵列的数据读写权限控制方法以及光存储系统 |
CN104598164A (zh) * | 2014-12-25 | 2015-05-06 | 武汉光忆科技有限公司 | 光盘交换和数据存储分离的光盘库系统及数据读写方法 |
CN204376954U (zh) * | 2015-01-13 | 2015-06-03 | 中国华录·松下电子信息有限公司 | 基于光存储的蓝光光盘库云存储系统 |
CN105022697A (zh) * | 2015-05-19 | 2015-11-04 | 江苏蓝深远望系统集成有限公司 | 基于磁盘缓存的虚拟光盘库存储系统替换算法 |
CN106649467A (zh) * | 2016-09-27 | 2017-05-10 | 上海爱数信息技术股份有限公司 | 一种蓝光光盘库归档管理方法及系统 |
CN206788860U (zh) * | 2017-06-13 | 2017-12-22 | 华录光存储研究院(大连)有限公司 | 基于蓝光光盘库的分布式文件系统 |
CN107704211A (zh) * | 2017-10-31 | 2018-02-16 | 武汉光忆科技有限公司 | 一种磁光电混合光盘库及其管理方法和管理系统 |
CN108022606A (zh) * | 2017-11-22 | 2018-05-11 | 苏州互盟信息存储技术有限公司 | 近线光盘库、数据分级存储方法及系统 |
CN108446392A (zh) * | 2018-03-23 | 2018-08-24 | 北京星震维度信息技术有限公司 | 光盘库的管理系统及方法 |
Non-Patent Citations (1)
Title |
---|
曹强等: "一种超大容量自动光盘库的设计与实现", 《红外与激光工程》, no. 09 * |
Also Published As
Publication number | Publication date |
---|---|
CN113611333B (zh) | 2023-08-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107704211B (zh) | 一种磁光电混合光盘库及其管理方法和管理系统 | |
JP6329247B2 (ja) | ジュークボックスに基づくデータベース記憶システム及びそれを用いた方法 | |
JP6178859B2 (ja) | 光ディスクに基づくデータベース記憶システム及びその利用方法 | |
KR101066807B1 (ko) | 일회-기록형 디스크용 데이터 기록/재생 | |
EP2317428B1 (en) | Automatically linking partitions on a tape media device | |
JPH0646488B2 (ja) | 記憶媒体のオートチェンジャ装置 | |
KR20070005909A (ko) | 기록 장치, 재생 장치, 호스트 장치, 드라이브 장치, 기록방법, 재생 방법, 프로그램, 및 정보 기록 매체 | |
JPH02214924A (ja) | 情報記録再生方式およびシステム | |
JP2016218906A (ja) | データ記録再生システム | |
CN113611333B (zh) | 一种光盘库集群系统及读写方法 | |
CN110321076B (zh) | 基于光盘库的虚拟磁带库系统及其管理方法 | |
CN115964350A (zh) | 一种文件系统管理模型及系统 | |
JP2001043117A (ja) | ディスク媒体管理方法 | |
CN100562937C (zh) | 一次写入型光盘的数据记录方法和装置 | |
JP3725375B2 (ja) | 記憶媒体ライブラリにおけるデータ再編成方法 | |
JP2752750B2 (ja) | オートチェンジャ | |
US20080140729A1 (en) | Method for Changing Operation on a Storage Medium from a Current File System to a New or Updated File System | |
KR20230123142A (ko) | 광 디스크 기록 방법 | |
KR101442145B1 (ko) | 데이터 관리 장치 및 방법 | |
JPH01282778A (ja) | 光ディスクの記憶管理方法 | |
CN117785035A (zh) | 一种数据管理方法、装置、设备及存储介质 | |
JPH0955071A (ja) | オートチェンジャー装置 | |
JPH01236488A (ja) | 書換可能型光ディスク管理システム | |
KR100701385B1 (ko) | 광디스크 장치에서의 디펙트 관리방법과 그에 따른광디스크 | |
JPH04165527A (ja) | 情報記録再生方法及び情報記録再生装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |