CN115867901A - 信息处理装置、信息处理方法及信息处理程序 - Google Patents

信息处理装置、信息处理方法及信息处理程序 Download PDF

Info

Publication number
CN115867901A
CN115867901A CN202180050389.9A CN202180050389A CN115867901A CN 115867901 A CN115867901 A CN 115867901A CN 202180050389 A CN202180050389 A CN 202180050389A CN 115867901 A CN115867901 A CN 115867901A
Authority
CN
China
Prior art keywords
rule
information processing
storage
allocation
target object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180050389.9A
Other languages
English (en)
Inventor
大石豊
近藤理贵
宇野优子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN115867901A publication Critical patent/CN115867901A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647Migration mechanisms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/278Data partitioning, e.g. horizontal or vertical partitioning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0631Configuration or reconfiguration of storage systems by allocating resources to storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明的信息处理装置具备至少1个处理器,并按照预先设定的分配规则,将存储目标物件分配于多个存储节点中的任一个中。处理器接收存储目标物件,并根据所接收的物件的识别信息中包括的与分配规则建立对应关系的第1部分,确定所适用的分配规则,按照所确定的分配规则,将所接收的物件分配于多个存储节点中的任一个中。

Description

信息处理装置、信息处理方法及信息处理程序
技术领域
本发明的技术涉及一种信息处理装置、信息处理方法及信息处理程序。
背景技术
作为根据预先设定的规则决定物件的传送目的地的技术,已知有以下技术。
例如,在日本特开2017-184195号公报中记载有如下内容:向多个实际存储节点中的任一个中发送物件的路径上的多个通信机器中,在设定用于决定基于对物件赋予的唯一的识别码的物件的传送目的地的第1规则时,根据将识别码分配于多个实际存储节点中的任一个中的第1分配关系和多个通信机器及多个实际存储节点的连接关系来进行。
在日本特表2016-537735号公报中记载有如下内容:在包括控制器、开关及与开关进行通信的存储装置的存储系统中,通过开关接收操作请求,操作请求传送识别请求,识别请求包括用户组信息及存储方针信息中的至少1个,通过开关,按照识别请求查询开关的流表(flow table),获取与操作请求匹配的流表项(flow table entry),并且通过开关,按照所匹配的流表项的传送规则,将操作请求从存储装置中传送至目标存储装置。
发明内容
发明要解决的技术课题
物件存储系统中的物件的更新处理并不是现存物件的覆写保存,而是将更新后的物件作为与现存物件不同的物件而存储于存储节点。
并且,在物件存储系统中,为了系统信頼性的提高及负载分散等,准备多个存储节点,按照预先设定的分配规则,将由用户发送的物件分配于多个存储节点中的任一个中。
在此类系统中,在新追加了存储节点的情况下,若按照追加存储节点之前制定的分配规则(以下,称为旧规则)进行物件的分配,则无法将物件分配于新追加的存储节点。因此,可以考虑制定在分配目的地中包括新追加的存储节点的新分配规则(以下,称为新规则)。此时,存在按照旧规则分配的现存物件的更新即更新物件按照新规则分配的情况,其结果,存在与存储有现存物件的存储节点不同的存储节点中存储更新物件的情况。如此,若现存物件和更新物件存储于不同的存储节点,则可能难以确定最新物件。
另外,在以上说明中,例示了随着存储节点的追加而改变分配规则的情况,但也可以假设与存储节点的追加无关地改变分配规则的情况。并且,也可以假设同时存在多个分配规则且根据情况区分使用分配规则的情况。在任何情况下,均由于存在多个分配规则而有可能现存物件与更新物件被存储于相互不同的存储节点,且有可能难以确定最新物件。
本发明的技术鉴于以上情况而完成,其目的在于,即使在用于将物件分配于多个存储节点中的任一个中的分配规则存在多个时,也容易确定最新物件。
用于解决技术课题的手段
本发明的技术所涉及的信息处理装置具备至少1个处理器,并按照预先设定的分配规则,将存储目标物件分配于多个存储节点中的任一个中。处理器接收存储目标物件,并根据所接收的物件的识别信息中包括的与分配规则建立对应关系的第1部分,确定所适用的分配规则,按照所确定的分配规则,将所接收的物件分配于多个存储节点中的任一个中。
第1部分可以包括数值,多个分配规则可以与对上述数值预先设定的范围建立对应关系。此时,处理器可以根据上述数值,从多个分配规则中确定所适用的分配规则。
上述数值可以为随时间的经过而增加的数值。上述数值可以包括与存储目标物件的创建日期对应的数值。
第1部分可以包括字符串,多个分配规则可以与按照对上述字符串预先设定的顺序规则的顺序的范围建立对应关系。此时,处理器可以根据上述字符串,从多个分配规则中确定所适用的分配规则。
分配规则可以随着存储节点的追加而被更新。此时,作为按照相对旧的分配规则的分配目的地,可以不包括所追加的存储节点,作为按照相对新的分配规则的分配目的地,可以包括所追加的存储节点。
处理器可以根据物件的识别信息,决定成为存储目标物件的分配目的地的存储节点。物件的识别信息可以进一步包括第2部分,此时,处理器可以根据第2部分,决定成为存储目标物件的分配目的地的存储节点。处理器可以根据将第2部分的散列值除以相应于所适用的分配规则的除数时的余数的值,决定成为存储目标物件的分配目的地的存储节点。
本发明的技术所涉及的信息处理方法中按照预先设定的分配规则,将存储目标物件分配于多个存储节点中的任一个中,在该信息处理方法中,信息处理装置所具备的至少1个处理器执行如下处理:接收存储目标物件,根据所接收的物件的识别信息中包括的与分配规则建立对应关系的第1部分,确定所适用的分配规则,按照所确定的分配规则,将所接收的物件分配于多个存储节点中的任一个中。
本发明的技术所涉及的信息处理程序用于使信息处理装置所具备的至少1个处理器执行按照预先设定的分配规则将存储目标物件分配于多个存储节点中的任一个中的处理,在该信息处理程序中,处理器执行如下处理:接收存储目标物件,根据所接收的物件的识别信息中包括的与分配规则建立对应关系的第1部分,确定所适用的分配规则,按照所确定的分配规则,将所接收的物件分配于多个存储节点中的任一个中。
发明效果
根据本发明的技术,即使在用于将物件分配于多个存储节点中的任一个中的分配规则存在多个时,也能够容易确定最新物件。
附图说明
图1是表示本发明的技术的实施方式所涉及的存储系统的结构的一例的图。
图2是表示本发明的技术的实施方式所涉及的信息处理装置的硬件结构的一例的图。
图3是表示本发明的技术的实施方式所涉及的规则信息的一例的图。
图4是表示本发明的技术的实施方式所涉及的信息处理装置的功能性结构的一例的功能框图。
图5是表示本发明的技术的实施方式所涉及的对物件赋予的识别信息的一例的图。
图6A是表示本发明的技术的实施方式所涉及的按照旧规则的物件的分配的方式的一例的图。
图6B是表示本发明的技术的实施方式所涉及的按照新规则的物件的分配的方式的一例的图。
图7是表示本发明的技术的实施方式所涉及的CPU通过执行信息处理程序而实施的处理的流程的一例的流程图。
图8是表示本发明的技术的实施方式所涉及的决定处理的流程的一例的流程图。
图9是表示本发明的技术的实施方式所涉及的对物件赋予的识别信息的一例的图。
具体实施方式
以下,参考附图,对本发明的实施方式的一例进行说明。另外,在各附图中,对相同或等同的构成要件及部分标注相同的参考符号,并适当省略重复说明。
图1是表示本发明的技术的实施方式所涉及的存储系统100的结构的一例的图。存储系统100构成为包括信息处理装置10及服务器[1]20A~服务器[5]20E。存储系统100经由网络40与终端装置50连接。终端装置50是由利用存储系统100的用户使用的计算机。存储系统100保管终端装置50请求存储的物件30,并在终端装置50请求读取物件时,读取所请求的物件并发送至终端装置50。物件30构成为包括数据主体及与数据主体相关的元数据。
服务器[1]20A~服务器[5]20E分别构成存储节点,将终端装置50请求存储的物件存储于服务器[1]20A~服务器[5]20E中的任一个中。另外,图1中例示了构成存储节点的5台服务器,但能够适当增减存储系统100所具备的服务器的数量。
信息处理装置10作为分散服务器[1]20A~服务器[5]20E的负载的负载均衡器而发挥功能。信息处理装置10与各服务器[1]20A~服务器[5]20E连接。将终端装置50请求存储的物件30供给至信息处理装置10。信息处理装置10按照规定的分配规则,将从终端装置50供给的存储目标物件30分配于服务器[1]20A~服务器[5]20E中的任一个中。分配规则例如可以规定物件在各服务器[1]20A~服务器[5]20E中的分配比率(分配率)。
在存储系统100中,在对已存储于服务器[1]20A~服务器[5]20E中的任一个中的现存物件进行更新时,将现存物件的更新即更新物件存储为与现存物件不同的物件。即,存储系统100中的物件的更新并不是所谓的“数据的覆写”,而是通过“更新物件的追加”来进行。对更新物件赋予与所对应的现存物件相同的识别信息。识别信息可以为用于唯一识别物件的UUID(Universally Unique Identifier:通用唯一识别码)即物件的键(objectkey)。
图2是表示信息处理装置10的硬件结构的一例的图。信息处理装置10包括CPU(Central Processing Unit:中央处理器)11、作为临时存储区域的存储器12及非易失性的存储部13。并且,信息处理装置10包括与网络40连接的网络接口14及服务器[1]20A~服务器[5]20E所连接的外部接口15。CPU11、存储器12、存储部13、网络接口14及外部接口15与总线16连接。
存储部13可通过HDD(Hard Disk Drive:硬盘驱动器)、SSD(Solid State Drive:固态驱动器)或快闪存储器等存储介质实现。在存储部13中存储后述信息处理程序60及规则信息61。CPU11从存储部13读取信息处理程序60,在存储器12中扩展并执行。另外,CPU11是本发明的技术中的处理器的一例。
例如,经由在终端装置50上运行的网页浏览器上显示的管理控制台进行对存储系统100的访问。用户在存储系统100中存储物件时,在管理控制台上创建存储区(bucket),在存储区内配置存储目标物件。存储区是指接收存储目标物件的虚拟的容纳区域。用户能够创建多个存储区。用户在管理控制台上将赋予了物件的识别信息即物件的键的物件配置于存储区内并指示物件的上传,由此将该物件发送至存储系统100,并存储于服务器[1]20A~服务器[5]20E中的任一个中。
信息处理装置10将存储目标物件分配于服务器[1]20A~服务器[5]20E时的分配规则与存储区建立对应关系。分配规则的内容作为规则信息61而保存在信息处理装置10的存储部13。
图3是表示保存在信息处理装置10的存储部13的规则信息61的一例的图。在以下说明中,将服务器[4]20D及服务器[5]20E作为新追加的服务器。在信息处理装置10的存储部13中保存有在追加服务器[4]20D及服务器[5]20E之前创建的存储区的创建时制定的分配规则(以下,称为旧规则)及在追加服务器[4]20D及服务器[5]20E之后制定的分配规则(以下,称为新规则)作为规则信息61。
旧规则并未假设服务器[4]20D及服务器[5]20E的存在,因此,按照旧规则的物件的分配目的地中通常不包括所追加的服务器[4]20D及服务器[5]20E。在图3所示的例子中,作为旧规则,规定有如下内容:将物件在服务器[1]20A中的分配比率设为50%,将物件在服务器[2]20B中的分配比率设为25%,将物件在服务器[3]20C中的分配比率设为25%(分配比率2:1:1)。例如,能够根据服务器的处理能力来设定物件的分配比率。即,可以将物件在具有更高处理能力的服务器中的分配比率设定为更高。由此,能够使考虑了服务器的处理能力的负载均匀。
即使在追加服务器[4]20D及服务器[5]20E之后,只要适用旧规则,则无法在服务器[4]20D及服务器[5]20E中分配物件。因此,本实施方式所涉及的信息处理装置10中,能够改变创建存储区时制定的分配规则。即,新追加作为存储节点发挥功能的服务器时,新制定所追加的服务器包括在分配目的地的新规则,并追加至规则信息61。
在图3所示的例子中,作为新规则,规定有如下内容:将物件在服务器[1]20A中的分配比率设为20%,将物件在服务器[2]20B中的分配比率设为10%,将物件在服务器[3]20C中的分配比率设为10%,将物件30在服务器[4]20D中的分配比率设为30%,将物件在服务器[5]20E中的分配比率设为30%(分配比率2:1:1:3:3)。
例如,信息处理装置10在创建存储区时,在该时点生成相应于存储系统100所具备的服务器的台数及各服务器的处理能力等的分配规则,并将其作为规则信息61而保存在存储部13。并且,例如,信息处理装置10在追加服务器时,生成所追加的服务器包括在物件的分配目的地的新分配规则,并将其追加至规则信息61。
信息处理装置10在生成新旧分配规则时,例如,可以以考虑了在该时点设置的服务器的处理能力的负载变均等的方式生成分配规则。并且,信息处理装置10在生成新旧分配规则时,在规则信息61中包括表示哪个分配规则为最新的履历信息。
如此,本实施方式所涉及的信息处理装置10中,分配规则随着作为存储节点发挥功能的服务器的追加而被更新。通常,作为按照相对旧的分配规则的分配目的地,不包括所追加的服务器,作为按照相对新的分配规则的分配目的地,包括所追加的服务器。
另外,在图3所示的例子中,示出了旧规则及新规则这2个分配规则包括在规则信息61中的情况,但并不限定于该方式。例如,分配规则的更新进行2次以上时,规则信息61中包括3个以上分配规则。分配规则也能够由信息处理装置10的管理员任意设定及变更。
图4是表示将物件分配于构成存储节点的各服务器时的信息处理装置10的功能性结构的一例的功能框图。如图4所示,信息处理装置10包括接收部70、特定部71、决定部72及发送部73。通过CPU11执行信息处理程序60,信息处理装置10作为接收部70、特定部71、决定部72及发送部73发挥功能。
如上所述,若用户在存储区内配置存储目标物件并指示上传,则存储目标物件被发送至存储系统100。接收部70接收从终端装置50发送的存储目标物件。
特定部71在保存于存储部13的规则信息61中包括的多个分配规则中,确定适用于接收部70所接收的存储目标物件的分配规则。特定部71根据对存储目标物件赋予的识别信息,确定所适用的分配规则。
图5是表示对物件赋予的识别信息的一例的图。在图5中,例示有赋予了2018/05/25/foo.txt这一识别信息的物件1及赋予了2020/08/03/bar.txt这一识别信息的物件2。物件1的识别信息中包括的2018/05/25/的部分及物件2的识别信息中包括的2020/08/03/的部分即第1部分201是相当于物件的键中的前缀的部分。物件1的识别信息中包括的foo.txt部分及物件2的识别信息中包括的bar.txt部分即第2部分202是相当于物件的键中的物件名的部分。另外,可以在第1部分201与第2部分202之间及第1部分201之前的至少一个中包括识别信息的其他部分。
特定部71确定根据存储目标物件的识别信息中包括的第1部分201适用的分配规则。如图5所示,第1部分201可以包括数值。该数值可以为该物件的创建日期等随时间的经过而增加的数值。在图5所示的例子中,物件1是2018年5月25日创建的物件,物件2是2020年8月3日创建的物件。
第1部分201包括数值时,规则信息61中包括的多个分配规则与对该数值预先设定的范围建立对应关系。例如,图3中例示的旧规则例如与数值范围“2018/01/01~2019/12/31”建立对应关系。这表示对从2018年1月1日至2019年12月31之间创建的物件适用旧规则。另一方面,例如,图3中例示的新规则与数值范围“2020/01/01~”建立对应关系。这表示对2020年1月1日以后创建的物件适用新规则。在该例子的情况下,对于图5中例示的物件1,第1部分201包括数值“2018/05/25”且包括在数值范围“2018/01/01/~2019/12/31”中,因此适用旧规则。对于图5中例示的物件2,第1部分201包括数值“2020/08/03”且包括在数值范围“2020/01/01~”中,因此适用新规则。另外,第1部分201中包括的数值的范围与所适用的分配规则的对应关系可以包括在规则信息61中,也可以保存在与规则信息61不同的存储部13。
决定部72根据存储目标物件的识别信息中包括的第2部分202,按照以下顺序决定成为按照通过特定部71确定的分配规则的分配目的地的服务器。
决定部72计算存储目标物件的识别信息中包括的第2部分202的散列值a。决定部72计算将散列值a除以根据所适用的分配规则确定的除数b时的余数c。决定部72将与余数c的值建立对应关系的服务器决定为存储目标物件的分配目的地。
例如,通过特定部71确定的分配规则是图3中例示的旧规则(分配比率2:1:1)时,决定部72导出4(=2+1+1)作为根据所适用的分配规则确定的除数b。决定部72在将存储目标物件的识别信息中包括的第2部分的散列值a除以除数b(=4)时的余数c是0或1时,将存储目标物件的分配目的地决定为服务器[1]20A,余数c是2时,将存储目标物件的分配目的地决定为服务器[2]20B,余数c是3时,将存储目标物件的分配目的地决定为服务器[3]20C。由此,如图6A所示,能够以按照旧规则的分配比率(2:1:1)进行存储目标物件在服务器[1]20A~服务器[3]20C中的分配。
另一方面,通过特定部71确定的分配规则是图3中例示的新规则(分配比率2:1:1:3:3)时,决定部72导出10(=2+1+1+3+3)作为根据所适用的分配规则确定的除数b。决定部72在将存储目标物件的散列值a除以除数b(=10)时的余数c是0或1时,将存储目标物件的分配目的地决定为服务器[1]20A,余数c是2时,将存储目标物件的分配目的地决定为服务器[2]20B,余数c是3时,将存储目标物件的分配目的地决定为服务器[3]20C,余数c是4、5或6时,将存储目标物件的分配目的地决定为服务器[4]20D,余数c是7、8或9时,将存储目标物件的分配目的地决定为服务器[5]20E。由此,如图6B所示,能够以按照图3中例示的新规则的分配比率(2:1:1:3:3)进行存储目标物件在各服务器中的分配。
如上所述,通过根据将存储目标物件的识别信息中包括的第2部分202的散列值a除以根据所适用的分配规则确定的除数b时的余数c决定分配目的地,能够以按照所适用的分配规则的分配比率进行存储目标物件在服务器中的分配。另外,余数c与成为分配目的地的服务器之间的每一分配规则的对应关系可以包括在规则信息61,也可以与规则信息61不同地保存在存储部13。
发送部73将存储目标物件发送至服务器[1]20A~服务器[5]20E中成为通过决定部72决定的分配目的地的服务器。存储目标物件存储于分配目的地的服务器所具备的硬盘等存储介质。
其中,考虑对已在服务器[1]20A~服务器[5]20E的任一个中存储的现存物件进行更新的情况。此时,现存物件的更新即更新物件作为与现存物件不同的物件而存储于存储系统100。即,存储系统100中的物件的更新并不是所谓的“数据的覆写”,而是通过“更新物件的追加”来进行。在此类系统中,若更新物件存储于与存储有所对应的现存物件的服务器不同的服务器,则难以确定最新物件。
用户在更新现存物件时,将赋予了与现存物件相同的识别信息的更新物件配置于存储区内。因此,信息处理装置10能够按照与对现存物件适用的分配规则相同的分配规则分配更新物件。
并且,如上所述,信息处理装置10根据将物件的识别信息中包括的第2部分202的散列值a除以根据所选择的分配规则确定的除数b时的余数c决定分配目的地。对更新物件赋予与现存物件相同的识别信息,因此针对更新物件计算的余数c与针对现存物件计算的余数c相同。因此,信息处理装置10能够将更新物件分配于与存储有现存物件的服务器相同的服务器。
以下,对信息处理装置10的作用进行说明。图7是表示CPU11通过执行信息处理程序60而实施的处理的流程的一例的流程图。例如,在终端装置50请求物件的存储时执行信息处理程序60。另外,存储部13中预先保存有规则信息61。
在步骤S1中,接收部70接收从终端装置50发送的存储目标物件。
在步骤S2中,针对在步骤S1中接收的物件,特定部71根据对该物件赋予的识别信息中包括的第1部分201确定所适用的分配规则。例如,第1部分201包括数值时,规则信息61中包括的多个分配规则与对该数值预先设定的范围建立对应关系。此时,特定部71判定存储目标物件中的第1部分201中包括的数值包括在对该数值预先设定的范围中的哪一范围,并将与所判定的范围对应的分配规则确定为对步骤S1中接收的物件适用的分配规则。
在步骤S3中,决定部72进行如下决定处理:从服务器[1]20A~服务器[5]20E中决定按照步骤S2中确定的分配规则的分配目的地。其中,图8是表示决定处理的详细内容的流程图。以下,参考图8的流程图,对决定处理进行说明。
在步骤S11中,决定部72计算步骤S1中接收的物件的识别信息中包括的第2部分202的散列值a。
在步骤S12中,决定部72计算将散列值a除以根据步骤S2中确定的分配规则决定的除数b时的余数c。
在步骤S13中,决定部72根据步骤S12中计算的余数c的值,决定步骤S1中接收的物件的分配目的地。
参考图7,在步骤S4中,发送部73将在步骤S1中接收的物件发送至成为步骤S3中决定的分配目的地的服务器。该物件存储于分配目的地的服务器所具备的硬盘等存储介质。
如上所述,根据本实施方式所涉及的信息处理装置10,在追加了作为存储节点发挥功能的服务器时,生成包括所追加的服务器作为物件的分配目的地的新分配规则,因此能够有效使用所追加的服务器。如此,在能够改变分配规则的系统中,可以考虑按照最新分配规则分配按照过去的分配规则分配的现存物件的更新即更新物件。此时,存在更新物件存储于与存储有现存物件的服务器不同的服务器的情况。若现存物件与更新物件存储在相互不同的服务器,则有可能难以确定最新物件。作为解决该问题的方法,可以考虑如下方法:对各服务器进行是否存储有赋予了与存储目标物件相同的识别信息的物件的查询。然而,根据该方法,存在多个存储目标物件时,由于每个物件均需要查询,因此处理时间变得相对长。
根据本实施方式所涉及的信息处理装置10,根据存储目标物件的识别信息中包括的第1部分201确定所适用的分配规则,并按照所确定的分配规则,将存储目标物件分配于多个服务器中的任一个中。如上所述,对更新物件赋予与现存物件相同的识别信息,因此信息处理装置10能够按照与对现存物件适用的分配规则相同的分配规则分配更新物件。并且,信息处理装置10根据物件的识别信息中包括的第2部分202的部分来决定成为物件的分配目的地的服务器,因此能够将更新物件分配于与存储有现存物件的服务器相同的服务器。即,根据本实施方式所涉及的信息处理装置10,即使存在多个分配规则时,也能够容易确定最新物件。并且,与对各服务器进行查询的情况相比,能够以较短的处理时间进行存储目标物件的分配。
并且,物件的识别信息中的第1部分201包括该物件的创建日期等随时间的经过而增加的数值且多个分配规则与对上述数值预先设定的范围建立对应关系。由此,能够简便且适当地进行新旧分配规则的区分使用。
图9是表示对物件赋予的识别信息的另一例的图。图9中例示有赋予了AAX/foo.txt这一识别信息的物件3、赋予了ABC/bar.txt这一识别信息的物件4及赋予了BAA/baz.txt这一识别信息的物件5。物件3的识别信息中包括的AAX/的部分、物件4的识别信息中包括的ABC/的部分及物件5的识别信息中包括的BAA/的部分即第1部分201是相当于物件的键中的前缀的部分。物件3的识别信息中包括的foo.txt的部分、物件4的识别信息中包括的bar.txt的部分及物件5的识别信息中包括的baz.txt的部分即第2部分202相当于物件的键中的物件名称的部分。
如此,物件的识别信息的第1部分201可以包括字符串。另外,字符串中可以包括数值。第1部分201包括字符串时,规则信息61中包括的多个分配规则与对该字符串设定的范围建立对应关系。具体而言,多个分配规则与按照词典顺序(lexicographic order)或万国码(Unicode)值中的升序或降序等对字符串预先设定的顺序规则的顺序的范围建立对应关系。
例如,图3中例示的旧规则与以“A”开头的字符串建立对应关系,图3中例示的新规则与以词典顺序中的“B”以后的文字开头的字符串建立对应关系。此时,关于图9中例示的物件3及4,第1部分201包括以“A”开头的字符串,因此适用旧规则。关于图9中例示的物件5,第1部分201包括以“B”开头的字符串,因此适用新规则。另外,第1部分201中包括的字符串的范围与所适用的分配规则的对应关系可以包括在规则信息61中,也可以保存在与规则信息61不同的存储部13。
如此,即使物件的识别信息中包括的第1部分201包括除数值以外的字符串的情况下,信息处理装置10也能够按照与对现存物件适用的分配规则相同的分配规则分配更新物件,并且,能够将更新物件分配于与存储有现存物件的服务器相同的服务器。
另外,在以上说明中,例示了决定部72根据物件的识别信息中包括的第2部分202决定成为分配目的地的服务器的情况,但并不限定于该方式。决定部72也可以根据包括第1部分201及第2部分202这两者的识别信息的所有部分决定成为分配目的地的服务器。此时,决定部72可以针对包括第1部分201及第2部分202的识别信息的所有部分计算散列值a,计算将散列值a除以根据所适用的分配规则确定的除数b时的余数c,并将对应于余数c的服务器决定为成为分配目的地的服务器。
并且,在本实施方式中,例示了随着追加作为存储节点发挥功能的服务器而进行分配规则的变更的情况,但并不限定于该方式。分配规则的变更能够在任意时点进行。并且,成为按照过去的分配规则的分配目的地的服务器与成为按照最新分配规则的分配目的地的服务器可以部分一致,也可以完全一致,也可以完全不一致。
在上述各实施方式中,例如,作为接收部70、特定部71、决定部72及发送部73等执行各种处理的处理部(processing unit)的硬件结构,能够使用以下所示的各种处理器(processor)。如上所述,在上述各种处理器中,除了包括执行软件(程序)而作为各种处理部发挥功能的通用处理器即CPU以外,也包括FPGA等制造之后能够变更电路结构的处理器即可编程逻辑器件(Programmable Logic Device:PLD)、ASIC(Application SpecificIntegrated Circuit:专用集成电路)等具有为了执行特定处理而专门设计的电路结构的处理器即专用电路等。
1个处理部可以由这些各种处理器中的1个构成,也可以由相同种类或不同种类的2个以上处理器的组合(例如,多个FPGA的组合、CPU与FPGA的组合)构成。并且,也可以由1个处理器构成多个处理部。
作为由1个处理器构成多个处理部的例子,第1,有如下方式:如客户端及服务器等计算机所代表,由1个以上CPU及软件的组合构成1个处理器,该处理器作为多个处理部而发挥功能。第2,有如下方式:如单晶片系统(System on Chip:SoC)等所代表,使用以1个IC(Integrated Circuit:集成电路)晶片实现包括多个处理部的系统整体的功能的处理器。如此,各种处理部使用上述各种处理器中的1个以上作为硬件结构来构成。
而且,作为这些各种处理器的硬件结构,更具体而言,能够使用将半导体元件等电路元件组合而成的电路(circuitry)。
并且,在上述实施方式中,对将信息处理程序60预先存储(安装)在存储部13中的方式进行了说明,但并不限定于此。信息处理程序60可以以记录于CD-ROM(Compact DiscRead Only Memory:光盘只读存储器)、DVD-ROM(Digital Versatile Disc Read OnlyMemory:数字多功能光盘只读存储器)及USB(Universal Serial Bus:通用串行总线)存储器等记录介质的方式提供。并且,信息处理程序60也可以设为经由网络从外部装置下载的方式。
另外,关于2020年8月21日申请的日本专利申请2020-140421的发明,将其全部内容通过参考编入本说明书中。并且,本说明书中记载的所有文献、专利申请及技术标准与通过参考编入各个文献、专利申请及技术标准的情况被具体且各个记入的情况相同程度地,通过参考编入本说明书中。

Claims (11)

1.一种信息处理装置,其具备至少1个处理器,并按照预先设定的分配规则,将存储目标物件分配于多个存储节点中的任一个中,
所述处理器接收存储目标物件,
并根据所接收的物件的识别信息中包括的与分配规则建立对应关系的第1部分,确定所适用的分配规则,
按照所确定的分配规则,将所接收的物件分配于所述多个存储节点中的任一个中。
2.根据权利要求1所述的信息处理装置,其中,
所述第1部分包括数值,
多个分配规则与对所述数值预先设定的范围建立对应关系,
所述处理器根据所述数值,从所述多个分配规则中确定所适用的分配规则。
3.根据权利要求2所述的信息处理装置,其中,
所述数值为随时间的经过而增加的数值。
4.根据权利要求3所述的信息处理装置,其中,
所述数值包括对应于存储目标物件的创建日期的数值。
5.根据权利要求1所述的信息处理装置,其中,
所述第1部分包括字符串,
多个分配规则与按照对所述字符串预先设定的顺序规则的顺序的范围建立对应关系,
所述处理器根据所述字符串,从所述多个分配规则中确定所适用的分配规则。
6.根据权利要求1至5中任一项所述的信息处理装置,其中,
所述分配规则随着所述存储节点的追加而被更新,
作为按照相对旧的分配规则的分配目的地,不包括所追加的存储节点,
作为按照相对新的分配规则的分配目的地,包括所追加的存储节点。
7.根据权利要求1至6中任一项所述的信息处理装置,其中,
所述处理器根据所述识别信息,决定成为存储目标物件的分配目的地的存储节点。
8.根据权利要求7所述的信息处理装置,其中,
所述识别信息进一步包括第2部分,
所述处理器根据所述第2部分,决定成为存储目标物件的分配目的地的存储节点。
9.根据权利要求8所述的信息处理装置,其中,
所述处理器根据将所述第2部分的散列值除以相应于所适用的分配规则的除数时的余数的值,决定成为存储目标物件的分配目的地的存储节点。
10.一种信息处理方法,其按照预先设定的分配规则,将存储目标物件分配于多个存储节点中的任一个中,
在所述信息处理方法中,信息处理装置所具备的至少1个处理器执行如下处理:
接收存储目标物件,
并根据所接收的物件的识别信息中包括的与分配规则建立对应关系的第1部分,确定所适用的分配规则,
按照所确定的分配规则,将所接收的物件分配于所述多个存储节点中的任一个中。
11.一种信息处理程序,其用于使信息处理装置所具备的至少1个处理器执行按照预先设定的分配规则,将存储目标物件分配于多个存储节点中的任一个中的处理,
在所述信息处理程序中,所述处理器执行如下处理:
接收存储目标物件,
并根据所接收的物件的识别信息中包括的与分配规则建立对应关系的第1部分,确定所适用的分配规则,
按照所确定的分配规则,将所接收的物件分配于所述多个存储节点中的任一个中。
CN202180050389.9A 2020-08-21 2021-07-15 信息处理装置、信息处理方法及信息处理程序 Pending CN115867901A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020140421 2020-08-21
JP2020-140421 2020-08-21
PCT/JP2021/026635 WO2022038935A1 (ja) 2020-08-21 2021-07-15 情報処理装置、情報処理方法、及び情報処理プログラム

Publications (1)

Publication Number Publication Date
CN115867901A true CN115867901A (zh) 2023-03-28

Family

ID=80350322

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180050389.9A Pending CN115867901A (zh) 2020-08-21 2021-07-15 信息处理装置、信息处理方法及信息处理程序

Country Status (6)

Country Link
US (1) US20230168833A1 (zh)
EP (1) EP4202718A4 (zh)
JP (1) JPWO2022038935A1 (zh)
CN (1) CN115867901A (zh)
TW (1) TW202211032A (zh)
WO (1) WO2022038935A1 (zh)

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001331509A (ja) * 2000-05-22 2001-11-30 Hitachi Ltd リレーショナルデータベース処理装置、リレーショナルデータベースの処理方法及びリレーショナルデータベースの処理プログラムを記録したコンピュータ読み取り可能な記録媒体
JP5236129B2 (ja) * 2013-02-04 2013-07-17 株式会社インテック ストレージサービス提供装置、システム、サービス提供方法、及びサービス提供プログラム
KR101864813B1 (ko) 2013-08-31 2018-06-05 후아웨이 테크놀러지 컴퍼니 리미티드 저장 시스템에서 조작 요청을 처리하기 위한 방법 및 장치
US20160378846A1 (en) * 2015-06-26 2016-12-29 Intel Corporation Object based storage cluster with multiple selectable data handling policies
JP6330840B2 (ja) * 2016-03-29 2018-05-30 日本電気株式会社 ストレージ管理システムおよびストレージ管理方法
JP6677052B2 (ja) 2016-03-31 2020-04-08 日本電気株式会社 通信管理装置、通信管理方法及びプログラム
CN110622152B (zh) * 2017-02-27 2021-04-13 分秒库公司 用于查询时间序列数据的可扩展数据库系统
JP2020140421A (ja) 2019-02-28 2020-09-03 京セラドキュメントソリューションズ株式会社 ワークフローシステムおよびワークフロー管理プログラム

Also Published As

Publication number Publication date
EP4202718A4 (en) 2024-01-17
JPWO2022038935A1 (zh) 2022-02-24
EP4202718A1 (en) 2023-06-28
WO2022038935A1 (ja) 2022-02-24
US20230168833A1 (en) 2023-06-01
TW202211032A (zh) 2022-03-16

Similar Documents

Publication Publication Date Title
JP6033805B2 (ja) 分散リソース管理のためのバランスしたコンシステント・ハッシュ
JP6965370B2 (ja) ファイルシステムパーミッション設定方法及び装置
JP4416821B2 (ja) ネットワーク上でクライアントからアクセス可能なファイルセットの名前空間を維持する分散ファイル・システム
CN110489059B (zh) 数据集群存储的方法、装置及计算机设备
US8682874B2 (en) Information processing system
JP4799018B2 (ja) コンピュータの識別情報を管理するための方法、システムおよび装置
US20030172089A1 (en) File availability in distributed file storage systems
JP2004280485A (ja) 計算機システム
CN108200211B (zh) 集群中镜像文件下载的方法、节点和查询服务器
CN111651667A (zh) 数据推送分流控制方法、装置及计算机可读存储介质
US20090300602A1 (en) Determining application distribution based on application state tracking information
CN115867901A (zh) 信息处理装置、信息处理方法及信息处理程序
EP4202675A1 (en) Information processing device, information processing method, and information processing program
JP6607044B2 (ja) サーバー装置、分散ファイルシステム、分散ファイルシステム制御方法、および、プログラム
EP4202674A1 (en) Information processing device, information processing method, and information processing program
CN112965935A (zh) 数据处理方法及分布式文件系统
JP2014524210A (ja) 可変長ノンスの生成
CN113438331A (zh) 短域名管理方法、系统、电子装置和存储介质
JP6757708B2 (ja) 情報処理装置及び構成要素の管理方法
EP4059189A1 (en) Message-limited self-organizing network groups for computing device peer matching
CN109787899B (zh) 一种数据分区路由方法、装置及系统
CN111966691A (zh) 一种分布式存储系统快速查询对象所属目录的配置方法及系统
US7149751B1 (en) System and method for distributing selected objects from a source database to a destination database
CN118051476A (zh) 快照配额管理方法、装置、设备及存储介质
CN116431632A (zh) 数据处理方法、数据库系统、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination