CN104113566B - 一种医疗影像的云存储的实现方法 - Google Patents

一种医疗影像的云存储的实现方法 Download PDF

Info

Publication number
CN104113566B
CN104113566B CN201310135779.3A CN201310135779A CN104113566B CN 104113566 B CN104113566 B CN 104113566B CN 201310135779 A CN201310135779 A CN 201310135779A CN 104113566 B CN104113566 B CN 104113566B
Authority
CN
China
Prior art keywords
server
hash
cloud storage
file
space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310135779.3A
Other languages
English (en)
Other versions
CN104113566A (zh
Inventor
邓良远
陈闽峰
程延俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LANWON TECHNOLOGY Co Ltd
Original Assignee
LANWON TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LANWON TECHNOLOGY Co Ltd filed Critical LANWON TECHNOLOGY Co Ltd
Priority to CN201310135779.3A priority Critical patent/CN104113566B/zh
Publication of CN104113566A publication Critical patent/CN104113566A/zh
Application granted granted Critical
Publication of CN104113566B publication Critical patent/CN104113566B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开一种医疗影像的云存储的实现方法,其特征在于,包括步骤:构造一个Hash空间,将DICOM文件与Hash空间内的元素建立映射关系;将Hash空间内的元素分配到云存储的各个服务器;用文件记录云存储中所有服务器信息以及Hash空间内元素的分配信息,并将这个文件同步到云存储中的每一台服务器上;向云存储中服务器提交DICOM文件进行存储。本发明实现简单、没有复杂的控制逻辑,易于开发和维护,而且有良好的扩展性,扩展之后仍能保证数据分布均匀。

Description

一种医疗影像的云存储的实现方法
技术领域
本发明涉及医学图像存储技术,尤其是涉及一种医疗影像的云存储的实现方法。
背景技术
如今,医院等卫生事业单位在疾病的诊断和治疗过程中,已经大量借助于计算机等数字设备。随着这些设备的广泛使用,产生了大量的数字医疗资料,如病人的透视光片、体内结构的检测视频、手术过程的录像以及与之相关的文字描述等。所有这些数字资料,都是医疗单位的重要无形资产,可以用于病例检索、教学回放、经验交流等。经过长期积累,这些资料已经成为一笔宝贵的财富,具有重要的保存和再利用价值。
如何才能有效保存和管理这些数字医疗资料呢?由于X光片、视频等资料的数据量庞大,要想长时间完好保存这些数据,必然需要海量存储系统的支持。因此,稳定、高效,能够存储海量数据的存储管理系统必不可少。
已有的云存储技术方案主要有:
1、Google文件系统(Google File System,GFS)是一个大型的分布式文件系统。Google这种中心服务器模式对于医疗影像的存储存在一些缺点:中心服务器极易成为整个系统的瓶颈。所有客户端访问GFS时,首先访问Master节点,这样中心服务器对并发量、稳定性的要求都很高,稍有问题,就影响整个系统的运行。
2、基于一致性哈希算法无中心服务器的存储架构。基于一致性哈希算法无中心服务器的存储架构对于医疗影像的存储存在的缺点:在扩展服务器的时候需要成倍的增加服务器,否则,数据的分布就不均匀了。而对于医疗影像的存储领域,需要在扩展服务器时更加灵活才可行。
发明内容
本发明所要解决的技术问题是提供一种医疗影像的云存储的实现方法,通过此方法可以实现在廉价的商用服务器和存储设备进行海量的医疗影像数据的存储。
本发明采用如下技术方案实现:一种医疗影像的云存储的实现方法,其包括步骤:
构造一个Hash空间,将DICOM文件与Hash空间内的元素建立映射关系;
将Hash空间内的元素分配到云存储的各个服务器;
用文件记录云存储中所有服务器信息以及Hash空间内元素的分配信息,并将这个文件同步到云存储中的每一台服务器上;
向云存储中服务器提交DICOM文件进行存储。
其中,建立映射关系的步骤具体包括:
计算DICOM文件中数据元素Study Instance UID的CRC编码;
将得到的CRC编码对Hash空间的空间大小M取余,得到的结果就是映射到Hash空间的元素。
其中,记录分配信息的文件至少包含信息:服务器序号、IP地址、磁盘容量和包含的Hash空间的元素。
其中,向云存储中服务器提交DICOM文件进行存储的步骤具体包括:
接收客户端发送过来的DICOM文件到缓存中;
将DICOM文件映射到Hash空间的一个元素Key,通过云存储配置文件查找该Hash元素Key所在的服务器S;
再把该DICOM文件从缓存转发到计算出来的服务器S,将该DICOM文件存储在服务器S。
在一个实施例中,所述医疗影像的云存储的实现方法还包括从云存储中服务器下载DICOM文件的步骤。所述下载DICOM文件的步骤具体包括:客户端发送DICOM文件下载请求,在下载请求信息中包含请求的DICOM文件的Study Instance UID;收到客户端请求的那台服务器S1,根据Study Instance UID映射到Hash空间的一个元素Key,通过云存储配置文件查找该Hash元素Key所在的服务器S2;如果服务器S2就是服务器S1本身,那么直接将DICOM发送给客户端,否则,把服务器S2的信息发送给客户端,这样客户端再向S2服务器发送DICOM文件下载请求。
在一个实施例中,所述医疗影像的云存储的实现方法还包括对云存储中服务器进行扩展的步骤。其中,对云存储中服务器进行扩展的步骤具体包括:重新计算每台服务器的应分配的Hash元素个数;第i服务器当前已分配的Hash元素个数为Gi,如果Gi>Hi,那么这个服务器需要迁出Hash元素,迁出的Hash元素个数为Oi=Gi-Hi,否则就应该迁入Hash元素,迁入的Hash元素的个数为Pi=Gi-Hi;根据上面计算所得每台服务器迁出或迁入Hash元素数量,生成Hash元素的迁移脚本。
其中,于Hash元素的迁移完成后,将最新的用于记录分配信息的文件及Hash元素的迁移脚本在云存储的各个服务器进行同步更新。
与现有技术相比,本发明具有如下有益效果:
本发明实现简单、没有复杂的控制逻辑,易于开发和维护,而且有良好的扩展性,扩展之后仍能保证数据分布均匀。
附图说明
图1是本发明一个实施例的流程示意图;
图2是分配Hash元素到服务器的流程示意图;
图3是实现DICOM文件存储的流程示意图;
图4是实现DICOM文件下载的流程示意图;
图5是增加服务器时生成配置脚本的流程示意图;
图6是增加服务器的实现流程示意图。
具体实施方式
本发明提出一种基于有限hash空间与DICOM(Digital Imaging andCommunication in Medicine)文件映射的云存储技术,具有实现更简单更灵活且扩展性好的特点。
结合图1所示,在一个实施例中,本发明包括如下实现步骤:
步骤S1、构造一个有限的连续的自然数集合,我们称这个自然数集合为Hash空间,假设Hash空间的大小M,那么Hash空间可以表示成[1,2,3,4...,M]。
步骤S2、将DICOM文件与Hash空间内的元素建立映射关系。
循环冗余校验码(CRC)的基本原理是:在K位信息码后再拼接R位的校验码,整个编码长度为P位,因此,这种编码又叫(P,K)码。对于一个给定的(N,K)码,可以证明存在一个最高次幂为P-K=R的多项式G(x)。根据G(x)可以生成K位信息的校验码,而G(x)叫做这个CRC码的生成多项式。校验码的具体生成过程为:假设发送信息用信息多项式C(X)表示,将C(x)左移R位,则可表示成C(x)*2的R次方,这样C(x)的右边就会空出R位,这就是校验码的位置。通过C(x)*2的R次方除以生成多项式G(x)得到的余数就是校验码。
DICOM文件与Hash空间元素的映射方法如下:1、计算DICOM文件中数据元素StudyInstance UID的CRC编码。2、该CRC编码对Hash空间大小M取余。具体计算公式为:Key=CRC(Study Instance UID)%M,其中Key就是映射到Hash空间的元素。
步骤S3、将Hash空间内的元素分配到云存储的各个服务器。
把Hash空间内的元素分配到不同的服务器上去,根据DICOM文件与Hash空间元素的映射关系,就可以实现影像数据的云存储服务了。
结合图2所示,假设集群中有N台服务器,我们把Hash空间内的元素分配到这N台服务器上。
分配的规则可以根据服务器的磁盘容量进行分配,分配的规则如下:
计算每台服务器的应分配的Hash元素个数Hi,假设第i台(i=0,1,2,...,N-1)服务器的磁盘容量为Di,计算公式为:
步骤S4、用文件记录云存储中所有服务器信息以及Hash空间内元素的分配信息,并将这个文件同步到云存储中的每一台服务器上,即在云存储中的每一台服务器上同步云存储配置文件。
比如,配置文件包含的数据格式如下表1所示:
服务器序号 IP地址 磁盘容量 包含的Hash空间的元素
1 192.168.0.100 10T 1,2,3,4,…,1002
2 192.168.0.102 12T 1003,1004,…,2200
表1
步骤S5、将DICOM文件存储至云存储中服务器。
结合图3所示,客户端配置连接的存储服务器为云存储服务器的任意一台。当客户端向该服务器提交DICOM文件进行保存时,该服务器首先接收客户端发送过来的DICOM文件到缓存中,然后将DICOM文件映射到Hash空间的一个元素Key,通过云存储配置文件查找该hash元素Key所在的服务器S,把DICOM文件再转发到计算出来的服务器S中,就实现了DICOM文件在云存储中服务器的存储。
另外,结合图4所示,若需要从云存储中服务器下载DICOM文件:首先客户端发送DICOM文件下载请求,在下载请求信息中包含请求的DICOM文件的Study Instance UID。收到客户端请求的那台服务器S1,根据Study InstanceUID映射到Hash空间的一个元素Key,通过云存储配置文件查找该Hash元素Key所在的服务器S2,如果S2就是S1本身,那么直接将DICOM发送给客户端。否则,把服务器S2的信息发送给客户端,这样客户端再向S2服务器发送DICOM文件下载请求。
再者,本发明还可以对云存储中服务器进行扩展。假设当前云存储中已经有N台服务器,现在增加一台服务器。首先需要调整Hash元素的分配。这个调整的过程,需要遵循两个原则,一是保证调整后的数据分布仍然是均匀的;二是调整时,数据的迁移量是最小的。我们调整Hash元素的方法是如下:1、重新计算每台服务器的应分配的Hash元素个数,假设第i台服务器的的磁盘容量为Di,计算公式为:2、第i服务器当前已分配的Hash元素个数为Gi,如果Gi>Hi,那么这个服务器需要迁出Hash元素,迁出的Hash元素个数为Oi=Gi-Hi。否则就应该迁入Hash元素,迁入的Hash元素的个数为Pi=Gi-Hi。3、根据上面计算所得每台服务器迁出或迁入Hash元素数量,生成Hash元素的迁移脚本,按图5所示进行Hash元素的迁移任务脚本。
其中,Hash元素迁移脚本的数据结构如下表2所示:
Hash元素 源服务器 目标服务器
1 192.168.0.100 192.168.0.103
表2
生成好新的云存储配置脚本和Hash元素的迁移任务后,服务器需要再次同步云存储配置脚本和Hash元素的迁移任务脚本,其中Hash元素的迁移任务脚本的实现步骤见图6所示。
综上,与现有技术相比,本发明具有如下有益技术效果:
1、实现简单、没有复杂的控制逻辑,易于开发和维护。
2、不会出现单点故障,单个服务器故障不会影响系统整体的运行。
3、有良好的扩展性,扩展之后仍能保证数据分布均匀
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (5)

1.一种医疗影像的云存储的实现方法,其特征在于,包括步骤:
构造一个Hash空间,将DICOM文件与Hash空间内的元素建立映射关系;
将Hash空间内的元素分配到云存储的各个服务器;
用云存储配置文件记录云存储中所有服务器信息以及Hash空间内元素的分配信息,并将云存储配置文件同步到云存储中的每一台服务器上;
向云存储中服务器提交DICOM文件进行存储;
所述向云存储中服务器提交DICOM文件进行存储的步骤具体包括:
接收客户端发送过来的DICOM文件到缓存中;
将DICOM文件映射到Hash空间的一个元素Key,通过云存储配置文件查找该Hash元素Key所在的服务器S;
再把该DICOM文件从缓存转发到计算出来的服务器S,将该DICOM文件存储在服务器S;
还包括对云存储中服务器进行扩展的步骤,对云存储中服务器进行扩展的步骤具体包括:
重新计算每台服务器的应分配的Hash元素个数Hi,假设第i台(i=0,1,2,…,N-1)服务器的磁盘容量为Di,Hash空间大小为M,计算公式为:
第i服务器当前已分配的Hash元素个数为Gi,如果Gi>Hi,那么这个服务器需要迁出Hash元素,迁出的Hash元素个数为Oi=Gi-Hi,否则就应该迁入Hash元素,迁入的Hash元素的个数为Pi=Gi-Hi;
根据上面计算所得每台服务器迁出或迁入Hash元素数量,生成Hash元素的迁移脚本;
Hash元素的迁移完成后,将最新的云存储配置文件及Hash元素的迁移脚本在云存储的各个服务器进行同步更新。
2.根据权利要求1所述一种医疗影像的云存储的实现方法,其特征在于,建立映射关系的步骤具体包括:
计算DICOM文件中数据元素Study Instance UID的CRC编码;
将得到的CRC编码对Hash空间的空间大小M取余,得到的结果就是映射到Hash空间的元素。
3.根据权利要求1所述一种医疗影像的云存储的实现方法,其特征在于,记录分配信息的文件至少包含信息:服务器序号、IP地址、磁盘容量和包含的Hash空间的元素。
4.根据权利要求1所述一种医疗影像的云存储的实现方法,其特征在于,还包括从云存储中服务器下载DICOM文件的步骤。
5.根据权利要求4所述一种医疗影像的云存储的实现方法,其特征在于,下载DICOM文件的步骤包括:
客户端发送DICOM文件下载请求,在下载请求信息中包含请求的DICOM文件的StudyInstance UID;
收到客户端请求的那台服务器S1,根据Study Instance UID映射到Hash空间的一个元素Key,通过云存储配置文件查找该Hash元素Key所在的服务器S2;
如果服务器S2就是服务器S1本身,那么直接将DICOM发送给客户端,否则,把服务器S2的信息发送给客户端,这样客户端再向S2服务器发送DICOM文件下载请求。
CN201310135779.3A 2013-04-18 2013-04-18 一种医疗影像的云存储的实现方法 Active CN104113566B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310135779.3A CN104113566B (zh) 2013-04-18 2013-04-18 一种医疗影像的云存储的实现方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310135779.3A CN104113566B (zh) 2013-04-18 2013-04-18 一种医疗影像的云存储的实现方法

Publications (2)

Publication Number Publication Date
CN104113566A CN104113566A (zh) 2014-10-22
CN104113566B true CN104113566B (zh) 2019-05-21

Family

ID=51710199

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310135779.3A Active CN104113566B (zh) 2013-04-18 2013-04-18 一种医疗影像的云存储的实现方法

Country Status (1)

Country Link
CN (1) CN104113566B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180218119A1 (en) * 2017-01-31 2018-08-02 Konica Minolta Healthcare Americas, Inc. Cloud-to-local, local-to-cloud switching and synchronization of medical images and data
CN113239096B (zh) * 2021-07-02 2022-06-24 浙江卡易智慧医疗科技有限公司 一种提升dicom影像云归档入库速度的方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101197754A (zh) * 2007-12-27 2008-06-11 腾讯科技(深圳)有限公司 分布式系统、分布式业务处理方法及相关装置
CN101504670A (zh) * 2009-03-04 2009-08-12 成都市华为赛门铁克科技有限公司 数据操作方法、系统、客户端和数据服务器
CN101867607A (zh) * 2010-05-21 2010-10-20 北京无限立通通讯技术有限责任公司 一种分布式数据存取方法、装置及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102955845B (zh) * 2012-10-23 2015-11-25 北京亿赞普网络技术有限公司 数据访问方法、装置与分布式数据库系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101197754A (zh) * 2007-12-27 2008-06-11 腾讯科技(深圳)有限公司 分布式系统、分布式业务处理方法及相关装置
CN101504670A (zh) * 2009-03-04 2009-08-12 成都市华为赛门铁克科技有限公司 数据操作方法、系统、客户端和数据服务器
CN101867607A (zh) * 2010-05-21 2010-10-20 北京无限立通通讯技术有限责任公司 一种分布式数据存取方法、装置及系统

Also Published As

Publication number Publication date
CN104113566A (zh) 2014-10-22

Similar Documents

Publication Publication Date Title
US10956601B2 (en) Fully managed account level blob data encryption in a distributed storage environment
US20220327103A1 (en) Using a Dispersed Index in a Storage Network
US9304858B2 (en) Analyzing found data in a distributed storage and task network
US10282440B2 (en) Prioritizing rebuilding of encoded data slices
US8683294B1 (en) Efficient encoding of homed data
US9465861B2 (en) Retrieving indexed data from a dispersed storage network
US8571882B1 (en) Peer to peer database
US8762353B2 (en) Elimination of duplicate objects in storage clusters
US20150142863A1 (en) System and methods for distributed data storage
US10402122B2 (en) Transferring encoded data slices in a dispersed storage network
US9547706B2 (en) Using colocation hints to facilitate accessing a distributed data storage system
CN104917843B (zh) 云存储与医疗图像无缝对接系统
US9146810B2 (en) Identifying a potentially compromised encoded data slice
US20180074903A1 (en) Processing access requests in a dispersed storage network
CN104902009B (zh) 一种基于可擦除编码和链式备份的分布式存储系统
US20140325260A1 (en) Slice migration in a dispersed storage network
CN106027638A (zh) 一种基于混合编码的hadoop数据分发方法
US9767139B1 (en) End-to-end data integrity in parallel storage systems
CN104113566B (zh) 一种医疗影像的云存储的实现方法
CN106940712A (zh) 序列生成方法与设备
CN104601687B (zh) 一种分发跨地域高效存储内容的方法及系统
US20130226867A1 (en) Apparatus and method for converting replication-based file into parity-based file in asymmetric clustering file system
CN108153759A (zh) 一种分布式数据库的数据传输方法、中间层服务器及系统
CN110457307A (zh) 元数据管理系统、用户集群创建方法、装置、设备和介质
Shin et al. Cache-based matrix technology for efficient write and recovery in erasure coding distributed file systems

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent for invention or patent application
CB02 Change of applicant information

Address after: Nanshan District Xueyuan Road in Shenzhen city of Guangdong province 518000 No. 1001 Nanshan Chi Park A3 building 6 floor

Applicant after: LANWON SCIENCE & TECHNOLOGY CO., LTD.

Address before: Futian District King Road Shenzhen city Guangdong province 518000 Green Garden Building Room 411

Applicant before: Shenzhen Landwind Network Co., Ltd.

COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: SHENZHEN LANDWIND NETWORK CO., LTD. TO: LANWANG TECHNOLOGY CO., LTD.

CB02 Change of applicant information

Address after: Nanshan District Xueyuan Road in Shenzhen city of Guangdong province 518000 No. 1001 Nanshan Chi Park A3 building 6 floor

Applicant after: LANWON TECHNOLOGY CO., LTD.

Address before: Nanshan District Xueyuan Road in Shenzhen city of Guangdong province 518000 No. 1001 Nanshan Chi Park A3 building 6 floor

Applicant before: LANWON SCIENCE & TECHNOLOGY CO., LTD.

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant