JP2010186284A - ファイル入出力方法 - Google Patents
ファイル入出力方法 Download PDFInfo
- Publication number
- JP2010186284A JP2010186284A JP2009029300A JP2009029300A JP2010186284A JP 2010186284 A JP2010186284 A JP 2010186284A JP 2009029300 A JP2009029300 A JP 2009029300A JP 2009029300 A JP2009029300 A JP 2009029300A JP 2010186284 A JP2010186284 A JP 2010186284A
- Authority
- JP
- Japan
- Prior art keywords
- input
- output
- processor
- computer
- file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/0643—Management of files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
【解決手段】 一つのファイル入出力要求を前記複数のストレージに対する入出力要求に分割する機能を備える計算機システムにおいて,計算機のプロセッサの構成情報と,分割格納されるファイルの構成情報を利用し,単一のファイルに対する単一の入出力要求に対して,所定の条件が満たされるか否かを判定した結果に基づいて、所定数の複数の入出力スレッドを生成,または,選択して,複数のストレージが保持する,単一ファイルの分割データに対して,前記複数の入出力スレッドがそれぞれ入出力する。
【選択図】 図1
Description
ステップ605において、「サブデータ数」を表す値が登録されていると判定された場合、入出力スレッド数決定処理は、ファイルのサブデータ数がプロセッサ数以上か否かを判定する(ステップ606)。
示省略)によって実行される。
102 LU(ディスク装置)
103 ストレージネットワーク
111 プロセッサ
112、1312 メモリ
113 インターフェース(I/F)
121 ファイルシステムプログラム
122、1322 マルチスレッド入出力プログラム
1304 CPUボード
1305 CPUボード間ネットワークI/F
1306 CPUボード内ネットワーク
1307 CPUボード間ネットワーク
Claims (17)
- 計算機と、前記計算機にネットワークを介して接続される複数のストレージ装置と、を備える計算機システムであって、
前記ストレージ装置は、前記計算機が利用する 一つのファイルのデータが分割された分割データを格納し、
前記計算機は、前記ネットワークに接続されるインターフェースと、前記インターフェースに接続されるプロセッサと、前記プロセッサに接続されるメモリと、を備え、
前記計算機は,
前記計算機は、
前記計算機のプロセッサの構成情報と,
前記分割格納されるファイルの構成情報を保持し,
ファイルに対する入出力要求に対して,前記複数のストレージ装置に対する入出力要求に分割し、
所定の条件が満たされるか否かを判定し、
判定結果に基づいて、前記分割された複数の入出力要求に所定数の複数の入出力スレッドを割り当て、
前記プロセッサは、前記複数のストレージが保持する,前記ファイルの分割データに対して,前記割り当てられた複数の入出力スレッドを用いてそれぞれ入出力することを特徴とする計算機システム。 - 前記計算機は、前記計算機が備えるプロセッサ数であるか否かに基づいて、前記所定の条件が満たされるか否かを判定することを特徴とする請求項1に記載の計算機システム。
- 前記計算機は、前記一つのファイルデータの分割数であるか否かに基づいて、前記所定の条件が満たされるか否かを判定することを特徴とする請求項1に記載の計算機システム。
- 前記計算機は、所定の方法により,前記複数の入出力スレッドを,動作させるプロセッサを決定することを特徴とする請求項2および3に記載の計算機システム。
- 前記計算機は、前記所定の方法が,プロセッサ番号を指定されているか否かに基づいて,前記複数の入出力スレッドを動作させるプロセッサとして決定する請求項4に記載の計算機システム。
- 前記計算機は、前記所定の方法が,複数のプロセッサに分散するように指定されているか否かに基づいて,前記複数の入出力スレッドを動作させるプロセッサとして決定する請求項4に記載の計算機システム。
- 計算機と、前記計算機にネットワークを介して接続される複数のストレージと、を備える計算機システムであって、
前記ストレージは、前記計算機が利用可能な一つのファイルのデータを、複数に分割し分割データとして格納し,
前記計算機は、前記ネットワークに接続されるインターフェースと、前記インターフェースに接続されるプロセッサと、前記プロセッサに接続されるメモリとを備える複数のプロセッサユニットと、
前記プロセッサユニット間を接続するプロセッサユニット間ネットワークと,
前記プロセッサユニット間ネットワークと,前記プロセッサユニットを接続するプロセッサユニット間インターフェースと,を備え,
前記計算機のプロセッサの構成情報と,
前記分割格納されるファイルの構成情報と
前記各々のプロセッサユニットに接続するストレージの情報を保持し,
ファイルに対する入出力要求を複数の入出力要求に分割する場合、所定の条件が満たされるか否かを判定し、
判定結果、所定の条件が満たされる場合は、所定数の複数の入出力スレッド及びプロセッサユニットを前記分割された複数の入出力要求に割り当て,
前記複数のストレージが保持する,前記単一ファイルの分割データに対して,前記複数の入出力スレッドを用いてそれぞれ入出力することを特徴とする計算機システム。 - 前記計算機は、前記計算機が備えるプロセッサ数であるか否かに基づいて、前記所定の条件が満たされるか否かを判定することを特徴とする請求項7に記載の計算機システム。
- 前記計算機は、前記一つのファイルデータの分割数であるか否かに基づいて、前記所定の条件が満たされるか否かを判定することを特徴とする請求項7に記載の計算機システム。
- 前記計算機は、前記計算機のメモリ構成が,前記計算機の備えるプロセッサからメモリへのアクセス経路が、プロセッサユニット間ネットワークを介するか否かに基づいて、前記所定の条件が満たされるか否かを判定することを特徴とする請求項7に記載の計算機システム。
- 前記計算機は、所定の方法により,前記複数の入出力スレッドを,動作させるプロセッサを決定することを特徴とする請求項8に記載の計算機システム。
- 前記計算機は、前記所定の方法が,前記プロセッサユニットの構成に基づいて,前記複数の入出力スレッドを動作させるプロセッサとして決定する請求項11に記載の計算機システム。
- 前記計算機は,
前記単一のファイルのデータを格納するためのメモリの割り当て要求に対して,
前記単一ファイルの分割データの分割数に応じた数のメモリ領域を割り当て,
前記メモリ領域を,
前記各分割データを格納するストレージが接続されるプロセッサユニットに割り当て, 前記各分割データと前記各割り当てたメモリ領域の対応情報を保持して,
前記複数の入出力スレッドがそれぞれ入出力する場合に,
前記分割データを対応するメモリ領域を使うことを特徴とする請求項7に記載の計算機システム。 - 前記計算機は、前記計算機のメモリ構成が,前記計算機の備えるプロセッサからメモリへのアクセス経路がプロセッサユニット間ネットワークを介するか否かに基づいて、前記所定の条件が満たされるか否かを判定することを特徴とする請求項13に記載の計算機システム。
- 計算機と、前記計算機にネットワークを介して接続される複数のストレージと、を備える計算機システムを制御する方法であって、
前記ストレージは、計算機が利用可能なファイルのデータが、複数に分割された分割データいずれか一の分割データを格納し,
前記計算機は、前記ネットワークに接続されるインターフェースと、前記インターフェースに接続されるプロセッサと、前記プロセッサに接続されるメモリと、を備え、
前記方法は、
前記計算機のプロセッサの構成情報と,
前記分割格納されるファイルの構成情報を保持し,
ファイルに対する入出力要求を複数のストレージに入出力要求に分割する場合、所定の条件が満たされるか否かを判断し、
前記判定した結果に基づいて、
所定数の複数の入出力スレッドを一以上のプロセッサに割当てる第1手順と,
前記複数のストレージが保持する,前記単一ファイルの分割データに対して,前記複数の入出力スレッドがそれぞれ入出力する第2手順と,を含むことを特徴とする方法。 - 計算機と、前記計算機にネットワークを介して接続される複数のストレージと、を備える計算機システムを制御する方法であって、
前記計算機は、前記ネットワークに接続されるインターフェースと、前記インターフェースに接続されるプロセッサと、前記プロセッサに接続されるメモリと、を備え、
前記計算機は,前記プロセッサと前記メモリと前記インターフェースとを有する複数のプロセッサユニットと複数のプロセッサユニットを接続するプロセッサユニット間ネットワークと,前記プロセッサユニット間ネットワークと,プロセッサユニットを接続するプロセッサユニット間インターフェースと,を備え,
前記方法は,
前記計算機のプロセッサの構成情報と,前記分割格納されるファイルの構成情報と
前記各々のプロセッサユニットに接続するストレージの情報を保持し,
一つのファイルのデータを、前記複数のストレージに分割して格納し,
単一のファイルに対する単一の入出力要求に対して,
一つのファイル入出力要求を前記複数のストレージに対する入出力要求に分割する場合、所定の条件が満たされるか否かを判定し、前記判定結果所定の条件が満たされている場合は、所定数の複数の入出力スレッドを生成,または,選択する第1手順と,
前記複数のストレージが保持する,前記単一ファイルの分割データに対して,前記複数の入出力スレッドがそれぞれ入出力する弟2手順と,を含むことを特徴とする計算機システム。 - 前記方法は,
前記単一のファイルのデータを格納するためのメモリの割り当て要求に対して,
前記単一ファイルの分割データの分割数に応じた数のメモリ領域を割り当て,
前記メモリ領域を,
前記各分割データを格納するストレージが接続されるプロセッサユニットに割り当て, 前記各分割データと前記各割り当てたメモリ領域の対応情報を保持して,
前記複数の入出力スレッドがそれぞれ入出力する場合に,
前記分割データを対応するメモリ領域を使う弟3手順と,を含むことを特徴とする請求項16に記載の計算機システム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009029300A JP5241550B2 (ja) | 2009-02-12 | 2009-02-12 | ファイル入出力方法 |
US12/538,546 US20100205329A1 (en) | 2009-02-12 | 2009-08-10 | File input/output method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009029300A JP5241550B2 (ja) | 2009-02-12 | 2009-02-12 | ファイル入出力方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010186284A true JP2010186284A (ja) | 2010-08-26 |
JP5241550B2 JP5241550B2 (ja) | 2013-07-17 |
Family
ID=42541301
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009029300A Expired - Fee Related JP5241550B2 (ja) | 2009-02-12 | 2009-02-12 | ファイル入出力方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20100205329A1 (ja) |
JP (1) | JP5241550B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8843677B2 (en) | 2012-06-27 | 2014-09-23 | International Business Machines Corporation | Optimizing an operating system I/O operation that pertains to a specific program and file |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102312632B1 (ko) * | 2014-06-11 | 2021-10-15 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 파일 저장 방법 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03171249A (ja) * | 1989-11-30 | 1991-07-24 | Nec Corp | プロセッサ数制限方式 |
JPH05204875A (ja) * | 1992-01-27 | 1993-08-13 | Mitsubishi Electric Corp | スレッドのスケジュール方式 |
JPH07248949A (ja) * | 1994-03-10 | 1995-09-26 | Hitachi Ltd | 入出力実行方法 |
JP2004139379A (ja) * | 2002-10-18 | 2004-05-13 | Jmnet Inc | ネットワーク型記憶装置及びその制御装置 |
JP2004265110A (ja) * | 2003-02-28 | 2004-09-24 | Hitachi Ltd | メタデータ配置方法、プログラムおよびディスク装置 |
JP2004295692A (ja) * | 2003-03-27 | 2004-10-21 | Sanyo Electric Co Ltd | データ入出力方法、およびその方法を利用可能な記憶装置およびホスト装置 |
JP2005293594A (ja) * | 2004-04-02 | 2005-10-20 | Seagate Technology Llc | 管理された信頼性記憶システムと方法 |
JP2006024180A (ja) * | 2004-06-10 | 2006-01-26 | Hitachi Ltd | 計算機システム及びその資源割当て方法 |
JP2007122167A (ja) * | 2005-10-25 | 2007-05-17 | Fujitsu Ltd | データ転送プログラム、データ転送方法およびデータ転送装置 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US2008A (en) * | 1841-03-18 | Gas-lamp eok conducting gas pkom ah elevated buhner to one below it | ||
US2004A (en) * | 1841-03-12 | Improvement in the manner of constructing and propelling steam-vessels | ||
US6219693B1 (en) * | 1997-11-04 | 2001-04-17 | Adaptec, Inc. | File array storage architecture having file system distributed across a data processing platform |
US6295571B1 (en) * | 1999-03-19 | 2001-09-25 | Times N Systems, Inc. | Shared memory apparatus and method for multiprocessor systems |
EP1317711A1 (en) * | 2000-08-11 | 2003-06-11 | 3Ware, Inc. | Architecture for providing block-level storage access over a computer network |
US20040158663A1 (en) * | 2000-12-21 | 2004-08-12 | Nir Peleg | Interconnect topology for a scalable distributed computer system |
JP4606142B2 (ja) * | 2004-12-01 | 2011-01-05 | 株式会社ソニー・コンピュータエンタテインメント | スケジューリング方法、スケジューリング装置およびマルチプロセッサシステム |
US7870317B2 (en) * | 2005-04-29 | 2011-01-11 | Network Appliance, Inc. | Storage processor for handling disparate requests to transmit in a storage appliance |
US7761687B2 (en) * | 2007-06-26 | 2010-07-20 | International Business Machines Corporation | Ultrascalable petaflop parallel supercomputer |
US7836226B2 (en) * | 2007-12-06 | 2010-11-16 | Fusion-Io, Inc. | Apparatus, system, and method for coordinating storage requests in a multi-processor/multi-thread environment |
-
2009
- 2009-02-12 JP JP2009029300A patent/JP5241550B2/ja not_active Expired - Fee Related
- 2009-08-10 US US12/538,546 patent/US20100205329A1/en not_active Abandoned
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03171249A (ja) * | 1989-11-30 | 1991-07-24 | Nec Corp | プロセッサ数制限方式 |
JPH05204875A (ja) * | 1992-01-27 | 1993-08-13 | Mitsubishi Electric Corp | スレッドのスケジュール方式 |
JPH07248949A (ja) * | 1994-03-10 | 1995-09-26 | Hitachi Ltd | 入出力実行方法 |
JP2004139379A (ja) * | 2002-10-18 | 2004-05-13 | Jmnet Inc | ネットワーク型記憶装置及びその制御装置 |
JP2004265110A (ja) * | 2003-02-28 | 2004-09-24 | Hitachi Ltd | メタデータ配置方法、プログラムおよびディスク装置 |
JP2004295692A (ja) * | 2003-03-27 | 2004-10-21 | Sanyo Electric Co Ltd | データ入出力方法、およびその方法を利用可能な記憶装置およびホスト装置 |
JP2005293594A (ja) * | 2004-04-02 | 2005-10-20 | Seagate Technology Llc | 管理された信頼性記憶システムと方法 |
JP2006024180A (ja) * | 2004-06-10 | 2006-01-26 | Hitachi Ltd | 計算機システム及びその資源割当て方法 |
JP2007122167A (ja) * | 2005-10-25 | 2007-05-17 | Fujitsu Ltd | データ転送プログラム、データ転送方法およびデータ転送装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8843677B2 (en) | 2012-06-27 | 2014-09-23 | International Business Machines Corporation | Optimizing an operating system I/O operation that pertains to a specific program and file |
US8843676B2 (en) | 2012-06-27 | 2014-09-23 | International Business Machines Corporation | Optimizing an operating system I/O operation that pertains to a specific program and file |
Also Published As
Publication number | Publication date |
---|---|
US20100205329A1 (en) | 2010-08-12 |
JP5241550B2 (ja) | 2013-07-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8135921B2 (en) | Automated paging device management in a shared memory partition data processing system | |
JP6231207B2 (ja) | リソースの負荷バランシング | |
JP4235220B2 (ja) | 計算機システムおよびデータ移行方法 | |
US9229656B1 (en) | Managing settings and queries in host-based data migration | |
JP4884198B2 (ja) | ストレージネットワークの性能管理方法、並びに、その方法を用いた計算機システム及び管理計算機 | |
JP4921054B2 (ja) | 負荷分散制御システム及び負荷分散制御方法 | |
US9256382B2 (en) | Interface for management of data movement in a thin provisioned storage system | |
JP4464378B2 (ja) | 同一データを纏める事で格納領域を節約する計算機システム、ストレージシステム及びそれらの制御方法 | |
KR20200017363A (ko) | 호스트 스토리지 서비스들을 제공하기 위한 NVMe 프로토콜에 근거하는 하나 이상의 호스트들과 솔리드 스테이트 드라이브(SSD)들 간의 관리되는 스위칭 | |
US20080294698A1 (en) | Foresight data transfer type hierachical storage system | |
JP5416860B2 (ja) | 計算機システムおよびその制御方法 | |
WO2014108933A1 (en) | Resource management system and resource management method of a computer system | |
Costa et al. | The case for workflow-aware storage: An opportunity study | |
JP2009053921A (ja) | ストレージシステム、計算機及び計算機システム | |
US10826848B2 (en) | Balanced, opportunistic multicore I/O scheduling from non-SMP applications | |
US10817205B2 (en) | Computer system and storage device | |
WO2018158808A1 (ja) | 情報システム、管理プログラム及び情報システムのプログラム交換方法 | |
JP2009512948A (ja) | ストレージサーバにおけるスループットを増加させる方法および装置 | |
JP2008102672A (ja) | 計算機システム、管理計算機、操作制御情報の設定方法 | |
JP2007233834A (ja) | I/oコマンドをキューイングするストレージシステム及びその制御方法 | |
JP5241550B2 (ja) | ファイル入出力方法 | |
US20150277765A1 (en) | Storage subsystem and method for controlling the storage subsystem | |
JP2012079245A (ja) | 仮想計算機のボリューム割当て方法およびその方法を用いた計算機システム | |
Zou et al. | DirectNVM: Hardware-accelerated NVMe SSDs for high-performance embedded computing | |
Chang et al. | The performance analysis of cache architecture based on Alluxio over virtualized infrastructure |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20111221 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120928 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121023 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121220 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130305 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130402 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160412 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5241550 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160412 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |