JP4131862B2 - 3.5インチ定形型ディスク形状を持ったデータトランスミッション装置 - Google Patents
3.5インチ定形型ディスク形状を持ったデータトランスミッション装置 Download PDFInfo
- Publication number
- JP4131862B2 JP4131862B2 JP2004195981A JP2004195981A JP4131862B2 JP 4131862 B2 JP4131862 B2 JP 4131862B2 JP 2004195981 A JP2004195981 A JP 2004195981A JP 2004195981 A JP2004195981 A JP 2004195981A JP 4131862 B2 JP4131862 B2 JP 4131862B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- hard disk
- memory
- cache table
- fpga
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 230000005540 biological transmission Effects 0.000 title claims description 42
- 238000005070 sampling Methods 0.000 claims description 14
- 238000012546 transfer Methods 0.000 claims description 6
- 238000012545 processing Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 9
- 239000004065 semiconductor Substances 0.000 description 8
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 5
- 230000015556 catabolic process Effects 0.000 description 5
- 238000006731 degradation reaction Methods 0.000 description 5
- 238000000034 method Methods 0.000 description 5
- 229910052710 silicon Inorganic materials 0.000 description 5
- 239000010703 silicon Substances 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/065—Replication mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
- G06F3/0611—Improving I/O performance in relation to response time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0673—Single storage device
- G06F3/0674—Disk device
- G06F3/0676—Magnetic disk device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0656—Data buffering arrangements
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Memory System Of A Hierarchy Structure (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Techniques For Improving Reliability Of Storages (AREA)
Description
(1)汎用ハードディスクにあらかじめ頻度の高いデータをそのデータのハードディスクキャッシュ領域として常駐させる、即ち、その運用におけるデータのサイズ、頻度、およびリアルタイムな運用性を自動学習するキャッシュプログラムを介して事前に必要なデータをそのメモリーキャッシュテーブル内に常駐させることで、高速なCPUは、その処理に必要なデータ領域として外部記憶装置のアクセス頻度の高いデータを常にローカルメモリー内のキャッシュ領域のメモリー内に効果的に置く事が出来る。
(2)データトランスミッション装置1を通過検索されるデータのブロックアドレスを特定のロー・カラムグラフ上にプロットし、単位時間当たりのアクセスされるデータのブロックアドレス値、アクセスの頻度(回数)を検出する(図5の上のグラフ参照)。
(3)このデータを基に自己学習キャッシュ運用テーブルを作成してゆく(図5の下のグラフ参照)。
(5)その都度データは、バックアップストレージとして機能する2.5インチハードディスク5に格納されてゆく。このときのデータ書き込みは、バックグラウンド処理にて行う。
以上のようなメモリーキャッシュテーブル4の動作はメモリー管理モジュールソフトウエアにより行われ、基本的なキャッシュパラメターは、工場出荷時に設定、組み込みされている。
本発明に係るデータトランスミッション装置1(図2中では「DTS」と記載)の、適用例を図2(a)、(b)で説明する。図2(a)は、外部コンピュータ2として、通常の汎用コンピュータ10に接続した適用例を示す。この接続は、汎用コンピュータ10にデータトランスミッション装置1を装着し内蔵してもよいし、外部接続でもよい。
(b)接続するコンピュータのOS及びアプリケーションソフトウエアに依存されない。
(c)通常のディスクケースに装着することが出来るため、運用中の取り外しが可能となり、メインテナンスが容易である。
(d)前段に他のRAIDコントローラを用意してハードウエアRAID構成が可能である。
(e)既存のストレージシステム(RAID装置、JBOD装置)に組み込みが容易に行える。
2 外部コンピュータ
3 インタフェース
4 メモリーキャッシュテーブル
5 定形型2.5インチハードディク
6 FPGA
7 コントロールCPU
8 データバス9
9 ローカルメモリー
10 汎用コンピュータ
11 ホストコンピュータ
12 RAIDコントローラ
Claims (2)
- ドライバソフトを搭載したローカルメモリと、DRAMメモリーからなるメモリーキャッシュテーブルと、定形型2.5インチハードディスクと、前記メモリーキャッシュテーブルのメモリを制御するFPGA又はASICと、前記ドライバに従って動作され、前記FPGA又はASICディスクを制御するコントロールCPUと、前記ディスクインターフェースと、バックアップ用電池とを備え、
前記ローカルメモリ、メモリーキャッシュテーブル、定形型2.5インチハードディスク、コントロールCPU、FPGA又はASIC、ディスクインターフェース及びバックアップ用電池が、外形が3.5インチサイズの定形型のハードディスクと同じ形状にユニット化されており、前記ディスクインターフェースを外部コンピュータに接続されて使用されるデータトランスミッション装置において、
前記FPGA又はASICは、前記ドライバソフトにより前記コントロールCPUに制御されて、接続された外部コンピュータからアクセスされるデータの単位時間当たりのアクセス頻度をサンプリングし、該サンプリング結果に基づいて、そのデータの重要度を自動学習に基づき認識し、
前記メモリーキャッシュテーブルは、アクセス頻度の高く、重要度の高いと認識されたデータは保存し、
前記FPGA又はASICは、前記データを前記メモリーキャッシュテーブルに書き込むとともに、前記データを前記2.5インチハードディスクに転送し書き込む構成であることを特徴とするデータトランスミッション装置。 - ドライバソフトを搭載したローカルメモリと、DRAMメモリーからなるメモリーキャッシュテーブルと、定形型2.5インチハードディスクと、前記メモリーキャッシュテーブルのメモリを制御するFPGA又はASICと、前記ドライバに従って動作され、前記FPGA又はASICディスクを制御するコントロールCPUと、前記ディスクインターフェースと、バックアップ用電池とを備え、
前記ローカルメモリ、メモリーキャッシュテーブル、定形型2.5インチハードディスク、コントロールCPU、FPGA又はASIC、ディスクインターフェース及びバックアップ用電池が、外形が3.5インチサイズの定形型のハードディスクと同じ形状にユニット化されており、前記ディスクインターフェースを外部コンピュータに接続されて使用されるデータトランスミッション装置において、
前記FPGA又はASICは、前記ドライバソフトにより前記コントロールCPUに制御されて、接続された外部コンピュータからアクセスされるデータの単位時間当たりのアクセス頻度をサンプリングし、該サンプリング結果に基づいて、そのデータの重要度を自動学習に基づき認識し、
前記メモリーキャッシュテーブルは、アクセス頻度の高く、重要度の高いと認識されたデータは保存し、
前記FPGA又はASICは、前記データを前記メモリーキャッシュテーブルに書き込み、書き込んでから所定時間再度の書き込みがない場合に前記データを前記2.5インチハードディスクに転送し書き込む構成であることを特徴とするデータトランスミッション装置。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004195981A JP4131862B2 (ja) | 2004-07-01 | 2004-07-01 | 3.5インチ定形型ディスク形状を持ったデータトランスミッション装置 |
US11/084,894 US7340563B2 (en) | 2004-07-01 | 2005-03-21 | Data transmission device having the shape of a standard 3.5″ disk |
EP05011838A EP1612656A3 (en) | 2004-07-01 | 2005-06-01 | Data transmission device having the shape of a standard 3.5" disk |
CNB2005100805919A CN100357872C (zh) | 2004-07-01 | 2005-06-30 | 具有3.5英寸标准型磁盘形状的数据传送装置 |
HK06104491A HK1084204A1 (en) | 2004-07-01 | 2006-04-12 | Data transmission device having the shape of a standard 3.5" disk |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004195981A JP4131862B2 (ja) | 2004-07-01 | 2004-07-01 | 3.5インチ定形型ディスク形状を持ったデータトランスミッション装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006018602A JP2006018602A (ja) | 2006-01-19 |
JP4131862B2 true JP4131862B2 (ja) | 2008-08-13 |
Family
ID=35079132
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004195981A Expired - Lifetime JP4131862B2 (ja) | 2004-07-01 | 2004-07-01 | 3.5インチ定形型ディスク形状を持ったデータトランスミッション装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US7340563B2 (ja) |
EP (1) | EP1612656A3 (ja) |
JP (1) | JP4131862B2 (ja) |
CN (1) | CN100357872C (ja) |
HK (1) | HK1084204A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8429346B1 (en) * | 2009-12-28 | 2013-04-23 | Emc Corporation | Automated data relocation among storage tiers based on storage load |
CN102110034A (zh) * | 2009-12-28 | 2011-06-29 | 北京安码科技有限公司 | 一种结合电池和dram的硬盘存储方法及装置 |
JP5971057B2 (ja) * | 2012-09-27 | 2016-08-17 | 富士通株式会社 | ストレージ装置、設定方法および設定プログラム |
CN104298620A (zh) * | 2014-10-10 | 2015-01-21 | 张维加 | 一种耐擦写低能耗的外接计算机加速设备 |
CN105045338B (zh) * | 2015-06-30 | 2018-05-29 | 西安理工大学 | 一种多外设低能耗计算机架构及控制方法 |
US11481134B1 (en) * | 2021-05-24 | 2022-10-25 | Sap Se | Adaptive caching for hybrid columnar databases with heterogeneous page sizes |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5065262A (en) * | 1988-11-30 | 1991-11-12 | Quantum Corporation | Removable and transportable hard disk subsystem |
JPH05120136A (ja) * | 1991-10-25 | 1993-05-18 | Toshiba Corp | デイスクキヤツシユ装置 |
US5465343A (en) | 1993-04-30 | 1995-11-07 | Quantum Corporation | Shared memory array for data block and control program storage in disk drive |
JPH0883148A (ja) * | 1994-09-13 | 1996-03-26 | Nec Corp | 磁気ディスク装置 |
US6134630A (en) * | 1997-11-14 | 2000-10-17 | 3Ware | High-performance bus architecture for disk array system |
US6098153A (en) * | 1998-01-30 | 2000-08-01 | International Business Machines Corporation | Method and a system for determining an appropriate amount of data to cache |
JP3522527B2 (ja) * | 1998-03-27 | 2004-04-26 | 富士通株式会社 | 入出力制御装置および入出力制御方法 |
JP3214444B2 (ja) | 1998-05-19 | 2001-10-02 | 日本電気株式会社 | 磁気ディスク装置の制御方法と制御装置 |
JP3335919B2 (ja) | 1998-07-28 | 2002-10-21 | 茨城日本電気株式会社 | ディスクキャッシュ制御装置 |
TW576966B (en) * | 2000-06-23 | 2004-02-21 | Intel Corp | Non-volatile cache integrated with mass storage device |
US6725342B1 (en) * | 2000-09-26 | 2004-04-20 | Intel Corporation | Non-volatile mass storage cache coherency apparatus |
JP2002304325A (ja) | 2001-04-05 | 2002-10-18 | E-Storage Networks Inc | ダイレクトメモリ接続型サーバーコンピュータ |
FR2834355B1 (fr) * | 2001-12-31 | 2004-01-30 | Kevin Saleh | Lecteur de disque dur 2,5 pouces amovible |
JP2003228462A (ja) * | 2002-02-04 | 2003-08-15 | E-Storage Networks Inc | Sanキャッシュ装置 |
US6868439B2 (en) * | 2002-04-04 | 2005-03-15 | Hewlett-Packard Development Company, L.P. | System and method for supervising use of shared storage by multiple caching servers physically connected through a switching router to said shared storage via a robust high speed connection |
JP2004030102A (ja) * | 2002-06-25 | 2004-01-29 | Sony Corp | 情報記憶装置、およびメモリアクセス制御システム、および方法、並びにコンピュータ・プログラム |
JP2004110376A (ja) * | 2002-09-18 | 2004-04-08 | E-Storage Networks Inc | システムバス直結型メモリーコントローラ及びチップ |
JP4311637B2 (ja) * | 2003-10-30 | 2009-08-12 | 株式会社日立製作所 | 記憶制御装置 |
US7130962B2 (en) * | 2003-12-18 | 2006-10-31 | Intel Corporation | Writing cache lines on a disk drive |
US20050144396A1 (en) * | 2003-12-31 | 2005-06-30 | Eschmann Michael K. | Coalescing disk write back requests |
JP2005301419A (ja) * | 2004-04-07 | 2005-10-27 | Hitachi Ltd | ディスクアレイ装置およびそのデータ処理方法 |
US7231497B2 (en) * | 2004-06-15 | 2007-06-12 | Intel Corporation | Merging write-back and write-through cache policies |
-
2004
- 2004-07-01 JP JP2004195981A patent/JP4131862B2/ja not_active Expired - Lifetime
-
2005
- 2005-03-21 US US11/084,894 patent/US7340563B2/en not_active Expired - Fee Related
- 2005-06-01 EP EP05011838A patent/EP1612656A3/en not_active Withdrawn
- 2005-06-30 CN CNB2005100805919A patent/CN100357872C/zh not_active Expired - Fee Related
-
2006
- 2006-04-12 HK HK06104491A patent/HK1084204A1/xx not_active IP Right Cessation
Also Published As
Publication number | Publication date |
---|---|
EP1612656A2 (en) | 2006-01-04 |
CN1716176A (zh) | 2006-01-04 |
HK1084204A1 (en) | 2006-07-21 |
JP2006018602A (ja) | 2006-01-19 |
EP1612656A3 (en) | 2007-04-04 |
US7340563B2 (en) | 2008-03-04 |
CN100357872C (zh) | 2007-12-26 |
US20060004958A1 (en) | 2006-01-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7886114B2 (en) | Storage controller for cache slot management | |
US6848034B2 (en) | Dense server environment that shares an IDE drive | |
US9201795B2 (en) | Dynamic hierarchical memory cache awareness within a storage system | |
US9785561B2 (en) | Integrating a flash cache into large storage systems | |
JP2003256144A5 (ja) | ||
US9182912B2 (en) | Method to allow storage cache acceleration when the slow tier is on independent controller | |
US7350022B2 (en) | Storage system and storage control method with a password for device management | |
WO2017148242A1 (zh) | 一种访问叠瓦式磁记录smr硬盘的方法及服务器 | |
JP6417951B2 (ja) | ストレージ制御装置およびストレージ制御プログラム | |
US7340563B2 (en) | Data transmission device having the shape of a standard 3.5″ disk | |
JP7160792B2 (ja) | キャッシュエントリ転送のためにキャッシュ位置情報を記憶するシステム及び方法 | |
US8036076B2 (en) | Method of reducing storage power consumption by use of prefetch and computer system using the same | |
US20180046639A1 (en) | Methods and systems for data storage | |
US7263468B2 (en) | Method for storing access record in network communication device | |
CN100518061C (zh) | 写一次读多次磁盘存储系统和设计方法 | |
US6973537B1 (en) | Disk cache interfacing system and method | |
JP7202030B2 (ja) | 記憶装置内の悪意のある動作を検出するためのモジュールおよび方法 | |
JP2003228462A (ja) | Sanキャッシュ装置 | |
JP3112203U (ja) | ストレージ専用ディスク装置 | |
US20090327453A1 (en) | Method for improving data reading speed of a diskless computer | |
NZ778067B2 (en) | Module and method for detecting malicious activities in a storage device | |
JPH08185272A (ja) | ディスクキャッシュをもつ磁気ディスク装置 | |
JPH11110270A (ja) | ファイル管理システム及びファイル管理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080122 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080325 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080424 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080527 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080528 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110606 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4131862 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140606 Year of fee payment: 6 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |