JP4313845B2 - マルチインスタンス・インメモリ・データベース - Google Patents
マルチインスタンス・インメモリ・データベース Download PDFInfo
- Publication number
- JP4313845B2 JP4313845B2 JP2004308853A JP2004308853A JP4313845B2 JP 4313845 B2 JP4313845 B2 JP 4313845B2 JP 2004308853 A JP2004308853 A JP 2004308853A JP 2004308853 A JP2004308853 A JP 2004308853A JP 4313845 B2 JP4313845 B2 JP 4313845B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- storage device
- data set
- location information
- data storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000003860 storage Methods 0.000 claims description 94
- 238000013500 data storage Methods 0.000 claims description 91
- 238000012545 processing Methods 0.000 claims description 25
- 238000007726 management method Methods 0.000 claims description 24
- 238000006243 chemical reaction Methods 0.000 claims description 22
- 230000006870 function Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 12
- 239000004065 semiconductor Substances 0.000 description 9
- 239000000047 product Substances 0.000 description 8
- 238000011161 development Methods 0.000 description 4
- 230000033228 biological regulation Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 3
- 230000008676 import Effects 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 230000007423 decrease Effects 0.000 description 2
- 239000000383 hazardous chemical Substances 0.000 description 2
- 238000005304 joining Methods 0.000 description 2
- 230000014759 maintenance of location Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000000034 method Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000013341 scale-up Methods 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004587 chromatography analysis Methods 0.000 description 1
- 239000013065 commercial product Substances 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000009776 industrial production Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
図1は、請求項1に基づく本発明の概念を示す。
データ入力装置101、
データ格納部特定装置102、
データ格納装置103、104、105、
データ検索加工装置106、
データ出力装置107が、
本発明に係わるマルチインスタンス・インメモリ・データベースの構成要素である。
データ・セット識別記号変換部121、
データ・セット識別記号ロケーション情報変換部122は、
前記マルチインスタンス・インメモリ・データベースの構成要素の一部であるデータ格納部特定装置102の構成要素である。
データ格納部131、141、151、
リソース・マネジメント部132、142、152、
チェックアウト・データ待避スペース133、143、153、154は、
前記マルチインスタンス・インメモリ・データベースの構成要素の一部であるデータ格納装置103、104,105の構成要素である。
データ検索部161、
データ加工部162、
ワークスペース部163、
リソース・マネジメント部164は、
前記マルチインスタンス・インメモリ・データベースの構成要素の一部であるデータ検索加工装置106の構成要素である。
識別記号欄201は、ロケーション情報欄211と、
識別記号欄202は、ロケーション情報欄212と、
識別記号欄203は、ロケーション情報欄213と、
識別記号欄204は、ロケーション情報欄214と、
識別記号欄205は、ロケーション情報欄215と、
識別記号欄206は、ロケーション情報欄216と、
識別記号欄207は、ロケーション情報欄217と、
は対応付けられている。
したがって、識別記号欄201に在る識別記号1のデータセットは、ロケーション情報欄211にあるロケーション情報192.168.1.11で示されるネットワーク上の電子計算機上にデータ格納装置を持つことを意味している。他の識別記号欄202、203、204、205、206、207にある識別記号も他のロケーション情報欄212、213、214、215、216、217にあるロケーション情報と対応付けられる。複数の識別記号が同一のロケーション情報を持っていてもよい。前記複数の識別記号が同一のロケーション情報を持っている場合、請求項1に示すように前記データ格納装置の構成要素であるリソース・マネジメント部によって、データ・セットのチェックインないしチェックアウトが行われる。ただし、請求項3に示されるように、現在、前記データ格納部に格納中のデータセットをチェックアウトを要せずに、アクセス要求のあった別のデータセットをチェックインできる場合にはこの限りではない。
この図2の例を図1に適用してみると、103のデータ格納装置Aのロケーション情報を「192.168.1.11」、104のデータ格納装置Bのロケーション情報を「192.168.1.12」、105のデータ格納装置Cのロケーション情報を「192.168.1.13」としてもよい。
Claims (5)
- ネットワーク上に配置され、
外部からのデータを入力するための一個以上のデータ入力装置と、
前記入力されたデータの格納先を特定する一個以上のデータ格納部特定装置と、
前記入力されたデータを主記憶装置上に格納する一個以上のデータ格納装置と、
前記格納されたデータを検索加工する一個以上のデータ検索加工装置と、
前記検索加工されたデータを外部へ出力するための一個以上のデータ出力装置と、
を備える分散データベースを構成するマルチインスタンス・インメモリ・データベース・システムであって、
前記データ格納部特定装置は、
前記入力されたデータの一部ないし全部の情報を、前記入力されたデータの格納先であるデータ・セットを特定するためのデータ・セット識別記号に、ハッシング等のアルゴリズムを特定のパラメータで用いて、変換する前記入力されたデータのデータ・セット識別記号変換部と、
前記識別記号に対応する前記データ・セットのロケーションを特定するデータ・セット・ロケーション情報と前記データ・セット識別記号とを対応付けする前記データ・セットのデータ・セット識別記号ロケーション情報変換部と、
を有し、
前記データ格納装置は、
前記データ格納部ロケーション情報によって特定された前記データ格納装置において、当該データ格納装置上の主記憶装置上に存在するデータ・セットに前記入力されたデータを格納するデータ格納部と、
当該データ格納装置上の主記憶装置上に存在する前記データ・セットと同一の前記データ・セット・ロケーション情報を有し、前記データ格納装置に接続されている二次記憶装置上ないしネットワーク上の他の電子計算機上の主記憶装置上若しくは二次記憶装置上に一時的に待避させられている別のデータ・セットに挿入ないし抽出等のアクセス要求が発生した場合、前記当該データ格納装置上の主記憶装置上に存在する前記データ・セットを、前記データ格納装置に接続されている二次記憶装置上ないしネットワーク上の他の電子計算機上の主記憶装置上若しくは二次記憶装置上に一時的に待避させ、前記データ格納装置に接続された二次記憶装置上ないしネットワーク上の他の電子計算機上の主記憶装置上若しくは二次記憶装置上に一時的に待避されている前記アクセス要求が発生しているデータ・セットを召還するリソース・マネジメント部と、
を有し、
前記データ検索加工装置は、
前記アルゴリズムと同一のアルゴリズムを同一のパラメータで用いて、検索対象となる前記データ・セットを特定しながら、一個以上の前記データ格納装置上の一個以上のデータ・セットを横断的に検索するデータ検索部と、
前記データ検索部によって特定され抽出されたデータを、前記アルゴリズムと同一のアルゴリズムを同一のパラメータで用いて、加工対象となる前記データ・セットを特定しながら、変更ないし削除、若しくは一個以上の前記データ・セットに跨るデータ群のジョインないしプロジェクションないしソートないしマージ等のデータ加工を横断的におこなうデータ加工部と、
前記データ検索部ないし前記データ加工部の処理に供される主記憶空間であるワークスペース部と、
前記データ格納部および前記データ検索部および前記データ加工部および前記ワークスペース部に供される主記憶空間のリソースが不足した際、ハードディスク装置等の二次記憶装置やネットワーク上の他の電子計算機上の主記憶装置や二次記憶装置のリソースを利用することによってリソース・マネジメントをおこなうリソース・マネジメント部と、
を有する、
マルチインスタンス・インメモリ・データベース・システム。 - 前記データ格納部特定装置は、前記データ・セットのデータ・セット識別記号ロケーション情報変換部のロケーション情報を変更する機能を有し、前記データ格納装置の主記憶装置容量と格納データ・セットの大きさの関係を最適化して再配置することが可能な請求項1に記載のマルチインスタンス・インメモリ・データベース・システム。
- 前記データ格納装置は、前記現在当該データ格納装置上の主記憶装置上に格納されている前記データ・セットと同一のロケーション情報を持つ別のデータ・セットを新たに作成しようとしている時、若しくは現在前記データ格納装置に接続された二次記憶装置上ないし ネットワーク上の他の電子計算機上の主記憶装置上若しくは二次記憶装置上に一時的に待避されているデータ・セットにアクセス要求が発生している時、当該データ格納装置上の主記憶装置上に現在格納されている前記データ・セットを、現在前記データ格納装置に接続されている二次記憶装置上ないしネットワーク上の他の電子計算機上の主記憶装置上若しくは二次記憶装置上に一時的に待避させることなく作成若しくは召還するのに十分な主記憶装置容量が当該データ格納装置に存在する場合、当該データ格納装置上の主記憶装置上に現在格納されている前記データ・セットを一時的に待避させることなく、一個以上のデータ・セットを当該データ格納装置上の主記憶装置上に格納することが可能な請求項1に記載のマルチインスタンス・インメモリ・データベース・システム。
- ネットワーク上に配置された、一個以上のデータ格納装置上の各主記憶装置容量と前記各データ・セットの大きさを監視し、一時的な待避すなわちチェックアウト、永続的な召還すなわちチェックインの回数が極小となるように自動的にロケーション情報の再配置をおこなうことを特徴とする請求項1または請求項2または請求項3に記載のマルチインスタンス・インメモリ・データベース・システム。
- 前記データ・セットが、他のデータ・セット若しくは自分自身のデータ・セットの他のタプルから参照されている時、参照しているタプルのアトリビュート・データを参照されているデータ・セットの前記データ・セット識別記号変換部への入力データとすることにより、ジョインの結果を新たなデータ・セットとして作成することが可能であることを特徴とする請求項1または請求項2または請求項3または請求項4に記載のマルチインスタンス・インメモリ・データベース・システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004308853A JP4313845B2 (ja) | 2004-09-27 | 2004-09-27 | マルチインスタンス・インメモリ・データベース |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004308853A JP4313845B2 (ja) | 2004-09-27 | 2004-09-27 | マルチインスタンス・インメモリ・データベース |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2006092503A JP2006092503A (ja) | 2006-04-06 |
JP2006092503A5 JP2006092503A5 (ja) | 2008-12-04 |
JP4313845B2 true JP4313845B2 (ja) | 2009-08-12 |
Family
ID=36233384
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004308853A Expired - Lifetime JP4313845B2 (ja) | 2004-09-27 | 2004-09-27 | マルチインスタンス・インメモリ・データベース |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4313845B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010134437A1 (ja) | 2009-05-18 | 2010-11-25 | Nishiyama Shuhei | 仮想単一メモリストレージ上におけるメタ情報共有型分散データベース・システム |
WO2010150750A1 (ja) | 2009-06-25 | 2010-12-29 | Nishiyama Shuhei | 属性付きキーバリューストアによるデータベース管理装置及び、そのキーバリューストア構造キャッシュ装置 |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4385387B1 (ja) | 2009-07-02 | 2009-12-16 | 修平 西山 | 属性付きキー・バリュー・ストアによるデータベース・システム |
JP5626561B2 (ja) * | 2010-03-04 | 2014-11-19 | 日本電気株式会社 | 情報処理システム及びそのデータ管理方法 |
JP5760350B2 (ja) * | 2010-09-03 | 2015-08-12 | 日本電気株式会社 | 情報処理システム |
JP5691306B2 (ja) * | 2010-09-03 | 2015-04-01 | 日本電気株式会社 | 情報処理システム |
CN104636372B (zh) * | 2013-11-11 | 2019-04-26 | 中兴通讯股份有限公司 | 基于表格实现大数据量处理的方法及装置 |
JP6158361B2 (ja) * | 2014-02-07 | 2017-07-05 | 株式会社東芝 | 情報処理装置及び方法 |
CN106095528B (zh) * | 2016-06-07 | 2019-06-21 | 国云科技股份有限公司 | 一种检测虚拟机盘符的方法 |
-
2004
- 2004-09-27 JP JP2004308853A patent/JP4313845B2/ja not_active Expired - Lifetime
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010134437A1 (ja) | 2009-05-18 | 2010-11-25 | Nishiyama Shuhei | 仮想単一メモリストレージ上におけるメタ情報共有型分散データベース・システム |
US8140498B2 (en) | 2009-05-18 | 2012-03-20 | Shuhei Nishiyama | Distributed database system by sharing or replicating the meta information on memory caches |
WO2010150750A1 (ja) | 2009-06-25 | 2010-12-29 | Nishiyama Shuhei | 属性付きキーバリューストアによるデータベース管理装置及び、そのキーバリューストア構造キャッシュ装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2006092503A (ja) | 2006-04-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8271462B2 (en) | Method for creating a index of the data blocks | |
US9020910B2 (en) | Storing tables in a database system | |
US7734615B2 (en) | Performance data for query optimization of database partitions | |
CN103116661B (zh) | 一种数据库的数据处理方法 | |
CN106874348B (zh) | 文件存储和索引方法、装置及读取文件的方法 | |
US20070124277A1 (en) | Index and Method for Extending and Querying Index | |
CN102362273A (zh) | 用于关系数据库系统中高效数据存取的动态散列表 | |
TW201530328A (zh) | 爲半結構化資料構建NoSQL資料庫索引的方法及裝置 | |
WO2018036549A1 (zh) | 分布式数据库查询方法、装置及管理系统 | |
WO2012174268A1 (en) | Processing repetitive data | |
CN103425734A (zh) | 用于存储编码三元组的数据库控制器、方法及系统 | |
Barmpis et al. | Comparative analysis of data persistence technologies for large-scale models | |
CN103902623A (zh) | 用于在存储系统上存取文件的方法和系统 | |
CN110888837B (zh) | 对象存储小文件归并方法及装置 | |
CN105117433A (zh) | 一种基于Hive解析HFile统计查询HBase的方法和系统 | |
CN104090901A (zh) | 一种对数据进行处理的方法、装置及服务器 | |
CN103810219A (zh) | 一种基于行存储数据库的数据处理方法及装置 | |
JP4313845B2 (ja) | マルチインスタンス・インメモリ・データベース | |
CN102622434A (zh) | 数据存储方法、查找方法及装置 | |
CN110134335A (zh) | 一种基于键值对的rdf数据管理方法、装置及存储介质 | |
CN112463795A (zh) | 一种动态哈希方法、装置、设备及存储介质 | |
CN102999637A (zh) | 根据文件特征码为文件自动添加文件标签的方法及系统 | |
US20170322963A1 (en) | Apparatus and Method for Creating User Defined Variable Size Tags on Records in RDBMS | |
US8108421B2 (en) | Query throttling during query translation | |
CN110825747B (zh) | 一种信息存取方法、装置和介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070822 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20080813 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20080904 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080813 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081104 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081225 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090303 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090306 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090428 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090516 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120522 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4313845 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120522 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313114 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120522 Year of fee payment: 3 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120522 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120522 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120522 Year of fee payment: 3 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120522 Year of fee payment: 3 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120522 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120522 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130522 Year of fee payment: 4 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130522 Year of fee payment: 4 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130522 Year of fee payment: 4 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130522 Year of fee payment: 4 |
|
S803 | Written request for registration of cancellation of provisional registration |
Free format text: JAPANESE INTERMEDIATE CODE: R313803 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130522 Year of fee payment: 4 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130522 Year of fee payment: 4 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |