JPS58140844A - ハツシユによるグル−プ化方式 - Google Patents
ハツシユによるグル−プ化方式Info
- Publication number
- JPS58140844A JPS58140844A JP57023319A JP2331982A JPS58140844A JP S58140844 A JPS58140844 A JP S58140844A JP 57023319 A JP57023319 A JP 57023319A JP 2331982 A JP2331982 A JP 2331982A JP S58140844 A JPS58140844 A JP S58140844A
- Authority
- JP
- Japan
- Prior art keywords
- data
- packet
- packets
- processing
- storage device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F7/00—Methods or arrangements for processing data by operating upon the order or content of the data handled
- G06F7/22—Arrangements for sorting or merging computer data on continuous record carriers, e.g. tape, drum, disc
- G06F7/32—Merging, i.e. combining data contained in ordered sequence on at least two record carriers to produce a single carrier or set of carriers having all the original data in the ordered sequence merging methods in general
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【発明の詳細な説明】
（月 発明の技術分野
本斃明はある関係を有するデータ集合ｔ）・ツシングに
よ抄グルービング（類別）ｔ−行なう方式に関する。例
えばリレーシ冒ンＲ（ｆｉ＊ ｆ＠ ＊ ・・・ｆｍ
）（ｆｉはフィールド）が与えられ走時あるプル フィールド科の集りＩＦ ｌ −（！Ｌｌ 、 ａｌ
’・・”ｎ ）（１Ｐ１は同じ値を何個も含み得る。）
のグルービング全行なう場合、ハツシング（データの内
容管入力とし、それをメモリー上のあるアドレスに写像
することを用いて行なうことである。
よ抄グルービング（類別）ｔ−行なう方式に関する。例
えばリレーシ冒ンＲ（ｆｉ＊ ｆ＠ ＊ ・・・ｆｍ
）（ｆｉはフィールド）が与えられ走時あるプル フィールド科の集りＩＦ ｌ −（！Ｌｌ 、 ａｌ
’・・”ｎ ）（１Ｐ１は同じ値を何個も含み得る。）
のグルービング全行なう場合、ハツシング（データの内
容管入力とし、それをメモリー上のあるアドレスに写像
することを用いて行なうことである。
（２） 従来技術と問題点
従来の方式では、データの集合Ｄ ｗ （ａ、 。
亀、・・・ＩＬｎ）が与えられ走時、Ｄの要素を小さい
順に並べかえ先後、小さｉ方から−ぺていって、隣り同
志の値が違う所で区切ることによりグルービングを行な
っていた。し従来方式では並べかえはｎ ｊｏｇ ｎ
Ｋ比例する時間を必要とするから全体の処理時間もｎｊ
１ｏｇｎＫ比例し走時間となり処理時間が長いという欠
点があり九。
順に並べかえ先後、小さｉ方から−ぺていって、隣り同
志の値が違う所で区切ることによりグルービングを行な
っていた。し従来方式では並べかえはｎ ｊｏｇ ｎ
Ｋ比例する時間を必要とするから全体の処理時間もｎｊ
１ｏｇｎＫ比例し走時間となり処理時間が長いという欠
点があり九。
（３〉 発明の目的
本発明は前記欠点を解消した高速なグルービング方式を
提供することｔａ的とする〇（４） 発明の構成 該目的は補助記憶装置（格納されたデータの集合を主記
憶上のデータテーブル及びリンク用テーブルを用いて、
ハツシングのパケット数をデーよるグループ化方式によ
り達成される。
提供することｔａ的とする〇（４） 発明の構成 該目的は補助記憶装置（格納されたデータの集合を主記
憶上のデータテーブル及びリンク用テーブルを用いて、
ハツシングのパケット数をデーよるグループ化方式によ
り達成される。
（５） 発明の実施例
以下本脅明ｔＷＪ面を使って詳細に説明する。
図は本発明の一実施例を示す全体ブロック図である。
１１において、１１は制＠装置、１２は演算装置、１３
ｄ主記憶、１４はヘッドポインタテーブル（ハツシング
用ＯＦ個のヘッドポインタからなる配列）、１５はデー
タテーブルム（データの集合Ｄｔ格納すゐ配列）、１６
はデータテーブルＢ（データＯ集合ＤＫ”付随し九デー
タを格納する配列）、１グはテーブル０（リンク用のテ
ーブル）、１８は補助記憶装置、Ｐはパケットの数、ｎ
はデータの集合りの大！さである。こむで１５．１６は
データテーブルともいう。
ｄ主記憶、１４はヘッドポインタテーブル（ハツシング
用ＯＦ個のヘッドポインタからなる配列）、１５はデー
タテーブルム（データの集合Ｄｔ格納すゐ配列）、１６
はデータテーブルＢ（データＯ集合ＤＫ”付随し九デー
タを格納する配列）、１グはテーブル０（リンク用のテ
ーブル）、１８は補助記憶装置、Ｐはパケットの数、ｎ
はデータの集合りの大！さである。こむで１５．１６は
データテーブルともいう。
本発明Ｏ処理手順について述べると、
■ データの集合Ｄｆハツシングを用いてｐるＯ≦ｈ（
ｉＫｐ−１を計算し、ａｉｌｈ（ａｉ）番目のパケット
に入れることを意味する◎ハツシングの性質で同じ値を
４つ要素は必ず同じパケットに入る。九だし、同じパケ
ットに入った要素がみな同じ値であるとは限らない。本
方式では基本的にバッジ、関数としてｈ（ａｉ）＝（ａ
ｌｔ−ｐで割っ走時の余り）を用いる。） 厘 各パケットは本方式ではリスト（要素の列）として
夷璃される。各パケットに対し、次の処理を行う。パケ
ットの要素を先頭から見て行き、先頭の要素と等しい％
Ｏを取り出して１つのグループとする。
ｉＫｐ−１を計算し、ａｉｌｈ（ａｉ）番目のパケット
に入れることを意味する◎ハツシングの性質で同じ値を
４つ要素は必ず同じパケットに入る。九だし、同じパケ
ットに入った要素がみな同じ値であるとは限らない。本
方式では基本的にバッジ、関数としてｈ（ａｉ）＝（ａ
ｌｔ−ｐで割っ走時の余り）を用いる。） 厘 各パケットは本方式ではリスト（要素の列）として
夷璃される。各パケットに対し、次の処理を行う。パケ
ットの要素を先頭から見て行き、先頭の要素と等しい％
Ｏを取り出して１つのグループとする。
パケットが空くなる壇でこの処理を繰返す。
本方式の概略は以上の通勤であるが、特徴の１つとして
再帰性が°あげられる・すなわち、１て得られえパケッ
トは、やはり１つのデータの集合であるから、そのパケ
ットがまだ大きいならさらに！を適用する（リハッシ＆
）ことができるからである。本方式はパケットの数ｐを
データの数ｎとすること１−４う一つの大きな特徴とし
、それにより高速な処ｍｔ−実璃するものであるが、デ
ータの数ｎが非常に大きくなるとそれと同じ数だけのパ
ヶｖトｆ処理装置内にもつことは不可能となる場合があ
る。この場合上に用ｖｈｆｔ−再帰性を用いることはｐ
■１０００個のパケットを用意し鵞す・１０００個のバ
ケツ）ＫＤｔ分割し、さらに各パケットを１０００個の
パケットに分割することくより実質的ＫＤ會ｎ諺４ｏｏ
ｑｏｏｏのパケットに分割し友ことと同じ効果を実現す
る。この例の場合わすか１゜ｇ ｐｎ ｍ ｇ回ＩＱ適
用するだけでよ一〇将来的にはメモリのコストが安くな
るからリハッシ＆をしなければならなｉような状況は少
なくなると思われる・を先筒で分割され先台パケットに
グローｋＷサーを割当てることくよる並列処ｆｆ１ｔ行
うことも可能である◎ プルム１１Ｓ（以後りと呼）及びテーブルＢ１６（以後
Ｄ′と呼ぶ）Ｋ例えばテーブルム１５４（Ｆｉ部番号、
テーブル１１１６４（は従業貴名のデーＩを転送する。
再帰性が°あげられる・すなわち、１て得られえパケッ
トは、やはり１つのデータの集合であるから、そのパケ
ットがまだ大きいならさらに！を適用する（リハッシ＆
）ことができるからである。本方式はパケットの数ｐを
データの数ｎとすること１−４う一つの大きな特徴とし
、それにより高速な処ｍｔ−実璃するものであるが、デ
ータの数ｎが非常に大きくなるとそれと同じ数だけのパ
ヶｖトｆ処理装置内にもつことは不可能となる場合があ
る。この場合上に用ｖｈｆｔ−再帰性を用いることはｐ
■１０００個のパケットを用意し鵞す・１０００個のバ
ケツ）ＫＤｔ分割し、さらに各パケットを１０００個の
パケットに分割することくより実質的ＫＤ會ｎ諺４ｏｏ
ｑｏｏｏのパケットに分割し友ことと同じ効果を実現す
る。この例の場合わすか１゜ｇ ｐｎ ｍ ｇ回ＩＱ適
用するだけでよ一〇将来的にはメモリのコストが安くな
るからリハッシ＆をしなければならなｉような状況は少
なくなると思われる・を先筒で分割され先台パケットに
グローｋＷサーを割当てることくよる並列処ｆｆ１ｔ行
うことも可能である◎ プルム１１Ｓ（以後りと呼）及びテーブルＢ１６（以後
Ｄ′と呼ぶ）Ｋ例えばテーブルム１５４（Ｆｉ部番号、
テーブル１１１６４（は従業貴名のデーＩを転送する。
次に演算装置１３ａｔ−用いてハツシングを行なう。具
体的には各々（１＝１，２．・・・ｎ）Ｋ対しｌ１ｌｓ
−ｈ（Ｄ（１））を計算しく通常はＤ（１）ｔ−Ｐで割
っ走時の余り。ただしＤ（ｉ）はＤの１番目の要素を意
味する）、テーブルＯＸフの１番目の要素（以後Ｌ（ｉ
）と呼ぶ）にヘッドポインタテーブル１４のＦ番目の要
素（以後Ｈ（ｊ）と呼ぶ）の値會格納しＨ（幻に１の値
を格納する０（ｉＩｉ１配列Ｈ配列上１Ｌ値としてＯ１
入れておく）ａ次に各１に対して前記Ｈφ）Ｋつながる
リスト（パケット）Ｋ対し璽で述べた地理を実行する。
体的には各々（１＝１，２．・・・ｎ）Ｋ対しｌ１ｌｓ
−ｈ（Ｄ（１））を計算しく通常はＤ（１）ｔ−Ｐで割
っ走時の余り。ただしＤ（ｉ）はＤの１番目の要素を意
味する）、テーブルＯＸフの１番目の要素（以後Ｌ（ｉ
）と呼ぶ）にヘッドポインタテーブル１４のＦ番目の要
素（以後Ｈ（ｊ）と呼ぶ）の値會格納しＨ（幻に１の値
を格納する０（ｉＩｉ１配列Ｈ配列上１Ｌ値としてＯ１
入れておく）ａ次に各１に対して前記Ｈφ）Ｋつながる
リスト（パケット）Ｋ対し璽で述べた地理を実行する。
以上はりバッジ１の必要ない場合であるが、制御装置ｉ
Ｊ ＩＪハψシ１が必要かどうか管判断し、必要なら補
助記憶装置１８を制御して厘で述べ九処理を繰返させ、
＃処理が終了後［の処理管実行する。
Ｊ ＩＪハψシ１が必要かどうか管判断し、必要なら補
助記憶装置１８を制御して厘で述べ九処理を繰返させ、
＃処理が終了後［の処理管実行する。
（６） 発明の詳細
な説明し九ように、本発明によればある集合データのグ
ルービングをデータの数に比例し要時間で行なうことが
出来るので高速で、かつ高能率な処理ができるという効
果がある。
ルービングをデータの数に比例し要時間で行なうことが
出来るので高速で、かつ高能率な処理ができるという効
果がある。
図は本脅明の一実施例を示す全体ブロック図である。
記号の説明、１１は制御装置、１２は演算装置、１３は
主記憶、１４はヘッドポインタテーブル（ハツシング用
の９個のヘッドポインタからなる配列）、１５はデータ
テーブルム（データの集合ＤＱ格納する配列）、１６は
ＤデータテーブルＢ（データの集合りに付随し九データ
を格納する配列）、ｌフはテーブルＯ（リンク用のテー
ブル）。 １８は補助記憶装置、ｐはパケットの数、ｎはデータの
集合りの大１さ。
主記憶、１４はヘッドポインタテーブル（ハツシング用
の９個のヘッドポインタからなる配列）、１５はデータ
テーブルム（データの集合ＤＱ格納する配列）、１６は
ＤデータテーブルＢ（データの集合りに付随し九データ
を格納する配列）、ｌフはテーブルＯ（リンク用のテー
ブル）。 １８は補助記憶装置、ｐはパケットの数、ｎはデータの
集合りの大１さ。
Claims (1)
- 補助記憶装置に格納され九データの集合を主記憶上のデ
ータテーブル及びリンク用テーブルを用いて、ハラシン
〆のパケット数をデータの数に等プル方式。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP57023319A JPS58140844A (ja) | 1982-02-16 | 1982-02-16 | ハツシユによるグル−プ化方式 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP57023319A JPS58140844A (ja) | 1982-02-16 | 1982-02-16 | ハツシユによるグル−プ化方式 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPS58140844A true JPS58140844A (ja) | 1983-08-20 |
Family
ID=12107258
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP57023319A Pending JPS58140844A (ja) | 1982-02-16 | 1982-02-16 | ハツシユによるグル−プ化方式 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPS58140844A (ja) |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS5038540A (ja) * | 1973-06-26 | 1975-04-10 |
-
1982
- 1982-02-16 JP JP57023319A patent/JPS58140844A/ja active Pending
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS5038540A (ja) * | 1973-06-26 | 1975-04-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6442553B1 (en) | Hash system and hash method for transforming records to be hashed | |
| CN108415912A (zh) | 基于MapReduce模型的数据处理方法和设备 | |
| JPS58140844A (ja) | ハツシユによるグル−プ化方式 | |
| JP2003224581A (ja) | 最長一致検索回路および方法およびプログラムおよび記録媒体 | |
| JPH06103127A (ja) | ハッシュファイルデータ管理装置およびハッシュファイルデータ管理方法 | |
| CN108228735A (zh) | 一种数据处理方法、装置及系统 | |
| JPH10322354A (ja) | コネクション番号変換装置及びその方法並びにその方法を実行するためのプログラムを格納した記録媒体 | |
| JPH07249019A (ja) | 並列プロセッサシステム | |
| JPS58129649A (ja) | デ−タ処理方式 | |
| JPH0328926A (ja) | データ処理装置 | |
| JPH01286041A (ja) | 知識ベースの多重制御方式 | |
| JPS62118435A (ja) | 複数インデツクス生成方式 | |
| JPS61279960A (ja) | バッファ管理方法 | |
| JP2003085036A (ja) | メモリ管理方法 | |
| JPH04199431A (ja) | 優先度付き待行列制御方式 | |
| JPH06301592A (ja) | データ管理方法 | |
| CN112804153A (zh) | 一种面向gpu加速ip查找的更新方法及系统 | |
| JPS63146130A (ja) | 知識単位管理方式 | |
| JPS58222376A (ja) | テ−ブルサ−チ方式 | |
| JPH0689160A (ja) | ソート処理方式 | |
| CN115421689A (zh) | 一种可扩展的高速并行查找相等数据的处理方法与装置 | |
| JP2001223745A (ja) | シェーピング制御方法およびシェーピング制御装置 | |
| JPS62209614A (ja) | ハツシユ分類処理方式 | |
| JPS60169946A (ja) | タスク制御方式 | |
| JPS6325725A (ja) | アドレス表分類方式 |