JPH01147720A - 分類処理方式 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は、電子計算機によるデータの分類処理方式に関
する。

（従来の技術） 計算機によるデータの分類処理は煩繁に行なわれ、常に
高速な処理が要求される。従来の分類処理は一般に第４
図に示すように入力フェーズ３１、併合フェーズ３２、
出力フェーズ３３の３つのフェーズで構成される。大力
フェーズ３！では入力データレコードを読み、内部記憶
装置上の作業領域内で分類キーによりデータレコードを
並べ換えながら、ある程度並んだデータレコードの列（
以下、ストリングと称する）を作成し、このストリング
を外部記憶装置に出力しておく。人出力の！Ｆ位はブロ
ックであり、ストリングは通常複数個のブロックから構
成され、同一ストリングに属するブロックはポインタで
リンクされている。各ストリングの先頭アドレスは、別
にストリングインデックスを設けて管理されている。そ
してすべてのデータの入力後、併合フェーズ３２でこれ
らのストリングを入力しながら併合処理を繰り返し、最
終的な併合の後、出力フェーズ３３でデータの出力を行
なう。併合処理では、ストリングインデックスをもとに
外部記憶装置上に書かれた複数のストリングのブロック
を内部記憶装置のバッファエリアに読み込み、各ブロッ
クのデータレコードを先頭から分類キーにしたがって併
合を行ない、新たに長いストリングを作成し再度外部記
憶装置上に書き戻しつつ、ストリング数を減らしてゆく
。内部記憶装置上で一度に併合できるストリング数のこ
とをマージオーダと呼ぶ。併合処理で減らされたストリ
ング数がマージオーダ数以下となった時点で出力処理が
開始され、最終併合の結果は出力データレコードとして
出力される。

〔発明が解決しようとする問題点〕

高速な分類処理のためには併合処理の時間の短縮が不可
欠である。そのためには、併合すべきブロックのバッフ
ァ上のデータが空となった時点で、外部記憶装置に対し
て必要ストリングの次ブロックの入出力要求を行なって
いては、人出力の終了待ち時間が無駄となってしまう。

また、これを回避するために、すべてのストリングの次
ブ、ロックに対してダブルバッファリング手法を用いて
人出力を行なうことが考えられるが、バッファ領域が２
倍必要となる。

〔問題点を解決するための手段〕

本発明の分類処理方式は、ストリングを生成する手段と
、生成されたストリングを記憶するストリング記憶手段
と、該記憶手段に記憶されているストリング群を読出し
、ストリングの併合を行なうストリング併合手段と、前
記ストリング併合手段に含まわるバッファ中の各ストリ
ングのブロックの最終データレコードのキー比較を行な
い、最初に空となるバッファを検出することにより次に
必要となるブロックを判定する先読みブロック判定丁段
と、該先読みブロック判定手段により通知されたストリ
ングの次ブロックを入力するストリング入力手段を有し
ている。

（作　用） ストリング併合手段は、内部記憶装置上に複数のストリ
ングのブロックを保持できるｍ＋１個のバッファエリア
を確保し、ストリングインデックスをもとにストリング
記憶手段からｍ本のストリングのブロックをバッファエ
リアにストリング入力手段を介して読み込む。ｍ個のブ
ロックの入力が完ｒすると、ストリング併合手段は、先
読みブロック判定手段に通知し、バッファエリア中のス
トリングブロックのうち、最初に空となるストリングの
判定を行ない、ストリング入力手段に入力要求を行なう
。ストリング併合手段は、その後バッファ中の各ブロッ
クのデータレコードを先頭から分類キーにしたがって併
合を開始する。このとき、併合処理と先読みブロックの
入力処理とは非同期に行なわれ、先読みブロックの入力
は、ｃｐｕ内の併合処理とは独立に入出力制御装置によ
り上記の先読み用のバッファエリアに行なわれる。

したがって、内部記憶装置上のバッファエリアは最小限
で済み、かつ併合処理に必要な時間な短縮できる。

【実施例〕

次に、本発明の実施例について図面を参照しながら説明
する。

第１図は本発明の分類処理方式の一実施例を示すブロッ
ク図である。

本実施例は、レコード入力手段Ｉ＋、ストリング生成手
段１２、ストリング併合手段１３、先読みブロック判定
手段１４、ストリング出力手段１５、ストリング入力手
段１６、ストリング記憶手段１７およびレコード出力手
段１８より構成されている。

分類すべきデータレコードは、入力ファイル１９に格納
されており、レコード入力手段１１は入力ファイル１９
から順次データレコードを入力し、ストリング生成手段
１２に引き渡す。ストリング生成１段１２は、内部記憶
装置上にデータレコードを格納し、分類キーに従ってデ
ータレコードのキー比較を行いデータレコードの並べ換
えを行いながらストリングを生成し、ストリング出力手
段１５によりストリング記憶手段１７に書き込んで行く
。ストリング記憶手段１７は、作業用ファイルが通常用
いられる。人出力の単位はブロックであり、ストリング
は通常複数個のブロックから構成され、同一゛　　スト
リングに属するブロックはポインタでリンクされている
。各ストリングの先頭アドレスは、別にストリングイン
デックスを設けて管理されている。すべてのデータレコ
ードの入力が完了すると、その旨がストリング併合手段
１３に通知され併合処理が開始される。ストリング併合
手段１３は、内部記憶装置上に複数のストリングのブロ
ックを保持できるＭ＋１個のバッファエリアを確保し、
ストリングインデックスをもとにストリング記憶手段１
７からＭ本のストリングのブロックをバッファエリアに
ストリング入力手段１６を介して読み込む。Ｍ個のブロ
ックの入力が完了すると、ストリング併合手段１３は、
先読みブロック判定手段１４に通知し、バッファエリア
中のストリングブロックのうち、最初に空となるストリ
ングｉｄの判定を行い、ストリング入力手段１６に入力
要求を行う。

ストリング併合手段１３は、その後バッファ中の各ブロ
ックのデータレコードを先頭から分類キーにしたがって
併合を開始する。このとき、併合処理と先読みブロック
の入力処理とは非同期に行われ、先読みブロックの入力
は、ＣＰＵ内の併合処理とは独立に入出力制御装置によ
り上記の先読み川のバッファエリアに行われる。

第２図はこの併合過程を具体的なデータをもとに説明し
た図である。図中、２１はストリング併合手段１３より
作成されるストリングのブロックを出力するだめの出力
バッファ、２２は併合処理で行われるバイナリサーチ用
のコントロールテーブル（以降ＢＩＣＴテーブルと呼ぶ
）、２３は入力用バッファエリア、２４は先読みブロッ
ク判定手段１４に含まれるＢＩＣＴテーブルである。図
の状態は、入力用バッファエリア２３に６個のストリン
グブロックＳＴＩ、ＳＴ２．−、ＳＴ６が読み込まれた
状態を示している。先読みブロック判定手段１４は、ス
トリングＳＴＩ、ＳＴ２．−．ＳＴ６のブロックの各最
終データレコードをバイナリサーチ手法により比較を行
いＢＩＣＴテーブル２４上で分類キー類にストリングｉ
ｄを並べなおす。２４はその結果の状態を示しており、
これにより図中のブロックを併合して行くとストリング
ブロックＳＴ２が最初に空となることが分かる。その後
、先読みブロック判定手段１４はストリング入力手段１
６にストリングブロックＳＴ２の次ブロックの入力要求
を通知する。次ブロックの入力処理は、人出力制御装置
によりＣＰＵ動作と独立して行なわれ、入出力動作の間
に、ストリング併合手段１３は、ストリングブロックＳ
ＴＩ、ＳＴ２．−、ＳＴ６の先頭データレコードからバ
イナーリサーチ手法により比較を行い、併合用ＢＩＣＴ
テーブル２２上で分類キー類にストリングｉｄを並べか
えながら本来の併合処理を入出力動作と並行して行う。

併合処理を続けて行くと、ストリングブロックＳＴ２が
空となる。この時点でストリング併合手段１３は、先読
みの要求を行ったブロックの終了を待ち合わせる。次ブ
ロックの入力は、予め用意したＭ＋１個目のバッファに
行われる。入力が完了すると、さきほど空になったバッ
ファを次ブロックの入力用バッファとして、入力が完了
したバッファを新たに併合用バッファとして組入れて、
再び先読みブロック判定手段！４により、次に空となる
ストリングのブロックの判定が行われるといフだ上記の
過程の処理が繰り返される。２５は前記のストリングブ
ロックＳＴ２の次のブロックの入力完了後、再度先読み
ブロック判定手段１４により行われた先読み判定用のＢ
　Ｉ　ＣＴテーブルの状態を示す。これにより次に空と
なるブロックのストリングｉｄはストリングブロックＳ
Ｔ３であることが分かる。第３図は、先読みブロック判
定手段１４を用いることによる効果を用いない場合と比
較して説明するタイミングチャートである。同図（＋）
は先読みブロック判定手段１４を用いない場合のタイミ
ングチャートで、１．はバッファが空となり次ブロック
の入力要求を出した時点、ｔ２は入力が完了して併合処
理を再開した時点、ｔ３は次のブロックの入力要求の時
点を示す。同図（２）は先読みブロック判定手段１４を
用いた場合のタイミングチャートで、ｔ、は先読みブロ
ック判定手段１４により次ブロックの判定を行い入力要
求を出した時点、ｔ、はＣＰＵでの併合処理が完了し、
次ブロックの入力完了待ちに入った時点、ｔ３は次ブロ
ックの入力が完了し、併合処理を再開した時点を示す。

図に示すよう先読みブロック判定手段１４を用いた場合
、実効的にダブルバッファリング処理となっている。ス
トリング併合手段１３により減少されたストリング数が
マージオーダ数以下となった時点で出力処理が開始され
、最終併合の結果はストリング併合手段１３からレコー
ド出力手段１８に渡され、出力データレコードとして出
力ファイル２０に出力されて分類処理が終了する。

〔発明の効果〕

以上説明したように本発明は、先読みブロック判定手段
を備えることにより、分類処理における併合過程で内部
記憶装置上のバッファエリアを増加させることなく実効
的にダブルバッファリング処理を可能とし、併合処理に
必要な時間を短縮できるという効果がある。

【図面の簡単な説明】

第１図は本発明の分類処理方式の一実施例を示すブロッ
ク図、第２図はストリング併合手段１３と先読みブロッ
ク判定手段１４の機構の説明図、第３図は先読みブロッ
ク判定手段１４を用いた場合の効果を用いない場合と比
較して示すタイミングチャート、第４図は分類処理の一
般的な処理の流れ図である。 １１・・・・・・レコード入力手段、 １２・・・・・・ストリング生成手段、＋　３−−−−
−−ストリング併合手段、１４−−−−−・先読みブロ
ック判定手段、１５・・・・・・ストリング出力手段、
１６・・・・・・ストリング入力手段、１７・・・・・
・ストリング記憶手段、１８・・・・・・レコード出力
手段、 ＋　９−−−−−−出力ファイル、 ２０−−−−−−入力ファイル。

Claims (1)

1. 【特許請求の範囲】 ストリングを生成し、併合することにより分類処理を行
   なう分類処理方式であって、 ストリングを生成する手段と、 生成されたストリングを記憶するストリング記憶手段と
   、 該記憶手段に記憶されているストリング群を読出し、ス
   トリングの併合を行なうストリング併合手段と、 前記ストリング併合手段に含まれるバッファ中の各スト
   リングのブロックの最終データレコードのキー比較を行
   ない、最初に空となるバッファを検出することにより次
   に必要となるブロックを判定する先読みブロック判定手
   段と、 該先読みブロック判定手段により通知されたストリング
   の次ブロックを入力するストリング入力手段を有する分
   類処理方式。