JPH0668273A - 残データ有無情報判定機能を有するデータ収集方式 - Google Patents

Abstract

(57)【要約】 【目的】 情報処理システムに蓄積されているデータを
通信回線を介して周期的に収集するデータベース管理シ
ステムに関し、情報処理システムから送られてくる残デ
ータ有無情報により効率的にデータ収集することを目的
とする。 【構成】 情報処理システム１に、データ送信処理部３
と通信制御部４とデータ読込処理部５と送信データ用バ
ッファ６とを有し、データベース管理システム２に、通
信制御部７と周期起動処理部８と周期起動情報登録テー
ブル９とデータ送信要求処理部10とデータ格納処理部11
とデータベース12とを有し、該データベース管理システ
ム２のデータ格納処理部11に、データ格納処理手段13と
残データ有無判定処理手段14とを設け、周期的に送信す
るデータ送信要求により受信したデータをデータ格納処
理手段13によりデータベース12に格納後、残データ有無
判定処理手段14により残データの有無を判定するように
し、残データ有りが判定された場合、再度、データ送信
要求処理部10を起動して送信要求を行うように構成す
る。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は情報処理システムに蓄積
されているデータを通信回線を介して周期的に収集する
データベース管理システムのデータ収集方式に関する。
データ収集方式のシステム構成例を図４に示す。図にお
いて、41は情報処理システム、42はデータベース管理シ
ステム、43は情報提供局群、44はデータ管理センター、
45は集中保守局、46は端局を示す。複数の端局46を集中
保守局45にネットワーク接続して情報処理システム41を
構成し、複数の集中保守局45をデータ管理センター44に
ネットワーク接続してデータベース管理システム42を構
成する。

【０００２】近年、情報処理システムの高度化に伴い、
情報処理システムで扱うデータの大量化、およびデータ
の複雑化が発生している。そのため、複数の情報処理シ
ステムで扱っているデータを統合し、それらのデータを
もとに統計処理して業務に活用していくケースが増加し
ており、情報処理システムにネットワークにより接続さ
れ、データを収集してデータベースに格納し、必要なデ
ータの検索や統計処理および統計データのグラフィック
表示を可能とするデータベース管理システムが必要とな
ってきている。

【０００３】しかし、一定周期によるデータ送信要求
で、情報処理システムのデータを収集するデータベース
管理システムでは、詳報処理システムに蓄積されるデー
タ量が一定でなく、大量のデータが蓄積されている場
合、一度のデータ送信要求で全てのデータを収集できな
い。また大量のデータを受信した時にデータ格納処理の
負荷が増加するといった問題が生じている。

【０００４】この為、情報処理システムの残データ有無
状態を判定し、残データが有る場合、次の送信要求周期
を待たず再送信要求を行うことが可能であり、且つデー
タベース格納処理の実行状態を確認して、送信要求を行
うことができるデータ収集方式が必要である。

【０００５】

【従来の技術】従来のデータ収集方式においては、デー
タの送信要求を行う周期をシステムに登録する事によ
り、一定の周期でデータ送信要求を実行させる方式がと
られている。

【０００６】従来の原理構成図を図５に示す。図におい
て、21は情報処理システム、22はデータベース管理シス
テム、23はデータ送信処理部、24は情報処理システム内
通信制御部、25はデータ読込処理部、26は送信データ用
バッファ、27はデータベース管理システム内通信制御
部、28は周期起動処理部、29は周期起動情報登録テーブ
ル、30はデータ送信要求処理部、31はデータ格納処理
部、32はデータベースを示す。

【０００７】データベース管理システム22において、周
期起動処理部28では周期起動情報登録テーブル29の内容
を参照し、指定周期でデータ送信要求処理部30を起動す
る。データ送信要求処理部30は起動されると、通信制御
部27と24を介して情報処理システム21のデータ送信処理
部23に対してデータの送信を要求する。

【０００８】データ送信処理部23は送信要求を受ける
と、データ読込処理部25を介して送信データ用バッファ
26から送信ブロック分のデータを読込み、通信制御部24
と27を介してデータベース管理システム22内のデータ格
納処理部31にデータを送信する。データ格納処理部31は
受信データをデータベース32に格納する。

【０００９】この方式では、情報処理システムに蓄積さ
れるデータ量が常に一定ではなく、ある特定の時間帯に
大量のデータが発生する様な場合、データ送信要求によ
る送信データ用バッファの読出しがデータ書込みに追い
つかず上塗りされる為、データ収集を行う周期を最大デ
ータ発生時を考慮して調整する必要があり、平常時には
無駄な送信要求を実行していた。

【００１０】また、情報システムに大量のデータが蓄積
されている場合、データ格納処理の処理実行状態に関わ
らず一定周期でデータ送信要求を行う為、データベース
管理システムの処理が輻輳してしまうと言う問題が発生
していた。

【００１１】

【発明が解決しようとする課題】従って、従来のデータ
収集方式では、大量のデータ発生時に送信データ用バ
ッファが上塗りされることがないように大量データ発生
時を考慮した周期で、データ送信要求を行う必要があり
通信回線の使用効率が低下する。データベース管理シ
ステム内の処理実行状態に関係なく一定周期でデータを
収集する為、システムの処理能力が低下するといった問
題が生じていた。

【００１２】本発明は、情報通信システム側からのデ
ータ受信時に送信用バッファの残データの有無を判定す
る機能を有し、残データ有りの場合、続けてデータ送信
要求を行うこと、情報通信システム側からのデータ受
信時に送信用バッファの残データの有無を判定する機能
を有し、残データ有りの場合、データ格納処理の処理終
了を確認してから、データ送信要求を行うことにより、
大量データ発生時のデータ上塗りによるデータロスの防
止、通信回線の効率的な使用及びデータベース管理シス
テムの処理能力低下防止を可能とするデータ収集方式を
提供することを目的とする。

【００１３】

【課題を解決するための手段】本発明の原理構成図を図
１に示す。図において、１は情報処理システム、２はデ
ータベース管理システム、３はデータ送信処理部、４は
情報処理システム内通信制御部、５はデータ読込処理
部、６は送信データ用バッファ、７はデータベース管理
システム内通信制御部、８は周期起動処理部、９は周期
起動情報登録テーブル、10はデータ送信要求処理部、11
はデータ格納処理部、12はデータベース、13はデータ格
納処理手段、14は残データ有無判定処理手段を示す。

【００１４】本発明において従来と異なる点は、データ
ベース管理システム２のデータ格納処理部11に、データ
格納処理手段13と残データ有無判定処理手段14とを設け
たことで、データベース管理システム２において、周期
的に送信するデータ送信要求により受信したデータをデ
ータ格納処理手段13によりデータベース12に格納後、残
データ有無判定処理手段14により残データの有無を判定
するようにし、残データ有りが判定された場合、再度、
データ送信要求処理部10を起動して送信要求を行うよう
に構成する。

【００１５】従って、情報処理システム１に蓄積される
データ量が一定でなく、ある特定の時間帯に大量のデー
タが発生する場合、データ送信要求の周期を最大データ
発生時に合わせて調整するような通信回線の使用効率を
低下させることなく、送信データ用バッファ６のデータ
の上塗りを防止し、また、データ格納処理部11が輻輳し
た場合、次のデータ受信を遅らせることによりシステム
の処理能力の低下を防止することができる。

【００１６】

【作用】本発明の情報処理システムとデータベース管理
システムの処理フローチャートを図２に示す。 (1) データベース管理システム２において、周期起動情
報テーブル９を参照し指定周期で周期起動処理部８によ
りデータ送信要求処理部10を起動する。 (2) データ送信要求処理部10は起動されると、通信制御
部４と７を介して情報処理システム１のデータ送信処理
部３に対してデータ送信要求を送信する。 (3) 情報処理システム１のデータ送信処理部３はデータ
ベース管理システム２からの送信要求受信待ちの状態に
あり、 (4) データベース管理システム２のデータ格納処理部11
は情報処理システム１のデータ送信部３からのデータ受
信待ちの状態にあり、 (5) データ送信処理部３は送信要求を受けると、データ
読込処理部５に送信データ用バッファ６からのデータの
読込みを依頼する。 (6) データ読込処理部５では送信データ用バッファ６か
らデータを読込み、送信用データを作成する。 (7) 残データが有るか無いかをチェックし、残データが
有る場合は、送信用データの残データ情報に残データ有
りをセットしてデータ送信処理部３に返す。 (8) データ送信処理部３に読込まれたデータは、通信制
御部７と４を介してデータベース管理システム２内のデ
ータ格納処理部11のデータ格納処理手段13にデータを送
信される。 (9) データ格納処理手段13では、受信データ中のユーザ
データ部をデータベース12に格納する。 (10)データ格納処理終了後、受信データのヘッダ部を残
データ有無判定処理手段14に転送する。 (11)残データ有無判定処理手段14では、受信データのヘ
ッダ部より残データの有無を判定し、残データ有りの場
合、パラメータで再度、データ送信要求処理部10を起動
する。残データ無しの場合は処理を終了する。

【００１７】本発明で従来より付加された処理フローチ
ャートは、情報処理システム１の残データ有りのセット
処理フロー(7) と、データベース管理システム２の残デ
ータ有無情報判定処理フロー(10)と残データ有りの場合
の処理フロー(11)とである。

【００１８】

【実施例】本発明のデータ構成例を図３に示す。図にお
いて、(a) はデータ送信要求処理起動時のパラメータデ
ータ構成、(b) はデータ送信要求処理部から送信される
データ送信要求構成、(c) はデータ読込処理部で作成さ
れデータベース管理システムに送信されるデータ構成、
(d) はデータ格納処理部から残データ有無判定処理部に
転送される受信データのヘッダ部構成、(e) は同期起動
情報登録テーブルのデータ構成を示す。

【００１９】図３(a) のデータ送信要求起動データは、
通信情報として通信回線番号、送信元判別番号、受信元
判別番号、アプリケーション種別等からなり、図３(b)
のデータ送信要求は、上記パラメータ通信情報に残デー
タ有無情報とデータ種別（データ送信要求）とが付加さ
れ、図３(c) の送信データ構成は、上記パラメータ通信
情報に残データ有無情報とデータ種別（格納データ）と
データ長とデータとからなり、図３(d) の受信データヘ
ッダ情報は、パラメータ通信情報に残データ有無情報が
ヘッダ情報として付加されている。

【００２０】図３(e) の同期情報登録テーブルは、アプ
リケーションＩＤ、アプリケーション名(command,messa
ge,diag 等）、周期（10,20 分等) 、パラメータ（回線
番号、送信元番号、受信元番号、アプリケーション種別
等）よりなる。アプリケーション名は、コマンド情報、
メッセージ情報、診断情報等がパラメータとして登録さ
れている。

【００２１】本発明の実行フローは、Ｘ．25インタフェ
ースにより情報処理システムに接続され、10分毎にデー
タ送信要求を送信することにより、一度に１ブロック
（16Ｋバイト）のデータ収集を行い、収集したデータを
データベースに格納し、それらのデータを基に統計処理
を行うデータベース管理システムを示す。

【００２２】情報処理システムに20Ｋバイトのデータが
送信データバッファに蓄積された時に、データ送信要求
を行った場合、データ読込処理で送信用バッファから16
Ｋバイトのデータを読込み、さらに４Ｋバイトのデータ
が残るので、残データ有り情報を付加して図３(b) の送
信データを作成し、データ送信処理によりデータベース
管理システムに送信する。

【００２３】データを受信したデータベース管理システ
ム内、データ格納部のデータ格納処理では、16Ｋバイト
のデータをデータベースに格納し、データのヘッダ部を
残データ有無判定処理に転送する。残データ有無判定処
理では残データ有りを判定し、再度、データ送信要求処
理を起動する。２度目のデータ送信要求により、データ
読込処理で送信用データバッファから残りの４Ｋバイト
のデータを読込み、残データ無し情報を付加して図３
(c) の送信データを作成し、データ送信処理によりデー
タベース管理システムに送信する。

【００２４】データを受信したデータベース管理システ
ム内、データ格納部のデータ格納処理では、４Ｋバイト
のデータをデータベースに格納し、データのヘッダ部を
残データ有無判定処理に転送する。残データ有無判定処
理では残データ無しを判定して処理を終了する。

【００２５】

【発明の効果】以上説明したように、本発明によれば、
情報処理システムに周期的にデータ送信要求により受信
したデータ中の残データ有無情報の判定処理手段を有
し、残データ有りを判定した場合に、再度データ送信要
求を行ってデータを収集する為、情報処理システムに蓄
積されるデータ量が一定でなく、ある特定の時間帯に大
量のデータが発生する場合、データ送信要求の周期を最
大データ発生時に合わせて調整する必要がなく、送信回
線の効率的な使用に効果を奏し、情報処理システム側の
送信データバッファのデータの上塗りを防止することが
可能となる。

【図面の簡単な説明】

【図１】 本発明の原理構成図

【図２】 本発明の処理フローチャート

【図３】 データ構成の実施例

【図４】 データ収集方式のシステム構成例

【図５】 従来例の原理構成図

【符号の説明】

１，21，41 情報処理システム ２，22，42 データベース管理システム ３，23 データ送信処理部 ４，24 情報処理システム内通信制御部 ５，25 データ読込処理部 ６，26 送信データ用バッファ ７，27 データベース管理システム内通信制御部 ８，28 周期起動処理部 ９，29 周期起動情報登録テーブル 10，30 データ送信要求処理部 11，31 データ格納処理部 12，32 データベース 13 データ格納処理手段 14 残データ有無判定処理手段 43 情報提供局群 44 データ管理センター 45 集中保守局 46 端局

Claims (1)

【特許請求の範囲】
1. 【請求項１】 情報処理システムに蓄積されているデー
   タを通信回線を介して一定周期でデータ送信要求を行う
   事により収集し、収集したデータをデータベースに格納
   するデータベース管理システムにおいて、 情報処理システム（１）に、データ送信処理部（３）と
   通信制御部（４）とデータ読込処理部（５）と送信デー
   タ用バッファ（６）とを有し、 データベース管理システム（２）に、通信制御部（７）
   と周期起動処理部（８）と周期起動情報登録テーブル
   （９）とデータ送信要求処理部（10）とデータ格納処理
   部（11）とデータベース（12）とを有し、 該データベース管理システム（２）のデータ格納処理部
   （11）に、データ格納処理手段（13）と残データ有無判
   定処理手段（14）とを設け、 データベース管理システム（２）において、周期的に送
   信するデータ送信要求により情報処理システム（１）よ
   り受信したデータをデータ格納処理手段（13）によりデ
   ータベース（12）に格納後、残データ有無判定処理手段
   （14）により残データの有無を判定するようにし、残デ
   ータ有りが判定された場合、再度、データ送信要求処理
   部（10）を起動して送信要求を行うことを特徴とする残
   データ有無情報判定機能を有するデータ収集方式。