JPH04312188A - データ収集システム - Google Patents
データ収集システムInfo
- Publication number
- JPH04312188A JPH04312188A JP3078079A JP7807991A JPH04312188A JP H04312188 A JPH04312188 A JP H04312188A JP 3078079 A JP3078079 A JP 3078079A JP 7807991 A JP7807991 A JP 7807991A JP H04312188 A JPH04312188 A JP H04312188A
- Authority
- JP
- Japan
- Prior art keywords
- data
- database
- file
- registration
- management table
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013480 data collection Methods 0.000 claims abstract description 13
- 230000004913 activation Effects 0.000 claims description 10
- 238000004891 communication Methods 0.000 claims description 9
- 238000000034 method Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 3
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【０００１】
【産業上の利用分野】本発明は、データを収集しデータ
ベースを構築する無停止のデータ収集システムに関し、
特に２４時間無停止でありデータ保護が必要なデータ収
集システムにおける応答時間短縮およびデータ保護方式
に関する。
ベースを構築する無停止のデータ収集システムに関し、
特に２４時間無停止でありデータ保護が必要なデータ収
集システムにおける応答時間短縮およびデータ保護方式
に関する。
【０００２】
【従来の技術】従来、この種のデータ収集システムは、
通信管理手段により受け取ったデータをデータベース登
録手段により直接データベースファイルに登録するシス
テムであった。
通信管理手段により受け取ったデータをデータベース登
録手段により直接データベースファイルに登録するシス
テムであった。
【０００３】
【発明が解決しようとする課題】上述した従来のデータ
収集システムでのデータベースへと登録方法では、１件
のデータにより処理されるデータベース登録手段の複雑
さ、およびデータベースの処理量に比例して応答を返す
までの時間が増加してしまうという欠点がある。
収集システムでのデータベースへと登録方法では、１件
のデータにより処理されるデータベース登録手段の複雑
さ、およびデータベースの処理量に比例して応答を返す
までの時間が増加してしまうという欠点がある。
【０００４】また、データベースファイルがオーバーフ
ローするなどの不測の事態が発生するとデータベース登
録手段が動作できなくなり、復旧するまでデータの収集
ができないという欠点がある。
ローするなどの不測の事態が発生するとデータベース登
録手段が動作できなくなり、復旧するまでデータの収集
ができないという欠点がある。
【０００５】
【課題を解決するための手段】本発明は、データベース
ファイル部とデータを受信する通信管理手段とを備えた
データ収集システムにおいて、前記通信管理手段より受
け取ったデータを一時的に登録するデータファイルと、
前記データファイルの登録状況を管理するデータ登録管
理テーブルと、前記データファイルに一時的に登録され
たデータをデータベースファイルに登録するデータベー
ス登録手段と、前記データベース登録手段の起動をジョ
ブスケジューラに要求するデータベース登録起動手段と
、前記データファイルのどの位置よりデータを読み込み
前記データベースファイルに登録するかということおよ
び前記データベース登録起動手段により前記データベー
ス登録手段を起動する間隔を管理するデータベース登録
管理テーブルとを有する。
ファイル部とデータを受信する通信管理手段とを備えた
データ収集システムにおいて、前記通信管理手段より受
け取ったデータを一時的に登録するデータファイルと、
前記データファイルの登録状況を管理するデータ登録管
理テーブルと、前記データファイルに一時的に登録され
たデータをデータベースファイルに登録するデータベー
ス登録手段と、前記データベース登録手段の起動をジョ
ブスケジューラに要求するデータベース登録起動手段と
、前記データファイルのどの位置よりデータを読み込み
前記データベースファイルに登録するかということおよ
び前記データベース登録起動手段により前記データベー
ス登録手段を起動する間隔を管理するデータベース登録
管理テーブルとを有する。
【０００６】
【実施例】次に、本発明について図面を参照して詳細に
説明する。
説明する。
【０００７】図１は、本発明の一実施例の無停止データ
収集システムの構成を示すブロック図である。この無停
止データ収集システムは、電子計算機１とデータを一時
登録するデータファイル部２とデータベースを構築する
データベース部３とからその主要部が構成されている。
収集システムの構成を示すブロック図である。この無停
止データ収集システムは、電子計算機１とデータを一時
登録するデータファイル部２とデータベースを構築する
データベース部３とからその主要部が構成されている。
【０００８】電子計算機１はデータを収集する通信管理
手段１１と、収集したデータをデータファイル部２に一
時登録する登録手段１２と、データファイル部２に一時
登録されたデータをデータベースに登録するデータベー
ス登録手段１３と、データベース登録手段の起動を要求
するデータベース登録起動手段１４およびジョブのスケ
ジューリング機能を有するジョブスケジューラ１５とを
含んで構成される。
手段１１と、収集したデータをデータファイル部２に一
時登録する登録手段１２と、データファイル部２に一時
登録されたデータをデータベースに登録するデータベー
ス登録手段１３と、データベース登録手段の起動を要求
するデータベース登録起動手段１４およびジョブのスケ
ジューリング機能を有するジョブスケジューラ１５とを
含んで構成される。
【０００９】データファイル部２は外部記憶装置状に設
けられていて、収集したデータを一時登録するデータフ
ァイル２２と、次に収集されたデータをデータファイル
２２のどの位置に登録するかおよびデータファイル２２
に何件のデータを登録させることができるかを管理する
データ登録管理テーブル２１とから構成される。
けられていて、収集したデータを一時登録するデータフ
ァイル２２と、次に収集されたデータをデータファイル
２２のどの位置に登録するかおよびデータファイル２２
に何件のデータを登録させることができるかを管理する
データ登録管理テーブル２１とから構成される。
【００１０】データベースファイル部３は実際にデータ
を登録するデータベースファイル３２と、処理開始時に
データファイル中のどのデータより処理するかを管理し
、また、次回のデータベースー登録手段の起動までの時
間を管理するデータベース登録管理テーブル３１とから
なっている。
を登録するデータベースファイル３２と、処理開始時に
データファイル中のどのデータより処理するかを管理し
、また、次回のデータベースー登録手段の起動までの時
間を管理するデータベース登録管理テーブル３１とから
なっている。
【００１１】図２を参照すると、データ登録管理テーブ
ル２１は管理番号と更新レコード番号と最終レコード番
号を１エントリとして複数エントリを格納するようにな
っている。
ル２１は管理番号と更新レコード番号と最終レコード番
号を１エントリとして複数エントリを格納するようにな
っている。
【００１２】図３を参照すると、データベース登録管理
テーブル３１は管理番号と、データベースの前回の処理
の最終レコードを管理する処理済みレコード番号とデー
タベース登録手段１３の起動間隔を管理する処理起動間
隔を１エントリとして複数エントリを格納するようにな
っている。なお、１つのデータファイル２１にデータ登
録管理テーブル２１とデータベース登録管理テーブル３
１の１エントリが対応している。
テーブル３１は管理番号と、データベースの前回の処理
の最終レコードを管理する処理済みレコード番号とデー
タベース登録手段１３の起動間隔を管理する処理起動間
隔を１エントリとして複数エントリを格納するようにな
っている。なお、１つのデータファイル２１にデータ登
録管理テーブル２１とデータベース登録管理テーブル３
１の１エントリが対応している。
【００１３】次に、本実施例の無停止データ収集システ
ムの動作について説明する。
ムの動作について説明する。
【００１４】通信管理手段１１を通してデータが収集さ
れるとデータ登録手段１２はデータ登録管理テーブル２
１中の更新レコード番号を参照し、それに１を加えた値
のデータファイル２１のレコード番号の位置にデータを
格納する。この時、もしレコード番号がデータ登録管理
テーブルの最終レコード番号よりも大きければ、レコー
ド番号を１に変更してデータを格納する。そして格納し
たレコード番号の値でデータ登録管理テーブル２１の更
新レコード番号の値を更新する。そしてデータ登録手段
１２は通信管理手段１１を通じて応答を返す。このよう
にデータはデータファイル２２に一時登録され、オーバ
ーフローすることはない。
れるとデータ登録手段１２はデータ登録管理テーブル２
１中の更新レコード番号を参照し、それに１を加えた値
のデータファイル２１のレコード番号の位置にデータを
格納する。この時、もしレコード番号がデータ登録管理
テーブルの最終レコード番号よりも大きければ、レコー
ド番号を１に変更してデータを格納する。そして格納し
たレコード番号の値でデータ登録管理テーブル２１の更
新レコード番号の値を更新する。そしてデータ登録手段
１２は通信管理手段１１を通じて応答を返す。このよう
にデータはデータファイル２２に一時登録され、オーバ
ーフローすることはない。
【００１５】データベース登録起動手段１４は、データ
ベース登録管理テーブル３１の処理起動間隔を元に一定
時間ごとにデータベース登録手段１３の起動をジョブス
ケジューラ１５に要求する。これによりジョブスケジュ
ーラ１５はデータベース登録手段１３を起動する。
ベース登録管理テーブル３１の処理起動間隔を元に一定
時間ごとにデータベース登録手段１３の起動をジョブス
ケジューラ１５に要求する。これによりジョブスケジュ
ーラ１５はデータベース登録手段１３を起動する。
【００１６】データベース登録手段１３は、データベー
ス登録管理テーブル３１の処理済みレコード番号を取り
込み、それに１を加えた値のデータファイル２２の位置
よりデータを取り込みデータベースファイル３２にデー
タを構築する。その後レコード番号を順次１加算して処
理をつづけ、データ登録管理テーブル２１の更新レコー
ド番号の値になるまでつづける。又、レコード番号がデ
ータ登録管理テーブル２１の最終レコード番号より多き
くなった場合はレコード番号を１に変更して処理する。 その後データベース登録管理テーブルの処理済みレコー
ド番号の内容を現在のレコード番号の値に変更して処理
を終了する。
ス登録管理テーブル３１の処理済みレコード番号を取り
込み、それに１を加えた値のデータファイル２２の位置
よりデータを取り込みデータベースファイル３２にデー
タを構築する。その後レコード番号を順次１加算して処
理をつづけ、データ登録管理テーブル２１の更新レコー
ド番号の値になるまでつづける。又、レコード番号がデ
ータ登録管理テーブル２１の最終レコード番号より多き
くなった場合はレコード番号を１に変更して処理する。 その後データベース登録管理テーブルの処理済みレコー
ド番号の内容を現在のレコード番号の値に変更して処理
を終了する。
【００１７】
【発明の効果】以上説明したように本発明は、データ登
録手段とデータベース登録手段を分けて設け、データ登
録手段は無限回繰り返し、データベース登録手段は一定
時間ごとに起動され、それまでに収集されデータファイ
ルに一時的に登録されたデータによりデータベースを構
築するようにしたことにより、データベース登録手段の
複雑さおよびデータベースの処理量によらず一定した時
間で応答を返すことができ、またデータベースがオーバ
ーフローするなどの不測の事態が発生してもデータ収集
は止めずにデータベースの復旧後それまでのデータをデ
ータベースに登録することができる効果がある。
録手段とデータベース登録手段を分けて設け、データ登
録手段は無限回繰り返し、データベース登録手段は一定
時間ごとに起動され、それまでに収集されデータファイ
ルに一時的に登録されたデータによりデータベースを構
築するようにしたことにより、データベース登録手段の
複雑さおよびデータベースの処理量によらず一定した時
間で応答を返すことができ、またデータベースがオーバ
ーフローするなどの不測の事態が発生してもデータ収集
は止めずにデータベースの復旧後それまでのデータをデ
ータベースに登録することができる効果がある。
【図１】本発明の一実施例のデータ収集システムを示す
ブロック図である。
ブロック図である。
【図２】図１中のデータ登録管理テーブル２１の内容を
示す図である。
示す図である。
【図３】図１中のデータベースー登録管理テーブル３１
の内容を示す図である。
の内容を示す図である。
１ 電子計算機
２ データファイル部
３ データベースファイル部
１１ 通信管理手段
１２ データ登録手段
１３ データベース登録手段
１４ データベース登録起動手段１５ ジ
ョブスケジューラ ２１ データ登録管理テーブル ２２ データファイル ３１ データベース登録管理テーブル３２
データベースファイル
ョブスケジューラ ２１ データ登録管理テーブル ２２ データファイル ３１ データベース登録管理テーブル３２
データベースファイル
Claims (1)
- 【請求項１】 データベースファイル部とデータを受
信する通信管理手段とを備えたデータ収集システムにお
いて、前記通信管理手段より受け取ったデータを一時的
に登録するデータファイルと、前記データファイルの登
録状況を管理するデータ登録管理テーブルと、前記デー
タファイルに一時的に登録されたデータをデータベース
ファイルに登録するデータベース登録手段と、前記デー
タベース登録手段の起動をジョブスケジューラに要求す
るデータベース登録起動手段と、前記データファイルの
どの位置よりデータを読み込み前記データベースファイ
ルに登録するかということおよび前記データベース登録
起動手段により前記データベース登録手段を起動する間
隔を管理するデータベース登録管理テーブルとを有する
ことを特徴とするデータ収集システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3078079A JPH04312188A (ja) | 1991-04-11 | 1991-04-11 | データ収集システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3078079A JPH04312188A (ja) | 1991-04-11 | 1991-04-11 | データ収集システム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH04312188A true JPH04312188A (ja) | 1992-11-04 |
Family
ID=13651840
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP3078079A Pending JPH04312188A (ja) | 1991-04-11 | 1991-04-11 | データ収集システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH04312188A (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007156844A (ja) * | 2005-12-05 | 2007-06-21 | Toshiba Corp | データ登録・検索システムおよびデータ登録・検索方法 |
-
1991
- 1991-04-11 JP JP3078079A patent/JPH04312188A/ja active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007156844A (ja) * | 2005-12-05 | 2007-06-21 | Toshiba Corp | データ登録・検索システムおよびデータ登録・検索方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP0500222B1 (en) | Method for reconciling entries in a plurality of lists | |
| DE3752196T2 (de) | Vorrichtung für Datenverarbeitungsverteilung über eine Mehrzahl von Steuerungsorten | |
| EP0573200B1 (en) | System and method for querying an append-only database-system | |
| EP1148428B1 (en) | Method and apparatus for evaluating queries according to received event information and generating notifications | |
| US6789115B1 (en) | System for collecting, analyzing, and reporting high volume multi-web server usage | |
| DE69524760T2 (de) | Verfahren zum erzwingen einer hierarchischen anrufstruktur in asynchronen echtzeitsoftwareanwendungen | |
| EP0352050A3 (en) | Single-keyed indexed file for tp queue repository | |
| US4792921A (en) | Network event identifiers | |
| WO2002097572A2 (en) | System and method for scheduling an event over a network | |
| AU2002305714A1 (en) | System and method for scheduling an event over a network | |
| CN115269515B (zh) | 一种检索指定目标文档数据处理方法 | |
| CN110083600A (zh) | 一种日志收集处理的方法、装置、计算设备及存储介质 | |
| EP1703390A1 (en) | Tuple space operations for fine grained system control | |
| CN109298929A (zh) | 定时任务执行时间推荐方法、装置、设备和存储介质 | |
| CN109582446A (zh) | 准实时异步批量处理系统、方法、装置和存储介质 | |
| WO2018206304A1 (de) | Datenbank mit feldbezogenen zeitstempeln | |
| US7475088B2 (en) | Systems and methods of providing data from a data source to a data sink | |
| JPH04312188A (ja) | データ収集システム | |
| Shanthikumar | Level crossing analysis of priority queues and a conservation identity for vacation models | |
| JPH02268365A (ja) | 情報処理システム | |
| CN117633018A (zh) | 一种查询方法、装置、电子设备及存储介质 | |
| JPH05165794A (ja) | 分散掲示板システム | |
| US20210089513A1 (en) | Time-to-run column for database management systems | |
| CN113220354A (zh) | 锁屏解锁的应用唤醒方法、装置、设备及存储介质 | |
| Florentin | Data base representations of application models |