JP2004171326A - Using method of software - Google Patents

Using method of software Download PDF

Info

Publication number
JP2004171326A
JP2004171326A JP2002337481A JP2002337481A JP2004171326A JP 2004171326 A JP2004171326 A JP 2004171326A JP 2002337481 A JP2002337481 A JP 2002337481A JP 2002337481 A JP2002337481 A JP 2002337481A JP 2004171326 A JP2004171326 A JP 2004171326A
Authority
JP
Japan
Prior art keywords
software
processing
version
recognition
old
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002337481A
Other languages
Japanese (ja)
Inventor
Yasushi Yanagihara
靖司 柳原
Isamu Machida
勇 町田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2002337481A priority Critical patent/JP2004171326A/en
Publication of JP2004171326A publication Critical patent/JP2004171326A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To reduce risk in system operation at a character recognition software change by enabling a change to a new version of software while ensuring the recognition precision of an old version of software at the character recognition software change. <P>SOLUTION: When an old version of character recognition software is changed for a new version of character recognition software, for a period of transition from the old version software to the new version software, a real system recognizes characters with both new and old versions of software. Information about recognition precision of both new and old versions of software is collected statistically, and both recognition precision levels are compared. If the precision of the new version is higher than the precision of the old version, the introduction of the new version software is established. If the recognition precision of the old version software is higher, on the other hand, a complete change to the new version software may be withheld to enable concurrent operation using advantages of both old and new versions of software. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、ソフトウェアの使用方法に係り、特にイメージスキャナによって帳票の画像情報を得て、文字認識ソフトウェアによって画像情報から文字認識するシステムにおける文字認識ソフトウェアのバージョンアップ時におけるソフトウェアの運用使用方法に関する。
【0002】
【従来の技術】
電子情報機器のソフトウェアを旧版から新版に変更する場合には、旧版のソフトウェアの記憶されたメモリ領域に新版のソフトウェアをそのままインストールしている。通常、旧版のソフトウェアに新版のソフトエアが上書きされるので、メモリには旧版のソフトウェアは残っておらず、新版のソフトウェアによって以後の情報処理が実行される。
【0003】
一方、旧版のソフトウェアを新版(改良版含む)のソフトウェアに変更する際、新版ソフトウェアへの移行時のリスクを軽減する目的で、旧版のソフトウェアをメモリにそのまま残しておき、新版及び旧版の両方のソフトウェアをメモリに保持する状況を作り、旧版から新版への切り替え時に新版に不具合が発見された場合に管理者の命令によって旧版へ容易に戻すように運用する場合がある。例えば、特開2000−36867号公報(特許文献1)には、交換機システムにおけるプログラムのバージョンアップ方法が開示されている。即ち、新規プログラムを旧プログラムに上書きせずに格納し、この新規プログラムを試験的に運用する。運用の結果、不具合が発生した場合にはバージョンアップ手順を初めに戻すことなく、旧プログラムで運用し、旧プログラムとの入れ替えをスムーズに行おうとするものである。
【0004】
【特許文献1】
特開2000−36867号公報
【0005】
【発明が解決しようとする課題】
上記公知例の技術は、交換機システム装置における制御プログラムのバージョンアップに関するものであり、この公知例の技術が、光学式文字認識(OCR)技術を利用したシステムにそのまま適用できると言う示唆も無く、またOCR利用のシステムに特有の課題或いは構成に言及した記載も見当たらない。
【0006】
通常、OCR技術を利用したソフトウェア(文字認識ソフトウェア)を含む大規模システムにおいてソフトウェアの改良版を適用する場合、業務ソフトウェアやハードウェア制御ソフトウェアとは異なり、ソフトウェアの切り替えに係る運用リスクが相対的に高くなることがある。
【0007】
即ち、文字認識ソフトウェアは、一般的には認識アルゴリズムの改造や認識辞書の最適化により認識精度を高めることができるが、ソフトウェアの改良を目的としてこれらの変更が行われた後には、メーカ側は自社が有する評価用データにより精度の改善効果を評価する。しかしながら、評価用データは対象とする実システムでの運用において入力されるデータを必ずしも網羅したものではなく、メーカ側の過去の知識経験を元にした評価モデルを前提に作成されている。このため、ソフトウェアの改良時に着目した改善対象となるデータ以外のデータに関しては必ずしも改善効果が得られず、逆に旧版よりも新版ソフトウェアの認識精度の方が悪くなると言うこともある。これは、システムが対象とする母集合と評価モデルが対象とする集合に乖離があるためである。実際にシステム開発コストに制約があることを勘案すれば、このような乖離によるズレが文字認識の精度に少なからず影響を与えていると言う事実も認めざるを得ないところである。
【0008】
本発明の目的は、文字認識ソフトウェアの変更に際して、システムの運用のリスクを低減することができる文字認識ソフトウェアの使用方法を提供することにある。
また本発明の目的は、ソフトウェアの変更に際して、実システムにおいて旧版と新版の両方のソフトウェアを運用して文字認識精度を比較することにより、新版のソフトウェアに変更するか否かを判断することができるソフトウェアの使用方法を提供することにある。
本発明の目的は、一般的にはあるソフトウェアから同種の他のソフトウェアに変更するときのソフトウェアの運用使用方法を提供することにある。
【0009】
【課題を解決するための手段】
本発明は、文字認識ソフトウェアを用いて画像の文字を認識するシステムにおいて、新版のソフトウェアをメモリに格納し、かつ旧版のソフトウェアを実行可能な状態にしてメモリに格納しておき、画像の文字の認識要求があった場合、同じ対象に関して旧版ソフトウェアの実行によって認識処理すると共に、新版のソフトウェアの実行によって認識処理し、双方のソフトウェアの認識結果から認識精度に関する情報を夫々収集して記憶装置に格納し、後に夫々のソフトウェアに対する認識精度に関する情報を参照して、新版のソフトウェアへ移行するか否かを決めるようにするものである。
このように、実システムの運用に即した評価結果が得られ、その結果として新版ソフトウェアへの移行が行えるため、ソフトウェアの切り替えに関するシステム運用リスクを軽減させることができる。
上記システムにおいて、新版及び旧版のソフトウェアに関連する認識精度に関する情報として、帳票の種類毎の処理頻度、認識精度に関する情報を収集して記憶装置に格納しておき、新版ソフトウェアへの移行の判断に際しては帳票毎の処理頻度、認識精度に関する情報を用いる。
また、新版旧版のソフトウェアによる認識結果によっては、例えば更なる新版のソフトウェアが提供されるまでの期間、前記記憶装置に格納された認識精度の情報に従って、認識精度の高い方の版のソフトウェアに切り替えながら使用する。この方法によれば、旧版ソフトウェアの認識精度を維持しながら、新版ソフトウェアも使用することができる。
【0010】
文字認識ソフトウェアを利用した好ましいシステムは、センタサーバ(第1サーバ)と、これにネットワークを介して接続されるローカルなサーバ装置(第2サーバ装置)と、この第2サーバ装置に接続されるクライアント装置より構成される。通常は、クライアント装置に記憶されている文字認識ソフトウェアにより文字認識が行われるが、ソフトウェアのバージョンアップに際しては、このソフトウェアは第2サーバ装置に移され、このソフトウェアは旧版ソフトウェア(第1のソフトウェア)扱いとなる。一方、クライアント装置には変更対象となる新版の文字認識ソフトウェア(第2のソフトウェア:第1のソフトウェアの改良版或いは新版)がインストールされる。
クライアント装置においては帳票等からの画像データが取得され、この画像情報はクライアント装置だけでなく、第2サーバ装置にも送られる。クライアント装置では新版の文字認識ソフトウェアにより認識が行われ、また第2サーバ装置では旧版の文字認識ソフトウェアによる文字認識が行われる。双方のソフトウェアによる認識結果は統計情報として第1サーバへ送され、記憶装置に格納される。ソフトウェアの移行に際して決められたある期間経過後、第1サーバの記憶装置に蓄積された旧版及び新版の文字認識ソフトウェアによる認識精度の情報が出力され、この情報に従って、新版ソフトウェアへの切り替えるか、即ち新版ソフトウェアによる全面的な運用を行うか否かの判断を行う。この判断は、センタサーバ装置で判断処理されても良いし、判断自体は導入する者によって行なわれても良い。
【0011】
本発明は、広義にはあるソフトウェア(第1)から同種の他のソフトウェア(第2)に変更するときのソフトウェアの運用処理に適用できる。即ち、あるシステムにおいて、ある処理目的のための第1のソフトウェアを実行して処理するステップと、第1のソフトウェアを実行可能な状態でシステムに残したまま、第1のソフトウェアと同種であって最終的には第1のソフトウェアと置き換えられる対象となる第2のソフトウェアをインストールするステップと、第2のソフトウェアを実行して処理するステップと、システムにある処理要求が発生した場合、第1のソフトウェアによる処理と第2のソフトウェアによる処理とを並行的に行うステップと、第1及び第2のソフトウェアによる処理結果から双方のソフトウェアによる実行性能に関する情報を収集するステップと、第2のソフトウェアの実行性能が良いか又は第1のソフトウェアによる実行性能が良いかを判断するために、収集された情報を用いるステップとを有する。
また、上記運用処理において、収集結果に基づき第1のソフトウェアが第2のソフトウェアよりも良いと判断された場合、以後第1のソフトウェアによる処理と第2のソフトウェアによる処理とを併用して処理を行う。これにより双方のソフトウェアの良いところを利用できる。
【0012】
【発明の実施の形態】
以下、本発明の実施例を図面により詳細に説明する。
図1は、文字認識ソフトウェアを使用したOCR処理を行うシステムの構成例である。このシステムは、センタ107と、WANのようなネットワーク106を介して接続される営業拠点101とから構成される。一般的にシステム内には複数の営業拠点101が存在すると想定してよい。営業拠点101には、センタ側とのデータの中継を行う営業拠点サーバ105とLAN104を介して複数のクライアント装置102が接続される。また各クライアント装置102には帳票を画像データ化するスキャナ装置103が接続されている。
センタ107には、各営業拠点101からネットワーク106を介して送信されてくる業務データや統計データを統括管理するセンタサーバ108が設置されている。
【0013】
図2は、営業拠点101に設定されているクライアント装置の構成例を示す。クライアント装置201は、外部とのデータ入出力を制御するためのI/O制御部206を備える。このI/O制御部206には、オペレータに指示を促すディスプレイ202、オペレータの指示を入力するキーボード203、帳票を画像データ化するイメージスキャナ204、営業拠点サーバ105とのデータ通信を行うためのLANボード205が接続されている。また、メモリ207には、営業窓口の業務処理を実現する業務ソフトウェア208、各ソフトウェア及びI/O制御部206間のデータ交換を支援する制御ソフトウェア209、イメージスキャナ204で画像データ化された帳票の種別を特定する帳票識別ソフトウェア210、ならびに帳票種が判明した帳票画像データの各フィールドの文字認識を行う文字認識ソフトウェア211が格納されている。ここで、文字認識ソフトウェア211は、改良された認識精度が良くなった新版の文字認識ソフトウェアである。各ソフトウェアに内包されるプログラムの実行命令はCPU212によって実行され、データの入出力が必要な場合にはI/O制御部206を介してディスプレイ乃至LANボード202〜205のような周辺機器を制御する。
【0014】
図3は、営業拠点101に設定されているサーバ装置105の構成例を示す。サーバ装置301は外部とのデータ入出力を制御するためのI/O制御305を備える。このI/O制御部305には、サーバ装置301の内部状態を表示するディスプレイ部302、クライアント装置102とのデータ通信を行うためのLANボード303、センタサーバとの通信を行うためのモデム304が接続されている。また、メモリ306には、各ソフトウェア及びI/O制御部305間のデータ交換を支援するサーバ制御ソフトウェア307、クライアント装置から送信されてきた帳票画像データの各フィールドの文字認識を行う文字認識ソフトウェア308が格納されている。ここで、この文字認識ソフトウェア308は、改良前の旧版の文字認識ソフトウェアである。各ソフトウェアに内包されるプログラムの実行命令はCPU309によって実行され、データの入出力が必要な場合にはI/O制御部305を介してディスプレイ302〜モデム304の如き周辺機器を制御する。
【0015】
図4は、センタ107に設定されているサーバ装置108の構成例を示す。サーバ装置401は外部とのデータ入出力を制御するためのI/O制御部406を備え、このI/O制御部406には、サーバ装置401の内部状態を表示するディスプレイ402、データを保存するための装置であるハードディスク装置(記憶装置)403、営業拠点サーバ105と通信を行うためのモデム405が接続されている。
【0016】
ハードディスク装置403には、各営業拠点で行われた文字認識処理の結果を日時/帳票毎に編集して記録しておくための統計情報ファイル404が格納される。
図5に、ハードディスク装置における統計情報ファイル404の格納テーブルの概略を示す。図の(5B)及び(5C)に示すものが統計ファイルに格納されるテーブルである。図の(5A)に示すテーブルは各支店の拠点サーバのメモリに記憶されるテーブルでるが、帳票毎、ソフトウェア(プログラム)のバージョン毎に読取り率などの情報が記憶されている。センタサーバ108、401はこの支店テーブル(5A)から関連する情報を取得して、編集して、図(5B)、(5C)に示すようなテーブルを作成して、ファイル404に格納する。(5B)は旧版のソフトウェアによる読取り率などの情報を帳票毎に格納する。(5C)は新版のソフトウェアによる読取り率などの情報を帳票毎に格納する。いずれも同じ期間における集計である。
【0017】
再び説明を図4に戻して、メモリ407には、各ソフトウェア及びI/O制御部406間のデータ交換を支援するサーバ制御ソフトウェア408、営業拠点から送信されてきた統計情報の記録および営業拠点クライアント装置102からの問い合わせ依頼である文字認識ソフトウェアの使用判定依頼(統計情報を元に文字認識ソフトウェアの新版211を使うか、旧版308を使うかを判定する処理依頼)を処理する統計情報記録判定モジュール409が格納されている。各ソフトウェアに内包されるプログラムの実行命令はCPU410によって実行され、データの入出力が必要な場合にはI/O制御部406を介してディスプレイ402〜モデム405の如き周辺機器を制御する。
【0018】
図6は、文字認識ソフトウェアの移行期間中におけるシステム内の認識処理方式の例を示すフローチャートである。以下、具体的な処理の流れを説明する。
まず、イメージスキャナ204によって帳票の画像を光学的に読み取り、画像データとして電子化する(501)。次に、帳票識別ソフトウェア210により帳票の種別を識別する(502)。電子化された画像データは、クライアント装置102と拠点サーバ105の双方で並行して文字認識の処理が行われることになるが、まず営業拠点サーバ105の旧版ソフトウェア308による文字認識処理を行うために、クライアント装置102から営業拠点サーバ105へ文字認識処理を依頼する(503)。認識の対象となる画像データもサーバ105へ送られる。並行してクライアント装置102の新版ソフトウェア211による文字認識処理が行われる。
営業拠点サーバ105では、旧版ソフトウェアによる文字認識処理を行う(505)。その後、文字認識処理の結果をクライアント装置102に連絡する(506)。
【0019】
クライアント装置102では、新版ソフトウェア211による文字認識処理(504)が行われた後、新版ソフトウェアによる認識結果と、サーバ105から送られて来た旧版ソフトウェア308による文字認識処理(505)の結果を不読率に着目して比較する(507)。ここで、不読率とは文字認識処理ソフトウェアによって認識対象文字が正しく認識できなかった文字の総和の全体文字数に対する割合を示すものである。新版ソフトウェア211の不読率が低い場合は、新版ソフトウェアによる文字認識結果をコード化されたデータとして業務処理に採用する(508)。一方、旧版ソフトウェア308の不読率が低い場合は、旧版ソフトウェア308による文字認識結果をコード化されたデータとして業務処理に用いる(509)。
【0020】
営業拠点のクライアント装置102では、不読率の低い処理結果を入力として業務ソフトウェア208により業務処理が行なわれる(510)。そして、帳票種/処理日時/文字認識結果の採用情報(新版と旧版のいずれのソフトウェアを採用したかを示す情報)をセンタサーバ108へ送信する(511)。この通信では、営業拠点サーバ105が中継サーバとして利用される。センタサーバ401ではクライアント装置102から送信されてきた情報を統計情報として処理してハードディスク403に記録する(512)。これにより一連の処理が終わる。
【0021】
図7は、文字認識ソフトウェアの移行期間の経過後、新版の文字認識ソフトウェア211の認識精度が旧版308よりも悪かった場合のソフトウェアの運用方法について説明するものである。本例では、新たな改良版ソフトウェアが提供されるまでの期間、旧版ソフトウェア308に戻すのではなく、新旧両方の文字認識ソフトウェアを併用するやり方で、システムとしての認識能力を低下させないようにするものである。言わばソフトウェアの移行措置における運用方法である。
以下、具体的な処理の流れを説明する。まず、イメージスキャナ204によって帳票の画像を読み取り画像データとして電子化する(601)。次に、帳票識別ソフトウェア210により帳票の種別を識別する(602)。この時点で、帳票の種別と処理日時が確定しているため、当該条件で新旧いずれの文字認識ソフトウェアを使うべきかをセンタサーバ108へ問い合わせる(603)。この問い合わせは、クライアント装置102がセンタサーバ108に対して行うが、営業拠点サーバ105が中継サーバとして利用される。
【0022】
センタサーバ108においては、蓄積された統計情報ファイル404を元に認識精度が高い版の文字認識ソフトウェアに関する識別情報が生成され、新版又は旧版いずれの版による文字認識ソフトウェアの認識精度が高いか判定される(604)。その判定結果が営業拠点のクライアント装置102に送信される(605)。
営業拠点クライアント側では、取得した判定結果を元に認識精度が高い文字認識ソフトウェアを使って文字認識処理が行われる(606)。新版のソフトウェア211の精度が高いと判定された場合はクライアント装置102内で文字認識処理を実行する(607)。一方、旧版308のソフトウェアの精度が高いと判定された場合には営業拠点サーバ105に文字認識処理を依頼することになる(608)。
後者の場合、営業拠点サーバ301では、クライアント装置102から送信された帳票画像データに対して旧版の文字認識ソフトウェア308により文字認識処理が行われる(609)。その結果、営業拠点サーバ105からクライアント装置102に対して文字認識結果が連絡される(610)。
【0023】
営業拠点のクライアント装置102は、新版ソフトウェア211または旧版ソフトウェア308のいずれかのソフトウェアによる文字認識処理結果をコード化データとして確定する(611)。その後、コード化されたデータを入力として業務ソフトウェア208により業務処理が行われる(612)。これにより営業拠点における一連の業務処理が終わる。
【0024】
この方法によれば、旧版ソフトウェアの認識精度を維持しながら、新版ソフトウェアの認識精度を算定することができる。このように、実システムの運用に即した評価結果が得られ、その結果として新版ソフトウェアの切り替えが行えるため、ソフトウェア切り替えに関するシステム運用リスクを軽減させることができる。また、移行期間中に新旧両版の文字認識ソフトウェアに対する日時毎/帳票種毎の認識精度の優劣を統計情報として収集することが可能であるため、さらなる改良版ソフトウェアに搭載する認識アルゴリズムを検討する際の参考資料として用いることもできる。
【0025】
以上本発明の実施例について説明したが、上記した例以外にも種々変更したり、応用したりして実施し得る。本発明は文字認識システムにおける認識ソフトウェアのバージョンアップに際して適用できるだけでなく、他のシステム例えば情報検索システム等においても適用できる。情報検索システムに適用した場合でも、実システムにおける新旧の情報検索用のソフトウェアによる運用から、評価の対象となる実行性能に関する情報(この場合は検索精度或いは検索性能、検索スピード等に関する情報)を統計的に収集しておき、その情報の解析結果に基づいて、新版のソフトウェアを採用するか否か判断することができる。
【0026】
【発明の効果】
以上説明したように、本発明によれば、システムにおけるソフトウェアの変更に際して、実システムにおいて旧版と新版の両方のソフトウェアを実際に運用して、その結果を参照して新版のソフトウェアに変更するか否かの判断を行える。とりわけ文字認識ソフトウェアの変更に際しては、実システムの運用に即した評価結果、即ち文字認識ソフトウェアに特徴的な文字認識精度に基づいて新旧双方のソフトウェアの評価結果を統計的に得ることができ、これに基づいて新版ソフトウェアの切り替えの判断が行えるため、新版ソフトウェアの導入に際してのシステム運用リスクを軽減させることができる。
【図面の簡単な説明】
【図1】本発明の一実施例によるOCR技術を利用したシステムの構成を示す図。
【図2】営業拠点におけるクライアント装置の構成例を示す図。
【図3】営業拠点におけるサーバ装置の構成例を示す図。
【図4】センタにおけるサーバ装置の構成例を示す図。
【図5】ハードディスク装置における統計情報ファイルの格納テーブルの概略を示す図。
【図6】文字認識ソフトウェアの移行期間中における認識処理の動作を示すフローチャート図。
【図7】文字認識ソフトウェアの移行期間の経過後における認識処理の動作を示すフローチャート図。
【符号の説明】
101 営業拠点、 102、201 クライアント装置
103 イメージスキャナ、 104 LAN、
105、108、301、401 サーバ装置、 106 ネットワーク、
107 センタ、 108 サーバ装置、
202、302、402 ディスプレイ、
203 キーボード、 204 イメージスキャナ、
205、303 LANボード、 206、305、406 I/O制御部、
207、306、407 メモリ、 208 業務ソフトウェア、
209 制御ソフトウェア、 210 帳票識別ソフトウェア、
211 新版の文字認識ソフトウェア、 212、309、410 CPU
307 サーバ制御ソフトウェア、 308 旧版の文字認識ソフトウェア、
403 ハードディスク装置、 404 統計情報ファイル、
408 サーバ制御ソフトウェア、 409 統計情報記録判定モジュール。
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a method of using software, and more particularly to a method of operating software when upgrading character recognition software in a system in which image information of a form is obtained by an image scanner and characters are recognized from image information by character recognition software.
[0002]
[Prior art]
When changing the software of the electronic information device from the old version to the new version, the new version software is installed in the memory area where the old version software is stored. Normally, the old version of software is overwritten with the new version of software, so that the old version of software does not remain in the memory, and subsequent information processing is executed by the new version of software.
[0003]
On the other hand, when the old software is changed to the new (including improved) software, the old software is left in memory to reduce the risk of transition to the new software. In some cases, a situation is created in which the software is stored in a memory, and if a problem is found in the new version when switching from the old version to the new version, the old version can be easily returned to by an administrator's command. For example, Japanese Patent Laying-Open No. 2000-36867 (Patent Document 1) discloses a method of upgrading a program in an exchange system. That is, the new program is stored without overwriting the old program, and the new program is operated on a trial basis. If a failure occurs as a result of the operation, the old program is used and the replacement with the old program is smoothly performed without returning the version upgrade procedure to the beginning.
[0004]
[Patent Document 1]
JP 2000-36867 A
[Problems to be solved by the invention]
The technique of the above-mentioned known example relates to version-up of a control program in an exchange system apparatus, and there is no suggestion that the technique of this known example can be directly applied to a system using an optical character recognition (OCR) technique. In addition, there is no description referring to issues or configurations specific to the system using the OCR.
[0006]
Generally, when an improved version of software is applied to a large-scale system including software using OCR technology (character recognition software), unlike business software or hardware control software, the operational risk associated with software switching is relatively high. May be higher.
[0007]
In other words, character recognition software can generally improve recognition accuracy by modifying the recognition algorithm or optimizing the recognition dictionary, but after these changes are made for the purpose of improving the software, the manufacturer side Evaluate the effect of improving accuracy using the evaluation data owned by the company. However, the evaluation data does not necessarily cover the data input in the operation of the target real system, and is created based on an evaluation model based on the past knowledge experience of the manufacturer. Therefore, an improvement effect is not always obtained for data other than the data to be improved focused on when the software is improved, and conversely, the recognition accuracy of the new version software may be lower than that of the old version. This is because there is a difference between the set targeted by the system and the set targeted by the evaluation model. In view of the fact that the system development cost is actually limited, it has to be admitted that the deviation due to the deviation has a considerable effect on the accuracy of character recognition.
[0008]
It is an object of the present invention to provide a method of using character recognition software that can reduce the risk of operating the system when changing the character recognition software.
Another object of the present invention is to determine whether to change to a new version of software by comparing the character recognition accuracy by operating both the old version and the new version of software in a real system when changing the software. It is to provide a method of using software.
SUMMARY OF THE INVENTION It is an object of the present invention to provide a method for operating and using software when changing from one software to another of the same kind.
[0009]
[Means for Solving the Problems]
The present invention relates to a system for recognizing characters of an image using character recognition software, in which a new version of software is stored in a memory, and an old version of software is stored in a memory in an executable state. When there is a recognition request, the same object is recognized by executing the old version of software, and the new version of software is also recognized. The information on recognition accuracy is collected from the recognition results of both software and stored in the storage device. Then, referring to information on recognition accuracy of each software, it is determined whether or not to shift to a new version of software.
As described above, an evaluation result suitable for the operation of the actual system is obtained, and as a result, the migration to the new version of software can be performed. Therefore, the system operation risk relating to software switching can be reduced.
In the above system, information on the processing frequency for each type of form and information on the recognition accuracy are collected and stored in a storage device as information on the recognition accuracy related to the new version and the old version of software. Uses information on the processing frequency and recognition accuracy for each form.
Also, depending on the recognition result by the new and old software, for example, during the period until the further new software is provided, the software is switched to the higher recognition accuracy software according to the recognition accuracy information stored in the storage device. Use while According to this method, the new version software can be used while maintaining the recognition accuracy of the old version software.
[0010]
A preferred system using the character recognition software is a center server (first server), a local server device (second server device) connected thereto via a network, and a client connected to the second server device. It is composed of devices. Normally, character recognition is performed by character recognition software stored in the client device. However, when the software is upgraded, this software is transferred to the second server device, and this software is replaced with the old version software (first software). Will be treated. On the other hand, a new version of character recognition software (second software: an improved version or new version of the first software) to be changed is installed in the client device.
In the client device, image data from a form or the like is obtained, and this image information is sent not only to the client device but also to the second server device. The client device performs recognition using the new version of character recognition software, and the second server device performs character recognition using the old version of character recognition software. Recognition results from both software are sent to the first server as statistical information and stored in the storage device. After elapse of a certain period determined at the time of software transfer, information on the recognition accuracy of the old and new versions of character recognition software stored in the storage device of the first server is output, and according to this information, switching to the new version software is performed. A decision is made as to whether or not to perform full operation using the new software. This determination may be performed by the center server device, or the determination itself may be performed by an introductory person.
[0011]
INDUSTRIAL APPLICABILITY The present invention can be broadly applied to software operation processing when changing from one software (first) to another software of the same type (second). That is, in a certain system, executing and processing first software for a certain processing purpose, and the same type as the first software while the first software remains in an executable state in the system. A step of finally installing a second software to be replaced with the first software, a step of executing and processing the second software, and a first processing when a processing request is generated in the system. A step of performing the processing by the software and the processing by the second software in parallel; a step of collecting information on an execution performance by both the software from a processing result by the first and second software; and an execution of the second software To determine whether the performance is good or the execution performance by the first software is good And a step of using the collected information.
Further, in the above-described operation processing, when it is determined based on the collection result that the first software is better than the second software, the processing by using the processing by the first software and the processing by the second software is performed in combination. Do. This allows you to take advantage of both software.
[0012]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
FIG. 1 is a configuration example of a system that performs OCR processing using character recognition software. This system includes a center 107 and a sales base 101 connected via a network 106 such as a WAN. Generally, it may be assumed that a plurality of sales bases 101 exist in the system. A plurality of client devices 102 are connected to the sales base 101 via a LAN 104 and a sales base server 105 that relays data with the center. A scanner device 103 for converting a form into image data is connected to each client device 102.
The center 107 is provided with a center server 108 for centrally managing business data and statistical data transmitted from each sales base 101 via the network 106.
[0013]
FIG. 2 shows a configuration example of a client device set in the sales base 101. The client device 201 includes an I / O control unit 206 for controlling data input / output with the outside. The I / O control unit 206 includes a display 202 for prompting an operator, a keyboard 203 for inputting the operator's instruction, an image scanner 204 for converting a form into image data, and a LAN for performing data communication with the business base server 105. The board 205 is connected. In the memory 207, business software 208 for realizing business processing of the sales counter, control software 209 for supporting data exchange between each software and the I / O control unit 206, and a form of image data converted by the image scanner 204 are stored. The form identification software 210 for specifying the type and the character recognition software 211 for performing character recognition of each field of the form image data in which the form type has been found are stored. Here, the character recognition software 211 is a new version of character recognition software with improved recognition accuracy. An execution instruction of a program included in each software is executed by the CPU 212, and when data input / output is necessary, peripheral devices such as a display or LAN boards 202 to 205 are controlled via an I / O control unit 206. .
[0014]
FIG. 3 shows a configuration example of the server device 105 set in the sales base 101. The server device 301 includes an I / O control 305 for controlling data input / output with the outside. The I / O control unit 305 includes a display unit 302 for displaying the internal state of the server device 301, a LAN board 303 for performing data communication with the client device 102, and a modem 304 for performing communication with the center server. It is connected. The memory 306 includes server control software 307 for supporting data exchange between each software and the I / O control unit 305, character recognition software 308 for performing character recognition of each field of the form image data transmitted from the client device. Is stored. Here, the character recognition software 308 is an old version of character recognition software before the improvement. An execution instruction of a program included in each software is executed by the CPU 309, and when data input / output is necessary, peripheral devices such as the display 302 to the modem 304 are controlled via the I / O control unit 305.
[0015]
FIG. 4 shows a configuration example of the server device 108 set in the center 107. The server device 401 includes an I / O control unit 406 for controlling data input / output with the outside. In the I / O control unit 406, a display 402 for displaying the internal state of the server device 401 and data are stored. A hard disk device (storage device) 403 as a device for communication and a modem 405 for communicating with the sales office server 105 are connected.
[0016]
The hard disk device 403 stores a statistical information file 404 for editing and recording the result of the character recognition processing performed at each business base for each date and time / form.
FIG. 5 shows an outline of a storage table of the statistical information file 404 in the hard disk device. The tables shown in (5B) and (5C) in the figure are tables stored in the statistics file. The table shown in FIG. 5A is a table stored in the memory of the base server of each branch, and information such as a reading rate is stored for each form and for each version of software (program). The center servers 108 and 401 acquire relevant information from the branch table (5A), edit the information, create tables as shown in FIGS. 5B and 5C, and store the tables in the file 404. (5B) stores information such as the reading rate of the old version software for each form. (5C) stores information such as a reading rate by the new version of software for each form. Each is a tally in the same period.
[0017]
Returning to FIG. 4 again, the memory 407 includes server control software 408 for supporting data exchange between each software and the I / O control unit 406, recording of statistical information transmitted from the business base, and client of the business base. A statistical information recording determination module that processes a character recognition software use determination request (a processing request for determining whether to use the new version 211 or the old version 308 of character recognition software based on statistical information), which is an inquiry request from the device 102. 409 are stored. An execution instruction of a program included in each software is executed by the CPU 410, and when data input / output is necessary, peripheral devices such as the display 402 to the modem 405 are controlled via the I / O control unit 406.
[0018]
FIG. 6 is a flowchart illustrating an example of a recognition processing method in the system during the transition period of the character recognition software. Hereinafter, a specific processing flow will be described.
First, the image of the form is optically read by the image scanner 204 and digitized as image data (501). Next, the form type is identified by the form identification software 210 (502). The digitized image data is subjected to character recognition processing in parallel by both the client device 102 and the base server 105. First, in order to perform character recognition processing by the old version software 308 of the business base server 105, Then, the client device 102 requests the business base server 105 to perform a character recognition process (503). Image data to be recognized is also sent to the server 105. In parallel, the character recognition processing by the new version software 211 of the client device 102 is performed.
The business base server 105 performs a character recognition process using the old version software (505). Thereafter, the result of the character recognition processing is communicated to the client device 102 (506).
[0019]
After performing the character recognition processing (504) by the new software 211, the client device 102 does not recognize the result of the recognition by the new software and the result of the character recognition processing (505) by the old software 308 sent from the server 105. The comparison is made by paying attention to the reading rate (507). Here, the unread rate indicates the ratio of the total number of characters whose recognition target characters could not be correctly recognized by the character recognition software to the total number of characters. If the unread rate of the new version software 211 is low, the result of character recognition by the new version software is adopted as coded data for business processing (508). On the other hand, if the unread rate of the old version software 308 is low, the result of character recognition by the old version software 308 is used as coded data for business processing (509).
[0020]
In the client device 102 at the business base, business processing is performed by the business software 208 with the processing result having a low unread rate as input (510). Then, the adoption information of the form type / processing date / time / character recognition result (information indicating which software of the new version or the old version was adopted) is transmitted to the center server 108 (511). In this communication, the sales office server 105 is used as a relay server. The center server 401 processes the information transmitted from the client device 102 as statistical information and records it on the hard disk 403 (512). Thus, a series of processing ends.
[0021]
FIG. 7 illustrates a software operating method when the recognition accuracy of the new version of the character recognition software 211 is lower than that of the old version 308 after the elapse of the transition period of the character recognition software. In this example, in the period until the new improved software is provided, rather than reverting to the old software 308, both the new and old character recognition software are used in combination so that the recognition ability of the system is not reduced. It is. In other words, it is an operation method for software migration.
Hereinafter, a specific processing flow will be described. First, the image of the form is read by the image scanner 204 and digitized as image data (601). Next, the form type is identified by the form identification software 210 (602). At this point, since the form type and the processing date and time are determined, the center server 108 is inquired about which new or old character recognition software should be used under the conditions (603). This inquiry is made by the client device 102 to the center server 108, and the sales office server 105 is used as a relay server.
[0022]
The center server 108 generates identification information on the version of the character recognition software with high recognition accuracy based on the accumulated statistical information file 404, and determines whether the recognition accuracy of the new or old version of the character recognition software is high. (604). The result of the determination is transmitted to the client device 102 at the sales office (605).
On the client side of the sales office, character recognition processing is performed using character recognition software with high recognition accuracy based on the acquired determination result (606). If it is determined that the accuracy of the new version of the software 211 is high, a character recognition process is executed in the client device 102 (607). On the other hand, if the accuracy of the software of the old version 308 is determined to be high, the sales base server 105 is requested to perform character recognition processing (608).
In the latter case, the sales office server 301 performs character recognition processing on the form image data transmitted from the client device 102 by the old version of the character recognition software 308 (609). As a result, the sales base server 105 notifies the client device 102 of the character recognition result (610).
[0023]
The client device 102 at the business office determines the result of the character recognition processing by either the new software 211 or the old software 308 as coded data (611). Thereafter, business processing is performed by the business software 208 using the coded data as input (612). Thus, a series of business processes at the sales base is completed.
[0024]
According to this method, the recognition accuracy of the new version software can be calculated while maintaining the recognition accuracy of the old version software. As described above, an evaluation result suitable for the operation of the actual system is obtained, and as a result, the new version of the software can be switched. Therefore, the system operation risk related to the software switching can be reduced. In addition, during the transition period, it is possible to collect, as statistical information, the recognition accuracy of the old and new versions of the character recognition software for each date and time and for each form type as statistical information. It can also be used as a reference in such cases.
[0025]
Although the embodiment of the present invention has been described above, the present invention can be implemented with various modifications and applications other than the above-described example. The present invention can be applied not only when upgrading recognition software in a character recognition system, but also in other systems such as an information retrieval system. Even when applied to an information retrieval system, information on execution performance to be evaluated (in this case, information on retrieval accuracy or retrieval performance, retrieval speed, etc.) is statistically collected from the operation of new and old information retrieval software in a real system. It is possible to determine whether to adopt a new version of the software based on the analysis result of the information.
[0026]
【The invention's effect】
As described above, according to the present invention, when the software in the system is changed, both the old version and the new version of the software are actually operated in the actual system, and whether or not to change to the new version of the software with reference to the result is determined. Can be determined. In particular, when changing the character recognition software, the evaluation results based on the operation of the actual system, that is, the evaluation results of both the old and new software can be statistically obtained based on the character recognition accuracy characteristic of the character recognition software. Therefore, it is possible to reduce the risk of operating the system when introducing the new version software.
[Brief description of the drawings]
FIG. 1 is a diagram showing a configuration of a system using an OCR technology according to an embodiment of the present invention.
FIG. 2 is a diagram showing a configuration example of a client device in a business base.
FIG. 3 is a diagram showing a configuration example of a server device at a business base.
FIG. 4 is a diagram showing a configuration example of a server device in a center.
FIG. 5 is a diagram schematically showing a storage table of a statistical information file in a hard disk device.
FIG. 6 is a flowchart showing an operation of a recognition process during a transition period of the character recognition software.
FIG. 7 is a flowchart showing the operation of the recognition process after the transition period of the character recognition software has elapsed.
[Explanation of symbols]
101 business base, 102, 201 client device 103 image scanner, 104 LAN,
105, 108, 301, 401 server device, 106 network,
107 center, 108 server device,
202, 302, 402 display,
203 keyboard, 204 image scanner,
205, 303 LAN board, 206, 305, 406 I / O control unit,
207, 306, 407 memory, 208 business software,
209 control software, 210 form identification software,
211 New version of character recognition software, 212, 309, 410 CPU
307 server control software, 308 old character recognition software,
403 hard disk drive, 404 statistical information file,
408 server control software, 409 statistical information record determination module.

Claims (8)

文字認識ソフトウェアを用いて画像の文字を認識するシステムにおいて、新版のソフトウェアをメモリに格納し、かつ旧版のソフトウェアを実行可能な状態にしてメモリに格納しておき、画像の文字の認識要求があった場合、同じ対象に関して旧版ソフトウェアの実行によって認識処理すると共に、新版のソフトウェアの実行によって認識処理し、双方のソフトウェアの認識結果から認識精度に関する情報を夫々収集して記憶装置に格納し、後に夫々のソフトウェアに対する認識精度に関する情報を参照して、新版のソフトウェアへ移行するか否かを決めることを特徴とするソフトウェアの使用方法。In a system for recognizing characters of an image using character recognition software, a new version of the software is stored in a memory, and an old version of the software is stored in a memory in an executable state. In this case, the same object is subjected to recognition processing by executing the old version of software and recognition processing is executed by executing the new version of software.Information regarding recognition accuracy is collected from the recognition results of both softwares and stored in the storage device. A method of using software, comprising determining whether or not to migrate to a new version of software by referring to information on recognition accuracy of the software. 新版及び旧版のソフトウェアに関連する認識精度に関する情報として、帳票の種類毎の処理頻度又は認識精度に関する情報を収集して記憶装置に格納しておき、新版ソフトウェアへの移行の判断に際しては帳票毎の処理頻度又は認識精度に関する情報を用いることを特徴とする請求項1記載の方法。As information on the recognition accuracy related to the new and old versions of software, information on the processing frequency or recognition accuracy for each type of form is collected and stored in the storage device. 2. The method according to claim 1, wherein information on processing frequency or recognition accuracy is used. 前記記憶装置に格納された認識精度の情報に従って、認識精度の高い方の版のソフトウェアに切り替えながら使用することを特徴とする請求項1記載の方法。2. The method according to claim 1, wherein the software is used while being switched to a version of software having a higher recognition accuracy according to the information on the recognition accuracy stored in the storage device. センタにある第1のサーバと、これにネットワークを介して接続されるローカルな第2のサーバ装置と、この第2のサーバ装置に接続されるクライアント装置より構成されるシステムにおいて、
該クライアント装置は、帳票の画像を光学的に読み取るイメージスキャナと、該イメージスキャナにより読まれた画像の文字を認識するための新版のソフトウェアを格納するメモリと、該新版ソフトウェアを実行して文字の認識処理を行うCPUとを有し、
該第2のサーバ装置は、クライアント装置のイメージスキャナにより読まれた画像の文字を認識するための旧版のソフトウェアを格納するメモリと、該旧版ソフトウェアを実行して文字の認識処理を行うCPUを有し、
該第1のサーバは、クライアント装置及び拠点のサーバ装置から送られてくる文字の認識結果から得られる認識精度に関する情報を格納する記憶装置と、該記憶装置に格納される認識精度に関する情報を統計的に処理するためのCPUとを有し、
クライアント装置のイメージスキャナで読まれた画像は、該新版のソフトウェアの実行により認識処理する第1の処理手段と、
該イメージスキャナで読まれた同じ画像は、第2のサーバ装置に送られ、旧版のソフトウェアの実行によって認識処理する第2の処理手段と、
第1のサーバの該記憶装置に格納するために、該第1の処理手段及び第2の処理手段による処理結果から文字の認識精度に関する情報をセンタサーバに送信する手段と、
該新版ソフトウェア及び旧版ソフトウェアの運用状況について評価するに際して、該記憶装置に格納された認識精度に関する情報を出力する手段と、
を有することを特徴とする文字認識処理システム。
In a system including a first server at a center, a local second server connected to the first server via a network, and a client connected to the second server,
The client device includes an image scanner that optically reads an image of a form, a memory that stores a new version of software for recognizing characters of an image read by the image scanner, and a character that is executed by executing the new version software. A CPU for performing a recognition process,
The second server device has a memory for storing old-version software for recognizing characters of an image read by an image scanner of a client device, and a CPU for executing the old-version software to perform character recognition processing. And
The first server has a storage device for storing information on recognition accuracy obtained from a result of character recognition sent from the client device and the server device at the base, and a statistical device for storing information on recognition accuracy stored in the storage device. Having a CPU for processing
First processing means for recognizing an image read by the image scanner of the client device by executing the new version of software;
Second processing means for transmitting the same image read by the image scanner to a second server device and performing recognition processing by executing an old version of software;
Means for transmitting to the center server information relating to the recognition accuracy of characters from the processing results of the first processing means and the second processing means, for storing in the storage device of the first server;
Means for outputting information on recognition accuracy stored in the storage device when evaluating the operation status of the new software and the old software,
A character recognition processing system comprising:
新版ソフトウェアへの移行のために決められたある期間経過後、クライアント装置毎に前記記憶装置に記憶された新版ソフトウェアによる認識精度と旧版ソフトウェアによる認識精度を比較し、新版ソフトウェアによる認識精度の方が場合に、新版ソフトウェアを該クライアント装置で継続的に使用することを特徴とする請求項4記載のシステム。After the elapse of a certain period determined for the transition to the new software, the recognition accuracy of the new software and the recognition accuracy of the old software stored in the storage device are compared for each client device, and the recognition accuracy of the new software is better. 5. The system according to claim 4, wherein in such a case, the new version software is continuously used on the client device. ソフトウェアを実行してある処理を行うシステムにおいて、ある処理目的のための第1のソフトウェアを実行して処理するステップと、該第1のソフトウェアを実行可能な状態にしてシステムに残したまま、該第1のソフトウェアと同種であって最終的には該第1のソフトウェアと置き換えられる対象となり得る第2のソフトウェアをメモリにインストールするステップと、同様の処理目的のために該第2のソフトウェアを実行して処理するステップと、システムにある処理の要求が発生した場合、該第1のソフトウェアによる処理と該第2のソフトウェアによる処理とを並行的に行うステップと、該第1及び第2のソフトウェアによる処理結果から双方のソフトウェアによる実行性能に関する情報を収集するステップと、該第2のソフトウェアの実行性能が良いか又は該第1のソフトウェアによる実行性能が良いかを判断するために、収集された該情報を用いるステップとを有するソフトウェアの運用使用方法。Executing a first software for a certain processing purpose in a system for executing a certain process by executing the software; and executing the first software in an executable state and leaving the first software in the system. Installing in the memory second software which is of the same kind as the first software and which can eventually be replaced by the first software; and executing the second software for similar processing purposes Performing the processing by the first software and the processing by the second software in parallel when a request for a certain processing is generated in the system; Collecting information on the execution performance of both software from the processing results by the second software; To determine whether execution performance by execution performance is good or first software A good, it collected operational use of software and a step of using the information. 請求項6において、第2のソフトウェアによる実行性能の方が第1のソフトウェアによる実行性能よりも良いと判断された場合、以後該第2のソフトウェアに切り替えて、使用するステップと、有することを特徴とするソフトウェアの運用使用方法。7. The method according to claim 6, further comprising, if it is determined that the execution performance of the second software is better than the execution performance of the first software, switching to the second software and using it thereafter. How to use and use the software. 請求項6において、第1のソフトウェアによる実行性能の方が第2のソフトウェアによる実行性能よりも良いと判断された場合、以後第1のソフトウェアによる処理と第2のソフトウェアによる処理とを併用して処理するステップを有するソフトウェアの運用処理方法。In claim 6, when it is determined that the execution performance of the first software is better than the execution performance of the second software, the processing by the first software and the processing by the second software are used together. A software operation processing method having a processing step.
JP2002337481A 2002-11-21 2002-11-21 Using method of software Pending JP2004171326A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002337481A JP2004171326A (en) 2002-11-21 2002-11-21 Using method of software

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002337481A JP2004171326A (en) 2002-11-21 2002-11-21 Using method of software

Publications (1)

Publication Number Publication Date
JP2004171326A true JP2004171326A (en) 2004-06-17

Family

ID=32700983

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002337481A Pending JP2004171326A (en) 2002-11-21 2002-11-21 Using method of software

Country Status (1)

Country Link
JP (1) JP2004171326A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006155550A (en) * 2004-10-26 2006-06-15 Canon Inc Image reader, server device, image processing system, image processing method, storage medium storing computer-readable program, and program
US10540558B2 (en) 2018-03-20 2020-01-21 Fuji Xerox Co., Ltd. Information processing apparatus and non-transitory computer readable medium for determining accuracy of analyzed input data
JP2020508531A (en) * 2017-09-08 2020-03-19 ジョンアン インフォメーション テクノロジー サービシズ カンパニー リミテッド Image quality evaluation method and image quality evaluation system
JP2020154815A (en) * 2019-03-20 2020-09-24 富士ゼロックス株式会社 Information processing device and program

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006155550A (en) * 2004-10-26 2006-06-15 Canon Inc Image reader, server device, image processing system, image processing method, storage medium storing computer-readable program, and program
JP4724428B2 (en) * 2004-10-26 2011-07-13 キヤノン株式会社 Image reading apparatus and image processing method
JP2020508531A (en) * 2017-09-08 2020-03-19 ジョンアン インフォメーション テクノロジー サービシズ カンパニー リミテッド Image quality evaluation method and image quality evaluation system
US10540558B2 (en) 2018-03-20 2020-01-21 Fuji Xerox Co., Ltd. Information processing apparatus and non-transitory computer readable medium for determining accuracy of analyzed input data
JP2020154815A (en) * 2019-03-20 2020-09-24 富士ゼロックス株式会社 Information processing device and program

Similar Documents

Publication Publication Date Title
US8024296B1 (en) Method and apparatus for agent-less auditing of server
US10599367B2 (en) Updating storage migration rates
CN101174216B (en) Computer method, apparatus and system for merging software configurations
US8983862B2 (en) Initiating a service call for a hardware malfunction in a point of sale system
US20070294097A1 (en) Method and apparatus for monitoring execution of a business process managed using a state machine
JP2002215477A (en) System and processing method for monitoring device state, and information recording medium
CN101206572A (en) Device, method, and program for developing application programs
CN109598427B (en) Robot management method and device and electronic equipment
CN111782205A (en) Universal software deployment monitoring system and method
JP5412995B2 (en) Database control apparatus, database control method, and database control program in program model checking
EP3842940A1 (en) Method and system for uniformly performing feature extraction
US20070168375A1 (en) Operating environment system and method for executing workflow on computer
JP2004171326A (en) Using method of software
JP2002269305A (en) Method, device and program for automatically monitoring and controlling work flow
JP4382327B2 (en) Information analysis apparatus, control method therefor, and program
JP4532056B2 (en) Information support analysis apparatus, control method therefor, and program
CN112162914A (en) Method and device for automatically generating test case
JP2006293548A (en) Business process tracking program, recording medium with same program recorded thereon, and business process tracking device
JP2009187456A (en) Firmware update system, information processor, and firmware update method and program
US20120226657A1 (en) Generating bpel control flows
JP5237050B2 (en) Information processing apparatus, control method therefor, program, information processing system
JP2002351702A (en) Method and device for preparing terminal operation statistical data utilizing online
KR100881552B1 (en) Method for managinglifecycle of computer
JP4912288B2 (en) Management apparatus and information processing method
US6944866B1 (en) System and method for coordinating operator efforts using action diaries