JP4859821B2 - Application program test program - Google Patents

Application program test program Download PDF

Info

Publication number
JP4859821B2
JP4859821B2 JP2007314730A JP2007314730A JP4859821B2 JP 4859821 B2 JP4859821 B2 JP 4859821B2 JP 2007314730 A JP2007314730 A JP 2007314730A JP 2007314730 A JP2007314730 A JP 2007314730A JP 4859821 B2 JP4859821 B2 JP 4859821B2
Authority
JP
Japan
Prior art keywords
event
screen
application program
recording
command
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007314730A
Other languages
Japanese (ja)
Other versions
JP2009140155A (en
Inventor
貴英 松塚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2007314730A priority Critical patent/JP4859821B2/en
Publication of JP2009140155A publication Critical patent/JP2009140155A/en
Application granted granted Critical
Publication of JP4859821B2 publication Critical patent/JP4859821B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、アプリケーションプログラムのテストプログラムに係り、特にアプリケーションプログラムの画面をテストするアプリケーションプログラムのテストプログラムに関する。   The present invention relates to a test program for an application program, and more particularly to a test program for an application program for testing a screen of the application program.

従来、例えば通信を行うアプリケーションプログラム(アプリケーション)の画面をテストする場合はテストツールが用いられていた。テストツールは、例えば最初にテストケースを実行してイベント(ユーザの入力操作、画面変更、データの送受信等)を記録しておき、その後のテストで発生(再生)したイベントと、記録しておいたイベントとが一致するか否かを判断する。   Conventionally, for example, when testing a screen of an application program (application) that performs communication, a test tool has been used. For example, the test tool first executes a test case to record events (user input operations, screen changes, data transmission / reception, etc.), and records events that occur (playback) in subsequent tests. It is determined whether or not the event matches.

例えばテストツールは、クライアント・サーバ間の通信や画面の特定の値を記録、再生することにより画面のテストを行っていた。また、テストツールはWindows(登録商標)等のオペレーティングシステム(OS)やブラウザ等のイベントや画面を記録、再生することにより画面のテストを行っていた。   For example, the test tool has tested the screen by recording and playing back a specific value on the screen and communication between the client and the server. In addition, the test tool performs a screen test by recording and reproducing an event and a screen of an operating system (OS) such as Windows (registered trademark) and a browser.

図1はアプリケーションの画面をテストする従来の手法を表した模式図である。図1の手法では、記録時、ユーザからのイベントによりブラウザがサーバから受信した通信電文または画面更新の内容のうち、検証対象を手動で指定しておく。そして、再生時はユーザからのイベントによりブラウザがサーバから受信した通信電文または画面更新の内容のうち、予め指定しておいた検証対象を比較することで、アプリケーションの画面をテストしていた。   FIG. 1 is a schematic diagram showing a conventional method for testing an application screen. In the method of FIG. 1, at the time of recording, the verification target is manually designated from the contents of the communication message or the screen update received by the browser from the server due to the event from the user. At the time of reproduction, the application screen is tested by comparing the verification target designated in advance in the communication message received from the server or the contents of the screen update received from the server by the event from the user.

通信電文または画面更新の内容(テキストフィールドの値など)を検証対象とする図1の手法では、細かいレイアウト等が変わっても問題がない。しかしながら、図1の手法ではユーザからのイベントによりブラウザがサーバから受信した通信電文または画面更新の内容のうち、検証対象を手動で指定しておかなければならなかった。また、図1の手法では色や文字装飾などのスタイルの変化を検証できない場合もあった。   In the method of FIG. 1 in which the contents of the communication message or the screen update (text field value, etc.) are to be verified, there is no problem even if the fine layout changes. However, in the method of FIG. 1, the verification target must be manually specified from the communication message received by the browser from the server or the contents of the screen update due to the event from the user. In some cases, the method of FIG. 1 cannot verify changes in style such as color and character decoration.

特許文献1及び2には、テスト作業の自動化を目的として、ユーザが検証対象を手動により指定するのではなく、イベントの発生を検知して自動的に記録する技術が記載されている。特許文献1及び2の手法は、画面のビットマップ比較を行うものである。特許文献1及び2の手法は、Windows(登録商標)等のOSやブラウザ等のイベントや画面を記録、再生することにより画面のテストを行う例である。   In Patent Documents 1 and 2, for the purpose of automating test work, a technique is described in which the occurrence of an event is detected and automatically recorded, instead of the user manually specifying a verification target. The methods disclosed in Patent Documents 1 and 2 compare screen bitmaps. The methods of Patent Documents 1 and 2 are examples in which a screen test is performed by recording and playing back an event or screen of an OS or browser such as Windows (registered trademark).

図2はアプリケーションの画面をビットマップ比較によりテストする従来の手法を表した模式図である。図2の手法は、例えばWindows(登録商標)ネイティブのテストツールを使うことで実現できる。
特開平5−81082号公報 特開2000−235455号公報
FIG. 2 is a schematic diagram showing a conventional method for testing an application screen by comparing bitmaps. The technique of FIG. 2 can be realized by using, for example, a Windows (registered trademark) native test tool.
JP-A-5-81082 JP 2000-235455 A

しかしながら、アプリケーションの画面をビットマップ比較によりテストする従来の手法は、画面(ウインドウ)の大きさ,画面の表示位置,ブラウザの種類や設定などが異なるだけで検証が失敗してしまうという問題があった。例えば図2では記録時と再生時とで画面の大きさ、ステータスバーやツールバーの表示内容が異なるため、検証が失敗してしまう。   However, the conventional method of testing application screens by comparing bitmaps has the problem that verification fails because the screen size, screen display position, browser type and settings, etc. are different. It was. For example, in FIG. 2, since the screen size and the display contents of the status bar and tool bar are different between recording and playback, the verification fails.

本発明は、上記の点に鑑みなされたもので、検証対象を手動により指定することなくアプリケーションプログラムの画面を正確にテストできるアプリケーションプログラムのテストプログラムを提供することを目的とする。   SUMMARY An advantage of some aspects of the invention is that it provides an application program test program that can accurately test a screen of an application program without manually specifying a verification target.

上記課題を解決する為、本発明は、アプリケーションプログラムが搭載されたコンピュータを、前記アプリケーションプログラムに対してテストケースを実行したときに前記アプリケーションプログラムで発生したユーザイベント及び画面イベントを記録装置に累積記録する記録制御手段と、前記記録装置に累積記録された前記ユーザイベント及び画面イベントを読み出し、テスト対象の前記アプリケーションプログラムで前記ユーザイベントを順次実行する実行手段と、テスト対象の前記アプリケーションプログラムで一のユーザイベントを実行してから次のユーザイベントを実行するまでに発生した画面イベントと、前記記録装置から読み出した前記一のユーザイベントを実行してから次のユーザイベントを実行するまでに発生した画面イベントとを比較し、一致していない前記画面イベントをエラーとして出力するエラー出力制御手段として機能させるためのアプリケーションプログラムのテストプログラムであることを特徴とする。   In order to solve the above-described problems, the present invention provides a recording device that cumulatively records user events and screen events generated in an application program when a computer on which the application program is installed executes a test case for the application program. A recording control unit that reads the user events and screen events accumulated and recorded in the recording device, and sequentially executes the user events in the application program to be tested; A screen event that occurs between the execution of a user event and the execution of the next user event, and a screen that occurs between the execution of the one user event read from the recording device and the execution of the next user event Comparing the vent, characterized in that the non-matching the screen event is an application program test program to function as an error output control means for outputting as an error.

なお、本発明の構成要素、表現または構成要素の任意の組合せを、方法、装置、システム、コンピュータプログラム、記録媒体、データ構造などに適用したものも本発明の態様として有効である。   In addition, what applied the component, expression, or arbitrary combination of the component of this invention to a method, an apparatus, a system, a computer program, a recording medium, a data structure, etc. is also effective as an aspect of this invention.

本発明によれば、検証対象を手動により指定することなくアプリケーションプログラムの画面を正確にテストできるアプリケーションプログラムのテストプログラムを提供可能である。   According to the present invention, it is possible to provide a test program for an application program that can accurately test the screen of the application program without manually specifying a verification target.

次に、本発明を実施するための最良の形態を、以下の実施例に基づき図面を参照しつつ説明していく。まず、本発明の理解を容易とするため、アプリケーションプログラム(アプリケーション)の一例としてのブラウザの画面をテストする従来の手法について説明する。   Next, the best mode for carrying out the present invention will be described based on the following embodiments with reference to the drawings. First, in order to facilitate understanding of the present invention, a conventional method for testing a browser screen as an example of an application program (application) will be described.

図3はブラウザの画面をテストする従来の仕組み(記録時)を表した模式図である。図3では、ブラウザプラグイン2に含まれるイベント検知部3が、ブラウザ1で発生したイベント(キー入力,マウス動作など)を検知する。イベント検知部3は検知したイベントのうち画面イベント以外をイベントストア4に記録する。また、イベント検知部3は検知したイベントのうち画面イベントに基づく画面の表示内容を画面ストア5に記録する。例えば画面ストア5には画面の表示内容を表すHTMLファイルが記録される。   FIG. 3 is a schematic diagram showing a conventional mechanism (during recording) for testing a browser screen. In FIG. 3, the event detection unit 3 included in the browser plug-in 2 detects an event (key input, mouse operation, etc.) that has occurred in the browser 1. The event detection unit 3 records the detected events other than the screen event in the event store 4. Further, the event detection unit 3 records the display content of the screen based on the screen event among the detected events in the screen store 5. For example, an HTML file representing the display content of the screen is recorded in the screen store 5.

図4はブラウザの画面をテストする従来の仕組み(再生時)を表した模式図である。図4では、Java(登録商標)Scriptライブラリ10に、比較部11,イベント実行部12,イベント読取部13が含まれている。イベント読取部13は、イベントストア4からイベントを読み取り、イベント実行部12に送る。イベント実行部12は、ブラウザ1でイベント(キー入力、マウス動作など)を実行する。   FIG. 4 is a schematic diagram showing a conventional mechanism (during reproduction) for testing a browser screen. In FIG. 4, the Java (registered trademark) Script library 10 includes a comparison unit 11, an event execution unit 12, and an event reading unit 13. The event reading unit 13 reads an event from the event store 4 and sends it to the event execution unit 12. The event execution unit 12 executes an event (key input, mouse operation, etc.) in the browser 1.

画面イベントに基づく画面変更後、比較部11は画面ストア5に記録されている画面の表示内容と、ブラウザ1による画面の表示内容とを比較し、画面ストア5に記録されている画面の表示内容と、ブラウザ1による画面の表示内容とに差異があれば、エラーがあると判定する。エラーがあれば、比較部11はエラー出力部14にエラーを出力させる。   After the screen change based on the screen event, the comparison unit 11 compares the display content of the screen recorded in the screen store 5 with the display content of the screen by the browser 1, and the display content of the screen recorded in the screen store 5. If there is a difference between the display content of the screen by the browser 1, it is determined that there is an error. If there is an error, the comparison unit 11 causes the error output unit 14 to output an error.

図5はブラウザの画面をテストする本発明の手法を表した模式図である。図5の手法では、記録時、ステップS1〜S2において、ユーザ21からのイベント(キー入力等)をテスト記録機構22が検知し、記録する。ステップS3〜S5では、ユーザ21からのイベントによりブラウザ1がサーバ23から画面更新の内容を受信する。テスト記録機構22はブラウザ1が受信した画面更新の内容を記録する。なお、ステップS1〜S5の処理はユーザ21からのイベントがある度に繰り返し行われる。   FIG. 5 is a schematic diagram showing the method of the present invention for testing a browser screen. In the method of FIG. 5, during recording, the test recording mechanism 22 detects and records an event (such as a key input) from the user 21 in steps S1 to S2. In steps S <b> 3 to S <b> 5, the browser 1 receives the contents of the screen update from the server 23 by an event from the user 21. The test recording mechanism 22 records the contents of the screen update received by the browser 1. Note that the processing in steps S1 to S5 is repeated every time there is an event from the user 21.

そして、再生時は、ステップS11〜S14において、テスト記録機構22からのイベントによりブラウザ1がサーバ23から画面更新の内容を受信する。テスト記録機構22はブラウザ1が受信した画面更新の内容を検知し、記録時に記録しておいた画面更新の内容と比較することで、ブラウザ1の画面をテストする。なお、ステップS11〜S14の処理はテスト記録機構22からのイベントがある度に繰り返し行われる。   At the time of reproduction, the browser 1 receives the contents of the screen update from the server 23 by an event from the test recording mechanism 22 in steps S11 to S14. The test recording mechanism 22 detects the content of the screen update received by the browser 1 and tests the screen of the browser 1 by comparing it with the content of the screen update recorded at the time of recording. Note that the processing in steps S11 to S14 is repeated every time there is an event from the test recording mechanism 22.

図5の手法では、ブラウザ1で発生したユーザの入力操作、画面変更、データの送受信等のイベントを契機として画面変化を検知し、テストの記録時の処理又は再生時の処理を行うことができる。   In the method of FIG. 5, a screen change can be detected in response to an event such as a user input operation, a screen change, and data transmission / reception that occurs in the browser 1, and a test recording process or a reproduction process can be performed. .

本発明によるテストの再生は、ユーザの入力操作、画面変更、データの送受信等のイベントを契機にするので、Windows(登録商標)ネイティブのテストツールのようにリアルタイムでタイミングを図る必要がない。そのため、本発明ではブラウザ1の画面の高速なテスト実行が可能である。   The test reproduction according to the present invention is triggered by an event such as a user input operation, a screen change, and data transmission / reception, so that it is not necessary to have a timing in real time unlike a Windows (registered trademark) native test tool. Therefore, in the present invention, it is possible to execute a test on the browser 1 screen at high speed.

また、本発明では画面変更を履歴として累積記録するとき、画面変更の差分で記録するため、テストの記録時及び再生時の画面の違いを検出できる。したがって、本発明はWindows(登録商標)ネイティブのテストツールと異なり、画面の大きさ等が記録時と再生時とで変化しても正確にテストできる。   Further, in the present invention, when the screen changes are accumulated and recorded as a history, the difference between the screen changes is recorded, so that it is possible to detect a difference between the screens during test recording and playback. Therefore, unlike the Windows (registered trademark) native test tool, the present invention can be accurately tested even if the screen size changes between recording and playback.

また、本発明では再生時と記録時とで画面変更が構造的に異なっていても、同じ画面変更が他に存在するかどうかを見つけることにより、正確にテストできる。さらに、本発明では、ブラウザ1で発生したユーザの入力操作、画面変更、データの送受信等のイベントを後述するコマンド単位で抽象化することにより、ブラウザ1の種類の違いを吸収できるため、記録時と再生時とでブラウザ1の種類が異なっても正確にテストできる。   Further, in the present invention, even if the screen change is structurally different between reproduction and recording, it can be accurately tested by finding out whether the same screen change exists elsewhere. Furthermore, in the present invention, by abstracting events such as user input operations, screen changes, and data transmission / reception that have occurred in the browser 1 on a command-by-command basis, differences in the types of the browser 1 can be absorbed. Even if the type of browser 1 is different between playback and playback, it can be tested accurately.

図6はブラウザの画面をテストする本発明の仕組み(記録時)を表した一例の模式図である。図6では、ブラウザプラグイン2に、イベント検知部3,コマンド記録部31が含まれている。   FIG. 6 is a schematic diagram showing an example of the mechanism (during recording) of the present invention for testing the browser screen. In FIG. 6, the browser plug-in 2 includes an event detection unit 3 and a command recording unit 31.

イベント検知部3は、ブラウザ1で発生したイベント(キー入力,マウス動作,通信受信,画面変更など)を検知する。イベント検知部3は検知したイベントをコマンド記録部31に送る。コマンド記録部31は、受け取ったイベントを後述のコマンドに変換することで抽象化する。なお、コマンド記録部31は画面イベントに基づく画面の表示内容もコマンドに変換することで抽象化する。コマンド記録部31は、変換したコマンドをコマンドストア32に記録する。   The event detection unit 3 detects events (key input, mouse operation, communication reception, screen change, etc.) that have occurred in the browser 1. The event detection unit 3 sends the detected event to the command recording unit 31. The command recording unit 31 abstracts the received event by converting it into a command to be described later. Note that the command recording unit 31 abstracts the display content of the screen based on the screen event by converting it into a command. The command recording unit 31 records the converted command in the command store 32.

図7はブラウザの画面をテストする本発明の仕組み(再生時)を表した一例の模式図である。図7では、Java(登録商標)Scriptライブラリ10に、イベント実行部12,イベント解析、画面変更確認部41,コマンド読取部42が含まれている。   FIG. 7 is a schematic diagram showing an example of the mechanism (during reproduction) of the present invention for testing a browser screen. In FIG. 7, the Java (registered trademark) Script library 10 includes an event execution unit 12, an event analysis, screen change confirmation unit 41, and a command reading unit 42.

コマンド読取部42はコマンドストア32からコマンドを読み取り、イベント解析、画面変更確認部41に送る。イベント解析、画面変更確認部41は受け取ったコマンドをイベント実行部12に送る。イベント実行部12は、受け取ったコマンドを後述のようにイベントに変換する。イベント実行部12は変換したイベントのうち、キー入力、マウス動作等のユーザイベントをブラウザ1で実行する。   The command reading unit 42 reads a command from the command store 32 and sends it to the event analysis / screen change confirmation unit 41. The event analysis / screen change confirmation unit 41 sends the received command to the event execution unit 12. The event execution unit 12 converts the received command into an event as will be described later. Of the converted events, the event execution unit 12 executes user events such as key input and mouse operation on the browser 1.

イベント解析、画面変更確認部41は、ブラウザ1で発生した画面変更の画面イベントをブラウザ1から受け取る。イベント解析、画面変更確認部41は、ブラウザ1から受け取ったブラウザ1で発生した画面変更の画面イベントに基づき、一のユーザイベントを実行してから次のユーザイベントを実行するまでに必要な画面変更が行われたかを後述のように確認する。   The event analysis / screen change confirmation unit 41 receives from the browser 1 a screen change screen event that has occurred in the browser 1. The event analysis and screen change confirmation unit 41 performs screen changes necessary from the execution of one user event to the execution of the next user event based on the screen change screen event generated in the browser 1 received from the browser 1. It is confirmed as described later whether or not.

また、イベント解析、画面変更確認部41はブラウザ1で発生した画面更新の内容と記録時にコマンドストア32へ記録した画面更新の内容とが同じかを、エラー一時保管ストア43を利用して後述のように確認する。ブラウザ1で発生した画面更新の内容と記録時にコマンドストア32へ記録した画面更新の内容とに差異がある場合、イベント解析、画面変更確認部41は、その差異が問題であるかを後述のように確認する。   Further, the event analysis / screen change confirmation unit 41 uses the error temporary storage store 43 to determine whether the content of the screen update generated in the browser 1 is the same as the content of the screen update recorded in the command store 32 at the time of recording. To make sure. If there is a difference between the content of the screen update generated in the browser 1 and the content of the screen update recorded in the command store 32 at the time of recording, the event analysis and screen change confirmation unit 41 will determine whether the difference is a problem as described later. Check with.

その差異が問題であれば、イベント解析、画面変更確認部41は、エラー出力部14にエラーを出力させる。その差異が問題でなければ、イベント解析、画面変更確認部41はエラー出力部14にエラーを出力させない。   If the difference is a problem, the event analysis / screen change confirmation unit 41 causes the error output unit 14 to output an error. If the difference is not a problem, the event analysis / screen change confirmation unit 41 does not cause the error output unit 14 to output an error.

図8は、ブラウザの画面をテストする本発明の他の仕組み(記録時、再生時)を表した一例の模式図である。図8の仕組みは、図3及び図4に表した仕組みと比較部11の処理が異なっている。図8の仕組みは、図3に表した従来の仕組みと同様、記録時に画面全体の表示内容を画面ストア5に記録する。   FIG. 8 is a schematic diagram showing an example of another mechanism (during recording and reproduction) for testing the browser screen. The mechanism of FIG. 8 differs from the mechanism shown in FIGS. 3 and 4 in the processing of the comparison unit 11. The mechanism of FIG. 8 records the display content of the entire screen in the screen store 5 at the time of recording, similarly to the conventional mechanism shown in FIG.

そして、図8の仕組みは、図4に表した従来の仕組みと同様、再生時に、画面ストア5に記録されている画面全体の表示内容と、ブラウザ1による画面全体の表示内容とを比較することで、図6及び図7に表した本発明の仕組みと同じことが実現できる。図8の仕組みの場合は、比較部11で「場所が異なっても同じ画面変更」がある場合、エラーではないと判定する。   8 compares the display content of the entire screen recorded in the screen store 5 with the display content of the entire screen by the browser 1 during playback, similar to the conventional mechanism shown in FIG. Thus, the same mechanism as that of the present invention shown in FIGS. 6 and 7 can be realized. In the case of the mechanism of FIG. 8, if there is “the same screen change even if the location is different” in the comparison unit 11, it is determined that there is no error.

図9はコマンドをイベントに変換可能なイベント実行部の一例の模式図である。コマンドをイベントに変換可能なイベント実行部12は、図7に含まれるイベント実行部12である。   FIG. 9 is a schematic diagram of an example of an event execution unit that can convert a command into an event. The event execution unit 12 that can convert a command into an event is the event execution unit 12 included in FIG.

図9のイベント実行部12は、コマンド受取部51,実行ブラウザ判定部52,ブラウザA向けイベント実行部53,ブラウザB向けイベント実行部54が含まれている。図6に示したように、コマンド記録部31は、イベント検知部3から受け取ったイベントを後述のコマンドに変換することで抽象化し、そのコマンドをコマンドストア32に記録している。   The event execution unit 12 of FIG. 9 includes a command reception unit 51, an execution browser determination unit 52, an event execution unit 53 for browser A, and an event execution unit 54 for browser B. As shown in FIG. 6, the command recording unit 31 abstracts the event received from the event detection unit 3 by converting it into a command described later, and records the command in the command store 32.

イベント実行部12のコマンド受取部51はイベント解析、画面変更確認部41から受け取ったコマンドを実行ブラウザ判定部52に送る。ブラウザ1の種類によってイベントの詳細(プロパティ名など)が異なるため、実行ブラウザ判定部52はイベントを実行するブラウザ1の種類を判定する。図9では実行ブラウザ判定部52が、ブラウザ1の種類としてブラウザA又はブラウザBを判定するものとする。   The command reception unit 51 of the event execution unit 12 sends the command received from the event analysis / screen change confirmation unit 41 to the execution browser determination unit 52. Since the event details (property name, etc.) vary depending on the type of the browser 1, the execution browser determination unit 52 determines the type of the browser 1 that executes the event. In FIG. 9, it is assumed that the execution browser determination unit 52 determines browser A or browser B as the type of browser 1.

イベントを実行するブラウザ1の種類がブラウザAだと判定すると、実行ブラウザ判定部52はコマンド受取部51から受け取ったコマンドをブラウザA向けイベント実行部53に送る。ブラウザA向けイベント実行部53は受け取ったコマンドを具体化する為、ブラウザAのイベントに変換し、そのイベントをブラウザ1に送る。   If it is determined that the type of the browser 1 that executes the event is browser A, the execution browser determination unit 52 sends the command received from the command reception unit 51 to the event execution unit 53 for browser A. The event execution unit 53 for the browser A converts the received command into an event of the browser A and sends the event to the browser 1 in order to embody the received command.

イベントを実行するブラウザ1の種類がブラウザBだと判定すると、実行ブラウザ判定部52はコマンド受取部51から受け取ったコマンドをブラウザB向けイベント実行部54に送る。ブラウザB向けイベント実行部54は受け取ったコマンドを具体化する為、ブラウザBのイベントに変換し、そのイベントをブラウザ1に送る。   If it is determined that the type of the browser 1 that executes the event is browser B, the execution browser determination unit 52 sends the command received from the command reception unit 51 to the event execution unit 54 for browser B. The browser B event execution unit 54 converts the received command into a browser B event and sends the event to the browser 1 in order to embody the received command.

図10はアプリケーションの画面をテストする従来の手法の問題点を表したイメージ図である。図10のイメージ図は、ブラウザで発生した画面更新の内容と記録時にイベントストアへ記録した画面更新の内容とが異なる一例を表している。例えば、従来の手法であるWindows(登録商標)ネイティブのテストツールの場合は、位置,値ともに完全に同じでないとエラーになる。   FIG. 10 is an image diagram showing problems of a conventional method for testing the screen of an application. The image diagram of FIG. 10 shows an example in which the content of the screen update that occurred in the browser is different from the content of the screen update that was recorded in the event store at the time of recording. For example, in the case of a Windows (registered trademark) native test tool which is a conventional method, an error occurs unless the position and value are completely the same.

図11はアプリケーションの画面をテストする従来の手法の問題点を表したイメージ図である。図11のイメージ図は、ブラウザで発生した画面更新の内容と記録時にイベントストアへ記録した画面更新の内容とが異なる例を表している。例えば、従来の手法である通信電文または画面更新の内容(テキストフィールドの値など)を検証(検査)対象とする場合は、通信電文または画面更新の内容のうち、検査対象を手動で指定しておかなければならなかった。   FIG. 11 is an image diagram showing problems of a conventional method for testing an application screen. The image diagram of FIG. 11 shows an example in which the content of the screen update generated in the browser is different from the content of the screen update recorded in the event store at the time of recording. For example, if the communication message or screen update content (text field value, etc.), which is a conventional method, is to be verified (inspected), specify the inspection target manually from the communication message or screen update content. I had to leave.

また、図12はアプリケーションの画面をテストする本発明の手法を表したイメージ図である。図12のイメージ図は、ブラウザで発生した画面更新の内容と記録時にコマンドストアへ記録した画面更新の内容とが異なる例を表している。本発明の手法は、異なる画面更新(変更)があるときに、同じ変更が画面内の別の部分にあるならば、自動的に問題ないと判定するものである。本発明の手法では、異なる変更があれば一時的にエラーが出るが、全体の整合性が取れた時点で問題ないと判定し、エラーを消す。無論、自動的に成された問題ないとの判定は、ユーザが無効にすることも可能である。   FIG. 12 is an image diagram showing the method of the present invention for testing an application screen. The image diagram of FIG. 12 shows an example in which the content of the screen update generated in the browser is different from the content of the screen update recorded in the command store at the time of recording. The technique of the present invention automatically determines that there is no problem if there are different screen updates (changes) and the same change is in another part of the screen. In the method of the present invention, if there is a different change, an error is temporarily output, but it is determined that there is no problem when the entire consistency is achieved, and the error is erased. Of course, the determination that there is no problem automatically made can be invalidated by the user.

なお、異なる変更があるときに同じ変更が画面内の別の部分にあるか否かの判定は例えば以下のように行う。図13は、異なる変更があるときに同じ変更が画面内の別の部分にあるか否かの判定の手法を表した一例の模式図である。プラットフォームがブラウザの場合は、「変更された箇所(Xpathでの表現)」と、その「DOMの部分木」を蓄積することで最終的に同じ変化かどうかが分かる。その他のプラットフォーム(例えばWindows(登録商標)Form)の場合は、例えば「変更された箇所(x,y座標)」と「変更された内容(プロパティの変更)」などを蓄積すれば同じ効果が得られる。   Note that, when there is a different change, whether or not the same change is in another part of the screen is determined as follows, for example. FIG. 13 is a schematic diagram showing an example of a method for determining whether or not the same change is in another part of the screen when there are different changes. When the platform is a browser, it is possible to know whether or not the change is finally the same by accumulating the “changed portion (expression in Xpath)” and the “DOM subtree”. In the case of other platforms (for example, Windows (registered trademark) Form), the same effect can be obtained by accumulating, for example, “changed part (x, y coordinates)” and “changed contents (change of property)”. It is done.

本発明の手法では、画面内にある異なる変更の検知(エラー検知)と、同じ変更が画面内の別の部分にあるかの比較(エラー比較)とを以下のように行う。図14はエラー検知及びエラー比較の仕組みを表した模式図である。本発明の手法では、記録時、画面イベントである「DOM変更1」及び「DOM変更2」を累積記録しておく。再生時の画面イベントである「DOM変更1」及び「DOM変更2」は記録時の画面イベントである「DOM変更1」及び「DOM変更2」と順番及び位置が異なっている。   In the method of the present invention, detection of different changes in the screen (error detection) and comparison of whether the same change is in another part of the screen (error comparison) are performed as follows. FIG. 14 is a schematic diagram showing the mechanism of error detection and error comparison. In the method of the present invention, “DOM change 1” and “DOM change 2”, which are screen events, are accumulated and recorded during recording. “DOM change 1” and “DOM change 2”, which are screen events during reproduction, are different in order and position from “DOM change 1” and “DOM change 2”, which are screen events during recording.

再生時のエラーは、画面変更が異なることで検知する。図14の例では再生時の画面イベントである「DOM変更2」及び「DOM変更1」がエラーとして検知されるが、記録時に累積記録された画面イベントである「DOM変更1」及び「DOM変更2」と比較することにより、そのエラーが問題ないと判定される。テキストフィールドの値などの変更値が異なる場合は、そのままエラーを出す。なお、本発明の手法では累積記録されている画面変更の履歴(変更履歴)を合わせることより、記録時の画面を再現し、どの部分が異なるのかを示すことも可能である。   Errors during playback are detected by different screen changes. In the example of FIG. 14, “DOM change 2” and “DOM change 1” that are screen events during playback are detected as errors, but “DOM change 1” and “DOM change” that are cumulatively recorded screen events during recording. By comparing with “2”, it is determined that the error is not a problem. If the change value such as the value of the text field is different, an error is issued as it is. In the method of the present invention, it is also possible to reproduce the screen at the time of recording and indicate which portion is different by combining the history of screen changes (change history) that have been accumulated and recorded.

図15は本発明のエラー検知とエラー比較とによるエラー判定を表した一例のイメージ図である。例1では記録時、画面イベントの「DOM変更1」及び「DOM変更2」が累積記録されている。再生時、エラー検知では画面イベントの「DOM変更2」及び「DOM変更1」の順番と位置とが記録時と異なっている為、エラーとして検知する。エラー比較では記録時に累積記録された画面イベントの「DOM変更1」及び「DOM変更2」と累積比較し、位置のみが異なっている為、そのエラーが問題ないと判定する。   FIG. 15 is an image diagram showing an example of error determination based on error detection and error comparison according to the present invention. In the example 1, the screen events “DOM change 1” and “DOM change 2” are cumulatively recorded at the time of recording. At the time of reproduction, the error detection is detected as an error because the order and position of “DOM change 2” and “DOM change 1” of the screen events are different from those at the time of recording. In the error comparison, a cumulative comparison is made with the screen events “DOM change 1” and “DOM change 2” that are cumulatively recorded at the time of recording, and since only the position is different, it is determined that the error is not a problem.

また、例2では、記録時、画面イベントの「DOM変更1」,「DOM変更3」及び「DOM変更2」が累積記録されている。再生時、エラー検知では画面イベントの「DOM変更1」の位置,「DOM変更3」の有無,及び「DOM変更2」の順番と位置とが記録時と異なっているため、エラーとして検知する。エラー比較では記録時に累積記録された画面イベントの「DOM変更1」,「DOM変更3」及び「DOM変更2」と累積比較し、位置のみが異なっている「DOM変更1」及び「DOM変更2」のエラーが問題ないと判定する一方、再生時に無い「DOM変更3」をエラーと判定する。   In the example 2, the screen events “DOM change 1”, “DOM change 3”, and “DOM change 2” are cumulatively recorded at the time of recording. At the time of reproduction, an error is detected as an error because the position of “DOM change 1” in the screen event, the presence / absence of “DOM change 3”, and the order and position of “DOM change 2” are different from those at the time of recording. In error comparison, “DOM change 1”, “DOM change 3”, and “DOM change 2” of the screen events that are cumulatively recorded at the time of recording are cumulatively compared. "DOM change 3" which does not exist at the time of reproduction is determined as an error.

本発明の手法は、図16に示すようなハードウェア構成のコンピュータ装置で本発明による各種プログラムを実行することにより実現される。図16はコンピュータ装置の一例の構成図である。コンピュータ装置は、それぞれバスBで相互に接続されている入力装置61,出力装置62,ドライブ装置63,補助記憶装置64,主記憶装置65,演算処理装置66およびインターフェース装置67で構成される。   The technique of the present invention is realized by executing various programs according to the present invention on a computer device having a hardware configuration as shown in FIG. FIG. 16 is a configuration diagram of an example of a computer device. The computer device includes an input device 61, an output device 62, a drive device 63, an auxiliary storage device 64, a main storage device 65, an arithmetic processing device 66, and an interface device 67 that are mutually connected by a bus B.

入力装置61はキーボードやマウスなどで構成され、各種信号を入力するために用いられる。出力装置62はディスプレイ装置などで構成され、各種ウインドウやデータ等を表示するために用いられる。インターフェース装置67は、モデム,LANカードなどで構成されており、ネットワークに接続する為に用いられる。   The input device 61 is composed of a keyboard, a mouse, etc., and is used for inputting various signals. The output device 62 is composed of a display device or the like, and is used for displaying various windows and data. The interface device 67 includes a modem, a LAN card, and the like, and is used for connecting to a network.

本発明によるアプリケーションプログラムのテストプログラムは、コンピュータ装置を制御する各種プログラムの少なくとも一部である。アプリケーションプログラムのテストは記録媒体68の配布やネットワークからのダウンロードなどによって提供される。   The application program test program according to the present invention is at least a part of various programs for controlling the computer apparatus. The application program test is provided by distributing the recording medium 68 or downloading it from the network.

記録媒体68はCD−ROM、フレキシブルディスク、光磁気ディスク等の様に情報を光学的,電気的或いは磁気的に記録する記録媒体、ROM、フラッシュメモリ等の様に情報を電気的に記録する半導体メモリ等、様々なタイプの記録媒体を用いることができる。   The recording medium 68 is a recording medium that records information optically, electrically, or magnetically, such as a CD-ROM, flexible disk, or magneto-optical disk, or a semiconductor that electrically records information, such as a ROM or flash memory. Various types of recording media such as a memory can be used.

また、アプリケーションプログラムのテストプログラムを記録した記録媒体68がドライブ装置63にセットされると、アプリケーションプログラムのテストプログラムは記録媒体68からドライブ装置63を介して補助記憶装置64にインストールされる。ネットワークからダウンロードされたアプリケーションプログラムのテストプログラムは、インターフェース装置67を介して補助記憶装置64にインストールされる。   When the recording medium 68 storing the application program test program is set in the drive device 63, the application program test program is installed in the auxiliary storage device 64 from the recording medium 68 via the drive device 63. The application program test program downloaded from the network is installed in the auxiliary storage device 64 via the interface device 67.

コンピュータ装置は、インストールされたアプリケーションプログラムのテストプログラムを格納すると共に、必要なファイル,データ等を格納する。主記憶装置65は、起動時に補助記憶装置64からアプリケーションプログラムのテストプログラムを読み出して格納する。そして、演算処理装置66は主記憶装置65に格納されたアプリケーションプログラムのテストプログラムに従って後述するような各種処理を実現している。なお、アプリケーションプログラムのテストプログラムはブラウザプラグイン2及びJava(登録商標)Scriptライブラリ10に相当する。   The computer device stores a test program of the installed application program and stores necessary files, data, and the like. The main storage device 65 reads the application program test program from the auxiliary storage device 64 and stores it at the time of activation. The arithmetic processing unit 66 implements various processes as will be described later in accordance with the application program test program stored in the main storage device 65. The application program test program corresponds to the browser plug-in 2 and the Java (registered trademark) Script library 10.

(記録時の処理を表したフローチャート)
図17は記録時の処理を表した一例のフローチャートである。なお、図17の左側のフローチャートはイベント検知部3の処理を表している。図17の右側のフローチャートはコマンド記録部31の処理を表している。
(Flow chart showing processing at the time of recording)
FIG. 17 is a flowchart showing an example of processing during recording. Note that the flowchart on the left side of FIG. 17 represents processing of the event detection unit 3. The flowchart on the right side of FIG. 17 represents the processing of the command recording unit 31.

ステップS51に進み、イベント検知部3はブラウザ1でイベントが発生したことを検知するまでステップS51の処理を繰り返す。イベント検知部3はブラウザ1でイベントが発生したことを検知すると、ステップS52に進み、検知したイベントをコマンド記録部31に送ったあと、ステップS51に戻る。   Proceeding to step S51, the event detection unit 3 repeats the process of step S51 until it detects that an event has occurred in the browser 1. When detecting that an event has occurred in the browser 1, the event detection unit 3 proceeds to step S52, sends the detected event to the command recording unit 31, and then returns to step S51.

イベント検知部3からイベントを受け取ると、コマンド記録部31はステップS53に進み、受け取ったイベントの種類が「ユーザイベント」であるかを判定する。なお、イベントの種類は図18に示すイベント種類対応表を利用して判定される。図18はイベント種類対応表の一例の構成図である。   Upon receiving an event from the event detection unit 3, the command recording unit 31 proceeds to step S53, and determines whether or not the type of the received event is “user event”. The event type is determined using the event type correspondence table shown in FIG. FIG. 18 is a configuration diagram of an example of the event type correspondence table.

図18のイベント種類対応表は、ブラウザ毎に、イベントと、イベントの種類とが対応付けられている。図18のイベント種類対応表を利用することで、コマンド記録部31はブラウザ及びイベントを特定すれば、イベントの種類を判定できる。受け取ったイベントの種類が「ユーザイベント」であれば、コマンド記録部31はステップS54に進み、受け取ったイベントをコマンドに変換する。   In the event type correspondence table of FIG. 18, an event and an event type are associated with each browser. By using the event type correspondence table of FIG. 18, the command recording unit 31 can determine the type of the event by specifying the browser and the event. If the received event type is “user event”, the command recording unit 31 proceeds to step S54 and converts the received event into a command.

なお、イベントからコマンドへの変換は、図19に示すコマンド変換対応表を利用して行われる。図19はコマンド変換対応表の一例の構成図である。図19のコマンド変換対応表は、ブラウザ毎に、イベントと、コマンド名と、イベント属性と、コマンド属性とが対応付けられている。   Note that conversion from an event to a command is performed using a command conversion correspondence table shown in FIG. FIG. 19 is a configuration diagram of an example of a command conversion correspondence table. In the command conversion correspondence table in FIG. 19, an event, a command name, an event attribute, and a command attribute are associated with each browser.

受け取ったイベントの種類が「ユーザイベント」でなければ、コマンド記録部31はステップS55に進み、受け取ったイベントの種類が「画面イベント」であるかをイベント種類対応表により判定する。受け取ったイベントの種類が「画面イベント」であれば、コマンド記録部31はステップS56に進み、受け取ったイベントをコマンド変換対応表によりコマンドに変換する。   If the received event type is not the “user event”, the command recording unit 31 proceeds to step S55, and determines whether the received event type is the “screen event” from the event type correspondence table. If the received event type is “screen event”, the command recording unit 31 proceeds to step S56, and converts the received event into a command using the command conversion correspondence table.

受け取ったイベントの種類が「画面イベント」でなければ、コマンド記録部31は、ステップS57に進み、受け取ったイベントの種類が「通信イベント」であるかをイベント種類対応表により判定する。コマンド記録部31は受け取ったイベントの種類が「通信イベント」であれば、ステップS58に進み、受け取ったイベントをコマンド変換対応表によりコマンドに変換する。   If the received event type is not “screen event”, the command recording unit 31 proceeds to step S57 and determines whether the received event type is “communication event” from the event type correspondence table. If the type of the received event is “communication event”, the command recording unit 31 proceeds to step S58 and converts the received event into a command using the command conversion correspondence table.

なお、受け取ったイベントの種類が「画面イベント」でなければ、コマンド記録部31はステップS59に進み、ユーザイベントでも画面イベントでも通信イベントでもない独自イベントをコマンド変換対応表によりコマンドに変換する。そして、コマンド記録部31はステップS54,S56,S58及びS59に続いてステップS60に進み、変換したコマンドを図20のようにコマンドストア32に記録する。   If the received event type is not “screen event”, the command recording unit 31 proceeds to step S59, and converts a unique event that is neither a user event, a screen event nor a communication event into a command using the command conversion correspondence table. Then, the command recording unit 31 proceeds to step S60 following steps S54, S56, S58 and S59, and records the converted command in the command store 32 as shown in FIG.

図20はコマンドストアの一例の構成図である。図20のコマンドストア32は、受け取ったイベントの種類と、変換したコマンドと、位置と、型と、属性と、属性値とが対応付けられて記録される。   FIG. 20 is a configuration diagram of an example of a command store. The command store 32 of FIG. 20 records the received event type, converted command, position, type, attribute, and attribute value in association with each other.

(再生時の処理を表したフローチャート)
図21は再生時のコマンド読取部の処理を表した一例のフローチャートである。図21のフローチャートでは、ステップS71に進み、コマンド読取部42が、図7において図示を省略しているイベントストアが空か否かを判定する。コマンド読取部42はイベントストアが空であれば、ステップS72に進み、コマンドストア32からコマンドを1つ読み取る。
(Flow chart showing processing during playback)
FIG. 21 is a flowchart illustrating an example of processing performed by the command reading unit during reproduction. In the flowchart of FIG. 21, the process proceeds to step S71, and the command reading unit 42 determines whether or not the event store not shown in FIG. 7 is empty. If the event store is empty, the command reading unit 42 proceeds to step S72 and reads one command from the command store 32.

ステップS73に進み、コマンド読取部42はコマンドストア32にコマンドがないかを判定する。コマンドストア32にコマンドがあれば、コマンド読取部42はステップS74に進み、ステップS72で読み取ったコマンドをイベント解析、画面変更確認部41に送る。なお、ステップS71において、イベントストアが空でなければ、コマンド読取部42はイベントストアが空になるまでステップS71の処理を繰り返す。コマンドストア32にコマンドがなければ、コマンド読取部42はステップS75に進み、エラー一時保管ストア43に残っているエラーを出力した後、図21に示すフローチャートの処理を終了する。   In step S73, the command reading unit 42 determines whether there is a command in the command store 32. If there is a command in the command store 32, the command reading unit 42 proceeds to step S74, and sends the command read in step S72 to the event analysis and screen change confirmation unit 41. If the event store is not empty in step S71, the command reading unit 42 repeats the process of step S71 until the event store is empty. If there is no command in the command store 32, the command reading unit 42 proceeds to step S75, outputs the error remaining in the error temporary storage store 43, and then ends the process of the flowchart shown in FIG.

図22は再生時のイベント解析、画面変更確認部及びイベント実行部の処理を表した一例のフローチャートである。コマンド読取部42からコマンドを受け取ると、イベント解析、画面変更確認部41はステップS81に進み、受け取ったコマンドの種類が「画面イベント」であるかを判定する。   FIG. 22 is a flowchart illustrating an example of processing performed by the event analysis, screen change confirmation unit, and event execution unit during playback. When the command is received from the command reading unit 42, the event analysis and screen change confirmation unit 41 proceeds to step S81, and determines whether or not the type of the received command is “screen event”.

受け取ったコマンドの種類が「画面イベント」であれば、イベント解析、画面変更確認部41はステップS82に進み、後述する比較詳細処理を行う。受け取ったコマンドの種類が「画面イベント」でなければ、イベント解析、画面変更確認部41はステップS83に進み、受け取ったコマンドの種類が「ユーザイベント」であるかを判定する。   If the type of the received command is “screen event”, the event analysis and screen change confirmation unit 41 proceeds to step S82 and performs a comparison detailed process described later. If the received command type is not “screen event”, the event analysis and screen change confirmation unit 41 proceeds to step S83, and determines whether or not the received command type is “user event”.

受け取ったコマンドの種類が「ユーザイベント」であれば、イベント解析、画面変更確認部41はステップS84に進み、イベントストアが空かを判定する。イベントストアが空でなければ、イベント解析、画面変更確認部41はステップS85に進み、イベントストアからイベントを読み取る。ステップS86に進み、イベント解析、画面変更確認部41はステップS85で読み取ったイベントをエラー一時保管ストア43に登録する。   If the received command type is “user event”, the event analysis and screen change confirmation unit 41 proceeds to step S84 and determines whether the event store is empty. If the event store is not empty, the event analysis and screen change confirmation unit 41 proceeds to step S85 and reads the event from the event store. In step S86, the event analysis / screen change confirmation unit 41 registers the event read in step S85 in the error temporary storage store 43.

イベントストアが空であれば、イベント解析、画面変更確認部41はステップS72で読み取ったコマンドをイベント実行部12へ送る。イベント実行部12はステップS87へ進み、ステップS72でコマンドストア32から読み取ったコマンドを各ブラウザに固有のイベントへ変換する。コマンドからイベントへの変換は、例えば図19に示したコマンド変換対応表が用いられる。   If the event store is empty, the event analysis / screen change confirmation unit 41 sends the command read in step S72 to the event execution unit 12. The event execution unit 12 proceeds to step S87, and converts the command read from the command store 32 in step S72 into an event unique to each browser. For the conversion from the command to the event, for example, a command conversion correspondence table shown in FIG. 19 is used.

ステップS86,S87に続いて、又はステップS83において受け取ったコマンドの種類が「ユーザイベント」でなければ、ステップS88に進み、イベント実行部12はイベントをブラウザ1に実行させる。イベント解析、画面変更確認部41は、ステップS82の処理の後、図22に示したフローチャートの処理を終了する。イベント実行部12はステップS88の処理の後、図22に示したフローチャートの処理を終了する。   Subsequent to steps S86 and S87 or if the type of command received in step S83 is not “user event”, the process proceeds to step S88, and the event execution unit 12 causes the browser 1 to execute the event. The event analysis and screen change confirmation unit 41 ends the process of the flowchart shown in FIG. 22 after the process of step S82. The event execution unit 12 ends the process of the flowchart shown in FIG. 22 after the process of step S88.

図23は再生時のイベント解析、画面変更確認部の処理を表した一例のフローチャートである。イベント解析、画面変更確認部41は、ブラウザ1で発生した画面変更の画面イベントをブラウザ1から受け取るまで、ステップS91の処理を繰り返す。   FIG. 23 is a flowchart showing an example of event analysis during playback and processing of the screen change confirmation unit. The event analysis and screen change confirmation unit 41 repeats the process of step S91 until a screen change screen event that has occurred in the browser 1 is received from the browser 1.

ブラウザ1で発生した画面変更の画面イベントをブラウザ1から受け取ると、イベント解析、画面変更確認部41はステップS92に進み、例えば図19に示したコマンド変換対応表によりイベントをコマンドに変換する。ステップS93に進み、イベント解析、画面変更確認部41は後述する比較詳細処理を行ったあと、ステップS91に戻る。   When receiving a screen change screen event generated in the browser 1 from the browser 1, the event analysis and screen change confirmation unit 41 proceeds to step S92, and converts the event into a command using, for example, the command conversion correspondence table shown in FIG. Proceeding to step S93, the event analysis and screen change confirmation unit 41 performs comparison detail processing described later, and then returns to step S91.

図24は再生時に使用される各ストアと、その関係を示す模式図である。図24はコマンドストア32と、イベントストアと、エラー一時保管ストア43と、その関係を示したものである。   FIG. 24 is a schematic diagram showing each store used during reproduction and its relationship. FIG. 24 shows the relationship between the command store 32, the event store, and the error temporary storage store 43.

まず、コマンドストア32とイベントストアとにおける比較対象はイベントの発生順に選択される。図24の例では、イベントストアに記録されている画面イベントがコマンドストア32に記録されている画面イベントと発生順及び位置が異なるため、エラー一時保管ストア43に記録される。   First, the comparison target in the command store 32 and the event store is selected in the order of event occurrence. In the example of FIG. 24, the screen event recorded in the event store is different from the screen event recorded in the command store 32 in the order of occurrence and position, and thus is recorded in the error temporary storage store 43.

しかし、イベントストアに記録されている画面イベントがコマンドストア32に記録されている画面イベントと発生順及び位置だけが異なっているので、イベント解析、画面変更確認部41は、そのエラーが問題ないと判定し、エラー一時保管ストア43に記録されている図24の画面イベントを取り消す。   However, since the screen event recorded in the event store is different from the screen event recorded in the command store 32 only in the order of occurrence and position, the event analysis and screen change confirmation unit 41 has no problem with the error. The screen event shown in FIG. 24 recorded in the error temporary storage store 43 is canceled.

図25はステップS82の比較詳細処理を表した一例のフローチャートである。イベント解析、画面変更確認部41はコマンド読取部42から受け取ったコマンドの種類が「画面イベント」であるときに図25に示すフローチャートの処理を開始する。   FIG. 25 is a flowchart illustrating an example of the detailed comparison process in step S82. The event analysis / screen change confirmation unit 41 starts the process of the flowchart shown in FIG. 25 when the type of the command received from the command reading unit 42 is “screen event”.

ステップS101に進み、イベント解析、画面変更確認部41はイベントストアから1件目のイベントを読み取る。ステップS102に進み、イベント解析、画面変更確認部41はコマンド読取部42から受け取ったコマンドと、ステップS101で読み取ったイベントとを比較し、コマンド,型,属性及び属性値が同じであるか判定する。   In step S101, the event analysis / screen change confirmation unit 41 reads the first event from the event store. In step S102, the event analysis / screen change confirmation unit 41 compares the command received from the command reading unit 42 with the event read in step S101, and determines whether the command, type, attribute, and attribute value are the same. .

コマンド読取部42から受け取ったコマンドと、ステップS101で読み取ったイベントとで、コマンド,型,属性及び属性値が同じでなければ、イベント解析、画面変更確認部41はステップS103に進み、エラー一時保管ストア43にステップS101で読み取ったイベントが存在するかを判定する。エラー一時保管ストア43にステップS101で読み取ったイベントが存在しなければ、イベント解析、画面変更確認部41はステップS104に進み、エラー一時保管ストア43にステップS101で読み取ったイベントを保存する。エラー一時保管ストア43にステップS101で読み取ったイベントが存在すれば、イベント解析、画面変更確認部41はステップS104の処理を行わない。   If the command received from the command reading unit 42 and the event read in step S101 do not have the same command, type, attribute, and attribute value, the event analysis and screen change confirmation unit 41 proceeds to step S103 and temporarily stores an error. It is determined whether the event read in step S101 exists in the store 43. If the event read in step S101 does not exist in the error temporary storage store 43, the event analysis / screen change confirmation unit 41 proceeds to step S104, and stores the event read in step S101 in the error temporary storage store 43. If the event read in step S101 exists in the error temporary storage store 43, the event analysis / screen change confirmation unit 41 does not perform the process of step S104.

ステップS101〜S104の処理は、次のイベントがイベントストアから無くなるまで繰り返される。次のイベントがイベントストアから無くなると、イベント解析、画面変更確認部41はステップS105に進み、エラー一時保管ストア43へコマンド読取部42から受け取ったコマンドを保存したあと、図25に示したフローチャートの処理を終了する。   The processes in steps S101 to S104 are repeated until the next event disappears from the event store. When the next event disappears from the event store, the event analysis and screen change confirmation unit 41 proceeds to step S105, saves the command received from the command reading unit 42 in the error temporary storage store 43, and then the flowchart of FIG. End the process.

コマンド読取部42から受け取ったコマンドと、ステップS101で読み取ったイベントとで、コマンド,型,属性及び属性値が同じであれば、イベント解析、画面変更確認部41は、ステップS106に進み、エラー一時保管ストア43にステップS101で読み取ったイベントが存在するかを判定する。エラー一時保管ストア43にステップS101で読み取ったイベントが存在しなければ、イベント解析、画面変更確認部41は図25に示したフローチャートの処理を終了する。   If the command received from the command reading unit 42 and the event read in step S101 have the same command, type, attribute, and attribute value, the event analysis and screen change confirmation unit 41 proceeds to step S106, and the error temporarily It is determined whether the event read in step S101 exists in the storage store 43. If the event read in step S101 does not exist in the error temporary storage store 43, the event analysis / screen change confirmation unit 41 ends the process of the flowchart shown in FIG.

イベント解析、画面変更確認部41は、エラー一時保管ストア43にステップS101で読み取ったイベントが存在すれば、ステップS107に進み、ステップS101で読み取ったイベントをエラー一時保管ストア43から削除する。また、イベント解析、画面変更確認部41はステップS108に進み、ステップS101で読み取ったイベントをイベントストアから削除したあと、図25に示したフローチャートの処理を終了する。   If the event read in step S101 exists in the error temporary storage store 43, the event analysis / screen change confirmation unit 41 proceeds to step S107, and deletes the event read in step S101 from the error temporary storage store 43. Further, the event analysis / screen change confirmation unit 41 proceeds to step S108, deletes the event read in step S101 from the event store, and then ends the process of the flowchart shown in FIG.

図26はステップS93の比較詳細処理を表した一例のフローチャートである。イベント解析、画面変更確認部41はブラウザ1で発生した画面変更の画面イベントをブラウザ1から受け取ると、エラー一時保管ストア43から1件目のイベントを読み取る。   FIG. 26 is a flowchart illustrating an example of the detailed comparison process in step S93. When the event analysis / screen change confirmation unit 41 receives a screen change screen event that has occurred in the browser 1 from the browser 1, it reads the first event from the error temporary storage store 43.

ステップS112に進み、イベント解析、画面変更確認部41はコマンド読取部42から受け取ったコマンドと、ステップS111でエラー一時保管ストア43から読み取ったイベントとを比較し、コマンド,型,属性及び属性値が同じであるか判定する。コマンド読取部42から受け取ったコマンドと、ステップS111でエラー一時保管ストア43から読み取ったイベントとで、コマンド,型,属性及び属性値が同じでなければ、イベント解析、画面変更確認部41はステップS111に戻り、エラー一時保管ストア43から次のイベントを読み取って処理を続ける。   In step S112, the event analysis / screen change confirmation unit 41 compares the command received from the command reading unit 42 with the event read from the error temporary storage store 43 in step S111, and the command, type, attribute, and attribute value are determined. Determine if they are the same. If the command received from the command reading unit 42 and the event read from the error temporary storage store 43 in step S111 do not have the same command, type, attribute, and attribute value, the event analysis and screen change confirmation unit 41 performs step S111. Then, the next event is read from the error temporary storage store 43 and the processing is continued.

なお、エラー一時保管ストア43から次のイベントが無くなると、イベント解析、画面変更確認部41はステップS113に進み、エラー一時保管ストア43へコマンド読取部42から受け取ったコマンドを保存する。ステップS114に進み、イベント解析、画面変更確認部41はイベントストアへコマンド読取部42から受け取ったコマンドを保存したあと、図26に示したフローチャートの処理を終了する。   When there is no next event from the error temporary storage store 43, the event analysis / screen change confirmation unit 41 proceeds to step S113, and stores the command received from the command reading unit 42 in the error temporary storage store 43. In step S114, the event analysis / screen change confirmation unit 41 stores the command received from the command reading unit 42 in the event store, and then ends the process of the flowchart illustrated in FIG.

なお、コマンド読取部42から受け取ったコマンドと、ステップS111でエラー一時保管ストア43から読み取ったイベントとで、コマンド,型,属性及び属性値が同じであれば、イベント解析、画面変更確認部41はステップS115に進み、ステップS111で読み取ったイベントをエラー一時保管ストア43から削除したあと、図26に示したフローチャートの処理を終了する。   If the command received from the command reading unit 42 and the event read from the error temporary storage store 43 in step S111 have the same command, type, attribute, and attribute value, the event analysis and screen change confirmation unit 41 Proceeding to step S115, the event read at step S111 is deleted from the error temporary storage store 43, and then the processing of the flowchart shown in FIG.

なお、エラー出力部14によるエラー一時保管ストア43に残っているエラーの出力は例えば図27に示すようなエラー画面により行われる。図27は、エラー画面の一例のイメージ図である。   The error output unit 14 outputs an error remaining in the error temporary storage store 43 on an error screen as shown in FIG. 27, for example. FIG. 27 is an image diagram of an example of an error screen.

本発明は、以下に記載する付記のような構成が考えられる。
(付記1)
アプリケーションプログラムが搭載されたコンピュータを、
前記アプリケーションプログラムに対してテストケースを実行したときに前記アプリケーションプログラムで発生したユーザイベント及び画面イベントを記録装置に累積記録する記録制御手段と、
前記記録装置に累積記録された前記ユーザイベント及び画面イベントを読み出し、テスト対象の前記アプリケーションプログラムで前記ユーザイベントを順次実行する実行手段と、
テスト対象の前記アプリケーションプログラムで一のユーザイベントを実行してから次のユーザイベントを実行するまでに発生した画面イベントと、前記記録装置から読み出した前記一のユーザイベントを実行してから次のユーザイベントを実行するまでに発生した画面イベントとを比較し、一致していない前記画面イベントをエラーとして出力するエラー出力制御手段と
して機能させるためのアプリケーションプログラムのテストプログラム。
(付記2)
前記記録制御手段は、前記アプリケーションプログラムに対してテストケースを実行したときに前記アプリケーションプログラムで発生したユーザイベント及び画面イベントを検知する検知手段と、
前記イベント検知手段が検知した前記ユーザイベント及び画面イベントを抽象化して前記記録装置に累積記録する記録手段とを有し、
前記実行手段は、前記記録装置に累積記録された抽象化された前記ユーザイベント及び画面イベントを読み出す読み出し手段と、
テスト対象の前記アプリケーションプログラムを判定する判定手段と、
前記判定手段により判定した前記アプリケーションプログラムに応じて、抽象化された前記ユーザイベントを具体化し、そのユーザイベントをテスト対象の前記アプリケーションプログラムで実行するイベント実行手段とを有する
ことを特徴とする付記1記載のアプリケーションプログラムのテストプログラム。
(付記3)
前記エラー出力制御手段は、テスト対象の前記アプリケーションプログラムで一のユーザイベントを実行してから次のユーザイベントを実行するまでに発生した画面イベントと、前記記録装置から読み出した前記一のユーザイベントを実行してから次のユーザイベントを実行するまでに発生した画面イベントとを発生の順番を考慮せずに比較し、一致していない前記画面イベントをエラーとして出力することを特徴とする付記1記載のアプリケーションプログラムのテストプログラム。
(付記4)
前記記録制御手段により前記記録装置に累積記録される前記画面イベントは、画面変更の差分であり、DOM(Document Object Model)で取得する情報であることを特徴とする付記1記載のアプリケーションプログラムのテストプログラム。
(付記5)
前記記録制御手段により前記記録装置に累積記録される前記画面イベントは、Xpathで表現される変更された箇所と、DOMの部分木とで表された情報であることを特徴とする付記4記載のアプリケーションプログラムのテストプログラム。
The present invention may have the following configurations as described below.
(Appendix 1)
A computer with an application program installed
Recording control means for accumulating and recording in a recording device user events and screen events that occur in the application program when a test case is executed for the application program;
Execution means for reading the user events and screen events accumulated and recorded in the recording device and sequentially executing the user events in the application program to be tested;
A screen event that occurs between the execution of one user event and the execution of the next user event in the application program to be tested, and the next user after the execution of the first user event read from the recording device A test program for an application program for comparing screen events that have occurred before an event is executed and causing the screen events that do not match to function as error output control means for outputting as an error.
(Appendix 2)
The recording control means detects a user event and a screen event generated in the application program when a test case is executed for the application program;
Recording means for abstracting the user event and screen event detected by the event detection means and cumulatively recording them in the recording device;
The execution means reads out the abstracted user event and screen event accumulated and recorded in the recording device;
Determining means for determining the application program to be tested;
Appendix 1 characterized by having an event execution unit that materializes the abstracted user event according to the application program determined by the determination unit and executes the user event by the application program to be tested Application program test program described.
(Appendix 3)
The error output control means includes a screen event that occurs from the execution of one user event in the application program to be tested to the execution of the next user event, and the one user event read from the recording device. The screen event generated from execution to the next user event is compared without considering the generation order, and the screen event that does not match is output as an error. Application program test program.
(Appendix 4)
The application program test according to appendix 1, wherein the screen event accumulated and recorded in the recording device by the recording control means is a difference in screen change and is information acquired by DOM (Document Object Model). program.
(Appendix 5)
The additional event according to claim 4, wherein the screen event accumulated and recorded in the recording device by the recording control means is information represented by a changed portion expressed in Xpath and a DOM subtree. Application program test program.

本発明は、具体的に開示された実施例に限定されるものではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。   The present invention is not limited to the specifically disclosed embodiments, and various modifications and changes can be made without departing from the scope of the claims.

アプリケーションの画面をテストする従来の手法を表した模式図である。It is the schematic diagram showing the conventional method of testing the screen of an application. アプリケーションの画面をビットマップ比較によりテストする従来の手法を表した模式図である。It is the schematic diagram showing the conventional method of testing the screen of an application by bitmap comparison. ブラウザの画面をテストする従来の仕組み(記録時)を表した模式図である。It is the schematic diagram showing the conventional mechanism (at the time of recording) which tests the screen of a browser. ブラウザの画面をテストする従来の仕組み(再生時)を表した模式図である。It is the schematic diagram showing the conventional mechanism (at the time of reproduction | regeneration) which tests the screen of a browser. ブラウザの画面をテストする本発明の手法を表した模式図である。It is the schematic diagram showing the method of this invention which tests the screen of a browser. ブラウザの画面をテストする本発明の仕組み(記録時)を表した一例の模式図である。It is a schematic diagram of an example showing the mechanism (at the time of recording) of this invention which tests the screen of a browser. ブラウザの画面をテストする本発明の仕組み(再生時)を表した一例の模式図である。It is a schematic diagram of an example showing the mechanism (at the time of reproduction | regeneration) of this invention which tests the screen of a browser. ブラウザの画面をテストする本発明の他の仕組み(記録時、再生時)を表した一例の模式図である。It is a schematic diagram of an example showing the other mechanism (at the time of recording, at the time of reproduction | regeneration) of this invention which tests the screen of a browser. コマンドをイベントに変換可能なイベント実行部の一例の模式図である。It is a schematic diagram of an example of the event execution part which can convert a command into an event. アプリケーションの画面をテストする従来の手法の問題点を表したイメージ図である。It is an image figure showing the problem of the conventional method of testing the screen of an application. アプリケーションの画面をテストする従来の手法の問題点を表したイメージ図である。It is an image figure showing the problem of the conventional method of testing the screen of an application. アプリケーションの画面をテストする本発明の手法を表したイメージ図である。It is an image figure showing the method of this invention which tests the screen of an application. 異なる変更があるときに同じ変更が画面内の別の部分にあるか否かの判定の手法を表した一例の模式図である。It is a schematic diagram showing an example of a method for determining whether or not the same change is in another part of the screen when there are different changes. エラー検知及びエラー比較の仕組みを表した模式図である。It is a schematic diagram showing the mechanism of error detection and error comparison. 本発明のエラー検知とエラー比較とによるエラー判定を表した一例のイメージ図である。It is an image figure showing an example showing error judgment by error detection and error comparison of the present invention. コンピュータ装置の一例の構成図である。It is a block diagram of an example of a computer apparatus. 記録時の処理を表した一例のフローチャートである。It is a flowchart of an example showing the process at the time of recording. イベント種類対応表の一例の構成図である。It is a block diagram of an example of an event type correspondence table. コマンド変換対応表の一例の構成図である。It is a block diagram of an example of a command conversion correspondence table. コマンドストアの一例の構成図である。It is a block diagram of an example of a command store. 再生時のコマンド読取部の処理を表した一例のフローチャートである。It is a flowchart of an example showing the process of the command reading part at the time of reproduction | regeneration. 再生時のイベント解析、画面変更確認部及びイベント実行部の処理を表した一例のフローチャートである。It is a flowchart of an example showing the process of the event analysis at the time of reproduction | regeneration, a screen change confirmation part, and an event execution part. 再生時のイベント解析、画面変更確認部の処理を表した一例のフローチャートである。It is a flowchart of an example showing the process of the event analysis at the time of reproduction | regeneration, and a screen change confirmation part. 再生時に使用される各ストアと、その関係を示す模式図である。It is a schematic diagram which shows each store used at the time of reproduction | regeneration, and its relationship. ステップS82の比較詳細処理を表した一例のフローチャートである。It is a flowchart of an example showing the comparison detailed process of step S82. ステップS93の比較詳細処理を表した一例のフローチャートである。It is a flowchart of an example showing the comparison detailed process of step S93. エラー画面の一例のイメージ図である。It is an image figure of an example of an error screen.

符号の説明Explanation of symbols

1 ブラウザ
2 ブラウザプラグイン
3 イベント検知部
4 イベントストア
5 画面ストア
10 Java(登録商標)Scriptライブラリ
11 比較部
12 イベント実行部
13 イベント読取部
14 エラー出力部
21 ユーザ
22 テスト記録機構
23 サーバ
31 コマンド記録部
32 コマンドストア
41 イベント解析、画面変更確認部
42 コマンド読取部
43 エラー一時保管ストア
51 コマンド受取部
52 実行ブラウザ判定部
53 ブラウザA向けイベント実行部
54 ブラウザB向けイベント実行部
61 入力装置
62 出力装置
63 ドライブ装置
64 補助記憶装置
65 主記憶装置
66 演算処理装置
67 インターフェース装置
68 記録媒体
B バス
DESCRIPTION OF SYMBOLS 1 Browser 2 Browser plug-in 3 Event detection part 4 Event store 5 Screen store 10 Java (trademark) Script library 11 Comparison part 12 Event execution part 13 Event reading part 14 Error output part 21 User 22 Test recording mechanism 23 Server 31 Command recording Unit 32 Command store 41 Event analysis and screen change confirmation unit 42 Command reading unit 43 Error temporary storage store 51 Command receiving unit 52 Executing browser determination unit 53 Event execution unit for browser A 54 Event execution unit for browser B 61 Input device 62 Output device 63 Drive device 64 Auxiliary storage device 65 Main storage device 66 Arithmetic processing device 67 Interface device 68 Recording medium B bus

Claims (5)

アプリケーションプログラムが搭載されたコンピュータを、
前記アプリケーションプログラムに対してテストケースを実行したときに前記アプリケーションプログラムで発生したユーザイベント及び画面イベントを記録装置に累積記録する記録制御手段と、
前記記録装置に累積記録された前記ユーザイベント及び画面イベントを読み出し、テスト対象の前記アプリケーションプログラムで前記ユーザイベントを順次実行する実行手段と、
テスト対象の前記アプリケーションプログラムで一のユーザイベントを実行してから次のユーザイベントを実行するまでに発生した画面イベントと、前記記録装置から読み出した前記一のユーザイベントを実行してから次のユーザイベントを実行するまでに発生した画面イベントとを比較し、一致していない前記画面イベントをエラーとして出力するエラー出力制御手段と
して機能させるためのアプリケーションプログラムのテストプログラム。
A computer with an application program installed
Recording control means for accumulating and recording in a recording device user events and screen events that occur in the application program when a test case is executed for the application program;
Execution means for reading the user events and screen events accumulated and recorded in the recording device and sequentially executing the user events in the application program to be tested;
A screen event that occurs between the execution of one user event and the execution of the next user event in the application program to be tested, and the next user after the execution of the first user event read from the recording device A test program for an application program for comparing screen events that have occurred before an event is executed and causing the screen events that do not match to function as error output control means for outputting as an error.
前記記録制御手段は、前記アプリケーションプログラムに対してテストケースを実行したときに前記アプリケーションプログラムで発生したユーザイベント及び画面イベントを検知する検知手段と、
前記イベント検知手段が検知した前記ユーザイベント及び画面イベントを抽象化して前記記録装置に累積記録する記録手段とを有し、
前記実行手段は、前記記録装置に累積記録された抽象化された前記ユーザイベント及び画面イベントを読み出す読み出し手段と、
テスト対象の前記アプリケーションプログラムを判定する判定手段と、
前記判定手段により判定した前記アプリケーションプログラムに応じて、抽象化された前記ユーザイベントを具体化し、そのユーザイベントをテスト対象の前記アプリケーションプログラムで実行するイベント実行手段とを有する
ことを特徴とする請求項1記載のアプリケーションプログラムのテストプログラム。
The recording control means detects a user event and a screen event generated in the application program when a test case is executed for the application program;
Recording means for abstracting the user event and screen event detected by the event detection means and cumulatively recording them in the recording device;
The execution means reads out the abstracted user event and screen event accumulated and recorded in the recording device;
Determining means for determining the application program to be tested;
An event execution unit that materializes the abstracted user event in accordance with the application program determined by the determination unit and executes the user event by the application program to be tested. 1. A test program for the application program according to 1.
前記エラー出力制御手段は、テスト対象の前記アプリケーションプログラムで一のユーザイベントを実行してから次のユーザイベントを実行するまでに発生した画面イベントと、前記記録装置から読み出した前記一のユーザイベントを実行してから次のユーザイベントを実行するまでに発生した画面イベントとを発生の順番を考慮せずに比較し、一致していない前記画面イベントをエラーとして出力することを特徴とする請求項1記載のアプリケーションプログラムのテストプログラム。   The error output control means includes a screen event that occurs from the execution of one user event in the application program to be tested to the execution of the next user event, and the one user event read from the recording device. 2. The screen event generated between execution and execution of the next user event is compared without considering the generation order, and the screen event that does not match is output as an error. Application program test program described. 前記記録制御手段により前記記録装置に累積記録される前記画面イベントは、画面変更の差分であり、DOM(Document Object Model)で取得する情報であることを特徴とする請求項1記載のアプリケーションプログラムのテストプログラム。   2. The application program according to claim 1, wherein the screen event accumulated and recorded in the recording device by the recording control means is a difference in screen change and is information acquired by DOM (Document Object Model). Test program. 前記記録制御手段により前記記録装置に累積記録される前記画面イベントは、Xpathで表現される変更された箇所と、DOMの部分木とで表された情報であることを特徴とする請求項4記載のアプリケーションプログラムのテストプログラム。   5. The screen event accumulated and recorded in the recording device by the recording control means is information represented by a changed location expressed in Xpath and a DOM subtree. Application program test program.
JP2007314730A 2007-12-05 2007-12-05 Application program test program Expired - Fee Related JP4859821B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007314730A JP4859821B2 (en) 2007-12-05 2007-12-05 Application program test program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007314730A JP4859821B2 (en) 2007-12-05 2007-12-05 Application program test program

Publications (2)

Publication Number Publication Date
JP2009140155A JP2009140155A (en) 2009-06-25
JP4859821B2 true JP4859821B2 (en) 2012-01-25

Family

ID=40870714

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007314730A Expired - Fee Related JP4859821B2 (en) 2007-12-05 2007-12-05 Application program test program

Country Status (1)

Country Link
JP (1) JP4859821B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012038162A (en) * 2010-08-09 2012-02-23 Ricoh Co Ltd Automatic test tool program and automatic test method
JP5594199B2 (en) * 2011-03-16 2014-09-24 富士通株式会社 File upload proxy method, proxy program, and proxy device
JP5747751B2 (en) * 2011-09-06 2015-07-15 富士通株式会社 Regression test support program and regression test support device
US8381094B1 (en) * 2011-09-28 2013-02-19 Fujitsu Limited Incremental visual comparison of web browser screens
JP5677924B2 (en) * 2011-09-30 2015-02-25 株式会社日立ソリューションズ Test automation system
JP5639127B2 (en) * 2012-08-15 2014-12-10 株式会社野村総合研究所 Test apparatus, test system, and computer program
JP5991695B2 (en) 2013-12-06 2016-09-14 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation Method for detecting an effect caused by changing a source code of an application from which a document object model tree and a cascading style sheet can be retrieved, and a computer for detecting the effect and the computer ·program
JP2020166492A (en) 2019-03-29 2020-10-08 コニカミノルタ株式会社 Test apparatus, test method and computer program
KR102344661B1 (en) 2020-12-29 2021-12-30 쿠팡 주식회사 Method for providing information based on expected result value and computing device using the same

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003044318A (en) * 2001-08-02 2003-02-14 Fujitsu Ltd Program and method for supporting test
JP4140916B2 (en) * 2005-12-22 2008-08-27 インターナショナル・ビジネス・マシーンズ・コーポレーション Method for analyzing state transition in web page

Also Published As

Publication number Publication date
JP2009140155A (en) 2009-06-25

Similar Documents

Publication Publication Date Title
JP4859821B2 (en) Application program test program
US7529977B2 (en) Automated extensible user interface testing
CN109086203B (en) Page detection method and device
TWI510915B (en) Computer automated test system and test methods, recording media and program products
US20100211865A1 (en) Cross-browser page visualization generation
CN106951345B (en) Consistency test method and device for disk data of virtual machine
TWI533123B (en) Method and system for automated test and result comparison
US20080127103A1 (en) Dynamic deneration and implementation of globalization verification testing for user interface controls
US20070234305A1 (en) Tracing errors in software
JP4023803B2 (en) Web application development support apparatus, data processing method, and program
US8775551B2 (en) Testing a network system
JP2006185211A (en) Program analysis system, test execution device, and analysis method and program thereof
US20070162427A1 (en) Query parameter output page finding method, query parameter output page finding apparatus, and computer product
CN115080398A (en) Automatic interface test system and method
US20050021701A1 (en) Log analyzing method, execution apparatus for the same, and recording medium for recording process program thereof
CN115576600A (en) Code change-based difference processing method and device, terminal and storage medium
JP4874010B2 (en) Test scenario creation method and system, test scenario creation program and recording medium
JP4215255B2 (en) Degradation confirmation inspection method, degradation confirmation inspection system, and program therefor
JP2006309576A (en) Verification device and verification method for logic system, and storage medium and computer program
US20090066984A1 (en) Device setting apparatus, device setting method, information acquiring apparatus, information acquiring method, storage medium, and program
WO2023275887A1 (en) System and method for automated software testing
CN106557379B (en) Method and device for generating silent installation package
JP4897359B2 (en) MEMORY MANAGEMENT DEVICE, MEMORY MANAGEMENT METHOD, AND PROGRAM
WO2016120989A1 (en) Management computer and rule test method
KR20090083620A (en) Test automating system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100715

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20111004

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111101

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141111

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees