JP4395761B2 - Program test support apparatus and method - Google Patents

Program test support apparatus and method Download PDF

Info

Publication number
JP4395761B2
JP4395761B2 JP2005059991A JP2005059991A JP4395761B2 JP 4395761 B2 JP4395761 B2 JP 4395761B2 JP 2005059991 A JP2005059991 A JP 2005059991A JP 2005059991 A JP2005059991 A JP 2005059991A JP 4395761 B2 JP4395761 B2 JP 4395761B2
Authority
JP
Japan
Prior art keywords
test
program
operation component
screen
storage means
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005059991A
Other languages
Japanese (ja)
Other versions
JP2006244195A (en
Inventor
洋介 日比
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2005059991A priority Critical patent/JP4395761B2/en
Publication of JP2006244195A publication Critical patent/JP2006244195A/en
Application granted granted Critical
Publication of JP4395761B2 publication Critical patent/JP4395761B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、GUI(Graphical User Interface)を有する対話型プログラムのバグ検出のためのテストを支援する装置に関し、特に、テストの自動化による支援を行う装置に関する。   The present invention relates to an apparatus for supporting a test for detecting a bug in an interactive program having a GUI (Graphical User Interface), and more particularly to an apparatus for supporting an automatic test.

GUIプログラムを自動的にテストする装置として、大量のデータを自動的に入力する方法を用いたプログラムテスト支援装置が特許文献1および特許文献2に記載されている。これらのプログラムテスト支援装置では、利用者が行った操作を記録し、操作の中から入力項目を抽出し、抽出した入力項目に対してテストすべき一つあるいは複数のデータを利用者が設定し、これをプログラムテスト支援装置が自動的に組み合わせ、記録した操作と組み合わせたデータを元に自動的にテストを行う。また特許文献1のプログラムテスト支援装置では、あらかじめ利用者により登録されたエラーチェックのための条件を元に自動的にエラーチェックを行い、エラーとなった結果に対し分析を行い、エラーの原因となった入力項目を自動的に抽出することができる。さらに特許文献2のプログラムテスト支援装置では、CASEツール等を用いて作成される上位設計情報を元にエラーチェックのための条件を自動的に生成することができる。   Patent document 1 and patent document 2 describe a program test support device using a method of automatically inputting a large amount of data as a device for automatically testing a GUI program. In these program test support devices, operations performed by the user are recorded, input items are extracted from the operations, and the user sets one or more data to be tested for the extracted input items. This is automatically combined by the program test support device, and the test is automatically performed based on the data combined with the recorded operation. In the program test support device of Patent Document 1, an error check is automatically performed based on the error check conditions registered in advance by the user, the result of the error is analyzed, and the cause of the error is determined. It is possible to automatically extract the input items that have become. Furthermore, the program test support apparatus of Patent Document 2 can automatically generate a condition for error check based on higher-level design information created using a CASE tool or the like.

また、GUIプログラムの操作部品を自動的に抽出してGUI画面の遷移を網羅的に行う方法を用いたプログラムテスト支援装置が特許文献3に記載されている。このプログラムテスト支援装置では、GUI操作部品の識別子を表スタックに格納し、各操作部品に対し順に所定の操作を行うとともに、各操作によるGUI画面の遷移を保存し、GUI画面の状態に変化があった場合、再帰的にGUI操作部品の識別子の表スタックへの格納を行うことで、すべてのGUI操作部品のプロパティを走査し、各GUI操作部品のプロパティを比較することで、GUIプログラムの設計の統一感を自動的に調べることができる。   Further, Patent Document 3 discloses a program test support apparatus that uses a method for automatically extracting GUI program operation parts and exhaustively performing GUI screen transitions. In this program test support device, GUI operation component identifiers are stored in a table stack, predetermined operations are sequentially performed on each operation component, GUI screen transitions by each operation are saved, and the state of the GUI screen is changed. If there is, the GUI program design is performed by recursively storing the GUI operation component identifiers in the table stack, scanning the properties of all GUI operation components, and comparing the properties of each GUI operation component. Can automatically check the sense of unity.

さらに、特許文献4には、プログラムのテスト実行用テストデータを作成する方法として、プログラム仕様書やレコード仕様書に基づいて、データ項目のタイプ、桁数に合致したテストデータを生成することが記載されている。
特開2000-112784 特開2003-228493 特開平10-198586 特開平6-110733
Furthermore, Patent Document 4 describes that as a method for creating test data for program test execution, test data that matches the type of data item and the number of digits is generated based on a program specification or a record specification. Has been.
JP2000-112784 JP2003-228493 JP 10-198586 JP-A-6-110733

特許文献1または特許文献2に記載のプログラムテスト支援装置では、テストデータの入力を利用者が一つ一つ行う必要がある。このため利用者自身が各入力項目に対して、有用であるテストデータを考える必要があり、利用者の作業が煩雑になり、かつ、適切なテストデータを用意できない恐れがある。また、始めに一通り人の手による操作を行わなくてはならず、操作経路自体までは自動的に判別できない。   In the program test support apparatus described in Patent Document 1 or Patent Document 2, a user needs to input test data one by one. For this reason, it is necessary for the user himself / herself to consider useful test data for each input item, and the user's work becomes complicated, and appropriate test data may not be prepared. In addition, it is necessary to first perform an operation by a human hand, and the operation path itself cannot be automatically determined.

特許文献3には、GUIプログラムの操作部品を抽出して操作することでGUI画面の遷移を網羅的に行う方法が記載されているので、その技術を特許文献1または特許文献2に記載のプログラムテスト支援装置に適用すれば、始めに一通り人の手による操作を行う必要はなくなる。しかし、特許文献3において抽出する操作部品は、メニュー、サブメニュー、オプションボタン、プッシュボタンといった画面遷移を発生させる操作部品に限定されており(0037段落)、テキストボックスなど画面遷移を発生させない操作部品は考慮されていない。GUIプログラムによっては、テキストボックスに所定の値を入力してからプッシュボタンを操作しないと次の状態に遷移しない場合があるため、そのようなGUIプログラムのテストを十分に実施することができない。   Patent Document 3 describes a method for exhaustively performing GUI screen transitions by extracting and manipulating operation parts of a GUI program, and the technology is described in Patent Document 1 or Patent Document 2 If it is applied to a test support device, it is not necessary to first perform a manual operation. However, the operation components extracted in Patent Document 3 are limited to operation components that generate screen transitions such as menus, submenus, option buttons, and push buttons (paragraph 0037), and operation components that do not generate screen transitions such as text boxes. Is not considered. Depending on the GUI program, since the transition to the next state may not occur unless the push button is operated after a predetermined value is entered in the text box, such a GUI program cannot be sufficiently tested.

また特許文献4にテストデータを自動生成する技術が記載されているので、その技術を特許文献1または特許文献2に記載のプログラムテスト支援装置に適用すれば、テストデータの入力を利用者が行う必要はなくなる。しかし、特許文献4では、データ項目のタイプ、桁数に合致した正常なテストデータを生成するだけである。プログラムテストでは不正な値によるテストも必要であり、そのような不正な値を使用したテストを実行する場合、依然として利用者が入力する必要がある。   Further, since a technique for automatically generating test data is described in Patent Document 4, if the technique is applied to the program test support apparatus described in Patent Document 1 or Patent Document 2, a user inputs test data. There is no need. However, Patent Document 4 only generates normal test data that matches the data item type and the number of digits. The program test also requires a test with an invalid value, and when executing a test using such an invalid value, the user still needs to input it.

本発明の目的は、被テスト対象プログラムの画面遷移を発生させる操作部品に加えてテキストボックスなど画面遷移を発生させない操作部品も自動的に操作しながらGUIプログラムのバグ検出のためのテストを自動で実行することができるプログラムテスト支援装置および方法を提供することにある。   An object of the present invention is to automatically perform a test for detecting a bug in a GUI program while automatically operating an operation component that does not generate a screen transition such as a text box in addition to an operation component that generates a screen transition of a program to be tested. An object of the present invention is to provide a program test support apparatus and method that can be executed.

本発明の別の目的は、正常系のテストデータに加えて異常系のテストデータを自動的に発生しながらGUIプログラムのバグ検出のためのテストを自動で実行することができるプログラムテスト支援装置および方法を提供することにある。   Another object of the present invention is to provide a program test support device capable of automatically executing a test for detecting a bug in a GUI program while automatically generating abnormal test data in addition to normal test data. It is to provide a method.

本発明のプログラムテスト支援装置は、GUIによる入出力操作を行う対話型プログラムである被テスト対象プログラムであって、画面遷移を発生させない操作部品に値を入力してから画面遷移を発生させる操作部品を操作しないと次の状態に画面が遷移しないような被テスト対象プログラムのテストを支援するプログラムテスト支援装置において、前記被テスト対象プログラムの出力画面に含まれる操作部品に対する有効な操作の種類および入力値の条件に関する情報を記述した設計情報を記憶する設計情報記憶手段と、テストデータの生成規則を記述したテストパターンを記憶するテストパターン記憶手段と、前記テスト対象プログラムのテスト対象とする出力画面に存在する操作部品を検出する操作部品検出手段と、前記操作部品検出手段で検出された操作部品の情報を記憶する操作部品記憶手段と、前記操作部品記憶手段に記憶された操作部品について、前記設計情報記憶手段に記憶された当該操作部品に対する有効な操作の種類および入力値の条件に関する情報と前記テストパターン記憶手段に記憶されたテストデータの生成規則に基づいて、テストデータを生成するテストデータ生成手段と、前記操作部品記憶手段に記憶された操作部品のうち、画面遷移を発生しない操作部品について前記テストデータ生成手段で生成されたテストデータと、画面遷移を発生する操作部品について前記テストデータ生成手段で生成されたテストデータとを、画面遷移を発生しない操作部品への操作が、画面遷移が発生する操作部品への操作よりも時間的に先に実施されるように組み合わせたテストケースのみを生成するテストケース生成手段と、前記テストケース生成手段で生成されたテストケースを記憶するテストケース記憶手段と、前記テスト対象プログラムの実行環境の機能を用いて、前記テスト対象プログラムの起動や終了、前記テスト対象プログラムの出力画面に存在する操作部品に対する操作を行う手段であって、前記テストケース記憶手段からテストケースを読み出し、該読み出したテストケースの1つ1つについて、そのテストケースの実行を開始する前に前記テスト対象プログラムを一旦リセットしてから、そのテストケースに基づいて、前記テスト対象プログラムの操作部品に対する操作を実行するプログラム制御手段と、前記プログラム制御手段によって操作部品に対する操作が実行された前記テスト対象プログラムから出力された新たな出力画面を含むテスト結果を記憶するテスト結果記憶手段とを備える。 The program test support apparatus of the present invention is a program to be tested, which is an interactive program for performing input / output operations using a GUI, and an operation component that generates a screen transition after a value is input to the operation component that does not generate a screen transition In a program test support apparatus that supports the test of the program under test so that the screen does not transition to the next state unless the button is operated, the types and inputs of the effective operations for the operation components included in the output screen of the program under test Design information storage means for storing design information describing information on value conditions, test pattern storage means for storing test patterns describing test data generation rules, and an output screen as a test target of the test target program Operation component detection means for detecting an existing operation component, and the operation component detection means Operation component storage means for storing information of the detected operation component, and for the operation components stored in the operation component storage means, valid operation types and input values for the operation components stored in the design information storage means The test data generation means for generating test data based on the information on the conditions of the test data and the test data generation rules stored in the test pattern storage means, and the screen transition among the operation parts stored in the operation component storage means The test data generated by the test data generation unit for the operation component that does not generate the screen and the test data generated by the test data generation unit for the operation component that generates the screen transition to the operation component that does not generate the screen transition Combined so that operations are performed earlier in time than operations on operation components that cause screen transitions A test case generating means for generating only test case, the test case storage means for storing the test cases generated by the test case generating means, by using the function of the execution environment of the test program, the test program A means for performing operation on an operation component existing on an output screen of the test target program, starting and ending, reading a test case from the test case storage means, and testing each of the read test cases A program control unit that resets the test target program before starting execution of the case and then executes an operation on the operation component of the test target program based on the test case; and the operation component by the program control unit The test target for which the operation on was performed Test result storage means for storing a test result including a new output screen output from the program.

『作用』
本発明にあっては、設計情報記憶手段が被テスト対象プログラムの出力画面に含まれる操作部品の有効な操作範囲に関する情報を記述した設計情報を記憶すると共に、テストパターン記憶手段がテストデータの生成規則を記述したテストパターンを記憶しており、被テスト対象プログラムのテストに際して、操作部品検出手段が、テスト対象プログラムのテスト対象とする出力画面に存在する操作部品を検出して操作部品記憶手段に記憶し、テストデータ生成手段が、操作部品記憶手段に記憶された操作部品について、設計情報記憶手段に記憶された当該操作部品の有効な操作範囲に関する情報とテストパターン記憶手段に記憶されたテストデータの生成規則に基づいて、テストデータを生成し、テストパターン生成手段が、操作部品記憶手段に記憶された操作部品のうち、画面遷移を発生しない操作部品についてテストデータ生成手段で生成されたテストデータと、画面遷移を発生する操作部品についてテストデータ生成手段で生成されたテストデータとを組み合わせたテストケースを生成してテストケース記憶手段に記憶し、プログラム制御手段が、テストケース記憶手段からテストケースを読み出し、この読み出したテストケースに基づいて、テスト対象プログラムの操作部品に対する操作を実行し、テスト対象プログラムから出力された新たな出力画面を含むテスト結果をテスト結果記憶手段に記憶する。
"Action"
In the present invention, the design information storage means stores design information describing information related to the effective operation range of the operation component included in the output screen of the test target program, and the test pattern storage means generates test data. Test patterns describing rules are stored, and when testing a program to be tested, the operation component detection means detects an operation component present on the output screen to be tested by the test target program and stores it in the operation component storage means The operation data stored in the operation component storage means is stored in the design information storage means, and the test data stored in the test pattern storage means is stored in the design information storage means. Test data is generated based on the generation rule of the test component, and the test pattern generation means The test data generated by the test data generation means for the operation parts that do not cause screen transition and the test data generated by the test data generation means for the operation parts that generate screen transition among the operation parts stored in The test case is generated and stored in the test case storage means, and the program control means reads the test case from the test case storage means, and executes an operation on the operation component of the test target program based on the read test case. Then, a test result including a new output screen output from the test target program is stored in the test result storage means.

本発明によれば、テキストボックスなど画面遷移を発生させない操作部品に値を入力してからプッシュボタンなど画面遷移を発生させる操作部品を操作しないと次の状態に画面が遷移しない被テスト対象プログラムであっても、テストを自動的に実施することができる。その理由は、画面遷移を発生させない操作部品を含め各操作部品のテストデータを各操作部品の設計情報とテストパターンとに基づいて自動で生成し、画面遷移を発生しない操作部品について生成されたテストデータと画面遷移を発生する操作部品について生成されたテストデータとを組み合わせたテストケースを生成し、この生成されたテストケースに基づいてテスト対象プログラムの操作部品に対する操作を実行するからである。   According to the present invention, in a program to be tested in which a screen does not transition to the next state unless an operation component that causes screen transition such as a push button is operated after a value is input to the operation component that does not cause screen transition such as a text box. Even so, the test can be performed automatically. The reason for this is that test data for each operation component, including operation components that do not cause screen transitions, is automatically generated based on the design information and test pattern of each operation component, and tests that are generated for operation components that do not cause screen transition. This is because a test case is generated by combining the data and the test data generated for the operation component that generates screen transition, and an operation on the operation component of the test target program is executed based on the generated test case.

次に、本発明を実施するための最良の形態について図面を参照して詳細に説明する。   Next, the best mode for carrying out the present invention will be described in detail with reference to the drawings.

図1を参照すると、本発明の実施の形態のGUIプログラムテスト支援装置10は、プログラム制御部11と、操作部品検出部12と、操作部品記憶装置13と、設計情報記憶装置14と、テストパターン記憶装置15と、テストデータ生成部16と、テストケース生成部17と、テストケース記憶装置18と、テスト結果記憶装置19と、設計情報入力装置20と、テストパターン入力装置21とを備え、GUIによる入出力操作を行う対話型の被テスト対象プログラム1および出力手段2に接続されている。   Referring to FIG. 1, a GUI program test support device 10 according to an embodiment of the present invention includes a program control unit 11, an operation component detection unit 12, an operation component storage device 13, a design information storage device 14, and a test pattern. A storage device 15, a test data generation unit 16, a test case generation unit 17, a test case storage device 18, a test result storage device 19, a design information input device 20, and a test pattern input device 21 are provided. Are connected to the interactive program under test 1 and the output means 2 for performing input / output operations.

被テスト対象プログラム1は、例えばPC(パーソナルコンピュータ)やWS(ワークステーション)等のハードウェア計算資源上で動作するOS(オペレーティングシステム)によって制御されるプログラムである。出力手段2は、被テスト対象プログラム1から出力されるウィンドウなどの表示画面を出力する例えばLCD等の表示装置である。   The program under test 1 is a program controlled by an OS (operating system) that operates on a hardware computing resource such as a PC (personal computer) or WS (workstation). The output means 2 is a display device such as an LCD for outputting a display screen such as a window output from the test target program 1.

GUIプログラムテスト支援装置10の構成要素のうち、プログラム制御部11、操作部品検出部12、テストデータ生成部16、およびテストケース生成部17は、例えばPCやWS等のハードウェア計算資源上で動作するOSによって制御されるプログラムで実現される。また、操作部品記憶装置13、設計情報記憶装置14、テストパターン記憶装置15、テストケース記憶装置18、およびテスト結果記憶装置19は、メモリやハードディスク等に代表される記憶手段で構成される。設計情報入力装置20およびテストパターン入力装置21は、マウスやキーボード等の図示しない入力装置による入力情報を受け取り、処理を行うプログラムである。これらの動作の概略を以下に示す。   Among the components of the GUI program test support apparatus 10, the program control unit 11, the operation component detection unit 12, the test data generation unit 16, and the test case generation unit 17 operate on hardware calculation resources such as a PC and WS, for example. Realized by a program controlled by the operating system. The operation component storage device 13, the design information storage device 14, the test pattern storage device 15, the test case storage device 18, and the test result storage device 19 are configured by storage means represented by a memory, a hard disk, and the like. The design information input device 20 and the test pattern input device 21 are programs that receive and process input information from an input device (not shown) such as a mouse or a keyboard. An outline of these operations is shown below.

プログラム制御部11は、被テスト対象プログラム1の実行環境(OSなど)の機能を用いて、被テスト対象プログラム1の起動や終了、被テスト対象プログラム1の出力画面(ウィンドウ)に存在する操作可能な操作部品(メニューやプッシュボタンなど)に対する操作等といった、被テスト対象プログラム1に関する制御を行うと共に、GUIプログラムテスト支援装置10全体の制御を司る。   The program control unit 11 can use the function of the execution environment (such as an OS) of the program under test 1 to start and end the program under test 1 and perform operations that are present on the output screen (window) of the program under test 1 It controls the program under test 1 such as operations on various operation parts (menus, push buttons, etc.) and controls the entire GUI program test support apparatus 10.

操作部品検出部12は、プログラム制御部11が制御している被テスト対象プログラム1の出力画面から、操作対象となりうる操作部品を検出する。被テスト対象プログラム1から出力された画面はテスト結果記憶装置19に記憶されるようになっており、操作部品検出部12はテスト結果記憶装置19に記憶された出力画面から操作部品を検出することも可能である。   The operation component detection unit 12 detects an operation component that can be an operation target from the output screen of the test target program 1 controlled by the program control unit 11. The screen output from the test target program 1 is stored in the test result storage device 19, and the operation component detection unit 12 detects the operation component from the output screen stored in the test result storage device 19. Is also possible.

操作部品記憶装置13は、操作部品検出部12により検出された被テスト対象プログラム1の操作部品に関する情報をファイルなどの形式で格納する。格納される情報には、操作部品検出部12により検出された操作部品がどの画面(ウィンドウ)上に存在するかを示す情報、その操作部品の種類、位置、サイズ、キャプション等の情報が含まれる。   The operation component storage device 13 stores information related to the operation components of the test target program 1 detected by the operation component detector 12 in the form of a file or the like. The stored information includes information indicating on which screen (window) the operation component detected by the operation component detection unit 12 exists, and information such as the type, position, size, and caption of the operation component. .

設計情報入力装置20は、被テスト対象プログラム1の開発の際に、開発者が作成する設計情報を入力するための装置である。入力される設計情報には、被テスト対象プログラム1が出力画面に表示する各操作部品について、その操作部品がどの画面(ウィンドウ)上に存在するかを示す情報、その操作部品の種類、有効な操作の種類や範囲に関する情報が含まれている。入力された設計情報は内部形式に変換され、設計情報記憶装置14に格納される。   The design information input device 20 is a device for inputting design information created by a developer when developing the program under test 1. The design information to be input includes, for each operation component displayed on the output screen by the program under test 1, information indicating on which screen (window) the operation component exists, the type of the operation component, and the valid Contains information about the type and range of operations. The input design information is converted into an internal format and stored in the design information storage device 14.

テストパターン入力装置21は、限界値テスト等の一般的なテスト手法において採用されるテストパターン(テストデータの生成規則)を利用者が入力するための装置である。入力された情報はテストパターン記憶装置15に格納される。   The test pattern input device 21 is a device for a user to input a test pattern (test data generation rule) employed in a general test method such as a limit value test. The input information is stored in the test pattern storage device 15.

テストデータ生成部16は、操作部品記憶装置13、設計情報記憶装置14、およびテストパターン記憶装置15からそれぞれ操作部品、設計情報、およびテストパターンに関する情報を取り出し、各操作部品に対するテストデータを1つもしくは複数個作成する。操作部品に対するテストデータとは、例えば操作部品がメニューである場合のクリック操作、操作部品がテキストボックスである場合の数値の入力操作などのことである。テストデータは、設計情報に合致する正常なものと、そうでないものとの双方が生成される。前者を正常系のテストデータ、後者を異常系のテストデータと呼ぶ。例えば、或るテキストボックスの入力値の条件が0から100までの整数であることが設計情報に示されているとき、0から100までの任意の整数をそのテキストボックスに入力するテストデータは正常系であり、0から100までの整数以外の値をそのテキストボックスに入力するテストデータは異常系である。   The test data generation unit 16 takes out information on the operation component, design information, and test pattern from the operation component storage device 13, the design information storage device 14, and the test pattern storage device 15, respectively, and provides one test data for each operation component. Or create more than one. The test data for the operation component includes, for example, a click operation when the operation component is a menu and a numerical value input operation when the operation component is a text box. As the test data, both normal data that matches the design information and data that does not match the design information are generated. The former is called normal test data, and the latter is called abnormal test data. For example, when the design information indicates that the condition of the input value of a certain text box is an integer from 0 to 100, the test data in which an arbitrary integer from 0 to 100 is input to the text box is normal. The test data for which a value other than an integer from 0 to 100 is input to the text box is an abnormal system.

テストケース生成部17は、テストデータ生成部16により生成された各操作部品ごとのテストデータと、操作部品記憶装置13に格納されている操作部品に関する情報と、以前に自らが生成してテストケース記憶装置18に記憶した既存のテストケースとから、画面の遷移を含めたテストケースを網羅的に生成する。このテストケース生成部17の動作を図2を参照して説明する。   The test case generation unit 17 generates test data for each operation component generated by the test data generation unit 16, information on the operation component stored in the operation component storage device 13, and a test case generated by itself before. From the existing test cases stored in the storage device 18, test cases including screen transitions are comprehensively generated. The operation of the test case generation unit 17 will be described with reference to FIG.

図2は被テスト対象プログラム1の出力画面の遷移の一例を示す。この例では、被テスト対象プログラム1は起動されると、まずウィンドウW1を出力する。次に、ウィンドウW1に存在する操作部品B12に値aが入力されて操作部品B11がクリックされると、新たなウィンドウW2を出力する。更に、このウィンドウW2に存在する操作部品B22に値bが入力されて操作部品B21がクリックされると、新たなウィンドウW3を出力する。また、ウィンドウW2に存在する操作部品B22に値cが入力されて操作部品B21がクリックされると、エラーE1となる。テストケース生成部17が生成するテストケースとは、図2のウィンドウW1からウィンドウW2への画面遷移を起こさせるテストデータ(B12=a,B11=クリック)や、ウィンドウW1からウィンドウW3までの画面遷移を起こさせるテストデータの列{(B12=a,B11=クリック)、(B22=b,B21=クリック)}や、ウィンドウW1からエラーE1までの画面遷移を起こさせるテストデータの列{(B12=a,B11=クリック)、(B22=c,B21=クリック)}のことである。   FIG. 2 shows an example of transition of the output screen of the program under test 1. In this example, when the test target program 1 is started, a window W1 is first output. Next, when the value a is input to the operation component B12 existing in the window W1 and the operation component B11 is clicked, a new window W2 is output. Further, when the value b is input to the operation component B22 existing in the window W2 and the operation component B21 is clicked, a new window W3 is output. Further, when the value c is input to the operation component B22 existing in the window W2 and the operation component B21 is clicked, an error E1 is generated. The test cases generated by the test case generation unit 17 are test data (B12 = a, B11 = click) for causing screen transition from the window W1 to the window W2 in FIG. 2 and screen transition from the window W1 to the window W3. Test data sequence {(B12 = a, B11 = click)}, (B22 = b, B21 = click)}, or test data sequence {(B12 = a, B11 = click), (B22 = c, B21 = click)}.

テストデータ(B12=a,B11=クリック)によるテストケースT11は、プログラム制御部11が被テスト対象プログラム1を起動した直後に表示されるウィンドウW1を出発点として次の画面遷移を起こさせるものであり、操作部品B11,B12に対する別のテストデータを用いる他のテストケースT12〜T1mと共に最初に生成されてテストケース記憶装置18に記憶され、プログラム制御部11により実行される。テストデータの列{(B12=a,B11=クリック)、(B22=b,B21=クリック)}によるテストケースT21および操作部品B21,B22に対する別のテストデータを用いる他のテストケースT22〜T2nは、テストデータ生成部16で生成された操作部品B21のテストデータ(b,c等)と操作部品B22のテストデータ(クリック等)とを組み合わせて生成したテストケース(B22=b,B21=クリック)や(B22=c,B21=クリック)などと、テストケース記憶装置18に記憶された既存のテストケースT11(B12=a,B11=クリック)とを転結して生成される。   A test case T11 based on test data (B12 = a, B11 = click) causes the next screen transition to start from the window W1 displayed immediately after the program control unit 11 starts the program under test 1. Yes, it is first generated together with other test cases T12 to T1m using different test data for the operation parts B11 and B12, stored in the test case storage device 18, and executed by the program control unit 11. Other test cases T22 to T2n using the test case T21 by the test data sequence {(B12 = a, B11 = click), (B22 = b, B21 = click)} and other test data for the operation parts B21, B22 are: The test case (B22 = b, B21 = click) generated by combining the test data (b, c, etc.) of the operation component B21 generated by the test data generator 16 and the test data (click, etc.) of the operation component B22 And (B22 = c, B21 = click) and the like and the existing test case T11 (B12 = a, B11 = click) stored in the test case storage device 18 are combined.

テストデータ生成部16で生成された操作部品B21,B22のテストデータを組み合わせる場合、遷移が発生しない操作部品B22への操作が時間的に先に実施され、遷移が発生する操作部品B21への操作が時間的に後に実施されるように組み合わされる。遷移が発生する操作部品であるかどうかは、操作部品記憶部13に記憶されている操作部品の種類によって判断される。   When combining the test data of the operation components B21 and B22 generated by the test data generation unit 16, the operation on the operation component B22 that does not cause a transition is performed first in time, and the operation on the operation component B21 that causes the transition Are combined to be performed later in time. Whether or not the operation component causes a transition is determined by the type of the operation component stored in the operation component storage unit 13.

再び図1を参照すると、テストケース記憶装置18は、テストケース生成部17により生成されたテストケースを格納する。テストケース記憶装置18に格納されたテストケースはプログラム制御部11に渡され、自動テスト実行時にはこのテストケースを元に順に被テスト対象プログラム1を自動操作し、その結果を出力手段2に出力させる。   Referring to FIG. 1 again, the test case storage device 18 stores the test cases generated by the test case generation unit 17. The test cases stored in the test case storage device 18 are transferred to the program control unit 11, and when the automatic test is executed, the program under test 1 is automatically operated in order based on the test cases, and the result is output to the output means 2. .

テスト結果記憶装置19は、テストケース記憶装置18に格納されたテストケースを元にプログラム制御部11が被テスト対象プログラム1を自動的にテストし、出力された画面を含むテスト結果を格納する。   In the test result storage device 19, the program control unit 11 automatically tests the program under test 1 based on the test cases stored in the test case storage device 18, and stores the test results including the output screen.

次に、図1及び図2、並びに図3のフローチャートを参照して本実施の形態の全体の動作について詳細に説明する。   Next, the overall operation of the present embodiment will be described in detail with reference to the flowcharts of FIGS. 1 and 2 and FIG.

まず、プログラム制御部11は、被テスト対象プログラム1を起動する(図3のステップST1)。起動された被テスト対象プログラム1はGUI画面を出力手段2に表示する。次に、操作部品検出部12は、起動された被テスト対象プログラム1のGUI画面の中で、アクティブなウィンドウ、すなわちユーザからの入力を受け付ける状態になっているウィンドウを検出し、操作部品記憶装置13に登録する(ステップST2)。図2の例ではウィンドウW1が検出される。この際登録される情報は、たとえばウィンドウ名等の、GUI画面上でプログラム制御部11がウィンドウを識別するための情報と、本プログラムテスト支援装置10内でウィンドウの関係を識別するためのIDとがある。同じウィンドウであっても、その上にある操作部品に違いがある場合は、その情報を付与する。   First, the program control unit 11 starts the test target program 1 (step ST1 in FIG. 3). The activated program under test 1 displays a GUI screen on the output means 2. Next, the operation component detection unit 12 detects an active window, that is, a window that is in a state of receiving an input from the user, from the GUI screen of the started program under test 1, and the operation component storage device 13 (step ST2). In the example of FIG. 2, the window W1 is detected. The information registered at this time includes, for example, information for identifying the window on the GUI screen, such as a window name, and an ID for identifying the relationship between the windows in the program test support apparatus 10. There is. Even in the same window, if there is a difference in the operation parts on it, the information is given.

次に操作部品検出部12は、アクティブなウィンドウから、操作部品をすべて検出して操作部品記憶装置13に登録する(ステップST3〜ST6)。具体的には、検出された操作部品それぞれに対し、操作部品検出部12は操作部品記憶装置13にすでに登録されている操作部品であるかどうかを確認し、登録されていない場合は、これを操作部品記憶装置13に登録する。この際登録される情報は、各操作部品の種類やサイズ、キャプションの内容等といった、操作部品自体の情報や、どのウィンドウ上に配置されているかという情報を含めた、GUI画面上でプログラム制御部11が登録される操作部品を識別するための情報である。図2の例では、操作部品B11,B12が登録される。   Next, the operation component detection unit 12 detects all operation components from the active window and registers them in the operation component storage device 13 (steps ST3 to ST6). Specifically, for each detected operation component, the operation component detection unit 12 checks whether or not the operation component is already registered in the operation component storage device 13. It is registered in the operation component storage device 13. The information registered at this time is the program control unit on the GUI screen including information on the operation component itself, such as the type and size of each operation component, the content of the caption, and information on which window it is placed on. 11 is information for identifying the operation component to be registered. In the example of FIG. 2, the operation components B11 and B12 are registered.

次にテストデータ生成部16は、テストパターン入力装置21により事前に登録されているテストパターンと、あらかじめ開発者が設計情報入力装置20により登録する設計情報と、ステップST2〜ST6により登録された操作部品の情報とを、それぞれ設計情報記憶装置14、テストパターン記憶装置15、および操作部品記憶装置13から取り出し、各操作部品に対し設計情報を元にテストパターンを適用し、各操作部品に対するテストデータを生成する(ステップST7)。   Next, the test data generation unit 16 tests the test pattern registered in advance by the test pattern input device 21, the design information registered in advance by the developer using the design information input device 20, and the operations registered in steps ST2 to ST6. The component information is extracted from the design information storage device 14, the test pattern storage device 15, and the operation component storage device 13, respectively, and a test pattern is applied to each operation component based on the design information, and test data for each operation component is obtained. Is generated (step ST7).

次にテストケース生成部17は、操作部品記憶装置13から現在どのウィンドウを対象としているかという情報を取り出し、テストケース記憶装置18から、そのウィンドウがアクティブになるまでの遷移を行った既存のテストケースを取り出し、取り出されたテストケースに対し次のテストステップとして、テストデータ生成部16により生成されたテストデータの組み合わせを追加して、新しいテストケースを複数生成し、テストケース記憶装置18に記憶する(ステップST8)。   Next, the test case generation unit 17 extracts information indicating which window is currently targeted from the operation component storage device 13, and an existing test case that has undergone a transition until the window becomes active from the test case storage device 18. As a next test step for the extracted test case, a combination of test data generated by the test data generating unit 16 is added to generate a plurality of new test cases and store them in the test case storage device 18. (Step ST8).

次にプログラム制御部11は、前記生成した新たなテストケースをテストケース記憶装置18から1つずつ取り出し、このテストケースに従ってテストを自動的に行う(ステップST9)。具体的には、取り出したテストケースが例えば図2のテストケースT11であれば、被テスト対象プログラム1を再起動し、利用者がGUI画面上の操作部品B12に値aを入力する操作を行った場合に発生するのと同じイベントを発生させ、次に利用者がGUI画面上の操作部品B11をクリックした場合に発生するのと同じイベントを発生させる。そして、このときの被テスト対象プログラム1の出力画面を、当該テストケースのテスト結果の一部としてテスト結果記憶装置19に記憶する。ステップST9では、ステップST8で生成されたすべてのテストケースによるテストを繰り返す。   Next, the program control unit 11 takes out the generated new test cases one by one from the test case storage device 18, and automatically performs a test according to the test cases (step ST9). Specifically, if the taken out test case is, for example, the test case T11 of FIG. 2, the program under test 1 is restarted, and the user performs an operation of inputting the value a to the operation component B12 on the GUI screen. The same event that occurs when the user clicks on the operation component B11 on the GUI screen is generated, and the same event that occurs when the user clicks the operation component B11 on the GUI screen is generated. Then, the output screen of the program under test 1 at this time is stored in the test result storage device 19 as a part of the test result of the test case. In step ST9, the test using all the test cases generated in step ST8 is repeated.

上記のテストケースによるテストで行われる操作部品に対する操作の種類によっては、図2のウィンドウW3のように新しいウィンドウが生成される場合がある。次のステップST10では、テスト結果記憶装置19に記憶された既実行テストケースに対応するテスト結果に含まれるウィンドウのうち、未だテストの対象としていないものがあるかどうかを判定する。そして、未だテストの対象としていないウィンドウがあれば、その1つのウィンドウをアクティブなウィンドウとし(ステップST2)、前述と同様なテストを繰り返す。なお、テスト対象とするウィンドウが複数存在する場合、遷移の階層上でルートにより近いものを優先する。例えば、図2のウィンドウW2をテスト対象とした場合、その終了時にはウィンドウW3が生成されるが、ウィンドウW1をテスト対象とした場合にウィンドウW2と同階層の図示しない他のウィンドウが生成されていたならば、それをウィンドウW2よりも優先的に選択する、いわゆる幅優先選択を行う。また、生成された全てのウィンドウをテスト対象としたならば、被テスト対象プログラム1のテストを終了する(ステップST11)。   Depending on the type of operation performed on the operation component performed in the test based on the above test case, a new window may be generated like the window W3 in FIG. In the next step ST10, it is determined whether or not there is a window that is not yet a test target among windows included in the test result corresponding to the already executed test case stored in the test result storage device 19. If there is a window that has not been tested yet, that one window is set as the active window (step ST2), and the same test as described above is repeated. If there are multiple windows to be tested, priority is given to the window closer to the root on the transition hierarchy. For example, when window W2 in FIG. 2 is the test target, window W3 is generated at the end of the test, but when window W1 is the test target, another window (not shown) of the same hierarchy as window W2 was generated. Then, so-called width priority selection is performed in which it is selected with priority over the window W2. If all the generated windows are to be tested, the test of the program under test 1 is terminated (step ST11).

次に本実施の形態の効果を説明する。   Next, the effect of this embodiment will be described.

本実施の形態によれば、テストデータ生成部16が、画面遷移を発生させない操作部品を含め各操作部品のテストデータを各操作部品の設計情報とテストパターンとに基づいて自動で生成し、テストケース生成部17が、画面遷移を発生しない操作部品について生成されたテストデータと画面遷移を発生する操作部品について生成されたテストデータとを組み合わせたテストケースを生成し、プログラム制御部11が、この生成されたテストケースに基づいて被テスト対象プログラム1の操作部品に対する操作を実行するため、画面遷移を発生させない操作部品に値を入力してから画面遷移を発生させる操作部品を操作しないと次の状態に画面が遷移しないような被テスト対象プログラム1であっても、テストを自動的に実施することができる。   According to the present embodiment, the test data generation unit 16 automatically generates test data for each operation component including operation components that do not cause screen transition based on the design information and test pattern of each operation component, and performs the test. The case generation unit 17 generates a test case that combines the test data generated for the operation component that does not cause the screen transition and the test data that is generated for the operation component that causes the screen transition, and the program control unit 11 Since an operation is performed on the operation component of the program under test 1 based on the generated test case, the operation component that generates a screen transition must be operated after a value is input to the operation component that does not generate a screen transition. Even the program under test 1 whose screen does not transition to the state can be automatically tested .

また本実施の形態によれば、テストデータ生成部16は、正常系のテストデータと異常系のテストデータの双方を生成するため、正常な値だけでなく不正な値を使用したテストを自動で実行することができる。   In addition, according to the present embodiment, the test data generation unit 16 generates both normal test data and abnormal test data, so that a test using an incorrect value as well as a normal value is automatically performed. Can be executed.

また本実施の形態によれば、テスト結果記憶装置19に記憶された新たな出力画面をテスト対象の出力画面に設定して、テストを再帰的に繰り返すため、網羅的なテストが可能になる。   Further, according to the present embodiment, a new output screen stored in the test result storage device 19 is set as the output screen to be tested, and the test is recursively repeated, so that a comprehensive test can be performed.

次に、具体的な実施例を用いて本実施の形態の動作を説明する。   Next, the operation of this embodiment will be described using specific examples.

プログラム制御部11により起動された被テスト対象プログラム1の初期画面のイメージ例を図4に示す。図4において、100は起動された被テスト対象プログラム1のウィンドウであり、タイトルバー101の文字列(ここでは"Main")がウィンドウ100のタイトルである。また、102および103はメニューであり、それぞれ操作部品である。   FIG. 4 shows an image example of the initial screen of the program under test 1 activated by the program control unit 11. In FIG. 4, reference numeral 100 denotes a window of the program under test 1 that has been started, and a character string (here “Main”) in the title bar 101 is the title of the window 100. Reference numerals 102 and 103 denote menus, each of which is an operation component.

操作部品検出部12は、画面上でアクティブとなっているウィンドウ100を検知し、その情報を操作部品記憶装置13に登録する。図5は登録されたウィンドウの情報である。また、操作部品検出部12は、画面上でアクティブになっているウィンドウ100上の操作部品102および103を検知し、これを操作部品記憶装置13に登録する。図6は登録された操作部品の情報である。操作部品を識別するためのID、操作部品が存在するウィンドウのID、操作部品の種類、キャプション、レイアウト情報が登録されている。ここではレイアウト情報として、メニューの並びを基にした情報を登録しているが、操作部品の種類によっては位置やサイズ等の情報により識別することも有用であるため、これらの情報を格納することも可能である。また、図6では最低限の情報としての登録例を挙げているが、これら以外でも操作部品の識別やテストに有用となる情報があれば、それらも自動的に登録する。   The operation component detection unit 12 detects an active window 100 on the screen and registers the information in the operation component storage device 13. FIG. 5 shows registered window information. In addition, the operation component detection unit 12 detects the operation components 102 and 103 on the window 100 that is active on the screen, and registers them in the operation component storage device 13. FIG. 6 shows information on registered operation components. The ID for identifying the operation component, the ID of the window in which the operation component exists, the type of operation component, the caption, and the layout information are registered. Here, information based on the arrangement of menus is registered as layout information, but depending on the type of operation component, it is also useful to identify it by information such as position and size, so store this information. Is also possible. Further, FIG. 6 shows an example of registration as minimum information, but if there is information other than these that is useful for identification or testing of the operation component, it is also automatically registered.

設計情報記憶装置14には、あらかじめ被テスト対象プログラムの設計情報が例えば図7のように格納されている。この情報は開発者が開発時に設計した情報を、設計情報入力装置20により入力したものである。入力には人の手による直接入力だけでなく、CASEツールなどで設計を行った場合のデータファイルなどから入力することも可能である。格納されている設計情報には、各操作部品に対して行われるべき操作内容や制限が記載されている。たとえば、図7で指定されている"Click()"は操作部品に対してマウス等のポインタデバイスによるシングルクリックを示しており、"Input(regexp(".*"))"は正規表現で指定された文字列を入力対象とする。 In the design information storage device 14, design information of the program under test is stored in advance as shown in FIG. This information is obtained by inputting information designed by the developer during development using the design information input device 20. In addition to direct input by human hands, it is also possible to input from a data file when designing with a CASE tool. The stored design information describes the operation contents and restrictions to be performed on each operation component. For example, “Click ()” specified in FIG. 7 indicates a single click with a pointer device such as a mouse for the operation component, and “Input (regexp (”. * “))” Is specified with a regular expression. Input the target character string.

またテストパターン記憶装置15には、あらかじめ一般的なテスト手法のロジックが登録されている。例えば、限界値テストのロジックでは、限界値として或る値を決めると、その前後する値も入力値として用いるという規則が記載されている。その一例を図8に示す。図8の例では、単一の整数Nのみを有効な入力値とする場合、N-1,N,N+1の3種類のデータをテストデータとして生成すること、および、整数の或る範囲(M〜N)を有効な入力値とする場合、M-1,M,N,N+1の4種類のデータをテストデータとして生成するという規則が記載されている。   Further, the logic of a general test method is registered in the test pattern storage device 15 in advance. For example, the limit value test logic describes a rule that when a certain value is determined as the limit value, the value before and after the limit value is also used as the input value. An example is shown in FIG. In the example of FIG. 8, when only a single integer N is a valid input value, three types of data N-1, N, and N + 1 are generated as test data, and a certain range of integers When (M to N) is an effective input value, a rule is described that four types of data M-1, M, N, and N + 1 are generated as test data.

テストデータ生成部16では、これら設計情報記憶装置14とテストパターン記憶装置15に登録されている情報を元に、操作部品記憶装置13に登録された各操作部品に対して、適切なテストデータを生成する(ステップST7)。ステップST7の詳細を図9に示す。図9を参照すると、テストデータ生成部16は、操作部品記憶装置13から操作部品を順番に取り出し(ステップST7-1,ST7-2)、それぞれの操作部品について設計情報記憶装置14から対応する設計情報(操作内容や制限)を抽出する(ステップST7-3)。そして、テストパターン記憶装置15からテストパターン情報を順番に取り出し(ステップST7-4,ST7-5)、ステップST7-3で抽出した設計情報に応じてテストデータを生成する(ステップST7-6)。例えば、操作部品記憶装置13に登録された後述する図18のような操作部品中のIDが3である操作部品(テキストボックス)を選択した場合、この操作部品の設計情報として設計情報記憶装置14に登録されている図7の設計情報から「Input(integer(1-100)」が抽出され、この設計情報は「0〜100の整数値を有効な入力値とする」ということを示しているので、テストパターン記憶装置15に登録されている図8の限界値テストのテストパターンに基づいて、テストデータとして図10に示すように、”−1”、”0”、”100”、”101”を生成する。   The test data generation unit 16 generates appropriate test data for each operation component registered in the operation component storage device 13 based on the information registered in the design information storage device 14 and the test pattern storage device 15. Generate (step ST7). Details of step ST7 are shown in FIG. Referring to FIG. 9, the test data generation unit 16 sequentially takes out the operation components from the operation component storage device 13 (steps ST7-1 and ST7-2), and the corresponding design from the design information storage device 14 for each operation component. Information (operation contents and restrictions) is extracted (step ST7-3). Then, test pattern information is sequentially extracted from the test pattern storage device 15 (steps ST7-4 and ST7-5), and test data is generated according to the design information extracted in step ST7-3 (step ST7-6). For example, when an operation component (text box) having an ID of 3 in an operation component registered in the operation component storage device 13 as shown in FIG. 18 described later is selected, the design information storage device 14 is used as design information of the operation component. "Input (integer (1-100)" is extracted from the design information registered in FIG. 7, and this design information indicates that "an integer value of 0 to 100 is a valid input value". Therefore, based on the test pattern of the limit value test of FIG. 8 registered in the test pattern storage device 15, as shown in FIG. 10 as test data, “−1”, “0”, “100”, “101” Is generated.

次にテストケース生成部17は、テストデータ生成部16により生成されたテストデータを元に、テストケースを生成する(ステップST8)。ステップST8の詳細を図11に示す。図11を参照すると、操作部品記憶装置13から操作部品を順番に取り出し(ST8-1,ST8-2)、それぞれの操作部品に対し、テストデータ生成部16により生成されたテストデータを組み合わせ(ST8-3,ST8-4)、テストケースを生成する(ST8-5)。図12は図4のウィンドウに対し生成されたテストケースである。図4のウィンドウでは操作部品が二つのみで、それぞれ有効な操作がシングルクリックのみであるため、それぞれのメニューに対してシングルクリックの操作を行うテストケースが生成される。また、例えばテストパターン記憶装置15に登録されているテストパターンに、「ポインティングデバイスによる異なる操作方法によるテスト」という、ドラッグアンドドロップ等の操作方法をテストするパターンのロジックが登録されている場合、図13のようなテストケースが生成される。テストケースIDには、同じ操作部品に対する異なる操作を識別するための値が設定される。なお、図12および図13中の妥当性とは、各操作部品に対して有効な値を設定するテスト項目であるかどうかを示すフラグであり、○であれば正常系のテスト、×であれば異常系のテストであることを示す。また遷移先ウィンドウIDの項目は、そのテストケースの実行結果が新たなウィンドウ画面への遷移等であった場合に、遷移先のウィンドウIDを設定する欄であり、この時点では全てNULLとされる。生成されたテストケースはテストケース記憶装置18に格納される。   Next, the test case generation unit 17 generates a test case based on the test data generated by the test data generation unit 16 (step ST8). Details of step ST8 are shown in FIG. Referring to FIG. 11, the operation components are sequentially extracted from the operation component storage device 13 (ST8-1, ST8-2), and the test data generated by the test data generation unit 16 is combined with each operation component (ST8). -3, ST8-4), generate a test case (ST8-5). FIG. 12 is a test case generated for the window of FIG. In the window of FIG. 4, since there are only two operation components and each effective operation is only a single click, a test case for performing a single click operation on each menu is generated. Further, for example, when a test pattern registered in the test pattern storage device 15 is registered with a logic of a pattern for testing an operation method such as “drag and drop” such as “test by a different operation method using a pointing device”, FIG. A test case like 13 is generated. In the test case ID, a value for identifying different operations on the same operation component is set. The validity in FIGS. 12 and 13 is a flag indicating whether or not the test item is a test item for setting a valid value for each operation component. Indicates an abnormal test. The transition destination window ID field is a column for setting the transition destination window ID when the execution result of the test case is a transition to a new window screen, etc., and all are null at this point. . The generated test case is stored in the test case storage device 18.

プログラム制御部11は、一旦被テスト対象プログラム1をリセットし、テストケース記憶装置18に記憶されているテストケースを1つずつ読み出し、1つのテストケースの実行が終わる毎に被テスト対象プログラム1をリセットしながら、順に複数のテストケースを実行する。それぞれのテストケースの実行結果は出力手段2に出力され、テストケース情報とともにテスト結果記憶装置19に格納される。利用者はテスト結果記憶装置19に格納されたテスト結果を出力手段2から出力して参照することで、プログラムのバグを発見することができる。すなわち、正常系のテストであるのに出力結果としてエラーが記録されていたり、異常系のテストであるのにエラーが記録されていないなどを確認することで、被テスト対象プログラム1のバグを発見することができる。   The program control unit 11 resets the test target program 1 once, reads out the test cases stored in the test case storage device 18 one by one, and loads the test target program 1 every time one test case is finished. Run multiple test cases in sequence while resetting. The execution result of each test case is output to the output means 2 and stored in the test result storage device 19 together with the test case information. The user can find a bug in the program by outputting the test result stored in the test result storage device 19 from the output means 2 and referring to it. In other words, a bug in the program under test 1 was found by confirming that an error was recorded as an output result even though it was a normal test, or that an error was not recorded even though it was an abnormal test can do.

また、各テストケースの実行結果が新たなウィンドウ画面への遷移であったり、同じウィンドウ内での操作部品の追加、削除、サイズや位置の変更等が発生した場合、テストケース記憶装置19に格納した図12および図13のテストケースの情報における遷移先ウィンドウIDの欄にその旨を示すフラグの役目を果たすウィンドウIDを設定する。フラグを立てた状態を図14に示す。図4のウィンドウの場合、メニュー102および103に対する操作を実行した結果、それぞれ図15および図16のように新たにウィンドウが生成される。従ってこれらの結果をテスト結果記憶装置19に格納するとともに、テストケース記憶装置18に格納されているテストケースを一通り実施した後に、テスト結果記憶装置19に格納されている情報から、新たな遷移や操作部品への変更があったテストケースを呼び出し、操作部品検出部12により検出を行う。つまり、プログラム制御部11は、被テスト対象プログラム1を一旦リセットし、次に、新たなウィンドウ画面をテスト対象とすべく、その新たなウィンドウ画面がアクティブになるまでの遷移を行った既存のテストケースを取り出して実行し、このアクティブなウィンドウ画面についてステップST2からの処理を再帰的に繰り返す。   Also, when the execution result of each test case is a transition to a new window screen, or when an operation component is added or deleted in the same window, or the size or position is changed, it is stored in the test case storage device 19 The window ID serving as a flag indicating that is set in the transition destination window ID field in the test case information of FIG. 12 and FIG. The state where the flag is raised is shown in FIG. In the case of the window of FIG. 4, as a result of executing the operations on the menus 102 and 103, new windows are generated as shown in FIGS. 15 and 16, respectively. Accordingly, these results are stored in the test result storage device 19, and after the test cases stored in the test case storage device 18 are completely executed, a new transition is made from the information stored in the test result storage device 19. Or a test case in which there is a change to the operation component is called and the operation component detector 12 detects the test case. That is, the program control unit 11 once resets the test target program 1 and then makes an existing test in which a transition is made until the new window screen becomes active so that the new window screen becomes the test target. The case is extracted and executed, and the processing from step ST2 is recursively repeated for this active window screen.

図15のウィンドウに対するテストケースの実行まで完了した際の、生成されるウィンドウ情報、操作部品情報、テストケース情報はそれぞれ図17、図18、図19の通りである。図19に示すテストケース情報を元にプログラム制御部11がプログラムテストを実施する場合、始めにウィンドウIDが1のウィンドウ100に対し、メニュー102にClick()の操作が行われ、その結果ウィンドウIDが2のウィンドウ200に対し、操作部品201〜206へ、それぞれの操作が行われる。操作は各操作部品ごとのテストケースを組み合わせる形で行われる。この際、遷移が発生しない操作部品(201〜204)への操作については先にすべて行われ、その後で遷移が発生する操作部品(205または206)への操作が行われるような組み合わせとなる。また、操作部品IDが7、テストケースIDがaの操作を行った場合、図20に示すようにウィンドウ100にテーブルが追加された新しいウィンドウ300が生成されるため、このウィンドウとテーブルを新たにウィンドウ情報および操作部品情報として格納する。この際、ベースとなるウィンドウはウィンドウ100とウィンドウ300で同じであるため、IDは枝番号を付与する形となる。更新されたウィンドウ情報および操作部品情報を図21および図22に示す。   The window information, operation component information, and test case information generated when the test case execution for the window of FIG. 15 is completed are as shown in FIGS. 17, 18, and 19, respectively. When the program control unit 11 performs a program test based on the test case information shown in FIG. 19, first, the operation of Click () is performed on the menu 102 for the window 100 having the window ID of 1, and as a result, the window ID Each operation is performed on the operation components 201 to 206 with respect to the second window 200. The operation is performed by combining test cases for each operation component. At this time, all the operations on the operation components (201 to 204) where no transition occurs are performed first, and the operation is performed on the operation components (205 or 206) where the transition occurs thereafter. When the operation component ID is 7 and the test case ID is a, a new window 300 is generated in which a table is added to the window 100 as shown in FIG. Stored as window information and operation component information. At this time, since the base window is the same for the window 100 and the window 300, the ID is given a branch number. FIG. 21 and FIG. 22 show the updated window information and operation component information.

以後、利用者からテストの停止が指示されるか、もしくはあらかじめ利用者が定めた段階まで達するか、あるいは全てのテストケースの実行が終了すると、テストが終了する。   Thereafter, the test ends when the user gives an instruction to stop the test, reaches a stage determined by the user in advance, or when all test cases have been executed.

本発明の実施の形態の構成を示すブロック図である。It is a block diagram which shows the structure of embodiment of this invention. 被テスト対象プログラムの出力画面の遷移例を示す図である。It is a figure which shows the example of a transition of the output screen of a to-be-tested program. 本発明の実施の形態の動作を示すフローチャートである。It is a flowchart which shows operation | movement of embodiment of this invention. 被テスト対象プログラムの画面表示例を示す図である。It is a figure which shows the example of a screen display of a to-be-tested program. ウィンドウ情報の内容例を示す図である。It is a figure which shows the example of the content of window information. 操作部品情報の内容例を示す図である。It is a figure which shows the example of the content of operation component information. 設計情報の内容例を示す図である。It is a figure which shows the example of the content of design information. テストパターンの内容例を示す図である。It is a figure which shows the example of the content of a test pattern. テストデータ生成部の処理例を示すフローチャートである。It is a flowchart which shows the process example of a test data generation part. 生成されるテストデータの内容例を示す図である。It is a figure which shows the example of the content of the test data produced | generated. テストケース生成部の処理例を示すフローチャートである。It is a flowchart which shows the process example of a test case production | generation part. 生成されるテストケースの内容例を示す図である。It is a figure which shows the example of the content of the test case produced | generated. 生成されるテストケースの内容例を示す図である。It is a figure which shows the example of the content of the test case produced | generated. 生成されるテストケースの内容例を示す図である。It is a figure which shows the example of the content of the test case produced | generated. 被テスト対象プログラムの画面表示例を示す図である。It is a figure which shows the example of a screen display of a to-be-tested program. 被テスト対象プログラムの画面表示例を示す図である。It is a figure which shows the example of a screen display of a to-be-tested program. ウィンドウ情報の内容例を示す図である。It is a figure which shows the example of the content of window information. 操作部品情報の内容例を示す図である。It is a figure which shows the example of the content of operation component information. 生成されるテストケースの内容例を示す図である。It is a figure which shows the example of the content of the test case produced | generated. 被テスト対象プログラムの画面表示例を示す図である。It is a figure which shows the example of a screen display of a to-be-tested program. ウィンドウ情報の内容例を示す図である。It is a figure which shows the example of the content of window information. 操作部品情報の内容例を示す図である。It is a figure which shows the example of the content of operation component information.

符号の説明Explanation of symbols

1…被テスト対象プログラム
2…出力手段
10…GUIプログラムテスト支援装置
11…プログラム制御部
12…操作部品検出部
13…操作部品記憶装置
14…設計情報記憶装置
15…テストパターン記憶装置
16…テストデータ生成部
17…テストケース生成部
18…テストケース記憶装置
19…テスト結果記憶装置
20…設計情報入力装置
21…テストパターン入力装置
100…ウィンドウ
101…ウィンドウタイトル
102…メニュー
103…メニュー
200…ウィンドウ
201…テキストボックス
202…リストボックス
203…チェックボックス
204…チェックボックス
205…ボタン
206…ボタン
300…ウィンドウ
DESCRIPTION OF SYMBOLS 1 ... Program to be tested 2 ... Output means 10 ... GUI program test support device 11 ... Program control unit 12 ... Operation component detection unit 13 ... Operation component storage device 14 ... Design information storage device 15 ... Test pattern storage device 16 ... Test data Generation unit 17 ... Test case generation unit 18 ... Test case storage device 19 ... Test result storage device 20 ... Design information input device 21 ... Test pattern input device 100 ... Window 101 ... Window title 102 ... Menu 103 ... Menu 200 ... Window 201 ... Text box 202 ... List box 203 ... Check box 204 ... Check box 205 ... Button 206 ... Button 300 ... Window

Claims (5)

GUIによる入出力操作を行う対話型プログラムである被テスト対象プログラムであって、画面遷移を発生させない操作部品に値を入力してから画面遷移を発生させる操作部品を操作しないと次の状態に画面が遷移しないような被テスト対象プログラムのテストを支援するプログラムテスト支援装置において、
前記被テスト対象プログラムの出力画面に含まれる操作部品に対する有効な操作の種類および入力値の条件に関する情報を記述した設計情報を記憶する設計情報記憶手段と、
テストデータの生成規則を記述したテストパターンを記憶するテストパターン記憶手段と、
前記テスト対象プログラムのテスト対象とする出力画面に存在する操作部品を検出する操作部品検出手段と、
前記操作部品検出手段で検出された操作部品の情報を記憶する操作部品記憶手段と、
前記操作部品記憶手段に記憶された操作部品について、前記設計情報記憶手段に記憶された当該操作部品に対する有効な操作の種類および入力値の条件に関する情報と前記テストパターン記憶手段に記憶されたテストデータの生成規則に基づいて、テストデータを生成するテストデータ生成手段と、
前記操作部品記憶手段に記憶された操作部品のうち、画面遷移を発生しない操作部品について前記テストデータ生成手段で生成されたテストデータと、画面遷移を発生する操作部品について前記テストデータ生成手段で生成されたテストデータとを、画面遷移を発生しない操作部品への操作が、画面遷移が発生する操作部品への操作よりも時間的に先に実施されるように組み合わせたテストケースのみを生成するテストケース生成手段と、
前記テストケース生成手段で生成されたテストケースを記憶するテストケース記憶手段と、
前記テスト対象プログラムの実行環境の機能を用いて、前記テスト対象プログラムの起動や終了、前記テスト対象プログラムの出力画面に存在する操作部品に対する操作を行う手段であって、前記テストケース記憶手段からテストケースを読み出し、該読み出したテストケースの1つ1つについて、そのテストケースの実行を開始する前に前記テスト対象プログラムを一旦リセットしてから、そのテストケースに基づいて、前記テスト対象プログラムの操作部品に対する操作を実行するプログラム制御手段と、
前記プログラム制御手段によって操作部品に対する操作が実行された前記テスト対象プログラムから出力された新たな出力画面を含むテスト結果を記憶するテスト結果記憶手段とを備えることを特徴とするプログラムテスト支援装置。
A program under test, which is an interactive program that performs input / output operations using a GUI. If you do not operate an operation component that generates a screen transition after entering a value in the operation component that does not generate a screen transition, the screen is displayed in the next state. In the program test support device that supports the test of the program under test that does not transition,
Design information storage means for storing design information describing information regarding the types of effective operations and input value conditions for the operation components included in the output screen of the test target program;
Test pattern storage means for storing a test pattern describing a generation rule of test data;
Operation component detection means for detecting an operation component present on an output screen to be tested by the test target program;
Operation component storage means for storing information of the operation component detected by the operation component detection means;
For the operation component stored in the operation component storage means, information regarding the type of effective operation and input value condition for the operation component stored in the design information storage means, and test data stored in the test pattern storage means A test data generating means for generating test data based on the generation rules of
Of the operation components stored in the operation component storage unit, test data generated by the test data generation unit for operation components that do not generate screen transitions and generated by the test data generation unit for operation components that generate screen transitions That generates only test cases that are combined with the test data so that operations on operation components that do not cause screen transitions are performed earlier in time than operations on operation components that cause screen transitions Case generation means;
Test case storage means for storing the test case generated by the test case generation means;
Means for starting and ending the test target program using the function of the execution environment of the test target program, and for operating the operation component existing on the output screen of the test target program, the test case storage means For each of the read test cases, reset the test target program before starting execution of the test case, and then operate the test target program based on the test case. Program control means for performing operations on parts;
And a test result storage unit for storing a test result including a new output screen output from the test target program in which an operation on an operation component is executed by the program control unit.
前記テストデータ生成手段は、正常系のテストデータと異常系のテストデータの双方を生成するものであることを特徴とする請求項1記載のプログラムテスト支援装置。   2. The program test support apparatus according to claim 1, wherein the test data generation means generates both normal test data and abnormal test data. 前記テスト結果記憶手段に記憶された新たな出力画面をテスト対象の出力画面に設定して、テストを再帰的に繰り返す構成を有することを特徴とする請求項1または2記載のプログラムテスト支援装置。   3. The program test support apparatus according to claim 1, wherein a new output screen stored in the test result storage means is set as an output screen to be tested, and the test is recursively repeated. GUIによる入出力操作を行う対話型プログラムである被テスト対象プログラムであって、画面遷移を発生させない操作部品に値を入力してから画面遷移を発生させる操作部品を操作しないと次の状態に画面が遷移しないような被テスト対象プログラムのテストを支援するプログラムテスト支援装置であって、前記被テスト対象プログラムの出力画面に含まれる操作部品に対する有効な操作の種類および入力値の条件に関する情報を記述した設計情報を記憶する設計情報記憶手段と、テストデータの生成規則を記述したテストパターンを記憶するテストパターン記憶手段と、検出された操作部品の情報を記憶する操作部品記憶手段と、生成されたテストケースを記憶するテストケース記憶手段と、テスト結果を記憶するテスト結果記憶手段とを備えたプログラムテスト支援装置におけるプログラムテスト支援方法であって、
a)前記プログラムテスト支援装置の操作部品検出手段が、前記テスト対象プログラムのテスト対象とする出力画面に存在する操作部品を検出し、検出した操作部品の情報を前記操作部品記憶手段に記憶するステップ、
b)前記プログラムテスト支援装置のテストデータ生成手段が、前記操作部品記憶手段に記憶された操作部品について、前記設計情報記憶手段に記憶された当該操作部品に対する有効な操作の種類および入力値の条件に関する情報と前記テストパターン記憶手段に記憶されたテストデータの生成規則に基づいて、テストデータを生成するステップ、
c)前記プログラムテスト支援装置のテストケース生成手段が、前記操作部品記憶手段に記憶された操作部品のうち、画面遷移を発生しない操作部品について前記テストデータ生成手段で生成されたテストデータと、画面遷移を発生する操作部品について前記テストデータ生成手段で生成されたテストデータとを、画面遷移を発生しない操作部品への操作が、画面遷移が発生する操作部品への操作よりも時間的に先に実施されるように組み合わせたテストケースのみを生成するステップ、
d)前記テスト対象プログラムの実行環境の機能を用いて、前記テスト対象プログラムの起動や終了、前記テスト対象プログラムの出力画面に存在する操作部品に対する操作を行う、前記プログラムテスト支援装置のプログラム制御手段が、前記テストケース記憶手段からテストケースを読み出し、該読み出したテストケースの1つ1つについて、そのテストケースの実行を開始する前に前記テスト対象プログラムを一旦リセットしてから、そのテストケースに基づいて、前記テスト対象プログラムの操作部品に対する操作を実行し、前記テスト対象プログラムから出力された新たな出力画面を含むテスト結果を前記テスト結果記憶手段に記憶するステップ、
を含むことを特徴とするプログラムテスト支援方法。
A program under test, which is an interactive program that performs input / output operations using a GUI. If you do not operate an operation component that generates a screen transition after entering a value in the operation component that does not generate a screen transition, the screen is displayed in the next state. Is a program test support device for supporting a test of a program under test in which no transition occurs, and describes information about the types of effective operations and conditions of input values included in the output screen of the program under test Design information storage means for storing the designed design information, test pattern storage means for storing a test pattern describing a generation rule of test data, operation component storage means for storing information of detected operation parts, and Test case storage means for storing test cases and test result storage means for storing test results A program test support method in the program test support equipment,
a) a step in which an operation component detection unit of the program test support device detects an operation component existing on an output screen to be tested by the test target program, and stores information on the detected operation component in the operation component storage unit; ,
b) The test data generation means of the program test support device, with respect to the operation parts stored in the operation part storage means, the conditions of valid operation types and input values for the operation parts stored in the design information storage means Generating test data on the basis of the information regarding and the test data generation rules stored in the test pattern storage means;
c) a test case generation unit of the program test support device, wherein test data generated by the test data generation unit for an operation component that does not cause a screen transition among the operation components stored in the operation component storage unit; For operation parts that generate transitions, the test data generated by the test data generation means is operated in time before the operation to operation parts that generate screen transitions. Generating only test cases combined to be implemented,
d) Program control means of the program test support apparatus that uses the function of the execution environment of the test target program to start and end the test target program and to operate an operation component existing on the output screen of the test target program However, the test case is read from the test case storage means, and for each of the read test cases, the test target program is temporarily reset before the execution of the test case, and then the test case is stored. A step of executing an operation on the operation component of the test target program and storing a test result including a new output screen output from the test target program in the test result storage unit;
A program test support method comprising:
GUIによる入出力操作を行う対話型プログラムである被テスト対象プログラムであって、画面遷移を発生させない操作部品に値を入力してから画面遷移を発生させる操作部品を操作しないと次の状態に画面が遷移しないような被テスト対象プログラムのテストを支援するプログラムテスト支援装置であって、前記被テスト対象プログラムの出力画面に含まれる操作部品に対する有効な操作の種類および入力値の条件に関する情報を記述した設計情報を記憶する設計情報記憶手段と、テストデータの生成規則を記述したテストパターンを記憶するテストパターン記憶手段と、検出された操作部品の情報を記憶する操作部品記憶手段と、生成されたテストケースを記憶するテストケース記憶手段と、テスト結果を記憶するテスト結果記憶手段とを備えたプログラムテスト支援装置を構成するコンピュータを、
前記テスト対象プログラムのテスト対象とする出力画面に存在する操作部品を検出し、検出した操作部品の情報を前記操作部品記憶手段に記憶する操作部品検出手段、
前記操作部品記憶手段に記憶された操作部品について、前記設計情報記憶手段に記憶された当該操作部品に対する有効な操作の種類および入力値の条件に関する情報と前記テストパターン記憶手段に記憶されたテストデータの生成規則に基づいて、テストデータを生成するテストデータ生成手段、
前記操作部品記憶手段に記憶された操作部品のうち、画面遷移を発生しない操作部品について前記テストデータ生成手段で生成されたテストデータと、画面遷移を発生する操作部品について前記テストデータ生成手段で生成されたテストデータとを、画面遷移を発生しない操作部品への操作が、画面遷移が発生する操作部品への操作よりも時間的に先に実施されるように組み合わせたテストケースのみを生成するテストケース生成手段、
d)前記テスト対象プログラムの実行環境の機能を用いて、前記テスト対象プログラムの起動や終了、前記テスト対象プログラムの出力画面に存在する操作部品に対する操作を行う手段であって、前記テストケース記憶手段からテストケースを読み出し、該読み出したテストケースの1つ1つについて、そのテストケースの実行を開始する前に前記テスト対象プログラムを一旦リセットしてから、そのテストケースに基づいて、前記テスト対象プログラムの操作部品に対する操作を実行し、前記テスト対象プログラムから出力された新たな出力画面を含むテスト結果を前記テスト結果記憶手段に記憶するプログラム制御手段、
として機能させるためのプログラム。
A program under test, which is an interactive program that performs input / output operations using a GUI. If you do not operate an operation component that generates a screen transition after entering a value in the operation component that does not generate a screen transition, the screen is displayed in the next state. Is a program test support device for supporting a test of a program under test in which no transition occurs, and describes information about the types of effective operations and conditions of input values included in the output screen of the program under test Design information storage means for storing the designed design information, test pattern storage means for storing a test pattern describing a generation rule of test data, operation component storage means for storing information of detected operation parts, and Test case storage means for storing test cases and test result storage means for storing test results The computer on which you want to configure the program test support equipment,
An operation component detection unit that detects an operation component existing on an output screen to be tested by the test target program and stores information on the detected operation component in the operation component storage unit;
For the operation component stored in the operation component storage means, information regarding the type of effective operation and input value condition for the operation component stored in the design information storage means, and test data stored in the test pattern storage means Test data generation means for generating test data based on the generation rules of
Of the operation components stored in the operation component storage unit, test data generated by the test data generation unit for operation components that do not generate screen transitions and generated by the test data generation unit for operation components that generate screen transitions That generates only test cases that are combined with the test data so that operations on operation components that do not cause screen transitions are performed earlier in time than operations on operation components that cause screen transitions Case generation means,
d) means for starting and ending the test target program using the function of the execution environment of the test target program, and for operating the operation component existing on the output screen of the test target program, the test case storage means For each of the read test cases, the test target program is reset once before starting execution of the test case, and then the test target program is based on the test case. Program control means for executing an operation on the operation part of the test part and storing a test result including a new output screen output from the test target program in the test result storage means,
Program to function as.
JP2005059991A 2005-03-04 2005-03-04 Program test support apparatus and method Expired - Fee Related JP4395761B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005059991A JP4395761B2 (en) 2005-03-04 2005-03-04 Program test support apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005059991A JP4395761B2 (en) 2005-03-04 2005-03-04 Program test support apparatus and method

Publications (2)

Publication Number Publication Date
JP2006244195A JP2006244195A (en) 2006-09-14
JP4395761B2 true JP4395761B2 (en) 2010-01-13

Family

ID=37050546

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005059991A Expired - Fee Related JP4395761B2 (en) 2005-03-04 2005-03-04 Program test support apparatus and method

Country Status (1)

Country Link
JP (1) JP4395761B2 (en)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100853266B1 (en) 2006-12-08 2008-08-20 한국전자통신연구원 The method and apparatus for generating a report for testing environment information for embedded system based on Linux
JP4899971B2 (en) * 2007-03-27 2012-03-21 富士通株式会社 Test specification creation program, test specification creation device, and test specification creation method
JP2009169628A (en) * 2008-01-16 2009-07-30 Meidensha Corp Construction device, construction method and program for monitoring control system
JP4888663B2 (en) * 2008-02-26 2012-02-29 日本電気株式会社 Verification program automatic generation apparatus, method and program thereof
US8347223B2 (en) 2008-09-29 2013-01-01 Nec Corporation GUI evaluation system, method, and program for evaluating a text input component
JP4977681B2 (en) * 2008-12-10 2012-07-18 株式会社日立システムズ Data pattern / test data generation / storage method and system
JP2010198479A (en) * 2009-02-26 2010-09-09 Hitachi Software Eng Co Ltd System for automatically executing application test
JP5407718B2 (en) * 2009-09-30 2014-02-05 富士通株式会社 Verification data creation method and verification data creation program
JP2012022661A (en) * 2010-07-16 2012-02-02 Manabu Watanabe Device for supporting creation of test specification and manual, and supporting automatic testing
JP5651050B2 (en) * 2011-03-08 2015-01-07 株式会社富士通マーケティング Data generation apparatus and data generation program
JP5721655B2 (en) * 2012-03-27 2015-05-20 三菱電機株式会社 Man-machine device for plant monitoring
JP5713359B2 (en) * 2012-08-28 2015-05-07 日本電信電話株式会社 Comprehensive automatic operation method and apparatus for graphical user interface
CN104850476A (en) * 2015-06-03 2015-08-19 东方网力科技股份有限公司 Cross-platform interface automated testing method and cross-platform interface automated testing system
JP2018063532A (en) * 2016-10-12 2018-04-19 株式会社日立製作所 Screen test data creation device and method
JP6514244B2 (en) * 2017-01-18 2019-05-15 日本電信電話株式会社 Difference detection device and program
JP6567125B1 (en) * 2018-04-17 2019-08-28 KLab株式会社 Debugging device, simulation device and debugging program

Also Published As

Publication number Publication date
JP2006244195A (en) 2006-09-14

Similar Documents

Publication Publication Date Title
JP4395761B2 (en) Program test support apparatus and method
JP3008872B2 (en) GUI system automatic operation device and operation macro execution device
JP4148527B2 (en) Functional test script generator
US8566744B2 (en) Same-display comparison of content for different renditions of a single computer program
US7490298B2 (en) Creating documentation screenshots on demand
EP0785510A1 (en) Program debugging system for debugging a program having a graphical user interface
US20080195377A1 (en) Method, device, and program product for verifying translation in resource file
CN108351764B (en) Data processing method and system
US8875103B2 (en) Method of testing multiple language versions of a software system using one test script
US11074162B2 (en) System and a method for automated script generation for application testing
JP2006099743A (en) System and method for selecting test case execution behavior of reproducible test automation
JP5556655B2 (en) Analysis support program, analysis support apparatus, and analysis support method
JP6514084B2 (en) OPERATION SUPPORT SYSTEM, OPERATION SUPPORT METHOD, AND OPERATION SUPPORT PROGRAM
US8984487B2 (en) Resource tracker
JP6070847B2 (en) Verification method, verification apparatus, and verification program
JP6440895B2 (en) Software analysis apparatus and software analysis method
WO2021061185A1 (en) Test automation of application
US20220214963A1 (en) Analysis apparatus, analysis method and program
US10445290B1 (en) System and method for a smart configurable high performance interactive log file viewer
JP7268759B2 (en) TEST DATA GENERATION DEVICE, TEST DATA GENERATION METHOD, AND PROGRAM
JP7294609B2 (en) Program, Method, and Device for Supporting Software Operation Scenario Generation
EP3018567A1 (en) User-interface review method, device, and program
EP1868099B1 (en) Bug management tool
JP6739599B1 (en) Information processing program, information processing method, and information processing apparatus
US11783116B2 (en) Resembling transition identifying apparatus, resembling transition identifying method and program

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20081104

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081111

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090113

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090428

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20090514

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20090514

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090622

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090924

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091007

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121030

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131030

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees