JP5954752B2 - システムのテストを行う装置、方法およびプログラム - Google Patents
システムのテストを行う装置、方法およびプログラム Download PDFInfo
- Publication number
- JP5954752B2 JP5954752B2 JP2014202063A JP2014202063A JP5954752B2 JP 5954752 B2 JP5954752 B2 JP 5954752B2 JP 2014202063 A JP2014202063 A JP 2014202063A JP 2014202063 A JP2014202063 A JP 2014202063A JP 5954752 B2 JP5954752 B2 JP 5954752B2
- Authority
- JP
- Japan
- Prior art keywords
- message
- host system
- terminal
- migration
- screen data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/2273—Test methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/26—Functional testing
- G06F11/263—Generation of test inputs, e.g. test vectors, patterns or sequences ; with adaptation of the tested hardware for testability with external testers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/2205—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing using arrangements specific to the hardware being tested
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
- G06F11/3414—Workload generation, e.g. scripts, playback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3438—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment monitoring of user actions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3457—Performance evaluation by simulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/875—Monitoring of systems including the internet
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Description
図1は、本実施形態が適用されるテスト・システムの構成例を示す図である。図1に示すテスト・システム10は、現行の情報システムを構成している現行ホストシステム40から新たな情報システムで用いられる新ホストシステム50へ移行する場合の移行テストを実行する。すなわち、本実施形態のテスト・システム10は、移行後の新ホストシステム50が移行前の現行ホストシステム40と同様に動作するか否かをテストする。また、本実施形態による検証対象の情報システムは、ホストシステム(現行ホストシステム40、新ホストシステム50)と端末30との間におけるメッセージの送受信を、ホストシステムの主導により行うシステムである。なお、本実施形態では、検証対象の情報システムは、キャラクタ(文字)・ベースの画面によるユーザ・インターフェイス(CUI:character-based user interface)を有するシステムとする。すなわち、ホストシステム(現行ホストシステム40および新ホストシステム50)からのメッセージに基づいて端末30の表示装置に表示されるインターフェイス画面は、キャラクタ・ベースの画面である。
図2は、メッセージ・ファイル301の構成例を示す図である。ここでは、3270プロトコル(TN3270E等)でメッセージがやり取りされた例を示している。図2に示す例では、シーケンス番号01からシーケンス番号36まで、現行ホストシステム40と端末30との間でやり取りされた36個のメッセージが、メッセージ・ファイル301に記録されている。なお、図2に示す例において、送信されたデータ量の多いメッセージ(シーケンス番号07、15、19、21、23、25、27、29、31、33、35、36のメッセージ)について、データの記載を一部省略し、短縮して記載している。
図3は、テスト実行サーバ200の機能構成例を示す図である。図3に示すように、本実施形態のテスト実行サーバ200は、テストにおける比較用に、端末30および現行ホストシステム40の動作を再現する、ホスト・メッセージ再生部211と、端末メッセージ再生部212と、比較用画面バッファ213とを備える。また、テスト実行サーバ200は、新ホストシステム50の動作をテストするための、端末エージェント221と、自動応答部222と、テスト用画面バッファ223と、手動操作再生部224と、比較部225とを備える。
ここで、シナリオ・ファイルの構成について説明する。図4は、シナリオ・ファイル201の構成例を示す図である。図4に示す例では、シナリオ・ファイル201には、端末メッセージ再生部212により生成された画面データは記録されておらず、手動操作により発生したメッセージのみが記録されている。なお、画面データは、シナリオ・ファイル201とは別のファイルに書き出されて管理されているものとする。
端末メッセージ再生部212は、シナリオ・ファイル201を作成する処理において、シナリオ・ファイル201に記録する対象であるメッセージから、キー入力が行われたフィールドを特定し、キー入力に関する情報等を抽出してシナリオ・ファイル201に記録する。シナリオ・ファイル201に記録する対象であるメッセージは、メッセージ・ファイル301に記録されたメッセージのうち、端末30での手動操作により発生し、端末30から現行ホストシステム40へ送信されたメッセージ(以下、送信メッセージ)である。この送信メッセージには、キー入力が行われたフィールド以外のフィールドの情報も記述されている。そのため、送信メッセージの内容のみでは、キー入力の行われたフィールドを判別することができない。
情報システムでは、一般に、多数の端末(例えば数万台程度)がホストシステムに同時接続して動作する場合がある。このような場合、ホストシステムと各端末との間の通信負荷等を考慮すると、移行後の情報システムの動作を正確にテストするには、各メッセージの送受信の時間間隔も再現することが望ましい。そこで、本実施形態では、シナリオ・ファイル201に記録された各メッセージの取得時刻(メッセージ・ファイル301に記録された時刻)の情報に基づき、手動操作により発生したメッセージの送信タイミングを制御する。
次に、テスト実行サーバ200から新ホストシステム50へメッセージを送信する処理の流れを説明する。図5は、自動応答によるメッセージの送信処理を示すフローチャートである。図6は、手動操作によるメッセージの送信処理を示すフローチャートである。本実施形態において、テスト実行サーバ200の端末エージェント221は、新ホストシステム50に対し、自動応答部222により生成された自動応答によるメッセージと、手動操作再生部224によりシナリオ・ファイル201にしたがって再生された手動操作によるメッセージとを送信する。
次に、図7乃至図9を参照し、比較用画面バッファ213に書き込まれた画面データに基づく画面と、テスト用画面バッファ223に書き込まれた画面データに基づく画面とを比較して、テストの実行例を説明する。ここでは、図2に示したメッセージ・ファイル301に記録されたメッセージのうち、シーケンス番号07のメッセージにより送受信された画面データに基づく画面、シーケンス番号25のメッセージにより送受信された画面データに基づく画面、シーケンス番号33のメッセージにより送受信された画面データに基づく画面を比較した例について説明する。
図12は、本実施形態のテスト実行サーバ200を構成するのに好適なハードウェア構成例を示す図である。ここでは、コンピュータにより構成する場合について説明する。図12に示すコンピュータは、演算手段であるCPU(Central Processing Unit)10aと、主記憶手段であるメモリ10cを備える。また、外部デバイスとして、磁気ディスク装置(HDD:Hard Disk Drive)10g、ネットワーク・インターフェイス10f、ディスプレイ装置を含む表示機構10d、キーボードやマウス等の入力デバイス10i等を備える。
Claims (8)
- ホストシステムの移行に伴うホストシステムの動作をテストする装置であって、
移行前のホストシステムと端末との間で送受信されたメッセージのうち、当該端末における手動操作により発生したメッセージを抽出して作成されたファイルを保持する記憶装置と、
移行後のホストシステムとの間でメッセージの送受信を行う送受信制御部と、
前記ファイルに記録されている前記メッセージを再生し、再生したメッセージを前記送受信制御部により前記移行後のホストシステムへ送信させる手動操作再生部と、
前記送受信制御部を介して前記移行後のホストシステムから受信したメッセージが応答を要求するメッセージである場合に、当該要求に対する応答メッセージを自動生成し、生成したメッセージを当該送受信制御部により当該移行後のホストシステムへ送信させる応答メッセージ自動生成部と、
前記送受信制御部を介して前記移行後のホストシステムから受信したメッセージに基づき、端末の表示装置に表示させる画面の画面データを生成する画面データ生成部と、
前記画面データ生成部により生成された画面データと、前記端末の動作を再生して生成された画面データとを比較して、一致しているか否かを判定する比較部と、を備え、
前記送受信制御部は、前記移行後のホストシステムから受信したメッセージに対して、前記手動操作再生部により再生されたメッセージおよび前記応答メッセージ自動生成部により生成されたメッセージを送信する場合、当該応答メッセージ自動生成部により生成されたメッセージを送信した後に、当該手動操作再生部により再生されたメッセージを送信する、装置。 - ホストシステムから送られたメッセージに基づいて端末の表示装置に表示される画面は、キャラクタ・ベースのユーザ・インターフェイスである、請求項1に記載の装置。
- 前記手動操作再生部は、送信しようとする前記メッセージを、直前に他のメッセージを送信してから特定時間が経過した後に送信し、
前記特定時間は、前記移行前のホストシステムと前記端末との間で行われた送受信において、当該端末が前記送信しようとするメッセージに対応するメッセージを送信した時刻と、当該メッセージを送信する直前に手動操作により発生したメッセージを送信した時刻とに基づいて定められる、
請求項1または請求項2に記載の装置。 - 前記手動操作再生部は、送信しようとする前記メッセージを、直前に行われた処理が終了した後に送信する、請求項1または請求項2に記載の装置。
- 前記移行前のホストシステムと前記端末との間で送受信されたメッセージを再生するメッセージ再生部と、
前記メッセージ再生部により再生されたメッセージに基づき、前記端末における手動操作により発生したメッセージを抽出してファイルを作成し、前記記憶装置に保持させるファイル作成部と、
前記メッセージ再生部により再生されたメッセージに基づき、前記端末の表示装置に表示された画面の画面データを模擬的に生成する画面データ模擬生成部と、を備え、
前記比較部は、前記画面データ生成部により生成された画面データと前記画面データ模擬生成部により生成された画面データとを比較して、一致しているか否かを判定する、請求項1または請求項2に記載の装置。 - ホストシステムの移行に伴うホストシステムの動作をテストする装置であって、
移行前のホストシステムと端末との間で送受信されたメッセージを再生するメッセージ再生部と、
前記メッセージ再生部により再生されたメッセージに基づき、前記端末における手動操作により発生したメッセージを抽出してファイルを作成するファイル作成部と、
前記メッセージ再生部により再生されたメッセージに基づき、前記端末の表示装置に表示された画面の画面データを模擬的に生成する画面データ模擬生成部と、
移行後のホストシステムとの間でメッセージの送受信を行う送受信制御部と、
前記ファイル作成部により作成された前記ファイルに記録されている前記メッセージを再生し、再生したメッセージを前記送受信制御部により前記移行後のホストシステムへ送信させる手動操作再生部と、
前記送受信制御部を介して前記移行後のホストシステムから受信したメッセージが応答を要求するメッセージである場合に、当該要求に対する応答メッセージを自動生成し、生成したメッセージを当該送受信制御部により当該移行後のホストシステムへ送信させる応答メッセージ自動生成部と、
前記送受信制御部を介して前記移行後のホストシステムから受信したメッセージに基づき、端末の表示装置に表示させる画面の画面データを生成する画面データ生成部と、
前記画面データ生成部により生成された画面データと、前記端末の動作を再生して生成された画面データとを比較して、一致しているか否かを判定する比較部と、を備え、
前記手動操作再生部は、送信しようとする前記メッセージを、直前に他のメッセージを送信してから、前記移行前のホストシステムと前記端末との間で行われた送受信において当該端末が前記送信しようとするメッセージに対応するメッセージを送信した時刻と、当該メッセージを送信する直前に手動操作により発生したメッセージを送信した時刻とに基づいて定められる特定時間が経過した後であって、直前に行われた処理が終了した後に送信し、
前記送受信制御部は、前記移行後のホストシステムから受信したメッセージに対して、前記手動操作再生部により再生されたメッセージおよび前記応答メッセージ自動生成部により生成されたメッセージを送信する場合、当該応答メッセージ自動生成部により生成されたメッセージを送信した後に、当該手動操作再生部により再生されたメッセージを送信する、装置。 - ホストシステムの移行に伴うホストシステムの動作をテストする方法であって、
移行後のホストシステムの動作をテストするサーバが、当該移行後のホストシステムとの間でメッセージの送受信を行うステップと、
前記移行後のホストシステムから受信したメッセージに基づき、端末の表示装置に表示させる画面の画面データを生成するステップと、
前記移行後のホストシステムから受信したメッセージに基づいて生成された画面データと、移行前のホストシステムとの間で送受信されたメッセージに基づく前記端末の動作を再生して生成された画面データとを比較して、一致しているか否かを判定するステップとを含み、
前記メッセージの送受信を行うステップは、
移行前のホストシステムと端末との間で送受信されたメッセージのうち、当該端末における手動操作により発生したメッセージを抽出して作成されたファイルから当該メッセージを読み出して再生し、再生したメッセージを前記移行後のホストシステムへ送信するステップと、
前記移行後のホストシステムから受信したメッセージが応答を要求するメッセージである場合に、当該要求に対する応答メッセージを自動生成し、生成したメッセージを当該移行後のホストシステムへ送信するステップとを含み、
前記移行後のホストシステムから受信したメッセージに対して、手動操作により発生したメッセージを抽出して作成されたファイルから再生されたメッセージおよび自動生成されたメッセージを送信する場合、当該自動生成されたメッセージを送信した後に、当該ファイルから再生されたメッセージを送信する、方法。 - ホストシステムの移行に伴うホストシステムの動作をテストするコンピュータを、
移行後のホストシステムとの間でメッセージの送受信を行う送受信制御手段と、
移行前のホストシステムと端末との間で送受信されたメッセージのうち、当該端末における手動操作により発生したメッセージを抽出して作成されたファイルから当該メッセージを読み込んで再生し、再生したメッセージを前記送受信制御手段により前記移行後のホストシステムへ送信させる手動操作再生手段と、
前記移行後のホストシステムから受信したメッセージが応答を要求するメッセージである場合に、当該要求に対する応答メッセージを自動生成し、生成したメッセージを前記送受信制御手段により当該移行後のホストシステムへ送信させる応答メッセージ自動生成手段と、
前記移行後のホストシステムから受信したメッセージに基づき、端末の表示装置に表示させる画面の画面データを生成する画面データ生成手段と、
前記画面データ生成手段により生成された画面データと、前記端末の動作を再生して生成された画面データとを比較して、一致しているか否かを判定する比較手段として、機能させ、
前記送受信制御手段の動作として、前記移行後のホストシステムから受信したメッセージに対して、前記手動操作再生手段により再生されたメッセージおよび前記応答メッセージ自動生成手段により生成されたメッセージを送信する場合、当該応答メッセージ自動生成手段により生成されたメッセージを送信した後に、当該手動操作再生手段により再生されたメッセージを送信する、プログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014202063A JP5954752B2 (ja) | 2014-09-30 | 2014-09-30 | システムのテストを行う装置、方法およびプログラム |
US14/840,269 US9720791B2 (en) | 2014-09-30 | 2015-08-31 | Device, method and program for performing system testing |
US15/247,968 US9880914B2 (en) | 2014-09-30 | 2016-08-26 | Device, method and program for performing system testing |
US15/710,942 US10037255B2 (en) | 2014-09-30 | 2017-09-21 | Device, method and program for performing system testing |
US15/710,939 US10037254B2 (en) | 2014-09-30 | 2017-09-21 | Device, method and program for performing system testing |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014202063A JP5954752B2 (ja) | 2014-09-30 | 2014-09-30 | システムのテストを行う装置、方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016071730A JP2016071730A (ja) | 2016-05-09 |
JP5954752B2 true JP5954752B2 (ja) | 2016-07-20 |
Family
ID=55584548
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014202063A Expired - Fee Related JP5954752B2 (ja) | 2014-09-30 | 2014-09-30 | システムのテストを行う装置、方法およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (4) | US9720791B2 (ja) |
JP (1) | JP5954752B2 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5954752B2 (ja) | 2014-09-30 | 2016-07-20 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | システムのテストを行う装置、方法およびプログラム |
US9584614B2 (en) * | 2014-11-21 | 2017-02-28 | Wipro Limited | Method and system for migrating an interface |
KR101797484B1 (ko) | 2016-06-29 | 2017-12-13 | 주식회사 티맥스 소프트 | 리호스팅의 테스트를 수행하기 위한 방법 및 컴퓨팅 디바이스 |
US10572361B2 (en) * | 2017-04-28 | 2020-02-25 | The Boeing Company | Concurrent production use of a production enterprise system and testing of a modified enterprise system |
US11042471B2 (en) | 2017-08-25 | 2021-06-22 | Oracle International Corporation | System and method for providing a test manager for use with a mainframe rehosting platform |
JP6703971B2 (ja) * | 2017-11-01 | 2020-06-03 | みずほ情報総研株式会社 | テスト支援システム、テスト支援方法及びテスト支援プログラム |
CN107943643A (zh) * | 2017-11-28 | 2018-04-20 | 郑州云海信息技术有限公司 | 一种基于moc板卡硬件dc测试方法与系统 |
CN108763006A (zh) * | 2018-05-30 | 2018-11-06 | 郑州云海信息技术有限公司 | 一种背板压力测试的诊断方法及系统 |
CN116414640A (zh) * | 2018-12-27 | 2023-07-11 | 睿云联(厦门)网络通讯技术有限公司 | 一种通讯终端硬件测试方法及整机测试流程 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7085554B2 (en) | 2003-01-24 | 2006-08-01 | Common Voices Llc | Subscriber migration system |
US6983037B2 (en) | 2003-05-23 | 2006-01-03 | Bellsouth Intellectual Property Corporation | Method, system and computer program product for performing automated unbundled network element migration |
US20090273605A1 (en) * | 2006-02-27 | 2009-11-05 | Norihiko Takebayashi | Operation Checking Method in Information System, Operation Checking Program Therefor, Recording Medium, and Operation Checking System |
US8661211B2 (en) * | 2007-08-27 | 2014-02-25 | International Business Machines Corporation | Method for migrating contents of a memory on a virtual machine |
US8671256B2 (en) | 2007-08-27 | 2014-03-11 | International Business Machines Corporation | Migrating contents of a memory on a virtual machine |
US20090300423A1 (en) * | 2008-05-28 | 2009-12-03 | James Michael Ferris | Systems and methods for software test management in cloud-based network |
US8977599B2 (en) * | 2010-11-11 | 2015-03-10 | Verizon Patent And Licensing Inc. | Method and system for testing client-server applications |
US8521974B2 (en) * | 2010-11-23 | 2013-08-27 | International Business Machines Corporation | Migration of data in a distributed environment |
JP5764527B2 (ja) * | 2012-06-07 | 2015-08-19 | 株式会社エヌ・ティ・ティ・データ | 画像検証方法、画像検証装置、およびプログラム |
JP2014010581A (ja) * | 2012-06-28 | 2014-01-20 | Toshiba Corp | テスト装置、テストシステム、テスト方法、及びプログラム |
JP5941823B2 (ja) * | 2012-10-31 | 2016-06-29 | 株式会社日立製作所 | 整合性確認方法およびシステム |
US9654436B2 (en) | 2012-11-27 | 2017-05-16 | BitTitan Inc. | Systems and methods for migrating mailbox data from systems with limited or restricted remote access |
US9092837B2 (en) * | 2012-11-29 | 2015-07-28 | International Business Machines Corporation | Use of snapshots to reduce risk in migration to a standard virtualized environment |
JP2014131212A (ja) * | 2012-12-28 | 2014-07-10 | Fujitsu Ltd | 検証プログラム及び情報処理装置 |
WO2014196954A1 (en) * | 2013-06-03 | 2014-12-11 | Empire Technology Development, Llc | Health monitoring using snapshot backups through test vectors |
US9298518B2 (en) * | 2014-07-09 | 2016-03-29 | International Business Machine Corporation | Safe consolidation and migration |
JP5954752B2 (ja) | 2014-09-30 | 2016-07-20 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | システムのテストを行う装置、方法およびプログラム |
-
2014
- 2014-09-30 JP JP2014202063A patent/JP5954752B2/ja not_active Expired - Fee Related
-
2015
- 2015-08-31 US US14/840,269 patent/US9720791B2/en not_active Expired - Fee Related
-
2016
- 2016-08-26 US US15/247,968 patent/US9880914B2/en not_active Expired - Fee Related
-
2017
- 2017-09-21 US US15/710,939 patent/US10037254B2/en not_active Expired - Fee Related
- 2017-09-21 US US15/710,942 patent/US10037255B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20180018246A1 (en) | 2018-01-18 |
US20160092330A1 (en) | 2016-03-31 |
US20170004060A1 (en) | 2017-01-05 |
US10037255B2 (en) | 2018-07-31 |
US9720791B2 (en) | 2017-08-01 |
US9880914B2 (en) | 2018-01-30 |
US20180018247A1 (en) | 2018-01-18 |
JP2016071730A (ja) | 2016-05-09 |
US10037254B2 (en) | 2018-07-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5954752B2 (ja) | システムのテストを行う装置、方法およびプログラム | |
CN107402880B (zh) | 一种测试方法及电子设备 | |
US20140331209A1 (en) | Program Testing Service | |
US10983903B1 (en) | Enhanced automated protocol for secure application testing | |
JP6283096B2 (ja) | プログラム試験サービス | |
US20140331205A1 (en) | Program Testing Service | |
JP6861880B1 (ja) | 生成装置、生成方法および生成プログラム | |
US20160364318A1 (en) | Enhanced bug resolution | |
JP7277694B2 (ja) | 情報処理装置、その制御方法及びプログラム | |
JP6798050B1 (ja) | 生成装置、生成方法および生成プログラム | |
JP4729089B2 (ja) | ウェブサイト集計装置及びウェブサイト集計プログラム | |
US11372747B1 (en) | Service virtualization | |
JP7311740B2 (ja) | 情報処理システム、その制御方法、及びプログラム | |
US11611500B2 (en) | Automated network analysis using a sensor | |
JP6261244B2 (ja) | Webアプリケーションテスト装置およびそのプログラム | |
JP7506339B2 (ja) | 情報処理システム、その制御方法及びプログラム | |
JP7323755B2 (ja) | 情報処理システム、その制御方法及びプログラム | |
JP7319516B2 (ja) | プログラム、情報処理装置及びその制御方法 | |
JP7219389B2 (ja) | 情報処理装置、その制御方法及びプログラム | |
JP2017049675A (ja) | 障害再現システム、及び障害再現方法 | |
US20210042133A1 (en) | Product demonstration creation toolset that tracks usage of the demonstration | |
US20210043107A1 (en) | Product demonstration creation toolset that provides for entry of persistent data during use of the demonstration | |
Louis et al. | Mastering mobile test automation | |
JP4759595B2 (ja) | ネットワーク監視システム、方法、及びプログラム | |
CN114995870A (zh) | 配置数据的设置方法、装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20160203 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160329 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160415 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160517 |
|
RD14 | Notification of resignation of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7434 Effective date: 20160517 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160607 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5954752 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |