RU2018102980A - Способ и конфигурация для автоматизированной системы испытания - Google Patents

Способ и конфигурация для автоматизированной системы испытания Download PDF

Info

Publication number
RU2018102980A
RU2018102980A RU2018102980A RU2018102980A RU2018102980A RU 2018102980 A RU2018102980 A RU 2018102980A RU 2018102980 A RU2018102980 A RU 2018102980A RU 2018102980 A RU2018102980 A RU 2018102980A RU 2018102980 A RU2018102980 A RU 2018102980A
Authority
RU
Russia
Prior art keywords
enterprise
modified
production system
production
users
Prior art date
Application number
RU2018102980A
Other languages
English (en)
Other versions
RU2018102980A3 (ru
RU2767149C2 (ru
Inventor
Эрих Гюнтер ШУЛЛЕР
Джон Норрис БЕНСОН
Сема УСТУНТАС
Original Assignee
Зе Боинг Компани
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Зе Боинг Компани filed Critical Зе Боинг Компани
Publication of RU2018102980A publication Critical patent/RU2018102980A/ru
Publication of RU2018102980A3 publication Critical patent/RU2018102980A3/ru
Application granted granted Critical
Publication of RU2767149C2 publication Critical patent/RU2767149C2/ru

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/26—Functional testing
    • G06F11/273—Tester hardware, i.e. output processing circuits
    • G06F11/277—Tester hardware, i.e. output processing circuits with comparison between actual response and known fault-free response
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/2257—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing using expert systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G06F11/3414—Workload generation, e.g. scripts, playback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3664—Environments for testing or debugging software
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/368—Test management for test version control, e.g. updating test cases to a new software version
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3684—Test management for test design, e.g. generating new test cases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3688—Test management for test execution, e.g. scheduling of test suites
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3692—Test management for test results analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/60—Software deployment
    • G06F8/65—Updates
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/70—Software maintenance or management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computer Hardware Design (AREA)
  • Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Tourism & Hospitality (AREA)
  • Operations Research (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Data Mining & Analysis (AREA)
  • Game Theory and Decision Science (AREA)
  • Educational Administration (AREA)
  • Development Economics (AREA)
  • Debugging And Monitoring (AREA)
  • Test And Diagnosis Of Digital Computers (AREA)
  • Testing Electric Properties And Detecting Electric Faults (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Claims (24)

1. Способ (300) одновременного производственного использования производственной системы (122) предприятия и испытания модифицированной системы (130) предприятия, включающий:
получение (405) вводов от одного или более пользователей (120А, 120В, 120С) производственной системы (122) предприятия;
передачу (410) вводов, полученных от одного или более пользователей (120А, 120В, 120С), производственной системе (122) предприятия;
определение (415) по меньшей мере одним аппаратным процессором (502) поднабора вводов, полученных от одного или более пользователей (120А, 120В, 120С), для использования в испытании модифицированной системы (130) предприятия;
выполнение (420) по меньшей мере одним аппаратным процессором (502) одной или более транзакций с указанным поднабором вводов в модифицированной системе (130) предприятия и копии производственной системы (125) предприятия; и
анализ (425) по меньшей мере одним аппаратным процессором (502) одной или более транзакций для определения того, что модифицированная система (130) предприятия сконфигурирована правильно.
2. Способ по п. 1, согласно которому определение основано на белом списке (210), причем указанный белый список содержит одно или более из: списка пользователей (120А, 120В, 120С), вовлеченных в испытание; списка команд (212) для использования в испытании; списка транзакций (213) для использования в испытании.
3. Способ по п. 1, после получения (405) дополнительно включающий копирование (430) вводов, которые должны быть переданы производственной системе (122) предприятия, модифицированной системе (130) предприятия и копии производственной системы (125) предприятия.
4. Способ по п. 1, дополнительно включающий синхронизацию (430) модифицированной системы (130) предприятия и копии производственной системы (125) предприятия с производственной системой (122) предприятия.
5. Способ по п. 4, согласно которому синхронизацию (430) выполняют во время предварительно заданного временного интервала или по требованию.
6. Способ по п. 1, согласно которому анализ (425) дополнительно включает сравнение (435) записи транзакций для копии производственной системы (125) предприятия и модифицированной системы (130) предприятия.
7. Система для одновременного производственного использования системы предприятия и испытания модифицированной системы (130) предприятия, содержащая:
один или более процессоров (502) и
один или более компьютерочитаемых носителей (504, 510), содержащих инструкции, которые при их исполнении указанными одним или более процессорами (502) принуждают указанные один или более процессоров (502) выполнять операции, включающие:
получение (405) вводов от одного или более пользователей (120А, 120В, 120С) производственной системы предприятия;
передачу (410) вводов, полученных от одного или более пользователей (120А, 120В, 120С), производственной системе предприятия;
определение (415) поднабора вводов, полученных от одного или более пользователей (120А, 120В, 120С), для использования в испытании модифицированной системе (130) предприятия;
выполнение (420) одной или более транзакций с указанным поднабором вводов в модифицированной системе (130) предприятия и копии производственной системы (125) предприятия; и
анализ (425) одной или более транзакций для определения того, что модифицированная система (130) предприятия сконфигурирована правильно.
8. Система по п. 7, в которой определение основано на белом списке, причем указанный белый список содержит одно или более из: списка пользователей (120А, 120В, 120С), вовлеченных в испытание; списка команд (212) для использования в испытании; списка транзакций (213) для использования в испытании.
9. Система по п. 7, в которой один или более процессоров (502) дополнительно выполнены с возможностью выполнения операций, после получения (405) включающих копирование (430) вводов, которые должны быть переданы производственной системе (122) предприятия, модифицированной системе (130) предприятия и копии производственной системы (125) предприятия.
10. Система по п. 7, в которой один или более процессоров (502) дополнительно выполнены с возможностью выполнения операций, включающих синхронизацию (430) модифицированной системы (130) предприятия и копии производственной системы (125) предприятия с производственной системой (122) предприятия.
11. Система по п. 10, в которой синхронизация (430) происходит во время предварительно заданного временного интервала или по требованию.
12. Система по п. 7, в которой анализ (425) дополнительно включает сравнение (435) записи транзакций для копии производственной системы (125) предприятия и модифицированной системы (130) предприятия.
RU2018102980A 2017-04-28 2018-01-25 Способ и конфигурация для автоматизированной системы испытания RU2767149C2 (ru)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201762491311P 2017-04-28 2017-04-28
US62/491,311 2017-04-28
US15/844,200 2017-12-15
US15/844,200 US10572361B2 (en) 2017-04-28 2017-12-15 Concurrent production use of a production enterprise system and testing of a modified enterprise system

Publications (3)

Publication Number Publication Date
RU2018102980A true RU2018102980A (ru) 2019-07-25
RU2018102980A3 RU2018102980A3 (ru) 2021-06-23
RU2767149C2 RU2767149C2 (ru) 2022-03-16

Family

ID=62063272

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2018102980A RU2767149C2 (ru) 2017-04-28 2018-01-25 Способ и конфигурация для автоматизированной системы испытания

Country Status (9)

Country Link
US (1) US10572361B2 (ru)
EP (1) EP3396555B1 (ru)
JP (1) JP7125854B2 (ru)
KR (1) KR102454177B1 (ru)
CN (1) CN108804306B (ru)
AU (1) AU2018200693B2 (ru)
BR (1) BR102018004432A2 (ru)
CA (1) CA2993213C (ru)
RU (1) RU2767149C2 (ru)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3593254B1 (en) 2017-07-24 2023-08-02 Wix.com Ltd. Editing a database during preview of a virtual web page
US10795792B2 (en) * 2018-02-02 2020-10-06 Storage Engine, Inc. Methods, apparatuses and systems for cloud-based disaster recovery test
US11086765B2 (en) * 2018-02-02 2021-08-10 Jpmorgan Chase Bank, N.A. Test reuse exchange and automation system and method
US10417115B1 (en) * 2018-04-27 2019-09-17 Amdocs Development Limited System, method, and computer program for performing production driven testing
CN111506583A (zh) * 2019-01-31 2020-08-07 北京嘀嘀无限科技发展有限公司 更新方法、更新装置、服务器、计算机设备和存储介质
CN110347484B (zh) * 2019-06-27 2024-02-02 上海麦克风文化传媒有限公司 一种软件编译部署过程中进行高效测试的工作方法
CN110490742B (zh) * 2019-08-13 2024-04-12 深圳前海微众银行股份有限公司 一种区块链中的交易执行方法及装置
KR102305845B1 (ko) * 2020-12-21 2021-09-29 쿠팡 주식회사 코드의 검증을 위한 전자 장치 및 그 방법
US20220413923A1 (en) * 2021-06-24 2022-12-29 Charter Communications Operating, Llc Seamless micro-services data source migration with mirroring
US11847035B2 (en) 2021-08-23 2023-12-19 International Business Machines Corporation Functional test of processor code modification operations
CN114756268A (zh) * 2022-06-16 2022-07-15 成都雷电微晶科技有限公司 一种集中式相控阵天线fpga程序升级方法及系统

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04112344A (ja) * 1990-09-03 1992-04-14 Fujitsu Ltd データベースの疑似更新方式
JPH07200338A (ja) * 1994-01-07 1995-08-04 Nippon Steel Corp コンピュータシステムの稼動検証方法
US6230066B1 (en) * 1998-09-08 2001-05-08 Ford Global Technologies, Inc. Simultaneous manufacturing and product engineering integrated with knowledge networking
WO2001046889A2 (en) * 1999-12-22 2001-06-28 Accenture Llp A method for executing a network-based credit application process
RU2312387C2 (ru) * 2003-05-29 2007-12-10 Самсунг Электроникс Ко., Лтд. Способ и система тестирования dvd-плеера
US7799273B2 (en) * 2004-05-06 2010-09-21 Smp Logic Systems Llc Manufacturing execution system for validation, quality and risk assessment and monitoring of pharmaceutical manufacturing processes
EP1818812B1 (en) * 2006-01-25 2016-01-06 Brandt Technologies Limited System and method for effecting simultaneous control of remote computers
JP4495688B2 (ja) * 2006-03-27 2010-07-07 株式会社日立製作所 検証システム
US8151247B2 (en) 2006-10-09 2012-04-03 Sap Ag Test data management
US20080270104A1 (en) * 2007-04-24 2008-10-30 Stratton Robert J System and Method for Creating an Assurance System in a Mixed Environment
CN101521834B (zh) * 2009-04-02 2012-07-04 深圳市茁壮网络股份有限公司 一种自动化测试的方法、装置和系统
US8418150B2 (en) * 2009-04-03 2013-04-09 Oracle International Corporation Estimating impact of configuration changes
US8549476B2 (en) * 2009-07-30 2013-10-01 Hewlett-Packard Development Company, L.P. Comparison of result of program operation to result of an operation of a different version of the program
US8245083B2 (en) * 2009-12-24 2012-08-14 At&T Intellectual Property I, L.P. Systems, methods, and apparatus to debug a network application
JP2011141631A (ja) * 2010-01-06 2011-07-21 Hitachi Omron Terminal Solutions Corp 現金自動取引装置及び現金自動取引装置の更新プログラムのテスト方法
US8429466B2 (en) 2010-07-23 2013-04-23 Sap Ag XML-schema-based automated test procedure for enterprise service pairs
US9916147B2 (en) * 2010-08-17 2018-03-13 International Business Machines Corporation Deployment of a tool for testing migrated applications
US9054975B2 (en) * 2010-08-30 2015-06-09 Deutsche Telekom Ag Virtualization and replay-based system for network debugging
US9479416B2 (en) * 2010-12-06 2016-10-25 Ca, Inc. System and method for diagnosing information technology systems in multiple virtual parallel universes
JP5648186B2 (ja) * 2011-08-22 2015-01-07 インターナショナル・ビジネス・マシーンズ・コーポレーションＩｎｔｅｒｎａｔｉｏｎａｌ Ｂｕｓｉｎｅｓｓ Ｍａｃｈｉｎｅｓ Ｃｏｒｐｏｒａｔｉｏｎ トランザクションを再生するためのデータを生成する装置及び方法
CN103077110B (zh) * 2011-10-25 2015-11-25 阿里巴巴集团控股有限公司 一种测试方法及装置
JP5703195B2 (ja) * 2011-11-15 2015-04-15 株式会社日本総合研究所 プログラムの新旧バージョンに対する差分比較テストシステム及びテスト方法
EP2883143A4 (en) * 2012-08-13 2016-05-11 Hewlett Packard Development Co PERFORMANCE TESTS IN A CONTINUOUS PIPE
US9262416B2 (en) * 2012-11-08 2016-02-16 Microsoft Technology Licensing, Llc Purity analysis using white list/black list analysis
US20140229928A1 (en) * 2013-02-11 2014-08-14 Claes Göran Edström Upgrading software in production environments
TWI608419B (zh) * 2013-09-23 2017-12-11 財團法人資訊工業策進會 軟體相容性預先檢測方法與其系統
US10489807B1 (en) * 2013-11-11 2019-11-26 Amazon Technologles, Inc. Non-deterministic load-testing
US9483387B1 (en) * 2014-03-17 2016-11-01 Amazon Technologies, Inc. Tree comparison functionality for services
JP5954752B2 (ja) * 2014-09-30 2016-07-20 インターナショナル・ビジネス・マシーンズ・コーポレーションＩｎｔｅｒｎａｔｉｏｎａｌ Ｂｕｓｉｎｅｓｓ Ｍａｃｈｉｎｅｓ Ｃｏｒｐｏｒａｔｉｏｎ システムのテストを行う装置、方法およびプログラム
US20160132420A1 (en) * 2014-11-10 2016-05-12 Institute For Information Industry Backup method, pre-testing method for environment updating and system thereof
US20160155131A1 (en) * 2014-11-28 2016-06-02 EIS Group Software Ireland Limited System and method for fully testing a system before and after an upgrade to verify full use case compliance
CN105824745B (zh) * 2015-01-04 2019-03-01 中国移动通信集团湖南有限公司 一种灰度发布方法及装置
CN106155890A (zh) * 2015-04-02 2016-11-23 深圳市腾讯计算机系统有限公司 平台测试方法和系统
CN105068918B (zh) * 2015-06-03 2017-11-17 中国人民财产保险股份有限公司 一种页面测试方法及装置
US10726371B2 (en) 2015-06-08 2020-07-28 Sap Se Test system using production data without disturbing production system
GB201514336D0 (en) * 2015-08-12 2015-09-23 Basis Technologies Internat Ltd Testing of enterprise resource management systems
US9910762B2 (en) 2015-08-21 2018-03-06 Oracle International Corporation Unified sandbox
CN106598835B (zh) * 2015-10-19 2019-12-20 广州爱九游信息技术有限公司 一种应用的测试方法及装置、系统
US9898389B2 (en) * 2016-01-07 2018-02-20 International Business Machines Corporation Debugging a transaction in a replica execution environment
CN105827446B (zh) * 2016-03-31 2019-04-30 深圳市金溢科技股份有限公司 一种智能交通api网关及智能交通业务系统

Also Published As

Publication number Publication date
BR102018004432A2 (pt) 2019-02-26
CA2993213A1 (en) 2018-10-28
JP7125854B2 (ja) 2022-08-25
US10572361B2 (en) 2020-02-25
CA2993213C (en) 2023-03-21
RU2018102980A3 (ru) 2021-06-23
KR20180121337A (ko) 2018-11-07
AU2018200693A1 (en) 2018-11-15
CN108804306A (zh) 2018-11-13
CN108804306B (zh) 2023-07-18
EP3396555A1 (en) 2018-10-31
EP3396555B1 (en) 2020-04-08
KR102454177B1 (ko) 2022-10-12
JP2018200683A (ja) 2018-12-20
US20180314625A1 (en) 2018-11-01
AU2018200693B2 (en) 2023-07-13
RU2767149C2 (ru) 2022-03-16

Similar Documents

Publication Publication Date Title
RU2018102980A (ru) Способ и конфигурация для автоматизированной системы испытания
US20170010956A1 (en) Device for automatically generating test cases for embedded software and method thereof
US10210055B2 (en) Method and system for data storage upon database failure
US20140281732A1 (en) Automated update testing and deployment
HRP20171470T1 (hr) Automatizirano raspakiravanje prijenosnih izvršnih datoteka
EP3493062A3 (en) Data processing system having lockstep operation
JP2014524608A5 (ru)
US10782964B2 (en) Measuring similarity of software components
US11288164B2 (en) Dynamic distributed tracing instrumentation in a microservice architecture
CN105446825B (zh) 数据库测试方法及装置
GB2603340A (en) Deploying microservices across a service infrastructure
SG10201906981TA (en) Methods and reagents for the assessment of gestational diabetes
GB2562014A (en) Prioritization of transactions
CN105740112A (zh) 一种Linux下的开机自动检测硬件信息的方法
BR112017021517A2 (pt) ?métodos para verificação de uma autenticidade de um item impresso e para copiar, e, terminal de processamento de dados?
WO2016107137A1 (zh) 基于影响分析的任务重做的方法、影响分析计算装置及一键重置装置
JP2019501552A5 (ja) ケーブリング試験結果をケーブリング試験構成と照合するためのシステム及びクラウドベースのコンピュータサーバ
CN109344634A (zh) 应用的权限授予方法、装置、终端及计算机可读存储介质
Eichelberger et al. From reproducibility problems to improvements: a journey
Adlan et al. Targeted thyroid testing in acute illness: achieving success through audit
CN105068911A (zh) 一种针对cpu内核进行网卡性能调优的方法
TWI735511B (zh) 代碼提交方法和設備
RU2014125471A (ru) Способ обработки поискового запроса и сервер
US11119903B2 (en) Race condition testing via a scheduling test program
Machado et al. Isoenzyme electrophoresis and karyotype techniques as an alternative for cell line identity confirmation