KR20220013947A - 지속적 통합 테스트 방법 및 장치 - Google Patents
지속적 통합 테스트 방법 및 장치 Download PDFInfo
- Publication number
- KR20220013947A KR20220013947A KR1020220006506A KR20220006506A KR20220013947A KR 20220013947 A KR20220013947 A KR 20220013947A KR 1020220006506 A KR1020220006506 A KR 1020220006506A KR 20220006506 A KR20220006506 A KR 20220006506A KR 20220013947 A KR20220013947 A KR 20220013947A
- Authority
- KR
- South Korea
- Prior art keywords
- test
- information
- test device
- hardware parameter
- parameter information
- Prior art date
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 296
- 238000000034 method Methods 0.000 title claims abstract description 69
- 230000010354 integration Effects 0.000 title claims description 69
- 238000010998 test method Methods 0.000 claims abstract description 24
- 230000007613 environmental effect Effects 0.000 claims description 81
- 230000015654 memory Effects 0.000 claims description 19
- 230000004044 response Effects 0.000 claims description 15
- 239000011159 matrix material Substances 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 11
- 238000012986 modification Methods 0.000 claims description 2
- 230000004048 modification Effects 0.000 claims description 2
- 230000008569 process Effects 0.000 abstract description 7
- 238000005516 engineering process Methods 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 238000007726 management method Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 238000013500 data storage Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000013100 final test Methods 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/362—Software debugging
- G06F11/3648—Software debugging using additional hardware
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3664—Environments for testing or debugging software
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3692—Test management for test results analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3696—Methods or tools to render software testable
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
- Test And Diagnosis Of Digital Computers (AREA)
Abstract
본 개시는 지속적 통합 테스트 방법 및 장치를 제공하는 바, 클라우드 컴퓨팅 및 테스트 기술분야에 관한 것이다. 구체적인 실시방식은 테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하는 단계; 테스트 기기 클러스터로부터 상기 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하는 단계; 상기 환경 정보 중의 비(非)하드웨어 파라미터 정보에 따라 해당 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득하는 단계; 및 상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 상기 환경 정보에 대응되는 테스트 결과를 생성하는 단계를 포함한다. 본 개시는 하드웨어 파라미터 정보에 따라 테스트 기기를 선택하고 기기를 초기화하고 기기가 테스트 환경에 부합되도록 할 수 있는 바, 테스트 과정 중 기기에 대한 점용을 줄이고 나아가 테스트 비용을 저감한다.
Description
본 개시는 컴퓨터 기술분야에 관한 것으로, 구체적으로 클라우드 컴퓨팅 및 테스트 기술분야에 관한 것이고, 특히 지속적 통합 테스트 방법 및 장치에 관한 것이다.
지속적 통합 테스트는 소프트웨어 품질을 보장하는 중요한 테스트 방법으로, 현재 애자일 개발 모드의 메인스트림 테스트 수단으로 되어 있는 바, 그 본질로는 빈번한 통합으로 소프트웨어의 품질을 검증하는 것이다.
관련 기술에 있어서, 현재 기업용 소프트웨어 분야에는 여전히 테스트 효율이 보다 저하되고 테스트 비용이 높은 문제가 존재한다.
지속적 통합 테스트 방법, 장치, 전자 기기 및 저장매체가 제공된다.
제1 방면에 있어서, 지속적 통합 테스트 방법을 제공하는 바, 해당 방법은 서버 측에 사용되고, 해당 방법은 테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하되, 환경 정보는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함하는 단계; 테스트 기기 클러스터로부터 상기 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하는 단계; 상기 환경 정보 중의 비(非)하드웨어 파라미터 정보에 따라 해당 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득하는 단계; 및 상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 상기 환경 정보에 대응되는 테스트 결과를 생성하는 단계를 포함한다.
제2 방면에 있어서, 지속적 통합 테스트 시스템을 제공하는 바, 해당 시스템은 서버 측에 사용되고, 해당 시스템은 지속적 통합 서버 및 자원 관리 서버를 포함하고, 상기 지속적 통합 서버는 테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하고 상기 자원 관리 서버에 상기 복수의 환경 정보를 포함하는 테스트 신청을 송신하되, 환경 정보는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함하도록 구성되고, 상기 자원 관리 서버는 상기 테스트 신청을 수신하는 것에 응답하여 테스트 기기 클러스터로부터 상기 환경 정보의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하고, 상기 환경 정보의 비(非)하드웨어 파라미터 정보에 따라 선택된 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득하도록 구성되고, 상기 지속적 통합 서버는 상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 상기 환경 정보에 대응되는 테스트 결과를 생성하도록 더 구성된다.
제3 방면에 있어서, 지속적 통합 테스트 장치를 제공하는 바, 해당 장치는 서버 측에 사용되고, 해당 장치는 테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하되, 환경 정보는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함하도록 구성된 취득 유닛; 테스트 기기 클러스터로부터 상기 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하도록 구성된 선택 유닛; 상기 환경 정보 중의 비(非)하드웨어 파라미터 정보에 따라 해당 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득하도록 구성된 초기화 유닛; 및 상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 상기 환경 정보에 대응되는 테스트 결과를 생성하도록 구성된 테스트 유닛을 포함한다.
제4 방면에 있어서, 전자 기기를 제공하는 바, 해당 전자 기기는 적어도 하나의 프로세서; 및 적어도 하나의 프로세서에 통신적으로 연결되는 메모리를 포함하고, 여기서 메모리에는 적어도 하나의 프로세서에 의해 실행가능한 명령어가 저장되어 있고, 명령어는 적어도 하나의 프로세서에 의해 실행됨으로써 적어도 하나의 프로세서가 지속적 통합 테스트 방법 중 어느 한 실시예의 방법을 수행 가능하도록 한다.
제5 방면에 있어서, 컴퓨터 명령어가 저장되어 있는 비일시적 컴퓨터 판독가능 저장매체를 제공하는 바, 컴퓨터 명령어는 컴퓨터가 지속적 통합 테스트 방법에 있어서 어느 한 실시예에 따른 방법을 수행하도록 한다.
제6 방면에 있어서, 매체에 저장된 컴퓨터 프로그램을 제공하는 바, 컴퓨터 프로그램은 프로세서에 의해 실행되는 경우, 지속적 통합 테스트 방법에 있어서 어느 한 실시예에 따른 방법을 구현한다.
본 개시의 방안에 따르면, 하드웨어 파라미터 정보에 따라 테스트 기기를 선택하고 기기를 초기화하고 기기가 테스트 환경에 부합되도록 할 수 있는 바, 이로써 종래 기술에서 대량의 서로 다른 테스트 환경의 기기를 준비해야 함으로 인해 초래되는 고 테스트 비용 문제를 회피하고 테스트 과정 중 기기에 대한 점용을 줄이고 나아가 테스트 비용을 저감한다.
본 개시의 다른 특징, 목적 및 이점은 하기 첨부도면을 참조한, 비한정적인 실시예에 대한 상세한 기술(記述)을 읽어봄으로써 더욱 분명해질 것이다.
도 1은 본 개시의 일부 실시예가 응용될 수 있는 예시적인 시스템 아키텍처 도면이다.
도 2는 본 개시에 따른 지속적 통합 테스트 방법의 일 실시예의 흐름도이다.
도 3은 본 개시에 따른 지속적 통합 테스트 방법의 일 응용 시나리오의 개략도이다.
도 4는 본 개시에 따른 지속적 통합 테스트 방법의 다른 실시예의 흐름도이다.
도 5는 본 개시에 따른 지속적 통합 테스트 시스템의 일 실시예의 구조 개략도이다.
도 6은 본 개시에 따른 지속적 통합 테스트 장치의 일 실시예의 구조 개략도이다.
도 7은 본 개시의 실시예의 지속적 통합 테스트 방법을 구현하기 위한 전자 기기의 블록도이다.
도 1은 본 개시의 일부 실시예가 응용될 수 있는 예시적인 시스템 아키텍처 도면이다.
도 2는 본 개시에 따른 지속적 통합 테스트 방법의 일 실시예의 흐름도이다.
도 3은 본 개시에 따른 지속적 통합 테스트 방법의 일 응용 시나리오의 개략도이다.
도 4는 본 개시에 따른 지속적 통합 테스트 방법의 다른 실시예의 흐름도이다.
도 5는 본 개시에 따른 지속적 통합 테스트 시스템의 일 실시예의 구조 개략도이다.
도 6은 본 개시에 따른 지속적 통합 테스트 장치의 일 실시예의 구조 개략도이다.
도 7은 본 개시의 실시예의 지속적 통합 테스트 방법을 구현하기 위한 전자 기기의 블록도이다.
아래 첨부도면을 결부하여 본 개시의 시범적 실시예에 대하여 설명하는 바, 여기에는 이해를 돕고자 본 개시의 실시예의 여러가지 세부사항이 포함되며, 이러한 부분은 단지 시범적인 것으로 간주되어야 한다. 따라서, 당업자라면 본 개시의 범위와 사상에서 벗어나면서 여기서 기술하는 실시예에 대한 여러 가지 변경과 수정이 가능하다는 점을 인지하여야 한다. 마찬가지로, 명확함과 간결함을 위해 하기 기술에 있어서 공지된 기능과 구조에 대한 기술(記述)은 생략된다.
본 개시의 기술 방안에서 관련되는 사용자 개인 정보의 취득, 저장 및 응용 등은 모두 관련 법률 법규의 규정에 부합되며, 필수적인 기밀유지 조치를 취하는 바, 공서양속을 위반하지 않는다.
본 개시의 실시예 및 실시예 중의 특징은 모순되지 않는 한 상호 조합될 수 있음을 설명해야 한다. 아래 첨부도면을 참조하고 실시예를 결부하여 본 개시를 상세히 설명하고자 한다.
도 1은 본 개시의 지속적 통합 테스트 방법 또는 지속적 통합 테스트 장치의 실시예가 응용될 수 있는 예시적인 시스템 아키텍처(100)를 도시한다.
도 1에 도시된 바와 같이, 시스템 아키텍처(100)는 단말기기(101, 102, 103), 네트워크(104) 및 서버(105)를 포함할 수 있다. 네트워크(104)는 단말기기(101, 102, 103)와 서버(105) 사이에서 통신 링크를 제공하는 매체로 사용된다. 네트워크(104)는 여러 가지 연결 유형을 포함할 수 있는 바, 예를 들면, 유선, 무선 통신 링크 또는 광섬유 케이블 등이 있다.
사용자는 단말기기(101, 102, 103)를 사용하여 네트워크(104)를 통해 서버(105)와 인터랙션함으로써 메시지 등을 수신하거나 송신할 수 있다. 단말기기(101, 102, 103)에는 여러 가지 통신 클라이언트 애플리케이션, 예를 들면, 영상 애플리케이션, 라이브 스트리밍 애플리케이션, 인스턴트 메시징 툴, 메일 클라이언트, 소셜 플랫폼 소프트웨어 등이 설치될 수 있다.
여기서의 단말기기(101, 102, 103)는 하드웨어일 수도 있고 소프트웨어일 수도 있다. 단말기기(101, 102, 103)는 하드웨어인 경우, 표시 스크린을 가지는 여러 가지 전자 기기일 수 있는 바, 스마트폰, 태블릿 컴퓨터, 전자책 리더, 휴대용 랩톱 컴퓨터 및 데스크톱 컴퓨터 등을 포함하나, 이에 한정되지 않는다. 단말기기(101, 102, 103)는 소프트웨어인 경우, 앞서 나열한 전자기기에 설치될 수 있다. 이는 복수의 소프트웨어 또는 소프트웨어 모듈(예컨대, 분산 서비스를 제공하기 위한 복수의 소프트웨어 또는 소프트웨어 모듈)로 구현될 수도 있고, 단일 소프트웨어 또는 소프트웨어 모듈로 구현될 수도 있다. 이에 대해 구체적으로 한정하지 않는다.
서버(105)는 여러 가지 서비스를 제공하는 서버일 수 있는데, 예를 들면, 단말기기(101, 102, 103)에 지원을 제공하는 백그라운드 서버이다. 백그라운드 서버는 수신된 테스트하고자 하는 스크립트 등의 데이터에 대해 분석 등의 처리를 수행하고 처리 결과(예컨대, 테스트 결과)를 단말기기에 피드백할 수 있다.
본 개시의 실시예에 의해 제공되는 지속적 통합 테스트 방법은 서버(105)에 의해 수행될 수 있고, 상응하게 지속적 통합 테스트 장치는 서버(105)에 설치될 수 있음을 설명하여야 한다.
도 1에서의 단말기기, 네트워크 및 서버의 수는 단지 예시적인 것일 뿐이라는 것을 이해하여야 한다. 구현의 수요에 따라, 단말기기, 네트워크 및 서버를 임의의 수로 가질 수 있다.
계속하여 도 2를 참조하면, 본 개시에 따른 지속적 통합 테스트 방법의 일 실시예의 흐름(200)을 도시한다. 해당 지속적 통합 테스트 방법은 서버 측에 사용되고 하기와 같은 단계를 포함한다.
단계(201)에서, 테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하되, 여기서 환경 정보는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함한다.
본 실시예에 있어서, 지속적 통합 테스트 방법이 실행되는 수행주체(예컨대, 도 1에 도시된 서버)는 테스트하고자 하는 스크립트를 취득할 수 있고, 이 외에, 또한 테스트에 채용하여야 할 복수의 환경 정보를 취득할 수 있다. 환경 정보는 테스트에 채용되는 환경, 즉, 이기종 환경을 가리킨다.
환경 정보 중의 하드웨어 파라미터 정보는 기계의 하드웨어에 관련되는 정보, 예컨대, CPU 아키텍처, 자기 디스크 유형, GPU 카드 유형 등을 가리킨다. 비(非)하드웨어 파라미터 정보는 전술한 하드웨어 파라미터 정보 외의 환경 정보를 가리키는 바, 구체적으로, 여러 가지 환경 정보, 예컨대, 운영 체제일 수 있다.
전술한 서버 측은 단일 서버 기기만 포함할 수도 있고, 서버 클러스터를 포함할 수도 있다.
단계(202)에서, 테스트 기기 클러스터로부터 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택한다.
본 실시예에 있어서, 복수의 환경 정보 중의 환경 정보에 있어서, 전술한 수행주체는 테스트 기기 클러스터로부터 테스트 기기를 선택할 수 있는 바, 해당 테스트 기기는 해당 환경 정보(예컨대, 적어도 하나의 환경 정보) 중의 하드웨어 파라미터 정보에 부합된다. 즉, 전술한 수행주체는 하드웨어 파라미터 정보에 의해 테스트하기 위한 기기를 선택한다. 예를 들어, 선택된 테스트 기기는 하드웨어 파라미터 정보에서 한정하는 모든 정보에 부합되어야 하는 바, CPU 아키텍처, 자기 디스크 유형, CPU 가드 유형이 포함된다. 본 개시에서 이른바 기기는 물리적인 기계일 수도 있고 가상 기계일 수도 있다.
단계(203)에서, 환경 정보 중의 비(非)하드웨어 파라미터 정보에 따라 해당 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득한다.
본 실시예에 있어서, 전술한 수행주체는 해당 환경 정보 중의 비(非)하드웨어 파라미터 정보에 따라 선택된 테스트 기기를 초기화할 수 있는 바, 이로써 초기화된 테스트 기기가 해당 환경 정보 중의 비(非)하드웨어 파라미터 정보에 부합되도록 한다.
단계(204)에서, 초기화된 테스트 기기를 이용하여 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 환경 정보에 대응되는 테스트 결과를 생성한다.
본 실시예에 있어서, 전술한 수행주체는 초기화된 테스트 기기를 이용하여 전술한 테스트하고자 하는 스크립트에 대해 테스트를 수행함으로써 테스트 결과를 생성할 수 있다. 해당 테스트 결과는 해당 환경 정보에 대응되는 바, 즉, 해당 환경 정보를 채용하여 테스트하여 획득된다.
본 개시의 전술한 실시예에 의해 제공되는 방법은 하드웨어 파라미터 정보에 따라 테스트 기기를 선택하고 기기를 초기화하고 기기가 테스트 환경에 부합되도록 할 수 있는 바, 이로써 종래 기술에서 대량의 서로 다른 테스트 환경의 기기를 준비해야 함으로 인해 초래되는 고 테스트 비용 문제를 회피하고 테스트 과정 중 기기에 대한 점용을 줄이고 나아가 테스트 비용을 저감한다.
계속하여 도 3을 참조하면, 도 3은 본 실시예에 따른 지속적 통합 테스트 방법의 응용 시나리오의 개략도이다. 도 3의 응용 시나리오에서, 수행주체(301)는 테스트하고자 하는 스크립트(302)를 취득하고 테스트에 필요한 복수의 환경 정보(303)를 취득하고, 예컨대 150개의 환경 정보를 취득하는 바, 여기서 환경 정보(303)는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함한다. 수행주체(301)는 하기 테스트 단계인, 테스트 기기 클러스터로부터 환경 정보(303) 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기(304)를 선택하는 단계; 환경 정보(303） 중의 비(非)하드웨어 파라미터 정보에 따라 해당 테스트 기기(304)를 초기화하여 초기화된 테스트 기기(305)를 획득하는 단계; 초기화된 테스트 기기(305)를 이용하여 테스트하고자 하는 스크립트(302)에 대해 테스트를 수행하여 환경 정보에 대응되는 테스트 결과(306)를 생성하는 단계를 수행한다.
나아가 도 4를 참조하면, 이는 복수의 환경 정보의 취득 흐름(400)을 도시한다. 해당 흐름(400)은 하기와 같은 단계를 포함한다.
단계(401)에서, 테스트하고자 하는 적어도 두 개의 환경 파라미터 값을 취득하고, 여기서 환경 파라미터 값은 하드웨어 파라미터 정보의 하드웨어 파라미터 값과 비(非)하드웨어 파라미터 정보의 비(非)하드웨어 파라미터 값을 포함한다.
본 실시예에 있어서, 지속적 통합 테스트 방법이 실행되는 수행주체(예컨대, 도 1에 도시된 서버 또는 단말기기)는 테스트하고자 하는 적어도 두 개의 환경 파라미터 값을 취득할 수 있다. 예를 들어, 하드웨어 파라미터 정보가 자기 디스크 유형을 포함하는 경우, 해당 하드웨어 파라미터 정보의 하드웨어 파라미터 값은 SSD 유형일 수 있다. 비(非)하드웨어 파라미터 정보가 운영 체제를 포함하는 경우, 해당 비(非)하드웨어 파라미터 정보의 비(非)하드웨어 파라미터 값은 CentOS X일 수 있다.
본 실시예에서의 수행주체는 본 개시의 임의 실시예에서의 수행주체일 수 있고, 이 외에, 다른 수행주체일 수도 있다.
단계(402)에서 적어도 두 개의 환경 파라미터 값을 조합하고 획득된 조합 결과에 따라 복수의 환경 정보를 결정한다.
본 실시예에 있어서, 전술한 수행주체는 적어도 두 개의 환경 파라미터 값을 조합함으로써 조합 결과를 획득할 수 있다. 이로써 전술한 수행주체는 획득된 조합 결과에 따라 전술한 복수의 환경 정보를 결정할 수 있다.
실천에 있어서, 전술한 수행주체는 여러 가지 방식을 적용하여, 조합 결과에 따라 전술한 복수의 환경 정보를 결정할 수 있다. 예를 들면, 전술한 수행주체는 조합 결과를 직접 전술한 복수의 환경 정보로 할 수 있다. 이 외에, 전술한 수행주체는 조합 결과에 대해 사전설정 처리를 수행하고 사전설정 처리 결과를 전술한 복수의 환경 정보로 할 수 있다. 여기서의 사전설정 처리는 예컨대 조합 결과 중의 지정 조합 결과를 삭제하는 것일 수 있다.
본 실시예는 조합에 의해 모든 테스트해할 필요가 있는 환경을 획득할 수 있다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보 양자의 적어도 두 개의 환경 파라미터 값은 행렬로 표시되고, 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보 양자의 수량은 행렬의 행 수와 같다.
이러한 선택 가능한 구현방식에 있어서, 적어도 두 개의 환경 파라미터 값은 행렬 형식으로 존재할 수 있다. 각 행렬의 행은 하나의 환경 파라미터에 대응된다. 환경 파라미터는 전술한 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함한다.
예를 들면, 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보는 총 4개인 경우, 즉, 각각 하드웨어 파라미터 정보(MACHINE), 운영 체제(OS), 커널(KERNEL) 및 운영 체제의 소프트웨어 버전(ENV) 인 경우, 행렬은 4행을 구비할 수 있는데, 각각 하기한 바와 같다.
MACHINE: ["Cloud.2c8g", "Bare-metal.gpu"]
OS: ["CentOS 7.3", "CentOS 7.5", "CentOS 8.0", "Ubuntu 20.04"]
KERNEL: ["3.10.0", "4.18.1"]
ENV: ["Docker:18.03", "Docker:19.03"].
본 실시예는 이기종 행렬 형식을 적용하여 이기종 환경 정보를 구성에 필요한 여러 가지 파라미터를 명확히 지시할 수 있는 바, 이로써 환경 정보를 고효율적이고 정확하게 생성할 수 있다.
본 개시의 어느 한 실시예의 일부 선택 가능한 구현방식에 있어서, 전술한 방법은, 복수의 환경 정보에 대해 테스트의 동시 환경 수를 결정하는 단계를 더 포함할 수 있다. 테스트 기기 클러스터로부터 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하는 단계는, 복수의 환경 정보 중의 동시 환경 수만큼의 환경 정보에 대해, 테스트 기기 클러스터로부터 동시 환경 수만큼의 환경 정보의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하는 단계를 포함할 수 있다.
이러한 선택 가능한 구현방식에 있어서, 전술한 수행주체는 동시 환경 수를 결정하고 동시 환경 수를 해당 환경 정보의 수량으로 할 수 있다. 다음, 전술한 수행주체는 테스트 기기를 선택할 수 있고, 해당 테스트 기기는 전술한 동시 환경 수만큼의 환경 정보의 하드웨어 파라미터 정보에 부합된다. 구체적으로, 해당 동시 환경 수는 본 기기 또는 다른 전자 기기로부터 직접 취득될 수도 있고, 사전설정된 규칙에 따라 실시간으로 결정될 수도 있다.
동시 환경 수는 매회 테스트에 적용되는 환경 정보의 수량을 가리킨다. 선택된 테스트 기기의 수량은 전술한 동시 환경 수보다 크거나 같다.
이러한 구현방식은 동시 환경 정보 수를 한정함으로써 기기의 점용 및 테스트의 진행도를 효과적으로 제어한다.
본 개시의 어느 한 실시예의 일부 선택 가능한 구현방식에 있어서, 초기화된 테스트 기기를 이용하여 테스트하고자 하는 스크립트에 대해 테스트를 수행하는 단계 이후, 전술한 방법은, 복수의 환경 정보에 채용하지 않는 환경 정보가 존재하는 것에 응답하여 복수의 환경 정보 중의 테스트하지 않는 다른 환경 정보에 대하여 단계(202) 내지 단계(204)를 순차로 수행하여 전술한 다른 환경 정보에 대응되는 테스트 결과를 획득하는 단계를 더 포함할 수 있다.
이러한 선택 가능한 구현방식에 있어서, 전술한 수행주체는 전술한 적어도 하나의 환경 정보에 대해 테스트를 수행한 후, 다른 환경 정보에 대하여 나아간 테스트를 수행할 수 있다. 이로써 테스트에 필요한 복수의 환경 정보에 대해 완전한 테스트를 수행할 수 있다. 즉, 전술한 수행주체는 복수의 환경 정보 중의 모든 환경 정보가 다 채용될 때까지 테스트 단계를 반복할 수 있다.
전술한 수행주체는 복수의 환경 정보에 대한 전체 테스트 과정이 완료된 후, 모든 테스트 결과를 통합하여 최종 테스트 보고서를 생성하고 연구개발자의 단말기기에 피드백할 수 있다.
실천에 있어서, 전술한 순차로 수행하는 것은 복수의 환경 정보 중의 환경 정보에 대해 직렬 테스트 단계나 또는 병렬 테스트 단계를 수행하는 것을 가리킬 수 있다.
이러한 구현방식은 복수의 환경 정보에 대한 전면적인 검출을 구현할 수 있다. 본 개시의 어느 한 실시예의 일부 선택 가능한 구현방식에 있어서, 전술한 초기화된 테스트 기기를 이용하여 테스트하고자 하는 스크립트에 대해 테스트를 수행하는 단계 이후, 전술한 방법은 이미 채용된 환경 정보 중에서 마지막으로 채용된 환경 정보에 대한 테스트가 완료되는 것에 응답하여 선택된 테스트 기기의 상태 표시를 비선택 상태로 수정하는 단계를 더 포함할 수 있다.
이러한 선택 가능한 구현방식에 있어서, 전술한 수행주체는 마지막으로 채용된 환경 정보(예컨대, 전술한 적어도 하나의 환경 정보)에 대한 테스트가 완료된 경우에 테스트 기기를 회수할 수 있다. 구체적으로, 전술한 수행주체는 선택된 테스트 기기의 상태 표시를 비선택 상태로 수정할 수 있는 바, 이로써, 이러한 기기는 사용가능 상태에 있게 되고 후속의 테스트에 계속하여 참여할 수 있게 된다. 테스트 과정에서, 전술한 테스트 기기는 선택 상태, 즉, 사용불가 상태로 표시될 수 있다. 여기서 선택된 테스트 기기는 마지막 테스트에서 선택된 테스트 기기이다. 실천에 있어서, 매회 테스트 완료 후마다 전술한 수행주체는 해당 구현방식에서의 기술 방안을 적용할 수 있다.
이러한 구현방식은 적시에 테스트 기기를 회수할 수 있는 바, 이로써 기기에 대한 과도한 점용을 줄일 수 있다.
본 개시의 어느 한 실시예의 일부 선택 가능한 구현방식에 있어서, 전술한 초기화된 테스트 기기를 이용하여 테스트하고자 하는 스크립트에 대해 테스트를 수행하는 단계는, 선택된 테스트 기기의 로그인 조건 정보를 결정하되, 로그인 조건 정보는 IP주소를 포함하는 단계-; 및 로그인 조건 정보와 초기화된 테스트 기기에 의해 테스트하고자 하는 스크립트에 대해 테스트를 수행하는 단계를 포함할 수 있다.
이러한 선택 가능한 구현방식에 있어서, 전술한 수행주체는 테스트 기기를 이용하기 전에, 우선 테스트 기기의 로그인 조건 정보를 결정할 수 있다. 실천에 있어서, 해당 로그인 조건 정보가 있는 경우에만 전술한 수행주체는 테스트 기기를 이용하여 테스트를 수행할 수 있다. 해당 로그인 조건 정보는 다양할 수 있는 바, 예를 들면, IP주소를 포함할 수 있고, 이 외에, 로그인 비밀번호, 기계실 위치 등을 더 포함할 수 있다.
이러한 구현방식은 로그인 조건 정보에 의해 테스트 기기를 이용하여 순조롭게 테스트를 수행하도록 확보할 수 있다.
도 5에 도시된 바와 같이, 본 출원은 지속적 통합 테스트 시스템(500)을 더 제공하는 바, 해당 시스템은 서버 측에 사용되고, 해당 시스템은 지속적 통합 서버(510) 및 자원 관리 서버(520)를 포함한다.
상기 지속적 통합 서버는 테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하고 상기 자원 관리 서버에 상기 복수의 환경 정보를 포함하는 테스트 신청을 송신하되, 환경 정보는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함하도록 구성된다. 상기 자원 관리 서버는 상기 테스트 신청을 수신하는 것에 응답하여 테스트 기기 클러스터로부터 상기 환경 정보의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하고, 상기 환경 정보의 비(非)하드웨어 파라미터 정보에 따라 선택된 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득하도록 구성된다. 상기 지속적 통합 서버는 상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 상기 환경 정보에 대응되는 테스트 결과를 생성도록 더 구성된다.
본 실시예는 하드웨어 파라미터 정보에 따라 테스트 기기를 선택하고 기기를 초기화하고 기기가 테스트 환경에 부합되도록 할 수 있는 바, 이로써 종래 기술에서 대량의 서로 다른 테스트 환경의 기기를 준비해야 함으로 인해 초래되는 고 테스트 비용 문제를 회피하고 테스트 과정 중 기기에 대한 점용을 효과적으로 줄이고, 나아가 테스트 비용을 저감한다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 시스템은 코드 웨어하우스 서버(530)를 더 포함하고(선택적으로), 코드 웨어하우스 서버는 테스트하고자 하는 스크립트를 구축하기 위한 구축 코드를 수신하는 것에 응답하여 지속적 통합 서버에 구축 트리거링 정보를 송신하도록 구성되고, 여기서 구축 트리거링 정보는 구축 코드를 포함한다. 지속적 통합 서버는 구축 트리거링 정보를 수신하는 것에 응답하여 구축 코드에 따라 테스트하고자 하는 스크립트를 구축하도록 더 구성된다.
이러한 선택 가능한 구현방식에 있어서, 시스템은 코드 웨어하우스 서버를 더 포함할 수 있고, 해당 서버는 연구개발자가 제출한 구축 코드를 수신하고 지속적 통합 서버를 트리거링하여 테스트하고자 하는 스크립트를 구축하는 것을 구현할 수 있다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 지속적 통합 서버는 복수의 환경 정보에 대해 테스트의 동시 환경 수를 결정하도록 더 구성되고, 자원 관리 서버는 복수의 환경 정보 중의 동시 환경 수만큼의 환경 정보에 대해, 테스트 기기 클러스터로부터 동시 환경 수만큼의 환경 정보의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하도록 더 구성된다.
이러한 구현방식은 동시 환경 정보 수를 한정함으로써 기기의 점용 및 테스트 진행도를 효과적으로 제어한다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 지속적 통합 서버는 이미 채용된 환경 정보 중에서 마지막으로 채용된 환경 정보의 테스트가 완료되는 것에 응답하여 자원 관리 서버에 테스트 완료 정보를 송신하도록 더 구성되고, 자원 관리 서버는 테스트 완료 정보를 수신하는 것에 응답하여 선택된 테스트 기기의 상태 표시를 비선택 상태로 수정하도록 더 구성된다.
이러한 구현방식은 적시에 테스트 기기를 회수할 수 있는 바, 이로써 기기에 대한 과도 점용을 회피할 수 있다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 복수의 환경 정보를 취득하는 단계는 테스트하고자 하는 적어도 두 개의 환경 파라미터 값을 취득하되, 환경 파라미터 값은 하드웨어 파라미터 정보의 하드웨어 파라미터 값과 비(非)하드웨어 파라미터 정보의 비(非)하드웨어 파라미터 값을 포함하는 단계; 및 적어도 두 개의 환경 파라미터 값을 조합하고 획득된 조합 결과에 따라 복수의 환경 정보를 결정하는 단계를 포함한다.
선택적으로, 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보 양자의 적어도 두 개의 환경 파라미터 값은 행렬로 표시되고, 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보 양자의 수량은 행렬의 행 수와 같다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 지속적 통합 서버는 선택된 테스트 기기의 로그인 조건 정보를 결정하되, 로그인 조건 정보는 IP주소를 포함하도록 더 구성되고, 로그인 조건 정보와 초기화된 테스트 기기에 의해 테스트하고자 하는 스크립트에 대해 테스트를 수행하도록 더 구성된다.
나아가 도 6을 참조하면, 전술한 각 도면에 도시된 방법에 대한 구현으로, 본 개시는 지속적 통합 테스트 장치의 일 실시예를 제공하는 바, 해당 장치 실시예는 도 2에 도시된 방법 실시예와 서로 대응되고, 해당 장치 실시예는 하기 특징 외에 도 2에 도시된 방법 실시예와 같거나 또는 상응한 특징 또는 효과를 포함할 수 있다. 해당 장치는 구체적으로 여러 가지 전자 기기에 응용될 수 있다.
도 6에 도시된 바와 같이, 본 실시예의 지속적 통합 테스트 장치(600)는 취득 유닛(601), 선택 유닛(602), 초기화 유닛(603) 및 테스트 유닛(604)을 포함한다. 여기서 취득 유닛(601)은 테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하되, 환경 정보는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함하도록 구성되고, 선택 유닛(602)은 테스트 기기 클러스터로부터 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하도록 구성되고, 초기화 유닛(603)은 환경 정보 중의 비(非)하드웨어 파라미터 정보에 따라 해당 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득하도록 구성되고, 테스트 유닛(604)은 초기화된 테스트 기기를 이용하여 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 환경 정보에 대응되는 테스트 결과를 생성하도록 구성된다.
본 실시예에 있어서, 지속적 통합 테스트 장치(600)의 취득 유닛(601), 선택 유닛(602), 초기화 유닛(603) 및 테스트 유닛(604)의 구체적인 처리 및 이에 따른 기술 효과는 각각 도 2의 대응 실시예에서의 단계(201), 단계(202), 단계(203) 및 단계(204)의 관련 설명을 참조할 수 있는 바, 이에 대한 상세한 설명은 생략하기로 한다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 복수의 환경 정보를 취득하는 단계는 테스트하고자 하는 적어도 두 개의 환경 파라미터 값을 취득하되, 환경 파라미터 값은 하드웨어 파라미터 정보의 하드웨어 파라미터 값과 비(非)하드웨어 파라미터 정보의 비(非)하드웨어 파라미터 값을 포함하는 단계; 및 적어도 두 개의 환경 파라미터 값을 조합하고 획득된 조합 결과에 따라 복수의 환경 정보를 결정하는 단계를 포함한다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보 양자의 적어도 두 개의 환경 파라미터 값은 행렬로 표시되고, 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보 양자의 수량은 행렬의 행 수와 같다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 장치는 복수의 환경 정보에 대해 테스트의 동시 환경 수를 결정하도록 구성된 결정 유닛을 더 포함한다. 선택 유닛은, 복수의 환경 정보 중의 동시 환경 수만큼의 환경 정보에 대해, 테스트 기기 클러스터로부터 동시 환경 수만큼의 환경 정보의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하는 방식에 따라, 테스트 기기 클러스터로부터 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하도록 더 구성된다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 장치는 초기화된 테스트 기기를 이용하여 테스트하고자 하는 스크립트에 대해 테스트를 수행한 후, 이미 채용된 환경 정보 중에서 마지막으로 채용된 환경 정보에 대한 테스트가 완료되는 것에 응답하여 선택된 테스트 기기의 상태 표시를 비선택 상태로 수정하도록 구성된 수정 유닛을 더 포함한다.
본 실시예의 일부 선택 가능한 구현방식에 있어서, 테스트 유닛은 선택된 테스트 기기의 로그인 조건 정보를 결정하되, 로그인 조건 정보는 IP주소를 포함-하고, 로그인 조건 정보와 초기화된 테스트 기기에 의해 테스트하고자 하는 스크립트에 대해 테스트를 수행하는 방식에 따라, 초기화된 테스트 기기를 이용하여 테스트하고자 하는 스크립트에 대해 테스트를 수행하도록 더 구성된다.
본 개시의 실시예에 따르면, 본 개시는 전자 기기, 판독가능 저장매체 및 매체에 저장된 컴퓨터 프로그램을 더 제공한다. 도 7에 도시된 바와 같이, 본 개시의 실시예에 따른 지속적 통합 테스트 방법을 수행하는 전자 기기의 블록도이다. 전자 기기는 여러 가지 형식의 디지털 컴퓨터, 예를 들어 랩톱 컴퓨터, 데스크톱 컴퓨터, 워크벤치, 개인용 디지털 보조기, 서버, 블레이드 서버, 대형 컴퓨터 및 다른 적합한 컴퓨터를 가리키고자 하는 것이다. 전자 기기는 여러 가지 형식의 이동 장치, 예를 들어 개인용 디지털 보조기, 셀룰러 폰, 스마트폰, 웨어러블 기기 및 이와 유사한 다른 컴퓨팅 기기를 가리킬 수도 있다. 본 명세서에서 제시하는 부품, 이들의 연결과 관계 및 이들의 기능은 단지 예시일 뿐, 본 명세서에서 설명한 및/또는 요구하는 본 개시의 구현을 한정하고자 하는 것이 아니다.
도 7에 도시된 바와 같이, 해당 전자 기기는 하나 또는 복수의 프로세서(701), 메모리(702) 및 각 부품을 연결하는 인터페이스(고속 인터페이스와 저속 인터페이스를 포함함)를 포함한다. 각 부품은 서로 다른 버스를 이용하여 서로 연결되고, 공용 메인보드에 설치되거나 또는 수요에 따라 다른 방식으로 설치될 수 있다. 프로세서는 전자 기기 내에서 실행되는 명령어를 처리할 수 있는 바, 메모리에 저장되어 외부 입력/출력 장치(예컨대, 인터페이스에 커플링되는 표시 기기)에 GUI의 그래픽 정보를 표시하는 명령어가 포함된다. 다른 실시방식에 있어서, 필요하다면 복수의 프로세서 및/또는 복수의 버스를 복수의 메모리와 함께 사용할 수 있다. 마찬가지로, 복수의 전자 기기를 연결할 수 있는 바, 각 기기는 필요한 일부 조작을 제공한다(예컨대, 서버 어레이, 한 그룹의 블레이드 서버, 또는 멀티 프로세서 시스템으로서). 도 7은 하나의 프로세서(701)를 예시한다.
메모리(702)는 바로 본 개시에 의해 제공되는 비일시적 컴퓨터 판독가능 저장매체이다. 여기서, 메모리에는 적어도 하나의 프로세서에 의해 실행가능한 명령어가 저장되어 있고, 적어도 하나의 프로세서가 본 개시에 의해 제공되는 지속적 통합 테스트 방법을 수행하도록 한다. 본 개시의 비일시적 컴퓨터 판독가능 저장매체는 컴퓨터 명령어를 저장하고, 해당 컴퓨터 명령어는 컴퓨터가 본 개시에 의해 제공되는 지속적 통합 테스트 방법을 수행하도록 한다.
메모리(702)는 비일시적 컴퓨터 판독가능 저장매체로서, 비일시적 소프트웨어 프로그램, 비일시적 컴퓨터 실행가능 프로그램 및 모듈, 예컨대, 본 개시의 실시예에서의 지속적 통합 테스트 방법에 대응되는 프로그램 명령어/모듈(예컨대, 도 6에 도시된 취득 유닛(601), 선택 유닛(602), 초기화 유닛(603) 및 테스트 유닛(604))을 저장할 수 있다. 프로세서(701)는 메모리(702)에 저장되어 있는 비일시적 소프트웨어 프로그램, 명령어 및 모듈을 실행함으로써 서버의 여러 가지 기능 애플리케이션 및 데이터 처리를 실행하는 바, 즉 전술한 방법 실시예에서의 지속적 통합 테스트 방법을 구현한다.
메모리(702)는 프로그램 저장 영역과 데이터 저장 영역을 포함할 수 있는 바, 여기서 프로그램 저장 영역은 운영 체제, 적어도 하나의 기능에 필요한 애플리케이션 프로그램을 저장할 수 있고, 데이터 저장 영역은 지속적 통합 테스트의 전자 기기의 사용에 따라 생성된 데이터 등을 저장할 수 있다. 이 외에, 메모리(702)는 고속 랜덤 액세스 메모리를 포함할 수도 있고, 비일시적 메모리를 포함할 수도 있는 바, 예를 들면, 적어도 하나의 자기 디스크 메모리 디바이스, 플래시 메모리 디바이스, 또는 다른 비일시적 고체 저장 디바이스가 있다. 일부 실시예에 있어서, 메모리(702)는 선택적으로 프로세서(701) 대비 원격 설치되는 메모리를 포함하는 바, 이러한 원격 메모리는 네트워크를 통해 지속적 통합 테스트를 수행하는 전자 기기에 연결될 수 있다. 전술한 네트워크의 실제 예는 인터넷, 기업 인트라넷, 근거리 통신망, 이동통신망 및 이들의 조합을 포함하나, 이에 한정되지 않는다.
지속적 통합 테스트 방법을 수행하는 전자 기기는 입력 장치(703)와 출력 장치(704)를 더 포함할 수 있다. 프로세서(701), 메모리(702), 입력 장치(703) 및 출력 장치(704)는 버스 또는 다른 방식으로 연결될 수 있는 바, 도 7에서는 버스에 의한 연결을 예시한다.
입력 장치(703)는 입력된 숫자 또는 문자(character) 정보를 수신할 수 있고 지속적 통합 테스트를 수행하는 전자 기기의 사용자 설정 및 기능 제어에 관련되는 키 신호 입력을 발생할 수 있는 바, 예를 들면, 터치 스크린, 넘버패드, 마우스, 트랙패드, 터치패드, 포인팅 스틱, 하나의 또는 복수의 마우스 버튼, 트랙볼, 조이스틱 등의 입력 장치가 있다. 출력 장치(704)는 표시 기기, 보조 조명장치(예를 들어, LED) 및 촉각 피드백 장치(예를 들어, 진동 모터) 등을 포함할 수 있다. 당해 표시 기기는 액정 디스플레이(LCD), 발광 다이오드(LED) 디스플레이 및 플라즈마 디스플레이를 포함할 수 있으나, 이에 한정되지 않는다. 일부 실시방식에 있어서, 표시 기기는 터치 스크린일 수 있다.
여기서 기술하는 시스템과 기술의 다양한 실시 방식은 디지털 전자회로 시스템, 집적회로 시스템, 주문형ASIC(주문형 집적회로), 컴퓨터 하드웨어, 펌웨어, 소프트웨어 및/또는 이들의 조합에서 구현될 수 있다. 이러한 여러 가지 실시방식은 하나 또는 복수의 컴퓨터 프로그램에서 실시되는 것을 포함할 수 있는 바, 해당 하나 또는 복수의 컴퓨터 프로그램은 적어도 하나의 프로그램가능 프로세서를 포함하는 프로그램가능 시스템에서 실행 및/또는 해석될 수 있고, 해당 프로그램가능 프로세서는 전용의 또는 범용의 프로그램가능 프로세서일 수 있고, 저장 시스템, 적어도 하나의 입력 장치 및 적어도 하나의 출력 장치로부터 데이터와 명령어를 수신하고, 데이터와 명령어를 해당 저장 시스템, 해당 적어도 하나의 입력 장치 및 해당 적어도 하나의 출력 장치로 전송할 수 있다.
이러한 컴퓨팅 프로그램(프로그램, 소프트웨어, 소프트웨어 애플리케이션 또는 코드로 지칭되기도 함)은 프로그램가능 프로세서의 기계 명령어를 포함하며, 고급 절차 프로그래밍 언어 및/또는 객체지향 프로그래밍 언어, 및/또는 어셈블리어/기계어를 이용하여 이러한 컴퓨팅 프로그램을 실시할 수 있다. 본 명세서에서 사용한 바와 같이, 용어 '기계 판독가능 매체'와 '컴퓨터 판독가능 매체'는 기계 명령어 및/또는 데이터를 프로그램가능 프로세서에 제공하기 위한 임의의 매체에 저장된 컴퓨터 프로그램, 기기, 및/또는 장치(예를 들면, 자기 디스크, 광 디스크, 메모리, 프로그램가능 논리 장치(PLD))를 가리키는 바, 이는 기계 판독가능 신호로서의 기계 명령어를 수신하는 기계 판독가능 저장 매체를 포함한다. 용어 '기계 판독가능 신호'는 기계 명령어 및/또는 데이터를 프로그램 가능 프로세서에 제공하기 위한 임의의 신호를 가리킨다.
사용자와의 인터랙션을 제공하기 위해, 여기서 설명하는 시스템과 기술을 컴퓨터에서 실시할 수 있는 바, 해당 컴퓨터는 사용자한테 정보를 표시하기 위한 표시 장치(예를 들어, CRT(음극선관) 또는 LCD (액정 디스플레이) 모니터) 및 키보드와 포인팅 장치(예를 들어, 마우스 또는 트랙볼)를 포함하고, 사용자는 해당 키보드와 해당 포인팅 장치를 통해 입력을 컴퓨터에 제공할 수 있다. 다른 종류의 장치도 사용자와의 인터랙션을 제공하는 데 사용될 수 있는 바, 예를 들어, 사용자한테 제공되는 피드백은 임의 형식의 감각 피드백(예를 들어, 시각 피드백, 청각 피드백 또는 촉각 피드백)일 수 있고, 임의 형식(사운드 입력, 음성 입력 또는 촉각 입력을 포함함)으로 사용자로부터의 입력을 수신할 수 있다.
여기서 기술하는 시스템과 기술은 백그라운드 부품을 포함하는 컴퓨팅 시스템(예를 들면, 데이터 서버로서), 미들웨어 부품을 포함하는 컴퓨팅 시스템(예를 들면, 애플리케이션 서버), 프런트 엔드 부품을 포함하는 컴퓨팅 시스템(예를 들면, 그래픽 사용자 인터페이스 또는 네트워크 브라우저를 구비하는 사용자 컴퓨터일 수 있는 바, 사용자는 해당 그래픽 사용자 인터페이스 또는 해당 네트워크 브라우저를 통하여 여기서 기술하는 시스템 및 기술의 구현 방식과 인터랙션할 수 있음) 또는 이러한 백그라운드 부품, 미들웨어 부품 또는 프런트 엔드 부품의 임의 조합을 포함하는 컴퓨팅 시스템에서 구현될 수 있다. 임의 형식 또는 매체의 디지털 데이터 통신(예를 들면, 통신 네트워크)으로 시스템의 부품을 서로 연결시킬 수 있다. 통신 네트워크의 예시는 근거리 통신망(LAN), 광대역 통신망(WAN) 및 인터넷을 포함한다.
컴퓨터 시스템은 클라이언트와 서버를 포함할 수 있다. 클라이언트와 서버는 일반적으로 서로 멀리 떨어져 있고 통상적으로는 통신 네트워크를 통해 인터랙션한다. 상응한 컴퓨터에서 실행되고 서로 클라이언트-서버 관계를 가지는 컴퓨터 프로그램을 통해 클라이언트와 서버의 관계가 발생된다. 서버는 클라우드 서버일 수 있는 바, 클라우드 컴퓨팅 서버 또는 클라우드 호스팅으로 불리기도 하고, 클라우드 컴퓨팅 서비스 체계에 있어서의 호스팅 제품으로, 전통적인 물리 호스팅과 가상 사설 서버("Virtual Private Server" 또는 "VPS"로 약칭됨) 서비스에 존재하는 관리 난이도가 크고 업무 확장성이 약한 단점을 해결한다. 서버는 분산 시스템의 서버 또는 블록체인이 결합된 서버일 수도 있다.
첨부도면에서 흐름도와 블록도는 본 개시의 여러 가지 실시예에 따른 시스템, 방법 및 매체에 저장된 컴퓨터 프로그램의 실현될 수 있는 시스템 아키텍처, 기능 및 조작을 도시한다. 이러한 점에 있어서, 흐름도 또는 블록도에서의 각 블록은 하나의 모듈, 프로그램 세그먼트 또는 코드의 일부분을 대표할 수 있고, 해당 모듈, 프로그램 세그먼트 또는 코드의 일부분은 규정한 논리 기능을 구현하는 하나 또는 복수의 실행가능한 명령어를 포함한다. 일부 대안적인 구현에 있어서, 블록에서 표기한 기능은 첨부도면에 표시한 순서와는 다른 순서로 발생할 수도 있다는 점 또한 유의하여야 한다. 예를 들면, 두 개의 연속되게 표시한 블록은 실제로는 기본적으로 병행되게 수행될 수 있고 이들은 어떤 경우에는 반대되는 순서로 수행될 수도 있는 바, 이는 관련되는 기능에 의해 결정된다. 블록도 및/또는 흐름도에서의 각 블록 및 블록도 및/또는 흐름도에서의 블록의 조합은 규정된 기능이나 조작을 수행하는 전용의 하드웨어 기반 시스템에 의해 구현되거나 또는 전용 하드웨어와 컴퓨터 명령어의 조합에 의해 구현될 수 있다는 점 또한 유의하여야 한다.
본 개시의 실시예에서 기술하는 유닛은 소프트웨어 방식으로 구현될 수도 있고 하드웨어 방식으로 구현될 수도 있다. 기술되는 유닛은 프로세서에 설치될 수도 있는 바, 예를 들면, 취득 유닛, 선택 유닛, 초기화 유닛 및 테스트 유닛을 포함하는 프로세서로 기술될 수 있다. 여기서, 이러한 유닛의 명칭은 어떠한 상황에서도 해당 유닛 자체를 한정하지 않는 바, 예를 들면, 취득 유닛은 "테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하는 유닛"으로 기술할 수도 있다.
다른 방면으로, 본 개시는 컴퓨터 판독가능 매체를 더 제공하는 바, 해당 컴퓨터 판독가능 매체는 전술한 실시예에서 기술하는 장치에 포함될 수도 있고, 해당 장치에 장비되지 않고 독립적으로 존재할 수도 있다. 전술한 컴퓨터 판독가능 매체는 하나의 또는 복수의 프로그램을 탑재하고, 전술한 하나의 또는 복수의 프로그램은 해당 장치에 의해 실행되는 경우, 해당 장치가, 테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하되, 환경 정보는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함하는 단계; 테스트 기기 클러스터로부터 상기 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하는 단계; 상기 환경 정보 중의 비(非)하드웨어 파라미터 정보에 따라 해당 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득하는 단계; 및 상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 상기 환경 정보에 대응되는 테스트 결과를 생성하는 단계를 수행하도록 한다.
전술한 바로는 단지 본 개시의 바람직한 실시예 및 운용한 기술 원리에 대한 설명일 뿐이다. 당업자라면 본 개시에 따른 발명의 범위는 전술한 기술 특징의 특정 조합으로 이루어지는 기술 방안에 한정되는 것이 아니며, 전술한 발명 사상을 벗어나지 않으면서 전술한 기술 특징 또는 그 균등한 특징을 임의로 조합하여 이루어지는 다른 기술 방안도 동시에 포함한다는 것을 이해하여야 한다. 예를 들면, 전술한 특징을 본 개시에서 공개하는(그러나 이에 한정되지 않음), 유사한 기능을 가지는 기술 특징과 서로 치환하여 형성하는 기술 방안이 있다.
Claims (19)
- 서버 측에 사용되는 지속적 통합 테스트 방법으로서,
테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하되, 환경 정보는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함하는 단계;
테스트 기기 클러스터로부터 상기 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하는 단계;
상기 환경 정보 중의 비(非)하드웨어 파라미터 정보에 따라 해당 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득하는 단계; 및
상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 상기 환경 정보에 대응되는 테스트 결과를 생성하는 단계
를 포함하는, 지속적 통합 테스트 방법. - 제1항에 있어서,
상기 복수의 환경 정보를 취득하는 단계는,
테스트하고자 하는 적어도 두 개의 환경 파라미터 값을 취득하되, 상기 환경 파라미터 값은 하드웨어 파라미터 정보의 하드웨어 파라미터 값과 비(非)하드웨어 파라미터 정보의 비(非)하드웨어 파라미터 값을 포함하는 단계; 및
상기 적어도 두 개의 환경 파라미터 값을 조합하고 획득된 조합 결과에 따라 상기 복수의 환경 정보를 결정하는 단계
를 포함하는, 지속적 통합 테스트 방법. - 제2항에 있어서,
상기 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보 양자의 적어도 두 개의 환경 파라미터 값은 행렬로 표시되고, 상기 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보 양자의 수량은 상기 행렬의 행 수와 같은 지속적 통합 테스트 방법. - 제1항에 있어서,
상기 방법은 상기 복수의 환경 정보에 대해 테스트의 동시 환경 수를 결정하는 단계를 더 포함하고,
상기 테스트 기기 클러스터로부터 상기 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하는 단계는,
상기 복수의 환경 정보 중의 동시 환경 수만큼의 환경 정보에 대해, 테스트 기기 클러스터로부터 상기 동시 환경 수만큼의 환경 정보의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하는 단계를 포함하는, 지속적 통합 테스트 방법. - 제1항 내지 제4항 중 어느 한 항에 있어서,
상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하는 단계 이후, 상기 방법은,
이미 채용된 환경 정보 중에서 마지막으로 채용된 환경 정보에 대한 테스트가 완료되는 것에 응답하여 선택된 테스트 기기의 상태 표시를 비선택 상태로 수정하는 단계를 더 포함하는, 지속적 통합 테스트 방법. - 제1항 내지 제4항 중 어느 한 항에 있어서,
상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하는 단계는,
선택된 테스트 기기의 로그인 조건 정보를 결정하되, 상기 로그인 조건 정보는 IP주소를 포함하는 단계; 및
상기 로그인 조건 정보와 상기 초기화된 테스트 기기에 의해 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하는 단계
를 포함하는, 지속적 통합 테스트 방법. - 서버 측에 사용되는 지속적 통합 테스트 시스템으로서,
지속적 통합 서버 및 자원 관리 서버를 포함하되,
상기 지속적 통합 서버는 테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하고 상기 자원 관리 서버에 상기 복수의 환경 정보를 포함하는 테스트 신청을 송신하되, 상기 환경 정보는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함하도록 구성되고,
상기 자원 관리 서버는 상기 테스트 신청을 수신하는 것에 응답하여 테스트 기기 클러스터로부터 상기 환경 정보의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하고, 상기 환경 정보의 비(非)하드웨어 파라미터 정보에 따라 선택된 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득하도록 구성되고,
상기 지속적 통합 서버는 상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 상기 환경 정보에 대응되는 테스트 결과를 생성하도록 더 구성되는, 지속적 통합 테스트 시스템. - 제7항에 있어서,
상기 시스템은 코드 웨어하우스 서버를 더 포함하되,
상기 코드 웨어하우스 서버는 상기 테스트하고자 하는 스크립트를 구축하기 위한 구축 코드를 수신하는 것에 응답하여 상기 지속적 통합 서버에 구축 트리거링 정보를 송신하되 상기 구축 트리거링 정보는 상기 구축 코드를 포함하도록 구성되고,
상기 지속적 통합 서버는 상기 구축 트리거링 정보를 수신하는 것에 응답하여 상기 구축 코드에 따라 상기 테스트하고자 하는 스크립트를 구축하도록 더 구성되는, 지속적 통합 테스트 시스템. - 제7항 또는 제8항에 있어서,
상기 지속적 통합 서버는 상기 복수의 환경 정보에 대해 테스트의 동시 환경 수를 결정하도록 더 구성되고,
상기 자원 관리 서버는 상기 복수의 환경 정보 중의 동시 환경 수만큼의 환경 정보에 대해, 테스트 기기 클러스터로부터 상기 동시 환경 수만큼의 환경 정보의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하도록 더 구성되는, 지속적 통합 테스트 시스템. - 제7항 또는 제8항에 있어서,
상기 지속적 통합 서버는 이미 채용된 환경 정보 중에서 마지막으로 채용된 환경 정보의 테스트가 완료되는 것에 응답하여 상기 자원 관리 서버에 테스트 완료 정보를 송신하도록 더 구성되고,
상기 자원 관리 서버는 테스트 완료 정보를 수신하는 것에 응답하여 선택된 테스트 기기의 상태 표시를 비선택 상태로 수정하도록 더 구성되는, 지속적 통합 테스트 시스템. - 서버 측에 사용되는 지속적 통합 테스트 장치로서,
테스트하고자 하는 스크립트를 취득하고 테스트에 필요한 복수의 환경 정보를 취득하되, 상기 환경 정보는 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보를 포함하도록 구성된 취득 유닛;
테스트 기기 클러스터로부터 상기 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하도록 구성된 선택 유닛;
상기 환경 정보 중의 비(非)하드웨어 파라미터 정보에 따라 해당 테스트 기기를 초기화하여 초기화된 테스트 기기를 획득하도록 구성된 초기화 유닛; 및
상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하여 상기 환경 정보에 대응되는 테스트 결과를 생성하도록 구성된 테스트 유닛
을 포함하는, 지속적 통합 테스트 장치. - 제11항에 있어서,
상기 복수의 환경 정보를 취득하는 것은,
테스트하고자 하는 적어도 두 개의 환경 파라미터 값을 취득하되, 상기 환경 파라미터 값은 하드웨어 파라미터 정보의 하드웨어 파라미터 값과 비(非)하드웨어 파라미터 정보의 비(非)하드웨어 파라미터 값을 포함하는 것; 및
상기 적어도 두 개의 환경 파라미터 값을 조합하고 획득된 조합 결과에 따라 상기 복수의 환경 정보를 결정하는 것
을 포함하는, 지속적 통합 테스트 장치. - 제12항에 있어서,
상기 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보 양자의 적어도 두 개의 환경 파라미터 값은 행렬로 표시되고, 상기 하드웨어 파라미터 정보와 비(非)하드웨어 파라미터 정보 양자의 수량은 상기 행렬의 행 수와 같은 지속적 통합 테스트 장치. - 제11항에 있어서,
상기 장치는 상기 복수의 환경 정보에 대해 테스트의 동시 환경 수를 결정하도록 구성된 결정 유닛을 더 포함하고,
상기 선택 유닛은, 상기 복수의 환경 정보 중의 동시 환경 수만큼의 환경 정보에 대해 테스트 기기 클러스터로부터 상기 동시 환경 수만큼의 환경 정보의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하는 방식에 따라, 상기 테스트 기기 클러스터로부터 상기 환경 정보 중의 하드웨어 파라미터 정보에 부합되는 테스트 기기를 선택하도록 더 구성되는, 지속적 통합 테스트 장치. - 제11항 내지 제14항 중 어느 한 항에 있어서,
상기 장치는 상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행한 후, 이미 채용된 환경 정보 중에서 마지막으로 채용된 환경 정보에 대한 테스트가 완료되는 것에 응답하여 선택된 테스트 기기의 상태 표시를 비선택 상태로 수정하도록 구성된 수정 유닛을 더 포함하는, 지속적 통합 테스트 장치. - 제11항 내지 제14항 중 어느 한 항에 있어서,
상기 테스트 유닛은,
선택된 테스트 기기의 로그인 조건 정보를 결정하되, 상기 로그인 조건 정보는 IP주소를 포함하고;
상기 로그인 조건 정보와 상기 초기화된 테스트 기기에 의해 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하는 방식에 따라,
상기 초기화된 테스트 기기를 이용하여 상기 테스트하고자 하는 스크립트에 대해 테스트를 수행하도록 더 구성되는, 지속적 통합 테스트 장치. - 전자 기기로서서,
적어도 하나의 프로세서; 및
상기 적어도 하나의 프로세서에 통신적으로 연결되는 메모리를 포함하되,
상기 메모리에는 상기 적어도 하나의 프로세서에 의해 실행가능한 명령어가 저장되어 있고 상기 명령어는 상기 적어도 하나의 프로세서에 의해 실행됨으로써 상기 적어도 하나의 프로세서가 제1항 내지 제6항 중 어느 한 항의 방법을 수행하도록 하는, 전자 기기. - 컴퓨터 명령어가 저장되어 있는 비일시적 컴퓨터 판독가능 저장매체로서,
상기 컴퓨터 명령어는 상기 컴퓨터가 제1항 내지 제6항 중 어느 한 항의 방법을 수행하도록 하는, 비일시적 컴퓨터 판독가능 저장매체. - 매체에 저장된 컴퓨터 프로그램으로서,
상기 컴퓨터 프로그램은 프로세서에 의해 실행되는 경우, 제1항 내지 제6항 중 어느 한 항의 방법을 구현하는, 매체에 저장된 컴퓨터 프로그램.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110528919.8 | 2021-05-14 | ||
| CN202110528919.8A CN113238943A (zh) | 2021-05-14 | 2021-05-14 | 持续集成测试的方法和装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20220013947A true KR20220013947A (ko) | 2022-02-04 |
Family
ID=77134418
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020220006506A KR20220013947A (ko) | 2021-05-14 | 2022-01-17 | 지속적 통합 테스트 방법 및 장치 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US20220138093A1 (ko) |
| EP (1) | EP4075283A1 (ko) |
| JP (1) | JP7387773B2 (ko) |
| KR (1) | KR20220013947A (ko) |
| CN (1) | CN113238943A (ko) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115373927B (zh) * | 2022-10-25 | 2023-04-21 | 深圳市亿联无限科技股份有限公司 | 产品测试方法、装置、电子设备和计算机可读介质 |
| CN116881064B (zh) * | 2023-09-06 | 2023-12-15 | Tcl通讯科技（成都）有限公司 | 终端测试方法、装置、设备和存储介质 |
| CN117149665B (zh) * | 2023-10-31 | 2024-02-20 | 芯瞳半导体技术(山东)有限公司 | 持续集成方法、控制设备、持续集成系统及存储介质 |
| CN117555626A (zh) * | 2023-11-29 | 2024-02-13 | 沐曦集成电路(上海)有限公司 | 基于Jenkins的硬件测试方法、电子设备和介质 |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0793187A (ja) * | 1993-09-27 | 1995-04-07 | Matsushita Electric Ind Co Ltd | 自動テスト方法および自動テスト装置 |
| JP2005107803A (ja) | 2003-09-30 | 2005-04-21 | Hitachi Ltd | システム更新方法、および、それを実行するための計算機システム |
| US7337431B1 (en) * | 2003-12-23 | 2008-02-26 | Sprint Communications Company L.P. | Distributed large-scale application benchmark system |
| US8166458B2 (en) | 2005-11-07 | 2012-04-24 | Red Hat, Inc. | Method and system for automated distributed software testing |
| US8433953B1 (en) * | 2007-08-13 | 2013-04-30 | The Mathworks, Inc. | Automatic configuration of a test environment |
| US8533676B2 (en) * | 2011-12-29 | 2013-09-10 | Unisys Corporation | Single development test environment |
| CA2889387C (en) * | 2011-11-22 | 2020-03-24 | Solano Labs, Inc. | System of distributed software quality improvement |
| US9495281B2 (en) * | 2012-11-21 | 2016-11-15 | Hewlett Packard Enterprise Development Lp | User interface coverage |
| GB2516986B (en) * | 2013-08-06 | 2017-03-22 | Barclays Bank Plc | Automated application test system |
| CN106933729A (zh) * | 2015-12-29 | 2017-07-07 | 苏宁云商集团股份有限公司 | 一种基于云平台的测试方法和系统 |
| WO2020008991A1 (ja) | 2018-07-04 | 2020-01-09 | 日本電気株式会社 | 検証自動化装置、検証自動化方法、およびコンピュータ読み取り可能な記録媒体 |
| US11151015B2 (en) | 2019-02-22 | 2021-10-19 | Microsoft Technology Licensing, Llc | Machine-based recognition and dynamic selection of subpopulations for improved telemetry |
| CN110706147B (zh) * | 2019-09-29 | 2023-08-11 | 阿波罗智联(北京)科技有限公司 | 图像处理的环境确定方法、装置、电子设备和存储介质 |
| CN111309602A (zh) * | 2020-02-04 | 2020-06-19 | 北京同邦卓益科技有限公司 | 一种软件测试方法、装置及系统 |
| US20220138089A1 (en) * | 2020-10-30 | 2022-05-05 | EMC IP Holding Company LLC | Smart test executor |
| CN112306880A (zh) * | 2020-11-02 | 2021-02-02 | 百度在线网络技术（北京）有限公司 | 测试方法、装置、电子设备和计算机可读存储介质 |
-
2021
- 2021-05-14 CN CN202110528919.8A patent/CN113238943A/zh active Pending
-
2022
- 2022-01-14 US US17/576,157 patent/US20220138093A1/en not_active Abandoned
- 2022-01-17 KR KR1020220006506A patent/KR20220013947A/ko not_active Application Discontinuation
- 2022-01-19 JP JP2022006332A patent/JP7387773B2/ja active Active
- 2022-03-30 EP EP22165528.5A patent/EP4075283A1/en not_active Withdrawn
Also Published As
| Publication number | Publication date |
|---|---|
| JP7387773B2 (ja) | 2023-11-28 |
| CN113238943A (zh) | 2021-08-10 |
| US20220138093A1 (en) | 2022-05-05 |
| EP4075283A1 (en) | 2022-10-19 |
| JP2022158903A (ja) | 2022-10-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10387292B2 (en) | Determining application test results using screenshot metadata | |
| KR20220013947A (ko) | 지속적 통합 테스트 방법 및 장치 | |
| CN110765024B (zh) | 模拟测试方法、装置、电子设备和计算机可读存储介质 | |
| US11843674B2 (en) | Virtual workspace experience visualization and optimization | |
| CN111858296B (zh) | 接口测试方法、装置、设备和存储介质 | |
| US11954013B2 (en) | Method of testing applet performance, electronic device, and computer-readable medium | |
| WO2022100075A1 (zh) | 性能检测方法、装置、电子设备和计算机可读介质 | |
| US11216482B2 (en) | Systems and methods for access to multi-tenant heterogeneous databases | |
| KR20210042276A (ko) | 애플리케이션 실행 상태 검증 방법 및 장치 | |
| US9959182B2 (en) | Replicating test case data into a cache with non-naturally aligned data boundaries | |
| US20160328200A1 (en) | Testing screens of a multi-screen device | |
| KR20180076020A (ko) | 애플리케이션 테스트 자동화 장치 및 방법 | |
| JP2022078129A (ja) | データラベリング方法、装置、電子デバイス、コンピュータ可読記憶媒体及びコンピュータプログラム | |
| CN113691403A (zh) | 拓扑节点配置方法、相关装置及计算机程序产品 | |
| CN113495498A (zh) | 用于硬件设备的模拟方法、模拟器、设备和介质 | |
| Oyebisi et al. | Development of a remote operational amplifier Ilab using android-based mobile platform | |
| CN112131095A (zh) | 压力测试方法和装置 | |
| CN113656268B (zh) | 业务服务的性能测试方法、装置、电子设备和存储介质 | |
| CN113377638B (zh) | 性能测试工具的生成方法和装置 | |
| CN112835804B (zh) | 测试案例处理方法、装置、电子设备及介质 | |
| US20230236956A1 (en) | Objective-driven test cases and suites | |
| CN116541224A (zh) | 性能测试方法、装置、电子设备与可读存储介质 | |
| CN114143240A (zh) | 异常生成及测试方法及装置 | |
| CN111582478A (zh) | 用于确定模型结构的方法和装置 | |
| CN117033188A (zh) | 界面设计器的测试方法、装置、存储介质及计算机设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E601 | Decision to refuse application |