KR101997649B1 - Method for changing reference server for testing cloud streaming server, apparatus and system therefor - Google Patents

Method for changing reference server for testing cloud streaming server, apparatus and system therefor Download PDF

Info

Publication number
KR101997649B1
KR101997649B1 KR1020140028005A KR20140028005A KR101997649B1 KR 101997649 B1 KR101997649 B1 KR 101997649B1 KR 1020140028005 A KR1020140028005 A KR 1020140028005A KR 20140028005 A KR20140028005 A KR 20140028005A KR 101997649 B1 KR101997649 B1 KR 101997649B1
Authority
KR
South Korea
Prior art keywords
cloud streaming
server
test result
test
streaming servers
Prior art date
Application number
KR1020140028005A
Other languages
Korean (ko)
Other versions
KR20150105883A (en
Inventor
배태면
나현식
윤홍서
양중근
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR1020140028005A priority Critical patent/KR101997649B1/en
Priority to EP14885807.9A priority patent/EP3119093B1/en
Priority to JP2016556717A priority patent/JP6383799B2/en
Priority to PCT/KR2014/012350 priority patent/WO2015137604A1/en
Priority to CN201480077093.6A priority patent/CN106105242B/en
Priority to US15/123,213 priority patent/US10313207B2/en
Publication of KR20150105883A publication Critical patent/KR20150105883A/en
Application granted granted Critical
Publication of KR101997649B1 publication Critical patent/KR101997649B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2404Monitoring of server processing errors or hardware failure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors

Abstract

클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법, 이를 위한 장치 및 시스템이 개시된다. 가상 클라이언트 모듈은 클라우드 스트리밍 서버로 테스트 스크립트 키 입력을 전송하고, 클라우드 스트리밍 서버로부터 제공되는 테스트 결과를 수신하여 테스트 결과 비디오를 생성한다. 복수 개의 클라우드 스트리밍 서버로부터의 테스트 결과 비디오들은 동일 시점에 캡처되어 비교되고, 이 때 하나의 클라우드 스트리밍 서버가 기준 서버가 되는데, 이 기준 서버는 테스트 결과 기설정된 개수 이상의 클라우드 스트리밍 서버들에서 장애가 발생하는 경우 변경된다.A reference server changing method for testing a cloud streaming server, an apparatus and a system therefor are disclosed. The virtual client module sends the test script key input to the cloud streaming server, receives the test result provided from the cloud streaming server, and generates the test result video. The test result videos from the plurality of cloud streaming servers are captured and compared at the same time, and one cloud streaming server becomes the reference server, which results in failure of the predetermined number or more of the cloud streaming servers If changed.

Description

클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법, 이를 위한 장치 및 시스템{METHOD FOR CHANGING REFERENCE SERVER FOR TESTING CLOUD STREAMING SERVER, APPARATUS AND SYSTEM THEREFOR}TECHNICAL FIELD [0001] The present invention relates to a method and apparatus for changing a reference server for testing a cloud streaming server,

본 발명은 클라우드 스트리밍 서버 테스트 시스템에 관한 것으로서, 특히 클라우드 스트리밍 서비스를 제공하는 서버의 정상 동작 여부를 테스트하기 위한 기준 서버를 적절히 변경하여 테스트 오류가 전파되는 것을 방지하는 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법, 이를 위한 장치 및 시스템에 관한 것이다.The present invention relates to a cloud streaming server test system, and more particularly, to a cloud streaming server test system for testing a cloud streaming server that appropriately changes a reference server for testing whether a server providing a cloud streaming service operates normally, A method for changing a server, and an apparatus and a system therefor.

클라우드 컴퓨팅이란 인터넷 기반의 컴퓨터 기술을 의미하는 것으로, 사용자가 필요한 소프트웨어를 자신의 컴퓨터에 설치하지 않고도 인터넷 접속을 통해 언제든 사용할 수 있고 동시에 각종 정보통신 기기로 데이터를 손쉽게 공유할 수 있는 사용 환경이다. 즉, 개인이 웹에 접속해서 포토샵, 오피스 같은 프로그램을 작업할 수 있고 그 작업에 대한 저장도 웹에서 하게 된다. 결국 가상공간에 한 서버(컴퓨터)만을 놓고 이러한 컴퓨터를 통해 여러 사람이 개인 작업을 할 수 있는 것이다. 은행의 ATM이나 항공기, 열차의 실시간 좌석 예약 시스템이 대표적이다.Cloud computing refers to Internet-based computer technology, which allows users to use the Internet at any time without having to install the necessary software on their computers, while simultaneously sharing data with various information and communication devices. In other words, an individual can access the Web and work on programs such as Photoshop and Office, and the work is stored on the Web. Ultimately, you can have only one server (computer) in the virtual space, and that many people can do their jobs through these computers. The bank's ATM, airplane and train real-time seat reservation system are representative.

IT기술이 발전하고, 어플리케이션 시장이 커지고, SNS 시장이 활성화될 수록 유저들의 콘텐츠 등 데이터 양이 급증하고 있다. 그러고 이제는 데이터가 과포화 상태가 되어 각각의 단말기로는 감당하기 어려운 상황까지 놓이게 되었다. 이런 상황을 클라우드 시스템은 완전히 해결할 수 있다. 그리고, 이러한 클라우드 시스템은 초소형 디바이스 환경을 구축하는데 밑바탕이 될 것이다.As the IT technology develops, the application market grows, and the SNS market becomes more active, the amount of data such as user content is surging. Now, the data becomes supersaturated, and it becomes difficult to handle each terminal. This situation can be completely solved by the cloud system. And this cloud system will be the foundation for building a tiny device environment.

예를 들어, 대용량의 영상 처리가 요구되는 서비스나 기능을 실행하는데 있어서, 클라우드 컴퓨팅 기반의 서버를 통해서 상기 서비스나 기능을 실행하도록 하고, 그 실행된 결과 화면만을 스트리밍 기술을 이용하여 사용자의 단말기로 전송함으로써, 사용자가 단말기를 통해 고사양 또는 고기능이 요구되는 서비스나 기능을 이용할 수 있도록 한다.For example, in executing a service or a function requiring a large amount of image processing, the service or function may be executed through a server based on cloud computing, and only the executed result screen may be transmitted to the user's terminal So that the user can utilize services or functions requiring high-performance or high functionality through the terminal.

이렇게 사용자 단말기의 요구에 따라서 특정 서비스 혹은 기능을 실행하고 그 결과를 사용자 단말로 전송하는 화면 가상화 기술을 통하여 사용자 단말기가 다양한 서비스나 기능을 이용할 수 있도록 하는 기술을 클라우드 스트리밍 서비스라 한다.A technology that enables a user terminal to use various services or functions through a screen virtualization technology that executes a specific service or function according to a request of the user terminal and transmits the result to the user terminal is called a cloud streaming service.

이러한 클라우드 스트리밍 서비스 기반의 컴퓨팅 환경에 있어서는, 서버에서 주요 서비스나 기능이 실행되기 때문에 서버의 장애 여부를 미리 감지하기 위한 기술 개발이 요구된다.In such a computing environment based on a cloud streaming service, since a major service or function is executed in the server, development of technology for detecting whether or not the server has failed is required.

한국 공개 특허 제10-2011-0012740호, 2011년 04월 12일 공개 (명칭: 중복 콘텐츠 검출 장치 및 검출 방법)Korean Patent Laid-Open No. 10-2011-0012740, Apr. 12, 2011 (Name: Duplicate Content Detection Apparatus and Detection Method)

본 발명은 상기한 종래의 문제점을 해결하기 위해 제안된 것으로서, 클라우드 스트리밍 서비스를 제공하는 서버의 정상 동작 여부를 테스트할 수 있는 클라우드 스트리밍 서버의 테스트 방법, 이를 위한 장치 및 시스템을 제공하고자 한다.SUMMARY OF THE INVENTION The present invention has been proposed in order to solve the above-described problems of the related art, and it is an object of the present invention to provide a testing method of a cloud streaming server capable of testing whether a server providing a cloud streaming service operates normally, and an apparatus and a system therefor.

특히, 본 발명의 목적은 복수 개의 클라우드 스트리밍 서버로부터 테스트 결과 화면을 제공 받아 서로 비교하였을 때 발견되는 장애가 기설정된 개수 이상이면, 기준 서버를 변경하여 기준 서버의 장애로 인해 테스트 결과가 왜곡되는 것을 방지하는 것이다.In particular, it is an object of the present invention to provide a method and a system for preventing a test result from being distorted due to a failure of a reference server by changing a reference server when a test result screen is received from a plurality of cloud streaming servers, .

상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시예에 따른 클라우드 스트리밍 서버 테스트 장치는 클라우드 스트리밍 서버들로부터, 기설정된 테스트 스크립트 키 입력에 상응하는 테스트 결과들을 수신하여 테스트 결과 비디오들을 생성하는 가상 클라이언트 모듈들; 상기 클라우드 스트리밍 서버들 중 하나인 기준 서버에 상응하는 테스트 결과 비디오를 캡처하여 생성된 테스트 결과 이미지와, 다른 클라우드 스트리밍 서버들에 상응하는 테스트 결과 비디오들을 캡처하여 생성된 테스트 결과 이미지들을 비교하는 비교부; 및 상기 비교 결과에 따라 상기 클라우드 스트리밍 서버들 중 어느 하나 이상의 장애 여부를 판단하고, 상기 기준 서버의 변경 조건이 만족되는 경우 상기 기준 서버를 변경하는 테스트 제어부를 포함한다.According to another aspect of the present invention, there is provided an apparatus for testing a cloud streaming server, comprising: a cloud streaming server for receiving test results corresponding to a predetermined test script key input from a cloud streaming server, Client modules; A comparison unit for comparing the test result images generated by capturing the test result video corresponding to the reference server which is one of the cloud streaming servers and the test result images generated by capturing the test result videos corresponding to the other cloud streaming servers, ; And a test controller for determining whether one or more of the cloud streaming servers have failed according to the comparison result and changing the reference server when the change condition of the reference server is satisfied.

이 때, 테스트 제어부는 상기 비교 결과, 비교되는 두 이미지가 서로 일치하면 해당 클라우드 스트리밍 서버는 장애가 없다고 판단하고, 두 이미지가 서로 일치하지 않으면 해당 클라우드 스트리밍 서버에 장애가 있다고 판단할 수 있다.At this time, if the two images to be compared coincide with each other as a result of the comparison, the test control unit determines that the corresponding cloud streaming server does not have a failure, and if the two images do not coincide with each other, the test control unit can determine that the cloud streaming server has a failure.

이 때, 상기 다른 클라우드 스트리밍 서버들에 상응하는 상기 테스트 결과 이미지들은 상기 기준 서버에 상응하는 테스트 결과 이미지와 동일 시점에 캡처될 수 있다.At this time, the test result images corresponding to the other cloud streaming servers may be captured at the same time as the test result image corresponding to the reference server.

이 때, 기준 서버의 변경 조건은 상기 다른 클라우드 스트리밍 서버들 중 상기 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 기설정된 기준값 이상인 조건일 수 있다.In this case, the change condition of the reference server may be a condition that the number of the cloud streaming servers judged as the failure among the other cloud streaming servers is equal to or greater than a predetermined reference value.

이 때, 테스트 제어부는 상기 기준 서버를 변경하기 이전에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 상기 기준 서버를 변경한 이후에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수보다 기설정된 개수 이상 많은 경우, 변경전 기준 서버에 장애가 있는 것으로 판단할 수 있다.In this case, if the number of cloud streaming servers determined as having a failure before changing the reference server is greater than a predetermined number of cloud streaming servers determined as having a failure after changing the reference server, It can be judged that there is a failure in the reference server before the change.

본 발명의 바람직한 실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은, 가상 클라이언트 모듈들이, 클라우드 스트리밍 서버들로부터 전송된 테스트 결과들을 수신하여 테스트 결과 비디오들을 생성하는 단계; 상기 클라우드 스트리밍 서버들 중 하나인 기준 서버에 상응하는 테스트 결과 비디오를 캡처하여 생성된 테스트 결과 이미지와, 다른 클라우드 스트리밍 서버들에 상응하는 테스트 결과 비디오들을 캡처하여 생성된 테스트 결과 이미지들을 비교하는 단계; 상기 비교 결과에 따라 상기 클라우드 스트리밍 서버들 중 어느 하나 이상에 장애가 발생하였다고 판단하는 단계; 및 상기 기준 서버의 변경 조건이 만족된 경우 상기 기준 서버를 변경하는 단계를 포함한다.A method of changing a reference server for testing a cloud streaming server according to a preferred embodiment of the present invention includes: generating virtual test videos by receiving test results transmitted from cloud streaming servers; Capturing a test result video corresponding to a reference server that is one of the cloud streaming servers and comparing the generated test result image with the generated test result images by capturing test result videos corresponding to other cloud streaming servers; Determining that a failure has occurred in one or more of the cloud streaming servers according to the comparison result; And changing the reference server if the change condition of the reference server is satisfied.

이 때, 다른 클라우드 스트리밍 서버들에 상응하는 상기 테스트 결과 이미지들은 상기 기준 서버에 상응하는 테스트 결과 이미지와 동일 시점에 캡처될 수 있다.At this time, the test result images corresponding to the other cloud streaming servers may be captured at the same time as the test result image corresponding to the reference server.

이 때, 기준 서버 변경 방법은, 상기 기준 서버를 변경하기 이전에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 상기 기준 서버를 변경한 이후에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수보다 기설정된 개수 이상 많은 경우, 변경전 기준 서버에 장애가 있는 것으로 판단하는 단계를 더 포함할 수 있다.In this case, the reference server changing method may include a step of changing a number of cloud streaming servers determined as having a failure before changing the reference server to a predetermined number or more In many cases, it may further include determining that the pre-change reference server has a failure.

이 때, 장애가 발생하였다고 판단하는 단계는 상기 비교 결과, 비교되는 두 이미지의 불일치에 기반하여 상기 장애가 발생한 것으로 판단할 수 있다.At this time, it may be determined that the failure has occurred based on the mismatch between the two images to be compared as a result of the comparison.

본 발명의 바람직한 실시예에 따른 클라우드 스트리밍 서버의 테스트 시스템은, 장애 여부 테스트를 위하여 기설정된 테스트 스크립트 키 입력에 상응하는 테스트 결과들을 전송하는 클라우드 스트리밍 서버들; 및 상기 클라우드 스트리밍 서버들 중 하나인 기준 서버에 상응하는 테스트 결과 비디오를 캡처하여 생성된 테스트 결과 이미지와, 다른 클라우드 스트리밍 서버들에 상응하는 테스트 결과 비디오들을 캡처하여 생성된 테스트 결과 이미지들을 비교하여 상기 클라우드 스트리밍 서버들 중 하나 이상의 장애 여부를 판단하고, 상기 기준 서버의 변경 조건이 만족되는 경우 상기 기준 서버를 변경하는 테스트 장치를 포함한다.A test system of a cloud streaming server according to a preferred embodiment of the present invention includes: cloud streaming servers for transmitting test results corresponding to a preset test script key input for testing for failure; And comparing the test result image generated by capturing the test result video corresponding to the reference server which is one of the cloud streaming servers and the test result images generated by capturing the test result videos corresponding to the other cloud streaming servers, Determining whether one or more of the cloud streaming servers have failed, and changing the reference server if the change condition of the reference server is satisfied.

본 발명의 과제 해결을 위한 또 다른 수단으로서, 상술한 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법을 실행하는 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체를 제공한다.As another means for solving the problem of the present invention, there is provided a computer readable recording medium on which a program for executing a reference server changing method for testing the above-described cloud streaming server is recorded.

본 발명은 클라우드 스트리밍 서비스를 제공하는 서버의 정상 동작 여부를 테스트하는데 있어서, 실제 클라이언트 단말기와 적어도 일부 기능이 동일한 가상 클라이언트 모듈을 적어도 하나 구비하고, 적어도 하나의 클라우드 스트리밍 서버로부터 전송되는 기설정된 테스트 결과를 적어도 하나의 가상 클라이언트 모듈을 통해 수신하여 화면으로 출력하도록 한 후, 상기 적어도 하나의 가상 클라이언트 모듈로부터 출력되는 결과 이미지를 캡처하고, 캡처한 결과 이미지를 미리 설정된 기준 이미지와 비교하여, 동일한지 여부에 따라 클라우드 스트리밍 서버의 정상 동작 여부를 판단하도록 함으로써 클라우드 스트리밍 서버의 장애를 보다 손쉽게 검출할 수 있는 이점이 있다.In order to test whether a server providing a cloud streaming service operates normally, at least one virtual client module having at least some functions identical to those of an actual client terminal is provided, and a predetermined test result transmitted from at least one cloud streaming server And outputting the resultant image to at least one virtual client module. The resultant image is output from the at least one virtual client module, and the captured result image is compared with a predetermined reference image to determine whether the same or not It is possible to more easily detect the failure of the cloud streaming server by determining whether the cloud streaming server is operating normally.

또한, 이와 같이 서버의 정상 동작 여부를 확인할 수 있도록 함으로써 클라우드 스트리밍 서버의 데이터 전송오류를 사전에 방지할 수 있는 효과가 있다.In addition, it is possible to confirm whether or not the server is operating normally, so that data transmission errors of the cloud streaming server can be prevented in advance.

또한, 본 발명은 클라우드 스트리밍 서비스를 제공하는 서버의 장애를 미리 검출함으로써, 안정적인 클라우드 스트리밍 서비스를 제공할 수 있도록 하여, 서비스 품질을 향상시킬 수 있는 우수한 효과가 있다.In addition, the present invention can provide a stable cloud streaming service by detecting a failure of a server that provides a cloud streaming service in advance, thereby improving service quality.

또한, 본 발명은 클라우드 스트리밍 서버 테스트를 위한 기준 서버를 적절히 변경하여 기준 서버에 장애가 발생한 경우 테스트 결과 오류가 전파되는 것을 방지할 수 있다.In addition, the present invention can appropriately change a reference server for testing a cloud streaming server, thereby preventing a test result error from propagating when a failure occurs in the reference server.

도 1은 본 발명의 실시예에 따른 클라우드 스트리밍 서버의 테스트 시스템을 도시한 도면이다.
도 2는 본 발명의 실시예에 따른 클라우드 스트리밍 서버 테스트 장치를 도시한 도면이다.
도 3은 본 발명의 실시예에 따라 테스트 결과를 수신하여 처리하는 가상 클라이언트 모듈의 구성을 도시한 도면이다.
도 4는 본 발명의 실시예에 따른 클라우드 스트리밍 서버의 테스트 시스템에서의 테스트 과정을 나타내는 흐름도이다.
도 5는 본 발명의 실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법을 나타내는 동작 흐름도이다.
1 is a diagram illustrating a test system of a cloud streaming server according to an embodiment of the present invention.
2 is a diagram illustrating a cloud streaming server testing apparatus according to an embodiment of the present invention.
3 is a diagram illustrating a configuration of a virtual client module that receives and processes test results according to an embodiment of the present invention.
4 is a flowchart illustrating a test procedure in a test system of a cloud streaming server according to an embodiment of the present invention.
5 is an operational flowchart illustrating a reference server changing method for testing a cloud streaming server according to an embodiment of the present invention.

이하, 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 상세히 설명한다. 다만, 하기의 설명 및 첨부된 도면에서 본 발명의 요지를 흐릴 수 있는 공지 기능 또는 구성에 대한 상세한 설명은 생략한다. 또한, 도면 전체에 걸쳐 동일한 구성 요소들은 가능한 한 동일한 도면 부호로 나타내고 있음에 유의하여야 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the following description and the accompanying drawings, detailed description of well-known functions or constructions that may obscure the subject matter of the present invention will be omitted. It should be noted that the same constituent elements are denoted by the same reference numerals as possible throughout the drawings.

이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위한 용어의 개념으로 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.The terms and words used in the present specification and claims should not be construed to be limited to ordinary or dictionary meanings and the inventor is not limited to the concept of terminology for describing his or her invention in the best way. It should be interpreted as meaning and concept consistent with the technical idea of the present invention. Therefore, the embodiments described in the present specification and the configurations shown in the drawings are merely the most preferred embodiments of the present invention, and not all of the technical ideas of the present invention are described. Therefore, It is to be understood that equivalents and modifications are possible.

이하, 실시예를 참조하여, 클라우드 스트리밍 서버의 정상 동작 여부를 사전에 검출하여, 서버 장애에 따른 서비스 품질 저하를 방지할 수 있는 테스트 기술에 대하여 설명하도록 한다.Hereinafter, with reference to embodiments, a description will be made of a test technique that can detect whether a cloud streaming server is normally operated beforehand and prevent degradation of service quality due to a server failure.

도 1은 본 발명의 실시예에 따른 클라우드 스트리밍 서비스의 테스트 시스템의 구성을 도시한 도면이다.1 is a diagram illustrating a configuration of a test system of a cloud streaming service according to an embodiment of the present invention.

도 1을 참조하면, 본 발명이 적용된 클라우드 스트리밍 시스템은, 통신망(110)을 통해서 연결된 다수의 클라이언트(100, 101, 102)와 다수의 클라우드 스트리밍 서버(130, 140, 150)로 이루어지며, 본 발명은 이러한 클라우드 스트리밍 시스템의 정상 동작 여부를 테스트하기 위하여, 상기 다수의 클라우드 스트리밍 서버(130, 140, 150)와 통신망(110)을 통해서 연결되며 상기 클라이언트(100, 101, 102)의 적어도 일부 기능을 수행하는 가상 클라이언트 모듈을 포함하는 테스트 장치(120)를 더 포함한다.1, a cloud streaming system to which the present invention is applied includes a plurality of clients 100, 101, and 102 connected through a communication network 110 and a plurality of cloud streaming servers 130, 140, and 150, In order to test whether or not the cloud streaming system operates normally, the invention is connected to the plurality of cloud streaming servers 130, 140, and 150 through the communication network 110 and includes at least some functions of the clients 100, 101, And a virtual client module for performing the virtual client module.

이하의 실시예에서는 세 개의 클라우드 스트리밍 서버(130, 140, 150) 및 세 개의 가상 클라이언트 모듈을 포함하는 테스트 장치(120)를 도시하였으나, 상기 클라우드 스트리밍 서버의 수 및 가상 클라이언트 모듈의 수는 이에 한정되지 않으며 필요 및 설계에 따라서 다양한 조합으로 구현될 수 있다.In the following embodiment, a test apparatus 120 including three cloud streaming servers 130, 140, and 150 and three virtual client modules is shown. However, the number of cloud streaming servers and the number of virtual client modules are limited thereto And can be implemented in various combinations according to needs and designs.

상기에서, 클라이언트(100, 101, 102)는 통신망(110)을 경유하여 각종 데이터를 송수신할 수 있는 단말기를 말하는 것으로, 특히, 클라우드 스트리밍 서버(130, 140, 150)에 접속하여 클라우드 스트리밍 서비스를 제공하는 사용자측 장치를 의미한다. 예를 들어, 클라이언트(100, 101, 102)는 태블릿 PC(Tablet PC), 랩톱(Laptop), 개인용 컴퓨터(PC: Personal Computer), 스마트폰(Smart Phone), 개인휴대용 정보단말기(PDA: Personal Digital Assistant), 스마트 TV 및 이동통신 단말기(Mobile Communication Terminal), 셋탑박스 중 어느 하나일 수 있다.The clients 100, 101 and 102 are terminals capable of transmitting and receiving various data via the communication network 110. In particular, the clients 100, 101 and 102 are connected to the cloud streaming servers 130, 140 and 150 to perform a cloud streaming service Means a user-side apparatus that provides the information. For example, the clients 100, 101 and 102 may be a tablet PC, a laptop, a personal computer (PC), a smart phone, a personal digital assistant (PDA) An assistant, a smart TV, a mobile communication terminal, and a set-top box.

또한, 클라이언트(100, 101, 102)는 통신망(110)을 경유하여 클라우드 스트리밍 서버(130, 140, 150)와 통신하기 위한 브라우저, 프로그램 및 프로토콜을 저장하는 메모리, 각종 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하고 있는 단말기를 의미한다. 즉, 클라이언트(100, 101, 102)는 클라우드 스트리밍 서버(130, 140, 150)와 통신이 가능하다면 그 어떠한 단말기도 가능하며, 노트북 컴퓨터, 이동통신 단말기, PDA 등의 통신 컴퓨팅 장치를 모두 포함하는 넓은 개념이다.The clients 100, 101 and 102 execute browsers, programs and protocols for communicating with the cloud streaming servers 130, 140 and 150 via the communication network 110, And the like. That is, the clients 100, 101, and 102 may be any terminal as long as they can communicate with the cloud streaming servers 130, 140, and 150, and include all communication computing devices such as a notebook computer, a mobile communication terminal, It is a broad concept.

이러한 클라이언트(100, 101, 102)는 예를 들어, 클라우드 스트리밍 서버(130, 140, 150)에 접속하여 사용자 입력에 따라서 특정 서비스 또는 기능을 요청하고, 상기 요청된 서비스 또는 기능의 실행에 따른 결과 화면을 클라우드 스트리밍 서버(130, 140, 150)로부터 수신하여 출력할 수 있다.For example, the clients 100, 101, and 102 access the cloud streaming servers 130, 140, and 150 to request a specific service or function according to user input, It is possible to receive and output the screen from the cloud streaming server (130, 140, 150).

그리고, 클라우드 스트리밍 서버(130, 140, 150)는 통신망(110)을 통해 다수의 클라이언트(100, 101, 102)들로 특정 서비스나 기능을 제공하는 구성으로서, 특히, 클라우드 스트리밍 서비스를 제공할 수 있다. 예를 들어, 클라우드 스트리밍 서버(130, 140, 150)는 클라이언트(100, 101, 102)의 OS 종류, CPU 성능, 메모리 용량, 기타 소프트웨어 및 하드웨어 사양에 관계없이, 소정의 서비스나 기능, 예를 들어, 고성능의 이미지 처리를 요하는 서비스나 기능을 제공할 수 있도록, 클라이언트(100, 101, 102)로부터 전송된 사용자 입력에 따른 서비스 혹은 기능을 수행하고, 그 결과 화면을 상기 클라이언트(100, 101, 102)로 전송할 수 있다. 이를 위해, 상기 클라우드 스트리밍 서버(130, 140, 150)는 화면 가상화 기능을 구비할 수 있다. 특히, 본 발명에서 클라우드 스트리밍 서버(130, 140, 150)는 정상 동작 여부(즉, 장애 여부)를 테스트하기 위하여, 기설정된 테스트 스크립트 키 입력을 수신하고 이에 기반하여 생성된 테스트 결과(테스트 결과 화면)를 테스트 장치(120)의 각 가상 클라이언트 모듈들로 전송할 수 있다.The cloud streaming servers 130, 140, and 150 provide a specific service or function to a plurality of clients 100, 101, and 102 through the communication network 110, and in particular, can provide a cloud streaming service have. For example, the cloud streaming servers 130, 140, and 150 may provide a predetermined service or function, an example, or a combination of the functions of the clients 100, 101, and 102 regardless of the OS type, CPU performance, memory capacity, In order to provide a service or a function requiring high-performance image processing, a service or a function according to user input transmitted from the client 100, 101, 102 is performed, and a resultant screen is displayed on the client 100 , ≪ / RTI > 102). To this end, the cloud streaming servers 130, 140 and 150 may have a screen virtualization function. In particular, in the present invention, the cloud streaming server 130, 140, 150 receives the pre-set test script key input to test whether the normal operation (i.e., failure) To each of the virtual client modules of the test apparatus 120.

통신망(110)은 인터넷망, 인트라넷망, 이동통신망, 위성 통신망 등 다양한 유무선 통신 기술을 이용하여 인터넷 프로토콜로 데이터를 송수신할 수 있는 망을 말한다. 이러한, 통신망(110)은 LAN(Local Area Network), WAN(Wide Area Network)등의 폐쇄형 네트워크, 인터넷(Internet)과 같은 개방형 네트워크뿐만 아니라, CDMA(Code Division Multiple Access), WCDMA(Wideband Code Division Multiple Access), GSM(Global System for Mobile Communications), LTE(Long Term Evolution), EPC(Evolved Packet Core) 등의 네트워크와 향후 구현될 차세대 네트워크 및 컴퓨팅 네트워크를 통칭하는 개념이다. The communication network 110 refers to a network capable of transmitting and receiving data using an Internet protocol using various wired and wireless communication technologies such as an Internet network, an intranet network, a mobile communication network, and a satellite communication network. The communication network 110 may be a closed network such as a LAN (Local Area Network) or a WAN (Wide Area Network), an open network such as the Internet, a CDMA (Code Division Multiple Access), a WCDMA The concept is called the next generation network and computing network that will be implemented next, such as Multiple Access, Global System for Mobile Communications (GSM), Long Term Evolution (LTE) and Evolved Packet Core (EPC)

테스트 장치(120)는 클라우드 스트리밍 서버(130, 140, 150)의 정상 동작 여부를 테스트하기 위한 장치이다. 이러한 테스트 장치(120)는 클라이언트(100, 101, 102)의 적어도 일부 기능을 가지는 가상 클라이언트 모듈을 적어도 하나 구비한다.The test apparatus 120 is a device for testing whether or not the cloud streaming server 130, 140, 150 operates normally. The test apparatus 120 includes at least one virtual client module having at least some functions of the clients 100, 101,

이러한 테스트 장치(120)는 적어도 하나의 클라우드 스트리밍 서버(130, 140, 150)로부터 전송된 테스트 결과가 상기 적어도 하나의 가상 클라이언트 모듈들로 수신되면, 상기 적어도 하나의 가상 클라이언트 모듈이 수신된 테스트 결과를 데이터 처리하여 화면으로 출력할 때, 출력되는 결과 이미지를 캡처하고, 캡처된 결과 이미지를 미리 설정된 기준 결과 이미지와 비교해서, 일치하는 정도에 따라 상기 적어도 하나의 클라우드 스트리밍 서버의 장애 여부를 판단한다. 더 구체적으로, 테스트 장치(120)는 적어도 하나의 가상 클라이언트 모듈이 특정 클라우드 스트리밍 서버(130)로부터 수신한 테스트 결과에 대하여 디코딩 등의 데이터 처리를 수행한 후, 화면으로 출력시킬 때, 소정의 캡처 시점에 출력되는 결과 이미지와 미리 설정된 기준 결과 이미지(기준 결과 이미지는 테스트 대상인 클라우드 스트리밍 서버들 중 하나에 상응하는 것일 수 있음)를 비교하여, 서로 일치하지 않으면 해당 클라우드 스트리밍 서버(130)에 장애가 있어 정상 동작하지 않는 클라우드 스트리밍 서버로 판단하고, 서로 일치하면 해당 클라우드 스트리밍 서버(130)가 정상 동작하는 것으로 판단한다. 이 때, 캡처 시점은 적어도 하나의 클라우드 스트리밍 서버(130, 140, 150)로부터 테스트 결과가 전송되는 시점을 기준으로 설정될 수 있으며, 테스트 장치(120)에 미리 저장되어 있을 수 있다.The test device 120 may be configured such that if a test result sent from at least one cloud streaming server 130, 140, 150 is received by the at least one virtual client module, And outputs the captured resultant image to a screen. The captured resultant image is compared with a predetermined reference result image to determine whether the at least one cloud streaming server has failed . More specifically, when at least one virtual client module performs data processing such as decoding on test results received from a specific cloud streaming server 130 and outputs the result to a screen, the test apparatus 120 performs predetermined capture (The reference result image may correspond to one of the cloud-streaming servers to be tested). If they do not coincide with each other, the cloud-streaming server 130 has a failure It is determined that the cloud streaming server 130 does not operate normally. If the cloud streaming server 130 matches the cloud streaming server 130, the cloud streaming server 130 determines that the cloud streaming server 130 operates normally. At this time, the capture time may be set based on a time point at which a test result is transmitted from at least one of the cloud streaming servers 130, 140 and 150, and may be stored in advance in the test device 120.

예를 들어, 테스트 장치(120)는 클라우드 스트리밍 서버들(130, 140, 150) 중 하나인 기준 서버(130)에 상응하는 테스트 결과 비디오를 캡처하여 생성된 테스트 결과 이미지와, 다른 클라우드 스트리밍 서버들(140, 150)에 상응하는 테스트 결과 비디오들을 캡처하여 생성된 테스트 결과 이미지들을 비교하여 클라우드 스트리밍 서버들(130, 140, 150) 중 하나 이상의 장애 여부를 판단하고, 기준 서버(130)의 변경이 필요하다고 판단되는 경우(변경 조건 만족) 기준 서버(130)를 다른 서버(140 또는 150)로 변경할 수 있다.For example, the test device 120 may capture test result video corresponding to the reference server 130, which is one of the cloud streaming servers 130, 140, and 150, (140, 150) and compares the generated test result images to determine whether one or more of the cloud streaming servers (130, 140, 150) have failed, and if the change of the reference server (130) If it is determined that it is necessary (the change condition is satisfied), the reference server 130 can be changed to another server 140 or 150.

이 때, 변경 조건은 클라우드 스트리밍 서버들 중 상기 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 기설정된 기준값 이상일 조건일 수 있다.In this case, the change condition may be a condition that the number of the cloud streaming servers judged to have the fault among the cloud streaming servers is equal to or greater than a preset reference value.

이와 같이 본 발명에서는 가상 클라이언트 모듈들은 각각 서로 다른 클라우드 스트리밍 서버로부터 테스트 결과를 수신하는데, 적어도 하나의 가상 클라이언트 모듈이 각각 서로 다른 클라우드 스트리밍 서버로부터 테스트 결과를 수신하여 출력한 결과 이미지를 기준 결과 이미지와 비교하여 비교 결과에 따라 해당 클라우드 스트리밍 서버의 정상 동작 여부를 판단하는 것이다. 즉, 실제 클라이언트(100, 101, 102)에서 사용자에게 제공하는 화면 이미지를 기준으로 각 클라우드 스트리밍 서버(130, 140, 150)의 정상 동작 여부를 판단하는 것이다. 이를 위해 상기 테스트 장치(120)는 상기 적어도 하나의 클라우드 스트리밍 서버(130, 140, 150)로 동시에 테스트 결과의 전송을 요청할 수 있으며, 이러한 요청 신호에 따라서 각 클라우드 스트리밍 서버(130, 140, 150)는 테스트 결과를 전송할 수 있다. 아울러, 적어도 하나의 클라우드 스트리밍 서버(130, 140, 150)으로부터 전송된 테스트 결과를 수신하여 처리할 가상 클라이언트 모듈은 미리 설정되어 있을 수 있다. 즉, 적어도 하나의 클라우드 스트리밍 서버(130, 140, 150)와 적어도 하나의 가상 클라이언트 모듈은 일대일 혹은 다대일로 매핑될 수 있다. 이에, 테스트 장치(120)는 상기 적어도 하나의 클라우드 스트리밍 서버(130, 140, 150)로 테스트 결과의 전송을 요청할 때, 이를 수신할 가상 클라이언트 모듈에 대한 정보를 함께 전송할 수 있으며, 또한, 가상 클라이언트 모듈이 둘 이상의 클라우드 스트리밍 서버와 매핑될 때, 둘 이상의 클라우드 스트리밍 서버로부터 테스트 결과를 순차로 수신하여 처리할 수 있도록, 적어도 하나의 클라우드 스트리밍 서버(130, 140, 150)로의 테스트 결과 전송의 요청 시점을 조정할 수 있다.As described above, in the present invention, the virtual client modules receive test results from different cloud streaming servers. At least one virtual client module receives test results from different cloud streaming servers and outputs the resultant images to a reference result image And determines whether the corresponding cloud streaming server operates normally according to the comparison result. That is, the normal operation of each of the cloud streaming servers 130, 140, and 150 is determined based on a screen image provided to the user by the actual clients 100, 101, and 102. To this end, the test apparatus 120 may simultaneously request transmission of a test result to the at least one cloud streaming server 130, 140, 150. In response to the request signal, each of the cloud streaming servers 130, 140, Can transmit test results. In addition, a virtual client module to receive and process test results transmitted from at least one cloud streaming server (130, 140, 150) may be set in advance. That is, at least one cloud streaming server 130, 140, 150 and at least one virtual client module may be mapped to one-to-one or many-to-one. Accordingly, when the test apparatus 120 requests transmission of the test result to the at least one cloud streaming server 130, 140, or 150, the test apparatus 120 can transmit information about the virtual client module to receive the test result, A request for sending a test result to at least one cloud streaming server (130, 140, 150) so that the module can be sequentially received and processed from more than one cloud streaming server when the module is mapped to more than one cloud streaming server Can be adjusted.

이와 같이 구성된 시스템에서 첨부된 도 2 및 도 3을 참조하여 본 발명의 실시예에 따른 테스트 장치(120)의 구성을 구체적으로 살펴보도록 한다.The configuration of the test apparatus 120 according to the embodiment of the present invention will be described in detail with reference to FIGS. 2 and 3 attached hereto.

먼저, 도 2를 참조하면 테스트 장치(120)는 테스트 제어부(200), 저장부(210), 비교부(220), 입력부(230), 출력부(240), 적어도 하나의 가상 클라이언트 모듈(250, 252, 254)을 포함하여 구성할 수 있다. 본 실시예에서 가상 클라이언트 모듈(250, 252, 254)의 수를 3개로 예시하였으나, 상기 가상 클라이언트 모듈(250, 252, 254)의 수는 시스템 운용에 따라서 변경될 수 있다.2, the test apparatus 120 includes a test control unit 200, a storage unit 210, a comparison unit 220, an input unit 230, an output unit 240, at least one virtual client module 250 , 252, and 254, respectively. Although the number of the virtual client modules 250, 252 and 254 is three in the present embodiment, the number of the virtual client modules 250, 252 and 254 may be changed according to the system operation.

테스트 제어부(200)는 클라우드 스트리밍 서버(130, 140, 150)들의 장애 여부를 판단에 필요한 모든 제어를 수행하고, 장애 여부 판단 요구 시 비교부(220)를 통해 이루어진 비교 결과, 즉 테스트 결과에 의하여 출력된 화면을 캡처한 결과 이미지와 미리 결정된 기준 결과 이미지의 일치 여부에 따라 클라우드 스트리밍 서버의 장애 여부를 판단한다. 이 때, 장애 여부 판단 요구 시점은 가상 클라이언트 모듈(250, 252, 254)로 테스트 결과 수신이 감지되고 수신이 완료된 시점으로 할 수도 있고, 입력부(230)를 통해 장애 여부 판단 요구 입력이 있는 시점으로 할 수도 있고, 미리 설정된 주기에 따른 시점이 될 수도 있다. 이와 같이 장애 여부 판단 요구는 설정에 따라 발생할 것이다. 또한, 기준 결과 이미지는, 미리 저장될 수도 있으나, 상기 적어도 하나의 가상 클라이언트 모듈(250, 252, 254) 중 특정 가상 클라이언트 모듈로부터 출력된 결과 이미지를 기준 결과 이미지로 설정할 수 있다.The test control unit 200 performs all necessary control to determine whether the cloud streaming servers 130, 140, and 150 have failed or not. When a failure is determined, the test control unit 200 compares the comparison results obtained through the comparison unit 220, And judges whether or not the cloud streaming server has failed according to whether or not the resultant image obtained by capturing the output screen matches the predetermined reference result image. At this time, the point of time when the failure determination is requested may be a point in time when the reception of test results is detected by the virtual client modules 250, 252, and 254 and the reception is completed, or a point in time when a failure determination request input is input through the input unit 230 Or may be a time according to a preset cycle. In this way, a fault judgment request will occur according to the setting. Also, the reference result image may be stored in advance, but a result image output from a specific one of the at least one virtual client module 250, 252, and 254 may be set as a reference result image.

특히, 테스트 제어부(200)는 기준 서버의 변경 조건이 만족되는 경우 기준 서버를 다른 클라우드 스트리밍 서버로 변경한다. 즉, 기준 서버에 장애가 발생하면 이를 기준으로 비교한 결과 정상 동작하는 모든 서버에 장애가 발생한 것으로 테스트 결과가 나올 수 있는데, 기준 서버를 적절히 변경하면 이와 같은 경우를 방지할 수 있다.In particular, if the change condition of the reference server is satisfied, the test control unit 200 changes the reference server to another cloud streaming server. That is, when a failure occurs in the reference server, a test result may be generated that all the servers that are normally operating have failed. As a result, if the reference server is appropriately changed, such a case can be prevented.

이 때, 테스트 제어부(200)는 비교 결과 비교되는 두 이미지가 서로 일치하면 해당 클라우드 스트리밍 서버는 장애가 없다고 판단하고, 두 이미지가 서로 일치하지 않으면 해당 클라우드 스트리밍 서버에 장애가 있다고 판단할 수 있다.At this time, if the two images to be compared as a result of comparison are identical to each other, the test control unit 200 determines that the corresponding cloud streaming server has no failure, and if the two images do not coincide with each other, the test control unit 200 can determine that there is a failure in the corresponding cloud streaming server.

이 때, 테스트 제어부(200)는 기준 서버를 변경하기 이전에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 상기 기준 서버를 변경한 이후에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수보다 기설정된 개수 이상 많은 경우, 변경전 기준 서버에 장애가 있는 것으로 판단할 수 있다.At this time, the test control unit 200 determines that the number of cloud streaming servers judged as having a failure before changing the reference server is greater than the number of cloud streaming servers judged as having a failure, , It can be judged that there is a failure in the reference server before the change.

저장부(210)는 테스트 장치(120)의 동작에 필요한 정보들을 저장할 수 있다. 이러한 저장부(210)는 적어도 하나의 클라우드 스트리밍 서버(130, 140, 150)로부터 전송된 테스트 결과에 대한 결과 비디오를 동일한 시점에 캡처하기 위해 테스트 결과 비디오를 캡처하기 위한 캡처 시점 정보를 저장한다. 또한, 저장부(210)는 클라우드 스트리밍 서버로부터 전송되는 테스트 결과에 대한 기본 정보를 저장하고, 특히 클라우드 스트리밍 서버의 장애 여부를 판단하기 위한 기준이 되는 특정 시점의 기준 이미지를 미리 저장할 수 있다. 이러한 저장부(210)는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic Media), CD-ROM(Compact Disk Read Only Memory), DVD(Digital Video Disk)와 같은 광 기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media) 및 롬(ROM), 램(RAM, Random Access Memory), 플래시 메모리를 포함한다.The storage unit 210 may store information necessary for the operation of the test apparatus 120. [ This storage 210 stores capture time information for capturing test result video to capture the resulting video for test results transmitted from at least one cloud streaming server 130, 140, 150 at the same time. In addition, the storage unit 210 may store basic information about a test result transmitted from the cloud streaming server, and may in particular store a reference image at a specific time point as a reference for determining whether or not the cloud streaming server has failed. The storage unit 210 may be an optical recording medium such as a magnetic medium such as a hard disk, a floppy disk and a magnetic tape, a compact disk read only memory (CD-ROM), and a digital video disk (DVD) A magneto-optical medium such as a floppy disk and a ROM, a random access memory (RAM), and a flash memory.

비교부(220)는 테스트 제어부(200)의 제어에 따라 각각의 가상 클라이언트 모듈(250, 252, 254)에서 수신되어 화면으로 출력된 테스트 결과 비디오의 전달을 요구할 수 있고 테스트 결과 비디오를 캡처하여 생성된 테스트 결과 이미지를 기준 결과 이미지를 비교한 후 비교 결과를 테스트 제어부(200)로 출력한다. 이를 위해, 상기 비교부(220)는 상기 기준 결과 이미지를 설정하는 과정을 더 수행할 수 있다. 즉, 비교부(220)는 상기 클라우드 스트리밍 서버들 중 하나인 기준 서버에 상응하는 테스트 결과 비디오를 캡처하여 생성된 테스트 결과 이미지와, 다른 클라우드 스트리밍 서버들에 상응하는 테스트 결과 비디오들을 캡처하여 생성된 테스트 결과 이미지들을 비교할 수 있다.The comparison unit 220 can request the delivery of the test result video received from the respective virtual client modules 250, 252, and 254 according to the control of the test control unit 200 and capture the test result video, The test result image is compared with the reference result image, and the comparison result is outputted to the test control unit 200. For this, the comparison unit 220 may further perform the process of setting the reference result image. That is, the comparison unit 220 captures the test result image generated by capturing the test result video corresponding to the reference server, which is one of the cloud streaming servers, and the test result video corresponding to the other cloud streaming servers, You can compare images as a result of testing.

입력부(230)는 클라우드 스트리밍 서버 관리자의 조작에 따라서 클라우드 스트리밍 서버 관리자의 요청이나 정보에 해당하는 사용자 입력 신호를 발생할 수 있으며, 현재 상용화되어 있거나 향후 상용화가 가능한 다양한 입력 수단으로 구현될 수 있으며, 예를 들면, 키보드, 마우스, 조이스틱, 터치 스크린, 터치 패드 등과 같은 일반적인 입력 장치뿐만 아니라, 사용자의 모션을 감지하여 특정 입력 신호를 발생하는 제스처 입력 수단을 포함할 수 있다.The input unit 230 can generate a user input signal corresponding to a request or information of the cloud streaming server manager according to an operation of the cloud streaming server manager and can be implemented by various input means that are currently commercialized or can be commercialized in the future, For example, it may include general input devices such as a keyboard, a mouse, a joystick, a touch screen, and a touch pad, as well as a gesture input means for sensing a user's motion and generating a specific input signal.

출력부(240)는 테스트 장치(120)의 동작 결과나 상태를 사용자가 인식할 수 있도록 제공하는 수단으로서, 예를 들면, 화면을 통해 시각적으로 출력하는 표시부나, 가청음을 출력하는 스피커 등을 포함할 수 있다. 특히, 본 발명에 있어서, 출력부(240)은 상기 적어도 하나의 가상 클라이언트 모듈(250, 252, 254)로부터 처리되어 출력되는 결과 이미지를 시각적으로 출력할 수 있으며, 또한 결과 이미지와 기준 결과 이미지를 비교하여 출력하거나, 클라우드 스트리밍 서버의 장애 여부 결과를 표시할 수 있다.The output unit 240 is a means for providing a user with an operation result or status of the test apparatus 120. For example, the output unit 240 includes a display unit for visually outputting the result through a screen, a speaker for outputting an audible sound, can do. Particularly, in the present invention, the output unit 240 can visually output the result image processed and output from the at least one virtual client module 250, 252, and 254, and can also output the result image and the reference result image Or output a result of the failure of the cloud streaming server.

가상 클라이언트 모듈(250, 252, 254)은 클라우드 스트리밍 서버(130, 140, 150)에 접속하여 클라우드 스트리밍 서비스를 제공받는 클라이언트(100, 101, 102)를 가상화한 구성으로서, 실제 클라이언트(100, 101, 102)의 기능 중 적어도 일부의 기능을 수행할 수 있다. 예를 들어, 상기 가상 클라이언트 모듈(250, 252, 254)는 특정 클라우드 스트리밍 서버(130, 140, 150)에 접속하여 특정 클라우드 스트리밍 서버(130, 140, 150)로부터 각각의 테스트 결과를 수신하여, 상기 수신된 테스트 결과에 대하여 클라이언트(100, 101, 102)와 동일한 처리(예를 들어, 디코딩 등)를 수행하여 테스트 결과 비디오를 생성하고, 이를 출력부(240)를 통해 화면으로 출력할 수 있다. 이 때, 가상 클라이언트 모듈(250, 252, 254)은 비교부(220)의 결과 이미지 요구에 따라서, 특정 시점에 화면으로 출력되는 결과 이미지를 캡처하여 비교부(220)로 전달할 수 있다. 이 때, 캡처 시점은 비교부(220)로부터 수신할 수도 있고, 미리 설정하여 저장하고 있을 수도 있다. 상기 결과 이미지의 캡처는 예를 들어, 가상 클라이언트 모듈(250, 252, 254)의 프레임 버퍼에 저장된 이미지 데이터를 캡처하는 방식으로 이루어질 수 있다. 실시예에 따라, 테스트 결과 비디오를 캡처하여 테스트 결과 이미지를 생성하는 것은 비교부(220)에서 수행될 수도 있다.The virtual client modules 250, 252 and 254 virtualize the clients 100, 101 and 102 which are connected to the cloud streaming servers 130, 140 and 150 and are provided with the cloud streaming service, , 102) that are capable of performing at least some functions. For example, the virtual client modules 250, 252, and 254 may access the specific cloud streaming servers 130, 140, and 150 to receive respective test results from the specific cloud streaming servers 130, 140, and 150, (E.g., decoding) the same as the client 100, 101, or 102 with respect to the received test result to generate a test result video and output it to the screen through the output unit 240 . At this time, the virtual client modules 250, 252, and 254 may capture the result image output to the screen at a specific time according to the result image request of the comparison unit 220, and may transmit the captured result image to the comparison unit 220. At this time, the capture time may be received from the comparison unit 220, or may be preset and stored. The capture of the resulting image may be done in a manner, for example, by capturing the image data stored in the frame buffer of the virtual client module 250, 252, 254. According to an embodiment, it may be performed in the comparison unit 220 to capture a test result video and generate a test result image.

즉, 가상 클라이언트 모듈(250, 252, 254)은 클라우드 스트리밍 서버로 테스트 스크립트 키 입력을 제공하고, 클라우드 스트리밍 서버로부터 테스트 스크립트 키 입력에 상응하는 테스트 결과를 제공 받아서 이를 디코딩하여 테스트 결과 비디오를 생성한다. 이 때, 테스트 결과는 인코딩된 스트리밍 비디오로 볼 수 있고, 테스트 결과 비디오는 디코딩된 스트리밍 비디오로 볼 수 있다.That is, the virtual client modules 250, 252, and 254 provide a test script key input to the cloud streaming server, receive test results corresponding to the test script key input from the cloud streaming server, decode them, and generate a test result video . At this time, the test result can be viewed as encoded streaming video, and the test result video can be viewed as decoded streaming video.

이러한 가상 클라이언트 모듈(250, 252, 254)의 내부 구성은 도 3과 같이 도시할 수 있다. 각각의 가상 클라이언트 모듈(250, 252, 254)의 구성은 동일하므로 도 3의 설명에서는 도면부호 250의 가상 클라이언트 모듈을 예로들어 설명하도록 한다.The internal configuration of the virtual client modules 250, 252, and 254 may be as shown in FIG. Since the configurations of the respective virtual client modules 250, 252, and 254 are the same, the virtual client module 250 will be described as an example in the description of FIG.

도 3을 참조하면, 가상 클라이언트 모듈(250)는 제어부(300), 통신부(302), 저장부(304)를 포함하여 구성할 수 있다.Referring to FIG. 3, the virtual client module 250 may include a controller 300, a communication unit 302, and a storage unit 304.

이러한 가상 클라이언트 모듈(250)은 클라우드 스트리밍 서버(130, 140, 150)로부터 제공되는 데이터를 수신할 수 있는 단말 장치 예를 들어, 태블릿 PC(Tablet PC), 랩톱(Laptop), 개인용 컴퓨터(PC: Personal Computer), 스마트폰(Smart Phone), 개인휴대용 정보단말기(PDA: Personal Digital Assistant), 스마트 TV 및 이동통신 단말기(Mobile Communication Terminal), 셋탑박스 중 하나의 단말을 가상화하여 구현될 수 있다. 따라서, 상기 가상 클라이언트 모듈(250)은 어떤 종류의 단말 장치이냐에 따라서 그 구성 또한 상이하게 구성될 것이다. 특히, 본 발명에 있어서, 가상 클라이언트 모듈(250)은 테스트 결과의 수신 및 수신된 테스트 결과의 디코딩, 테스트 결과 비디오 생성 및 화면 출력 기능까지 수행하도록 구현될 수 있다.The virtual client module 250 may be a terminal device capable of receiving data provided from the cloud streaming servers 130, 140 and 150, for example, a tablet PC, a laptop, a personal computer (PC) A Smart Phone, a Personal Digital Assistant (PDA), a smart TV, a mobile communication terminal, or a set-top box. Accordingly, the virtual client module 250 may be configured differently depending on what type of terminal device it is. In particular, in the present invention, the virtual client module 250 may be implemented to perform a test result reception, a decoding of a received test result, a test result video generation, and a screen output function.

제어부(300)는 가상 클라이언트 모듈(250)의 전반적인 제어를 수행하고, 특히 비교부(220)로부터 클라우드 스트리밍 서버(130, 140, 150)로부터의 요구에 따라 특정 시점에 화면으로 출력되는 결과 이미지를 추출하여 비교부(220)로 전달한다. 또한, 제어부(300)는 통신부(302)를 통해서 특정 클라우드 스트리밍 서버(130, 140, 150)로 테스트 결과 전송 요청 신호를 전송할 수 있다. 상기 테스트 결과 전송 요청 신호의 전송시, 이를 수신할 가상 클라이언트 모듈의 식별 정보를 함께 전송할 수 있으며, 또한, 다수의 클라우드 스트리밍 서버의 테스트 스케쥴에 따라서, 클라우드 스트리밍 서버별 테스트 결과 전송 요청 신호를 순차적으로 전송할 수 있다.The control unit 300 controls the overall control of the virtual client module 250 and controls the overall operation of the virtual client module 250 in response to a request from the cloud streaming server 130, And transmits it to the comparison unit 220. In addition, the control unit 300 can transmit a test result transmission request signal to the specific cloud streaming servers 130, 140 and 150 through the communication unit 302. The test result transmission request signal for each cloud streaming server may be sequentially transmitted according to the test schedule of the plurality of cloud streaming servers. Lt; / RTI >

통신부(302)는 통신망(110)을 통해 클라우드 스트리밍 서버(130, 140, 150)로부터 전송된 테스트 결과를 수신한다. 이러한 통신부(302)는 유선 방식 및 무선 방식뿐만 아니라 다양한 통신 방식을 통해서 데이터를 송수신할 수 있다. 더하여, 통신부(302)는 하나 이상의 통신 방식을 사용하여 데이터를 송수신할 수 있으며, 이를 위하여 통신부(302)는 각각 서로 다른 통신 방식에 따라서 데이터를 송수신하는 복수의 통신 모듈을 포함할 수 있다.The communication unit 302 receives test results transmitted from the cloud streaming servers 130, 140, and 150 through the communication network 110. The communication unit 302 can transmit and receive data through various communication methods as well as wired and wireless methods. In addition, the communication unit 302 may transmit and receive data using one or more communication methods. For this purpose, the communication unit 302 may include a plurality of communication modules that transmit and receive data according to different communication methods, respectively.

저장부(304)는 가상 클라이언트 모듈(250)의 동작에 필요한 정보들을 저장하며, 특히, 클라우드 스트리밍 서버(130, 140, 150)로부터 수신한 테스트 결과를 저장할 수 있다. 또한, 수신한 테스트 결과에 대하여 소정의 데이터 처리를 수행하여 최종적으로 화면으로 출력된 테스트 결과 비디오를 저장할 수 있으며, 또한, 설정에 따라 결과 이미지의 캡처 시점 정보를 미리 저장하고 있을 수도 있다. 이러한 저장부(304)는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic Media), CD-ROM(Compact Disk Read Only Memory), DVD(Digital Video Disk)와 같은 광 기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media) 및 롬(ROM), 램(RAM, Random Access Memory), 플래시 메모리를 포함한다. The storage unit 304 stores information necessary for the operation of the virtual client module 250 and may store test results received from the cloud streaming servers 130, 140 and 150. In addition, it is also possible to perform predetermined data processing on the received test result to finally save the test result video output to the screen, and to store the capture time point information of the resultant image according to the setting in advance. The storage unit 304 may be an optical recording medium such as a magnetic medium such as a hard disk, a floppy disk and a magnetic tape, a CD-ROM (Compact Disc Read Only Memory), a DVD (Digital Video Disk) A magneto-optical medium such as a floppy disk and a ROM, a random access memory (RAM), and a flash memory.

그러면, 상기와 같이 구성된 테스트 시스템에서 클라우드 스트리밍 서버의 정상 동작 여부를 테스트하는 과정에 대해 첨부된 도 4 및 도 5을 참조하여 구체적으로 설명하기로 한다.Hereinafter, a process of testing whether the cloud streaming server operates normally in the test system configured as described above will be described in detail with reference to FIGS. 4 and 5.

도 4는 본 발명의 실시예에 따른 테스트 시스템에서 클라우드 스트리밍 서버의 정상 동작 여부를 테스트하기 위한 과정을 나타내는 흐름도이다.4 is a flowchart illustrating a procedure for testing whether a cloud streaming server operates normally in a test system according to an embodiment of the present invention.

클라우드 스트리밍 서버(130, 140, 150)는 테스트 결과를 테스트 장치(120)의 가상 클라이언트 모듈(250, 252, 254)로 동시에 전송한다(S402 내지 S406). 즉, 한 클라우드 스트리밍 서버(130)는 가상 클라이언트 모듈(250)로 테스트 결과를 전송하고, 다른 클라우드 스트리밍 서버(140)는 가상 클라이언트 모듈(252)로 테스트 결과를 전송하고, 나머지 클라우드 스트리밍 서버(150)는 가상 클라이언트 모듈(254)로 테스트 결과를 전송할 수 있다. 이와 달리, 하나의 가상 클라이언트 모듈이 다수의 클라우드 스트리밍 서버(130, 140, 150)로부터 시간 차를 두고 순차적으로 테스트 결과를 수신할 수도 있다.The cloud streaming server 130, 140, 150 simultaneously transmits the test result to the virtual client module 250, 252, 254 of the test apparatus 120 (S402 to S406). That is, one cloud streaming server 130 transmits the test result to the virtual client module 250, the other cloud streaming server 140 transmits the test result to the virtual client module 252, and the remaining cloud streaming server 150 May send the test results to the virtual client module 254. Alternatively, one virtual client module may sequentially receive test results from the plurality of cloud streaming servers 130, 140, and 150 with a time difference.

이 때, 클라우드 스트리밍 서버(130, 140, 150)는 가상 클라이언트 모듈(250, 252, 254)의 테스트 스크립트 키 입력에 상응하여 테스트 결과를 전송하는 것일 수 있다.At this time, the cloud streaming server 130, 140, 150 may transmit the test result corresponding to the test script key input of the virtual client module 250, 252, 254.

테스트 결과를 수신한 테스트 장치(120)의 테스트 제어부(200)는 테스트 요구에 따라 테스트 결과 비디오를 캡처한 테스트 결과 이미지를 이용한 비교를 요청한다(S408, S410).Upon receiving the test result, the test control unit 200 of the test apparatus 120 requests a comparison using the test result image that captured the test result video according to the test request (S408, S410).

테스트 장치(120)의 비교부(220)는 각 가상 클라이언트 모듈(250, 252, 254)로 클라우드 스트리밍 서버(130, 140, 150)로부터 수신한 테스트 결과 전달을 요구할 수 있다.The comparing unit 220 of the test apparatus 120 may request the delivery of the test results received from the cloud streaming servers 130, 140 and 150 to the virtual client modules 250, 252 and 254.

각 가상 클라이언트 모듈(250, 252, 254)는 수신 테스트 결과를 비교부(220)로 전달한다(S414, S418, S422). 이 때, 상기 가상 클라이언트 모듈(250, 252, 254)은 수신한 테스트 결과를 실제 클라이언트(100, 101, 102)에서와 같이 처리하여 테스트 결과 비디오를 생성한 후, 화면으로 출력되도록 하는데, 이 때, 상기 비교부(220)에서 요구한 시점, 또는 기설정된 특정 시점에 화면으로 출력되는 테스트 결과 비디오를 캡처하여 비교부(220)로 전송할 수 있다. 즉, 테스트 결과 비디오를 캡처하여 테스트 결과 이미지를 생성하는 것은 가상 클라이언트 모듈(250, 252, 254)에 의하여 수행될 수도 있고, 비교부(220)에 의하여 수행될 수도 있다.Each of the virtual client modules 250, 252, and 254 transmits the reception test result to the comparison unit 220 (S414, S418, and S422). At this time, the virtual client modules 250, 252, and 254 process the received test results as they are in the actual clients 100, 101, and 102 to generate a test result video, The test result video that is output to the screen at a time point requested by the comparison unit 220 or at a predetermined specific time point may be captured and transmitted to the comparison unit 220. [ That is, the capture of the test result video and generation of the test result image may be performed by the virtual client module 250, 252, and 254, or may be performed by the comparison unit 220.

이후, 비교부(220)는 수신한 각 테스트 결과 비디오를 캡처한 테스트 결과 이미지와 기설정된 기준 결과 이미지를 비교한 후 비교 결과를 테스트 제어부(200)로 전달한다(S424, S426). 여기서, 기준 결과 이미지는, 테스트 결과가 정상적으로 전송되어 출력될 때 나타나는 결과 이미지를 미리 저장하고 있을 수도 있으며, 상기 가상 클라이언트 모듈(250, 252, 254) 중 기설정된 특정 가상 클라이언트 모듈로부터 출력된 결과 이미지를 기준 결과 이미지로 설정할 수도 있다. 이를 위하여, 상기 비교부(220)는 비교를 수행하기에 앞서, 기준 결과 이미지를 설정하는 과정을 더 수행할 수 있다.Thereafter, the comparing unit 220 compares the captured test result image with the predetermined reference result image, and transmits the comparison result to the test controller 200 (S424, S426). Here, the reference result image may previously store a result image that is displayed when the test result is normally transmitted and output, and may output the result image, which is output from the predetermined specific virtual client module among the virtual client modules 250, 252, May be set as the reference result image. For this, the comparing unit 220 may further perform a process of setting a reference result image before performing the comparison.

그러면, 테스트 제어부(200)는 비교 결과에 따라 클라우드 스트리밍 서버의 장애 여부를 판단하는데, 이 때 비교결과 수신한 테스트 결과에서 캡처한 결과 이미지와 미리 설정된 기준 결과 이미지가 서로 일치하지 않으면 해당 클라우드 스트리밍 서버는 장애가 있다고 판단하고, 서로 일치하면 해당 클라우드 스트리밍 서버에 장애가 없다고 판단한다(S427). 이 때, 비교 결과는 도면부호 130, 140, 150의 클라우드 스트리밍 서버 각각에 대해 테스트 제어부(200)로 전달되고, 테스트 제어부(200)는 비교 결과에 따라 각 클라우드 스트리밍 서버에 대한 장애 여부를 판단하게 될 것이다.The test control unit 200 determines whether or not the cloud streaming server has failed according to the comparison result. If the resultant image captured in the test result received as a result of the comparison and the preset reference result image do not match each other, If there is a failure, it is determined that there is no failure in the cloud streaming server (S427). At this time, the comparison result is transmitted to the test control unit 200 for each of the cloud streaming servers 130, 140 and 150, and the test control unit 200 determines whether or not the respective cloud streaming servers are faulty Will be.

또한, 테스트 제어부(200)는 기준 서버 변경 조건 만족 여부를 판단한다(S428).The test control unit 200 determines whether the reference server change condition is satisfied (S428).

변경 조건이 만족된 것으로 판단되면 테스트 제어부(200)는 기준 서버를 변경한다(S429).If it is determined that the change condition is satisfied, the test control unit 200 changes the reference server (S429).

이 때, 변경 조건은 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 기설정된 기준값 이상일 조건일 수 있다. 즉, 너무 많은 수의 장애가 감지된다면 기준 서버에 장애가 발생한 것일 수 있고, 이 경우 기준 서버를 변경하여야 잘못된 테스트 결과가 나오는 것을 방지할 수 있다.At this time, the change condition may be a condition that the number of cloud streaming servers judged as having a failure is equal to or higher than a preset reference value. That is, if too many failures are detected, the reference server may have failed, and in this case, it is necessary to change the reference server to prevent a false test result from being generated.

도 5는 본 발명의 실시예에 따른 테스트 장치(120)에서 클라우드 스트리밍 서버(130, 140, 150)의 정상 동작 여부를 테스트하기 위한 기준 서버 변경 방법을 나타내는 동작 흐름도이다.5 is an operation flowchart illustrating a reference server changing method for testing whether or not the cloud streaming server 130, 140, 150 is normally operated in the test apparatus 120 according to the embodiment of the present invention.

도 5를 참조하면, 본 발명의 일실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 먼저 가상 클라이언트 모듈들에 의해 클라우드 스트리밍 서버들로 테스트 스크립트에 상응하는 키 입력을 전송한다(S510).Referring to FIG. 5, in the reference server changing method for testing a cloud streaming server according to an embodiment of the present invention, a key input corresponding to a test script is transmitted to the cloud streaming servers by the virtual client modules (S510 ).

또한, 본 발명의 일실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 클라우드 스트리밍 서버들로부터 가상 클라이언트 모듈들이 테스트 결과들을 수신하여 테스트 결과 비디오들을 생성한다(S520).In addition, in the reference server changing method for testing the cloud streaming server according to the embodiment of the present invention, the virtual client modules receive test results from the cloud streaming servers and generate test result videos in operation S520.

또한, 본 발명의 일실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 테스트 결과 비디오들을 캡처하여 테스트 결과 이미지들을 생성한다(S530).In addition, a reference server changing method for testing a cloud streaming server according to an exemplary embodiment of the present invention captures test result videos and generates test result images (S530).

이 때, 클라우드 스트리밍 서버들에 상응하는 테스트 결과 이미지들은 모두 기준 서버에 상응하는 테스트 결과 이미지와 동일 시점에 캡처될 수 있다.At this time, test result images corresponding to the cloud streaming servers may all be captured at the same time as the test result image corresponding to the reference server.

이 때, 단계(S530)는 도 2에 도시된 가상 클라이언트 모듈(250, 252, 254)에 의해 수행될 수도 있고, 비교부(220)에 의해 수행될 수도 있다.At this time, step S530 may be performed by the virtual client modules 250, 252, and 254 shown in FIG. 2, or may be performed by the comparison unit 220. [

또한, 본 발명의 일실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 기준 서버의 테스트 결과 이미지를 다른 클라우드 스트리밍 서버들의 테스트 결과 이미지와 비교하여 비교 결과가 일치하는지 판단한다(S540, S550).Also, in the reference server changing method for testing a cloud streaming server according to an exemplary embodiment of the present invention, the test result image of the reference server is compared with the test result image of the other cloud streaming servers to determine whether the comparison result is identical (S540, S550).

비교 결과가 일치하면, 본 발명의 일실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 해당 클라우드 스트리밍 서버에 장애가 없다고 판단한다(S551).If the comparison results match, the reference server changing method for testing the cloud streaming server according to the embodiment of the present invention determines that there is no obstacle in the corresponding cloud streaming server (S551).

비교 결과가 일치하지 않으면, 본 발명의 일실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 해당 클라우드 스트리밍 서버에 장애가 있다고 판단한다(S560).If the comparison result does not match, the reference server changing method for testing the cloud streaming server according to the embodiment of the present invention determines that the corresponding cloud streaming server has a failure (S560).

또한, 본 발명의 일실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 기준 서버 변경 조건이 만족되었는지 여부를 판단한다(S570).In addition, the reference server changing method for testing the cloud streaming server according to an embodiment of the present invention determines whether the reference server changing condition is satisfied (S570).

이 때, 변경 조건은 클라우드 스트리밍 서버들 중 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 기설정된 기준값 이상인 조건일 수 있다.In this case, the change condition may be a condition that the number of cloud streaming servers judged as having a failure among the cloud streaming servers is equal to or greater than a preset reference value.

단계(S570)의 판단 결과, 기준 서버 변경 조건이 만족되었다고 판단되면 본 발명의 일실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 기준 서버를 변경(S580)하고 다시 테스트 결과 이미지들을 비교한다(S540).If it is determined in step S570 that the reference server changing condition is satisfied, the reference server changing method for testing the cloud streaming server according to the embodiment of the present invention changes the reference server (S580) (S540).

본 발명의 일실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 테스트 종료 조건 만족 여부를 판단(S552)하고, 테스트 종료 조건이 만족되면 동작을 종료한다.The reference server changing method for testing the cloud streaming server according to an embodiment of the present invention determines whether the test end condition is satisfied (S552), and ends the operation when the test end condition is satisfied.

이 때, 테스트 종료 조건은 사용자로부터 테스트 종료 입력이 수신되는 것일 수도 있고, 기설정된 기간 동안 기설정된 레벨 이하의 장애가 발생하는 조건일 수도 있다.At this time, the test termination condition may be a test termination input from the user, or a condition in which a failure below a predetermined level occurs for a predetermined period of time.

도 5에는 도시되지 아니하였으나, 본 발명의 일실시예에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 상기 기준 서버를 변경하기 이전에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 상기 기준 서버를 변경한 이후에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수보다 기설정된 개수 이상 많은 경우, 변경전 기준 서버에 장애가 있는 것으로 판단하는 단계를 더 포함할 수 있다.Although not shown in FIG. 5, a method of changing a reference server for testing a cloud streaming server according to an embodiment of the present invention is characterized in that the number of cloud streaming servers determined as having a failure before changing the reference server, And determining that there is a failure in the reference server before the change if the number of cloud streaming servers is greater than the predetermined number of cloud streaming servers determined as having a failure after the change.

본 발명에 따른 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법은 다양한 컴퓨터 수단을 통하여 판독 가능한 소프트웨어 형태로 구현되어 컴퓨터로 판독 가능한 기록매체에 기록될 수 있다. 여기서, 기록매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 기록매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 예컨대 기록매체는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic Media), CD-ROM(Compact Disk Read Only Memory), DVD(Digital Video Disk)와 같은 광 기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media), 및 롬(ROM), 램(RAM, Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치를 포함한다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 이러한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The reference server changing method for testing a cloud streaming server according to the present invention may be implemented in a form of software readable by various computer means and recorded in a computer-readable recording medium. Here, the recording medium may include program commands, data files, data structures, and the like, alone or in combination. Program instructions to be recorded on a recording medium may be those specially designed and constructed for the present invention or may be available to those skilled in the art of computer software. For example, the recording medium may be an optical recording medium such as a magnetic medium such as a hard disk, a floppy disk and a magnetic tape, a compact disk read only memory (CD-ROM), a digital video disk (DVD) Includes a hardware device that is specially configured to store and execute program instructions such as a magneto-optical medium such as a floppy disk and a ROM, a random access memory (RAM), a flash memory, do. Examples of program instructions may include machine language code such as those generated by a compiler, as well as high-level language code that may be executed by a computer using an interpreter or the like. Such hardware devices may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.

한편, 본 명세서와 도면에 개시된 본 발명의 실시예들은 이해를 돕기 위해 특정 예를 제시한 것에 지나지 않으며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 자명한 것이다.It should be noted that the embodiments of the present invention disclosed in the present specification and drawings are only illustrative of specific examples for the purpose of understanding and are not intended to limit the scope of the present invention. It will be apparent to those skilled in the art that other modifications based on the technical idea of the present invention are possible in addition to the embodiments disclosed herein.

본 발명은 특정 서비스를 제공하는 클라우드 스트리밍 서버의 정상 동작 여부를 테스트 하기 위한 시스템에 관한 것으로서, 특히 클라우드 스트리밍 서비스를 제공하는 서버가 정상적으로 동작하는 지를 확인할 수 있도록 함으로써, 클라우드 스트리밍 서버에서 데이터 전송 시 발생할 수 있는 전송 오류 혹은 장애를 사전에 방지할 수 있도록 하고, 또한 클라우드 스트리밍 서버의 정상 동작 여부를 보다 손쉽게 검출할 수 있도록 하고, 이를 통해 클라우드 스트리밍 서비스의 안정화 및 서비스 품질 향상을 도모하여 산업의 발전에 이바지할 수 있다.The present invention relates to a system for testing whether a cloud streaming server providing a specific service operates normally, and more particularly, to a system for testing whether a server providing a cloud streaming service operates normally, In addition, it is possible to more easily detect whether or not the cloud streaming server is operating normally, thereby stabilizing the cloud streaming service and improving the service quality. You can contribute.

100, 101, 102: 클라이언트
110: 통신망 120: 테스트 장치
130, 140, 150: 클라우드 스트리밍 서버
200: 테스트 제어부 210: 저장부
220: 비교부 230: 입력부
240: 출력부
250, 252, 254: 가상 클라이언트 모듈
300: 제어부 302: 통신부
304: 저장부
100, 101, 102: Client
110: communication network 120: test apparatus
130, 140, 150: Cloud streaming server
200: test control unit 210:
220: comparison unit 230: input unit
240: Output section
250, 252, 254: Virtual Client Module
300: control unit 302: communication unit
304:

Claims (12)

클라우드 스트리밍 서버들로부터, 기설정된 테스트 스크립트 키 입력에 상응하는 테스트 결과들을 수신하여 테스트 결과 비디오들을 생성하는 가상 클라이언트 모듈들;
상기 클라우드 스트리밍 서버들 중 하나인 기준 서버에 상응하는 테스트 결과 비디오를 캡처하여 생성된 테스트 결과 이미지와, 다른 클라우드 스트리밍 서버들에 상응하는 테스트 결과 비디오들을 캡처하여 생성된 테스트 결과 이미지들을 비교하는 비교부; 및
상기 비교 결과에 따라 상기 클라우드 스트리밍 서버들 중 어느 하나 이상의 장애 여부를 판단하고, 상기 기준 서버의 변경 조건이 만족되는 경우 상기 기준 서버를 변경하는 테스트 제어부
를 포함하는 것을 특징으로 하는 클라우드 스트리밍 서버 테스트 장치.
Virtual client modules for receiving test results corresponding to preset test script key inputs from the cloud streaming servers and generating test result videos;
A comparison unit for comparing the test result images generated by capturing the test result video corresponding to the reference server which is one of the cloud streaming servers and the test result images generated by capturing the test result videos corresponding to the other cloud streaming servers, ; And
Determining whether any one or more of the cloud streaming servers have failed based on the comparison result, and changing the reference server if the change condition of the reference server is satisfied,
And a controller for controlling the cloud streaming server.
◈청구항 2은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 2 is abandoned due to payment of registration fee. 청구항 1에 있어서,
상기 테스트 제어부는,
상기 비교 결과, 비교되는 두 이미지가 서로 일치하면 해당 클라우드 스트리밍 서버는 장애가 없다고 판단하고, 두 이미지가 서로 일치하지 않으면 해당 클라우드 스트리밍 서버에 장애가 있다고 판단하는 것을 특징으로 하는 클라우드 스트리밍 서버 테스트 장치.
The method according to claim 1,
The test control unit,
And if the two images to be compared match, the corresponding cloud streaming server determines that there is no failure, and if the two images do not coincide with each other, the cloud streaming server determines that there is a failure in the corresponding cloud streaming server.
◈청구항 3은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 3 is abandoned due to the registration fee. 청구항 1에 있어서,
상기 다른 클라우드 스트리밍 서버들에 상응하는 상기 테스트 결과 이미지들은 상기 기준 서버에 상응하는 테스트 결과 이미지와 동일 시점에 캡처되는 것을 특징으로 하는 클라우드 스트리밍 서버 테스트 장치.
The method according to claim 1,
Wherein the test result images corresponding to the other cloud streaming servers are captured at the same time as the test result image corresponding to the reference server.
◈청구항 4은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 4 is abandoned due to the registration fee. 청구항 3에 있어서,
상기 기준 서버의 변경 조건은
상기 다른 클라우드 스트리밍 서버들 중 상기 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 기설정된 기준값 이상인 조건인 것을 특징으로 하는 클라우드 스트리밍 서버 테스트 장치.
The method of claim 3,
The changing condition of the reference server is
Wherein the number of cloud streaming servers judged to have the fault among the other cloud streaming servers is equal to or greater than a preset reference value.
◈청구항 5은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 5 is abandoned due to the registration fee. 청구항 4에 있어서,
상기 테스트 제어부는
상기 기준 서버를 변경하기 이전에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 상기 기준 서버를 변경한 이후에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수보다 기설정된 개수 이상 많은 경우, 변경전 기준 서버에 장애가 있는 것으로 판단하는 것을 특징으로 하는 클라우드 스트리밍 서버 테스트 장치.
The method of claim 4,
The test control unit
When the number of cloud streaming servers judged as having a failure before changing the reference server is greater than a predetermined number of cloud streaming servers judged as having a failure after changing the reference server, And determines that there is a cloud streaming server.
가상 클라이언트 모듈들이, 클라우드 스트리밍 서버들로부터 전송된 테스트 결과들을 수신하여 테스트 결과 비디오들을 생성하는 단계;
상기 클라우드 스트리밍 서버들 중 하나인 기준 서버에 상응하는 테스트 결과 비디오를 캡처하여 생성된 테스트 결과 이미지와, 다른 클라우드 스트리밍 서버들에 상응하는 테스트 결과 비디오들을 캡처하여 생성된 테스트 결과 이미지들을 비교하는 단계;
상기 비교 결과에 따라 상기 클라우드 스트리밍 서버들 중 어느 하나 이상에 장애가 발생하였다고 판단하는 단계; 및
상기 기준 서버의 변경 조건이 만족된 경우 상기 기준 서버를 변경하는 단계
를 포함하는 것을 특징으로 하는 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법.
The virtual client modules receiving test results transmitted from the cloud streaming servers and generating test result videos;
Capturing a test result video corresponding to a reference server that is one of the cloud streaming servers and comparing the generated test result image with the generated test result images by capturing test result videos corresponding to other cloud streaming servers;
Determining that a failure has occurred in one or more of the cloud streaming servers according to the comparison result; And
And changing the reference server if the change condition of the reference server is satisfied
The method of claim 1, further comprising:
◈청구항 7은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 7 is abandoned due to registration fee. 청구항 6에 있어서,
상기 다른 클라우드 스트리밍 서버들에 상응하는 상기 테스트 결과 이미지들은 상기 기준 서버에 상응하는 테스트 결과 이미지와 동일 시점에 캡처되는 것을 특징으로 하는 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법.
The method of claim 6,
Wherein the test result images corresponding to the other cloud streaming servers are captured at the same time as the test result image corresponding to the reference server.
◈청구항 8은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 8 is abandoned due to the registration fee. 청구항 7에 있어서,
상기 변경 조건은
상기 다른 클라우드 스트리밍 서버들 중 상기 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 기설정된 기준값 이상인지 여부인 것을 특징으로 하는 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법.
The method of claim 7,
The change condition
Wherein the number of the cloud streaming servers judged to have the fault among the other cloud streaming servers is equal to or greater than a preset reference value.
◈청구항 9은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 9 is abandoned upon payment of registration fee. 청구항 8에 있어서,
상기 기준 서버 변경 방법은,
상기 기준 서버를 변경하기 이전에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수가 상기 기준 서버를 변경한 이후에 장애가 있는 것으로 판단된 클라우드 스트리밍 서버들의 수보다 기설정된 개수 이상 많은 경우, 변경전 기준 서버에 장애가 있는 것으로 판단하는 단계를 더 포함하는 것을 특징으로 하는 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법.
The method of claim 8,
The reference server changing method includes:
When the number of cloud streaming servers judged as having a failure before changing the reference server is greater than a predetermined number of cloud streaming servers judged as having a failure after changing the reference server, And determining that there is a reference server in the cloud streaming server.
◈청구항 10은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 10 is abandoned due to the registration fee. 청구항 6에 있어서,
상기 장애가 발생하였다고 판단하는 단계는
상기 비교 결과, 비교되는 두 이미지의 불일치에 기반하여 상기 장애가 발생한 것으로 판단하는 것을 특징으로 하는 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법.
The method of claim 6,
The step of determining that the failure has occurred
And determining that the failure has occurred based on a mismatch between two images to be compared as a result of the comparison.
◈청구항 11은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 11 is abandoned due to registration fee. 제6항 내지 제10항 중 어느 한 항에 기재된 클라우드 스트리밍 서버를 테스트하기 위한 기준 서버 변경 방법을 실행하는 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.A computer-readable recording medium on which a program for executing a reference server changing method for testing a cloud streaming server according to any one of claims 6 to 10 is recorded. 장애 여부 테스트를 위하여 기설정된 테스트 스크립트 키 입력에 상응하는 테스트 결과들을 전송하는 클라우드 스트리밍 서버들; 및
상기 클라우드 스트리밍 서버들 중 하나인 기준 서버에 상응하는 테스트 결과 비디오를 캡처하여 생성된 테스트 결과 이미지와, 다른 클라우드 스트리밍 서버들에 상응하는 테스트 결과 비디오들을 캡처하여 생성된 테스트 결과 이미지들을 비교하여 상기 클라우드 스트리밍 서버들 중 하나 이상의 장애 여부를 판단하고, 상기 기준 서버의 변경 조건이 만족되는 경우 상기 기준 서버를 변경하는 테스트 장치
를 포함하는 것을 특징으로 하는 클라우드 스트리밍 서버의 테스트 시스템.
Cloud streaming servers for transmitting test results corresponding to pre-set test script key inputs for failure testing; And
A test result image generated by capturing a test result video corresponding to a reference server that is one of the cloud streaming servers and a test result image generated by capturing test result videos corresponding to other cloud streaming servers are compared with each other, A test server for judging whether or not one or more of the streaming servers are faulty and changing the reference server if the change condition of the reference server is satisfied,
And transmitting the test result to the cloud server.
KR1020140028005A 2014-03-10 2014-03-10 Method for changing reference server for testing cloud streaming server, apparatus and system therefor KR101997649B1 (en)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020140028005A KR101997649B1 (en) 2014-03-10 2014-03-10 Method for changing reference server for testing cloud streaming server, apparatus and system therefor
EP14885807.9A EP3119093B1 (en) 2014-03-10 2014-12-15 Method for testing cloud streaming server, and apparatus and system therefor
JP2016556717A JP6383799B2 (en) 2014-03-10 2014-12-15 Cloud streaming server test method, apparatus and system therefor
PCT/KR2014/012350 WO2015137604A1 (en) 2014-03-10 2014-12-15 Method for testing cloud streaming server, and apparatus and system therefor
CN201480077093.6A CN106105242B (en) 2014-03-10 2014-12-15 Method, device and system for testing cloud-end streaming media server
US15/123,213 US10313207B2 (en) 2014-03-10 2014-12-15 Method for testing cloud streaming server, and apparatus and system therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140028005A KR101997649B1 (en) 2014-03-10 2014-03-10 Method for changing reference server for testing cloud streaming server, apparatus and system therefor

Publications (2)

Publication Number Publication Date
KR20150105883A KR20150105883A (en) 2015-09-18
KR101997649B1 true KR101997649B1 (en) 2019-07-09

Family

ID=54244963

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140028005A KR101997649B1 (en) 2014-03-10 2014-03-10 Method for changing reference server for testing cloud streaming server, apparatus and system therefor

Country Status (1)

Country Link
KR (1) KR101997649B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220142831A (en) * 2021-04-15 2022-10-24 주식회사 엔씨소프트 Electronic device, method, and computer readable storage medium for adaptively switching mode of game based on detection of error

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3383055A1 (en) * 2017-03-28 2018-10-03 Rohde & Schwarz GmbH & Co. KG Method and device for monitoring data related to broadcasting and/or streaming
KR20210016890A (en) * 2019-08-06 2021-02-17 삼성전자주식회사 Electronic device and Method of controlling thereof

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110276946A1 (en) 2010-05-07 2011-11-10 Salesforce.Com, Inc. Visual user interface validator

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101030130B1 (en) 2009-07-31 2011-04-20 주식회사 다음커뮤니케이션 Device and method for detecting duplicate contents
US20110078303A1 (en) * 2009-09-30 2011-03-31 Alcatel-Lucent Usa Inc. Dynamic load balancing and scaling of allocated cloud resources in an enterprise network
US9858133B2 (en) * 2010-09-20 2018-01-02 Netflix, Inc. Techniques for assessing the resiliency of a distribution computing service provided by a collection of interacting servers
KR101250881B1 (en) * 2011-04-07 2013-04-04 주식회사 넥스알 Method for doubly processing data of block storage service
KR20140011530A (en) * 2012-06-29 2014-01-29 한국전자통신연구원 Method and apparatus for managing connection path failure between data centers for cloud computing

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110276946A1 (en) 2010-05-07 2011-11-10 Salesforce.Com, Inc. Visual user interface validator

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220142831A (en) * 2021-04-15 2022-10-24 주식회사 엔씨소프트 Electronic device, method, and computer readable storage medium for adaptively switching mode of game based on detection of error
KR102523008B1 (en) 2021-04-15 2023-04-19 주식회사 엔씨소프트 Electronic device, method, and computer readable storage medium for adaptively switching mode of game based on detection of error

Also Published As

Publication number Publication date
KR20150105883A (en) 2015-09-18

Similar Documents

Publication Publication Date Title
US10282246B2 (en) Application error detection method for cloud streaming service, and apparatus and system therefor
US10313207B2 (en) Method for testing cloud streaming server, and apparatus and system therefor
KR101471366B1 (en) Device adaptive presentation virtualization method and its system
US9167020B2 (en) Web-browser based desktop and application remoting solution
US20110283002A1 (en) Selectively Communicating Data Of A Peripheral Device To Plural Sending Computers
US10992724B2 (en) Media playback apparatus and method including delay prevention system
KR101942270B1 (en) Media playback apparatus and method including delay prevention system
KR101445539B1 (en) Method for testing server for cloud streaming service, apparatus and system therefor
KR101997649B1 (en) Method for changing reference server for testing cloud streaming server, apparatus and system therefor
KR101403321B1 (en) Method for testing server for cloud streaming service, system and apparatus thereof
CN113038192B (en) Video processing method and device, electronic equipment and storage medium
KR101543295B1 (en) Application error detection method for cloud streaming service, apparatus and system therefor
KR101997540B1 (en) Method for testing cloud streaming server, apparatus and system therefor
KR101445538B1 (en) Method and apparatus for testing server for clouding streaming service
KR102058365B1 (en) Method for testing cloud streaming server, apparatus and system therefor
KR102119248B1 (en) Method for testing cloud streaming server, apparatus and system therefor
KR20140101622A (en) Method for testing server for cloud streaming service, system and apparatus thereof
KR102059376B1 (en) Method for testing cloud streaming server, apparatus and system therefor
KR102199296B1 (en) Method for testing cloud streaming server, apparatus and system therefor
US20130061270A1 (en) Media sharing apparatus and method
WO2014139428A1 (en) Biometric recognition based session matching and routing
KR102055705B1 (en) Method for testing cloud streaming server, apparatus and system therefor
KR101615532B1 (en) System for servicing cloud streaming, method of servicing cloud streaming and server for the same
US10567457B1 (en) Dynamic rotation of streaming protocols
CN116319765A (en) Cloud desktop connection method and related equipment thereof

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant