WO2012043962A1 - 단말기에 따른 적응적 화면 가상화 방법 및 시스템 - Google Patents

단말기에 따른 적응적 화면 가상화 방법 및 시스템 Download PDF

Info

Publication number
WO2012043962A1
WO2012043962A1 PCT/KR2011/004169 KR2011004169W WO2012043962A1 WO 2012043962 A1 WO2012043962 A1 WO 2012043962A1 KR 2011004169 W KR2011004169 W KR 2011004169W WO 2012043962 A1 WO2012043962 A1 WO 2012043962A1
Authority
WO
WIPO (PCT)
Prior art keywords
screen virtualization
service
user terminal
rdp
vnc
Prior art date
Application number
PCT/KR2011/004169
Other languages
English (en)
French (fr)
Inventor
배태면
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to JP2013531470A priority Critical patent/JP5459693B2/ja
Priority to EP11829468.5A priority patent/EP2624611B1/en
Priority to CN201180053734.0A priority patent/CN103210672B/zh
Priority to SG2013024054A priority patent/SG189194A1/en
Publication of WO2012043962A1 publication Critical patent/WO2012043962A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/06—Generation of reports
    • H04L43/065—Generation of reports related to network devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/756—Media network packet handling adapting media to device capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/04—Protocols specially adapted for terminals or networks with limited capabilities; specially adapted for terminal portability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/133—Protocols for remote procedure calls [RPC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/565—Conversion or adaptation of application format or content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/24—Negotiation of communication capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/18—Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/30—Profiles
    • H04L67/303—Terminal profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W8/00—Network data management
    • H04W8/22—Processing or transfer of terminal data, e.g. status or physical capabilities
    • H04W8/24—Transfer of terminal data

Definitions

  • the present invention relates to a method and a system capable of providing a screen virtualization service to various terminals requesting a service. More particularly, when a system profile is transmitted from a user terminal to a cloud device, the system profile received from the terminal is transmitted from the terminal. Generates a list of candidate screen virtualization technologies that can be processed by the terminal from the terminal, checks device load and processing capability for each technology, and enables web services through the screen virtualization technology determination unit, RDP (Remote Desktop Protocol) / VNC (Virtual Network Computing) Based on whether the video stream can be processed or not, the optimal screen virtualization technology candidate is determined based on the system profile of the terminal and the available resources of the device. I was able to expand the kind A.
  • a technology for running a service or an application on a cloud device and receiving the result through a terminal is required.
  • a screen virtualization (Presentation Virtualization) technology for driving only a service screen and audio in a terminal is required as a core technology.
  • VNC Virtual Network Computing
  • RDP Remote Desktop Protocol
  • Web-based technology is used as client technology of virtualization server including screen virtualization.
  • Web-based screen virtualization is a form in which a server or an application running on a server is provided to a terminal in the form of a web page, and the terminal consumes the service through a web service, and new technology standards such as HTML 5 are widely used.
  • web-based screen virtualization may have limitations on the screen virtualization function depending on whether the terminal can support all the functions of the web browser.
  • a web browser that supports all functions including flash and video can be run on a terminal with a high performance CPU.
  • RDP or VNC-based image compressor panel virtualization technology can operate in a terminal with a relatively low CPU, but has a problem that it is difficult to operate in a low-performance set top box, a mobile phone.
  • screen virtualization based on video compression technology requires the highest amount of computation to the terminal.
  • most video decoding is processed in hardware in the terminal, so it can be operated in a set top box and a mobile phone with low CPU performance.
  • screen virtualization based on video compression technology has a problem in that service cost increases due to high computational amount required to perform video compression on a server.
  • the server when the user terminal transmits a system profile to the server, the server generates a list of candidate screen virtualization techniques that the terminal can process from the system profile received from the terminal, The system profile of the terminal and the server can be checked depending on whether the web service is available through the screen virtualization technology determination unit, whether RDP (Remote Desktop Protocol) / VNC (Virtual Network Computing) processing is available, and whether video streaming can be processed.
  • RDP Remote Desktop Protocol
  • VNC Virtual Network Computing
  • a user terminal transmitting system profile information including a request service to a cloud device and receiving a virtualization service based on the system profile information from the cloud device; And receiving the system profile information from the user terminal through the communication network, generating a list of candidate screen virtualization technologies that can be processed by the user terminal from the system profile information, and confirming the device load by each technology and whether it can be processed.
  • An adaptive screen virtualization system according to a terminal including a cloud device that determines a technology and provides a screen virtualization service to the user terminal through the determined screen virtualization technology may be provided.
  • a communication unit for communicating with the user terminal through a communication network;
  • a profile analyzer configured to generate a candidate screen virtualization technology list that the user terminal can process from the system profile information when system profile information is received from the user terminal;
  • a device capacity analyzer for checking device load and processing capability of each technology according to the candidate screen virtualization technology list;
  • a screen virtualization technology determination unit that determines a final screen virtualization technology according to the server load and processing capability of each technology of the candidate screen virtualization technology list;
  • a controller for controlling to provide a screen virtualization service to the user terminal through the final screen virtualization technology when the final screen virtualization technology is determined based on the system profile information received from the user terminal.
  • the profile analyzer may determine whether full browsing, Remote Desktop Protocol (RDP) / Virtual Network Computing (VNC), and video streaming are possible, respectively, and the possible functions are included in the candidate screen virtualization technology list. You can register.
  • RDP Remote Desktop Protocol
  • VNC Virtual Network Computing
  • the profile analyzer in the case of the video streaming, the user terminal supports at least one codec and streaming protocol for audio and video, the average transmission speed of the network and the resolution of the terminal According to the available video / audio codec, it is possible to register at the candidate screen virtualization technology list if it is more than a predefined bit rate.
  • the screen virtualization technology determination unit may determine a web service if the web service is possible and process it with RDP / VNC if the web service is impossible with respect to the device load and processing of each technology in the candidate screen virtualization technology list. If it cannot be processed by RDP / VNC, it can be processed through video streaming. If video streaming is not possible due to CPU load, it can be decided to process by RDP / VNC.
  • the device capacity analyzer determines that the requested service can be supported by the web service based on the system profile information and that the user terminal can be serviced by the web browser when the user terminal can be fully browsed, and in the case of RDP / VNC, If the video is included, it is decided not to be processed. If the average data rate of the network is less than the data rate required for processing by RDP / VNC for each terminal resolution, it is determined that it cannot be processed by RDP / VNC. If video encoding is performed, the rising CPU load can be determined.
  • the controller provides a screen virtualization service to the web, and if the user terminal supports RDP / VNC to determine RDP / VNC, the control unit virtualizes the screen to the RDP / VNC. If the video streaming is determined, the virtualization service may be provided through video streaming when the CPU load is below the threshold.
  • a communication unit for communicating with the cloud device through a communication network;
  • a profile manager which manages system profile information for transmission to the cloud device;
  • a control unit which transmits the system profile information to the cloud device, and controls to receive and output data about a screen virtualization service from the cloud device through a final screen virtualization technology determined based on the system profile information;
  • an output unit configured to output data related to the screen virtualization service received from the cloud device as a screen or a sound.
  • system profile information may include the performance of a web browser, a video streaming playback function, whether the RDP / VNC client can be driven, a network state, resolution information, a request service, and the like.
  • the performance of the web browser is classified by whether full browsing (web full-browsing) whether the web page on the Internet can be displayed without a problem, and whether the RDP / VNC client can be driven is divided into whether the RDP or VNC client can be driven
  • the video streaming playback function includes a codec list and a streaming protocol installed in a terminal.
  • the network state includes a type of network and an average transmission speed. It may include a service or an application.
  • the user terminal is a communication network System profile information including web browser performance, video streaming playback, RDP (Remote Desktop Protocol) / VNC (Virtual Network Computing) client availability, network status, resolution, and request service are transmitted to the cloud device.
  • RDP Remote Desktop Protocol
  • VNC Virtual Network Computing
  • an adaptive screen virtualization method according to a terminal of a cloud device communicating with a user terminal through a communication network, (a) system profile information from the user terminal Receiving; (b) generating a candidate screen virtualization technology list that the user terminal can process from the system profile information; (c) confirming device load and processing capability of each technology according to the candidate screen virtualization technology list; (d) determining a final screen virtualization technology according to the device load and processing capability of each technology in the candidate screen virtualization technology list; And (e) providing a screen virtualization service to the user terminal through the final screen virtualization technology.
  • An adaptive screen virtualization method according to a terminal of a cloud device may be provided.
  • step (b) the full screen (Full Browsing), RDP (Remote Desktop Protocol) / VNC (Virtual Network Computing), the video streaming (Video Streaming) is possible to check the possible functions of the candidate screen virtualization technology You can register on the list.
  • the user terminal supports at least one codec and a streaming protocol for audio and video, and the average transmission speed of the network is determined by the user terminal.
  • the candidate may be registered in the candidate screen virtualization technology list.
  • the web service can be determined if the web service is possible and the device can be processed by RDP / VNC if the web service is not possible with respect to the device load and processing of each technology in the candidate screen virtualization technology list. If it cannot be processed by RDP / VNC, it can be processed through video streaming. If video streaming is not possible due to CPU load, it can be decided to process by RDP / VNC.
  • the step (c) determines that the request service can be supported as a web service based on the system profile information, and that the service can be serviced by a web browser when the user terminal can be fully browsed, and in the case of RDP / VNC, the requested service. If video is included in the video, processing is determined as impossible. If the average data rate of the network is less than the data rate required for processing by RDP / VNC for each terminal resolution, it is determined that processing is not possible with RDP / VNC. When performing video encoding on the screen, the rising CPU load can be determined.
  • the screen virtualization service is provided to the web.
  • the user terminal supports RDP / VNC to the RDP / VNC. If the screen virtualization service is provided and the video streaming is determined, the video virtualization service may be provided through the video streaming when the CPU load is below the threshold.
  • an adaptive screen virtualization method of the user terminal to communicate with the cloud device via a communication network (a) transmitting the system profile information to the cloud device ; (b) receiving data regarding a screen virtualization service from the cloud device through a final screen virtualization technology determined based on the system profile information; And (c) outputting data relating to the screen virtualization service received from the cloud device as a screen or a sound.
  • system profile information may include the performance of a web browser, a video streaming playback function, whether the RDP / VNC client can be driven, a network state, resolution information, a request service, and the like.
  • the performance of the web browser is classified by whether full browsing (web full-browsing) whether the web page on the Internet can be displayed without a problem, and whether the RDP / VNC client can be driven is divided into whether the RDP or VNC client can be driven
  • the video streaming playback function includes a codec list and a streaming protocol installed in a terminal.
  • the network state includes a type of network and an average transmission speed. It may include a service or an application.
  • the RDP or VNC-based image compressor panel screen virtualization technology which can operate in a terminal having a relatively low CPU, can be driven in a low-performance set top box, a mobile phone, and the like.
  • the cloud device can adaptively provide the optimal screen virtualization technology according to the performance of the terminal and the server. Can be.
  • the number of users that can be processed by the server and the types of terminals that can be processed can be expanded.
  • FIG. 1 is a view showing the overall configuration of an adaptive screen virtualization system according to a terminal according to an embodiment of the present invention.
  • FIG. 2 is a block diagram illustrating a functional block of a user terminal according to an embodiment of the present invention.
  • FIG. 3 is a block diagram showing a functional block of a cloud device according to an embodiment of the present invention.
  • FIG. 4 is a flowchart illustrating an adaptive screen virtualization method according to an embodiment of the present invention.
  • FIG. 5 is a flowchart illustrating an adaptive screen virtualization method according to a terminal of a cloud device according to an embodiment of the present invention.
  • FIG. 6 is a flowchart illustrating an adaptive screen virtualization method of a user terminal according to an exemplary embodiment of the present invention.
  • FIG. 7 is a diagram illustrating a transmission frame configuration of system profile information transmitted from a user terminal to a cloud device according to an exemplary embodiment of the present invention.
  • FIG. 1 is a view showing the overall configuration of an adaptive screen virtualization system according to a terminal according to an embodiment of the present invention.
  • an adaptive screen virtualization system 100 includes a user terminal 110, a communication network 120, a cloud server 130, and the like.
  • the user terminal 110 includes a web browser performance, a video streaming playback function, a RDP (Remote Desktop Protocol) / VNC (Virtual Network Computing) client driving capability, a network state, a resolution, and a request service through the communication network 120.
  • the system profile information is transmitted to the cloud device 130, and the virtualization service based on the system profile information is provided from the cloud device 130.
  • the user terminal 110 may be a mobile terminal such as a mobile phone, a PDA or a smart phone when the communication network 120 is a mobile communication network, and may be a computer terminal when the communication network 120 is a wired communication network such as the Internet or a PSTN. .
  • the communication network 120 may include a mobile communication network such as CDMA, WCDMA, or HSPA, a wired communication network such as the Internet and a PSTN, or a local area network such as Bluetooth or Zigbee.
  • a mobile communication network such as CDMA, WCDMA, or HSPA
  • a wired communication network such as the Internet and a PSTN
  • a local area network such as Bluetooth or Zigbee.
  • the cloud device 130 When the cloud device 130 receives the system profile information from the user terminal 110 through the communication network 120, the cloud device 130 generates a list of candidate virtualization technologies that the user terminal 110 can process from the system profile information, and the devices for each technology.
  • the screen virtualization technology is determined by checking the load and whether it can be processed, and the screen virtualization service is provided to the user terminal 110 through the determined screen virtualization technology.
  • FIG. 2 is a block diagram illustrating a functional block of a user terminal according to an embodiment of the present invention.
  • the user terminal 110 includes a communication unit 210, a profile manager 220, a controller 230, an output unit 240, and the like.
  • the apparatus may further include a memory for storing data.
  • the communication unit 210 communicates with the cloud device 130 through the communication network 120.
  • the profile manager 220 manages system profile information for transmitting to the cloud device 130.
  • the system profile information may include the performance of a web browser, a video streaming playback function, whether the RDP / VNC client can be driven, a network state, resolution information, a request service, and the like.
  • the streaming playback function includes a codec list and a streaming protocol installed in the terminal, the network state includes the type of network and the average transmission speed, and the requested service is a service or application requested by the user. ) May be included.
  • the controller 230 transmits the system profile information to the cloud device 130, and controls to receive and output the data about the screen virtualization service from the cloud device 130 through the final screen virtualization technology determined based on the system profile information. .
  • the output unit 240 outputs data regarding the screen virtualization service received from the cloud device 130 as a screen or sound. Accordingly, the output unit 240 may include a display unit for displaying data regarding the screen virtualization service on a screen, and an audio output unit for outputting data about the screen virtualization service as sound.
  • FIG. 3 is a block diagram showing a functional block of a cloud device according to an embodiment of the present invention.
  • the cloud device 130 includes a communication unit 310, a profile analyzer 320, a device capacity analyzer 330, a screen virtualization technology determiner 340, and a controller 350. And the like.
  • the communication unit 310 communicates with the user terminal 110 through the communication network 120.
  • the profile analyzer 320 When the system profile information is received from the user terminal 110, the profile analyzer 320 generates a candidate screen virtualization technology list that can be processed by the user terminal 110 from the system profile information.
  • the profile analyzer 320 checks whether full browsing, Remote Desktop Protocol (RDP) / Virtual Network Computing (VNC), and video streaming are possible, respectively. You can register on the skills list.
  • RDP Remote Desktop Protocol
  • VNC Virtual Network Computing
  • the profile analyzer 320 in the case of video streaming, the user terminal 110 supports at least one codec and streaming protocol for audio and video, the average transmission speed of the network According to the resolution of the terminal and the available video / audio codec, it is possible to register in the candidate screen virtualization technology list if the bit rate is equal to or greater than the predefined bitrate.
  • the device capacity analyzer 330 checks the device load and processing capability of each technology according to the candidate screen virtualization technology list.
  • the device capacity analysis unit 330 determines that the request service can be supported by the web service based on the system profile information and that the user terminal 110 can be serviced by the web browser when full browsing is possible. If video is included in the request service, it is determined to be impossible to process. If the average data rate of the network is less than or equal to the data rate required for processing by RDP / VNC for each terminal resolution, it is determined that it cannot be processed by RDP / VNC. In case the device performs video encoding on the screen, it is possible to predict the rising CPU load.
  • the screen virtualization technology determination unit 340 determines the final screen virtualization technology according to the device load and processing capability of each technology in the candidate screen virtualization technology list.
  • the screen virtualization technology determination unit 340 determines the web service if the web service is available and the RDP / VNC if the web service is not possible with respect to the device load and processing of each technology in the candidate screen virtualization technology list. If it can not be processed by RDP / VNC, it can be processed through video streaming, and if it is impossible to stream video by CPU load, it can be decided to process by RDP / VNC.
  • the controller 350 controls to provide the screen virtualization service to the user terminal 110 through the final screen virtualization technology.
  • the controller 350 provides a screen virtualization service to the web, and if the user terminal supports RDP / VNC to determine RDP / VNC, the control unit 350 provides a screen virtualization service to RDP / VNC. If the video streaming is determined, the virtualization service is controlled to be provided through video streaming when the CPU load is below the threshold.
  • the cloud device 130 of the above-described configuration may be implemented in the form of a server, it may also be implemented in the form of another user terminal.
  • FIG. 4 is a flowchart illustrating an adaptive screen virtualization method according to an embodiment of the present invention.
  • the user terminal 110 through the communication network 120, the performance of the web browser, video streaming playback function, RDP (Remote Desktop Protocol) / VNC (Virtual Network Computing) client can be driven, network status,
  • the system profile information including the resolution and the requested service is transmitted to the cloud device 130 (S410).
  • the cloud device 130 generates a candidate screen virtualization technology list that can be processed by the user terminal 110 from the system profile information (S420).
  • the cloud device 130 checks the device load and processing capability of each technology in the candidate screen virtualization technology list (S430).
  • the cloud device 130 determines the screen virtualization technology according to the device load for each technology and whether processing is possible (S440).
  • the cloud device 130 provides a screen virtualization service to the user terminal 130 through the determined screen virtualization technology (S450).
  • FIG. 5 is a flowchart illustrating an adaptive screen virtualization method according to a terminal of a cloud device according to an embodiment of the present invention.
  • the cloud device 130 receives system profile information from the user terminal 110 (S510).
  • the cloud device 130 generates a candidate screen virtualization technology list that the user terminal 110 can process from the system profile information through the profile analyzer 320 (S520).
  • the cloud device 130 first checks whether full browsing, Remote Desktop Protocol (RDP) / Virtual Network Computing (VNC), and video streaming are possible, and then selects possible functions. You can register at
  • the user terminal 110 supports at least one codec and streaming protocol for audio and video, and the average transmission speed of the network corresponds to the resolution and available video / If the bit rate is equal to or greater than a predefined bit rate according to an audio codec, it can be registered in the candidate screen virtualization technology list. For example, if the user terminal 110 supports the H.264, AAC Codec, RTP steaming protocol, and the screen resolution is 800 * 480, if the average transmission rate is 1 Mbps or more, video streaming can be considered as possible. have. If the average transfer rate is less than 1 Mbps, video streaming can be considered impossible.
  • the cloud device 130 checks the device load for each technology and whether it can be processed according to the candidate screen virtualization technology list (S530).
  • the cloud device 130 first determines that the request service can be supported by the web service based on the system profile information, and that the user terminal 110 can be serviced by the web browser when full browsing is possible. In addition, in case of RDP / VNC, if video is included in the request service, it is determined that it cannot be processed. In addition, if the average data rate of the network is less than the data rate required for processing by the predefined RDP / VNC for each terminal resolution, it is determined that the process can not be processed by RDP / VNC. In the case of video streaming, when the screen is encoded by the cloud device 130, the rising CPU load may be predicted and determined.
  • the cloud device 130 determines the final screen virtualization technology according to the device load and processing capability of each technology in the candidate screen virtualization technology list (S540).
  • the cloud device 130 determines a web service if the web service is possible and checks whether it can be processed by RDP / VNC if the web service is impossible with respect to the device load and processing of each technology in the candidate screen virtualization technology list. If it cannot be processed by RDP / VNC, it can be processed through video streaming. If video streaming is impossible due to CPU load, it can be decided to process by RDP / VNC.
  • the cloud device 130 provides a screen virtualization service to the user terminal 110 through the final screen virtualization technology (S550).
  • the cloud device 130 when the final screen virtualization technology is determined as a web service, the cloud device 130 provides a screen virtualization service through the web. If the video streaming is determined, the virtualization service may be provided through video streaming when the CPU load is below the threshold.
  • the cloud device 130 may inform the user terminal 110 of the inability to provide a service in the case of excluding the above-described web service, RDP / VNC, video streaming, and the like.
  • FIG. 6 is a flowchart illustrating an adaptive screen virtualization method of a user terminal according to an exemplary embodiment of the present invention.
  • the user terminal 110 transmits system profile information as shown in FIG. 7 to the cloud device 130 (S610).
  • 7 is a diagram illustrating a transmission frame configuration of system profile information transmitted from a user terminal to a cloud device according to an exemplary embodiment of the present invention.
  • the system profile information includes a list of codecs installed in a terminal as a function of a web browser, whether full browsing, RDP / VNC enablement of whether an RDP or VNC client can be run, and a video streaming playback function.
  • Codec List a streaming protocol, and the terminal resolution
  • a request service including a service or application requested by a user and a network state may include a type of network and an average transmission speed.
  • the cloud device 130 may classify the performance of the web browser for the user terminal 110 into whether full browsing is possible to display a web page on the Internet without problems, and whether the DP / VNC client can be driven. Classifies whether the RDP or VNC client can be operated.
  • the video streaming playback function is classified through the codec list and the streaming protocol installed in the terminal.
  • the network status is determined by the network type and the average transmission speed.
  • the request service can be classified through a service or an application requested by the user.
  • the user terminal 110 receives data about the screen virtualization service from the cloud device 130 through the final screen virtualization technology determined based on the system profile information (S620).
  • the user terminal 110 outputs data regarding the screen virtualization service received from the cloud device 130 as a screen or a sound (S630).
  • the device when the user terminal transmits a system profile to the device, the device generates a list of candidate screen virtualization technologies that the terminal can process from the system profile received from the terminal, and the device load and processing for each technology. Based on the screen virtualization technology determination unit, whether the web service is available, whether the RDP / VNC can be processed or whether the video streaming can be processed, selects the best screen virtualization candidate based on the system profile of the terminal and the available resources of the server. By determining, the number of users that can be processed by the server and the types of terminals that can be processed can be expanded.
  • the present invention can be applied to a cloud computing-based screen virtualization system, and can be applied to a screen virtualization related technology that can be serviced regardless of a wired or wireless communication network in a cloud-based service.

Abstract

본 발명은 사용자 단말기에서 시스템 프로파일을 클라우드 장치로 전송하면, 클라우드 장치에서는 단말기로부터 전송받은 시스템 프로파일로부터 단말기가 처리 가능한 후보 화면 가상화 기술 리스트를 생성하고, 각 기술별 장치 부하량 및 처리 가능 여부를 확인하며, 화면 가상화 기술 결정부를 통해 웹서비스 가능여부, RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing) 처리 가능여부, 비디오 스트리밍 처리 가능여부에 따라, 단말기의 시스템 프로파일과 장치의 가용 자원을 기반으로 최적의 화면 가상화 기술 후보를 결정함으로써, 장치에서 처리할 수 있는 사용자수와 처리할 수 있는 단말기의 종류를 확대할 수 있도록 된, 단말기에 따른 적응적 화면 가상화 방법 및 시스템에 관한 것이다. 본 발명의 단말기에 따른 적응적 화면 가상화 시스템은, 통신망을 통해 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing) 클라이언트 구동 가능여부, 네트워트 상태, 해상도, 요청 서비스를 포함하는 시스템 프로파일 정보를 장치에 전송하고, 상기 장치로부터 상기 시스템 프로파일 정보에 기반한 화면가상화 서비스를 제공받는 사용자 단말기; 및 상기 사용자 단말기로부터 통신망을 통해 상기 시스템 프로파일 정보를 수신하면, 상기 시스템 프로파일 정보로부터 상기 사용자 단말기가 처리 가능한 후보 화면가상화 기술 리스트를 생성하며, 각 기술별 장치 부하량 및 처리 가능여부를 확인하여 화면가상화 기술을 결정하며, 상기 결정된 화면가상화 기술을 통해 상기 사용자 단말기에 화면 가상화 서비스를 제공하는 클라우드 장치를 포함한다.

Description

단말기에 따른 적응적 화면 가상화 방법 및 시스템
본 발명은 서비스를 요청하는 다양한 단말기들에 화면 가상화 서비스를 제공할 수 있는 방법 및 시스템에 관한 것으로서, 더욱 자세하게는 사용자 단말기에서 시스템 프로파일을 클라우드 장치로 전송하면, 클라우드 장치에서는 단말기로부터 전송받은 시스템 프로파일로부터 단말기가 처리 가능한 후보 화면 가상화 기술 리스트를 생성하고, 각 기술별 장치 부하량 및 처리 가능 여부를 확인하며, 화면 가상화 기술 결정부를 통해 웹서비스 가능여부, RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing) 처리 가능여부, 비디오 스트리밍 처리 가능여부에 따라, 단말기의 시스템 프로파일과 장치의 가용 자원을 기반으로 최적의 화면 가상화 기술 후보를 결정함으로써, 장치에서 처리할 수 있는 사용자수와 처리할 수 있는 단말기의 종류를 확대할 수 있도록 된 것이다.
최근에, 클라우드 기반 서비스가 활성화 됨에 따라, 서비스나 어플리케이션(application)이 클라우드 장치에서 구동되고 그 결과를 단말기를 통해 서비스 받는 기술이 요구되고 있다. 특히 서비스 화면과 오디오만을 단말기에서 구동하는 화면 가상화(Presentation Virtualization) 기술이 핵심기술로 요구된다.
AT&T에서 개발된 Virtual Network Computing(VNC)기술과 Microsoft의 Remote Desktop Protocol(RDP) 기반의 remote desktop service가 가장 대표적인 기술이다. 이 기술들은 화면에서 변화된 영역을 압축하여 전송하는 방식을 기반으로 한다.
또 다른 화면 가상화 기술로써 화면 전체를 동영상 압축기술을 활용하여 압축하는 방법이 제안되고 있다. 이 방법은 클라우드 기반의 게임 서비스를 위한 화면 가상화 기술로 활용되고 있다.
마지막으로 웹기반의 기술이 화면 가상화를 포함한 가상화 서버의 client 기술로 활용되고 있다. 웹기반의 화면 가상화는 서버에서 구동된 application 또는 서비스 결과를 web page형태로 단말기에 제공하면 단말기에서는 웹서비스를 통해 서비스를 소비하는 형태로, HTML 5와 같은 새로운 기술 표준이 나오면서 널리 사용되고 있다.
그러나 웹기반 화면 가상화는 단말이 웹 브라우저의 기능을 모두 지원할 수 있는지 여부에 따라 화면 가상화 기능에 제약이 있을 수 있다. 현재 flash, 동영상을 포함하는 모든 기능을 지원하는 웹브라우저는 높은 성능의 CPU를 가진 단말기에서 구동이 가능하다. RDP나 VNC 기반의 이미지 압축기반 화면가상화 기술은 비교적 낮은 CPU를 가진 단말기에서 동작이 가능하지만 저성능의 Set Top Box, 휴대폰 등에서는 구동이 어려운 문제점을 가지고 있다.
한편, 동영상 압축기술 기반의 화면가상화는 가장 높은 연산량을 단말기에 요구하지만, 현재 대부분의 동영상 복호화는 단말기 내에서 하드웨어적으로 처리되어 단말기의 CPU의 성능이 낮은 Set Top Box, 휴대폰에서도 동작이 가능하다. 그러나 동영상 압축기술 기반의 화면 가상화는 서버에서 동영상 압축을 수행하는 데 높은 연산량을 필요로 하여 서비스 비용이 높아지는 문제점을 가지고 있다.
전술한 문제점을 해결하기 위한 본 발명은, 사용자 단말기에서 시스템 프로파일을 서버로 전송하면, 서버에서는 단말기로부터 전송받은 시스템 프로파일로부터 단말기가 처리 가능한 후보 화면 가상화 기술 리스트를 생성하고, 각 기술별 서버 부하량 및 처리 가능 여부를 확인하며, 화면 가상화 기술 결정부를 통해 웹서비스 가능여부, RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing) 처리 가능여부, 비디오 스트리밍 처리 가능여부에 따라, 단말기의 시스템 프로파일과 서버의 가용 자원을 기반으로 최적의 화면 가상화 기술 후보를 결정함으로써, 서버에서 처리할 수 있는 사용자수와 처리할 수 있는 단말기의 종류를 확대할 수 있도록 된, 단말기에 따른 적응적 화면 가상화 방법 및 시스템을 제공함에 그 목적이 있다.
전술한 목적을 달성하기 위한 본 발명의 일 측면에 따르면, 통신망을 통해 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing) 클라이언트 구동 가능여부, 네트워트 상태, 해상도, 요청 서비스를 포함하는 시스템 프로파일 정보를 클라우드 장치에 전송하고, 상기 클라우드 장치로부터 상기 시스템 프로파일 정보에 기반한 화면가상화 서비스를 제공받는 사용자 단말기; 및 상기 사용자 단말기로부터 통신망을 통해 상기 시스템 프로파일 정보를 수신하면, 상기 시스템 프로파일 정보로부터 상기 사용자 단말기가 처리 가능한 후보 화면가상화 기술 리스트를 생성하며, 각 기술별 장치 부하량 및 처리 가능여부를 확인하여 화면가상화 기술을 결정하며, 상기 결정된 화면가상화 기술을 통해 상기 사용자 단말기에 화면 가상화 서비스를 제공하는 클라우드 장치를 포함하는 단말기에 따른 적응적 화면 가상화 시스템이 제공될 수 있다.
한편, 전술한 목적을 달성하기 위한 본 발명의 다른 측면에 따르면, 통신망을 통해 사용자 단말기와 통신하기 위한 통신부; 상기 사용자 단말기로부터 시스템 프로파일 정보가 수신되면, 상기 시스템 프로파일 정보로부터 상기 사용자 단말기가 처리 가능한 후보 화면 가상화 기술 리스트를 생성하는 프로파일 분석부; 상기 후보 화면가상화 기술 리스트에 따라 각 기술별 장치 부하량 및 처리 가능 여부를 확인하는 장치용량 분석부; 상기 후보 화면가상화 기술 리스트의 상기 각 기술별 서버 부하량 및 처리 가능 여부에 따라 최종 화면가상화 기술을 결정하는 화면가상화 기술 결정부; 및 상기 사용자 단말기로부터 수신된 시스템 프로파일 정보에 근거해 상기 최종적인 화면가상화 기술이 결정되면, 상기 최종 화면 가상화 기술을 통해 상기 사용자 단말기에 화면가상화 서비스를 제공하도록 제어하는 제어부를 포함하는 클라우드 장치가 제공될 수 있다.
또한, 상기 프로파일 분석부는, 풀 브라우징(Full Browsing), RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing), 비디오 스트리밍(Video Streaming)이 가능한지를 각각 확인하여 가능한 기능을 상기 후보 화면가상화 기술 리스트에 등록할 수 있다.
또한, 상기 프로파일 분석부는, 상기 비디오 스트리밍의 경우, 상기 사용자 단말기가 오디오와 비디오에 대해 최소한 하나 이상의 코덱(Codec)과 스트리밍 프로토콜(Streaming Protocol)을 지원하고, 네트워크의 평균 전송속도가 단말기의 해상도 및 활용가능 비디오/오디오 코덱(Video/Audio Codec)에 따라 미리 정의된 비트율(Bitrate) 이상이면 가능한 것으로 상기 후보 화면가상화 기술 리스트에 등록할 수 있다.
또한, 상기 화면가상화 기술 결정부는, 상기 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능 여부에 대해, 웹서비스가 가능하면 웹서비스를 결정하고, 웹서비스가 불가능하면 RDP/VNC로 처리 가능한지를 확인하며, RDP/VNC로 처리 불가능하면 비디오 스트리밍을 통해 처리하며, CPU의 부하로 비디오 스트리밍이 불가능하면 RDP/VNC로 처리 하도록 결정할 수 있다.
또한, 상기 장치용량 분석부는, 상기 시스템 프로파일 정보에 근거해 요청 서비스가 웹서비스로 지원 가능하고 상기 사용자 단말기가 풀 브라우징이 가능한 경우 웹브라우저로 서비스 가능한 것으로 결정하며, RDP/VNC의 경우 요청 서비스에 비디오가 포함되면 처리 불가로 결정하며, 네트워크의 평균 전송률이 미리 정의된 단말기 해상도별 RDP/VNC로 처리시 요구되는 데이터 전송률 이하이면 RDP/VNC로 처리 불가를 결정하며, 비디오 스트리밍의 경우 서버에서 화면을 비디오 인코딩하여 수행하는 경우 상승하는 CPU 부하를 결정할 수 있다.
그리고, 상기 제어부는, 상기 최종 화면가상화 기술이 웹서비스로 결정되면 웹으로 화면가상화 서비스를 제공하고, 상기 사용자 단말기에서 RDP/VNC를 지원하여 RDP/VNC로 결정되면 상기 RDP/VNC로 화면 가상화 서비스를 제공하며, 비디오 스트리밍으로 결정되면, CPU 부하가 임계값 이하일 때 비디오 스트리밍을 통해 화면가상화 서비스를 제공할 수 있다.
한편, 전술한 목적을 달성하기 위한 본 발명의 또다른 측면에 따르면, 클라우드 장치와 통신망을 통해 통신하기 위한 통신부; 상기 클라우드 장치에 전송하기 위한 시스템 프로파일 정보를 관리하는 프로파일 관리부; 상기 시스템 프로파일 정보를 상기 클라우드 장치에 전송하며, 상기 클라우드 장치로부터 상기 시스템 프로파일 정보에 근거해 결정된 최종 화면가상화 기술을 통해 화면 가상화 서비스에 관한 데이터를 수신하여 출력하도록 제어하는 제어부; 및 상기 클라우드 장치로부터 수신된 상기 화면 가상화 서비스에 관한 데이터를 화면 또는 음향으로 출력하는 출력부를 포함하는 사용자 단말기가 제공될 수 있다.
또한, 상기 시스템 프로파일 정보는 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP/VNC 클라이언트 구동 가능여부, 네트워크 상태, 해상도 정보, 요청 서비스 등을 포함할 수 있다.
그리고, 상기 웹브라우저의 성능은 인터넷 상의 웹페이지를 문제없이 표시할 수 있는지의 풀 브라우징(Full Browsing) 여부로 구분하고, 상기 RDP/VNC 클라이언트 구동 가능여부는 RDP 또는 VNC 클라이언트가 구동 가능한지로 구분하며, 상기 비디오 스트리밍 재생 기능은 단말기에 설치된 코덱 리스트(Codec List), 스트리밍 프로토콜(Streaming Protocol)을 포함하며, 상기 네트워크 상태는 네트워크의 종류와 평균 전송속도를 포함하며, 상기 요청 서비스는 사용자가 요청하는 서비스 또는 어플리케이션을 포함할 수 있다.
한편, 전술한 목적을 달성하기 위한 본 발명의 또다른 측면에 따르면, 사용자 단말기와 클라우드 장치가 통신망을 통해 통신하는 시스템의 단말기에 따른 적응적 화면 가상화 방법에 있어서, (a) 상기 사용자 단말기가 통신망을 통해 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing) 클라이언트 구동 가능여부, 네트워트 상태, 해상도, 요청 서비스를 포함하는 시스템 프로파일 정보를 상기 클라우드 장치에 전송하는 단계; (b) 상기 클라우드 장치가 상기 시스템 프로파일 정보로부터 상기 사용자 단말기가 처리 가능한 후보 화면가상화 기술 리스트를 생성하는 단계; (c) 상기 클라우드 장치가 상기 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능여부를 확인하는 단계; (d) 상기 클라우드 장치가 상기 각 기술별 장치 부하량 및 처리 가능여부에 따라 화면가상화 기술을 결정하는 단계; 및 (e) 상기 클라우드 장치가 상기 결정된 화면가상화 기술을 통해 상기 사용자 단말기에 화면 가상화 서비스를 제공하는 단계를 포함하는 단말기에 따른 적응적 화면 가상화 시스템이 제공될 수 있다.
한편, 전술한 목적을 달성하기 위한 본 발명의 또다른 측면에 따르면, 통신망을 통해 사용자 단말기와 통신하는 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법으로서, (a) 상기 사용자 단말기로부터 시스템 프로파일 정보를 수신하는 단계; (b) 상기 시스템 프로파일 정보로부터 상기 사용자 단말기가 처리 가능한 후보 화면 가상화 기술 리스트를 생성하는 단계; (c) 상기 후보 화면가상화 기술 리스트에 따라 각 기술별 장치 부하량 및 처리 가능 여부를 확인하는 단계; (d) 상기 후보 화면가상화 기술 리스트의 상기 각 기술별 장치 부하량 및 처리 가능 여부에 따라 최종 화면가상화 기술을 결정하는 단계; 및 (e) 상기 최종 화면 가상화 기술을 통해 상기 사용자 단말기에 화면가상화 서비스를 제공하는 단계를 포함하는 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법이 제공될 수 있다.
또한, 상기 (b) 단계는, 풀 브라우징(Full Browsing), RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing), 비디오 스트리밍(Video Streaming)이 가능한지를 각각 확인하여 가능한 기능을 상기 후보 화면가상화 기술 리스트에 등록할 수 있다.
또한, 상기 (b) 단계는, 상기 비디오 스트리밍의 경우, 상기 사용자 단말기가 오디오와 비디오에 대해 최소한 하나 이상의 코덱(Codec)과 스트리밍 프로토콜(Streaming Protocol)을 지원하고, 네트워크의 평균 전송속도가 단말기의 해상도 및 활용가능 비디오/오디오 코덱(Video/Audio Codec)에 따라 미리 정의된 비트율(Bitrate) 이상이면 가능한 것으로 상기 후보 화면가상화 기술 리스트에 등록할 수 있다.
또한, 상기 (d) 단계는, 상기 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능 여부에 대해, 웹서비스가 가능하면 웹서비스를 결정하고, 웹서비스가 불가능하면 RDP/VNC로 처리 가능한지를 확인하며, RDP/VNC로 처리 불가능하면 비디오 스트리밍을 통해 처리하며, CPU의 부하로 비디오 스트리밍이 불가능하면 RDP/VNC로 처리하도록 결정할 수 있다.
또한, 상기 (c) 단계는, 상기 시스템 프로파일 정보에 근거해 요청 서비스가 웹서비스로 지원 가능하고 상기 사용자 단말기가 풀 브라우징이 가능한 경우 웹브라우저로 서비스 가능한 것으로 결정하며, RDP/VNC의 경우 요청 서비스에 비디오가 포함되면 처리 불가로 결정하며, 네트워크의 평균 전송률이 미리 정의된 단말기 해상도별 RDP/VNC로 처리시 요구되는 데이터 전송률 이하이면 RDP/VNC로 처리 불가를 결정하며, 비디오 스트리밍의 경우 서버에서 화면을 비디오 인코딩하여 수행하는 경우 상승하는 CPU 부하를 결정할 수 있다.
그리고, 상기 (e) 단계는, 상기 최종 화면가상화 기술이 웹서비스로 결정되면 웹으로 화면가상화 서비스를 제공하고, 상기 사용자 단말기에서 RDP/VNC를 지원하여 RDP/VNC로 결정되면 상기 RDP/VNC로 화면 가상화 서비스를 제공하며, 비디오 스트리밍으로 결정되면, CPU 부하가 임계값 이하일 때 비디오 스트리밍을 통해 화면가상화 서비스를 제공할 수 있다.
한편, 전술한 목적을 달성하기 위한 본 발명의 또다른 측면에 따르면, 클라우드 장치와 통신망을 통해 통신하는 사용자 단말기의 적응적 화면 가상화 방법으로서, (a) 상기 클라우드 장치에 시스템 프로파일 정보를 전송하는 단계; (b) 상기 클라우드 장치로부터 상기 시스템 프로파일 정보에 근거해 결정된 최종 화면가상화 기술을 통해 화면 가상화 서비스에 관한 데이터를 수신하는 단계; 및 (c) 상기 클라우드 장치로부터 수신된 상기 화면 가상화 서비스에 관한 데이터를 화면 또는 음향으로 출력하는 단계를 포함하는 사용자 단말기의 적응적 화면 가상화 방법이 제공될 수 있다.
또한, 상기 시스템 프로파일 정보는 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP/VNC 클라이언트 구동 가능여부, 네트워크 상태, 해상도 정보, 요청 서비스 등을 포함할 수 있다.
그리고, 상기 웹브라우저의 성능은 인터넷 상의 웹페이지를 문제없이 표시할 수 있는지의 풀 브라우징(Full Browsing) 여부로 구분하고, 상기 RDP/VNC 클라이언트 구동 가능여부는 RDP 또는 VNC 클라이언트가 구동 가능한지로 구분하며, 상기 비디오 스트리밍 재생 기능은 단말기에 설치된 코덱 리스트(Codec List), 스트리밍 프로토콜(Streaming Protocol)을 포함하며, 상기 네트워크 상태는 네트워크의 종류와 평균 전송속도를 포함하며, 상기 요청 서비스는 사용자가 요청하는 서비스 또는 어플리케이션을 포함할 수 있다.
본 발명에 따르면, 비교적 낮은 CPU를 가진 단말기에서 동작이 가능한 RDP나 VNC 기반의 이미지 압축기반 화면 가상화 기술이 저성능의 Set Top Box, 휴대폰 등에서도 구동이 가능하다.
또한, 서버에서 동영상 압축을 수행하는 데 높은 연산량을 필요로 하는 동영상 압축기술 기반의 화면 가상화 기술을 구현할 수 있고, 클라우드 장치는 단말 및 서버의 성능에 따라 적응적으로 최적의 화면 가상화 기술을 제공할 수 있다.
그리고, 단말기의 시스템 프로파일과 서버의 가용 자원을 기반으로 최적의 화면 가상화 기술 후보를 결정함으로써, 서버에서 처리할 수 있는 사용자수와 처리할 수 있는 단말기의 종류를 확대할 수 있다.
도 1은 본 발명의 실시예에 따른 단말기에 따른 적응적 화면 가상화 시스템의 전체 구성을 나타낸 도면이다.
도 2는 본 발명의 실시예에 따른 사용자 단말기의 기능 블럭을 나타낸 구성도이다.
도 3은 본 발명의 실시예에 따른 클라우드 장치의 기능 블럭을 나타낸 구성도이다.
도 4는 본 발명의 실시예에 따라 단말기에 따른 적응적 화면 가상화 방법을 설명하기 위한 전체 흐름도이다.
도 5는 본 발명의 실시예에 따른 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법을 설명하기 위한 동작 흐름도이다.
도 6은 본 발명의 실시예에 따른 사용자 단말기의 적응적 화면 가상화 방법을 설명하기 위한 동작 흐름도이다.
도 7은 본 발명의 실시예에 따른 사용자 단말기에서 클라우드 장치로 전송하는 시스템 프로파일 정보의 전송 프레임 구성을 나타낸 도면이다.
본 발명의 목적과 기술적 구성 및 그에 따른 작용 효과에 관한 자세한 사항은 본 발명의 명세서에 첨부된 도면에 의거한 이하 상세한 설명에 의해 보다 명확하게 이해될 것이다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 실시예를 상세하게 설명한다.
도 1은 본 발명의 실시예에 따른 단말기에 따른 적응적 화면 가상화 시스템의 전체 구성을 나타낸 도면이다.
도 1을 참조하면, 본 발명에 따른 단말기에 따른 적응적 화면 가상화 시스템(100)은, 사용자 단말기(110)와 통신망(120) 및 클라우드 장치(Cloud Server)(130) 등을 포함한다.
사용자 단말기(110)는 통신망(120)을 통해 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing) 클라이언트 구동 가능여부, 네트워트 상태, 해상도, 요청 서비스를 포함하는 시스템 프로파일 정보를 클라우드 장치(130)에 전송하고, 클라우드 장치(130)로부터 시스템 프로파일(system profile) 정보에 기반한 화면가상화 서비스를 제공받는다.
사용자 단말기(110)는 통신망(120)이 이동 통신망일 경우에 휴대폰, PDA, 스마트폰 등 이동 단말기일 수 있고, 통신망(120)이 인터넷이나 PSTN 등의 유선 통신망일 경우 예컨대, 컴퓨터 단말기일 수 있다.
통신망(120)은 CDMA나 WCDMA, HSPA 등의 이동 통신망이나, 인터넷과 PSTN 등의 유선 통신망, 블루투스(Bluetooth)나 지그비(Zigbee) 등의 근거리 통신망을 포함할 수 있다.
클라우드 장치(130)는 사용자 단말기(110)로부터 통신망(120)을 통해 시스템 프로파일 정보를 수신하면, 시스템 프로파일 정보로부터 사용자 단말기(110)가 처리 가능한 후보 화면가상화 기술 리스트를 생성하며, 각 기술별 장치 부하량 및 처리 가능여부를 확인하여 화면가상화 기술을 결정하며, 결정된 화면가상화 기술을 통해 사용자 단말기(110)에 화면 가상화 서비스를 제공한다.
도 2는 본 발명의 실시예에 따른 사용자 단말기의 기능 블럭을 나타낸 구성도이다.
도 2를 참조하면, 본 발명에 따른 사용자 단말기(110)는, 통신부(210), 프로파일 관리부(220), 제어부(230) 및 출력부(240) 등을 포함한다.
여기에 데이터를 저장하기 위한 메모리 등을 더 포함할 수 있다.
통신부(210)는 클라우드 장치(130)와 통신망(120)을 통해 통신한다.
프로파일 관리부(220)는 클라우드 장치(130)에 전송하기 위한 시스템 프로파일 정보를 관리한다.
이때, 시스템 프로파일 정보는 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP/VNC 클라이언트 구동 가능여부, 네트워크 상태, 해상도 정보, 요청 서비스 등을 포함할 수 있다.
여기서, 웹브라우저의 성능은 인터넷 상의 웹페이지를 문제없이 표시할 수 있는지의 풀 브라우징(Full Browsing) 여부로 구분하고, RDP/VNC 클라이언트 구동 가능여부는 RDP 또는 VNC 클라이언트가 구동 가능한지로 구분하며, 비디오 스트리밍 재생 기능은 단말기에 설치된 코덱 리스트(Codec List), 스트리밍 프로토콜(Streaming Protocol)을 포함하며, 네트워크 상태는 네트워크의 종류와 평균 전송속도를 포함하며, 요청 서비스는 사용자가 요청하는 서비스 또는 어플리케이션(application)을 포함할 수 있다.
제어부(230)는 시스템 프로파일 정보를 클라우드 장치(130)에 전송하며, 클라우드 장치(130)로부터 시스템 프로파일 정보에 근거해 결정된 최종 화면가상화 기술을 통해 화면 가상화 서비스에 관한 데이터를 수신하여 출력하도록 제어한다.
출력부(240)는 클라우드 장치(130)로부터 수신된 화면 가상화 서비스에 관한 데이터를 화면 또는 음향으로 출력한다. 따라서, 출력부(240)는 화면 가상화 서비스에 관한 데이터를 화면으로 디스플레이하기 위한 표시부와, 화면 가상화 서비스에 관한 데이터를 음향으로 출력하기 위한 음향 출력부 등을 포함할 수 있다.
도 3은 본 발명의 실시예에 따른 클라우드 장치의 기능 블럭을 나타낸 구성도이다.
도 3을 참조하면, 본 발명에 따른 클라우드 장치(130)는, 통신부(310), 프로파일 분석부(320), 장치용량 분석부(330), 화면가상화 기술 결정부(340) 및 제어부(350) 등을 포함한다.
통신부(310)는 통신망(120)을 통해 사용자 단말기(110)와 통신한다.
프로파일 분석부(320)는 사용자 단말기(110)로부터 시스템 프로파일 정보가 수신되면, 시스템 프로파일 정보로부터 사용자 단말기(110)가 처리 가능한 후보 화면 가상화 기술 리스트를 생성한다.
또한, 프로파일 분석부(320)는, 풀 브라우징(Full Browsing), RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing), 비디오 스트리밍(Video Streaming)이 가능한지를 각각 확인하여 가능한 기능을 상기 후보 화면가상화 기술 리스트에 등록할 수 있다.
또한, 프로파일 분석부(320)는, 비디오 스트리밍의 경우, 사용자 단말기(110)가 오디오와 비디오에 대해 최소한 하나 이상의 코덱(Codec)과 스트리밍 프로토콜(Streaming Protocol)을 지원하고, 네트워크의 평균 전송속도가 단말기의 해상도 및 활용가능 비디오/오디오 코덱(Video/Audio Codec)에 따라 미리 정의된 비트율(Bitrate) 이상이면 가능한 것으로 후보 화면가상화 기술 리스트에 등록할 수 있다.
장치용량 분석부(330)는 후보 화면가상화 기술 리스트에 따라 각 기술별 장치 부하량 및 처리 가능 여부를 확인한다.
또한, 장치용량 분석부(330)는, 시스템 프로파일 정보에 근거해 요청 서비스가 웹서비스로 지원 가능하고 사용자 단말기(110)가 풀 브라우징이 가능한 경우 웹브라우저로 서비스 가능한 것으로 결정하며, RDP/VNC의 경우 요청 서비스에 비디오가 포함되면 처리 불가로 결정하며, 네트워크의 평균 전송률이 미리 정의된 단말기 해상도별 RDP/VNC로 처리시 요구되는 데이터 전송률 이하이면 RDP/VNC로 처리 불가를 결정하며, 비디오 스트리밍의 경우 장치에서 화면을 비디오 인코딩하여 수행하는 경우 상승하는 CPU 부하를 예측 결정할 수 있다.
화면가상화 기술결정부(340)는 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능 여부에 따라 최종 화면가상화 기술을 결정한다.
또한, 화면가상화 기술결정부(340)는, 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능 여부에 대해, 웹서비스가 가능하면 웹서비스를 결정하고, 웹서비스가 불가능하면 RDP/VNC로 처리 가능한지를 확인하며, RDP/VNC로 처리 불가능하면 비디오 스트리밍을 통해 처리하며, CPU의 부하로 비디오 스트리밍이 불가능하면 RDP/VNC로 처리하도록 결정할 수 있다.
제어부(350)는 사용자 단말기(110)로부터 수신된 시스템 프로파일 정보에 근거해 최종 화면가상화 기술이 결정되면, 최종 화면 가상화 기술을 통해 사용자 단말기(110)에 화면가상화 서비스를 제공하도록 제어한다.
그리고, 제어부(350)는, 최종 화면가상화 기술이 웹서비스로 결정되면 웹으로 화면가상화 서비스를 제공하고, 사용자 단말기에서 RDP/VNC를 지원하여 RDP/VNC로 결정되면 RDP/VNC로 화면 가상화 서비스를 제공하며, 비디오 스트리밍으로 결정되면, CPU 부하가 임계값 이하일 때 비디오 스트리밍을 통해 화면가상화 서비스가 제공되도록 제어한다.
한편, 전술한 구성의 클라우드 장치(130)는 서버 형태로 구현할 수 있으며, 또다른 사용자 단말기 형태로도 구현할 수 있다.
도 4는 본 발명의 실시예에 따라 단말기에 따른 적응적 화면 가상화 방법을 설명하기 위한 전체 흐름도이다.
도 4를 참조하면, 먼저 사용자 단말기(110)가 통신망(120)을 통해 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing) 클라이언트 구동 가능여부, 네트워트 상태, 해상도, 요청 서비스를 포함하는 시스템 프로파일 정보를 클라우드 장치(130)에 전송한다(S410).
이에, 클라우드 장치(130)는 시스템 프로파일 정보로부터 사용자 단말기(110)가 처리 가능한 후보 화면가상화 기술 리스트를 생성한다(S420).
이어, 클라우드 장치(130)는 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능여부를 확인한다(S430).
이어, 클라우드 장치(130)는 각 기술별 장치 부하량 및 처리 가능여부에 따라 화면가상화 기술을 결정한다(S440).
그리고, 클라우드 장치(130)는 결정된 화면가상화 기술을 통해 사용자 단말기(130)에 화면 가상화 서비스를 제공한다(S450).
도 5는 본 발명의 실시예에 따른 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법을 설명하기 위한 동작 흐름도이다.
도 5를 참조하면, 본 발명에 따른 클라우드 장치(130)는, 사용자 단말기(110)로부터 시스템 프로파일 정보를 수신한다(S510).
이어, 클라우드 장치(130)는 프로파일 분석부(320)를 통해 시스템 프로파일 정보로부터 사용자 단말기(110)가 처리 가능한 후보 화면 가상화 기술 리스트를 생성한다(S520).
이때, 클라우드 장치(130)는 먼저 풀 브라우징(Full Browsing), RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing), 비디오 스트리밍(Video Streaming)이 가능한지를 각각 확인하여 가능한 기능을 후보 화면가상화 기술 리스트에 등록할 수 있다.
또한, 비디오 스트리밍의 경우, 사용자 단말기(110)가 오디오와 비디오에 대해 최소한 하나 이상의 코덱(Codec)과 스트리밍 프로토콜(Streaming Protocol)을 지원하고, 네트워크의 평균 전송속도가 단말기의 해상도 및 활용가능 비디오/오디오 코덱(Video/Audio Codec)에 따라 미리 정의된 비트율(Bitrate) 이상이면 가능한 것으로 후보 화면가상화 기술 리스트에 등록할 수 있다. 예를 들어, 사용자 단말기(110)가 H.264, AAC Codec, RTP steaming protocol을 지원하고, 화면의 해상도가 800*480인 경우, 평균 전송속도가 1 Mbps 이상이면 비디오 스트리밍이 가능한 것으로 간주할 수 있다. 만약 평균 전송속도가 1 Mbps 이하이면 비디오 스트리밍이 불가능한 것으로 간주할 수 있다.
이어, 클라우드 장치(130)는 후보 화면가상화 기술 리스트에 따라 각 기술별 장치 부하량 및 처리 가능 여부를 확인한다(S530).
이때, 클라우드 장치(130)는 시스템 프로파일 정보에 근거해 먼저 요청 서비스가 웹서비스로 지원 가능하고 사용자 단말기(110)가 풀 브라우징이 가능한 경우 웹브라우저로 서비스 가능한 것으로 결정한다. 또한, RDP/VNC의 경우 요청 서비스에 비디오가 포함되면 처리 불가로 결정한다. 또한, 네트워크의 평균 전송률이 미리 정의된 단말기 해상도별 RDP/VNC로 처리시 요구되는 데이터 전송률 이하이면 RDP/VNC로 처리 불가를 결정한다. 그리고, 비디오 스트리밍의 경우 클라우드 장치(130)에서 화면을 비디오 인코딩하여 수행하는 경우 상승하는 CPU 부하를 예측하여 결정할 수 있다.
이어, 클라우드 장치(130)는 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능 여부에 따라 최종 화면가상화 기술을 결정한다(S540).
이때, 클라우드 장치(130)는 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능 여부에 대해, 웹서비스가 가능하면 웹서비스를 결정하고, 웹서비스가 불가능하면 RDP/VNC로 처리 가능한지를 확인하며, RDP/VNC로 처리 불가능하면 비디오 스트리밍을 통해 처리하며, CPU의 부하로 비디오 스트리밍이 불가능하면 RDP/VNC로 처리하도록 결정할 수 있다.
이어, 클라우드 장치(130)는 최종 화면 가상화 기술을 통해 사용자 단말기(110)에 화면가상화 서비스를 제공한다(S550).
이때, 클라우드 장치(130)는 최종 화면가상화 기술이 웹서비스로 결정되면 웹으로 화면가상화 서비스를 제공하고, 사용자 단말기에서 RDP/VNC를 지원하여 RDP/VNC로 결정되면 RDP/VNC로 화면 가상화 서비스를 제공하며, 비디오 스트리밍으로 결정되면, CPU 부하가 임계값 이하일 때 비디오 스트리밍을 통해 화면가상화 서비스를 제공할 수 있다.
그러나, 클라우드 장치(130)는 전술한 웹서비스, RDP/VNC, 비디오 스트리밍 등을 제외한 경우에 서비스 제공 불가를 사용자 단말기(110)에 알릴 수 있다.
도 6은 본 발명의 실시예에 따른 사용자 단말기의 적응적 화면 가상화 방법을 설명하기 위한 동작 흐름도이다.
도 6을 참조하면, 본 발명에 따른 사용자 단말기(110)는, 클라우드 장치(130)에 도 7에 도시된 바와 같은 시스템 프로파일 정보를 전송한다(S610). 도 7은 본 발명의 실시예에 따른 사용자 단말기에서 클라우드 장치로 전송하는 시스템 프로파일 정보의 전송 프레임 구성을 나타낸 도면이다. 도 7에 도시된 바와 같이 시스템 프로파일 정보는 웹브라우저의 성능으로 풀 브라우징(Full Browsing) 여부, RDP 또는 VNC 클라이언트가 구동 가능한지에 대한 RDP/VNC 가능여부, 비디오 스트리밍 재생 기능으로 단말기에 설치된 코덱 리스트(Codec List), 스트리밍 프로토콜(Streaming Protocol)을 포함하며, 단말 해상도, 사용자가 요청하는 서비스 또는 어플리케이션(application)을 포함한 요청 서비스 및 네트워크 상태로 네트워크의 종류와 평균 전송속도를 포함할 수 있다.
따라서, 클라우드 장치(130)는 사용자 단말기(110)에 대한 웹브라우저의 성능은 인터넷 상의 웹페이지를 문제없이 표시할 수 있는지의 풀 브라우징(Full Browsing) 여부로 구분하고, DP/VNC 클라이언트 구동 가능여부는 RDP 또는 VNC 클라이언트가 구동 가능한지로 구분하며, 비디오 스트리밍 재생 기능은 단말기에 설치된 코덱 리스트(Codec List), 스트리밍 프로토콜(Streaming Protocol)을 통해 구분하며, 네트워크 상태는 네트워크의 종류와 평균 전송속도를 통해 구분하며, 요청 서비스는 사용자가 요청하는 서비스 또는 어플리케이션을 통해 구분할 수 있다.
이어, 사용자 단말기(110)는 클라우드 장치(130)로부터 시스템 프로파일 정보에 근거해 결정된 최종 화면가상화 기술을 통해 화면 가상화 서비스에 관한 데이터를 수신한다(S620).
그리고, 사용자 단말기(110)는 클라우드 장치(130)로부터 수신된 화면 가상화 서비스에 관한 데이터를 화면 또는 음향으로 출력한다(S630).
전술한 바와 같이 본 발명에 의하면, 사용자 단말기에서 시스템 프로파일을 장치로 전송하면, 장치에서는 단말기로부터 전송받은 시스템 프로파일로부터 단말기가 처리 가능한 후보 화면 가상화 기술 리스트를 생성하고, 각 기술별 장치 부하량 및 처리 가능 여부를 확인하며, 화면 가상화 기술 결정부를 통해 웹서비스 가능여부, RDP/VNC 처리 가능여부, 비디오 스트리밍 처리 가능여부에 따라, 단말기의 시스템 프로파일과 서버의 가용 자원을 기반으로 최적의 화면 가상화 기술 후보를 결정함으로써, 서버에서 처리할 수 있는 사용자수와 처리할 수 있는 단말기의 종류를 확대할 수 있다.
본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있으므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명은 클라우딩 컴퓨팅 기반 화면 가상화 시스템에 적용할 수 있으며, 클라우드 기반 서비스에서 유선 통신망이나 무선 통신망에 상관없이 서비스할 수 있는 화면 가상화 관련 기술에 적용할 수 있다.

Claims (20)

  1. 통신망을 통해 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing) 클라이언트 구동 가능여부, 네트워트 상태, 해상도, 요청 서비스를 포함하는 시스템 프로파일 정보를 클라우드 장치에 전송하고, 상기 클라우드 장치로부터 상기 시스템 프로파일 정보에 기반한 화면가상화 서비스를 제공받는 사용자 단말기; 및
    상기 사용자 단말기로부터 통신망을 통해 상기 시스템 프로파일 정보를 수신하면, 상기 시스템 프로파일 정보로부터 상기 사용자 단말기가 처리 가능한 후보 화면가상화 기술 리스트를 생성하며, 각 기술별 장치 부하량 및 처리 가능여부를 확인하여 화면가상화 기술을 결정하며, 상기 결정된 화면가상화 기술을 통해 상기 사용자 단말기에 화면 가상화 서비스를 제공하는 클라우드 장치;
    를 포함하는 단말기에 따른 적응적 화면 가상화 시스템.
  2. 통신망을 통해 사용자 단말기와 통신하기 위한 통신부;
    상기 사용자 단말기로부터 시스템 프로파일 정보가 수신되면, 상기 시스템 프로파일 정보로부터 상기 사용자 단말기가 처리 가능한 후보 화면 가상화 기술 리스트를 생성하는 프로파일 분석부;
    상기 후보 화면가상화 기술 리스트에 따라 각 기술별 장치 부하량 및 처리 가능 여부를 확인하는 장치용량 분석부;
    상기 후보 화면가상화 기술 리스트의 상기 각 기술별 장치 부하량 및 처리 가능 여부에 따라 최종 화면가상화 기술을 결정하는 화면가상화 기술 결정부; 및
    상기 사용자 단말기로부터 수신된 시스템 프로파일 정보에 근거해 상기 최종 화면가상화 기술이 결정되면, 상기 최종 화면 가상화 기술을 통해 상기 사용자 단말기에 화면가상화 서비스를 제공하도록 제어하는 제어부;
    를 포함하는 클라우드 장치.
  3. 제 2 항에 있어서,
    상기 프로파일 분석부는, 풀 브라우징(Full Browsing), RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing), 비디오 스트리밍(Video Streaming)이 가능한지를 각각 확인하여 가능한 기능을 상기 후보 화면가상화 기술 리스트에 등록하는 것을 특징으로 하는 클라우드 장치.
  4. 제 3 항에 있어서,
    상기 프로파일 분석부는, 상기 비디오 스트리밍의 경우, 상기 사용자 단말기가 오디오와 비디오에 대해 최소한 하나 이상의 코덱(Codec)과 스트리밍 프로토콜(Streaming Protocol)을 지원하고, 네트워크의 평균 전송속도가 단말기의 해상도 및 활용가능 비디오/오디오 코덱(Video/Audio Codec)에 따라 미리 정의된 비트율(Bitrate) 이상이면 가능한 것으로 상기 후보 화면가상화 기술 리스트에 등록하는 것을 특징으로 하는 클라우드 장치.
  5. 제 2 항에 있어서,
    상기 화면가상화 기술 결정부는, 상기 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능 여부에 대해, 웹서비스가 가능하면 웹서비스를 결정하고, 웹서비스가 불가능하면 RDP/VNC로 처리 가능한지를 확인하며, RDP/VNC로 처리 불가능하면 비디오 스트리밍을 통해 처리하며, CPU의 부하로 비디오 스트리밍이 불가능하면 RDP/VNC로 처리 하도록 결정하는 것을 특징으로 하는 클라우드 장치.
  6. 제 2 항에 있어서,
    상기 장치용량 분석부는, 상기 시스템 프로파일 정보에 근거해 요청 서비스가 웹서비스로 지원 가능하고 상기 사용자 단말기가 풀 브라우징이 가능한 경우 웹브라우저로 서비스 가능한 것으로 결정하며, RDP/VNC의 경우 요청 서비스에 비디오가 포함되면 처리 불가로 결정하며, 네트워크의 평균 전송률이 미리 정의된 단말기 해상도별 RDP/VNC로 처리시 요구되는 데이터 전송률 이하이면 RDP/VNC로 처리 불가를 결정하며, 비디오 스트리밍의 경우 장치에서 화면을 비디오 인코딩하여 수행하는 경우 상승하는 CPU 부하를 결정하는 것을 특징으로 하는 클라우드 장치.
  7. 제 2 항에 있어서,
    상기 제어부는, 상기 최종 화면가상화 기술이 웹서비스로 결정되면 웹으로 화면가상화 서비스를 제공하고, 상기 사용자 단말기에서 RDP/VNC를 지원하여 RDP/VNC로 결정되면 상기 RDP/VNC로 화면 가상화 서비스를 제공하며, 비디오 스트리밍으로 결정되면, CPU 부하가 임계값 이하일 때 비디오 스트리밍을 통해 화면가상화 서비스를 제공하는 것을 특징으로 하는 클라우드 장치.
  8. 클라우드 장치와 통신망을 통해 통신하기 위한 통신부;
    상기 클라우드 장치에 전송하기 위한 시스템 프로파일 정보를 관리하는 프로파일 관리부;
    상기 시스템 프로파일 정보를 상기 클라우드 장치에 전송하며, 상기 클라우드 장치로부터 상기 시스템 프로파일 정보에 근거해 결정된 최종 화면가상화 기술을 통해 화면 가상화 서비스에 관한 데이터를 수신하여 출력하도록 제어하는 제어부; 및
    상기 클라우드 장치로부터 수신된 상기 화면 가상화 서비스에 관한 데이터를 화면 또는 음향으로 출력하는 출력부;
    를 포함하는 사용자 단말기.
  9. 제 8 항에 있어서,
    상기 시스템 프로파일 정보는 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP/VNC 클라이언트 구동 가능여부, 네트워크 상태, 해상도 정보, 요청 서비스를 포함하는 것을 특징으로 하는 사용자 단말기.
  10. 제 9 항에 있어서,
    상기 웹브라우저의 성능은 인터넷 상의 웹페이지를 문제없이 표시할 수 있는지의 풀 브라우징(Full Browsing) 여부로 구분하고, 상기 RDP/VNC 클라이언트 구동 가능여부는 RDP 또는 VNC 클라이언트가 구동 가능한지로 구분하며, 상기 비디오 스트리밍 재생 기능은 단말기에 설치된 코덱 리스트(Codec List), 스트리밍 프로토콜(Streaming Protocol)을 포함하며, 상기 네트워크 상태는 네트워크의 종류와 평균 전송속도를 포함하며, 상기 요청 서비스는 사용자가 요청하는 서비스 또는 어플리케이션을 포함하는 것을 특징으로 하는 사용자 단말기.
  11. 사용자 단말기와 클라우드 장치가 통신망을 통해 통신하는 시스템의 단말기에 따른 적응적 화면 가상화 방법에 있어서,
    (a) 상기 사용자 단말기가 통신망을 통해 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing) 클라이언트 구동 가능여부, 네트워트 상태, 해상도, 요청 서비스를 포함하는 시스템 프로파일 정보를 상기 클라우드 장치에 전송하는 단계;
    (b) 상기 클라우드 장치가 상기 시스템 프로파일 정보로부터 상기 사용자 단말기가 처리 가능한 후보 화면가상화 기술 리스트를 생성하는 단계;
    (c) 상기 클라우드 장치가 상기 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능여부를 확인하는 단계;
    (d) 상기 클라우드 장치가 상기 각 기술별 장치 부하량 및 처리 가능여부에 따라 화면가상화 기술을 결정하는 단계; 및
    (e) 상기 클라우드 장치가 상기 결정된 화면가상화 기술을 통해 상기 사용자 단말기에 화면 가상화 서비스를 제공하는 단계;
    를 포함하는 단말기에 따른 적응적 화면 가상화 시스템.
  12. 통신망을 통해 사용자 단말기와 통신하는 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법으로서,
    (a) 상기 사용자 단말기로부터 시스템 프로파일 정보를 수신하는 단계;
    (b) 상기 시스템 프로파일 정보로부터 상기 사용자 단말기가 처리 가능한 후보 화면 가상화 기술 리스트를 생성하는 단계;
    (c) 상기 후보 화면가상화 기술 리스트에 따라 각 기술별 장치 부하량 및 처리 가능 여부를 확인하는 단계;
    (d) 상기 후보 화면가상화 기술 리스트의 상기 각 기술별 장치 부하량 및 처리 가능 여부에 따라 최종 화면가상화 기술을 결정하는 단계; 및
    (e) 상기 최종 화면 가상화 기술을 통해 상기 사용자 단말기에 화면가상화 서비스를 제공하는 단계;
    를 포함하는 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법.
  13. 제 12 항에 있어서,
    상기 (b) 단계는, 풀 브라우징(Full Browsing), RDP(Remote Desktop Protocol)/VNC(Virtual Network Computing), 비디오 스트리밍(Video Streaming)이 가능한지를 각각 확인하여 가능한 기능을 상기 후보 화면가상화 기술 리스트에 등록하는 것을 특징으로 하는 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법.
  14. 제 13 항에 있어서,
    상기 (b) 단계는, 상기 비디오 스트리밍의 경우, 상기 사용자 단말기가 오디오와 비디오에 대해 최소한 하나 이상의 코덱(Codec)과 스트리밍 프로토콜(Streaming Protocol)을 지원하고, 네트워크의 평균 전송속도가 단말기의 해상도 및 활용가능 비디오/오디오 코덱(Video/Audio Codec)에 따라 미리 정의된 비트율(Bitrate) 이상이면 가능한 것으로 상기 후보 화면가상화 기술 리스트에 등록하는 것을 특징으로 하는 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법.
  15. 제 12 항에 있어서,
    상기 (d) 단계는, 상기 후보 화면가상화 기술 리스트의 각 기술별 장치 부하량 및 처리 가능 여부에 대해, 웹서비스가 가능하면 웹서비스를 결정하고, 웹서비스가 불가능하면 RDP/VNC로 처리 가능한지를 확인하며, RDP/VNC로 처리 불가능하면 비디오 스트리밍을 통해 처리하며, CPU의 부하로 비디오 스트리밍이 불가능하면 RDP/VNC로 처리하도록 결정하는 것을 특징으로 하는 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법.
  16. 제 12 항에 있어서,
    상기 (c) 단계는, 상기 시스템 프로파일 정보에 근거해 요청 서비스가 웹서비스로 지원 가능하고 상기 사용자 단말기가 풀 브라우징이 가능한 경우 웹브라우저로 서비스 가능한 것으로 결정하며, RDP/VNC의 경우 요청 서비스에 비디오가 포함되면 처리 불가로 결정하며, 네트워크의 평균 전송률이 미리 정의된 단말기 해상도별 RDP/VNC로 처리시 요구되는 데이터 전송률 이하이면 RDP/VNC로 처리 불가를 결정하며, 비디오 스트리밍의 경우 장치에서 화면을 비디오 인코딩하여 수행하는 경우 상승하는 CPU 부하를 결정하는 것을 특징으로 하는 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법.
  17. 제 12 항에 있어서,
    상기 (e) 단계는, 상기 최종 화면가상화 기술이 웹서비스로 결정되면 웹으로 화면가상화 서비스를 제공하고, 상기 사용자 단말기에서 RDP/VNC를 지원하여 RDP/VNC로 결정되면 상기 RDP/VNC로 화면 가상화 서비스를 제공하며, 비디오 스트리밍으로 결정되면, CPU 부하가 임계값 이하일 때 비디오 스트리밍을 통해 화면가상화 서비스를 제공하는 것을 특징으로 하는 클라우드 장치의 단말기에 따른 적응적 화면 가상화 방법.
  18. 클라우드 장치와 통신망을 통해 통신하는 사용자 단말기의 적응적 화면 가상화 방법으로서,
    (a) 상기 클라우드 장치에 시스템 프로파일 정보를 전송하는 단계; 및
    (b) 상기 클라우드 장치로부터 상기 시스템 프로파일 정보에 근거해 결정된 최종 화면가상화 기술을 통해 화면 가상화 서비스에 관한 데이터를 수신하는 단계; 및
    (c) 상기 클라우드 장치로부터 수신된 상기 화면 가상화 서비스에 관한 데이터를 화면 또는 음향으로 출력하는 단계;
    를 포함하는 사용자 단말기의 적응적 화면 가상화 방법.
  19. 제 18 항에 있어서,
    상기 시스템 프로파일 정보는 웹브라우저의 성능, 비디오 스트리밍 재생 기능, RDP/VNC 클라이언트 구동 가능여부, 네트워크 상태, 해상도 정보, 요청 서비스를 포함하는 것을 특징으로 하는 사용자 단말기의 적응적 화면 가상화 방법.
  20. 제 19 항에 있어서,
    상기 웹브라우저의 성능은 인터넷 상의 웹페이지를 문제없이 표시할 수 있는지의 풀 브라우징(Full Browsing) 여부로 구분하고, 상기 RDP/VNC 클라이언트 구동 가능여부는 RDP 또는 VNC 클라이언트가 구동 가능한지로 구분하며, 상기 비디오 스트리밍 재생 기능은 단말기에 설치된 코덱 리스트(Codec List), 스트리밍 프로토콜(Streaming Protocol)을 포함하며, 상기 네트워크 상태는 네트워크의 종류와 평균 전송속도를 포함하며, 상기 요청 서비스는 사용자가 요청하는 서비스 또는 어플리케이션을 포함하는 것을 특징으로 하는 사용자 단말기의 적응적 화면 가상화 방법.
PCT/KR2011/004169 2010-09-30 2011-06-08 단말기에 따른 적응적 화면 가상화 방법 및 시스템 WO2012043962A1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2013531470A JP5459693B2 (ja) 2010-09-30 2011-06-08 端末機による適応的画面仮想化方法及びシステム
EP11829468.5A EP2624611B1 (en) 2010-09-30 2011-06-08 Method and system for visualizing an adaptive screen according to a terminal
CN201180053734.0A CN103210672B (zh) 2010-09-30 2011-06-08 根据终端将自适应画面虚拟化的方法和系统
SG2013024054A SG189194A1 (en) 2010-09-30 2011-06-08 Method and system for visualizing an adaptive screen according to a terminal

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2010-0094963 2010-09-30
KR1020100094963A KR101471366B1 (ko) 2010-09-30 2010-09-30 단말기에 따른 적응적 화면 가상화 방법 및 시스템

Publications (1)

Publication Number Publication Date
WO2012043962A1 true WO2012043962A1 (ko) 2012-04-05

Family

ID=45893372

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2011/004169 WO2012043962A1 (ko) 2010-09-30 2011-06-08 단말기에 따른 적응적 화면 가상화 방법 및 시스템

Country Status (7)

Country Link
US (2) US8671435B2 (ko)
EP (1) EP2624611B1 (ko)
JP (1) JP5459693B2 (ko)
KR (1) KR101471366B1 (ko)
CN (1) CN103210672B (ko)
SG (1) SG189194A1 (ko)
WO (1) WO2012043962A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8671435B2 (en) 2010-09-30 2014-03-11 Sk Planet Co., Ltd. Method and system for visualizing an adaptive screen according to a terminal
WO2014127385A1 (en) * 2013-02-18 2014-08-21 Airometric Wireless Inc. Performance evaluation of services and applications on devices in live wireless environments
CN105072190A (zh) * 2015-08-21 2015-11-18 刘昌平 一种实时性桌面云的实现方法及系统

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101237504B1 (ko) * 2011-08-10 2013-02-27 주식회사 비티비솔루션 이종의 원격 제어 서비스를 지원하는 서버 및 방법
KR101671310B1 (ko) * 2012-05-30 2016-11-02 엔트릭스 주식회사 화면 가상화 기반 어플리케이션 구동 시스템 및 방법
KR101385605B1 (ko) * 2012-07-16 2014-04-16 옵티시스 주식회사 영상 매트릭스 장치
WO2014092293A1 (ko) * 2012-12-12 2014-06-19 에스케이플래닛 주식회사 사용자의 입력에 즉각적인 결과를 제공할 수 있는 서비스 제공 방법, 이를 위한 시스템 및 장치
KR101480140B1 (ko) * 2013-01-03 2015-01-07 주식회사 비티비솔루션 멀티 인젝션 서버 및 그 방법
KR20140094992A (ko) * 2013-01-23 2014-07-31 주식회사 포키비언 입출력 신호 송수신 장치 및 입출력 신호 송수신 방법
KR101531284B1 (ko) * 2013-02-15 2015-06-24 에스케이플래닛 주식회사 클라우드 스트리밍 서비스를 제공하기 위한 장치, 이를 위한 방법 및 이를 위한 시스템
CN104053019A (zh) * 2013-03-12 2014-09-17 中兴通讯股份有限公司 基于虚拟桌面的视频播放、处理方法及装置
KR101451956B1 (ko) 2013-06-07 2014-10-16 에스케이플래닛 주식회사 클라우드 서비스 시스템, 클라우드 서비스 장치 및 이를 이용한 방법
KR102050417B1 (ko) 2013-09-25 2019-12-17 한화테크윈 주식회사 네트워크 시스템 및 방법
JP2015114683A (ja) * 2013-12-09 2015-06-22 株式会社リコー 情報処理システム、機器、情報処理方法、及びプログラム
CN104735108B (zh) * 2013-12-20 2018-07-17 中国移动通信集团公司 一种使用云桌面的方法、装置和云桌面系统
KR102104410B1 (ko) 2014-01-20 2020-04-27 한화테크윈 주식회사 카메라 프로파일 설정 방법 및 영상 수신 장치
KR101671311B1 (ko) * 2014-02-27 2016-11-01 엔트릭스 주식회사 클라우드 스트리밍 서비스 시스템, 이를 위한 장치 및 클라우드 스트리밍 서비스 방법
CN104144351B (zh) * 2014-04-04 2017-09-19 北京泰然神州科技有限公司 应用虚拟化平台的视频播放方法和装置
US9729785B2 (en) * 2015-01-19 2017-08-08 Microsoft Technology Licensing, Llc Profiles identifying camera capabilities that are usable concurrently
JP6786967B2 (ja) 2016-09-02 2020-11-18 コニカミノルタ株式会社 情報処理装置およびプログラム
US11032157B2 (en) * 2019-05-16 2021-06-08 Microsoft Technology Licensing, Llc Adaptable real-time communications plugin for virtual desktop infrastructure solutions
EP3771219A1 (en) * 2019-07-22 2021-01-27 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
CN114465922A (zh) * 2021-12-21 2022-05-10 中孚安全技术有限公司 一种用户访问基线的可视化监控方法、系统及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080228865A1 (en) * 2007-03-15 2008-09-18 Nazareno Brier Cruzada Electronic personal computing and videophone system consisting of a remote server system providing dynamic, subscription based virtual computing services & resources, a thin client hardware device connected to a television set and wireless keyboard & mouse, and a wireless mobile device (a Pocket PC Phone)
KR20090018992A (ko) * 2007-03-20 2009-02-24 이상규 클라이언트용 컴퓨팅 환경을 제공하는 방법
KR20090100614A (ko) * 2008-03-20 2009-09-24 삼성전자주식회사 가상환경 시스템 및 그의 구동방법
US20100241731A1 (en) * 2009-03-17 2010-09-23 Gladinet, Inc. Method for virtualizing internet resources as a virtual computer

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003169329A (ja) * 1996-08-07 2003-06-13 Matsushita Electric Ind Co Ltd 画像音声符号化復号化装置
JPH11212911A (ja) * 1998-01-28 1999-08-06 Mitsubishi Electric Corp 分散サービス連携装置
US6687753B2 (en) * 1998-06-25 2004-02-03 International Business Machines Corporation Method and system for providing three-dimensional graphics over computer networks
JP2003259333A (ja) * 2002-03-04 2003-09-12 Toshiba Corp デジタル信号送信装置、デジタル信号受信装置並びにデジタル信号送受信方法。
JP2003308277A (ja) * 2002-04-17 2003-10-31 Sony Corp 端末装置、データ送信装置、データ送受信システム及びデータ送受信方法
JP2004187062A (ja) * 2002-12-04 2004-07-02 Matsushita Electric Ind Co Ltd 遠隔制御システム及びその画像転送方法
US7418472B2 (en) * 2003-09-30 2008-08-26 Microsoft Corporation Systems and methods for determining remote device media capabilities
CN100493074C (zh) * 2003-10-24 2009-05-27 中国科学院计算技术研究所 一种终端应用协议中自适应的多媒体分布播放方法
US7797453B2 (en) * 2006-09-29 2010-09-14 Microsoft Corporation Resource standardization in an off-premise environment
JP5612807B2 (ja) * 2007-03-13 2014-10-22 セイコーエプソン株式会社 画像送信方式の決定方法、画像供給システム、画像供給装置、プログラム及びコンピュータに読取り可能な記録媒体
CN101378400B (zh) * 2007-08-30 2013-01-30 国际商业机器公司 实现桌面应用和Web应用聚合的方法、服务器和系统
JP2009260818A (ja) * 2008-04-18 2009-11-05 Nec Corp サーバ装置とコンテンツ配信方法とプログラム
JP4661907B2 (ja) * 2008-05-30 2011-03-30 ソニー株式会社 情報処理システム、情報処理装置及び情報処理方法、並びにプログラム
CN101420670A (zh) * 2008-05-30 2009-04-29 北京天腾时空信息科技有限公司 一种终端内容适配的方法和装置
CN101770477A (zh) * 2008-12-26 2010-07-07 新奥特硅谷视频技术有限责任公司 一种用户终端中案例文件内容适配的方法和装置
CN201571083U (zh) * 2009-12-01 2010-09-01 深圳市泰宇凯达科技发展有限公司 一种基于云计算应用的网络多媒体系统
KR101471366B1 (ko) 2010-09-30 2014-12-10 에스케이플래닛 주식회사 단말기에 따른 적응적 화면 가상화 방법 및 시스템

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080228865A1 (en) * 2007-03-15 2008-09-18 Nazareno Brier Cruzada Electronic personal computing and videophone system consisting of a remote server system providing dynamic, subscription based virtual computing services & resources, a thin client hardware device connected to a television set and wireless keyboard & mouse, and a wireless mobile device (a Pocket PC Phone)
KR20090018992A (ko) * 2007-03-20 2009-02-24 이상규 클라이언트용 컴퓨팅 환경을 제공하는 방법
KR20090100614A (ko) * 2008-03-20 2009-09-24 삼성전자주식회사 가상환경 시스템 및 그의 구동방법
US20100241731A1 (en) * 2009-03-17 2010-09-23 Gladinet, Inc. Method for virtualizing internet resources as a virtual computer

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2624611A4 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8671435B2 (en) 2010-09-30 2014-03-11 Sk Planet Co., Ltd. Method and system for visualizing an adaptive screen according to a terminal
WO2014127385A1 (en) * 2013-02-18 2014-08-21 Airometric Wireless Inc. Performance evaluation of services and applications on devices in live wireless environments
CN105072190A (zh) * 2015-08-21 2015-11-18 刘昌平 一种实时性桌面云的实现方法及系统

Also Published As

Publication number Publication date
EP2624611A1 (en) 2013-08-07
KR101471366B1 (ko) 2014-12-10
US20130179930A1 (en) 2013-07-11
SG189194A1 (en) 2013-05-31
JP5459693B2 (ja) 2014-04-02
EP2624611A4 (en) 2017-06-21
US8671435B2 (en) 2014-03-11
JP2013545164A (ja) 2013-12-19
CN103210672B (zh) 2016-02-24
KR20120033450A (ko) 2012-04-09
EP2624611B1 (en) 2021-05-19
CN103210672A (zh) 2013-07-17
US9106521B2 (en) 2015-08-11
US20140164605A1 (en) 2014-06-12

Similar Documents

Publication Publication Date Title
WO2012043962A1 (ko) 단말기에 따른 적응적 화면 가상화 방법 및 시스템
JP5451397B2 (ja) リモートインターラクションに応答してビデオコンテンツを配信するためのアーキテクチャー
WO2016052845A1 (ko) 클라우드 스트리밍 서비스 시스템, 최적 gpu를 이용한 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
WO2014051207A1 (en) Electronic device, server and control method thereof
WO2011037316A2 (ko) 스마트카드 기반 브라우징 시스템 및 그 방법, 그리고 이에 적용되는 스마트카드
EP2769309A1 (en) Method and apparatus for sharing contents between devices
WO2015108300A1 (ko) 프레임률 제어 방법 및 그 전자 장치
WO2012067431A2 (en) Resource distribution apparatus and method in cloud computing
TWI495330B (zh) 有效地串流數位視訊的系統及方法
WO2014035094A1 (ko) 통화 시도시 이동 통신 단말기로 부가 정보를 제공하는 시스템 및 방법
WO2018040174A1 (zh) 一种设置预览分辨率的方法、装置及终端
WO2012163216A1 (zh) 一种针对java程序的移动终端输入控制方法和装置
JP7465370B2 (ja) 情報共有方法、装置、電子機器及び記憶媒体
WO2013032281A2 (en) Electronic apparatus and method for transferring contents on cloud system to device connected to dlna
KR101630638B1 (ko) 화면 가상화 기반 어플리케이션 실행 시스템 및 방법
WO2014089965A1 (zh) 显示dlna设备的方法及移动终端
WO2012008796A2 (en) Apparatus and method for controlling remote user interface servers using a multicast message in a home network
WO2013129833A1 (en) Remote user interface providing apparatus and method
WO2014051371A1 (en) Apparatus and method for transmitting/receiving buffering data in media streaming service
WO2021020746A1 (ko) 가상 머신 관리 장치 및 방법
WO2023033229A1 (ko) 적응형 배치 프로세싱 방법 및 시스템
WO2023226787A1 (zh) 通信方法、系统、装置和电子设备
WO2013168933A1 (ko) 멀티미디어 데이터의 재생이 가능한 이동 단말기 및 이동 단말기의 멀티미디어 재생 방법
WO2015093653A1 (ko) 컨텐츠 서비스 시스템 및 방법
KR20120117150A (ko) 디바이스와 장착하여 가상 머신을 제어하기 위한 가상화 장치 및 방법

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201180053734.0

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11829468

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2013531470

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2011829468

Country of ref document: EP