KR101537352B1 - Mobile device and method for displaying virture screen image of virtual mobile device and local screen image - Google Patents

Mobile device and method for displaying virture screen image of virtual mobile device and local screen image Download PDF

Info

Publication number
KR101537352B1
KR101537352B1 KR1020130035309A KR20130035309A KR101537352B1 KR 101537352 B1 KR101537352 B1 KR 101537352B1 KR 1020130035309 A KR1020130035309 A KR 1020130035309A KR 20130035309 A KR20130035309 A KR 20130035309A KR 101537352 B1 KR101537352 B1 KR 101537352B1
Authority
KR
South Korea
Prior art keywords
input
mobile device
virtual
control input
user
Prior art date
Application number
KR1020130035309A
Other languages
Korean (ko)
Other versions
KR20140119521A (en
Inventor
이문상
백성복
이영우
한승희
황찬규
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020130035309A priority Critical patent/KR101537352B1/en
Publication of KR20140119521A publication Critical patent/KR20140119521A/en
Application granted granted Critical
Publication of KR101537352B1 publication Critical patent/KR101537352B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Telephonic Communication Services (AREA)
  • Telephone Function (AREA)

Abstract

모바일 디바이스는 사용자 인터페이스로부터 사용자의 제 1 입력이 수신된 경우, 가상화 서버로 하여금 가상 모바일 디바이스를 실행하게 하는 실행 요청 메시지를 가상화 서버로 전송하는 전송부, 가상화 서버로부터 수신된 실행 결과 데이터에 기초하여 가상 모바일 디바이스의 가상 화면 영상을 모바일 디바이스의 디스플레이에 표시하는 표시부, 사용자 인터페이스로부터 상기 사용자의 제 2 입력이 수신된 경우, 제 2 입력이 모바일 디바이스에 대한 로컬 제어 입력인지 가상 모바일에 대한 가상 제어 입력인지 여부를 판단하는 입력판단부, 판단 결과 제 2 입력이 로컬 제어 입력인 경우, 로컬 제어 입력에 대응하는 동작을 수행하는 동작수행부를 포함하고 표시부는 제 2 입력이 로컬 제어 입력인 경우 표시된 가상 화면 영상을 모바일 디바이스의 로컬 화면 영상으로 전환한다.  The mobile device includes a transmitting unit for transmitting an execution request message for causing the virtualization server to execute the virtual mobile device to the virtualization server when the first input of the user is received from the user interface, A display unit for displaying a virtual screen image of the virtual mobile device on a display of the mobile device; a second input for receiving the second input of the user from the user interface; a virtual control input for the virtual mobile; And an operation performing unit for performing an operation corresponding to the local control input when the second input is a local control input, wherein the display unit displays the virtual screen when the second input is a local control input, Video to mobile device Switch to the curl screen image.

Description

가상 모바일 디바이스의 가상 화면 영상 및 로컬 화면 영상을 표시하는 모바일 디바이스 및 방법{MOBILE DEVICE AND METHOD FOR DISPLAYING VIRTURE SCREEN IMAGE OF VIRTUAL MOBILE DEVICE AND LOCAL SCREEN IMAGE}TECHNICAL FIELD [0001] The present invention relates to a mobile device and a method for displaying a virtual screen image and a local screen image of a virtual mobile device,

본 발명은 가상 모바일 디바이스의 가상 화면 영상 및 로컬 화면 영상을 표시하는 모바일 디바이스 및 방법에 관한 것이다. The present invention relates to a mobile device and a method for displaying a virtual screen image and a local screen image of a virtual mobile device.

최근, 클라우드 상에 가상의 이동통신 단말기를 생성하고, 로컬 단말이 가상 단말에 원격으로 접속하여 마치 가상 단말을 로컬 단말처럼 사용하는 서비스가 등장하고 있다. 원격 접속 상태에서 실행하는 모든 동작은 로컬 단말이 아닌 클라우드 상에서 실행되며 가상 단말의 화면 및 소리와 같은 출력은 로컬 단말로 전송되어 로컬 단말상에서 그대로 출력된다. 이와 관련하여 선행기술인 한국공개특허 제 2011-0076153에는 컴퓨터 단말기에서의 이동통신 단말기 원격 제어 시스템 및 방법이 개시되어 있다. Recently, a virtual mobile communication terminal is created on a cloud, and a local terminal is remotely connected to a virtual terminal, so that a virtual terminal is used as a local terminal. All operations executed in the remote connection state are executed in the cloud, not in the local terminal, and outputs such as the screen and sound of the virtual terminal are transmitted to the local terminal and output as they are on the local terminal. In this regard, Korean Patent Laid-Open Publication No. 2011-0076153 discloses a remote control system and method for a mobile communication terminal in a computer terminal.

한편, 기존의 가상 단말 제어 기술은 가상 단말과 로컬 단말의 제어를 로컬 단말에서 수행함에 있어서 이중 방식의 사용자 인터페이스가 제공되어 직관적이고 일관된 사용성을 저해하는 불편을 초래하였다. Meanwhile, the existing virtual terminal control technology incurs inconvenience of intuitively and consistently hindering usability by providing a dual-type user interface in controlling the virtual terminal and the local terminal on the local terminal.

클라우드 상에서 실행되는 가상 단말과 사용자의 로컬 단말의 직관적인 단일 방식 제어를 위해, 가상 단말과 로컬 단말 중 사용자 입력을 수신할 대상을 판별하고, 제어 입력을 수신할 대상에게 제어 명령에 대한 변환 매핑을 제공하여 사용자 입력을 전달하고자 한다. In order to intuitively control the virtual terminal running on the cloud and the user's local terminal in an intuitive manner, it is necessary to determine an object to receive the user input among the virtual terminal and the local terminal, To deliver user input.

다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다. It is to be understood, however, that the technical scope of the present invention is not limited to the above-described technical problems, and other technical problems may exist.

상술한 기술적 과제 중 적어도 하나 이상을 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예는 사용자 인터페이스로부터 사용자의 제 1 입력이 수신된 경우, 가상화 서버로 하여금 가상 모바일 디바이스를 실행하게 하는 실행 요청 메시지를 가상화 서버로 전송하는 전송부, 가상화 서버로부터 수신된 실행 결과 데이터에 기초하여 가상 모바일 디바이스의 가상 화면 영상을 모바일 디바이스의 디스플레이에 표시하는 표시부, 사용자 인터페이스로부터 상기 사용자의 제 2 입력이 수신된 경우, 제 2 입력이 모바일 디바이스에 대한 로컬 제어 입력인지 가상 모바일에 대한 가상 제어 입력인지 여부를 판단하는 입력판단부, 판단 결과 제 2 입력이 로컬 제어 입력인 경우, 로컬 제어 입력에 대응하는 동작을 수행하는 동작수행부를 포함하고 표시부는 제 2 입력이 로컬 제어 입력인 경우 표시된 가상 화면 영상을 모바일 디바이스의 로컬 화면 영상으로 전환하는 모바일 디바이스를 제공할 수 있다. As a technical means for achieving at least one of the above-described technical problems, an embodiment of the present invention provides a virtualization server, in which, when a first input of a user is received from a user interface, A display unit for displaying the virtual screen image of the virtual mobile device on the display of the mobile device based on the execution result data received from the virtualization server, An input determining unit for determining whether the second input is a local control input to the mobile device or a virtual control input to the virtual mobile, and if the second input is a local control input, performing an operation corresponding to the local control input And the display unit And converting the displayed virtual screen image into a local screen image of the mobile device when the second input is a local control input.

본 발명의 다른 실시예에 있어서, 사용자 인터페이스로부터 사용자의 제 1 입력이 수신된 경우, 가상화 서버로 하여금 가상 모바일 디바이스를 실행하게 하는 실행 요청 메시지를 가상화 서버로 전송하는 단계, 가상화 서버로부터 수신된 실행 결과 데이터에 기초하여 가상 모바일 디바이스의 가상 화면 영상을 모바일 디바이스의 디스플레이에 표시하는 단계, 사용자 인터페이스로부터 사용자의 제 2 입력이 수신된 경우, 제 2 입력이 모바일 디바이스에 대한 로컬 제어 입력인지 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하는 단계, 판단 결과 제 2 입력이 로컬 제어 입력인 경우, 로컬 제어 입력에 대응하는 동작을 수행하는 단계, 제 2 입력이 로컬 제어 입력인 경우 표시된 가상 화면 영상을 모바일 디바이스의 로컬 화면 영상으로 전환하는 단계를 포함하는 입력 처리 방법을 제공할 수 있다. In another embodiment of the present invention, there is provided a method of operating a virtual mobile device, comprising: transmitting, when a first input of a user is received from a user interface, an execution request message to a virtualization server, Displaying the virtual screen image of the virtual mobile device on the display of the mobile device based on the result data, if the second input of the user is received from the user interface, whether the second input is a local control input to the mobile device, Determining whether the input is a virtual control input to the local control input; if the second input is a local control input, performing an operation corresponding to the local control input; if the second input is a local control input, Local screen image of mobile device The input processing method comprising:

본 발명의 또 다른 실시예는 사용자 인터페이스로부터 사용자의 제 1 입력이 수신된 경우, 상기 제 1 입력에 대응하는 로컬 화면 영상을 상기 모바일 디바이스에 표시하는 표시부, 상기 사용자 인터페이스로부터 상기 사용자의 제 2 입력이 수신된 경우, 상기 제 2 입력이 상기 모바일 디바이스에 대한 로컬 제어 입력인지 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하는 입력 판단부 및 상기 판단 결과 제 2 입력이 상기 가상 제어 입력인 경우, 가상화 서버로 하여금 상기 가상 모바일 디바이스를 실행하게 하는 실행 요청 메시지를 전송하는 전송부를 포함하고, 상기 표시부는 상기 가상화 서버로부터 수신된 실행 결과 데이터에 기초하여 상기 표시된 로컬 화면 영상을 상기 가상 모바일 디바이스의 가상 화면 영상으로 전환하는 것인 모바일 디바이스를 제공할 수 있다. According to another embodiment of the present invention, there is provided a mobile communication system including a display unit for displaying a local screen image corresponding to the first input on a mobile device when a first input of a user is received from a user interface, An input deciding unit for deciding whether the second input is a local control input for the mobile device or a virtual control input for the virtual mobile device when the second input is the virtual control input, And a transmission unit for transmitting an execution request message for causing the virtualization server to execute the virtual mobile device, wherein the display unit displays the displayed local screen image on the virtual mobile device based on execution result data received from the virtualization server, Switching to a screen image It is possible to provide a mobile device.

전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 클라우드 상에서 실행되는 가상 단말과 사용자의 로컬 단말간 동일한 단일 제어 방식을 제공함으로써 직관적인 사용성을 높일 수 있다. 가상 단말과 로컬 단말간의 입력 모드 전환이 없으므로 추가 입력을 하기 위한 불편함을 최소화할 수 있다. 또한, 가상 단말과 로컬 단말간의 화면 전환이 없으므로 가상 단말의 화면 위에 입력 모드 선택을 위한 화면이 중첩되지 않기 때문에 자연스러운 사용성을 제공할 수 있다. According to any one of the above-mentioned objects of the present invention, intuitive usability can be enhanced by providing the same single control method between the virtual terminal executed on the cloud and the local terminal of the user. Since there is no input mode switching between the virtual terminal and the local terminal, the inconvenience for additional input can be minimized. In addition, since there is no screen switching between the virtual terminal and the local terminal, the screen for selecting the input mode is not superimposed on the screen of the virtual terminal, so natural usability can be provided.

도 1은 본 발명의 일 실시예에 따른 가상 모바일 디바이스 시스템의 구성도이다.
도 2는 도 1에 도시된 모바일 디바이스(10)의 구성도이다.
도 3은 도 1에 도시된 모바일 디바이스(10)의 외형의 일 예를 나타낸 구성도이다.
도 4는 로컬 제어 입력 동작과정과 가상 제어 입력 동작과정의 일 예를 나타낸 흐름도이다.
도 5는 사용자 제어 입력이 모바일 디바이스(10)의 로컬 제어 입력인지 가상 모바일 디바이스(20)의 가상 제어 입력인지 판단하는 과정의 일 예를 나타낸 동작 흐름도이다.
도 6은 본 발명의 다른 실시예에 따른 모바일 디바이스(60)의 구성도이다.
도 7은 본 발명의 일 실시예에 따른 모바일 디바이스(10)의 입력 처리 방법을 나타낸 흐름도이다. 1 is a configuration diagram of a virtual mobile device system according to an embodiment of the present invention.
2 is a configuration diagram of the mobile device 10 shown in FIG.
3 is a block diagram showing an example of the outer shape of the mobile device 10 shown in FIG.
4 is a flowchart illustrating an example of a local control input operation and a virtual control input operation.
5 is an operation flowchart illustrating an example of a process for determining whether a user control input is a local control input of the mobile device 10 or a virtual control input of the virtual mobile device 20. [
6 is a configuration diagram of a mobile device 60 according to another embodiment of the present invention.
7 is a flowchart illustrating an input processing method of the mobile device 10 according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings, which will be readily apparent to those skilled in the art. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. In order to clearly illustrate the present invention, parts not related to the description are omitted, and similar parts are denoted by like reference characters throughout the specification.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. Throughout the specification, when a part is referred to as being "connected" to another part, it includes not only "directly connected" but also "electrically connected" with another part in between . Also, when an element is referred to as "comprising ", it means that it can include other elements as well, without departing from the other elements unless specifically stated otherwise.

도 1은 본 발명의 일 실시예에 따른 모바일 원격조정 시스템의 구성도이다. 도 1을 참조하면, 모바일 원격조정 시스템은 모바일 디바이스(10), 가상화 서버(30) 및 가상 모바일 디바이스(31)를 포함한다.1 is a block diagram of a mobile remote control system according to an embodiment of the present invention. Referring to FIG. 1, a mobile telemetry system includes a mobile device 10, a virtualization server 30, and a virtual mobile device 31.

도 1의 도시된 가상 모바일 디바이스 시스템의 구성요소들은 일반적으로 무선 네트워크(Network)를 통해 연결된다. 무선 네트워크(Network)의 일 예에는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), 블루투스(Bluetooth) 네트워크, LTE(Long Term Evolution) 네트워크, Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 포함되나 이에 한정되지는 않는다. The components of the illustrated virtual mobile device system of FIG. 1 are generally connected via a wireless network. One example of a wireless network is a WLAN (Wi-Fi), a Wibro (Wireless broadband), a Bluetooth network, an LTE (Long Term Evolution) network, Wimax (World Interoperability for Microwave Access) (High Speed Downlink Packet Access), and the like.

모바일 디바이스(10)에서 가상 모바일 디바이스(31)를 원격 조정하기 위한 직관적인 사용자 인터페이스(40)를 제공받기 위하여 원격 접속용 애플리케이션이 모바일 디바이스(10)에 설치될 수 있으며. 원격 접속 애플리케이션이 활성화되면 모바일 디바이스(10)는 가상 모바일 디바이스(31)를 원격 조정할 수 있다. A remote access application may be installed in the mobile device 10 to provide an intuitive user interface 40 for remotely controlling the virtual mobile device 31 at the mobile device 10. [ When the remote access application is activated, the mobile device 10 can remotely control the virtual mobile device 31.

본 발명의 다양한 실시예들에 따르면, 가상 모바일 디바이스(31)는 가상화 서버의 자원을 활용하여 가상화 서버에 의해 생성되고, 모바일 디바이스(10)의 디스플레이 상에 표시된 그래픽 인터페이스를 통해 모바일 디바이스(10)에 의해 원격 제어되는 가상의 모바일 디바이스를 의미한다. 이 때, 모바일 디바이스(10)의 디스플레이 상에 표시된 그래픽 인터페이스는 가상의 모바일 디바이스(31)를 대표하는 그래픽 인터페이스이다. According to various embodiments of the present invention, the virtual mobile device 31 is created by the virtualization server utilizing the resources of the virtualization server, and communicated to the mobile device 10 via the graphical interface displayed on the display of the mobile device 10. [ Lt; RTI ID = 0.0 > remote < / RTI > At this time, the graphical interface displayed on the display of the mobile device 10 is a graphical interface that represents the virtual mobile device 31.

가상화 서버(30)는 무선 네트워크상에서 모바일 디바이스(10)로부터 가상 모바일 디바이스(31)의 실행 요청 메시지를 수신하고 모바일 디바이스(10)에게 가상 모바일 디바이스(31)의 실행 결과를 응답할 수 있다.The virtualization server 30 may receive the execution request message of the virtual mobile device 31 from the mobile device 10 on the wireless network and may reply the execution result of the virtual mobile device 31 to the mobile device 10. [

모바일 디바이스(10)는 무선 네트워크를 통해 가상 모바일 디바이스(31)에 접속할 수 있는 휴대용 단말기로 구현될 수 있다. 여기서 휴대용 단말기는 휴대성과 이동성이 보장되는 이동 통신 장치로서, 예를 들면, PCS(Personal Communication System), GSM(Global System for Mobile communication), PDC(Personal Digital Cellular), PHS(Personal Handyphone System), PDA(Personal Digital Assistant), IMT(International Mobile Telecommunication)-2000, CDMA(Code Division Multiple Access)-2000, W-CDMA(W-Code Division Multiple Access), Wibro(Wireless Broadband Internet) 단말, 스마트폰(Smartphone), 스마트패드(SmartPad), 태블릿 PC등과 같은 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치를 포함할 수 있다. 다만 도1에 개시된 모바일 디바이스(10)의 형태는 설명의 편의를 위해 예시된 것에 불과하므로, 본원에서 이야기하는 모바일 디바이스(10)의 종류 및 형태가 도 1에 도시된 것으로 한정 해석되는 것은 아니다. The mobile device 10 may be implemented as a portable terminal capable of connecting to the virtual mobile device 31 via a wireless network. Here, the portable terminal is a mobile communication device that is guaranteed to be portable and mobility. For example, a portable communication terminal such as a PCS (Personal Communication System), a GSM (Global System for Mobile communication), a PDC (Personal Digital Cellular), a PHS (Personal Digital Assistant), IMT (International Mobile Telecommunication) -2000, CDMA (Code Division Multiple Access) -2000, W-CDMA (W-CDMA), Wibro (Wireless Broadband Internet) , A smart pad, a tablet PC, and the like. It should be noted that the type of mobile device 10 disclosed in FIG. 1 is merely illustrated for convenience of explanation, and thus the type and the type of mobile device 10 discussed herein are not limited to what is shown in FIG.

이와 같은 모바일 디바이스(10)의 동작에 대해서는 아래에서 자세히 설명된다. The operation of such a mobile device 10 is described in detail below.

도 2는 본 발명의 일 실시예에 따른 도 1에 도시된 모바일 디바이스(10)의 구성도이다. 도 2를 참조하면 모바일 디바이스(10)는 입력 수신부(11), 전송부(12), 수신부(13), 표시부(14), 입력 판단부(15), 동작 수행부(16), 시간 설정부(17)를 포함한다. 다만, 도 2에 도시된 구성 요소들을 기초로 하여 여러 가지 변형이 가능함은 본원의 일 실시예가 속하는 기술분야에 속하는 통상의 지식을 가진 자라면 이해할 수 있다. 2 is a configuration diagram of the mobile device 10 shown in FIG. 1 according to an embodiment of the present invention. 2, the mobile device 10 includes an input receiving unit 11, a transmitting unit 12, a receiving unit 13, a display unit 14, an input determining unit 15, an operation performing unit 16, (17). However, it should be understood by those skilled in the art that various modifications may be made based on the components shown in FIG. 2, which are well known to those skilled in the art.

입력 수신부(11)는 사용자 인터페이스(40)로부터 사용자의 입력을 수신한다. 이 때, 사용자 인터페이스(40)는 물리적 버튼 인터페이스 또는 터치 입력 인터페이스일 수 있다. 사용자 인터페이스(40)가 물리적 버튼 인터페이스인 경우를 예시하면, 입력 수신부(11)는 사용자가 모바일 디바이스(10)의 물리적인 버튼인 MENU 버튼을 누르면 물리적 버튼 인터페이스로부터 MENU 버튼에 대응하는 신호를 수신할 수 있다. The input receiving unit 11 receives a user's input from the user interface 40. At this time, the user interface 40 may be a physical button interface or a touch input interface. In the case where the user interface 40 is a physical button interface, the input receiving unit 11 receives a signal corresponding to the MENU button from the physical button interface when the user presses the MENU button which is a physical button of the mobile device 10 .

사용자 인터페이스(40)가 물리적 버튼 인터페이스인 경우, 사용자 인터페이스(40)는 모바일 디바이스(10)의 물리적인 버튼들 각각에 대응하는 신호를 생성하여 입력 수신부로 송신할 수 있다. 물리적인 버튼들의 일 예에는 BACK, HOME, MENU, POWER, VOLUME 등이 포함된다. 물리적 버튼 인터페이스는 복수의 물리적인 버튼을 제어하는 관리 모듈이거나 물리적 버튼 각각을 제어하는 개별 소자일 수 있다. If the user interface 40 is a physical button interface, the user interface 40 may generate and transmit a signal corresponding to each of the physical buttons of the mobile device 10 to the input receiver. Examples of physical buttons include BACK, HOME, MENU, POWER, VOLUME, and the like. A physical button interface may be a management module that controls a plurality of physical buttons or may be a separate device that controls each of the physical buttons.

사용자 인터페이스(40)가 터치 입력 인터페이스인 경우, 사용자 인터페이스(40)는 모바일 디바이스(10)의 터치 패널을 통해 사용자가 선택한 그래픽 아이콘에 대응하는 신호를 생성하여 입력 수신부로 송신할 수 있다. 예를 들어, 사용자 인터페이스(40)는 복수의 그래픽 아이콘들을 디스플레이에 표시한 후, 사용자가 복수의 그래픽 아이콘들 중 MENU 아이콘을 선택하는 경우, 선택된 MENU 아이콘에 대응하는 신호를 생성하여 입력 수신부로 송신할 수 있다. 물리적 버튼 인터페이스는 터치 패널과 연결된 관리 모듈이거나 터치 패널로의 접근을 인식하는 개별 소자일 수 있다. When the user interface 40 is a touch input interface, the user interface 40 may generate a signal corresponding to the graphic icon selected by the user through the touch panel of the mobile device 10 and transmit the signal to the input receiving unit. For example, when the user selects a MENU icon among a plurality of graphic icons after displaying a plurality of graphic icons on the display, the user interface 40 generates a signal corresponding to the selected MENU icon and transmits the signal to the input receiver can do. The physical button interface may be a management module associated with the touch panel or an individual device that recognizes access to the touch panel.

전송부(12)는 사용자 인터페이스(40)로부터 사용자의 입력이 수신된 경우, 가상화 서버(30)로 하여금 가상 모바일 디바이스(31)를 실행하게 하는 실행 요청 메시지를 가상화 서버(30)로 전송할 수 있다. 이 때, 사용자의 입력은 사용자가 사용자 인터페이스(40)를 통해 모바일 디바이스(10)의 디스플레이에 표시된 복수의 아이콘 중 가상 모바일 디바이스(31)의 실행 아이콘을 선택한 것일 수 있다. The transfer unit 12 may transmit an execution request message to the virtualization server 30 to cause the virtualization server 30 to execute the virtual mobile device 31 when the user's input is received from the user interface 40 . At this time, the user's input may be that the user has selected the execution icon of the virtual mobile device 31 among the plurality of icons displayed on the display of the mobile device 10 via the user interface 40. [

전송부(12)는 사용자 인터페이스(40)로부터 사용자의 입력이 수신된 경우, 모바일 디바이스(10)에 설치된 가상화 서버(30) 접속용 어플리케이션을 실행시킨 후, 실행된 어플리케이션을 기반으로 실행 요청 메시지를 생성하여 가상화 서버(30)로 전송할 수 있다. 이 때, 사용자의 입력은 사용자가 사용자 인터페이스(40)를 통해 모바일 디바이스(10)의 디스플레이에 표시된 어플리케이션 실행 아이콘을 선택한 것일 수 있다. 다른 예를 들어, 사용자의 입력은 사용자가 사용자 인터페이스(40)를 통해 물리적인 버튼 중 어느 하나를 선택한 것일 수도 있다. When the input of the user is received from the user interface 40, the transfer unit 12 executes an application for accessing the virtualization server 30 installed in the mobile device 10, and then transmits an execution request message based on the executed application And transmit it to the virtualization server 30. At this time, the user's input may be that the user has selected an application execution icon displayed on the display of the mobile device 10 via the user interface 40. [ For another example, the user's input may be that the user has selected one of the physical buttons via the user interface 40. [

전송부(12)는 사용자 인터페이스(40)로부터 사용자의 입력이 복수 회 수신된 경우, 실행 요청 메시지를 생성하여 가상화 서버(30)로 전송할 수도 있다. 예를 들어, 전송부(12)는 사용자 인터페이스(40)로부터 사용자의 제 1 입력이 수신된 경우, 가상화 서버(30)와 연결하고, 가상화 서버(30)로부터 MENU 아이템 리스트를 수신하여 디스플레이에 표시한 후, 사용자 인터페이스(40)로부터 사용자의 제 2 입력이 수신된 경우 실행 요청 메시지를 생성하여 가상화 서버(30)로 전송할 수 있다. 이 때, 제 1 입력은 사용자가 가상화 서버(30) 연결 아이콘을 선택한 것이고, 제 2 입력은 MENU 아이템 리스트에 포함된 어느 하나의 아이콘을 선택한 것일 수 있다. 수신부(13)는 가상화 서버(30)로부터 실행 요청 메시지에 대응하는 실행 결과 데이터를 수신할 수 있다. 이 때, 실행 결과 데이터는 가상화 서버(30)에 의해 생성된 가상 모바일 디바이스(31)에 대응하는 그래픽 이미지 데이터일 수 있다. 가상 모바일 디바이스(31)에 대응하는 그래픽 이미지 데이터는 물리적인 모바일 디바이스의 외형과 물리적인 모바일 디바이스의 버튼 등을 그래픽적으로 구성한 데이터일 수 있다. The transmission unit 12 may generate an execution request message and transmit the execution request message to the virtualization server 30 when the user's input is received from the user interface 40 a plurality of times. For example, when the first input of the user is received from the user interface 40, the transfer unit 12 connects with the virtualization server 30, receives the menu item list from the virtualization server 30, When the second input of the user is received from the user interface 40, an execution request message may be generated and transmitted to the virtualization server 30. In this case, the first input may be that the user selected the connection icon of the virtualization server 30, and the second input may be any one of the icons included in the menu item list. The receiving unit 13 may receive the execution result data corresponding to the execution request message from the virtualization server 30. [ At this time, the execution result data may be graphic image data corresponding to the virtual mobile device 31 generated by the virtualization server 30. [ The graphic image data corresponding to the virtual mobile device 31 may be graphical data constituting physical appearance of the mobile device and physical buttons of the mobile device.

모바일 디바이스(30)의 디스플레이에 가상 모바일 디바이스(31)에 대응하는 그래픽 이미지가 표시된 후, 사용자 인터페이스를 통해 제어 입력이 수신되는 경우, 전송부(12)는 제어 입력에 대응하는 실행 요청 메시지를 가상화 서버(30)로 전송하고, 수신부(13)는 전송된 실행 요청 메시지에 대응하는 실행 결과 데이터를 수신할 수도 있다. 이 때, 제어 입력의 일 예는 그래픽 이미지에 포함된 MENU 아이콘에 대한 사용자의 선택이고, 제어 입력에 대응하는 실행 요청 메시지의 일 예에는 MENU 아이콘의 식별자가 포함되고, 실행 결과 데이터의 일 예에는 MENU 아이템 리스트가 포함될 수 있다. When the control input is received through the user interface after the graphic image corresponding to the virtual mobile device 31 is displayed on the display of the mobile device 30, the transmitting unit 12 transmits the execution request message corresponding to the control input to the virtualization Server 30, and the receiving unit 13 may receive execution result data corresponding to the transmitted execution request message. In this case, an example of the control input is a user's selection of a MENU icon included in the graphic image, an example of an execution request message corresponding to the control input includes an identifier of a MENU icon, A MENU item list can be included.

표시부(14)는 가상화 서버(30)로부터 수신된 실행 결과 데이터에 기초하여 가상 모바일 디바이스(31)의 가상 화면 영상을 모바일 디바이스(10)의 디스플레이에 표시할 수 있다. 이 때, 가상 화면 영상은 가상 모바일 디바이스(31)에 대응하는 그래픽 이미지일 수 있다. 예를 들어, 가상 화면 영상은 가상 모바일 디바이스(31)의 동작을 제어하기 위하여 물리적인 모바일 디바이스의 외형과 물리적인 모바일 디바이스의 버튼 등을 그래픽적으로 구현한 그래픽 이미지일 수 있다. 다른 예를 들어, 가상 화면 영상은 가상 모바일 디바이스의 디스플레이 부분만을 그래픽적으로 구현한 그래픽 이미지일 수도 있다. The display unit 14 can display the virtual screen image of the virtual mobile device 31 on the display of the mobile device 10 based on the execution result data received from the virtualization server 30. [ At this time, the virtual screen image may be a graphic image corresponding to the virtual mobile device 31. For example, the virtual screen image may be a graphical image that graphically implements the appearance of the physical mobile device and physical buttons of the mobile device to control the operation of the virtual mobile device 31. [ For another example, the virtual screen image may be a graphical image that graphically implements only the display portion of the virtual mobile device.

앞서 설명된 바와 같이, 모바일 디바이스(30)의 디스플레이에 가상 모바일 디바이스(31)에 대응하는 그래픽 이미지가 표시된 후, 사용자 인터페이스를 통해 제어 입력이 수신되는 경우, 전송부(12)는 제어 입력에 대응하는 실행 요청 메시지를 가상화 서버(30)로 전송하고, 수신부(13)는 전송된 실행 요청 메시지에 대응하는 실행 결과 데이터를 수신할 수도 있다. 이 경우, 표시부(14)는 실행 결과 데이터에 기초하여 제어 입력에 대응하는 가상 화면 영상을 모바일 디바이스(10)의 디스플레이에 표시할 수 있다. 이 때, 제어 입력의 일 예는 그래픽 이미지에 포함된 MENU 아이콘에 대한 사용자의 선택이고, 제어 입력에 대응하는 실행 요청 메시지의 일 예에는 MENU 아이콘의 식별자가 포함되고, 실행 결과 데이터의 일 예에는 MENU 아이템 리스트가 포함될 수 있다. 또한, 표시부(14)는 사용자 인터페이스(40)로부터 입력된 다양한 제어 입력들에 대응하는 가상 화면 영상을 디스플레이에 표시하거나 업데이트할 수 있다. When the control input is received via the user interface after the graphic image corresponding to the virtual mobile device 31 is displayed on the display of the mobile device 30 as described above, the transmitting unit 12 corresponds to the control input To the virtualization server 30, and the receiving unit 13 may receive the execution result data corresponding to the transmitted execution request message. In this case, the display unit 14 can display the virtual screen image corresponding to the control input on the display of the mobile device 10 based on the execution result data. In this case, an example of the control input is a user's selection of a MENU icon included in the graphic image, an example of an execution request message corresponding to the control input includes an identifier of a MENU icon, A MENU item list can be included. In addition, the display unit 14 can display or update the virtual screen image corresponding to the various control inputs inputted from the user interface 40 on the display.

입력 판단부(15)는 사용자 인터페이스(40)로부터 사용자의 제 2 입력이 수신된 경우, 제 2 입력이 모바일 디바이스(10)에 대한 로컬 제어 입력인지 가상 모바일 디바이스(31)에 대한 가상 제어 입력인지 여부를 판단할 수 있다. 이 경우, 앞서 예시된 바와 같이, 제 1 입력은 가상화 서버(30)로 하여금 가상 모바일 디바이스를 실행하게 하는 사용자의 입력일 수 있다. The input determination unit 15 determines whether the second input is a local control input to the mobile device 10 or a virtual control input to the virtual mobile device 31 when the second input of the user is received from the user interface 40 Can be determined. In this case, as illustrated above, the first input may be the input of the user who causes the virtualization server 30 to run the virtual mobile device.

입력 판단부(15)는 사용자의 제 2 입력의 입력 지속 시간에 기초하여 제 2 입력이 모바일 디바이스(10)에 대한 로컬 제어 입력인지 가상 모바일 디바이스(31)에 대한 가상 제어 입력인지 여부를 판단한다. 이 때, 입력 판단부(15)는 사용자의 제 2 입력의 입력 지속 시간이 임계값 이상인 경우, 제 2 입력을 모바일 디바이스(10)에 대한 로컬 제어 입력으로 판단할 수 있다. 예를 들어, 사용자가 제 2 입력으로 모바일 디바이스(10)의 물리적인 버튼 MENU 버튼을 5초 이상 길게 눌렀을 경우, 입력 판단부(15)에서는 모바일 디바이스(10)의 MENU 버튼을 모바일 디바이스(10)에 대한 MENU 제어 입력으로 판단할 수 있다. The input determination unit 15 determines whether the second input is a local control input to the mobile device 10 or a virtual control input to the virtual mobile device 31 based on the input duration of the second input of the user . At this time, the input determination unit 15 may determine that the second input is a local control input to the mobile device 10 when the input duration of the second input of the user is equal to or greater than the threshold value. For example, when the user presses the physical button MENU button of the mobile device 10 for at least 5 seconds as the second input, the input determination unit 15 transmits the MENU button of the mobile device 10 to the mobile device 10, It can be determined that the menu is the MENU control input.

입력 판단부(15)는 사용자의 제 2 입력과 추가 입력간의 시간 간격에 기초하여 제 2 입력이 모바일 디바이스(10)에 대한 로컬 제어 입력인지 가상 모바일 디바이스(31)에 대한 가상 제어 입력인지 여부를 판단할 수 있다. 예를 들어, 사용자가 제 2 입력으로 모바일 디바이스(10)의 물리적인 버튼인 MENU 버튼을 입력한 이후에 2초 이내에 MENU 버튼을 추가로 입력했을 경우, 입력 판단부(15)는 MENU 버튼에 대한 입력을 가상 모바일 디바이스(31)의 전원을 끄는 POWER 제어 입력으로 판단할 수 있다. The input determination unit 15 determines whether the second input is a local control input to the mobile device 10 or a virtual control input to the virtual mobile device 31 based on the time interval between the second input and the additional input of the user It can be judged. For example, if the user further inputs the MENU button within 2 seconds after the user inputs the MENU button which is the physical button of the mobile device 10, the input determination unit 15 determines that the menu button The input can be judged as a POWER control input for turning off the power supply of the virtual mobile device 31.

입력 판단부(15)는 사용자의 제 2 입력 이후에 입력되는 추가 입력의 횟수에 기초하여 제 2 입력이 모바일 디바이스(10)에 대한 로컬 제어 입력인지 가상 모바일 디바이스(31)에 대한 가상 제어 입력인지 여부를 판단할 수 있다. 예를 들어, 사용자가 제 2 입력으로 모바일 디바이스(10)의 물리적인 버튼인 BACK 버튼을 입력한 이후에 추가적으로 BACK 버튼을 2회 입력했을 경우, 입력 판단부(15)는 BACK 버튼에 대한 입력을 가상 모바일 디바이스(31)의 BACK 제어 입력으로 판단할 수 있다. The input determination unit 15 determines whether the second input is a local control input to the mobile device 10 or a virtual control input to the virtual mobile device 31 based on the number of additional inputs input after the second input of the user Can be determined. For example, when the user inputs the BACK button, which is a physical button of the mobile device 10, as the second input, and the BACK button is further input twice, the input determination unit 15 inputs an input to the BACK button It can be judged as the BACK control input of the virtual mobile device 31. [

입력 판단부(15)는 사용자의 제 2 입력의 입력 압력에 기초하여 제 2 입력이 모바일 디바이스(10)에 대한 로컬 제어 입력인지 가상 모바일 디바이스(31)에 대한 가상 제어 입력인지 여부를 판단할 수 있다. 예를 들어, 사용자가 제 2 입력으로 모바일 디바이스(10)의 물리적인 버튼인 HOME 버튼을 수직방향으로 강하게 눌렀을 경우, 입력 판단부(15)는 HOME 버튼에 대한 입력을 가상 모바일 디바이스(31)의 HOME 제어 입력으로 판단할 수 있다. The input determination unit 15 can determine whether the second input is a local control input to the mobile device 10 or a virtual control input to the virtual mobile device 31 based on the input pressure of the user's second input have. For example, when the user strongly presses the HOME button, which is a physical button of the mobile device 10, in the vertical direction as the second input, the input determination unit 15 determines whether the input of the HOME button is to be input to the virtual mobile device 31 It can be judged as the HOME control input.

동작 수행부(16)는 입력 판단부(15)로부터 사용자의 제 2 입력이 로컬 제어 입력으로 판단된 경우, 제어 매핑 테이블에 기초하여 모바일 디바이스(10)의 로컬 제어 입력에 대응하는 동작을 수행할 수 있다. 동작 수행부(16)는 가상화 서버(30)로부터 제어 매핑 테이블을 수신한다. 예를 들어, 입력 판단부(15)로부터 제 2 입력으로 입력된 모바일 디바이스(10)의 물리적 버튼인 MENU 버튼이 모바일 디바이스(10) 제어 입력으로 판단된 경우, 동작 수행부(16)는 가상화 서버(30)로부터 수신한 제어 매핑 테이블에 기초하여 모바일 디바이스(10)의 MENU 버튼에 대응하는 제어 동작을 수행할 수 있다.The operation performing unit 16 performs an operation corresponding to the local control input of the mobile device 10 based on the control mapping table when the second input of the user is determined as the local control input from the input determining unit 15 . The operation performing unit 16 receives the control mapping table from the virtualization server 30. For example, when the MENU button, which is a physical button of the mobile device 10 input from the input determination unit 15 as the second input, is determined as the control input of the mobile device 10, The controller 30 may perform a control operation corresponding to the MENU button of the mobile device 10 based on the control mapping table received from the controller 30.

여기서 제어 매핑 테이블은 사용자 인터페이스로부터의 입력에 기초하여 버튼 또는 터치입력의 종류, 입력이 눌려진 형태 및 입력 시간 등을 기록 관리할 수 있다. 또한, 제어 매핑 테이블은 모바일 디바이스(10) 또는 가상 모바일 디바이스(31) 상에서 사용자의 입력패턴인 롱터치와 더블클릭 등에 기초하여 모바일 디바이스(10) 및 가상 모바일 디바이스(31)에서의 제어 입력을 구분하고 동작을 정의할 수 있다. Here, the control mapping table may record and manage the type of the button or touch input, the type of the input pressed, and the input time based on the input from the user interface. The control mapping table is also used to distinguish the control input in the mobile device 10 and the virtual mobile device 31 based on the long touch and double click of the user's input pattern on the mobile device 10 or the virtual mobile device 31 And define the behavior.

시간 설정부(17)는 사용자 인터페이스로부터 사용자의 제 2 입력 이후에 입력되는 추가 입력에 대하여 타이머를 설정할 수 있다. 예를 들어, 제 2 입력으로 모바일 디바이스(10)의 물리적 버튼인 BACK 버튼이 입력된 이후에 추가로 입력되는 BACK 버튼에 대하여 만료 기간 타이머를 설정할 수 있다. The time setting unit 17 may set a timer for an additional input that is input after the second input of the user from the user interface. For example, an expiration period timer can be set for the BACK button, which is input after the BACK button, which is the physical button of the mobile device 10, is input as the second input.

입력 판단부(15)는 사용자의 제 2 입력 이후 시간 설정부(17)에서 설정한 시간 내에 추가 입력의 여부에 따라 모바일 디바이스(10)의 로컬 제어 입력인지 가상 모바일 디바이스(31)의 가상 제어 입력인지 판단할 수 있다. 예를 들면, 모바일 디바이스(10)의 물리적 버튼인 BACK 버튼이 눌려진 이후, 시간 설정부에서 설정한 만료 기간 내에 BACK 버튼이 입력되지 않을 경우, 입력 판단부(15)는 BACK 버튼 입력을 가상 모바일 디바이스(31)의 제어 입력으로 판단할 수 있다. The input determination unit 15 determines whether the input is a local control input of the mobile device 10 or a virtual control input of the virtual mobile device 31 according to whether additional input is made within the time set by the time setting unit 17 after the second input of the user . For example, if the BACK button is not input within the expiration period set by the time setting unit after the BACK button, which is a physical button of the mobile device 10, is pressed, the input determination unit 15 returns the BACK button input to the virtual mobile device It can be judged as a control input of the control unit 31.

입력 판단부(15)는 사용자 인터페이스로부터 사용자의 제 3입력이 수신된 경우, 제 3입력이 모바일 디바이스(10)에 대한 로컬 제어 입력인지 가상 모바일 디바이스(31)에 대한 가상 제어 입력인지 여부를 판단할 수 있다. 예를 들면, 제 3입력으로 모바일 디바이스(10)의 물리적 버튼인 BACK 버튼이 입력된 경우, 입력 판단부(15)는 BACK 버튼에 대한 입력을 모바일 디바이스(10)의 BACK 제어 입력으로 판단할 수 있다. The input judging unit 15 judges whether the third input is a local control input to the mobile device 10 or a virtual control input to the virtual mobile device 31 when the third input of the user is received from the user interface can do. For example, when the BACK button, which is a physical button of the mobile device 10, is input to the third input, the input determination unit 15 can determine that the input to the BACK button is the BACK control input of the mobile device 10 have.

표시부(14)는 제 3입력이 가상 제어 입력인 경우 전환된 로컬 화면 영상을 가상 모바일 디바이스(31)의 가상 화면 영상으로 재전환할 수 있다. 예를 들어, 모바일 디바이스(10)의 영상 화면이 디스플레이에 표시된 상태에서, 사용자가 입력한 모바일 디바이스(10)의 HOME 버튼이 입력 판단부(15)로부터 가상 모바일 디바이스(31)에 대한 제어 입력으로 판단된 경우, 표시부(14)는 모바일 디바이스(10)의 화면 영상을 가상 모바일 디바이스(31)의 가상 화면 영상으로 재전환할 수 있다. The display unit 14 can switch the converted local screen image to the virtual screen image of the virtual mobile device 31 when the third input is the virtual control input. For example, when the home screen of the mobile device 10 input by the user is input from the input determination unit 15 to the control input for the virtual mobile device 31 in the state that the video screen of the mobile device 10 is displayed on the display The display unit 14 can switch the screen image of the mobile device 10 to the virtual screen image of the virtual mobile device 31 again.

도 3은 본 발명의 일 실시예에 따른 도 1에 도시된 모바일 디바이스(10)의 외형의 일예를 나타낸 구성도이다. 도 3을 참조하면, 통상의 이동 단말(38)은 볼륨업버튼(31), 볼륨다운버튼(32), 전원버튼(33), 백버튼(34), 홈버튼(35), 메뉴버튼(36) 및 터치스크린(37)을 포함한다. 3 is a block diagram showing an example of the external form of the mobile device 10 shown in FIG. 1 according to an embodiment of the present invention. 3, the conventional mobile terminal 38 includes a volume up button 31, a volume down button 32, a power button 33, a back button 34, a home button 35, a menu button 36 And a touch screen 37.

모바일 디바이스(10)와 클라우드 상에 생성되는 가상 모바일 디바이스(31)는 도 3과 같은 구성을 그래픽적으로 가질 수 있다. 또한, 가상 모바일 디바이스(31)는 가상화 서버에 연결된 디스플레이 또는 모바일 디바이스(10)의 디스플레이에 그래픽적으로 표시될 수 있다. 모바일 디바이스(10) 및 가상 모바일 디바이스(31)의 형상은 도 3에 도시된 구성 요소들을 기초로 하여 여러 가지 변형이 가능함은 본원의 일 실시예가 속하는 기술분야에 속하는 통상의 지식을 가진 자라면 이해할 수 있다. The mobile device 10 and the virtual mobile device 31 generated on the cloud may have the configuration as shown in FIG. 3 graphically. The virtual mobile device 31 may also be graphically displayed on the display connected to the virtualization server or on the display of the mobile device 10. [ The shape of the mobile device 10 and the virtual mobile device 31 can be variously modified based on the components shown in FIG. 3. It is to be understood that those skilled in the art, .

모바일 디바이스(10)는 물리적인 이동 단말(38)과 물리적인 버튼(31~36), 물리적인 터치 스크린(37)으로 구성되며, 가상 모바일 디바이스(31)는 논리적인 가상의 이동 단말(38), 논리적인 가상의 버튼(31~36) 및 논리적인 터치 스크린(37)으로 구성된다. The mobile device 10 comprises a physical mobile terminal 38 and physical buttons 31 to 36 and a physical touch screen 37. The virtual mobile device 31 is a logical virtual mobile terminal 38, Logical logical buttons 31 to 36 and a logical touch screen 37. [

본 발명의 일 실시예에 따르면, 모바일 디바이스(10)가 가상 모바일 디바이스(31)에 원격 접속되어 있는 상태에서 사용자가 볼륨업 버튼(31)을 누를 경우, 모바일 디바이스(10)는 모바일 디바이스(10)의 소리를 업 시키는 건지, 가상 모바일 디바이스(31)의 소리를 업 시키는 것인지 선택하여 해당 디바이스의 소리를 키워줄 수 있다. 이 경우, 모바일 디바이스(10)는 가상 모바일 디바이스(31)의 소리를 업 시키는 것인 경우, 가상화 서버(10)로 가상 모바일 디바이스(31)의 소리를 업 시키는 것을 요청할 수 있다. 다만, 모바일 디바이스(10)의 소리를 업 시키는 건지, 가상 모바일 디바이스(31)의 소리를 업 시키는 것인지를 선택하는 주체는 가상화 서버(30)일 수도 있다. 이를 위해, 모바일 디바이스(10)는 가상화 서버(30)로 사용자가 볼륨업 버튼(31)을 눌렀다는 사실을 알려주어야 한다. According to one embodiment of the present invention, when the user presses the volume up button 31 while the mobile device 10 is remotely connected to the virtual mobile device 31, The user can select whether to turn up the sound of the virtual mobile device 31 or to raise the sound of the device. In this case, the mobile device 10 may request the virtualization server 10 to raise the sound of the virtual mobile device 31 if the virtual mobile device 31 is to sound up. However, the main body for selecting whether to raise the sound of the mobile device 10 or the sound of the virtual mobile device 31 may be the virtualization server 30. To this end, the mobile device 10 should inform the virtualization server 30 that the user has pressed the volume up button 31. [

모바일 디바이스(10)가 가상 모바일 디바이스(31)에 원격 접속되어 있는 상태에서 사용자가 메뉴버튼(36)을 누를 경우, 모바일 디바이스(10)는 모바일 디바이스(10)의 화면에 모바일 디바이스(10)의 메뉴 화면을 디스플레이할지 가상 모바일 디바이스(31)의 메뉴 화면을 디스플레이할지 선택하여 해당 디바이스의 메뉴 화면을 모바일 디바이스(10)의 화면에 출력할 수 있다. 이 경우, 모바일 디바이스(10)는 가상 모바일 디바이스(31)의 메뉴 화면을 디스플레이 하는 것인 경우, 가상화 서버(10)로 가상 모바일 디바이스(31)의 메뉴 화면 데이터를 요청할 수 있다. 다만, 모바일 디바이스(10)의 메뉴 화면을 디스플레이할지 가상 모바일 디바이스(31)의 메뉴 화면을 디스플레이할지 선택하는 주체는 가상화 서버(30)일 수도 있다. 이를 위해, 모바일 디바이스(10)는 가상화 서버(30)로 사용자가 메뉴버튼(36)을 눌렀다는 사실을 알려주어야 한다.When the user presses the menu button 36 while the mobile device 10 is remotely connected to the virtual mobile device 31, the mobile device 10 displays the screen of the mobile device 10 on the screen of the mobile device 10 The user can select whether to display the menu screen or the menu screen of the virtual mobile device 31 and display the menu screen of the corresponding device on the screen of the mobile device 10. [ In this case, if the mobile device 10 is to display the menu screen of the virtual mobile device 31, the virtualization server 10 can request the menu screen data of the virtual mobile device 31. [ However, the main body that selects whether to display the menu screen of the mobile device 10 or the menu screen of the virtual mobile device 31 may be the virtualization server 30. To this end, the mobile device 10 must inform the virtualization server 30 that the user has pressed the menu button 36. [

도 4는 본 발명의 일 실시예에 따른 로컬 제어 입력 동작과정과 가상 제어 입력 동작과정의 일 예를 나타낸 흐름도이다. 도 4를 참조하면, 모바일 디바이스(10)가 사용자 인터페이스(40)으로부터 제 1 입력(S401)을 수신하면, 모바일 디바이스(10)는 가상화서버(30)로 가상 모바일 디바이스(31)의 실행 요청 메시지를 전송하여 가상 모바일 디바이스(31)의 실행을 요청(S402)하고 가상화서버(30)로부터 가상 모바일 디바이스의 실행 요청에 대한 결과를 수신(S403)한 후에 모바일 디바이스(10)의 화면에 가상 모바일 디바이스(31)의 가상 화면 영상을 디스플레이한다(S404). 4 is a flowchart illustrating an example of a local control input operation and a virtual control input operation according to an exemplary embodiment of the present invention. 4, when the mobile device 10 receives the first input S401 from the user interface 40, the mobile device 10 sends an execution request message of the virtual mobile device 31 to the virtualization server 30, (S402) the execution of the virtual mobile device 31 (S402) and receives the result of the virtual mobile device execution request from the virtualization server 30 (S403) A virtual screen image of the virtual screen 31 is displayed (S404).

모바일 디바이스(10)가 사용자 인터페이스로부터 제 2 입력(S405)을 수신하면, 모바일 디바이스(10)는 제 2 입력이 모바일 디바이스(10)에 대한 로컬 제어 입력(S406)인지 판단하고 제 2 입력이 모바일 디바이스(10)에 대한 로컬 제어 입력으로 판명될 경우, 모바일 디바이스(10)는 가상화 서버(30)로부터 수신한 제어 매핑 테이블에 기초하여 로컬 제어 입력에 대응하는 로컬 제어 동작을 수행(S410)하고 모바일 디바이스(10)화면을 로컬 화면 영상으로 전환(S411)한다.When the mobile device 10 receives the second input S405 from the user interface, the mobile device 10 determines whether the second input is a local control input S406 to the mobile device 10, The mobile device 10 performs a local control operation corresponding to the local control input based on the control mapping table received from the virtualization server 30 in operation S410, The device 10 screen is switched to the local screen image (S411).

이 후, 모바일 디바이스(10)가 사용자 인터페이스로부터 제 3 입력(S405)을 수신하면, 모바일 디바이스(10)는 제 3 입력이 가상 모바일 디바이스(31)에 대한 가상 제어 입력(S413)인지 판단한 후 제 3 입력이 가상 모바일 디바이스(31)에 대한 가상 제어 입력(S416)으로 판명될 경우, 모바일 디바이스(10)화면을 가상 화면 영상으로 전환(S416)한 후, 가상 모바일 디바이스(31)의 가상 제어 입력에 대응하는 동작을 수행(S417)한다.Thereafter, when the mobile device 10 receives the third input S405 from the user interface, the mobile device 10 determines whether the third input is a virtual control input (S413) for the virtual mobile device 31, 3 input is determined to be a virtual control input (S416) for the virtual mobile device 31, after switching the mobile device 10 screen to a virtual screen image (S416), the virtual control input (S417).

반면, 사용자 인터페이스로부터 수신한 제 2 입력(S405)이 모바일 디바이스(10)에 대한 로컬 제어 입력이 아닐 경우, 모바일 디바이스(S408)는 제어 매핑 테이블에 기초하여 가상 모바일 디바이스(31)의 가상 제어 입력에 대응하는 동작을 수행(S408)한다. 사용자 인터페이스로부터 수신한 제 3 입력(S412)이 가상 모바일 디바이스(31)에 대한 가상 제어 입력이 아닐 경우, 제어 매핑 테이블에 기초하여 모바일 디바이스(10)의 로컬 제어 입력에 대응하는 동작을 수행(S410)하고, 모바일 디바이스(10)의 화면을 로컬 화면 영상으로 전환(S411)한다.On the other hand, if the second input S405 received from the user interface is not a local control input to the mobile device 10, the mobile device S408 transmits the virtual control input of the virtual mobile device 31 (S408). If the third input S412 received from the user interface is not a virtual control input to the virtual mobile device 31, an operation corresponding to the local control input of the mobile device 10 is performed based on the control mapping table S410 ), And switches the screen of the mobile device 10 to a local screen image (S411).

도 5는 사용자 제어 입력이 모바일 디바이스(10)의 로컬 제어 입력인지 가상 모바일 디바이스(31)의 가상 제어 입력인지 판단하는 과정의 일 예를 나타낸 동작 흐름도이다. 도 5를 참조하면, 입력 수신부(11)가 사용자 인터페이스(40)로부터 제어 입력을 수신(S501)하면서 사용자 입력값(I1)과 제어 입력의 현재 시간(T1)을 저장한다(S502). 이 때, 사용자 입력값을 I1, 제어 입력의 현재 시간을 T1이라 한다. 입력 판단부(15)에서는 사용자 입력값(I1)의 입력 지속 시간이 임계값 이상인지 판단(S503)한다. 사용자 입력값(I1)의 입력 지속 시간이 임계값 이하로 판단(S506)되는 경우 입력 판단부(15)는 마지막에 수신된 제어 입력의 입력 시간(TI)과 현재 수신된 제어 입력시간(T1)의 차이를 계산한다(S507). 이 때, 마지막에 수신된 제어 입력의 입력 시간을 TI라고 한다. 제어 입력시간의 차이가 0인 경우(S510), 시간 설정부(17)에서는 추가 입력에 대한 만료 기간이 설정된 타이머를 셋업한다. 입력 판단부(15)는 타이머가 만료 기간을 경과했는지 판단(S512)한 후, 타이머가 만료되지 않았다면(S515) 입력 수신부(11)에서는 추가 입력이 수신되기를 기다린다(S501). 5 is an operation flowchart showing an example of a process of determining whether a user control input is a local control input of the mobile device 10 or a virtual control input of the virtual mobile device 31. [ 5, the input receiving unit 11 receives the control input from the user interface 40 in step S501, and stores the user input value I1 and the current time T1 of the control input in step S502. At this time, the user input value is I1, and the current time of the control input is T1. The input determination unit 15 determines whether the input duration of the user input value I1 is equal to or greater than a threshold value (S503). If the input duration of the user input value I1 is determined to be equal to or less than the threshold value in step S506, the input determination unit 15 determines whether the input time TI of the control input last received, (S507). At this time, the input time of the control input received last is referred to as TI. If the difference in the control input time is 0 (S510), the time setting unit 17 sets up a timer for which an expiration period for the additional input is set. If the timer has not expired (S515), the input determining unit 15 waits for the additional input to be received (S501) after determining whether the timer has expired (S512).

반면, 입력 판단부(15)로부터 사용자 입력값(I1)의 입력 지속 시간이 임계값 이상으로 판단(S504)된 경우, 동작 수행부(16)는 가상화 서버(30)로부터 수신받은 제어 매핑 테이블을 기초하여 사용자 입력값(I1)에 대한 제어 동작을 수행(S505)한 후 종료한다(S516). 예를 들면, 모바일 디바이스(10)의 BACK버튼을 임계값 이상으로 길게 누른 제어 입력은 모바일 디바이스(10)에 BACK버튼 입력으로 변환되어 수행될 수 있다. If the input determining unit 15 determines that the input duration of the user input value I1 is equal to or greater than the threshold value in operation S504, the operation performing unit 16 displays the control mapping table received from the virtualization server 30 A control operation is performed on the user input value I1 (S505) and then the process is terminated (S516). For example, a control input that pushes the BACK button of the mobile device 10 longer than the threshold value may be converted into a BACK button input to the mobile device 10 and performed.

입력 판단부(15)로부터 마지막에 수신된 제어 입력의 입력 시간(TI)과 현재 수신된 제어 입력시간(T1)의 차이가 있다고(S508) 판단될 경우, 동작 수행부(16)는 가상화 서버(30)로부터 수신받은 제어 매핑 테이블을 기초하여 사용자 입력값(I1)에 대한 제어 동작을 수행(S509)한 후 종료한다(S516). 예를 들면, 모바일 디바이스(10)의 BACK버튼이 더블 클릭 되었다면 모바일 디바이스(10)와 가상 모바일 디바이스(31)의 원격 접속을 끊는 제어 명령으로 변환되어 수행할 수 있다. When it is determined that there is a difference between the input time TI of the control input last received from the input determination unit 15 and the control input time T1 currently received (S508), the operation performing unit 16 determines that the virtualization server 30 in step S509, and then terminates the control operation in step S516. For example, if the BACK button of the mobile device 10 is double-clicked, it can be converted into a control command for disconnecting the remote connection between the mobile device 10 and the virtual mobile device 31 and executed.

타이머 만료기간까지 추가 입력이 수신되지 않았을 경우(S513), 이미 수신된 제어 입력을 가상 모바일 디바이스(31)로 전달한다(S514)한 후 종료한다(S516). 예를 들면, BACK버튼이 눌려진 후 만료 기간이 지나도록 새로운 BACK버튼입력이 수신되지 않을 경우, BACK버튼입력을 가상 모바일 디바이스(31)의 제어 입력으로 전달한다. If no additional input is received until the timer expiration period (S513), the already received control input is transmitted to the virtual mobile device 31 (S514) and then the process ends (S516). For example, if a new BACK button input is not received after the expiration period has elapsed after the BACK button is pressed, the BACK button input is transmitted to the control input of the virtual mobile device 31.

다만, 도 4 및 도 5에 도시된 실시예는 본 발명의 다양한 실시예 중 하나에 불과하며, 이에 한정되어 해석되어서는 안된다. 또한, 기 도시된 실시예 외에 다양한 실시예가 존재할 수 있다. However, the embodiment shown in Figs. 4 and 5 is only one of various embodiments of the present invention, and should not be construed as being limited thereto. In addition, various embodiments other than the illustrated embodiments may exist.

도 6은 본 발명의 다른 실시예에 따른 모바일 디바이스(60)의 구성도이다. 도 6을 참조하면 모바일 디바이스(60)는 표시부(61), 입력 판단부(62), 전송부(63)를 포함한다. 다만, 도 6에 도시된 구성 요소들을 기초로 하여 여러 가지 변형이 가능함은 본원의 일 실시예가 속하는 기술분야에 속하는 통상의 지식을 가진 자라면 이해할 수 있다. 6 is a configuration diagram of a mobile device 60 according to another embodiment of the present invention. Referring to FIG. 6, the mobile device 60 includes a display unit 61, an input determination unit 62, and a transmission unit 63. It should be understood, however, that various modifications may be made based on the components shown in FIG. 6, by those skilled in the art to which the embodiments of the present invention belong.

표시부(61)는 사용자 인터페이스로부터 사용자의 제 1 입력이 수신된 경우, 제 1 입력에 대응하는 로컬 화면 영상을 모바일 디바이스(10)에 표시할 수 있다. 예를 들면, 사용자로부터 MENU 버튼이 입력된 경우, 스마트폰의 MENU 아이템 리스트를 스마트폰 화면에 표시할 수 있다.The display unit 61 may display the local screen image corresponding to the first input on the mobile device 10 when the first input of the user is received from the user interface. For example, when the MENU button is input from the user, the menu item list of the smartphone can be displayed on the smartphone screen.

입력 판단부(62)는 사용자 인터페이스로부터 사용자의 제 2 입력이 수신된 경우, 제 2 입력이 모바일 디바이스(10)에 대한 로컬 제어 입력인지 가상 모바일 디바이스(31)에 대한 가상 제어 입력인지 여부를 판단할 수 있다. 예를 들면, 사용자로부터 제 2 입력으로 MENU 버튼이 입력된 경우, 입력 판단부(62)는 MENU 버튼이 스마트폰에 대한 제어 입력인지 제 2 스마트폰에 대한 가상 제어 입력인지 판단할 수 있다. The input judging unit 62 judges whether the second input is a local control input to the mobile device 10 or a virtual control input to the virtual mobile device 31 when the second input of the user is received from the user interface can do. For example, when the MENU button is input from the user to the second input, the input determination unit 62 may determine whether the MENU button is a control input for the smartphone or a virtual control input for the second smartphone.

전송부(63)는 상기 판단 결과 제 2 입력이 가상 제어 입력인 경우, 가상화 서버(30)로 하여금 가상 모바일 디바이스(31)를 실행하게 하는 실행 요청 메시지를 전송할 수 있다. 예를 들면, MENU 버튼이 제 2 스마트폰에 대한 제어 입력으로 판단된 경우, 전송부(63)는 제 2 스마트폰의 MENU 아이템 리스트 화면을 출력 요청하기 위한 MENU 화면 출력 요청 메시지를 전송할 수 있다. If the second input is a virtual control input, the transmitting unit 63 may transmit an execution request message for causing the virtualization server 30 to execute the virtual mobile device 31. For example, when it is determined that the MENU button is the control input for the second smartphone, the transmitting unit 63 may transmit a MENU screen output request message for requesting to output the MENU item list screen of the second smartphone.

여기서 실행 요청 메시지는 가상화 서버(30)로 하여금 제 2 입력에 대응하는 동작을 실행하게 하는 요청 메시지일 수 있다.Where the execution request message may be a request message to cause the virtualization server 30 to perform an operation corresponding to the second input.

표시부(61)는 가상화 서버(30)로부터 수신된 실행 결과 데이터에 기초하여 표시된 로컬 화면 영상을 가상 모바일 디바이스(31)의 가상 화면 영상으로 전환할 수 있다. 예를 들면, 표시부(61)는 가상화 서버(30)로부터 수신된 MENU 아이템 리스트에 기초하여 스마트폰의 영상 화면을 제 2 스마트폰의 MENU 아이템 리스트 화면으로 전환할 수 있다.The display unit 61 can convert the displayed local screen image to the virtual screen image of the virtual mobile device 31 based on the execution result data received from the virtualization server 30. [ For example, the display unit 61 may switch the video screen of the smartphone to the menu item list screen of the second smartphone based on the menu item list received from the virtualization server 30. [

도 6의 모바일 디바이스(60)는 표시부(61), 입력 판단부(62), 전송부(63) 이외에도 도 2의 입력 수신부(11), 수신부(13), 동작 수행부(16), 시간 설정부(17) 각각에 대응하는 입력 수신부(도시되지 않음), 수신부(도시되지 않음), 동작 수행부(도시되지 않음) 및 시간 설정부(도시되지 않음)를 더 포함할 수도 있다. 이 경우, 입력 수신부(도시되지 않음), 수신부(도시되지 않음), 동작 수행부(도시되지 않음) 및 시간 설정부(도시되지 않음) 각각의 동작은 앞서 도 2의 입력 수신부(11), 수신부(13), 동작 수행부(16), 시간 설정부(17) 각각의 동작에 대응한다. The mobile device 60 of FIG. 6 includes an input receiving unit 11, a receiving unit 13, an operation performing unit 16, a time setting unit 62, and a time setting unit 63 shown in FIG. 2 in addition to the display unit 61, the input determination unit 62, (Not shown), an operation performing unit (not shown), and a time setting unit (not shown) corresponding to the respective units 17, respectively. In this case, the operation of each of the input receiving unit (not shown), the receiving unit (not shown), the operation performing unit (not shown) and the time setting unit (not shown) The operation unit 16, and the time setting unit 17, respectively.

또한, 도 6의 표시부(61), 입력 판단부(62) 및 전송부(63) 각각에 대해 설명되지 아니한 내용은 앞서 도 2의 표시부(14), 입력 판단부(15) 및 전송부(62) 각각에 대해 설명된 내용으로 대신할 수 있다. Contents not described for the display section 61, the input determination section 62 and the transmission section 63 of FIG. 6 are the same as those of the display section 14, the input determination section 15, and the transmission section 62 ) Can be substituted for each described.

도 7은 본 발명의 일 실시예에 따른 모바일 디바이스(10)의 입력 처리 방법을 나타낸 흐름도이다. 도 7에 도시된 실시예에 따른 모바일 디바이스(10)의 입력 처리 방법은 도 2에 도시된 모바일 디바이스(10)에서 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하여도 도 2에서 도시된 모바일 디바이스(10)에 관하여 이상에서 기술된 내용은 도 7에 도시된 모바일 디바이스(10)의 입력 처리 방법에도 적용된다.7 is a flowchart illustrating an input processing method of the mobile device 10 according to an embodiment of the present invention. The input processing method of the mobile device 10 according to the embodiment shown in FIG. 7 includes steps that are processed in a time-series manner in the mobile device 10 shown in FIG. Therefore, the contents described above with respect to the mobile device 10 shown in FIG. 2 also apply to the input processing method of the mobile device 10 shown in FIG.

도 7을 참조하면, 단계(S701)에서 전송부(12)는 사용자 인터페이스(40)로부터 사용자의 제 1 입력이 수신된 경우, 가상화 서버(30)로 하여금 가상 모바일 디바이스(31)를 실행하게 하는 실행 요청 메시지를 가상화 서버(30)로 전송한다. 단계(S702)에서 표시부(14)는 가상화 서버(30)로부터 수신된 실행 결과 데이터에 기초하여 가상 모바일 디바이스(31)의 가상 화면 영상을 모바일 디바이스(10)의 디스플레이에 표시한다. 단계(S703)에서 입력 판단부(15)는 사용자 인터페이스(40)로부터 사용자의 제 2 입력이 수신된 경우, 제 2 입력이 모바일 디바이스(10)에 대한 로컬 제어 입력인지 가상 모바일 디바이스(31)에 대한 가상 제어 입력인지 여부를 판단한다. 단계(S704)에서 동작 수행부(16)는 판단 결과 제 2 입력이 로컬 제어 입력인 경우, 로컬 제어 입력에 대응하는 동작을 수행한다. 단계(S705)에서 표시부(14)는 제 2 입력이 로컬 제어 입력인 경우, 표시된 가상 화면 영상을 모바일 디바이스(10)의 로컬 화면 영상으로 전환한다.Referring to FIG. 7, in step S701, the transmitting unit 12 causes the virtualization server 30 to execute the virtual mobile device 31 when the first input of the user is received from the user interface 40 And transmits an execution request message to the virtualization server 30. [ The display unit 14 displays the virtual screen image of the virtual mobile device 31 on the display of the mobile device 10 based on the execution result data received from the virtualization server 30 in step S702. In step S703, the input determination unit 15 determines whether the second input is a local control input to the mobile device 10 when the second input of the user is received from the user interface 40, It is determined whether or not the input is a virtual control input. In operation S704, if the second input is a local control input, the operation performing unit 16 performs an operation corresponding to the local control input. In step S705, the display unit 14 switches the displayed virtual screen image to the local screen image of the mobile device 10 when the second input is the local control input.

도 7을 통해 설명된 일 실시예에 따른 모바일 디바이스(10)의 입력 처리 방법은 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.The input processing method of the mobile device 10 according to the embodiment described with reference to FIG. 7 may also be implemented in the form of a recording medium including instructions executable by a computer, such as program modules, being executed by a computer. Computer readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media. In addition, the computer-readable medium may include both computer storage media and communication media. Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data. Communication media typically includes any information delivery media, including computer readable instructions, data structures, program modules, or other data in a modulated data signal such as a carrier wave, or other transport mechanism.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.It will be understood by those skilled in the art that the foregoing description of the present invention is for illustrative purposes only and that those of ordinary skill in the art can readily understand that various changes and modifications may be made without departing from the spirit or essential characteristics of the present invention. will be. It is therefore to be understood that the above-described embodiments are illustrative in all aspects and not restrictive. For example, each component described as a single entity may be distributed and implemented, and components described as being distributed may also be implemented in a combined form.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변경된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다The scope of the present invention is defined by the appended claims rather than the detailed description, and all changes or modifications derived from the meaning and scope of the claims and their equivalents should be interpreted as being included in the scope of the present invention

10: 모바일 디바이스
30: 가상화 서버10: Mobile device
30: Virtualization server

Claims (15)

모바일 디바이스에 있어서,
사용자 인터페이스로부터 사용자의 제 1 입력이 수신된 경우, 가상화 서버로 하여금 가상 모바일 디바이스를 실행하게 하는 실행 요청 메시지를 상기 가상화 서버로 전송하는 전송부;
상기 가상화 서버로부터 수신된 실행 결과 데이터에 기초하여 상기 가상 모바일 디바이스의 가상 화면 영상을 상기 모바일 디바이스의 디스플레이에 표시하는 표시부;
상기 사용자 인터페이스로부터 상기 사용자의 제 2 입력이 수신된 경우, 상기 제 2 입력이 상기 모바일 디바이스에 대한 로컬 제어 입력인지 상기 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하는 입력 판단부; 및
상기 판단 결과 제 2 입력이 상기 로컬 제어 입력인 경우, 상기 로컬 제어 입력에 대응하는 동작을 수행하는 동작 수행부를 포함하고,
상기 표시부는 상기 제 2 입력이 상기 로컬 제어 입력인 경우 상기 표시된 가상 화면 영상을 상기 모바일 디바이스의 로컬 화면 영상으로 전환하는 것인, 모바일 디바이스.
In a mobile device,
A transmitting unit for transmitting an execution request message to the virtualization server to cause the virtualization server to execute the virtual mobile device when the first input of the user is received from the user interface;
A display unit for displaying a virtual screen image of the virtual mobile device on the display of the mobile device based on execution result data received from the virtualization server;
An input judging unit for judging whether the second input is a local control input for the mobile device or a virtual control input for the virtual mobile device when the second input of the user is received from the user interface; And
And an operation performing unit operable to perform an operation corresponding to the local control input when the second input is the local control input,
Wherein the display unit switches the displayed virtual screen image to a local screen image of the mobile device when the second input is the local control input.
제 1 항에 있어서,
상기 입력 판단부는 상기 제 2 입력의 입력 지속 시간에 기초하여 상기 제 2 입력이 상기 모바일 디바이스에 대한 로컬 제어 입력인지 상기 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하는 것인, 모바일 디바이스.
The method according to claim 1,
Wherein the input determining unit determines whether the second input is a local control input to the mobile device or a virtual control input to the virtual mobile device based on the input duration of the second input.
제 2 항에 있어서,
상기 입력 판단부는 상기 제 2 입력의 입력 지속 시간이 임계값 이상인 경우, 상기 제 2 입력을 상기 모바일 디바이스에 대한 로컬 제어 입력으로 판단하는 것인, 모바일 디바이스.
3. The method of claim 2,
Wherein the input determining unit determines the second input as a local control input to the mobile device when the input duration of the second input is greater than or equal to a threshold value.
제 1 항에 있어서,
상기 입력 판단부는 상기 제 2 입력과 추가 입력간의 시간 간격에 기초하여 상기 제 2 입력이 상기 모바일 디바이스에 대한 로컬 제어 입력인지 상기 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하는 것인, 모바일 디바이스.
The method according to claim 1,
Wherein the input determining unit determines whether the second input is a local control input to the mobile device or a virtual control input to the virtual mobile device based on a time interval between the second input and the further input, .
제 1 항에 있어서,
상기 입력 판단부는 상기 제 2 입력 이후에 입력되는 추가 입력의 횟수에 기초하여 상기 제 2 입력이 상기 모바일 디바이스에 대한 로컬 제어 입력인지 상기 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하는 것인, 모바일 디바이스.
The method according to claim 1,
Wherein the input determining unit determines whether the second input is a local control input to the mobile device or a virtual control input to the virtual mobile device based on the number of additional inputs input after the second input. Mobile device.
제 1 항에 있어서,
상기 입력 판단부는 상기 제 2 입력의 입력 압력에 기초하여 상기 제 2 입력이 상기 모바일 디바이스에 대한 로컬 제어 입력인지 상기 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하는 것인, 모바일 디바이스.
The method according to claim 1,
Wherein the input determining unit determines whether the second input is a local control input to the mobile device or a virtual control input to the virtual mobile device based on the input pressure of the second input.
제 1항에 있어서,
상기 사용자 인터페이스로부터 상기 사용자의 제 2 입력 이후에 입력되는 추가 입력에 대하여 타이머를 설정하는 시간 설정부를 더 포함하고,
상기 제 2입력 이후에 입력되는 추가 입력에 기초하여 제한된 시간 내에 추가 입력을 기다리는, 모바일 디바이스.
The method according to claim 1,
Further comprising: a time setting unit for setting a timer for an additional input inputted after the second input of the user from the user interface,
And wait for additional input within a limited time based on the further input being input after the second input.
제 1 항에 있어서,
상기 사용자 인터페이스는 상기 모바일 디바이스의 물리적인 버튼 인터페이스 또는 터치 스크린 인터페이스 중 어느 하나인 것인, 모바일 디바이스.
The method according to claim 1,
Wherein the user interface is any one of a physical button interface or a touch screen interface of the mobile device.
제 1 항에 있어서,
상기 동작 수행부는 제어 매핑 테이블에 기초하여 상기 로컬 제어 입력에 대응하는 동작을 수행하는 것인, 모바일 디바이스.
The method according to claim 1,
Wherein the operation performing unit performs an operation corresponding to the local control input based on the control mapping table.
제 8 항에 있어서,
상기 제어 매핑 테이블은 상기 가상화 서버로부터 수신되는 것인, 모바일 디바이스.
9. The method of claim 8,
Wherein the control mapping table is received from the virtualization server.
제 1 항에 있어서,
상기 사용자 인터페이스로부터 상기 사용자의 제 1 입력을 수신하는 입력 수신부; 및
상기 가상화 서버로부터 상기 실행 요청 메시지에 대응하는 실행 결과 데이터를 수신하는 수신부를 더 포함하는, 모바일 디바이스.
The method according to claim 1,
An input receiver for receiving a first input of the user from the user interface; And
And a receiving unit for receiving execution result data corresponding to the execution request message from the virtualization server.
제 1 항에 있어서,
상기 입력 판단부는 상기 사용자 인터페이스로부터 상기 사용자의 제 3 입력이 수신된 경우, 상기 제 3 입력이 상기 모바일 디바이스에 대한 로컬 제어 입력인지 상기 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하고,
상기 표시부는 상기 제 3 입력이 상기 가상 제어 입력인 경우 상기 전환된 로컬 화면 영상을 상기 가상 모바일 디바이스의 가상 화면 영상으로 재전환하는 것인, 모바일 디바이스.
The method according to claim 1,
Wherein the input determining unit determines whether the third input is a local control input to the mobile device or a virtual control input to the virtual mobile device when the third input of the user is received from the user interface,
Wherein the display unit switches the converted local screen image to the virtual screen image of the virtual mobile device when the third input is the virtual control input.
모바일 디바이스에 의하여, 가상 화면 영상을 로컬 화면 영상으로 전환하는 방법에 있어서,
사용자 인터페이스로부터 사용자의 제 1 입력이 수신된 경우, 가상화 서버로 하여금 가상 모바일 디바이스를 실행하게 하는 실행 요청 메시지를 상기 가상화 서버로 전송하는 단계;
상기 가상화 서버로부터 수신된 실행 결과 데이터에 기초하여 상기 가상 모바일 디바이스의 가상 화면 영상을 상기 모바일 디바이스의 디스플레이에 표시하는 단계;
상기 사용자 인터페이스로부터 상기 사용자의 제 2 입력이 수신된 경우, 상기 제 2 입력이 상기 모바일 디바이스에 대한 로컬 제어 입력인지 상기 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하는 단계; 및
상기 판단 결과 제 2 입력이 상기 로컬 제어 입력인 경우, 상기 로컬 제어 입력에 대응하는 동작을 수행하는 단계,
상기 제 2 입력이 상기 로컬 제어 입력인 경우 상기 표시된 가상 화면 영상을 상기 모바일 디바이스의 로컬 화면 영상으로 전환하는 단계를 포함하는 가상 화면 영상을 로컬 화면 영상으로 전환하는 방법.
A method for converting a virtual screen image into a local screen image by a mobile device,
Transmitting an execution request message to the virtualization server to cause the virtualization server to execute the virtual mobile device when the first input of the user is received from the user interface;
Displaying a virtual screen image of the virtual mobile device on a display of the mobile device based on execution result data received from the virtualization server;
Determining whether the second input is a local control input to the mobile device or a virtual control input to the virtual mobile device when the second input of the user is received from the user interface; And
Performing an operation corresponding to the local control input if the second input is the local control input;
And switching the displayed virtual screen image to a local screen image of the mobile device when the second input is the local control input.
모바일 디바이스에 있어서,
사용자 인터페이스로부터 사용자의 제 1 입력이 수신된 경우, 상기 제 1 입력에 대응하는 로컬 화면 영상을 상기 모바일 디바이스에 표시하는 표시부;
상기 사용자 인터페이스로부터 상기 사용자의 제 2 입력이 수신된 경우, 상기 제 2 입력이 상기 모바일 디바이스에 대한 로컬 제어 입력인지 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하는 입력 판단부; 및
상기 판단 결과 제 2 입력이 상기 가상 제어 입력인 경우, 가상화 서버로 하여금 상기 가상 모바일 디바이스를 실행하게 하는 실행 요청 메시지를 전송하는 전송부를 포함하고,
상기 표시부는 상기 가상화 서버로부터 수신된 실행 결과 데이터에 기초하여 상기 표시된 로컬 화면 영상을 상기 가상 모바일 디바이스의 가상 화면 영상으로 전환하되,
상기 입력 판단부는 상기 제 2 입력 이후, 기설정된 시간 내 추가 입력의 여부에 따라 상기 제 2 입력이 상기 모바일 디바이스에 대한 로컬 제어 입력인지 가상 모바일 디바이스에 대한 가상 제어 입력인지 여부를 판단하는 것인, 모바일 디바이스.
In a mobile device,
A display unit for displaying a local screen image corresponding to the first input on the mobile device when a first input of the user is received from the user interface;
An input determination unit for determining whether the second input is a local control input to the mobile device or a virtual control input to the virtual mobile device when the second input of the user is received from the user interface; And
And a transmission unit for transmitting an execution request message for causing the virtualization server to execute the virtual mobile device when the second input is the virtual control input,
Wherein the display unit converts the displayed local screen image into a virtual screen image of the virtual mobile device based on execution result data received from the virtualization server,
Wherein the input determining unit determines whether the second input is a local control input to the mobile device or a virtual control input to the virtual mobile device, depending on whether the additional input is within a predetermined time after the second input. Mobile device.
제 14 항에 있어서,
상기 실행 요청 메시지는 상기 가상화 서버로 하여금 상기 제 2 입력에 대응하는 동작을 실행하게 하는 것인 모바일 디바이스. 15. The method of claim 14,
Wherein the execution request message causes the virtualization server to perform an operation corresponding to the second input.
KR1020130035309A 2013-04-01 2013-04-01 Mobile device and method for displaying virture screen image of virtual mobile device and local screen image KR101537352B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130035309A KR101537352B1 (en) 2013-04-01 2013-04-01 Mobile device and method for displaying virture screen image of virtual mobile device and local screen image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130035309A KR101537352B1 (en) 2013-04-01 2013-04-01 Mobile device and method for displaying virture screen image of virtual mobile device and local screen image

Publications (2)

Publication Number Publication Date
KR20140119521A KR20140119521A (en) 2014-10-10
KR101537352B1 true KR101537352B1 (en) 2015-07-16

Family

ID=51991810

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130035309A KR101537352B1 (en) 2013-04-01 2013-04-01 Mobile device and method for displaying virture screen image of virtual mobile device and local screen image

Country Status (1)

Country Link
KR (1) KR101537352B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102537913B1 (en) * 2018-10-19 2023-05-26 에스케이텔레콤 주식회사 Method And Apparatus for Displaying VMI Screen and Local Screen in Specific Region

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10243427A (en) * 1997-02-28 1998-09-11 Nec Corp Service controller and service control system
KR20120076127A (en) * 2010-12-29 2012-07-09 주식회사 케이티 System and method for manage portable device based on virtualization
KR20130022094A (en) * 2011-08-24 2013-03-06 주식회사 케이티 Automatic personal virtualization loading method and device for cloud computing environment
KR20140034100A (en) * 2012-09-10 2014-03-19 삼성전자주식회사 Operating method associated with connected electronic device with external display device and electronic device supporting the same

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10243427A (en) * 1997-02-28 1998-09-11 Nec Corp Service controller and service control system
KR20120076127A (en) * 2010-12-29 2012-07-09 주식회사 케이티 System and method for manage portable device based on virtualization
KR20130022094A (en) * 2011-08-24 2013-03-06 주식회사 케이티 Automatic personal virtualization loading method and device for cloud computing environment
KR20140034100A (en) * 2012-09-10 2014-03-19 삼성전자주식회사 Operating method associated with connected electronic device with external display device and electronic device supporting the same

Also Published As

Publication number Publication date
KR20140119521A (en) 2014-10-10

Similar Documents

Publication Publication Date Title
US10484197B2 (en) Internet of Things (IoT) communication method, communication end, and user end
US20200021456A1 (en) Terminal-based control method for smart household appliance and terminal
CN107736045B (en) Method and apparatus for controlling peripheral device
KR100822706B1 (en) Apparatus and method of controlling home appliance using zigbee wireless communication
WO2018000156A1 (en) Method for establishing classic bluetooth connection between dual-mode bluetooth devices, and dual-mode bluetooth device
KR102164457B1 (en) Electronic device for multiple radio access and method thereof
KR102380322B1 (en) Electronic device and method for performing wireless communication of the same
CN104702665A (en) Information sharing method and information sharing device
KR102444897B1 (en) Device and method for establishing communication connection
US20130246946A1 (en) Sharing user information through secondary displays
CN108933876A (en) Communication terminal, the control method of communication terminal and storage medium
CN104185253A (en) Method for accessing wireless router, related device and system thereof
WO2017059703A1 (en) Method of controlling network appliance, network appliance, feature phone, and system
KR101933065B1 (en) Power consumption control method for wearable device, and wearable device
CN103699304B (en) The switching method and system of mode control terminal
CN107395473B (en) Networking method and device of household appliance and terminal equipment
EP3232732B1 (en) Communication device, communication device control method, and program
CN104640231A (en) Wireless network setting method and wireless network setting system of intelligent household electrical appliance
KR20170090664A (en) Method for providing a tethering service and electronic device using the same
CN108712482A (en) Based on mobile terminal Quick Response Code rapid file sharing method
CN108039990B (en) Household appliance operation method and system, household appliance and computer readable storage medium
CN112118538A (en) Method and device for device information interaction between terminals
KR101537352B1 (en) Mobile device and method for displaying virture screen image of virtual mobile device and local screen image
ES2929790T3 (en) App dependent remote control
CN107615826B (en) Method for determining network type in wireless communication network, access point equipment, terminal equipment and wireless network controller

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180702

Year of fee payment: 4