KR102099176B1 - Mobile terminal and method for controlling thereof - Google Patents

Mobile terminal and method for controlling thereof Download PDF

Info

Publication number
KR102099176B1
KR102099176B1 KR1020130091382A KR20130091382A KR102099176B1 KR 102099176 B1 KR102099176 B1 KR 102099176B1 KR 1020130091382 A KR1020130091382 A KR 1020130091382A KR 20130091382 A KR20130091382 A KR 20130091382A KR 102099176 B1 KR102099176 B1 KR 102099176B1
Authority
KR
South Korea
Prior art keywords
content
display device
video display
mobile terminal
information
Prior art date
Application number
KR1020130091382A
Other languages
Korean (ko)
Other versions
KR20150015697A (en
Inventor
김민구
박종필
김경근
김승만
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020130091382A priority Critical patent/KR102099176B1/en
Publication of KR20150015697A publication Critical patent/KR20150015697A/en
Application granted granted Critical
Publication of KR102099176B1 publication Critical patent/KR102099176B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation

Abstract

본 발명은 이동 단말기, 영상표시장치 및 이들을 이용한 데이터 처리 방법에 관한 것으로서, 보다 상세하게는 이동 단말기와 영상표시장치의 화면을 공유하도록 구성된 이동 단말기, 영상표시장치 및 이들을 이용한 데이터 처리 방법에 관한 것이다. 특히, 본 발명에 의하면 스크린 미러링/공유를 이용하여 이동 단말기의 컨텐츠 목록을 영상표시장치에 디스플레이하거나 선택된 컨텐츠를 전송 하기 위한 애플리케이션을 실행할 수 있으며, 전송된 컨텐츠를 영상표시장치를 통하여 이용할 수도 있다. 특히, 스크린 미러링/공유를 통해 이동 단말기의 컨텐츠 목록과 동일한 컨텐츠 목록을 영상표시장치에서 이용할 수 있다. 또한, 컨텐츠를 영상표시장치에서 빠른 전송 속도로 이용할 수 있다.The present invention relates to a mobile terminal, a video display device and a data processing method using them, and more particularly, to a mobile terminal, a video display device configured to share a screen of a video display device with a mobile terminal, and a data processing method using them. . In particular, according to the present invention, an application for displaying a list of contents of a mobile terminal on a video display device or transmitting selected content may be executed using screen mirroring / sharing, and the transmitted content may be used through the video display device. Particularly, through the screen mirroring / sharing, the same content list as the content list of the mobile terminal can be used in the video display device. In addition, the content can be used in a video display device at a high transmission speed.

Description

이동 단말기 및 그 제어방법{MOBILE TERMINAL AND METHOD FOR CONTROLLING THEREOF} Mobile terminal and its control method {MOBILE TERMINAL AND METHOD FOR CONTROLLING THEREOF}

본 발명은 이동 단말기, 영상표시장치 및 이들을 이용한 데이터 처리 방법에 관한 것으로서, 보다 상세하게는 이동 단말기와 영상표시장치의 화면을 공유하도록 구성된 이동 단말기, 영상표시장치 및 이들을 이용한 데이터 처리 방법에 관한 것이다.The present invention relates to a mobile terminal, a video display device and a data processing method using them, and more particularly, to a mobile terminal, a video display device configured to share a screen of a video display device with a mobile terminal, and a data processing method using them. .

단말기는 이동 가능 여부에 따라 이동 단말기(mobile/portable terminal) 및 고정 단말기(stationary terminal)으로 나뉠 수 있다. 다시 이동 단말기는 사용자의 직접 휴대 가능 여부에 따라 휴대(형) 단말기(handheld terminal) 및 거치형 단말기(vehicle mount terminal)로 나뉠 수 있다. Terminals can be divided into mobile terminals (mobile / portable terminals) and stationary terminals depending on whether they are mobile. Again, the mobile terminal may be divided into a handheld terminal and a vehicle mount terminal according to whether the user can directly carry it.

이와 같은 단말기(terminal)는 기능이 다양화됨에 따라 예를 들어, 사진이나 동영상의 촬영, 음악이나 동영상 파일의 재생, 게임, 방송의 수신 등의 복합적인 기능들을 갖춘 멀티미디어 기기(Multimedia player) 형태로 구현되고 있다. As the function is diversified, such a terminal is a multimedia player having multiple functions, such as taking a picture or a video, playing music or a video file, receiving a game, or broadcasting. Is being implemented.

이러한 단말기의 기능 지지 및 증대를 위해, 단말기의 구조적인 부분 및/또는 소프트웨어적인 부분을 개량하는 것이 고려될 수 있다.To support and increase the function of such a terminal, it may be considered to improve the structural part and / or software part of the terminal.

최근 이동 단말기와 외부 영상표시장치를 연결하여 각각의 장치에 표시되는 영상이나 서로간의 컨텐츠를 공유하는 것이 가능하게 되었다. 이러한 기능은 “미러링”이라 칭할 수 있다. 그런데, 미러링 기능이 수행되는 과정에서 기기 간의 데이터 저장 구조가 상이한 경우 사용자가 희망하는 컨텐츠를 탐색하는데 어려움이 있다.Recently, it is possible to share an image or content displayed on each device by connecting a mobile terminal and an external video display device. This function can be referred to as “mirroring”. However, when the data storage structure between devices is different in the process of performing the mirroring function, it is difficult to search for the content desired by the user.

본 발명은 외부 영상표시장치와 보다 편리하게 화면이나 컨텐츠를 공유할 수 있는 이동 단말기 및 그 제어방법을 제공하기 위한 것이다. The present invention is to provide a mobile terminal capable of more conveniently sharing a screen or content with an external video display device and a control method thereof.

특히, 본 발명은 외부 영상표시장치와 화면을 공유함에 있어 서로 다른 파일 시스템의 불편함을 해결할 수 있는 이동 단말기 및 그 제어방법을 제공하기 위한 것이다.In particular, the present invention is to provide a mobile terminal and a control method for solving the inconvenience of different file systems in sharing a screen with an external video display device.

또한, 본 발명은 이동 단말기에 영상표시장치의 화면을 공유함에 있어, 전송 화면의 압축 방식 또는 손실률 등을 화면 상황에 맞게 조절하여, 화면 데이터의 전송 속도를 개선시키는 이동 단말기, 차량에 부착된 영상표시장치 및 이들을 이용한 데이터 처리 방법을 제공하는 것을 목적으로 한다.In addition, according to the present invention, in sharing a screen of a video display device to a mobile terminal, a compression method or a loss rate of a transmission screen is adjusted according to a screen situation to improve a transmission speed of screen data, and a video attached to a vehicle It is an object to provide a display device and a data processing method using them.

본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The technical problems to be achieved in the present invention are not limited to the technical problems mentioned above, and other technical problems that are not mentioned will be clearly understood by those skilled in the art from the following description. Will be able to.

상기한 과제를 실현하기 위한 본 발명의 일 실시예와 관련된 이동 단말기는, 적어도 하나의 컨텐츠를 저장하는 메모리; 영상표시장치와 정보를 교환하기 위한 통신부; 및 상기 적어도 하나의 컨텐츠에 대한 컨텐츠 목록을 영상표시장치에 전송하고, 상기 영상표시장치로부터 컨텐츠 선택 신호가 수신되면, 상기 컨텐츠 선택 신호에 대응되는 컨텐츠를 상기 영상표시장치로 전송하도록 상기 통신부를 제어하는 제어부를 포함하되, 상기 컨텐츠 목록을 전송하는 단계는 제 1 프로토콜을 통해 수행되고, 상기 컨텐츠를 전송하는 단계는 제 2 프로토콜을 통해 수행되며, 상기 제어부는 컨텐츠 선택을 위한 제 1 애플리케이션의 실행화면을 통해 상기 컨텐츠 목록을 전송하도록 상기 통신부를 제어할 수 있다.A mobile terminal related to an embodiment of the present invention for realizing the above-described problems includes a memory for storing at least one content; A communication unit for exchanging information with a video display device; And controlling the communication unit to transmit a content list for the at least one content to a video display device and, when a content selection signal is received from the video display device, transmit content corresponding to the content selection signal to the video display device. Including the control unit, the step of transmitting the content list is performed through a first protocol, the step of transmitting the content is performed through a second protocol, the control unit is the execution screen of the first application for content selection Through this, the communication unit may be controlled to transmit the content list.

또한, 상기한 과제를 실현하기 위한 본 발명의 일 실시예와 관련된 이동 단말기의 제어 방법은, 이동 단말기에서, 컨텐츠 목록을 영상표시장치에 전송하는 단계; 상기 영상표시장치로부터 컨텐츠 선택 신호를 수신하는 단계; 및 상기 컨텐츠 선택 신호에 대응되는 컨텐츠를 상기 영상표시장치로 전송하는 단계를 포함하되, 상기 컨텐츠 목록을 전송하는 단계는 제 1 프로토콜을 통해 수행되고, 상기 컨텐츠를 전송하는 단계는 제 2 프로토콜을 통해 수행되고, 상기 컨텐츠 목록을 전송하는 단계는 상기 이동 단말기에서 실행되는 컨텐츠 선택을 위한 제 1 애플리케이션의 실행화면을 전송하는 단계를 포함할 수 있다.In addition, a control method of a mobile terminal related to an embodiment of the present invention for realizing the above-described problems includes: transmitting a content list to a video display device in the mobile terminal; Receiving a content selection signal from the video display device; And transmitting the content corresponding to the content selection signal to the video display device, wherein transmitting the content list is performed through a first protocol, and transmitting the content through a second protocol. The performed and transmitting the content list may include transmitting an execution screen of a first application for content selection executed in the mobile terminal.

상기와 같이 구성되는 본 발명의 적어도 하나의 실시예에 관련된 이동 단말기의 컨텐츠나 화면이 외부 영상표시장치에 보다 편리하게 공유될 수 있다.Content or a screen of a mobile terminal according to at least one embodiment of the present invention configured as described above can be more conveniently shared with an external video display device.

특히, 본 발명에 따르면, 이동 단말기가 자신의 파일 시스템 화면을 그대로 외부 영상표시 장치로 전송하여 서로 다른 파일 구조를 가지는 경우에도 외부 영상표시장치에서 편리하게 이동 단말기의 컨텐츠를 탐색할 수 있다.In particular, according to the present invention, even when a mobile terminal has a different file structure by transmitting its file system screen as it is to an external video display device, the external video display device can conveniently search the content of the mobile terminal.

또한, 본 발명에 의하면, 이동 단말기와 영상표시장치의 화면 데이터를 전송함에 있어서, 전송 화면의 압축 방식 또는 손실률 등을 화면 상황에 맞게 조절하여, 화면 데이터의 전송 속도를 개선시킬 수 있다. In addition, according to the present invention, in transmitting screen data of a mobile terminal and a video display device, a compression method or a loss rate of a transmission screen may be adjusted according to a screen situation to improve the transmission speed of screen data.

본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The effects obtainable in the present invention are not limited to the above-mentioned effects, and other effects not mentioned can be clearly understood by those skilled in the art from the following description. will be.

도 1은 본 발명이 적용되는 실시예로서, 이동 단말기와 영상표시장치를 포함하는 데이트 처리 시스템에 대해 개괄적으로 표현한 것이다.
도 2는 본 발명이 적용되는 실시예로서, 이동 단말기의 개략적인 블록도를 도시한 것이다.
도 3은 본 발명이 적용되는 실시예로서, 영상표시장치와 이동 단말기가 UPnP(Universal Plug and Play)로 연결된 예를 도시한 것이다.
도 4는 본 발명이 적용되는 실시예로서, 이기종간 컨텐츠를 전송하기 위한 방법의 예를 도시한 것이다.
도 5는 본 발명이 적용되는 실시예로서, 이동 단말기의 컨텐츠 목록과 영상표시장치의 컨텐츠 목록의 예를 나타낸 것이다.
도 6은 본 발명이 적용되는 실시예로서, 스크린 미러링/공유 방법을 이용한 이기종간 컨텐츠 정보를 전송하기 위한 방법의 예를 도시한 것이다.
도 7은 본 발명이 적용되는 실시예로서, 스크린 미러링/공유 방법을 이용한 이동 단말기의 컨텐츠 목록과 영상표시장치의 컨텐츠 목록의 예를 나타낸 것이다.
도 8은 본 발명이 적용되는 실시예로서, 일반적인 UPnP의 파라미터를 수정하여 스크린/미러링을 수행하는 방법에 관한 흐름도를 나타낸 것이다.
도 9는 본 발명이 적용되는 실시예로서, 이기종간 컨텐츠 전송을 위해 수정되는 변수 및 요소의 예를 설명하기 위한 도면이다.
도 10은 본 발명이 적용되는 실시예로서, UPnP에 추가되어 전송되는 컨텐츠 정보의 XML로 표현된 예를 나타낸 것이다.
도 11은 본 발명이 적용되는 실시예로서, 파라미터 재정의에 의한 이기종간의 컨텐츠 전송 흐름도의 일례를 나타낸 것이다.
도 12는 본 발명이 적용되는 실시예로서, 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 변수의 예를 나타낸 것이다.
도 13은 본 발명이 적용되는 실시예로서, 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 함수의 예를 나타낸 것이다.1 is an embodiment to which the present invention is applied, and is a general representation of a data processing system including a mobile terminal and a video display device.
2 is an embodiment to which the present invention is applied, and shows a schematic block diagram of a mobile terminal.
3 is an embodiment to which the present invention is applied, and shows an example in which a video display device and a mobile terminal are connected by UPnP (Universal Plug and Play).
4 is an embodiment to which the present invention is applied, and shows an example of a method for transmitting heterogeneous content.
5 is an embodiment to which the present invention is applied, and shows an example of a content list of a mobile terminal and a content list of a video display device.
6 is an embodiment to which the present invention is applied, and shows an example of a method for transmitting heterogeneous content information using a screen mirroring / sharing method.
7 is an embodiment to which the present invention is applied, and shows an example of a content list of a mobile terminal and a content list of a video display device using a screen mirroring / sharing method.
8 is an embodiment to which the present invention is applied, and shows a flowchart of a method for performing screen / mirroring by modifying parameters of a general UPnP.
9 is an embodiment to which the present invention is applied, and is a view for explaining an example of a variable and an element that is modified to transmit heterogeneous content.
10 is an embodiment to which the present invention is applied, and shows an example expressed in XML of content information transmitted in addition to UPnP.
11 is an embodiment to which the present invention is applied, and shows an example of a flow diagram of transferring content between heterogeneous models through parameter redefinition.
12 is an embodiment to which the present invention is applied, and shows an example of a variable for performing content transmission between heterogeneous types through parameter redefinition.
13 is an embodiment to which the present invention is applied, and shows an example of a function for performing content transmission between heterogeneous types through parameter redefinition.

이하, 본 발명과 관련된 이동 단말기에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. Hereinafter, a mobile terminal related to the present invention will be described in more detail with reference to the drawings. The suffixes "modules" and "parts" for the components used in the following description are given or mixed only considering the ease of writing the specification, and do not have meanings or roles distinguished from each other in themselves.

본 명세서에서 설명되는 이동 단말기에는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등이 포함될 수 있다. 그러나, 본 명세서에 기재된 실시예에 따른 구성은 이동 단말기에만 적용 가능한 경우를 제외하면, 디지털 TV, 데스크탑 컴퓨터 등과 같은 고정 단말기에도 적용될 수도 있음을 본 기술분야의 당업자라면 쉽게 알 수 있을 것이다.The mobile terminal described herein may include a mobile phone, a smart phone, a laptop computer, a digital broadcasting terminal, personal digital assistants (PDA), portable multimedia player (PMP), navigation, and the like. However, it will be readily appreciated by those skilled in the art that the configuration according to the embodiments described herein may also be applied to fixed terminals such as digital TVs and desktop computers, except when applicable only to mobile terminals.

또한, 한 기기에서 다른 기기로 자신의 컨텐츠 목록을 전달하는 기술은 본 명세서에서 “스크린 미러링/공유” 또는 “미러링”이라 칭하기로 한다. 스크린 미러링/공유 방법은 영상표시장치(200)와 사용자의 이동 단말기(100)를 연결하는 국제표준규격이다. 다시 말해서, 스크린 미러링/공유 방법를 이용하여 이동 단말기(100)의 현재 화면을 그대로 영상표시장치(200)에 전송하고, 사용자는 영상표시장치(200)를 통해서 현재 이동 단말기(100)의 화면을 이용하여 터치 조작 등을 수행할 수 있다. 또한, 이동 단말기(100)에서의 서비스 이용, 애플리케이션 구동까지 동기화되어 영상표시장치(200)에서 이동 단말기(100)를 제어할 수 있다.In addition, the technology of delivering one's content list from one device to another device will be referred to as “screen mirroring / sharing” or “mirroring” in this specification. The screen mirroring / sharing method is an international standard that connects the video display device 200 and the user's mobile terminal 100. In other words, the current screen of the mobile terminal 100 is transmitted to the video display device 200 using the screen mirroring / sharing method, and the user uses the screen of the current mobile terminal 100 through the video display device 200. To perform a touch operation or the like. In addition, service use in the mobile terminal 100 and application driving are synchronized to control the mobile terminal 100 in the image display device 200.

이러한 스크린 미러링/공유 방법을 위한 동기화 인터페이스는 VNC(Virtual Network Computing), 오디오 및 비디오 컨텐츠 전송에 대한 실시간 전송 프로토콜 RTP(Real Time Protocol)와 단거리 무선통신 BT(Bluetooth), 서비스 교섭을 위한 범용 플러그 앤 플레이 UPnP(Universal Plug and Play) 등의 세 가지 기본 프로토콜로 구성이 된다.The synchronization interface for this screen mirroring / sharing method is VNC (Virtual Network Computing), real-time transmission protocol RTP (Real Time Protocol) for audio and video content transmission, short-range wireless communication BT (Bluetooth), and universal plug-and-talk for service negotiation. It consists of three basic protocols: Play UPnP (Universal Plug and Play).

본 발명에서 스크린 미러링/공유를 이용한 컨텐츠 전송 방법은 1)기존 UPNP를 수정하여 스크린 미러링/공유 방법과 연동하는 방법과 2) 재정의한 UPNP 방법과 스크린 미러링/공유 방법을 연동하는 방법이 있을 수 있다. 각 방식에 대해서는 보다 상세히 후술하기로 한다.In the present invention, a method for transmitting content using screen mirroring / sharing may include 1) a method of modifying an existing UPNP to link with a screen mirroring / sharing method, and 2) a method of linking the redefined UPNP method with a screen mirroring / sharing method. . Each method will be described later in more detail.

아래에서는 본 발명이 적용되는 이동 단말기(100)와 영상표시장치(200)를 포함하는 데이터 처리 시스템에 대해 도면을 참고하여 설명하도록 한다. Hereinafter, a data processing system including the mobile terminal 100 and the image display device 200 to which the present invention is applied will be described with reference to the drawings.

도 1은 본 발명이 적용되는 실시예로서, 이동 단말기(100)와 영상표시장치(200)를 포함하는 데이터 처리 시스템에 대해 개괄적으로 표현한 것이다.1 is an embodiment to which the present invention is applied, and is a general representation of a data processing system including a mobile terminal 100 and a video display device 200.

도 1에서 보듯이, 데이터 처리 시스템은 이동 단말기(100)와 영상표시장치(200)를 포함한다. 이동 단말기(100)는 영상표시장치(200)와 유선 또는 무선으로 연결될 수 있고, 영상표시장치(200)에 비디오 신호 그리고 오디오 신호 중 적어도 하나를 전송할 수 있다.As shown in FIG. 1, the data processing system includes a mobile terminal 100 and an image display device 200. The mobile terminal 100 may be connected to the video display device 200 by wire or wirelessly, and may transmit at least one of a video signal and an audio signal to the video display device 200.

영상표시장치(200)는 이동 단말기(100)에 유선 또는 무선으로 비디오 신호, 오디오 신호 중 적어도 하나를 수신하기 위해 연결될 수 있다. 그리고 영상표시장치(200)는 이동 단말기(100)로부터 받은 비디오 신호, 오디오 신호 중 적어도 하나를 출력할 수 있다.The video display device 200 may be connected to the mobile terminal 100 in a wired or wireless manner to receive at least one of a video signal and an audio signal. In addition, the video display device 200 may output at least one of a video signal and an audio signal received from the mobile terminal 100.

영상표시장치(200)는 사용자로부터 입력을 받을 수 있고 이동 단말기(100)로부터 수신된 입력을 전송할 수 있다. 예를 들면 사용자가 영상표시장치(200)의 터치 스크린을 이용하여 터치 입력을 수행한다. 상기 영상표시장치(200)는 터치 입력이 스크린 이미지의 어느 위치인지를 인식한다. 그리고 이동 단말기(100)에 인식된 위치 정보를 전송한다.The video display device 200 may receive input from a user and may transmit input received from the mobile terminal 100. For example, the user performs a touch input using the touch screen of the image display device 200. The video display device 200 recognizes where the touch input is on the screen image. Then, the recognized location information is transmitted to the mobile terminal 100.

이동 단말기(100)는 터치 입력이 어느 위치에 발생하였는지에 따라 터치 이벤트의 발생을 결정할 수 있다. 그리고 발생된 터치 이벤트에 대응하는 동작을 실행할 수 있다. 사용자는 영상표시장치(200)의 터치 스크린, 키등을 사용하여 이동 단말기(100)의 동작을 조작 할 수 있다.The mobile terminal 100 may determine the occurrence of the touch event according to where the touch input occurred. In addition, an operation corresponding to the generated touch event may be executed. The user can operate the operation of the mobile terminal 100 using a touch screen, a key, or the like of the video display device 200.

데이터 처리 시스템의 한 예로, 사용자는 이동 단말기(100)에 설치된 길찾기 응용프로그램을 수행한다. 그러면 이동 단말기(100)는 길찾기 응용프로그램의 실행 이미지를 길찾기 프로그램의 수행 이미지를 영상표시장치(200)에 표시하기 위해서 영상표시장치(200)에 전송한다. 사용자는 길찾기 응용프로그램의 수행 이미지를 이동 단말기(100)의 작은 화면이 아닌 영상표시장치(200)의 큰 화면을 통해서 볼 수 있다. 그리고 사용자는 이동 단말기(100)의 스피커가 아닌 차량의 스피커를 통해 소리를 들을 수 있다. 사용자는 길찾기 응용프로그램에 관계된 메뉴를 영상표시장치(200)의 터치 스크린, 키를 사용함으로 선택할 수 있다. 이동 단말기(100)는 메뉴에 대응하는 동작을 수행할 수 있다. 그러면 이동 단말기(100)는 메뉴에 대응하는 수행 결과를 출력할 수 있다.As an example of a data processing system, a user performs a roadfinding application program installed in the mobile terminal 100. Then, the mobile terminal 100 transmits the execution image of the path finding application to the image displaying apparatus 200 to display the execution image of the path finding program on the image displaying apparatus 200. The user can view the execution image of the route finding application through the large screen of the video display device 200 rather than the small screen of the mobile terminal 100. And the user can hear the sound through the speaker of the vehicle, not the speaker of the mobile terminal 100. The user can select a menu related to the route finding application by using the touch screen and keys of the video display device 200. The mobile terminal 100 may perform an operation corresponding to the menu. Then, the mobile terminal 100 may output the execution result corresponding to the menu.

이동 단말기(100)와 영상표시장치(200)는 근거리 무선 기술 표준, 무선 인터넷 표준, 외부 장치 연결 표준 등을 이용하여 연결될 수 있다. 근거리 무선 기술 표준은 블루투스를 포함할 수 있다. 무선 인터넷 표준은 와이파이를 포함할 수 있다. 외부 장치 연결 표준은 USB를 포함할 수 있다.The mobile terminal 100 and the video display device 200 may be connected using a short-range wireless technology standard, a wireless Internet standard, an external device connection standard, and the like. The short-range wireless technology standard may include Bluetooth. Wireless Internet standards may include Wi-Fi. The external device connection standard may include USB.

서버 애플리케이션은 클라이언트 요청에 의한 서비스를 제공하기 위해 이동 단말기(100)에 설치 될 수 있다. 그리고 클라이언트 애플리케이션은 서버로부터 제공된 서비스를 접근하기 위해 영상표시장치(200)에 설치 될 수 있다.The server application may be installed in the mobile terminal 100 to provide a service according to a client request. In addition, the client application may be installed in the video display device 200 to access the service provided from the server.

이동 단말기(100)의 서버 애플리케이션은 이동 단말기(100)의 화면을 캡쳐하기 위해 설정될 수 있다. 그리고 캡쳐된 화면을 영상표시장치(200)의 클라이언트 애플리케이션에 전송할 수 있다. 그리고 서버 애플리케이션은 클라이언트 애플리케이션으로부터 받은 정보에 기초하여 이동 단말기(100)의 동작을 조작할 수 있다. 상기 정보는 영상표시장치(200)로부터 획득된 이벤트에 관한 정보일 수 있다. 예를 들면 영상표시장치(200)는 이동 단말기(100)를 가상 네트워크 컴퓨팅(VNC) 방법으로 원격 접근을 제공하는 그래픽 사용자 인터페이스에 대하여 RFB 프로토콜을 이용하여 원격으로 조절할 수 있다. VNC 방법은 네트워크를 통하여 이동 단말기(100)의 화면을 영상표시장치(200)에 전송할 수 있고, 이동 단말기(100)에서 획득된 이벤트를 영상표시장치(200)로 전송할 수 있다.The server application of the mobile terminal 100 may be set to capture the screen of the mobile terminal 100. In addition, the captured screen may be transmitted to the client application of the video display device 200. And the server application can operate the operation of the mobile terminal 100 based on the information received from the client application. The information may be information about an event obtained from the video display device 200. For example, the video display device 200 may remotely control the mobile terminal 100 using a RFB protocol for a graphical user interface that provides remote access by a virtual network computing (VNC) method. The VNC method may transmit a screen of the mobile terminal 100 to the video display device 200 through a network, and transmit an event obtained from the mobile terminal 100 to the video display device 200.

이하에서는 본 발명이 적용되는 이동 단말기(100)를 도면을 참고하여 설명하도록 한다.Hereinafter, a mobile terminal 100 to which the present invention is applied will be described with reference to the drawings.

도 2은 본 발명의 일 실시예와 관련된 이동 단말기의 블록 구성도(block diagram)이다.2 is a block diagram of a mobile terminal according to an embodiment of the present invention (block diagram).

상기 이동 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 2에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 이동 단말기가 구현될 수도 있다.The mobile terminal 100 includes a wireless communication unit 110, an audio / video (A / V) input unit 120, a user input unit 130, a sensing unit 140, an output unit 150, a memory 160, and an interface. It may include a unit 170, the control unit 180 and the power supply unit 190. The components shown in FIG. 2 are not essential, so a mobile terminal with more or fewer components may be implemented.

이하, 상기 구성요소들에 대해 차례로 살펴본다.Hereinafter, the components will be described in turn.

무선 통신부(110)는 이동 단말기(100)와 무선 통신 시스템 사이 또는 이동 단말기(100)와 이동 단말기(100)가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(110)는 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치정보 모듈(115) 등을 포함할 수 있다.The wireless communication unit 110 may include one or more modules that enable wireless communication between the mobile terminal 100 and the wireless communication system or between the mobile terminal 100 and the network in which the mobile terminal 100 is located. For example, the wireless communication unit 110 may include a broadcast reception module 111, a mobile communication module 112, a wireless Internet module 113, a short-range communication module 114, and a location information module 115. .

방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 적어도 두 개의 방송 채널들에 대한 동시 방송 수신 또는 방송 채널 스위칭을 위해 둘 이상의 상기 방송 수신 모듈이 상기 이동단말기(100)에 제공될 수 있다.The broadcast receiving module 111 receives a broadcast signal and / or broadcast related information from an external broadcast management server through a broadcast channel. The broadcast channel may include a satellite channel and a terrestrial channel. Two or more broadcast receiving modules may be provided to the mobile terminal 100 for simultaneous broadcast reception or switching of broadcast channels for at least two broadcast channels.

상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다. The broadcast management server may mean a server that generates and transmits broadcast signals and / or broadcast-related information or a server that receives previously generated broadcast signals and / or broadcast-related information and transmits them to a terminal. The broadcast signal may include a TV broadcast signal, a radio broadcast signal, and a data broadcast signal, and may also include a TV broadcast signal or a radio broadcast signal combined with a data broadcast signal.

상기 방송 관련 정보는 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미한다. 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있다. 이러한 경우에는 상기 이동통신 모듈(112)에 의해 수신될 수 있다.The broadcast-related information refers to information related to a broadcast channel, broadcast program or broadcast service provider. The broadcast-related information may also be provided through a mobile communication network. In this case, it may be received by the mobile communication module 112.

상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.The broadcast-related information may exist in various forms. For example, it may exist in the form of an Electronic Program Guide (EPG) of Digital Multimedia Broadcasting (DMB) or an Electronic Service Guide (ESG) of Digital Video Broadcast-Handheld (DVB-H).

상기 방송 수신 모듈(111)은, 예를 들어, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), DVB-CBMS (Convergence of Broadcasting and Mobile Service), OMA-BCAST (Open Mobile Alliance-BroadCAST), CMMB (China Multimedia Mobile Broadcasting), MBBMS (Mobile Broadcasting Business Management System), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 다른 방송 시스템에 적합하도록 구성될 수도 있다.The broadcast receiving module 111, for example, DMB-T (Digital Multimedia Broadcasting-Terrestrial), DMB-S (Digital Multimedia Broadcasting-Satellite), MediaFLO (Media Forward Link Only), DVB-H (Digital Video Broadcast) -Handheld), DVB-CBMS (Convergence of Broadcasting and Mobile Service), OMA-BCAST (Open Mobile Alliance-BroadCAST), CMMB (China Multimedia Mobile Broadcasting), MBBMS (Mobile Broadcasting Business Management System), ISDB-T (Integrated Services) A digital broadcast signal can be received using a digital broadcast system such as Digital Broadcast-Terrestrial). Of course, the broadcast receiving module 111 may be configured to be suitable for other broadcasting systems as well as the digital broadcasting system described above.

방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.The broadcast signal and / or broadcast-related information received through the broadcast receiving module 111 may be stored in the memory 160.

이동통신 모듈(112)은, GSM(Global System for Mobile communications), CDMA(Code Division Multiple Access), WCDMA(Wideband CDMA)(이에 한정되지 않음)와 같은 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다. The mobile communication module 112 is at least one of a base station, an external terminal, and a server on a mobile communication network such as, but not limited to, Global System for Mobile communications (GSM), Code Division Multiple Access (CDMA), Wideband CDMA (WCDMA). Send and receive radio signals with one. The wireless signal may include various types of data according to transmission and reception of a voice call signal, a video call signal, or a text / multimedia message.

무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 이동 단말기(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access), GSM, CDMA, WCDMA, LTE(Long Term Evolution)(이에 한정되지 않음) 등이 이용될 수 있다. The wireless Internet module 113 refers to a module for wireless Internet access, and may be built in or external to the mobile terminal 100. Wireless Internet technology includes Wireless LAN (WLAN) (Wi-Fi), Wibro (Wireless broadband), Wimax (World Interoperability for Microwave Access), HSDPA (High Speed Downlink Packet Access), GSM, CDMA, WCDMA, LTE (Long Term) Evolution) (not limited to this) and the like.

Wibro, HSDPA, GSM, CDMA, WCDMA, LTE 등에 의한 무선인터넷 접속은 이동통신망을 통해 이루어진다는 관점에서 본다면, 상기 이동통신망을 통해 무선인터넷 접속을 수행하는 상기 무선 인터넷 모듈(113)은 상기 이동통신 모듈(112)의 일종으로 이해될 수도 있다. In view of the fact that the wireless Internet access by Wibro, HSDPA, GSM, CDMA, WCDMA, LTE, etc. is made through a mobile communication network, the wireless Internet module 113 performing wireless Internet access through the mobile communication network is the mobile communication module It may be understood as a kind of (112).

근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신(short range communication) 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 인접자장통신(NFC), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.The short-range communication module 114 refers to a module for short-range communication. Bluetooth, radio frequency identification (RFID), near field communication (NFC), infrared data association (IrDA), ultra wideband (UWB), ZigBee, etc. can be used as short range communication technology. have.

위치정보 모듈(115)은 이동 단말기의 위치를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Position System) 모듈이 있다. 현재 기술에 의하면, 상기 GPS모듈(115)은 3개 이상의 위성으로부터 떨어진 거리 정보와 정확한 시간 정보를 산출한 다음 상기 산출된 정보에 삼각법을 적용함으로써, 위도, 경도, 및 고도에 따른 3차원의 현 위치 정보를 정확히 산출할 수 있다. 현재, 3개의 위성을 이용하여 위치 및 시간 정보를 산출하고, 또 다른 1개의 위성을 이용하여 상기 산출된 위치 및 시간 정보의 오차를 수정하는 방법이 널리 사용되고 있다. 또한, GPS 모듈(115)은 현 위치를 실시간으로 계속 산출함으로써 속도 정보를 산출할 수 있다. The location information module 115 is a module for obtaining a location of a mobile terminal, and a representative example thereof is a Global Position System (GPS) module. According to the present technology, the GPS module 115 calculates distance information and accurate time information from three or more satellites, and then applies trigonometry to the calculated information, thereby generating a three-dimensional string according to latitude, longitude, and altitude. Position information can be calculated accurately. Currently, a method of calculating position and time information using three satellites and correcting an error of the calculated position and time information using another one satellite is widely used. In addition, the GPS module 115 may calculate speed information by continuously calculating the current position in real time.

도 2을 참조하면, A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.Referring to FIG. 2, the A / V (Audio / Video) input unit 120 is for inputting an audio signal or a video signal, and may include a camera 121 and a microphone 122. The camera 121 processes image frames such as still images or moving images obtained by an image sensor in a video call mode or a shooting mode. The processed image frame may be displayed on the display unit 151.

카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는 사용 환경에 따라 2개 이상이 구비될 수도 있다.The image frames processed by the camera 121 may be stored in the memory 160 or transmitted to the outside through the wireless communication unit 110. Two or more cameras 121 may be provided according to the use environment.

마이크(122)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(112)을 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(122)에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.The microphone 122 receives an external sound signal by a microphone in a call mode, a recording mode, a voice recognition mode, etc., and processes it as electrical voice data. The processed voice data may be converted into a form transmittable to a mobile communication base station through the mobile communication module 112 and output. Various noise reduction algorithms for removing noise generated in the process of receiving an external sound signal may be implemented in the microphone 122.

사용자 입력부(130)는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는, 이동단말기(100)의 전?후면 또는 측면에 위치하는 버튼(136), 터치 센서(정압/정전)(137)로 구성될 수 있고, 도시되지는 않았지만 키패드(key pad), 돔 스위치 (dome switch), 조그 휠, 조그 스위치 등을 더욱 포함하여 구성될 수 있다. The user input unit 130 generates input data for the user to control the operation of the terminal. The user input unit 130 may be configured with buttons 136 located on the front, rear, or side surfaces of the mobile terminal 100 and a touch sensor (static pressure / blackout) 137, although not shown, a key pad ), A dome switch, a jog wheel, a jog switch, and the like.

센싱부(140)는 이동 단말기(100)의 개폐 상태, 이동 단말기(100)의 위치, 사용자 접촉 유무, 이동 단말기의 방위, 이동 단말기의 가속/감속 등과 같이 이동 단말기(100)의 현 상태를 감지하여 이동 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 이동 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등을 센싱할 수도 있다. 한편, 상기 센싱부(140)는 근접 센서(141)를 포함할 수 있다. (근접 센서에 관해서는 후술하도록 한다). The sensing unit 140 detects the current state of the mobile terminal 100, such as the open / closed state of the mobile terminal 100, the location of the mobile terminal 100, the presence or absence of user contact, the orientation of the mobile terminal, and acceleration / deceleration of the mobile terminal. By generating a sensing signal for controlling the operation of the mobile terminal 100. For example, when the mobile terminal 100 is in the form of a slide phone, it may sense whether the slide phone is opened or closed. In addition, it is also possible to sense whether the power supply unit 190 supplies power, whether the interface unit 170 is coupled to external devices, or the like. Meanwhile, the sensing unit 140 may include a proximity sensor 141. (The proximity sensor will be described later).

출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 이에는 디스플레이부(151), 음향 출력 모듈(152), 알람부(153), 및 햅틱 모듈(154) 등이 포함될 수 있다.The output unit 150 is for generating output related to vision, hearing, or tactile sense, and includes a display unit 151, an audio output module 152, an alarm unit 153, and a haptic module 154. You can.

디스플레이부(151)는 이동 단말기(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 이동 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 이동 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다. The display unit 151 displays (outputs) information processed by the mobile terminal 100. For example, when the mobile terminal is in a call mode, a UI (User Interface) or a GUI (Graphic User Interface) related to the call is displayed. When the mobile terminal 100 is in a video call mode or a shooting mode, it displays a photographed or / and received video, UI, or GUI.

디스플레이부(151)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. The display unit 151 includes a liquid crystal display (LCD), a thin film transistor-liquid crystal display (TFT LCD), an organic light-emitting diode (OLED), and a flexible display (flexible). display) and a 3D display.

이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 투명 디스플레이라 호칭될 수 있는데, 상기 투명 디스플레이의 대표적인 예로는 TOLED(Transparant OLED) 등이 있다. 디스플레이부(151)의 후방 구조 또한 광 투과형 구조로 구성될 수 있다. 이러한 구조에 의하여, 사용자는 단말기 바디의 디스플레이부(151)가 차지하는 영역을 통해 단말기 바디의 후방에 위치한 사물을 볼 수 있다.Some of these displays may be of a transparent type or a light transmissive type so that the outside can be seen through them. This may be referred to as a transparent display, and a typical example of the transparent display is TOLED (Transparant OLED). The rear structure of the display unit 151 may also be configured as a light transmissive structure. With this structure, the user can see an object located behind the terminal body through an area occupied by the display unit 151 of the terminal body.

이동 단말기(100)의 구현 형태에 따라 디스플레이부(151)이 2개 이상 존재할 수 있다. 예를 들어, 이동 단말기(100)에는 복수의 디스플레이부들이 하나의 면에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다. Two or more display units 151 may exist depending on the implementation form of the mobile terminal 100. For example, in the mobile terminal 100, a plurality of display units may be spaced apart or integrally disposed on one surface, or may be disposed on different surfaces.

디스플레이부(151)와 상기 터치센서(137)가 상호 레이어 구조를 이루거나 일체형으로 형성되는 경우(이하, '터치 스크린'이라 함)에, 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가지는 경우 디스플레이부(151)에 적층되어 레이어 구조를 형성할 수도 있고, 상기 디스플레이부(151)의 구성에 포함시켜 일체형으로 이루어질 수 있다.When the display unit 151 and the touch sensor 137 form a mutual layer structure or are integrally formed (hereinafter referred to as a 'touch screen'), the display unit 151 may be used as an input device in addition to an output device. You can. The touch sensor may be stacked on the display unit 151 to form a layer structure, for example, in the case of having a form of a touch film, a touch sheet, a touch pad, or the like, and integrated into the configuration of the display unit 151. It can be made.

터치 센서는 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. The touch sensor may be configured to convert a change in pressure applied to a specific portion of the display unit 151 or a capacitance generated in a specific portion of the display unit 151 into an electrical input signal. The touch sensor may be configured to detect not only the touched position and area, but also pressure at the time of touch.

터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(미도시)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)로 전송한다. 이로써, 제어부(180)는 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.When there is a touch input to the touch sensor, the signal (s) corresponding thereto is sent to a touch controller (not shown). The touch controller processes the signal (s) and then transmits corresponding data to the controller 180. Accordingly, the control unit 180 can know which area of the display unit 151 has been touched, and the like.

상기 근접 센서(141)는 상기 터치스크린에 의해 감싸지는 이동 단말기의 내부 영역 또는 상기 터치 스크린의 근처에 배치될 수 있다. 상기 근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접 센서는 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다. The proximity sensor 141 may be disposed inside the mobile terminal surrounded by the touch screen or near the touch screen. The proximity sensor refers to a sensor that detects the presence or absence of an object approaching a predetermined detection surface or an object present in the vicinity without mechanical contact using electromagnetic force or infrared rays. Proximity sensors have a longer lifespan and higher utilization than contact sensors.

상기 근접 센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.Examples of the proximity sensor include a transmission type photoelectric sensor, a direct reflection type photoelectric sensor, a mirror reflection type photoelectric sensor, a high frequency oscillation type proximity sensor, a capacitive type proximity sensor, a magnetic type proximity sensor, and an infrared proximity sensor. When the touch screen is capacitive, it is configured to detect the proximity of the pointer due to a change in electric field according to the proximity of the pointer. In this case, the touch screen (touch sensor) may be classified as a proximity sensor.

이하에서는 설명의 편의를 위해, 상기 터치스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(proximity touch)"라고 호칭하고, 상기 터치스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(contact touch)"라고 호칭할 수 있다. 상기 터치스크린 상에서 포인터로 근접 터치가 되는 위치라 함은, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치스크린에 대해 수직으로 대응되는 위치를 의미할 수 있다.Hereinafter, for convenience of description, the act of allowing the pointer to be recognized as being positioned on the touch screen without being touched by the pointer on the touch screen is referred to as a “proximity touch”, and the The act of actually touching the pointer on the touch screen may be referred to as "contact touch". The location where a proximity touch is performed by the pointer on the touch screen may mean a location in which the pointer corresponds vertically to the touch screen when the pointer is touched in proximity.

상기 근접센서는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 터치 스크린상에 출력될 수 있다. The proximity sensor detects a proximity touch and a proximity touch pattern (eg, proximity touch distance, proximity touch direction, proximity touch speed, proximity touch time, proximity touch position, proximity touch movement state, etc.). Information corresponding to the sensed proximity touch operation and proximity touch pattern may be output on the touch screen.

음향 출력 모듈(152)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력 모듈(152)은 이동 단말기(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력하기도 한다. 이러한 음향 출력 모듈(152)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.The audio output module 152 may output audio data received from the wireless communication unit 110 or stored in the memory 160 in a call signal reception, call mode or recording mode, voice recognition mode, broadcast reception mode, or the like. The sound output module 152 may also output sound signals related to functions (eg, call signal reception sound, message reception sound, etc.) performed in the mobile terminal 100. The sound output module 152 may include a receiver, a speaker, and a buzzer.

알람부(153)는 이동 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(153)는 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 상기 비디오 신호나 오디오 신호는 디스플레이부(151)나 음성 출력 모듈(152)을 통해서도 출력될 수 있으므로, 이 경우 상기 디스플레이부(151) 및 음성출력모듈(152)은 알람부(153)의 일종으로 분류될 수도 있다.The alarm unit 153 outputs a signal for notifying the occurrence of an event in the mobile terminal 100. Examples of events generated in the mobile terminal include call signal reception, message reception, key signal input, and touch input. The alarm unit 153 may output a signal for notifying the occurrence of an event by other forms, such as vibration, in addition to a video signal or an audio signal. Since the video signal or the audio signal can be output through the display unit 151 or the audio output module 152, in this case, the display unit 151 and the audio output module 152 are a type of the alarm unit 153. It may be classified.

햅틱 모듈(haptic module)(154)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다. The haptic module 154 generates various tactile effects that the user can feel. A typical example of the tactile effect generated by the haptic module 154 is vibration. The intensity and pattern of vibration generated by the haptic module 154 are controllable. For example, different vibrations may be synthesized and output or sequentially output.

햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다. The haptic module 154, in addition to vibration, is a pin array that vertically moves with respect to the contact skin surface, the ejection force or inhalation force of the air through the injection port or the intake port, the stimulation of the skin surface, the contact of the electrode (electrotrode), the stimulation of electrostatic force, etc. Various tactile effects can be generated, such as an effect caused by an effect and an effect of reproducing a feeling of cold and warm using an element capable of absorbing heat or generating heat.

햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 이동 단말기(100)의 구성 태양에 따라 2개 이상이 구비될 수 있다. The haptic module 154 may not only transmit the tactile effect through direct contact, but may also implement the user to feel the tactile effect through muscle sensations such as fingers or arms. Two or more haptic modules 154 may be provided according to a configuration aspect of the mobile terminal 100.

메모리부(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 전화번호부, 메시지, 오디오, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다. 상기 메모리부(160)에는 상기 데이터들 각각에 대한 사용 빈도(예를 들면, 각 전화번호, 각 메시지, 각 멀티미디어에 대한 사용빈도)가 저장될 수 있다. The memory 160 may store programs for processing and control of the controller 180, and temporarily store input / output data (for example, a phone book, messages, audio, still images, videos, etc.). It can also perform the function for. The memory unit 160 may store a frequency of use for each of the data (eg, each phone number, each message, and frequency of use for each multimedia).

또한, 상기 메모리부(160)에는 상기 터치스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.In addition, the memory unit 160 may store data related to various patterns of vibration and sound output when a touch is input on the touch screen.

메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 이동 단말기(100)는 인터넷(internet)상에서 상기 메모리(160)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.The memory 160 is a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory, etc.), RAM (Random Access Memory, RAM), Static Random Access Memory (SRAM), Read-Only Memory (ROM), Electrically Erasable Programmable Read-Only Memory (EEPROM), Programmable Read-Only Memory (PROM), magnetic memory, magnetic It may include a storage medium of at least one type of disk, optical disk. The mobile terminal 100 may operate in connection with a web storage performing a storage function of the memory 160 on the Internet.

인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 통로 역할을 한다. 인터페이스부(170)는 외부 기기로부터 데이터를 전송받거나, 전원을 공급받아 이동 단말기(100) 내부의 각 구성 요소에 전달하거나, 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 인터페이스부(170)에 포함될 수 있다. The interface unit 170 serves as a passage with all external devices connected to the mobile terminal 100. The interface unit 170 receives data from an external device, receives power, transfers it to each component inside the mobile terminal 100, or allows data inside the mobile terminal 100 to be transmitted to the external device. For example, wired / wireless headset port, external charger port, wired / wireless data port, memory card port, port for connecting devices equipped with an identification module, audio input / output (I / O) port, A video input / output (I / O) port, an earphone port, and the like may be included in the interface unit 170.

식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module, UIM), 가입자 인증 모듈(Subscriber Identify Module, SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module, USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 포트를 통하여 단말기(100)와 연결될 수 있다. The identification module is a chip that stores various information for authenticating the usage rights of the mobile terminal 100, a user identification module (UIM), a subscriber identification module (SIM), and a universal user authentication module ( Universal Subscriber Identity Module (USIM). The device provided with the identification module (hereinafter referred to as an 'identification device') may be manufactured in a smart card format. Therefore, the identification device may be connected to the terminal 100 through a port.

상기 인터페이스부는 이동단말기(100)가 외부 크래들(cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동단말기로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동단말기가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.When the mobile terminal 100 is connected to an external cradle, the interface unit becomes a passage through which power from the cradle is supplied to the mobile terminal 100, or various command signals input from the cradle by the user are moved. It can be a passage to the terminal. Various command signals or power inputted from the cradle may be operated as signals for recognizing that the mobile terminal is correctly mounted on the cradle.

제어부(controller)(180)는 통상적으로 이동 단말기의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 멀티미디어 모듈(181)은 제어부(180) 내에 구현될 수도 있고, 제어부(180)와 별도로 구현될 수도 있다.The controller 180 typically controls the overall operation of the mobile terminal. For example, it performs related control and processing for voice calls, data communication, video calls, and the like. The controller 180 may include a multimedia module 181 for multimedia playback. The multimedia module 181 may be implemented in the controller 180, or may be implemented separately from the controller 180.

상기 제어부(180)는 상기 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다. The controller 180 may perform pattern recognition processing capable of recognizing handwriting input or picture drawing input performed on the touch screen as text and images, respectively.

전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다. 전원공급부(190)는 예를 들어 배터리, 연결포트, 전원공급제어부 및 충전모니터링부를 포함할 수 있다.The power supply unit 190 receives external power and internal power under the control of the controller 180 and supplies power required for the operation of each component. The power supply unit 190 may include, for example, a battery, a connection port, a power supply control unit, and a charging monitoring unit.

배터리는 충전 가능하도록 이루어지는 내장형 배터리가 될 수 있으며, 충전 등을 위하여 단말기 바디에 착탈 가능하게 결합될 수 있다. 연결포트는 배터리의 충전을 위하여 전원을 공급하는 외부 충전기가 전기적으로 연결되는 인터페이스(170)의 일 예로서 구성될 수 있다.The battery may be a built-in battery made to be rechargeable, and may be detachably coupled to the terminal body for charging or the like. The connection port may be configured as an example of the interface 170 to which an external charger that supplies power for charging the battery is electrically connected.

여기에 설명되는 다양한 실시예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.The various embodiments described herein can be implemented in a computer- or similar device-readable recording medium using, for example, software, hardware, or a combination thereof.

하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 실시예들이 제어부(180) 자체로 구현될 수 있다.According to a hardware implementation, the embodiments described herein include application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays (FPGAs), It may be implemented using at least one of processors, controllers, micro-controllers, microprocessors, and electrical units for performing other functions. The described embodiments may be implemented by the controller 180 itself.

소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션으로 소프트웨어 코드가 구현될 수 있다. 상기 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수 있다.According to the software implementation, embodiments such as procedures and functions described herein may be implemented as separate software modules. Each of the software modules may perform one or more functions and operations described herein. Software code can be implemented in a software application written in an appropriate programming language. The software code may be stored in the memory 160 and executed by the controller 180.

이하에서는 도 3를 참조하여 이동 단말기와 외부 영상표시장치가 화면/컨텐츠 공유를 수행할 수 있는 프로토콜의 일례로, UPnP(Universal Plug and Play)를 사용하는 경우를 설명한다. 물론, 이는 예시적인 것으로 미러링을 위한 프로토콜은 UPnP외에 컨텐츠, 화면 및/또는 미러링 기능을 제어하기 위한 제어 시그널링을 교환할 수 있는 프로토콜이라면 그 종류에 제한되지 아니한다.Hereinafter, a case in which UPnP (Universal Plug and Play) is used as an example of a protocol in which a mobile terminal and an external video display device can perform screen / content sharing will be described with reference to FIG. 3. Of course, this is an example, and the protocol for mirroring is not limited to that type if it is a protocol capable of exchanging control signaling for controlling content, screen, and / or mirroring functions other than UPnP.

도 3은 본 발명이 적용되는 실시예로서, 영상표시장치(200)와 이동 단말기(100)가 UPnP(Universal Plug and Play)로 연결된 예를 도시한 것이다.3 is an embodiment to which the present invention is applied, and shows an example in which the video display device 200 and the mobile terminal 100 are connected by UPnP (Universal Plug and Play).

UPnP는 서로 다른 장치 간의 연결을 설정해주는 기술로, 장치를 로컬 네트워크에 추가하는 경우, UPnP를 지원하는 다른 장치와 자동 연결 및 연동시켜준다. UPnP의 주요기능으로는, 원격으로 특정 장치의 특정 기능을 실행시키거나 정보를 요청하는 서비스 요청 기능, 장치 간의 이벤트를 교환하는 데이터 구독 기능들이 있다. UPnP is a technology that establishes a connection between different devices. When a device is added to a local network, UPnP automatically connects and links with other devices that support UPnP. The main functions of UPnP include a service request function for remotely executing a specific function of a specific device or requesting information, and a data subscription function for exchanging events between devices.

도면에서 도시한 애플리케이션 시작을 위한 순서는 영상표시장치(200)에서 이동 단말기(100)에 설치된 애플리케이션을 실행하는 순서다. 여기서, 이동 단말기는 화면/컨텐츠를 제공하는 UPnP 서버(101)로 동작하고, 영상표시장치(200)는 서버(101)로부터 화면/컨텐츠를 제공받는 UPnP 클라이언트(201)로 동작하는 것으로 가정한다. 물론, 필요에 따라 둘의 역할은 서로 바뀔 수 있다. The order for starting the application illustrated in the drawing is a sequence of executing an application installed in the mobile terminal 100 in the video display device 200. Here, it is assumed that the mobile terminal operates as a UPnP server 101 that provides screen / content, and the video display device 200 operates as a UPnP client 201 that receives screen / content from the server 101. Of course, the roles of the two can be interchanged as needed.

우선, UPnP 클라이언트(201)는 UPnP 서버(101)에 SetClientProfile 명령을 전송할 수 있다(S301). SetClientProfile은 UPnP 서버(101)에 UPnP 클라이언트(201)의 클라이언트 프로필을 등록한다. 클라이언트 프로필은 UPnP 클라이언트(201)의 일반 정보(General Information)로, 네트워크 주소 정보, 송수신 가능한 데이터 크기 정보, 아이콘 정보 등을 포함한다. 클라이언트 프로필은 UPnP 클라이언트(201)의 일반 정보로 통신 접속 정보, 실시간 프로토콜 정보, 아이콘 정보 등을 포함할 수 있다.First, the UPnP client 201 may transmit a SetClientProfile command to the UPnP server 101 (S301). SetClientProfile registers the client profile of the UPnP client 201 to the UPnP server 101. The client profile is general information of the UPnP client 201, and includes network address information, transmittable data size information, icon information, and the like. The client profile is general information of the UPnP client 201 and may include communication access information, real-time protocol information, icon information, and the like.

그리고, UPnP 서버(101)는 UPnP 클라이언트(201)에 업데이트된 클라이언트 프로필을 전송할 수 있다(S302). UPnP 서버(200)에 등록된 UPnP 클라이언트(100)의 클라이언트 프로필을 전송하는 것이다.Then, the UPnP server 101 may transmit the updated client profile to the UPnP client 201 (S302). The client profile of the UPnP client 100 registered in the UPnP server 200 is transmitted.

UPnP 클라이언트(201)는 UPnP 서버(101)에 GetApplication 명령을 전송할 수 있다(S303). GetApplication은 UPnP 서버(101)에 설치된 애플리케이션 중에, UPnP 클라이언트(201)에서 실행 가능한 애플리케이션의 목록을 요청한다.The UPnP client 201 may transmit a GetApplication command to the UPnP server 101 (S303). Among the applications installed on the UPnP server 101, GetApplication requests a list of applications executable on the UPnP client 201.

그리고, UPnP 서버(101)는 UPnP 클라이언트(201)에 UPnP 클라이언트(201)에서 실행 가능한 애플리케이션의 목록(Application List)을 전송할 수 있다(S304). 이때, 애플리케이션 목록은 애플리케이션 정보, 디스플레이 정보, 오디오 정보 등을 포함할 수 있다. 애플리케이션 목록은 UPnP 서버(101)에 설치된 애플리케이션 중에 UPnP 클라이언트(201)에서 실행 가능한 애플리케이션의 목록으로, 애플리케이션의 속성 정보를 포함할 수 있다.Then, the UPnP server 101 may transmit a list of applications executable in the UPnP client 201 to the UPnP client 201 (S304). At this time, the application list may include application information, display information, audio information, and the like. The application list is a list of applications executable on the UPnP client 201 among applications installed on the UPnP server 101 and may include attribute information of the application.

UPnP 클라이언트(201)는 UPnP 서버(101)에 특정 애플리케이션의 실행을 명령하는 Launch Application을 전송할 수 있다(S305). UPnP 클라이언트(201)는 전술한 애플리케이션 목록에 포함된 애플리케이션의 실행을 명령할 수 있다. 이때, UPnP 클라이언트(201)는 사용자에 의해 선택된 특정 애플리케이션의 실행을, Launch Application을 통해 UPnP 서버(101)에 명령하는 것이다.The UPnP client 201 may transmit a Launch Application instructing the UPnP server 101 to execute a specific application (S305). The UPnP client 201 may command execution of an application included in the above application list. At this time, the UPnP client 201 is to command the UPnP server 101 to execute the specific application selected by the user through the Launch Application.

그리고, UPnP 서버(101)는 UPnP 클라이언트(201)에 Remoting protocol info.을 전송할 수 있다(S306). Remoting protocol info.은 애플리케이션 간에 사용하는 원격 프로토콜에 대한 정보를 포함할 수 있다. 원격 프로토콜에는 RFP, RTP, HTTP이 포함될 수 있다.Then, the UPnP server 101 may transmit the Remoting protocol info. To the UPnP client 201 (S306). Remoting protocol info. May include information on a remote protocol used between applications. Remote protocols can include RFP, RTP, and HTTP.

그리고, UPnP 서버(101)는 UPnP 클라이언트(201)에 애플리케이션의 실행에 의해 발생한 데이터를 전송할 수 있다(S307).Then, the UPnP server 101 may transmit data generated by the execution of the application to the UPnP client 201 (S307).

UPnP 클라이언트(201)는 UPnP 서버(101)에 특정 애플리케이션의 상태 정보를 요청하는 명령인 GetApplicationStatus을 전송하고(S308), UPnP 서버(101)는 UPnP 클라이언트(201)에 요청된 애플리케이션의 상태 정보를 전송할 수 있다(S309).The UPnP client 201 transmits GetApplicationStatus, a command for requesting status information of a specific application, to the UPnP server 101 (S308), and the UPnP server 101 transmits status information of the requested application to the UPnP client 201 It can be (S309).

마지막으로, UPnP 클라이언트(201)는 UPnP 서버(101)에 특정 애플리케이션의 종료를 명령하는 TerminateApplication을 전송할 수 있다(S310). 그리고, UPnP 서버(101)는 요청된 애플리케이션의 실행을 종료하고, 해당 애플리케이션의 종료를 UPnP 클라이언트(201)에 통보할 수 있다(S311).Finally, the UPnP client 201 may transmit a TerminateApplication commanding termination of a specific application to the UPnP server 101 (S310). Then, the UPnP server 101 may terminate the execution of the requested application, and notify the UPnP client 201 of the termination of the application (S311).

따라서, 전술한 애플리케이션 실행을 위한 순서에 따라, 영상표시장치(200)는 이동 단말기(100)에 설치된 특정 애플리케이션을 실행하고, 해당 애플리케이션의 실행 화면을 영상표시장치(200)에 출력할 수 있다.Accordingly, in accordance with the procedure for executing the above-described application, the video display device 200 may execute a specific application installed in the mobile terminal 100 and output an execution screen of the corresponding application to the video display device 200.

이하에서는 도 4를 참조하여 일반적인 컨텐츠 스트리밍 방법을 설명한다.Hereinafter, a general content streaming method will be described with reference to FIG. 4.

도 4는 본 발명이 적용되는 실시예로서, 이기종간 컨텐츠를 전송하기 위한 방법의 예를 도시한 것이다.4 is an embodiment to which the present invention is applied, and shows an example of a method for transmitting heterogeneous content.

이동 단말기(100)는 이동 단말기(100) 내의 접근 가능한 미디어 컨텐츠 혹은 파일의 목록을 영상표시장치(200)에 전달할 수 있다(S400). 사용자는 영상표시장치(200)를 통해 전달 받은 컨텐츠 목록을 열람하고, 접근 가능한 미디어 컨텐츠 혹은 파일을 확인할 수 있다.The mobile terminal 100 may transmit a list of accessible media contents or files in the mobile terminal 100 to the video display device 200 (S400). The user can browse a list of contents received through the video display device 200 and check accessible media contents or files.

영상표시장치(200)는 수신된 컨텐츠 목록 중에서 사용자가 선택한 컨텐츠의 스트리밍 또는 파일 전송을 이동단말기(100)에 요청할 수 있다(S410).The video display device 200 may request the mobile terminal 100 to stream or transmit a file selected by the user from the received content list (S410).

선택된 컨텐츠는 이동 단말기(100)에서 영상표시장치(200)로 스트리밍 또는 파일 전송이 시작된다(S420). 영상표시장치(200)는 스트리밍 또는 전송된 컨텐츠를 실행할 수 있다.The selected content is started streaming or file transfer from the mobile terminal 100 to the video display device 200 (S420). The video display device 200 may execute streaming or transmitted content.

이하에서는 도 5를 참조하여 이동 단말기(100)의 컨텐츠 목록과 영상표시장치(200)의 컨텐츠 목록에 대해 설명한다. 본 발명에서 컨텐츠 목록과 파일 목록은 동일한 의미를 나타낼 수 있다.Hereinafter, a content list of the mobile terminal 100 and a content list of the video display device 200 will be described with reference to FIG. 5. In the present invention, the content list and the file list may have the same meaning.

도 5는 본 발명이 적용되는 실시예로서, 이동 단말기(100)의 컨텐츠 목록과 영상표시장치(200)의 컨텐츠 목록의 예를 나타낸 것이다.5 is an embodiment to which the present invention is applied, and shows an example of a content list of the mobile terminal 100 and a content list of the video display device 200.

도 5의 이동 단말기(100)의 컨텐츠 목록을 살펴보면, root폴더 내에 하위 폴더로서 mnt 폴더가 위치하고, mnt 폴더 내에 하위 폴더로서 sdcard 폴더가 위치하고, sdcard 폴더 내에 youtube 폴더, mellow 폴더, new songs on Oct 폴더가 위치하고, youtube 폴더, mellow 폴더, new songs on oct 폴더 내에 컨텐츠들이 위치한다. 도 5의 영상표시장치(200)의 컨텐츠 목록을 살펴보면, root 폴더 내에 하위 폴더로서 video 폴더와 music 폴더가 있다. 그리고 video 폴더와 music 폴더 내에 컨텐츠들이 위치한다. Looking at the content list of the mobile terminal 100 of FIG. 5, the mnt folder is located as a subfolder in the root folder, the sdcard folder is located as a subfolder in the mnt folder, the youtube folder, the mellow folder, and the new songs on Oct folder in the sdcard folder. Is located, and contents are located in the youtube folder, mellow folder, and new songs on oct folder. Looking at the content list of the video display device 200 of FIG. 5, there are video folders and music folders as subfolders in the root folder. And contents are located in video folder and music folder.

이동 단말기(100)의 컨텐츠 목록을 영상표시장치(200)에 전송할 때 이동 단말기(100)의 컨텐츠 목록과는 다르게 전송하지 않기 때문에 이동 단말기(100)의 컨텐츠 목록과 단말기의 컨텐츠 목록이 서로 상이할 수 있다. 이 경우, 이동 단말기(100) 내의 컨텐츠 목록과 사용자의 단말기 내에 유저 인터페이스(User Interface) 상에서 보여주는 컨텐츠 목록이 다르기 때문에, 사용자가 원하는 컨텐츠를 찾는 것이 힘들다는 단점이 있을 수 있다.When the content list of the mobile terminal 100 is transmitted to the video display device 200, the content list of the mobile terminal 100 and the content list of the terminal are different from each other because the content list of the mobile terminal 100 is not transmitted differently. You can. In this case, since the content list in the mobile terminal 100 and the content list displayed on the user interface in the user's terminal are different, it may be difficult to find the content desired by the user.

따라서, 본 발명의 일 실시예에서는 이러한 불편함을 해소하기 위하여 이동 단말기의 파일 구조를 그대로 외부 영상표시장치에 미러링해줄 것을 제안한다. 즉, 스크린 미러링/공유 방법을 이용하여 이동 단말기(100)의 컨텐츠 목록을 영상표시장치(200)에서 동일하게 보여줌으로써, 사용자가 익숙한 유저 인터페이스를 사용하여 컨텐츠를 탐색할 수 있도록 한다.Therefore, in an embodiment of the present invention, it is proposed to mirror the file structure of the mobile terminal as it is to an external video display device in order to solve this inconvenience. That is, by using the screen mirroring / sharing method, the content list of the mobile terminal 100 is displayed on the video display device 200 in the same manner, so that the user can search for the content using a familiar user interface.

이를 수행하기 위한 과정의 일례를 도 6을 참조하여 설명한다.An example of a process for performing this will be described with reference to FIG. 6.

도 6은 본 발명이 적용되는 실시예로서, 스크린 미러링/공유 방법을 이용한 이기종간 컨텐츠 정보를 전송하기 위한 방법의 예를 도시한 것이다.6 is an embodiment to which the present invention is applied, and shows an example of a method for transmitting heterogeneous content information using a screen mirroring / sharing method.

도 6을 살펴보면, 스크린 미러링/공유 방법을 이용하여 이동 단말기(100)의 컨텐츠 목록을 사용자의 영상표시장치(200)에 전달한다(S600). 이를 위하여 이동 단말기(100) 는 컨텐츠 목록을 캡쳐하고, 캡쳐된 컨텐츠 목록을 영상표시장치(200)에 송신할 수 있다. 영상표시장치(200)는 수신된 컨텐츠 목록, 즉, 이동 단말기(100)의 화면 캡쳐 영상을 디스플레이할 수 있다. 따라서, 사용자는 이동 단말기(100)의 컨텐츠 목록과 동일한 컨텐츠 목록을 영상표시장치(200)의 유저 인터페이스를 이용하여 열람할 수 있다. Referring to FIG. 6, a content list of the mobile terminal 100 is transmitted to the user's video display device 200 using a screen mirroring / sharing method (S600). To this end, the mobile terminal 100 may capture a content list and transmit the captured content list to the video display device 200. The video display device 200 may display the received content list, that is, a screen capture image of the mobile terminal 100. Accordingly, the user can browse the content list identical to the content list of the mobile terminal 100 using the user interface of the video display device 200.

사용자는 스크린 미러링/공유를 이용해 디스플레이된 영상표시장치(200) 통해 컨텐츠를 선택할 수 있고, 이동 단말기(100)는 선택된 컨텐츠를 영상표시장치(200)에 스트리밍 또는 파일 전송할 것을 요청할 수 있다(S610). The user can select content through the displayed image display device 200 using screen mirroring / sharing, and the mobile terminal 100 may request that the selected content be streamed or transmitted to the image display device 200 (S610). .

이동 단말기(100)는 영상표시장치(200)로부터 요청된 컨텐츠를 스트리밍 또는 전송할 수 있다(S620). 이때, 이동 단말기(100)는 컨텐츠 목록을 전송한 것과는 다른 네트워크 연결을 통해 컨텐츠를 영상표시장치(200)에 전송할 수도 있다. 예를 들어, 컨텐츠 목록을 전송할 경우보다 컨텐츠 스트리밍에 보다 빠른 전송 속도가 필요한 경우, 컨텐츠 목록을 전송하는데 적용되는 프로토콜보다 데이터 전송 속도가 더 빠른 프로토콜이 컨텐츠 스트리밍에 사용될 수 있다.The mobile terminal 100 may stream or transmit the requested content from the video display device 200 (S620). At this time, the mobile terminal 100 may transmit the content to the video display device 200 through a different network connection than the content list. For example, when a faster transmission speed is required for content streaming than when transmitting a content list, a protocol having a faster data transmission speed than a protocol applied to transmit a content list may be used for content streaming.

이하에서는 상술한 방법에 의한 이동 단말기(100)의 컨텐츠 목록과 영상표시장치(200)의 컨텐츠 목록을 도 7을 참고하여 설명하도록 한다.Hereinafter, the content list of the mobile terminal 100 and the content list of the image display device 200 according to the above-described method will be described with reference to FIG. 7.

도 7은 본 발명이 적용되는 실시예로서, 스크린 미러링/공유 방법을 이용한 이동 단말기(100)의 컨텐츠 목록과 영상표시장치(200)의 컨텐츠 목록의 예를 나타낸 것이다.7 is an embodiment to which the present invention is applied, and shows an example of a content list of the mobile terminal 100 and a content list of the video display device 200 using a screen mirroring / sharing method.

도 7의 이동 단말기(100)의 컨텐츠 목록을 살펴보면, root폴더 내에 하위 폴더로서 mnt 폴더가 위치하고, mnt 폴더 내에 하위 폴더로서 sdcard 폴더가 위치하고, sdcard 폴더 내에 youtube 폴더, mellow 폴더, new songs on Oct 폴더가 위치하고, youtube 폴더, mellow 폴더, new songs on oct 폴더 내에 컨텐츠들이 위치한다. 도 8의 영상표시장치(200)의 컨텐츠 목록을 살펴보면, root폴더 내에 하위 폴더로서 mnt 폴더가 위치하고, mnt 폴더 내에 하위 폴더로서 sdcard 폴더가 위치하고, sdcard 폴더 내에 youtube 폴더, mellow 폴더, new songs on Oct 폴더가 위치하고, youtube 폴더, mellow 폴더, new songs on oct 폴더 내에 컨텐츠들이 위치한다. 사용자는 스크린 미러링/공유에 방법에 의해 이동 단말기의 컨텐츠 목록과 동일한 컨텐츠 목록을 영상표시장치를 통해서 볼 수 있다.Looking at the contents list of the mobile terminal 100 of FIG. 7, the mnt folder is located as a subfolder in the root folder, the sdcard folder is located as a subfolder in the mnt folder, the youtube folder, the mellow folder, and the new songs on Oct folder in the sdcard folder. Is located, and contents are located in the youtube folder, mellow folder, and new songs on oct folder. Looking at the content list of the video display device 200 of FIG. 8, the mnt folder is located as a subfolder in the root folder, the sdcard folder is located as a subfolder in the mnt folder, the youtube folder, the mellow folder, the new songs on Oct in the sdcard folder. The folder is located, and contents are located in the youtube folder, mellow folder, and new songs on oct folder. The user can view the content list identical to the content list of the mobile terminal through the video display device by the screen mirroring / sharing method.

이하에서는 상술한 스크린 미러링/공유를 이용한 컨텐츠 전송을 수행하기 위하여, 1) 일반적인 UPnP 프로토콜의 파라미터를 수정하는 방법 및 2) UPnP 프로토콜의 파라미터를 새로이 정의 하는 방법을 각각 설명한다.Hereinafter, in order to perform the content transmission using the screen mirroring / sharing described above, 1) a method of modifying the parameters of the general UPnP protocol and 2) a method of newly defining the parameters of the UPnP protocol will be described, respectively.

도 8은 본 발명이 적용되는 실시예로서, 일반적인 UPnP의 파라미터를 수정하여 스크린 미러링/공유를 이용한 컨텐츠 전송을 수행하는 방법에 관한 흐름도를 나타낸 것이다. 8 is an embodiment to which the present invention is applied, and shows a flowchart of a method of performing content transmission using screen mirroring / sharing by modifying parameters of a general UPnP.

이동 단말기(100)는 스크린 미러링/공유 방법을 이용하여 영상표시장치(200)로부터 컨텐츠 선택 신호를 수신할 수 있다(S800). VNC server와 VNC Client에서 스크린 미러링/공유를 통해 영상표시장치(200)와 이동 단말기(100)를 연결할 수 있다. 사용자는 VNC 스트림을 이용한 스크린 미러링/공유를 이용하여 이동 단말기(100)의 컨텐츠 목록을 영상표시장치(200)를 통하여 볼 수 있고, 원하는 컨텐츠를 선택할 수 있다.The mobile terminal 100 may receive a content selection signal from the video display device 200 using a screen mirroring / sharing method (S800). The VNC server and the VNC Client can connect the video display device 200 and the mobile terminal 100 through screen mirroring / sharing. The user can view the content list of the mobile terminal 100 through the video display device 200 by using screen mirroring / sharing using the VNC stream, and select desired content.

이동 단말기(100)는 영상표시장치(200)에 스크린 미러링/공유를 이용하여 선택된 컨텐츠의 메타 정보를 전송할 수 있다(S810). 메타 정보는 컨텐츠에 관한 정보로서, 컨텐츠가 지원하는 해상도, 프로토콜, 컨텐츠 포맷 등의 정보를 포함할 수 있다. The mobile terminal 100 may transmit meta information of the selected content to the video display device 200 using screen mirroring / sharing (S810). The meta information is information about content, and may include information such as resolution, protocol, and content format supported by the content.

이동 단말기(100)와 영상표시장치(200)는 네트워크 연결을 설정할 수 있다(S820). 전송 프로토콜과 컨텐츠 포맷에 대한 정보를 이용하여 네트워크 연결을 설정할 수 있다.The mobile terminal 100 and the video display device 200 may establish a network connection (S820). A network connection can be established using information about the transport protocol and content format.

이동 단말기(100)는 영상표시장치(200)에 고유 식별 번호를 전송할 수 있다(S830). 네트워크 연결에 따라 영상표시장치(200)와 이동 단말기(100) 간 컨텐츠 전송 준비가 완료된 경우, 이동 단말기(100)는 영상표시장치(200)에 고유 식별 번호를 할당할 수 있다. 고유 식별 번호는 이동 단말기(100)에 연결된 복수의 장치를 구분하기 위한 정보를 포함할 수 있다.The mobile terminal 100 may transmit a unique identification number to the video display device 200 (S830). When content preparation between the video display device 200 and the mobile terminal 100 is completed according to the network connection, the mobile terminal 100 may assign a unique identification number to the video display device 200. The unique identification number may include information for distinguishing a plurality of devices connected to the mobile terminal 100.

영상표시장치(200)와 이동 단말기(100)는 컨텐츠 전송을 위한 네트워크 연결을 설정할 수 있다(S840). 전송 통합 자원 식별자 및 고유 식별 번호를 이용하여 네트워크 연결을 설정할 수 있다. 전송 통합 자원 식별자는 컨텐츠의 주소 정보가 포함될 수 있다. 고유 식별 번호는 컨텐츠를 전송 받을 영상표시장치(200)를 나타내는 정보가 포함될 수 있다.The video display device 200 and the mobile terminal 100 may establish a network connection for content transmission (S840). A network connection can be established using a transmission integrated resource identifier and a unique identification number. The transmission integrated resource identifier may include address information of content. The unique identification number may include information indicating the video display device 200 to receive the content.

영상표시장치(200)를 이용하여 컨텐츠를 제어할 수 있다(S850). 컨텐츠의 재생, 중지, 정지 등을 명령하여 컨텐츠를 제어할 수 있다.The content may be controlled using the video display device 200 (S850). You can control the content by instructing it to play, stop, stop, etc.

이하에서는 도 9를 참조하여 이기종간 컨텐츠 전송을 위해 수정되는 UPnP 변수 및 요소의 예를 설명한다.Hereinafter, an example of a UPnP variable and an element modified for transmission of heterogeneous content will be described with reference to FIG. 9.

도 9는 본 발명이 적용되는 실시예로서, 이기종간 컨텐츠 전송을 위해 수정되는 변수 및 요소의 예를 설명하기 위한 도면이다.9 is an embodiment to which the present invention is applied, and is a view for explaining an example of a variable and an element that is modified to transmit heterogeneous content.

상술한 UPnP 수정 방식에 SelectedObject 변수(variable)를 추가할 수 있다. 사용자는 영상표시장치(200)에서 스크린 미러링/공유 방법을 이용하여 원하는 컨텐츠를 찾고, 해당 컨텐츠를 선택하면 SelectedObject 변수를 이용할 수 있다. SelectedObject 변수는 사용자가 선택한 컨텐츠의 메타(meta) 정보를 포함하고 있다. 메타 정보는 컨텐츠에 관한 정보로서, 컨텐츠가 지원하는 해상도, 프로토콜 정보 등을 포함할 수 있다. SelectedObject 변수가 이용될 때, 영상표시장치(200)는 이동 단말기(100)로 요청할 스트리밍 프로토콜 및 해상도를 지정하여 전송할 수 있다. 이를 위하여 컨텐츠 정보 요소를 추가하여 전송할 수 있다. SelectedObject 변수 및 컨텐츠 정보 요소를 통하여 서버와 단말기간 데이터 전송을 최소화 할 수 있으며, 정확한 프로토콜를 이용한 데이터 송수신이 가능해진다.The SelectedObject variable can be added to the UPnP modification method described above. The user can find the desired content using the screen mirroring / sharing method in the video display device 200 and select the corresponding content to use the SelectedObject variable. The SelectedObject variable contains meta information of the content selected by the user. Meta information is information about content, and may include resolution, protocol information, and the like supported by the content. When the SelectedObject variable is used, the video display device 200 may designate and transmit a streaming protocol and resolution to be requested to the mobile terminal 100. To this end, content information elements may be added and transmitted. Through the SelectedObject variable and the content information element, data transmission between the server and the terminal can be minimized, and data transmission and reception using an accurate protocol becomes possible.

컨텐츠 정보 요소는 컨텐츠 정보, 컨텐츠 통합 자원 식별자, 자막 통합 자원 식별자, 프로토콜 정보 및 해상도 정보를 포함할 수 있다.The content information element may include content information, content integrated resource identifier, subtitle integrated resource identifier, protocol information, and resolution information.

컨텐츠 정보(ContentInfo)는 사용자가 선택한 컨텐츠의 통합 자원 식별자(URI) 및 컨텐츠에 관한 정보를 포함할 수 있다. 컨텐츠 정보는 컨텐츠 통합 자원 식별자 정보, 자막 통합 자원 식별자 정보, 프로토콜 정보 및 해상도 정보 등을 포함할 수 있다. 컨텐츠 정보는 이기종간 컨텐츠 전송을 위한 필수 요소다.The content information (ContentInfo) may include information about the integrated resource identifier (URI) and content of the content selected by the user. The content information may include content integrated resource identifier information, subtitle integrated resource identifier information, protocol information, and resolution information. Content information is an essential element for content transfer between heterogeneous models.

컨텐츠 통합 자원 식별자 정보(ContentURI)는 사용자가 선택한 컨텐츠의 통합 자원 식별자(URI)를 포함할 수 있다. 통합 자원 식별자는 인터넷상의 통일된 정보 자원의 식별 체계를 나타낸다. 통합 자원 식별자는 컨텐츠를 재생하기 위한 주소, 컨텐츠 제목 등의 정보를 포함할 수 있다. 컨텐츠 통합 자원 식별자 정보는 이기종간 컨텐츠 전송을 위한 필수 요소다. 컨텐츠 통합 자원 식별자 정보는 컨텐츠 정보를 기초로 얻을 수 있다.The content integrated resource identifier information (ContentURI) may include an integrated resource identifier (URI) of content selected by the user. The integrated resource identifier represents the identification system of the unified information resource on the Internet. The integrated resource identifier may include information such as an address and a content title for playing content. Content-integrated resource identifier information is an essential element for disparate content transmission. The content integrated resource identifier information can be obtained based on the content information.

자막 통합 자원 식별자 정보(SubtitleURI)는 자막을 필요로 하는 컨텐츠를 위한 자막의 통합 자원 식별자에 관한 정보를 포함할 수 있다. 자막 통합 자원 식별자 정보는 이기종간 컨텐츠 전송을 위한 선택 요소다. 자막 통합 자원 식별자 정보는 컨텐츠 정보를 기초로 얻을 수 있다.The subtitle integrated resource identifier information (SubtitleURI) may include information regarding the subtitle integrated resource identifier for content requiring subtitles. The subtitle integrated resource identifier information is an optional element for transmitting heterogeneous content. The subtitle integrated resource identifier information can be obtained based on content information.

프로토콜 정보(ProtocolInfo)는 컨텐츠가 지원하는 프로토콜의 콤마 분리 목록에 관한 정보를 포함할 수 있다. 프로토콜 정보는 이기종간 컨텐츠 전송을 위한 필수 요소다. 프로토콜 정보는 컨텐츠 정보를 기초로 얻을 수 있다.The protocol information (ProtocolInfo) may include information on a comma separated list of protocols supported by the content. Protocol information is an essential element for disparate content transmission. Protocol information can be obtained based on content information.

해상도 정보(ResolutionInfo)는 컨텐츠 재생을 위해서 요구되는 해상도에 관한 정보를 포함할 수 있다. 해상도 정보는 이기종간 컨텐츠 전송을 위한 필수 요소다. 해상도 정보는 컨텐츠 정보를 기초로 얻을 수 있다.The resolution information (ResolutionInfo) may include information about the resolution required for content reproduction. Resolution information is an essential element for content transfer between heterogeneous models. Resolution information can be obtained based on content information.

도 10은 본 발명이 적용되는 실시예로서, UPnP에 추가되어 전송되는 컨텐츠 정보의 XML로 표현된 예를 나타낸 것이다.10 is an embodiment to which the present invention is applied, and shows an example expressed in XML of content information transmitted in addition to UPnP.

컨텐츠 정보, 컨텐츠 통합 식별자 정보, 자막 통합 자원 식별자 정보, 프로토콜 정보, 해상도 정보 등이 XML로 표현되어 UPnP에 추가되어 전송될 수 있다.Content information, content integrated identifier information, subtitle integrated resource identifier information, protocol information, and resolution information may be expressed in XML and added to UPnP and transmitted.

다음으로, UPnP 파라미터를 재정의하여 스크린 미러링/공유를 수행하는 방법을 도 11을 참조하여 설명한다.Next, a method of performing screen mirroring / sharing by redefining the UPnP parameter will be described with reference to FIG. 11.

도 11은 본 발명이 적용되는 실시예로서, 파라미터 재정의에 의한 이기종간의 컨텐츠 전송 흐름도의 일례를 나타낸 것이다.11 is an embodiment to which the present invention is applied, and shows an example of a flow diagram of transferring content between heterogeneous models through parameter redefinition.

먼저, 이동 단말기(100)는 전송 프로토콜에 관한 정보, 스트림 정보 및 애플리케이션 목록에 대한 전송 요청을 영상표시장치(200)로부터 수신할 수 있다(S1100, S1110 및 S1120). First, the mobile terminal 100 may receive a transmission request for information on a transport protocol, stream information, and an application list from the video display device 200 (S1100, S1110, and S1120).

여기서 전송 프로토콜에 관한 정보는 컨텐츠의 지원 가능한 전송 프로토콜에 대한 정보가 포함될 수 있다. 이때, 전송 프로토콜에 관한 정보는 UPnPClienTProfile에 속한 SetClientProfile에 포함될 수 있다.Here, the information on the transport protocol may include information on a transport protocol capable of supporting content. At this time, information on the transport protocol may be included in SetClientProfile belonging to UPnPClienTProfile.

스트림 정보는 스크린 미러링/공유를 이용하기 위한 네트워크 연결 정보를 포함할 수 있다. 여기서 스트림 정보는 VNC 스트림 정보를 포함할 수 있으며 UPnPMLMediaStream을 이용하여 이동 단말기(100)에 전송될 수 있다.The stream information may include network connection information for using screen mirroring / sharing. Here, the stream information may include VNC stream information and may be transmitted to the mobile terminal 100 using UPnPMLMediaStream.

또한 애플리케이션 목록은 영상표시장치(200)에서 실행될 수 있는 이동 단말기(100)의 애플리케이션들을 포함할 있다. 예를 들어, 애플리케이션 목록에는 스크린 미러링/공유를 위한 애플리케이션과 전송된 컨텐츠의 재생을 위한 비디오 플레이어 애플리케이션 등이 포함될 수 있다. 이러한 애플리케이션 목록의 전송 요청은 UPnPApplicationServer의 GetApplicationList를 통하여 영상표시장치로부터 수신될 수 있다.In addition, the application list may include applications of the mobile terminal 100 that may be executed on the video display device 200. For example, the application list may include an application for screen mirroring / sharing and a video player application for playing transmitted content. The request for transmission of the application list may be received from the video display device through GetApplicationList of UPnPApplicationServer.

S1120에서의 영상표시장치(200)의 애플리케이션 목록 전송 요청에 따라, 이동 단말기(100)는 실행 가능한 애플리케이션의 목록을 이동 단말기(100)에 전송할 수 있다(S1130). 이동 단말기(100)는 영상표시장치(200)로부터 애플리케이션의 실행 요청을 수신할 수 있다(S1140). 즉, 영상표시장치(200)는 이동 단말기(100)가 전송한 실행 가능한 애플리케이션 목록 내에서 스크린 미러링/공유를 위한 애플리케이션의 실행을 이동 단말기(100)에 요청할 수 있다. 예를 들어, 영상표시장치(200)에서 애플리케이션 목록에 포함된 파일 탐색기가 선택되면, 이동 단말기(100)에서 파일 탐색기 어플리케이션이 실행될 수 있다. 이때, 스크린 미러링/공유를 위한 애플리케이션 실행 요청은 UPnPApplcaitionServer의 LaunchApplication를 통하여 이동 단말기(100)에 수신될 수 있다.According to the application list transmission request of the video display device 200 in S1120, the mobile terminal 100 may transmit a list of executable applications to the mobile terminal 100 (S1130). The mobile terminal 100 may receive an application execution request from the video display device 200 in operation S1140. That is, the video display device 200 may request the mobile terminal 100 to execute an application for screen mirroring / sharing within a list of executable applications transmitted by the mobile terminal 100. For example, when the file searcher included in the application list is selected in the video display device 200, the file searcher application may be executed in the mobile terminal 100. At this time, an application execution request for screen mirroring / sharing may be received by the mobile terminal 100 through LaunchApplication of UPnPApplcaitionServer.

S1140의 요청에 따라, 이동 단말기(100)는 VNC를 이용한 원격조종 정보를 영상표시장치(200)에 전송할 수 있고(S1150), 그에 따라 VNC 스트림을 이용한 스크린 미러링/공유가 시작될 수 있다. 원격조종 정보는 스크린 미러링/공유가 실행됨을 나타내는 정보일 수 있다. Upon request of S1140, the mobile terminal 100 may transmit remote control information using the VNC to the video display device 200 (S1150), and thus screen mirroring / sharing using the VNC stream may be started. The remote control information may be information indicating that screen mirroring / sharing is performed.

스크린 미러링/공유를 통해 이동 단말기(100)의 컨텐츠 목록이 영상표시장치(200)의 디스플레이를 통하여 표시될 수 있다. 예를 들어, 상술한 바와 같이 파일 탐색기 어플리케이션을 통해 이동 단말기에서 표시되는 컨텐츠 목록의 영상이 그대로 스크린 미러링/공유를 통해 영상표시장치에 표시될 수 있다. 사용자는 영상표시장치(200)를 통해 이용하여 이동 단말기(100)의 컨텐츠 목록 중 원하는 컨텐츠를 선택할 수 있다. 영상표시장치(200)는 사용자의 선택에 대응되는 컨텐츠 선택 신호를 생성하여 이동 단말기로 전송할 수 있다. The content list of the mobile terminal 100 may be displayed through the display of the video display device 200 through screen mirroring / sharing. For example, as described above, the image of the content list displayed on the mobile terminal through the file explorer application may be displayed on the image display device through screen mirroring / sharing as it is. The user may select desired content from the content list of the mobile terminal 100 using the video display device 200. The video display device 200 may generate a content selection signal corresponding to the user's selection and transmit it to the mobile terminal.

컨텐츠 선택 신호를 수신한 이동 단말기(100)는 선택된 컨텐츠에 대한 메타 정보를 영상표시장치(200)에 전송할 수 있다(S1160). 메타 정보는 컨텐츠에 관한 정보로서, 컨텐츠가 지원하는 해상도, 프로토콜, 컨텐츠 포맷 등의 정보를 포함할 수 있다. The mobile terminal 100 receiving the content selection signal may transmit meta information about the selected content to the video display device 200 in operation S1160. The meta information is information about content, and may include information such as resolution, protocol, and content format supported by the content.

이동 단말기(100)는 영상표시장치(200)로부터 프로토콜 설정 정보를 수신할 수 있다(S1170). 프로토콜 설정 정보는 컨텐츠 전송을 위한 프로토콜 및 컨텐츠 포맷, 컨텐츠 해상도 정보 등을 포함할 수 있다. 프로토콜 설정 정보는 선택된 컨텐츠를 빠른 전송 속도를 이용하여 전송하기 위함으로, 프로토콜 설정 정보를 이용하여 RTP 또는 HTTP를 통한 네트워크 연결이 이동 단말기와 영상표시장치간에 설정될 수 있다. 프로토콜 설정 정보는 UPnPMLMediaStream의 SetProtocolInfo을 통해 전송될 수 있다.The mobile terminal 100 may receive protocol setting information from the video display device 200 (S1170). The protocol setting information may include a protocol and content format for content transmission, and content resolution information. The protocol setting information is for transmitting the selected content using a fast transmission speed, and a network connection via RTP or HTTP can be established between the mobile terminal and the video display device using the protocol setting information. Protocol setting information may be transmitted through SetProtocolInfo of UPnPMLMediaStream.

이동 단말기(100)는 영상표시장치(200)로부터 컨텐츠 정보의 전송을 위한 애플리케이션 실행 요청을 수신할 수 있다(S1180). 즉, 영상표시장치(200)는 선택된 컨텐츠가 RTP 또는 HTTP을 이용하여 전송되도록 이동 단말기(100)에 애플리케이션 실행을 요청할 수 있다. 사용자는 RTP 또는 HTTP을 이용한 네트워크 연결을 통해 VNC 스트림을 이용한 네트워크 연결보다 빠른 전송 속도로 컨텐츠를 이용할 수 있다. 영상표시장치(200)의 요청에 의해 컨텐츠 정보의 전송 또는 스트리밍이 시작될 수 있다. 컨텐츠 정보 전송을 위한 애플리케이션 실행 요청은 UPnPApplicationServer의 LaunchApplication을 통해 전송될 수 있다.The mobile terminal 100 may receive an application execution request for transmission of content information from the video display device 200 in operation S1180. That is, the video display device 200 may request the mobile terminal 100 to execute the application so that the selected content is transmitted using RTP or HTTP. The user can use the content through a network connection using RTP or HTTP at a higher transmission speed than a network connection using VNC stream. Transmission or streaming of content information may be started at the request of the video display device 200. The application execution request for content information transmission may be transmitted through LaunchApplication of UPnPApplicationServer.

이동 단말기(100)는 영상표시장치(200)를 통하여 컨텐츠 제어 명령을 수신할 수 있다(S1185). 컨텐츠 제어 명령은 재생, 중지, 정지, 탐색을 포함할 수 있다. 이동 단말기(100)는 영상표시장치(200)를 통하여 수신된 제어 명령을 이용하여 컨텐츠의 상태를 제어할 수 있다. 예를 들어, 사용자는 영상표시장치(200)로부터 수신된 재생 명령을 통하여 이동 단말기(100)의 비디오 플레이어에서 컨텐츠가 재생되도록 할 수 있다. 재생되는 컨텐츠는 영상표시장치(200)를 통하여 디스플레이될 수 있다. 또한, 제어명령을 통하여 재생되는 컨텐츠의 중지 또는 정지, 현재 재생되는 컨텐츠와 다른 컨텐츠의 탐색을 명령할 수 있다. 컨텐츠 제어 명령은 UPnP MLMediaStream의 Play, Stop, Pause 및 Seek를 통해 전송될 수 있다.The mobile terminal 100 may receive a content control command through the video display device 200 (S1185). Content control commands may include play, stop, stop, and search. The mobile terminal 100 may control the state of the content using a control command received through the video display device 200. For example, a user may allow content to be played in the video player of the mobile terminal 100 through a playback command received from the video display device 200. The reproduced content may be displayed through the image display device 200. In addition, a control command may be used to stop or stop the content to be played, and to search for content different from the currently played content. Content control commands can be transmitted through Play, Stop, Pause and Seek of UPnP MLMediaStream.

이동 단말기(100)는 영상표시장치(200)를 통하여 애플리케이션 종료 명령을 수신할 수 있다(S1190). 이동 단말기(100)는 애플리케이션 종료 명령을 수신하면 비디오 플레이어를 종료할 수 있다. 애플리케이션 종료 명령은 UPnPApplication의 TerminateApplication를 통해 전송될 수 있다.The mobile terminal 100 may receive an application termination command through the video display device 200 (S1190). The mobile terminal 100 may terminate the video player upon receiving the application termination command. The application termination command can be transmitted through UPnPApplication's TerminateApplication.

이하에서는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 변수 및 함수를 설명한다. Hereinafter, variables and functions for transmitting content between heterogeneous types through parameter redefinition will be described.

도 12는 본 발명이 적용되는 실시예로서, 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 변수의 예를 나타낸 것이다.12 is an embodiment to which the present invention is applied, and shows an example of a variable for performing content transmission between heterogeneous types through parameter redefinition.

파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 변수는 SelectedObject, SourceProtocalInfo, A_ARG_TYPE_ProtocalInfo, A_ARG_TYPE_ConnectionID, A_ARG_TYPE_RcsID, CurrentObjectStatus이 포함될 수 있다.Variables for transmitting content between heterogeneous types through parameter redefinition may include SelectedObject, SourceProtocalInfo, A_ARG_TYPE_ProtocalInfo, A_ARG_TYPE_ConnectionID, A_ARG_TYPE_RcsID, CurrentObjectStatus.

SelectedObject에는 선택된 컨텐츠의 메타 정보가 포함될 수 있다. 메타 정보 내에 컨텐츠가 지원하는 해상도, 프로토콜 정보 등을 포함할 수 있다. SelectedObject 변수가 이용될 때, 영상표시장치(200)에서는 이동 단말기(100)로 요청할 스트리밍 프로토콜 및 해상도를 지정하여 전송할 수 있다. SelectedObject는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 필수 변수인 것이 바람직하다.SelectedObject may include meta information of the selected content. The meta information may include resolution and protocol information supported by the content. When the SelectedObject variable is used, the video display device 200 may designate and transmit a streaming protocol and resolution to be requested to the mobile terminal 100. It is preferable that the SelectedObject is an essential variable for performing content transfer between heterogeneous types through parameter redefinition.

SourceProtocolInfo에는 선택된 컨텐츠가 지원할 수 있는 전송 포맷 및 컨텐츠 포맷 정보가 포함될 수 있다. 전송 포맷 및 컨텐츠 포맷 정보에는 컨텐츠가 코딩된 코덱 정보가 포함될 수 있다. SourceProtocolInfo는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 필수 변수인 것이 바람직하다.SourceProtocolInfo may include transport format and content format information that can be supported by the selected content. The transport format and the content format information may include codec information coded with content. It is preferable that SourceProtocolInfo is an essential variable for transmitting content between heterogeneous types through parameter redefinition.

A_ARG_TYPE_ProtocalInfo에는 선택된 컨텐츠가 지원할 수 있는 전송 포맷 및 컨텐츠 포맷 정보가 포함될 수 있다. A_ARG_TYPE_ProtocalInfo는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 필수 변수인 것이 바람직하다.A_ARG_TYPE_ProtocalInfo may include transport format and content format information that can be supported by the selected content. It is preferable that A_ARG_TYPE_ProtocalInfo is an essential variable for transmitting content between heterogeneous types by parameter redefinition.

A_ARG_TYPE_ConnectionID에는 이동 단말기(100)에 연결된 영상표시장치(200)의 연결 식별 정보가 포함될 수 있다. 연결 식별 정보는 이동 단말기(100)와 영상표시장치(200)를 연결하기 위한 설정 정보를 포함할 수 있다. 이동 단말기(100)와 연결하기 위한 복수의 영상표시장치(200)의 연결 식별 정보는 동일할 수 있다. A_ARG_TYPE_ConnectionID는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 필수 변수인 것이 바람직하다.A_ARG_TYPE_ConnectionID may include connection identification information of the video display device 200 connected to the mobile terminal 100. The connection identification information may include setting information for connecting the mobile terminal 100 and the video display device 200. The connection identification information of the plurality of video display devices 200 for connecting with the mobile terminal 100 may be the same. It is preferable that A_ARG_TYPE_ConnectionID is an essential variable for transmitting content between heterogeneous types by parameter redefinition.

A_ARG_TYPE_RcsID에는 컨텐츠 또는 파일을 전송하기 위한 클라이언트 식별 정보가 포함될 수 있다. 클라이언트 식별 정보는 이동 단말기(100)와 연결된 영상표시장치(200)를 구별하기 위한 정보를 포함할 수 있다. 이동 단말기(100)와 연결된 영상표시장치(200)는 고유의 식별 정보를 획득할 수 있다. A_ARG_TYPE_RcsID는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 필수 변수인 것이 바람직하다.A_ARG_TYPE_RcsID may include client identification information for transmitting content or files. The client identification information may include information for distinguishing the video display device 200 connected to the mobile terminal 100. The video display device 200 connected to the mobile terminal 100 may acquire unique identification information. It is preferable that A_ARG_TYPE_RcsID is an essential variable for content transfer between heterogeneous types by parameter redefinition.

CurrentObjectStatus에는 컨텐츠의 현재 상태 정보가 포함될 수 있다. 상태 정보는 이동 단말기(100) 또는 영상표시장치(200)에서 실행되거나 실행되려 하는 컨텐츠의 현재 상태를 나타낼 수 있다. 컨텐츠의 상태는 재생, 중지, 정지가 있다. CurrentObjectStatus는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 필수 변수인 것이 바람직하다.CurrentObjectStatus may include current status information of the content. The status information may indicate the current status of content to be executed or to be executed in the mobile terminal 100 or the image display device 200. The content states are Play, Stop, and Stop. It is preferable that CurrentObjectStatus is an essential variable for performing content transfer between heterogeneous models through parameter redefinition.

도 13은 본 발명이 적용되는 실시예로서, 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 실시하기 위한 함수의 예를 나타낸 것이다.13 is an embodiment to which the present invention is applied, and shows an example of a function for performing content transmission between heterogeneous types through parameter redefinition.

GetProtocolInfo는 영상표시장치(200)에 컨텐츠 포맷 정보를 요청하는 명령을 위한 함수이다. 예를 들어, 이동 단말기(100)는 이기종간 연결을 위해 지원 가능한 컨텐츠 포맷 정보를 획득하기 위해 영상표시장치(200)에 컨텐츠 정보를 전송할 것을 요청할 수 있다. GetProtocolInfo는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 위한 선택 요소인 것이 바람직하다.GetProtocolInfo is a function for a command to request content format information from the video display device 200. For example, the mobile terminal 100 may request to transmit the content information to the video display device 200 in order to obtain content format information supportable for heterogeneous connection. It is preferable that GetProtocolInfo is an optional element for content transmission between heterogeneous types by parameter redefinition.

SetProtocolInfo는 이기종간 연결을 위해 영상표시장치(200)에서 지원하는 컨텐츠 포맷을 이동 단말기(100)에 제공하는 명령을 위한 함수이다. SetProtocolInfo가 없는 경우(SetProtocolInfo = null), 영상표시장치(200)는 선택된 컨텐츠를 실행할 수 없다. 예를 들어 컨텐츠를 재생하기 위한 코덱이 이동 영상표시장치(200)에 지원되지 않는 경우, SetProtocolInfo가 없을 수 있다. SetProtocolInfo는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 위한 필수 요소인 것이 바람직하다.SetProtocolInfo is a function for a command to provide the mobile terminal 100 with a content format supported by the video display device 200 for heterogeneous connection. If there is no SetProtocolInfo (SetProtocolInfo = null), the video display device 200 cannot execute the selected content. For example, if a codec for playing content is not supported by the mobile video display device 200, SetProtocolInfo may not be present. It is desirable that SetProtocolInfo is an essential element for transmitting content between heterogeneous types by re-defining parameters.

GetResolutionInfo는 현재 컨텐츠의 해상도 정보를 전송 받기 위해 이동 단말기(100)에 요청하는 명령을 위한 함수이다. 이동 단말기(100)는 선택된 컨텐츠의 해상도 정보를 전송 요청을 영상표시장치(200)로부터 수신할 수 있고, 이동 단말기(100)는 영상표시장치(200)에 선택된 컨텐츠의 해상도 정보를 전송할 수 있다. GetResolutionInfo는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 위한 선택 요소인 것이 바람직하다.GetResolutionInfo is a function for a command that requests the mobile terminal 100 to receive the resolution information of the current content. The mobile terminal 100 may receive a request for transmitting the resolution information of the selected content from the video display device 200, and the mobile terminal 100 may transmit the resolution information of the selected content to the video display device 200. It is preferable that GetResolutionInfo is an optional element for content transmission between heterogeneous types by parameter redefinition.

Play는 현재 선택된 컨텐츠를 재생하는 명령을 위한 함수이다. Play는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 위한 필수 요소인 것이 바람직하다.Play is a function for a command to play the currently selected content. It is preferable that Play is an essential element for content transmission between heterogeneous types by redefining parameters.

Pause는 현재 선택된 컨텐츠를 중지하는 명령을 위한 함수이다. Pause는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 위한 선택 요소인 것이 바람직하다.Pause is a function for the command to stop the currently selected content. It is preferable that Pause is an optional element for content transfer between heterogeneous types by parameter redefinition.

Stop은 현재 컨텐츠를 정지하는 명령을 위한 함수이다. Stop은 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 위한 선택 요소인 것이 바람직하다.Stop is a function for the command to stop the current content. It is preferable that Stop is an optional element for content transmission between heterogeneous types by parameter redefinition.

GetMediaInfo는 현재 컨텐츠의 메타 정보를 전송 요청을 위한 함수이다. 이동 단말기(100)는 영상표시장치(200)로부터 선택된 컨텐츠의 메타 정보 전송 요청을 수신할 수 있다. GetMediaInfo는 파라미터 재정의에 의한 이기종간의 컨텐츠 전송을 위한 선택 요소인 것이 바람직하다.GetMediaInfo is a function for requesting to send meta information of the current content. The mobile terminal 100 may receive a request for transmitting meta information of the selected content from the video display device 200. It is preferable that GetMediaInfo is an optional element for content transmission between heterogeneous types by parameter redefinition.

상술한 실시예들에서 이동 단말기가 서버 역할을 수행하고, 외부 영상표시장치가 클라이언트 역할을 수행하는 것으로 주로 기재되었으나, 이는 설명의 편의를 위한 것으로 두 기기간의 역할이 서로 바뀔 수 있음은 당업자에 자명하다. 또한, 외부 영상표시 장치는 이동 단말기와 동일한 장치일 수도 있다.In the above-described embodiments, it has been mainly described that the mobile terminal plays the role of a server and the external image display device performs the role of a client, but this is for convenience of description, and it is obvious to those skilled in the art that the roles between the two devices can be interchanged. Do. Also, the external video display device may be the same device as the mobile terminal.

또한, 본 발명의 일 실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.In addition, according to an embodiment of the present invention, the above-described method can be implemented as code readable by a processor on a medium on which a program is recorded. Examples of the medium readable by the processor include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, and the like, and implemented in the form of a carrier wave (for example, transmission through the Internet). Includes.

상기와 같이 설명된 이동 단말기 및 그 제어방법은 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.The mobile terminal described above and the control method thereof are not limited to the configuration and method of the above-described embodiments, and the embodiments may be selectively selected in whole or in part so that various modifications can be made. It may be configured in combination.

Claims (18)

이동 단말기에서,
컨텐츠 목록 및 상기 이동 단말기에서 실행되는 컨텐츠 선택을 위한 제 1 애플리케이션의 실행화면을 영상표시장치에 스크린 미러링으로 제 1 프로토콜을 통하여 전송하는 단계;
상기 영상표시장치로부터 컨텐츠 선택 신호를 수신하는 단계;
프로토콜 설정 정보를 상기 영상표시장치로부터 수신하는 단계;
컨텐츠 메타 정보를 상기 영상표시장치로 전송하는 단계;
컨텐츠 포맷 정보를 상기 영상표시장치로부터 수신하는 단계;
상기 컨텐츠 선택 신호에 대응되는 컨텐츠를 상기 컨텐츠 포맷 정보에 대응되는 포맷으로 상기 영상표시장치로 상기 제 1 프로토콜과 상이한 제 2 프로토콜을 통하여 전송하는 단계;
상기 컨텐츠 선택 신호에 대응되는 정보를 상기 영상표시장치로 전송하는 단계;
컨텐츠 선택을 위한 애플리케이션 목록 요청을 상기 영상표시장치로부터 수신하는 단계; 및
애플리케이션 목록을 상기 영상표시장치로 전송하는 단계
를 포함하되,
상기 제 2 프로토콜은 상기 컨텐츠에 대한 정보를 이용하여 결정되고,
상기 컨텐츠 포맷 정보는 상기 영상표시장치가 지원하는 컨텐츠 포맷에 관한 정보를 의미하는,
상기 제 1 프로토콜은 가상 네트워크 컴퓨팅(Virtual network computing, VNC) 스트림을 포함하고,
상기 제 2 프로토콜은 RTP 및 HTTP를 포함하는,
상기 제 2 프로토콜의 전송 속도는 상기 제 1 프로토콜의 전송 속도보다 빠른,
이기종간 컨텐츠 전송 방법.In a mobile terminal,
Transmitting a content list and an execution screen of a first application for content selection executed on the mobile terminal to a video display device through screen mirroring through a first protocol;
Receiving a content selection signal from the video display device;
Receiving protocol setting information from the video display device;
Transmitting content meta information to the video display device;
Receiving content format information from the video display device;
Transmitting the content corresponding to the content selection signal to the video display device in a format corresponding to the content format information through a second protocol different from the first protocol;
Transmitting information corresponding to the content selection signal to the video display device;
Receiving an application list request for content selection from the video display device; And
Transmitting an application list to the video display device
Including,
The second protocol is determined using information on the content,
The content format information means information on a content format supported by the video display device,
The first protocol includes a virtual network computing (VNC) stream,
The second protocol includes RTP and HTTP,
The transmission speed of the second protocol is faster than the transmission speed of the first protocol,
How to transfer content between heterogeneous models. 삭제delete 제 1 항에 있어서,
상기 애플리케이션 목록은 상기 제 1 애플리케이션을 포함하는 이기종간 컨텐츠 전송 방법.According to claim 1,
The application list is a heterogeneous content transmission method including the first application. ◈청구항 4은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 4 was abandoned when payment of the set registration fee was made.◈ 제 3 항에 있어서,
상기 컨텐츠 목록을 전송하는 단계는,
상기 제 1 애플리케이션의 실행을 요청 받는 단계; 및
상기 제 1 애플리케이션을 실행하는 단계를 더 포함하는 이기종간 컨텐츠 전송 방법.The method of claim 3,
The step of transmitting the content list,
Receiving a request to execute the first application; And
And executing the first application. 삭제delete 삭제delete 삭제delete 제 1 항에 있어서,
상기 영상표시장치로부터 상기 전송되는 컨텐츠의 재생 상태를 변경하기 위한 제어 신호를 수신하는 단계; 및
상기 제어 신호에 따라 상기 전송되는 컨텐츠의 재생 상태를 변경하는 단계를 더 포함하는 이기종간 컨텐츠 전송 방법.According to claim 1,
Receiving a control signal for changing a playback state of the transmitted content from the video display device; And
And changing the playback state of the transmitted content according to the control signal. 삭제delete 적어도 하나의 컨텐츠를 저장하는 메모리;
영상표시장치와 정보를 교환하기 위한 통신부; 및
상기 적어도 하나의 컨텐츠에 대한 컨텐츠 목록을 컨텐츠 선택을 위한 제 1 애플리케이션의 실행화면을 통해 영상표시장치에 스크린 미러링으로 제 1 프로토콜을 통하여 전송하고,
상기 영상표시장치로부터 컨텐츠 선택 신호가 수신되면, 상기 컨텐츠 선택 신호에 대응되는 컨텐츠를 상기 영상표시장치로 제 2 프로토콜을 통해 전송하도록 상기 통신부를 제어하고,
상기 컨텐츠에 대한 정보를 상기 영상표시장치로 전송하고,
프로토콜 설정 정보를 상기 영상표시장치로부터 수신하고,
컨텐츠 메타 정보를 상기 영상표시장치로 전송하고,
컨텐츠 포맷 정보를 상기 영상표시장치로부터 수신하고,
상기 컨텐츠 포맷 정보에 대응되는 포맷으로 상기 컨텐츠를 전송하도록 상기 통신부를 제어하고,
상기 컨텐츠 선택 신호에 대응되는 컨텐츠에 대한 정보를 상기 영상표시장치로 전송하도록 상기 통신부를 제어하고,
애플리케이션 목록 요청 신호가 상기 영상표시장치로부터 수신되면, 애플리케이션 목록을 상기 영상표시장치로 전송하도록 상기 통신부를 제어하는 제어부를 포함하되,
상기 제 2 프로토콜은 상기 컨텐츠에 대한 정보를 이용하여 결정되는
상기 컨텐츠 포맷 정보는 상기 영상표시장치가 지원하는 컨텐츠 포맷에 관한 정보를 의미하고,
상기 제 1 프로토콜은 가상 네트워크 컴퓨팅(Virtual network computing, VNC) 스트림을 포함하고,
상기 제 2 프로토콜은 RTP 및 HTTP를 포함하는,
상기 제 2 프로토콜의 전송 속도는 상기 제 1 프로토콜의 전송 속도 보다 빠른,
이동 단말기.A memory that stores at least one content;
A communication unit for exchanging information with a video display device; And
The content list for the at least one content is transmitted through the first protocol through screen mirroring to the image display device through the execution screen of the first application for content selection,
When a content selection signal is received from the video display device, the communication unit is controlled to transmit content corresponding to the content selection signal to the video display device through a second protocol,
Transmitting information on the content to the video display device,
Protocol setting information is received from the video display device,
Transmitting content meta information to the video display device,
Content format information is received from the video display device,
Control the communication unit to transmit the content in a format corresponding to the content format information,
Control the communication unit to transmit information on the content corresponding to the content selection signal to the video display device,
When the application list request signal is received from the video display device, including a control unit for controlling the communication unit to transmit the application list to the video display device,
The second protocol is determined using information about the content
The content format information means information on a content format supported by the video display device,
The first protocol includes a virtual network computing (VNC) stream,
The second protocol includes RTP and HTTP,
The transmission speed of the second protocol is faster than the transmission speed of the first protocol,
Mobile terminal. 삭제delete 제 10 항에 있어서,
상기 애플리케이션 목록은 제 1 애플리케이션을 포함하는 것을 특징으로 하는 이동 단말기.The method of claim 10,
The application list comprises a first application, characterized in that the mobile terminal. ◈청구항 13은(는) 설정등록료 납부시 포기되었습니다.◈◈ Claim 13 was abandoned when payment of the set registration fee was made.◈ 제 12 항에 있어서,
상기 제어부는,
상기 제 1 애플리케이션의 실행 요청 신호를 수신하고, 상기 제 1 애플리케이션을 실행하는 것을 특징으로 하는 이동 단말기.The method of claim 12,
The control unit,
And receiving the execution request signal of the first application, and executing the first application. 삭제delete 삭제delete 삭제delete 제 10 항에 있어서,
상기 제어부는,
상기 영상표시장치로부터 상기 전송되는 컨텐츠의 재생 상태를 변경하기 위한 제어 신호를 수신하도록 상기 통신부를 제어하고, 상기 제어 신호에 따라 상기 전송되는 컨텐츠의 재생 상태를 변경하는 이동 단말기.The method of claim 10,
The control unit,
A mobile terminal that controls the communication unit to receive a control signal for changing a playback state of the transmitted content from the video display device, and changes the playback state of the transmitted content according to the control signal. 삭제delete
KR1020130091382A 2013-08-01 2013-08-01 Mobile terminal and method for controlling thereof KR102099176B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130091382A KR102099176B1 (en) 2013-08-01 2013-08-01 Mobile terminal and method for controlling thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130091382A KR102099176B1 (en) 2013-08-01 2013-08-01 Mobile terminal and method for controlling thereof

Publications (2)

Publication Number Publication Date
KR20150015697A KR20150015697A (en) 2015-02-11
KR102099176B1 true KR102099176B1 (en) 2020-04-09

Family

ID=52572883

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130091382A KR102099176B1 (en) 2013-08-01 2013-08-01 Mobile terminal and method for controlling thereof

Country Status (1)

Country Link
KR (1) KR102099176B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11893303B2 (en) 2021-11-30 2024-02-06 Samsung Electronics Co., Ltd. Device and method for performing mirroring
EP4342712A1 (en) * 2022-09-21 2024-03-27 Beijing Xiaomi Mobile Software Co., Ltd. Device interconnection methods and system, vehicular device, and terminal device

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102390082B1 (en) 2015-07-14 2022-04-25 삼성전자주식회사 Method for operating electronic apparatus and electronic apparatus
KR102281064B1 (en) * 2015-08-04 2021-07-27 에스케이텔레콤 주식회사 Method for Executing Of Application, Connection Apparatus therefor
KR102442527B1 (en) * 2016-02-26 2022-09-13 엘지전자 주식회사 Wireless device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101256932B1 (en) * 2009-02-13 2013-04-19 주식회사 씽크풀 Method for contents playing
KR101062352B1 (en) * 2009-06-17 2011-09-05 엘지전자 주식회사 Terminal and its control method
KR101700349B1 (en) * 2010-01-04 2017-01-26 삼성전자 주식회사 Display apparatus and streaming tranforting method of the same
KR101784004B1 (en) * 2010-11-26 2017-10-10 엘지전자 주식회사 System, method and apparatus of providing/receiving content of plurality of content providers and client

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11893303B2 (en) 2021-11-30 2024-02-06 Samsung Electronics Co., Ltd. Device and method for performing mirroring
EP4342712A1 (en) * 2022-09-21 2024-03-27 Beijing Xiaomi Mobile Software Co., Ltd. Device interconnection methods and system, vehicular device, and terminal device

Also Published As

Publication number Publication date
KR20150015697A (en) 2015-02-11

Similar Documents

Publication Publication Date Title
US9436650B2 (en) Mobile device, display device and method for controlling the same
US9553972B2 (en) Method and system for reproducing contents, and computer-readable recording medium thereof
US10674219B2 (en) Method and system for reproducing contents, and computer-readable recording medium thereof
US10038687B2 (en) Devices and control method thereof and application login system
KR101260770B1 (en) Mobile device and method for controlling play of contents in mobile device
KR101556180B1 (en) Mobile terminal, image display device mounted on vehicle and data processing method using the same
KR101276846B1 (en) Method and apparatus for streaming control of media data
US9264528B2 (en) Mobile terminal, image display device mounted on vehicle and data processing method using the same
KR102099176B1 (en) Mobile terminal and method for controlling thereof
US11051147B2 (en) Electronic apparatus and method of outputting content by the electronic apparatus
US20140282204A1 (en) Key input method and apparatus using random number in virtual keyboard
KR20110006362A (en) Mobile terminal and method for controlling broadcast thereof
KR20150049900A (en) Control device and operating method thereof
KR102317681B1 (en) System and method for transmitting surrounding device
KR20110128487A (en) Electronic device and contents sharing method for electronic device
KR20140009851A (en) Electonic device and method for controlling of the same
US20180143702A1 (en) Device controller and data processing method thereof
KR102019130B1 (en) Mobile terminal and controlling method thereof
KR20140128197A (en) Mobile terminal and method for controlling thereof
KR101973641B1 (en) Mobile terminal and control method for mobile terminal
KR20170083905A (en) Mobile terminal and method for controlling the same
KR20110094628A (en) Mobile terminal and method for controlling contents thereof
KR20150038883A (en) Terminal and method for controlling the same
KR101534741B1 (en) Image display device mounted to vehicle and image displaying method using thereof
KR101599856B1 (en) Mobile terminal and image display device mounted to vehicle and data processing method using the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)