KR101599856B1 - Mobile terminal and image display device mounted to vehicle and data processing method using the same - Google Patents

Mobile terminal and image display device mounted to vehicle and data processing method using the same Download PDF

Info

Publication number
KR101599856B1
KR101599856B1 KR1020120072647A KR20120072647A KR101599856B1 KR 101599856 B1 KR101599856 B1 KR 101599856B1 KR 1020120072647 A KR1020120072647 A KR 1020120072647A KR 20120072647 A KR20120072647 A KR 20120072647A KR 101599856 B1 KR101599856 B1 KR 101599856B1
Authority
KR
South Korea
Prior art keywords
notification
mobile terminal
user
event
display
Prior art date
Application number
KR1020120072647A
Other languages
Korean (ko)
Other versions
KR20140005454A (en
Inventor
송민영
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020120072647A priority Critical patent/KR101599856B1/en
Publication of KR20140005454A publication Critical patent/KR20140005454A/en
Application granted granted Critical
Publication of KR101599856B1 publication Critical patent/KR101599856B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0229—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0252—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for personal computers, e.g. laptops, notebooks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 이동 단말기, 차량에 부착된 영상표시장치 및 이들을 이용한 데이터 처리 방법에 관한 것으로서, 발명은 영상을 출력하는 디스플레이부; 외부의 이동 단말기와 데이터를 송수신하는 통신부; 상기 이동 단말기로부터 상기 이동 단말기에 설치된 애플리케이션의 이벤트 발생 정보인 Notification을 수신하도록 상기 통신부를 제어하고, 상기 Notification에 따라 상기 이벤트 처리 화면인 Notification UI(User Interface)를 생성하여, 사용자에게 출력하도록 상기 디스플레이부를 제어하고, 상기 Notification UI를 통해, 사용자로부터 상기 이벤트의 처리 명령을 입력받고, 상기 이벤트 처리 명령을 상기 이동 단말기에 송신하도록 상기 통신부를 제어하는 제어부를 포함하고, 상기 Notification UI는, 상기 이벤트가 발생하였음을 표시하도록 구성된 Notification 알림 UI와 상기 이벤트의 내용을 표시하도록 구성된 Notification 표시 UI를 포함하는 차량에 부착된 영상표시장치를 제공한다. 본 발명에 따른 이동 단말기, 차량에 부착된 영상표시장치 및 이들을 이용한 데이터 처리 방법에 의하면, 이동 단말기에서 발생한 이벤트를 영상표시장치를 통해 사용자에게 직관적으로 출력하고, 사용자가 이벤트를 효율적으로 제어할 수 있도록 구성된 사용자 인터페이스를 제공한다.The present invention relates to a mobile terminal, a video display device attached to a vehicle, and a data processing method using the same. A communication unit for transmitting and receiving data with an external mobile terminal; And controls the communication unit to receive Notification, which is event occurrence information of an application installed in the mobile terminal, from the mobile terminal, generates Notification UI (User Interface) which is the event processing screen according to the Notification, And a control unit for controlling the communication unit to receive the event processing command from the user via the Notification UI and to transmit the event processing command to the mobile terminal, And a Notification display UI configured to display the contents of the event. The image display apparatus according to claim 1, According to the mobile terminal, the video display device attached to the vehicle, and the data processing method using the mobile terminal according to the present invention, events generated in the mobile terminal can be intuitively output to the user through the video display device, To provide a user interface.

Description

이동 단말기, 차량에 부착된 영상표시장치 및 이들을 이용한 데이터 처리 방법{MOBILE TERMINAL AND IMAGE DISPLAY DEVICE MOUNTED TO VEHICLE AND DATA PROCESSING METHOD USING THE SAME}TECHNICAL FIELD [0001] The present invention relates to a mobile terminal, a video display device attached to a vehicle, and a data processing method using the same. BACKGROUND ART < RTI ID = 0.0 >

본 발명은 이동 단말기, 차량에 부착된 영상표시장치 및 이들을 이용한 데이터 처리 방법에 관한 것으로서, 더욱 상세하게는 이동 단말기에 발생한 이벤트를 차량에 부착된 영상표시장치에 출력하고, 영상표시장치에서 해당 이벤트를 처리할 수 있도록 하는 이동 단말기, 차량에 부착된 영상표시장치 및 이들을 이용한 데이터 처리 방법에 관한 것이다.The present invention relates to a mobile terminal, an image display apparatus attached to a vehicle, and a data processing method using the same. More particularly, the present invention relates to an image display apparatus, A video display device attached to a vehicle, and a data processing method using the same.

영상표시장치는 화면을 이용하여 영상정보를 표시하는 장치로, 그 중 차량에 부탁된 영상표시장치는 차량정보 표시, Navigation, TV 출력 등의 기능을 사용자에게 제공한다. 최근 기술의 발전으로 인해, 차량에 부착된 영상표시장치는 유무선 망을 이용하여, 사용자가 소지하는 이동 단말기와 연결되어 데이터 통신하는 것이 가능해 졌다.The video display device is a device for displaying video information using a screen. Among the video display devices requested to the vehicle, the video display device provides functions such as vehicle information display, navigation, and TV output to the user. 2. Description of the Related Art Due to recent advances in technology, an image display device attached to a vehicle can be connected to a mobile terminal owned by a user and can communicate data using a wire / wireless network.

그리고, 차량에 부착된 영상표시장치와 이동 단말기의 데이터 통신을 통해, 두 디바이스 사이의 화면을 동기화하거나, 한 디바이스에 발생한 이벤트를 다른 디바이스에서 처리하는 것이 가능해졌다. 이에 따라, 이동 단말기에 발생한 이벤트를 차량에 부착된 영상표시장치에 출력하고, 이를 처리할 수 있는 효율적인 데이터 처리 방법이 요구되고 있다.It is also possible to synchronize the screen between two devices or to process an event occurring in one device in another device through data communication between the video display device attached to the vehicle and the mobile terminal. Accordingly, there is a need for an efficient data processing method capable of outputting an event generated in the mobile terminal to a video display device attached to a vehicle and processing the event.

본 발명은 이동 단말기에 발생한 이벤트를 차량에 부착된 영상표시장치에 출력하고, 영상표시장치에서 해당 이벤트를 처리할 수 있도록 하는 이동 단말기, 차량에 부착된 영상표시장치 및 이들을 이용한 데이터 처리 방법을 제공하는 것을 목적으로 한다.The present invention provides a mobile terminal for outputting an event occurring in a mobile terminal to a video display device attached to a vehicle and processing the corresponding event in the video display device, an image display device attached to the vehicle, and a data processing method using the same .

상기 목적을 달성하기 위하여, 본 발명은 영상을 출력하는 디스플레이부; 외부의 이동 단말기와 데이터를 송수신하는 통신부; 상기 이동 단말기로부터 상기 이동 단말기에 설치된 애플리케이션의 이벤트 발생 정보인 Notification을 수신하도록 상기 통신부를 제어하고, 상기 Notification에 따라 상기 이벤트 처리 화면인 Notification UI(User Interface)를 생성하여, 사용자에게 출력하도록 상기 디스플레이부를 제어하고, 상기 Notification UI를 통해, 사용자로부터 상기 이벤트의 처리 명령을 입력받고, 상기 이벤트 처리 명령을 상기 이동 단말기에 송신하도록 상기 통신부를 제어하는 제어부를 포함하고, 상기 Notification UI는, 상기 이벤트가 발생하였음을 표시하도록 구성된 Notification 알림 UI와 상기 이벤트의 내용을 표시하도록 구성된 Notification 표시 UI를 포함하는 차량에 부착된 영상표시장치를 제공한다.According to an aspect of the present invention, there is provided a display apparatus comprising: a display unit for outputting an image; A communication unit for transmitting and receiving data with an external mobile terminal; And controls the communication unit to receive Notification, which is event occurrence information of an application installed in the mobile terminal, from the mobile terminal, generates Notification UI (User Interface) which is the event processing screen according to the Notification, And a control unit for controlling the communication unit to receive the event processing command from the user via the Notification UI and to transmit the event processing command to the mobile terminal, And a Notification display UI configured to display the contents of the event. The image display apparatus according to claim 1,

또한, 본 발명은 상기 Notification 표시 UI는, 상기 이동 단말기의 화면 정보이고, 상기 제어부는, 상기 이동 단말기의 화면 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 이동 단말기의 화면 정보를 출력하도록 상기 디스플레이부를 제어하여, 상기 Notification 표시 UI를 사용자에게 출력하는 실시예를 포함한다.Further, in the present invention, the Notification UI is the screen information of the mobile terminal, the control unit controls the communication unit to receive the screen information of the mobile terminal, and outputs the screen information of the mobile terminal And controlling the display unit to output the Notification Display UI to the user.

또한, 본 발명은 상기 제어부는, VNC(Virtual Networking Computing) 또는 UPnP(Universal Plug and Plug)를 이용하여, 상기 이동 단말기의 화면 정보를 수신하는 실시예를 포함한다.In addition, the present invention includes an embodiment in which the control unit receives screen information of the mobile terminal using VNC (Virtual Networking Computing) or UPnP (Universal Plug and Plug).

또한, 본 발명은 상기 제어부는, 상기 Notification에 따라 상기 이벤트의 내용을 포함하는 상기 Notification 표시 UI를 생성하고, 상기 생성된 Notification 표시 UI를 사용자에게 출력하도록 상기 디스플레이부를 제어하는 실시예를 포함한다.In addition, the control unit may include an embodiment of generating the Notification Display UI including the contents of the event according to the Notification, and controlling the display unit to output the generated Notification Display UI to the user.

또한, 본 발명은 상기 Notification 알림 UI는, 상기 이벤트가 발생하였음을 표시된 팝업 창으로 구성된 실시예를 포함한다.In addition, the Notification notification UI of the present invention includes an embodiment configured by a pop-up window indicating that the event has occurred.

또한, 본 발명은 상기 Notification 알림 UI는, 영상표시장치의 화면과 함께 표시되는 실시예를 포함한다.In addition, the present invention includes an embodiment in which the Notification notification UI is displayed together with a screen of the image display apparatus.

또한, 본 발명은 상기 Notification 알림 UI는, 상기 이동 단말기로부터 수신된 Notification의 히스토리 정보인 Notification 리스트를 포함하는 실시예를 포함한다.In addition, the Notification Notification UI of the present invention includes an embodiment including a Notification list, which is history information of a Notification received from the mobile terminal.

또한, 본 발명은 상기 Notification 알림 UI는, 상기 Notification 리스트를 상기 이동 단말기로부터 수신된 시간 순서대로 정렬하도록 구성된 내비게이션을 더 포함하는 실시예를 포함한다.The notification notification UI further includes an embodiment including navigation configured to sort the Notification list in order of time received from the mobile terminal.

또한, 본 발명은 상기 Notification UI는, 상기 애플리케이션의 즐겨찾기 표시 여부 또는 상기 애플리케이션의 Notification UI 출력 여부를 설정하도록 구성된 Notification 설정 UI를 더 포함하는 실시예를 포함한다.Further, the Notification UI of the present invention includes an embodiment including a Notification setting UI configured to set whether to display a favorite of the application or notify UI of the application.

또한, 본 발명은 상기 Notification UI는, 사용자로부터 상기 이벤트 처리 명령의 입력을 제한하도록 구성된 Notification 경고 UI를 더 포함하고, 상기 제어부는, 차량 운행중에, 사용자로부터 상기 이벤트 처리 명령이 입력된 경우, 상기 Notification 경고 UI 생성하고, 상기 생성된 Notification 경고 UI를 사용자에게 출력하도록 상기 디스플레이부를 제어하는 실시예를 포함한다.Further, in the present invention, the Notification UI further includes a Notification warning UI configured to limit input of the event processing command from a user, and when the event processing command is input from a user during vehicle operation, And generates the Notification alert UI and controls the display unit to output the generated Notification alert UI to the user.

또한, 본 발명은 외부의 이동 단말기로부터 상기 이동 단말기에 설치된 애플리케이션의 이벤트 정보인 Notification을 수신하는 단계; 상기 Notification에 따라 상기 이벤트 처리 화면인 Notification UI(User Interface)를 생성하여, 사용자에게 출력하는 단계; 및 상기 Notification UI를 통해, 사용자로부터 상기 이벤트의 처리 명령을 입력받고, 상기 이벤트 처리 명령을 상기 이동 단말기에 송신하는 단계를 포함하고, 상기 Notification UI는, 상기 이벤트가 발생하였음을 표시하도록 구성된 Notification 알림 UI와 상기 이벤트의 내용을 표시하도록 구성된 Notification 표시 UI를 포함하는 데이터 처리 방법을 제공한다.In addition, the present invention provides a mobile communication terminal, comprising: receiving notification from a mobile terminal, which is event information of an application installed in the mobile terminal; Generating a Notification UI (User Interface) that is the event processing screen according to the Notification and outputting the Notification UI to a user; And receiving the event processing command from the user via the Notification UI and transmitting the event processing command to the mobile terminal, wherein the Notification UI includes a notification notification configured to indicate that the event has occurred And a Notification Display UI configured to display the UI and the contents of the event.

또한, 본 발명은 상기 Notification 표시 UI는, 상기 이동 단말기의 화면 정보이고, 상기 이동 단말기의 화면 정보를 수신하는 단계; 및 상기 수신된 이동 단말기의 화면 정보를 출력하여, 상기 Notification 표시 UI를 사용자에게 출력하는 단계를 더 포함하는 실시예를 포함한다.Further, in the present invention, the Notification Display UI may be screen information of the mobile terminal, receiving screen information of the mobile terminal, And outputting the screen information of the received mobile terminal, and outputting the Notification Display UI to the user.

또한, 본 발명은 상기 이동 단말기의 화면 정보 수신 단계는, VNC(Virtual Networking Computing) 또는 UPnP(Universal Plug and Plug)를 이용하여, 상기 이동 단말기의 화면 정보를 수신하는 실시예를 포함한다.In the present invention, the screen information receiving step of the mobile terminal includes an embodiment of receiving screen information of the mobile terminal using VNC (Virtual Networking Computing) or UPnP (Universal Plug and Plug).

또한, 본 발명은 상기 Notification에 따라 상기 이벤트의 내용을 포함하는 상기 Notification 표시 UI를 생성단계; 및 상기 생성된 Notification 표시 UI를 사용자에게 출력하는 단계를 더 포함하는 실시예를 포함한다.In addition, the present invention may further comprise: generating the Notification Display UI including the contents of the event according to the Notification; And outputting the generated Notification Display UI to a user.

또한, 본 발명은 상기 Notification 알림 UI는, 상기 이벤트가 발생하였음을 표시된 팝업 창으로 구성된 실시예를 포함한다.In addition, the Notification notification UI of the present invention includes an embodiment configured by a pop-up window indicating that the event has occurred.

또한, 본 발명은 상기 Notification 알림 UI는, 상기 Notification UI가 출력되는 영상표시장치의 화면과 함께 표시되는 실시예를 포함한다.In addition, the present invention includes an embodiment in which the Notification notification UI is displayed together with a screen of an image display device from which the Notification UI is output.

또한, 본 발명은 상기 Notification 알림 UI는, 상기 이동 단말기로부터 수신된 Notification의 히스토리 정보인 Notification 리스트를 포함하는 실시예를 포함한다.In addition, the Notification Notification UI of the present invention includes an embodiment including a Notification list, which is history information of a Notification received from the mobile terminal.

또한, 본 발명은 상기 Notification 알림 UI는, 상기 Notification 리스트를 상기 이동 단말기로부터 수신된 시간 순서대로 정렬하도록 구성된 내비게이션을 더 포함하는 실시예를 포함한다.The notification notification UI further includes an embodiment including navigation configured to sort the Notification list in order of time received from the mobile terminal.

또한, 본 발명은 상기 Notification UI는, 상기 애플리케이션의 즐겨찾기 표시 여부 또는 상기 애플리케이션의 Notification UI 출력 여부를 설정하도록 구성된 Notification 설정 UI를 더 포함하는 실시예를 포함한다.Further, the Notification UI of the present invention includes an embodiment including a Notification setting UI configured to set whether to display a favorite of the application or notify UI of the application.

또한, 본 발명은 상기 Notification UI는, 사용자로부터 상기 이벤트 처리 명령의 입력을 제한하도록 구성된 Notification 경고 UI를 더 포함하고, 차량 운행중에, 사용자로부터 상기 이벤트 처리 명령이 입력된 경우, 상기 Notification 경고 UI 생성하고, 상기 생성된 Notification 경고 UI를 사용자에게 출력하는 단계를 더 포함하는 실시예를 포함한다.The Notification UI further includes a Notification Alert UI configured to restrict input of the event processing command from a user. When the event processing command is input from a user during a vehicle operation, the Notification Alert UI And outputting the generated Notification warning UI to the user.

본 발명은 상술한 실시예에 한정되지 않으며, 첨부된 청구범위에서 알 수 있는 바와 같이 본 발명이 속한 분야의 통상의 지식을 가진 자에 의해 변형이 가능하고 이러한 변형은 본 발명의 범위에 속함을 밝혀둔다.It will be understood by those of ordinary skill in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. I will reveal.

상기와 같은 구성을 통하여, 본 발명에 따른 이동 단말기, 차량에 부착된 영상표시장치 및 이들을 이용한 데이터 처리 방법에 의하면, 이동 단말기에서 발생한 이벤트를 영상표시장치를 통해 사용자에게 직관적으로 출력하고, 사용자가 이벤트를 효율적으로 제어할 수 있도록 구성된 사용자 인터페이스를 제공한다.According to the mobile terminal, the video display device attached to the vehicle and the data processing method using the same according to the present invention, it is possible to intuitively output an event generated in the mobile terminal to the user through the video display device, And provides a user interface configured to efficiently control events.

도 1은 본 발명의 실시예에 따른 영상표시장치와 이동 단말기를 포함하는 데이터 처리 시스템의 개략도이다.
도 2는 본 발명의 실시예에 따른 이동 단말기의 구성도이다.
도 3은 본 발명의 실시예에 따른 영상표시장치의 구성도이다.
도 4는 본 발명의 실시예에 따른 VNC Service를 이용한 미러링 시스템을 예시한 도면이다.
도 5는 본 발명의 실시예에 따른 UPnP Service를 이용한 미러링 시스템을 예시한 도면이다.
도 6은 본 발명의 제 1 실시예에 따른 Notification Service를 예시한 도면이다.
도 7은 본 발명의 제 2 실시예에 따른 Notification Service를 예시한 도면이다.
도 8 내지 도 10은 본 발명의 실시예에 따른 Notification Service의 초기 설정을 위한 Notification UI를 예시한 도면이다.
도 11 내지 도 13은 본 발명의 제 3 실시예에 따른 Notification Service의 Notification UI를 예시한 도면이다.
도 14 내지 도 18은 본 발명의 제 4 실시예에 따른 Notification Service의 Notification UI를 예시한 도면이다.
도 19는 본 발명의 실시예에 따른 Notification Service의 경고 UI를 예시한 도면이다.1 is a schematic diagram of a data processing system including an image display apparatus and a mobile terminal according to an embodiment of the present invention.
2 is a configuration diagram of a mobile terminal according to an embodiment of the present invention.
3 is a configuration diagram of a video display device according to an embodiment of the present invention.
4 is a diagram illustrating a mirroring system using a VNC service according to an embodiment of the present invention.
5 is a diagram illustrating a mirroring system using a UPnP service according to an embodiment of the present invention.
6 is a diagram illustrating Notification Service according to the first embodiment of the present invention.
7 is a diagram illustrating Notification Service according to a second embodiment of the present invention.
8 to 10 are views illustrating a Notification UI for initial setting of a Notification Service according to an embodiment of the present invention.
11 to 13 are diagrams illustrating a Notification UI of a Notification Service according to a third embodiment of the present invention.
FIGS. 14 to 18 are diagrams illustrating Notification UIs of a Notification Service according to a fourth embodiment of the present invention.
19 is a diagram illustrating an alert UI of a Notification Service according to an embodiment of the present invention.

이하 첨부된 도면을 참조하여 본 발명의 실시예를 본 발명이 속하는 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세하게 설명한다. 이하 설명에서 동일한 구성 요소에는 설명의 편의상 동일 명칭 및 동일 부호를 부여한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to embodiments of the present invention, examples of which are illustrated in the accompanying drawings, wherein like reference numerals refer to the like elements throughout. In the following description, the same constituent elements are given the same names and the same symbols for convenience of explanation.

본 발명에서 사용되는 용어는 가능한 한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우는 해당되는 발명의 설명부분에서 상세히 그 의미를 기재하였으므로, 단순한 용어의 명칭이 아닌 용어가 가지는 의미로서 본 발명을 파악하여야 한다.The term used in the present invention is selected from general terms that are widely used at present. However, in some cases, some terms selected arbitrarily by the applicant, and in this case, the meaning is described in detail in the description of the relevant invention. The present invention should be understood as meaning with respect to a term other than a name.

이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.The suffix "module" and " part "for the components used in the following description are given or mixed in consideration of ease of specification, and do not have their own meaning or role.

본 명세서에서 설명되는 이동 단말기(Mobile Device)에는 휴대폰, 스마트 폰(Smart Phone), PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등 사용자가 이동하면서 사용가능한 모든 단말기가 포함될 수 있다.The mobile device described in this specification may include all terminals that can be used by a user, such as a mobile phone, a smart phone, a PDA (Personal Digital Assistants), and a PMP (Portable Multimedia Player).

또한, 본 명세서에서 설명되는 영상표시장치(Image Display Device)에는 TV(Television), 노트북 컴퓨터(Laptop Computer), 디지털방송용 단말기, 내비게이션(Navigation) 등 화면을 출력가능한 모든 기기로, 차량에 부착되어 차량과 데이터 통신하도록 구성된 기기가 포함될 수 있다.The image display device described in this specification includes all devices capable of outputting a screen such as a television (TV), a notebook computer (Laptop Computer), a digital broadcasting terminal, and a navigation device, Lt; RTI ID = 0.0 > and / or < / RTI >

도 1은 본 발명의 실시예에 따른 이동 단말기(100)와 영상표시장치(200)를 포함하는 데이터 처리 시스템의 개략도이다.1 is a schematic diagram of a data processing system including a mobile terminal 100 and an image display device 200 according to an embodiment of the present invention.

도면을 참고하면, 이동 단말기(100)는 유선 또는 무선 방식으로 영상표시장치(200)와 연결되어, 비디오 신호 및 오디오 신호를 영상표시장치(200)에 전송할 수 있다.Referring to the drawing, the mobile terminal 100 may be connected to the image display device 200 in a wired or wireless manner, and may transmit a video signal and an audio signal to the image display device 200.

그리고, 영상표시장치(200)는 차량에 탑재되며, 유선 또는 무선 방식으로 이동 단말기(100)와 연결되어, 비디오 신호 및 음성 신호를 이동 단말기(100)로부터 전송받을 수 있다. 그리고, 영상표시장치(200)는 전송받은 비디오 신호 및 오디오 신호를 사용자에게 출력할 수 있다.The video display device 200 is mounted on a vehicle and can be connected to the mobile terminal 100 in a wired or wireless manner to receive a video signal and a voice signal from the mobile terminal 100. The video display device 200 can output the received video signal and audio signal to the user.

또한, 영상표시장치(200)는 사용자로부터 사용자 명령을 입력받아, 입력받은 사용자 명령을 이동 단말기(100)에 전송할 수 있다. 일례로, 사용자가 영상표시장치(200)의 터치 스크린에 터치를 입력하면, 영상표시장치(200)는 터치 스크린에 입력된 터치의 위치를 인식하여, 터치 입력 위치에 대한 정보를 이동 단말기(100)에 전송할 수 있다.In addition, the image display apparatus 200 may receive a user command from a user and transmit the received user command to the mobile terminal 100. For example, when the user inputs a touch on the touch screen of the video display device 200, the video display device 200 recognizes the position of the touch input on the touch screen and transmits information on the touch input location to the mobile terminal 100 ).

이동 단말기(100)는 터치 입력 위치에 해당하는 터치 이벤트의 발생을 시킬 수 있다. 그리고, 이동 단말기(100)는 생성된 터치 이벤트에 해당 작업을 실행할 수 있다. 따라서, 사용자는 영상표시장치(200)의 터치 스크린, 버튼 등을 사용하여, 이동 단말기(100)의 동작을 제어할 수 있게 된다.The mobile terminal 100 can generate a touch event corresponding to the touch input position. Then, the mobile terminal 100 can execute the corresponding task on the generated touch event. Accordingly, the user can control the operation of the mobile terminal 100 using a touch screen, buttons, etc. of the video display device 200. [

데이터 처리 시스템의 다른 일례로, 사용자는 이동 단말기(100)에 설치된 애플리케이션 (도로 지도 또는 다이얼링, 전화 번호부, 이메일, 동영상 재생 애플리케이션 등)을 실행시킬 수 있다.In another example of the data processing system, the user can execute an application installed in the mobile terminal 100 (road map or dialing, phone book, e-mail, video playback application, etc.).

일례로, 사용자가 이동 단말기(100)에 설치된 도로 지도 애플리케이션을 실행시킨 경우, 이동 단말기(100)는 도로 지도 애플리케이션의 실행 화면을 영상표시장치(200)에 전송할 수 있다. 그리고, 영상표시장치(200)는 전송된 도로 지도 애플리케이션의 실행 화면을 사용자에게 출력하게 된다.For example, when the user executes the road map application installed in the mobile terminal 100, the mobile terminal 100 may transmit the execution screen of the road map application to the image display device 200. [ Then, the video display device 200 outputs the execution screen of the transmitted road map application to the user.

따라서, 사용자는 이동 단말기(100)의 작은 화면에서보다, 영상표시장치(200) 대형 화면에서 도로 지도 애플리케이션의 실행 화면을 볼 수 있다. 그리고, 사용자는 이동 단말기(100) 스피커가 아닌, 차량의 스피커를 통해 길 안내 음성을 제공받을 수 있게 된다..Accordingly, the user can view the execution screen of the road map application on the large screen of the video display device 200, rather than on the small screen of the mobile terminal 100. [ Then, the user can receive the route guidance voice through the speaker of the vehicle, not the speaker of the mobile terminal 100.

사용자가 영상표시장치(200)의 터치 스크린이나 버튼을 사용하여, 도로 지도 관련 메뉴를 선택하면, 이동 단말기(100)는 사용자가 선택한 메뉴에 해당하는 작업을 실행할 수 있다. 즉, 이동 단말기(100)는 사용자가 선택한 메뉴에 해당하는 작업을 실행한 결과 화면을, 영상표시장치(200)를 통하여 출력할 수 있다.When the user selects the menu related to the road map using the touch screen or button of the video display device 200, the mobile terminal 100 can execute a task corresponding to the menu selected by the user. That is, the mobile terminal 100 can output the result of executing the task corresponding to the menu selected by the user through the image display device 200.

관련하여, 이동 단말기(100)와 영상표시장치(200)는, 블루투스와 같은 단거리 통신 표준, 와이파이(Wi-Fi)와 같은 무선 인터넷 표준, 범용 직렬 버스(USB)와 같은 외부 장치 인터페이스 표준 등등을 통하여, 서로 연결될 수 있다.The mobile terminal 100 and the video display device 200 can be connected to each other via a communication network such as a short-range communication standard such as Bluetooth, a wireless Internet standard such as Wi-Fi, an external device interface standard such as a universal serial bus And can be connected to each other.

클라이언트의 요청에 의해 서비스를 제공하는 서버 응용 프로그램은 이동 단말기(100)에 설치될 수 있으며, 서버에서 제공하는 서비스에 접근하기 위한 클라이언트 응용 프로그램은 영상표시장치(200)에 설치될 수 있다.The server application program providing the service at the request of the client can be installed in the mobile terminal 100 and the client application program for accessing the service provided in the server can be installed in the video display device 200. [

이동 단말기(100)는, 서버 응용 프로그램에 관계없이, 이동 단말기(100)의 애플리케이션 실행 화면을 캡처하도록 구성되고, 영상표시장치(200)에 애플리케이션 실행 화면을 전송할 수 있다. 그리고, 서버 응용 프로그램은 클라이언트 응용 프로그램에서 전송받은 정보(영상표시장치(200)에서 발생한 이벤트 정보)를 바탕으로, 이동 단말기(100)의 작동을 제어할 수 있다.The mobile terminal 100 is configured to capture an application execution screen of the mobile terminal 100 regardless of the server application program and can transmit the application execution screen to the video display device 200. [ The server application program can control the operation of the mobile terminal 100 based on information received from the client application program (event information generated in the video display device 200).

일례로, 영상표시장치(200)는 원격 프레임 버퍼 (RFB) 프로토콜을 사용하는 Virtual Networking Computing(VNC) 방식을 통하여, 이동 단말기(100)를 제어할 수 있다. VNC 방법에 의하면, 이동 단말기(100)는 영상표시장치(200)에 이동 단말기(100)의 화면 정보를 전송하고, 영상표시장치(200)는 이동 단말기(100)에 영상표시장치(200)에서 발생한 이벤트 정보를 전송한다.For example, the video display apparatus 200 can control the mobile terminal 100 through a Virtual Networking Computing (VNC) scheme using a remote frame buffer (RFB) protocol. According to the VNC method, the mobile terminal 100 transmits screen information of the mobile terminal 100 to the video display device 200, and the video display device 200 transmits the screen information of the mobile terminal 100 to the video display device 200 And transmits the generated event information.

그리고, 이동 단말기(100)는 고 음질의 오디오 스트림을 정의하는 Advanced Audio Distribution Profile(A2DP)에 따라, 영상표시장치(200)의 헤드 셋 또는 핸즈프리 등에 오디오 신호를 전송할 수 있다.The mobile terminal 100 may transmit an audio signal to a headset or a handsfree of the video display device 200 according to an Advanced Audio Distribution Profile (A2DP) that defines a high-quality audio stream.

또한, 이동 단말기(100)와 영상표시장치(200)는 추가적인 프로토콜을 기반으로, 서로 다른 정보를 교환할 수 있다. 일례로, 영상표시장치(200)는, 차량 속도 정보, 연료 정보, 차량 상태에 대한 정보 등을 이동 단말기(100)에 제공할 수 있다.Also, the mobile terminal 100 and the video display device 200 can exchange different information based on an additional protocol. For example, the video display device 200 can provide the mobile terminal 100 with vehicle speed information, fuel information, information on the vehicle condition, and the like.

마지막으로, 이동 단말기(100)에 설치된 애플리케이션은, 영상표시장치(200)에서 전송받은 차량 상태에 대한 정보를 바탕으로 실행될 수 있다. 이런 애플리케이션은 영상표시장치(200)의 애플리케이션 유형 (예, 도로지도, 멀티미디어, 게임 등), 그래픽 사용자 인터페이스 (GUI) 유형 (예, 지도, 비디오, 메뉴 등에게 제공할 수 있습니다 ), 응용 프로그램 상태 (예 : 포그 라운드 또는 백그라운드에서 실행 상태)에 따라 다양하게 실행될 수 있다.Finally, the application installed in the mobile terminal 100 can be executed based on the information on the vehicle status transmitted from the video display device 200. [ Such applications may include application types (e.g., road maps, multimedia, games, etc.) of the video display device 200, types of graphical user interface (GUI) (For example, in the foreground or in the background).

도 2는 본 발명의 실시예에 따른 이동 단말기(100)의 구성도이다.2 is a configuration diagram of a mobile terminal 100 according to an embodiment of the present invention.

도 2를 참고하면, 이동 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다.2, the mobile terminal 100 includes a wireless communication unit 110, an audio / video (A / V) input unit 120, a user input unit 130, a sensing unit 140, an output unit 150, An interface unit 170, a control unit 180, a power supply unit 190, and the like.

다만, 도 2에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 이동 단말기(100)가 구현될 수도 있다. 이하, 상기 구성요소들에 대해 차례로 살펴본다.However, the components shown in FIG. 2 are not essential, so that the mobile terminal 100 having more or fewer components may be implemented. Hereinafter, the components will be described in order.

무선 통신부(110)는 이동 단말기(100)와 무선 통신 시스템 사이 또는 이동 단말기(100)와 이동 단말기(100)가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(110)는 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치정보 모듈(115) 등을 포함할 수 있다.The wireless communication unit 110 may include one or more modules for enabling wireless communication between the mobile terminal 100 and the wireless communication system or between the mobile terminal 100 and the network in which the mobile terminal 100 is located. For example, the wireless communication unit 110 may include a broadcast receiving module 111, a mobile communication module 112, a wireless Internet module 113, a short range communication module 114, and a location information module 115 .

방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 적어도 두 개의 방송 채널들에 대한 동시 방송 수신 또는 방송 채널 스위칭을 위해 둘 이상의 상기 방송 수신 모듈이 상기 이동단말기(100)에 제공될 수 있다.The broadcast receiving module 111 receives broadcast signals and / or broadcast-related information from an external broadcast management server through a broadcast channel. The broadcast channel may include a satellite channel and a terrestrial channel. Two or more broadcast receiving modules may be provided to the mobile terminal 100 for simultaneous broadcast reception or broadcast channel switching for at least two broadcast channels.

상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다. The broadcast management server may refer to a server for generating and transmitting broadcast signals and / or broadcast related information, or a server for receiving broadcast signals and / or broadcast related information generated by the broadcast management server and transmitting the generated broadcast signals and / or broadcast related information. The broadcast signal may include a TV broadcast signal, a radio broadcast signal, a data broadcast signal, and a broadcast signal in which a data broadcast signal is combined with a TV broadcast signal or a radio broadcast signal.

상기 방송 관련 정보는 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미한다. 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있다. 이러한 경우에는 상기 이동통신 모듈(112)에 의해 수신될 수 있다.The broadcast-related information means information related to a broadcast channel, a broadcast program, or a broadcast service provider. The broadcast-related information may also be provided through a mobile communication network. In this case, it may be received by the mobile communication module 112.

상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.The broadcast-related information may exist in various forms. For example, an EPG (Electronic Program Guide) of DMB (Digital Multimedia Broadcasting) or an ESG (Electronic Service Guide) of Digital Video Broadcast-Handheld (DVB-H).

상기 방송 수신 모듈(111)은, 예를 들어, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), DVB-CBMS (Convergence of Broadcasting and Mobile Service), OMA-BCAST (Open Mobile Alliance-BroadCAST), CMMB (China Multimedia Mobile Broadcasting), MBBMS (Mobile Broadcasting Business Management System), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 다른 방송 시스템에 적합하도록 구성될 수도 있다.For example, the broadcast receiving module 111 may be a Digital Multimedia Broadcasting-Terrestrial (DMB-T), a Digital Multimedia Broadcasting-Satellite (DMB-S), a Media Forward Link Only (Mobile Broadcasting Business Management System), ISDB-T (Integrated Services Digital Broadcasting (ISDB-T)), Digital Multimedia Broadcasting (MBMS) Digital Broadcast-Terrestrial) or the like. Of course, the broadcast receiving module 111 may be adapted to other broadcasting systems as well as the digital broadcasting system described above.

방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.The broadcast signal and / or broadcast related information received through the broadcast receiving module 111 may be stored in the memory 160.

이동통신 모듈(112)은, GSM(Gobal System for Mobile communications), CDMA(Code Division Multiple Access), WCDMA(Wideband CDMA)(이에 한정되지 않음)와 같은 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다. The mobile communication module 112 may be coupled to a base station, an external terminal, or a server on a mobile communication network, such as, but not limited to, Gobal System for Mobile communications (GSM), Code Division Multiple Access (CDMA), Wideband CDMA Transmits and receives wireless signals with one. The wireless signal may include various types of data depending on a voice call signal, a video call signal or a text / multimedia message transmission / reception.

무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 이동 단말기(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access), GSM, CDMA, WCDMA, LTE(Long Term Evolution)(이에 한정되지 않음) 등이 이용될 수 있다. The wireless Internet module 113 is a module for wireless Internet access, and may be built in or externally attached to the mobile terminal 100. Wireless Internet technologies include WLAN (Wi-Fi), Wibro (Wireless broadband), Wimax (World Interoperability for Microwave Access), HSDPA (High Speed Downlink Packet Access), GSM, CDMA, WCDMA, LTE Evolution (but not limited to) may be used.

Wibro, HSDPA, GSM, CDMA, WCDMA, LTE 등에 의한 무선인터넷 접속은 이동통신망을 통해 이루어진다는 관점에서 본다면, 상기 이동통신망을 통해 무선인터넷 접속을 수행하는 상기 무선 인터넷 모듈(113)은 상기 이동통신 모듈(112)의 일종으로으로 이해될 수도 있다. The wireless Internet module 113, which performs wireless Internet access through the mobile communication network, is connected to the mobile communication module 110 through the mobile communication network, for example, from the viewpoint that the wireless Internet access by Wibro, HSDPA, GSM, CDMA, WCDMA, LTE, (112). ≪ / RTI >

근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신(short range communication) 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.The short-range communication module 114 refers to a module for short-range communication. Bluetooth, Radio Frequency Identification (RFID), infrared data association (IrDA), Ultra Wideband (UWB), ZigBee, and the like can be used as a short range communication technology.

위치정보 모듈(115)은 이동 단말기의 위치를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Position System) 모듈이 있다. 현재 기술에 의하면, 상기 GPS모듈(115)은 3개 이상의 위성으로부터 떨어진 거리 정보와 정확한 시간 정보를 산출한 다음 상기 산출된 정보에 삼각법을 적용함으로써, 위도, 경도, 및 고도에 따른 3차원의 현 위치 정보를 정확히 산출할 수 있다. 현재, 3개의 위성을 이용하여 위치 및 시간 정보를 산출하고, 또 다른 1개의 위성을 이용하여 상기 산출된 위치 및 시간 정보의 오차를 수정하는 방법이 널리 사용되고 있다. 또한, GPS 모듈(115)은 현 위치를 실시간으로 계속 산출함으로써 속도 정보를 산출할 수 있다. The position information module 115 is a module for obtaining the position of the mobile terminal, and a representative example thereof is a Global Position System (GPS) module. According to the current technology, the GPS module 115 calculates distance information and accurate time information from three or more satellites, and then applies trigonometry to the calculated information to obtain a three-dimensional string of latitude, longitude, The location information can be accurately calculated. At present, a method of calculating position and time information using three satellites and correcting an error of the calculated position and time information using another satellite is widely used. In addition, the GPS module 115 can calculate speed information by continuously calculating the current position in real time.

도 2를 참조하면, A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.Referring to FIG. 2, an A / V (Audio / Video) input unit 120 is for inputting an audio signal or a video signal, and may include a camera 121 and a microphone 122. The camera 121 processes an image frame such as a still image or moving image obtained by the image sensor in the video communication mode or the photographing mode. The processed image frame can be displayed on the display unit 151. [

카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는 사용 환경에 따라 2개 이상이 구비될 수도 있다.The image frame processed by the camera 121 may be stored in the memory 160 or transmitted to the outside through the wireless communication unit 110. [ Two or more cameras 121 may be provided depending on the use environment.

마이크(122)는 통화 모드 또는 녹음 모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(112)을 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(122)에는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음(Noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.The microphone 122 receives an external sound signal through a microphone in a communication mode, a recording mode, a voice recognition mode, or the like, and processes it as electrical voice data. The processed voice data can be converted into a form that can be transmitted to the mobile communication base station through the mobile communication module 112 when the voice data is in the call mode, and output. The microphone 122 may be implemented with various noise reduction algorithms for eliminating noise generated in receiving an external sound signal.

사용자 입력부(130)는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는, 이동단말기(100)의 전·후면 또는 측면에 위치하는 버튼(136), 터치 센서(정압/정전)(137)로 구성될 수 있고, 도시되지는 않았지만 키패드(Key Pad), 돔 스위치 (Dome Switch), 조그 휠, 조그 스위치 등을 더욱 포함하여 구성될 수 있다. The user input unit 130 generates input data for a user to control the operation of the terminal. The user input unit 130 may include a button 136 located on the front, rear, or side of the mobile terminal 100, and a touch sensor (static / static) 137. Although not shown, ), A dome switch, a jog wheel, a jog switch, and the like.

센싱부(140)는 이동 단말기(100)의 개폐 상태, 이동 단말기(100)의 위치, 사용자 접촉 유무, 이동 단말기의 방위, 이동 단말기의 가속/감속 등과 같이 이동 단말기(100)의 현 상태를 감지하여 이동 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 이동 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등을 센싱할 수도 있다. 한편, 상기 센싱부(140)는 근접 센서(141)를 포함할 수 있다. (근접 센서에 관해서는 후술하도록 한다). The sensing unit 140 senses the current state of the mobile terminal 100 such as the open / close state of the mobile terminal 100, the position of the mobile terminal 100, the presence or absence of user contact, the orientation of the mobile terminal, And generates a sensing signal for controlling the operation of the mobile terminal 100. For example, when the mobile terminal 100 is in the form of a slide phone, it is possible to sense whether the slide phone is opened or closed. It is also possible to sense whether the power supply unit 190 is powered on, whether the interface unit 170 is connected to an external device, and the like. Meanwhile, the sensing unit 140 may include a proximity sensor 141. (The proximity sensor will be described later).

출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 이에는 디스플레이부(151), 음향 출력 모듈(152), 알람부(153), 및 햅틱 모듈(154) 등이 포함될 수 있다.The output unit 150 is for generating output related to the visual, auditory or tactile sense and includes a display unit 151, an audio output module 152, an alarm unit 153, and a haptic module 154 .

디스플레이부(151)는 이동 단말기(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 이동 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 이동 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다. The display unit 151 displays (outputs) information processed by the mobile terminal 100. For example, when the mobile terminal is in the call mode, a UI (User Interface) or a GUI (Graphic User Interface) associated with a call is displayed. When the mobile terminal 100 is in the video communication mode or the photographing mode, the photographed and / or received video or UI and GUI are displayed.

디스플레이부(151)는 액정 디스플레이(Liquid Crystal Display, LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display, TFT LCD), 유기 발광 다이오드(Organic Light-Emitting Diode, OLED), 플렉시블 디스플레이(Flexible Display), 3차원 디스플레이(3D Display) 중에서 적어도 하나를 포함할 수 있다. The display unit 151 may be a liquid crystal display (LCD), a thin film transistor liquid crystal display (TFT LCD), an organic light emitting diode (OLED), a flexible display Display, and a three-dimensional display (3D display).

이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 투명 디스플레이라 호칭될 수 있는데, 상기 투명 디스플레이의 대표적인 예로는 TOLED(Transparant OLED) 등이 있다. 디스플레이부(151)의 후방 구조 또한 광 투과형 구조로 구성될 수 있다. 이러한 구조에 의하여, 사용자는 단말기 바디의 디스플레이부(151)가 차지하는 영역을 통해 단말기 바디의 후방에 위치한 사물을 볼 수 있다.Some of these displays may be transparent or light transmissive so that they can be seen through. This can be referred to as a transparent display, and a typical example of the transparent display is TOLED (Transparent OLED) and the like. The rear structure of the display unit 151 may also be of a light transmission type. With this structure, the user can see an object located behind the terminal body through the area occupied by the display unit 151 of the terminal body.

이동 단말기(100)의 구현 형태에 따라 디스플레이부(151)이 2개 이상 존재할 수 있다. 예를 들어, 이동 단말기(100)에는 복수의 디스플레이부들이 하나의 면에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.There may be two or more display units 151 according to the embodiment of the mobile terminal 100. For example, in the mobile terminal 100, a plurality of display portions may be spaced apart from one another or may be disposed integrally with each other, or may be disposed on different surfaces.

디스플레이부(151)와 상기 터치센서(137)가 상호 레이어 구조를 이루거나 일체형으로 형성되는 경우(이하, '터치 스크린'이라 함)에, 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가지는 경우 디스플레이부(151)에 적층되어 레이어 구조를 형성할 수도 있고, 상기 디스플레이부(151)의 구성에 포함시켜 일체형으로 이루어질 수 있다.In the case where the display unit 151 and the touch sensor 137 have a mutual layer structure or are integrally formed (hereinafter referred to as a 'touch screen'), the display unit 151 may be used as an input device . The touch sensor may be stacked on the display unit 151 to form a layer structure when the touch sensor has a form of a touch film, a touch sheet, a touch pad, or the like. ≪ / RTI >

터치 센서는 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. The touch sensor may be configured to convert a change in a pressure applied to a specific portion of the display unit 151 or a capacitance generated in a specific portion of the display unit 151 into an electrical input signal. The touch sensor can be configured to detect not only the position and area to be touched but also the pressure at the time of touch.

터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(미도시)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)로 전송한다. 이로써, 제어부(180)는 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.If there is a touch input to the touch sensor, the corresponding signal (s) is sent to the touch controller (not shown). The touch controller processes the signal (s) and transmits the corresponding data to the controller 180. Thus, the control unit 180 can know which area of the display unit 151 is touched or the like.

상기 근접 센서(141)는 상기 터치스크린에 의해 감싸지는 이동 단말기의 내부 영역 또는 상기 터치 스크린의 근처에 배치될 수 있다. 상기 근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접 센서는 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다. The proximity sensor 141 may be disposed in an inner region of the mobile terminal or in the vicinity of the touch screen, which is enclosed by the touch screen. The proximity sensor refers to a sensor that detects the presence or absence of an object approaching a predetermined detection surface or a nearby object without mechanical contact using the force of an electromagnetic field or infrared rays. The proximity sensor has a longer life span than the contact sensor and its utilization is also high.

상기 근접 센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.Examples of the proximity sensor include a transmission type photoelectric sensor, a direct reflection type photoelectric sensor, a mirror reflection type photoelectric sensor, a high frequency oscillation type proximity sensor, a capacitive proximity sensor, a magnetic proximity sensor, and an infrared proximity sensor. And to detect the proximity of the pointer by the change of the electric field along the proximity of the pointer when the touch screen is electrostatic. In this case, the touch screen (touch sensor) may be classified as a proximity sensor.

이하에서는 설명의 편의를 위해, 상기 터치스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(proximity touch)"라고 호칭하고, 상기 터치스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(contact touch)"라고 호칭할 수 있다. 상기 터치스크린 상에서 포인터로 근접 터치가 되는 위치라 함은, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치스크린에 대해 수직으로 대응되는 위치를 의미할 수 있다.Hereinafter, for convenience of explanation, the act of recognizing that the pointer is positioned on the touch screen while the pointer is not in contact with the touch screen is referred to as "proximity touch" The act of actually contacting the pointer on the touch screen may be referred to as "contact touch. &Quot; The location where the pointer is proximately touched on the touch screen may refer to a position where the pointer corresponds vertically to the touch screen when the pointer is touched.

상기 근접센서는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 터치 스크린상에 출력될 수 있다. The proximity sensor detects a proximity touch and a proximity touch pattern (e.g., a proximity touch distance, a proximity touch direction, a proximity touch speed, a proximity touch time, a proximity touch position, a proximity touch movement state, and the like). Information corresponding to the detected proximity touch operation and the proximity touch pattern may be output on the touch screen.

음향 출력 모듈(152)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력 모듈(152)은 이동 단말기(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력하기도 한다. 이러한 음향 출력 모듈(152)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.The audio output module 152 may output audio data received from the wireless communication unit 110 or stored in the memory 160 in a call signal reception mode, a call mode or a recording mode, a voice recognition mode, a broadcast reception mode, The sound output module 152 also outputs sound signals related to functions (e.g., call signal reception sound, message reception sound, etc.) performed in the mobile terminal 100. [ The audio output module 152 may include a receiver, a speaker, a buzzer, and the like.

알람부(153)는 이동 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(153)는 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 상기 비디오 신호나 오디오 신호는 디스플레이부(151)나 음성 출력 모듈(152)을 통해서도 출력될 수 있으므로, 이 경우 상기 디스플레이부(151) 및 음음성출력모듈(152)은 알람부(153)의 일종으로 분류될 수도 있다.The alarm unit 153 outputs a signal for notifying the occurrence of an event of the mobile terminal 100. Examples of events that occur in the mobile terminal include call signal reception, message reception, key signal input, touch input, and the like. The alarm unit 153 may output a signal for notifying the occurrence of an event in a form other than the video signal or the audio signal, for example, vibration. In this case, the display unit 151 and the sound / voice output module 152 may be a kind of the alarm unit 153. The display unit 151 and the sound / . ≪ / RTI >

햅틱 모듈(haptic module)(154)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다. The haptic module 154 generates various tactile effects that the user can feel. A typical example of the haptic effect generated by the haptic module 154 is vibration. The intensity and pattern of the vibration generated by the hit module 154 can be controlled. For example, different vibrations may be synthesized and output or sequentially output.

햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.In addition to the vibration, the haptic module 154 may include a pin arrangement vertically moving with respect to the contact skin surface, a spraying force or a suction force of the air through the injection port or the suction port, a touch on the skin surface, contact with an electrode, And various tactile effects such as an effect of reproducing a cold sensation using an endothermic or exothermic element can be generated.

햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 이동 단말기(100)의 구성 태양에 따라 2개 이상이 구비될 수 있다. The haptic module 154 can be implemented not only to transmit the tactile effect through the direct contact but also to allow the user to feel the tactile effect through the muscular sensation of the finger or arm. At least two haptic modules 154 may be provided according to the configuration of the mobile terminal 100.

메모리부(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 전화번호부, 메시지, 오디오, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다. 상기 메모리부(160)에는 상기 데이터들 각각에 대한 사용 빈도(예를 들면, 각 전화번호, 각 메시지, 각 멀티미디어에 대한 사용빈도)가 저장될 수 있다. The memory unit 160 may store a program for processing and controlling the control unit 180 and temporarily store the input / output data (e.g., telephone directory, message, audio, For example. The memory unit 160 may store the frequency of use of each of the data (for example, each telephone number, each message, and frequency of use for each multimedia).

또한, 상기 메모리부(160)에는 상기 터치스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.In addition, the memory unit 160 may store data on vibration and sound of various patterns output when the touch is input on the touch screen.

메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 이동 단말기(100)는 인터넷(internet)상에서 상기 메모리(160)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.The memory 160 may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory), a RAM (Random Access Memory), SRAM (Static Random Access Memory), ROM (Read Only Memory), EEPROM (Electrically Erasable Programmable Read-Only Memory), PROM A disk, and / or an optical disk. The mobile terminal 100 may operate in association with a web storage that performs a storage function of the memory 160 on the Internet.

인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 통로 역할을 한다. 인터페이스부(170)는 외부 기기로부터 데이터를 전송받거나, 전원을 공급받아 이동 단말기(100) 내부의 각 구성 요소에 전달하거나, 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 인터페이스부(170)에 포함될 수 있다.The interface unit 170 serves as a path for communication with all external devices connected to the mobile terminal 100. The interface unit 170 receives data from an external device or supplies power to each component in the mobile terminal 100 or transmits data to the external device. For example, a wired / wireless headset port, an external charger port, a wired / wireless data port, a memory card port, a port for connecting a device having an identification module, an audio I / O port, A video input / output (I / O) port, an earphone port, and the like may be included in the interface unit 170.

식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module, UIM), 가입자 인증 모듈(Subscriber Identify Module, SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module, USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 포트를 통하여 단말기(100)와 연결될 수 있다. The identification module is a chip for storing various information for authenticating the use right of the mobile terminal 100 and includes a user identification module (UIM), a subscriber identity module (SIM), a general user authentication module A Universal Subscriber Identity Module (USIM), and the like. Devices with identification modules (hereinafter referred to as "identification devices") can be manufactured in a smart card format. Accordingly, the identification device can be connected to the terminal 100 through the port.

인터페이스부(170)는 이동단말기(100)가 외부 크래들(cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동단말기로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동단말기가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.The interface unit 170 may be a path through which power from the cradle is supplied to the mobile terminal 100 when the mobile terminal 100 is connected to an external cradle, May be a pathway to the mobile terminal. The various command signals or the power source input from the cradle may be operated as a signal for recognizing that the mobile terminal is correctly mounted on the cradle.

제어부(180)는 통상적으로 이동 단말기의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 멀티미디어 모듈(181)은 제어부(180) 내에 구현될 수도 있고, 제어부(180)와 별도로 구현될 수도 있다.The control unit 180 typically controls the overall operation of the mobile terminal. For example, voice communication, data communication, video communication, and the like. The control unit 180 may include a multimedia module 181 for multimedia playback. The multimedia module 181 may be implemented in the control unit 180 or may be implemented separately from the control unit 180. [

상기 제어부(180)는 상기 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다. The controller 180 may perform a pattern recognition process for recognizing handwriting input or drawing input performed on the touch screen as characters and images, respectively.

전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다. 전원공급부(190)는 예를 들어 배터리, 연결포트, 전원공급제어부 및 충전모니터링부를 포함할 수 있다.The power supply unit 190 receives external power and internal power under the control of the controller 180 and supplies power necessary for operation of the respective components. The power supply unit 190 may include, for example, a battery, a connection port, a power supply control unit, and a charge monitoring unit.

배터리는 충전 가능하도록 이루어지는 내장형 배터리가 될 수 있으며, 충전 등을 위하여 단말기 바디에 착탈 가능하게 결합될 수 있다. 연결포트는 배터리의 충전을 위하여 전원을 공급하는 외부 충전기가 전기적으로 연결되는 인터페이스(170)의 일 예로서 구성될 수 있다.The battery may be an internal battery configured to be chargeable, and may be detachably coupled to the terminal body for charging or the like. The connection port may be configured as an example of an interface 170 through which an external charger for supplying power for charging the battery is electrically connected.

여기에 설명되는 다양한 실시예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.The various embodiments described herein may be embodied in a recording medium readable by a computer or similar device using, for example, software, hardware, or a combination thereof.

하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 실시예들이 제어부(180) 자체로 구현될 수 있다.According to a hardware implementation, the embodiments described herein may be implemented as application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays May be implemented using at least one of a processor, controllers, micro-controllers, microprocessors, and other electronic units for performing other functions. In some cases, The embodiments described may be implemented by the control unit 180 itself.

소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰인 소프트웨어 애플리케이션으로 소프트웨어 코드가 구현될 수 있다. 상기 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 해 실행될 수 있다.According to a software implementation, embodiments such as the procedures and functions described herein may be implemented with separate software modules. Each of the software modules may perform one or more of the functions and operations described herein. Software code may be implemented in a software application written in a suitable programming language. The software code may be stored in the memory 160 and executed by the control unit 180. [

도 3은 본 발명의 실시예에 따른 영상표시장치(200)의 구성도이다.3 is a configuration diagram of a video display device 200 according to an embodiment of the present invention.

도 3를 참고하면, 영상표시장치(200)는 영상/음성 처리부(201), 인터페이스부(250), 저장부(260), 디스플레이부(270), 음성출력부(275) 및 제어부(280)를 포함할 수 있다.3, the image display apparatus 200 includes an image / audio processing unit 201, an interface unit 250, a storage unit 260, a display unit 270, a sound output unit 275, . ≪ / RTI >

영상/음성 처리부(201)는 영상표시장치(200)의 디스플레이부(270) 및 음성출력부(275)로, 영상 또는 음성이 출력될 수 있도록 입력된 영상 신호 또는 음성 신호를 처리한다. 이를 위하여 영상/음성 처리부(201)는 신호입력부(210), 복조부(220), 신호처리부(240)를 포함할 수 있다. 또한, 신호입력부(210)는 튜너부(211), A/V 입력부(212), USB 입력부(213), 무선신호 입력부(214)를 포함할 수 있다.The video / audio processing unit 201 processes a video signal or a voice signal input to the display unit 270 and the audio output unit 275 of the video display device 200 so that video or audio can be output. To this end, the video / audio processing unit 201 may include a signal input unit 210, a demodulation unit 220, and a signal processing unit 240. The signal input unit 210 may include a tuner unit 211, an A / V input unit 212, a USB input unit 213, and a radio signal input unit 214.

튜너부(211)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널에 해당하는 RF 방송 신호를 선택하고, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음향 신호로 변환한다. 튜너부(211)에서 출력되는 아날로그 베이스 밴드 영상 또는 음향 신호(CVBS SIF)는 신호처리부(240)로 직접 입력될 수 있다.The tuner unit 211 selects an RF broadcast signal corresponding to a channel selected by a user from among RF (Radio Frequency) broadcast signals received through an antenna, converts the selected RF broadcast signal into an intermediate frequency signal, a baseband image, or an acoustic signal Conversion. The analog base band image or the sound signal CVBS SIF output from the tuner unit 211 may be directly input to the signal processing unit 240. [

복조부(220)는 튜너부(211)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. 복조부(220)는 복조를 수행한 후 스트림 신호(TS)를 출력한다. 그리고, 복조부(220)에서 출력된 스트림 신호는 신호 처리부(240)로 입력될 수 있다.The demodulation unit 220 receives the digital IF signal DIF converted by the tuner unit 211 and performs a demodulation operation. The demodulator 220 performs demodulation and outputs a stream signal TS. The stream signal output from the demodulation unit 220 may be input to the signal processing unit 240.

신호 처리부(240)는 역다중화 및 신호 처리 등을 수행한 후, 디스플레이부(270)에 영상을 출력하고, 음성 출력부(275)로 음성을 출력한다.The signal processing unit 240 performs demultiplexing, signal processing, and the like, and then outputs the video to the display unit 270 and the audio output unit 275.

또한, 신호입력부(210)는 외부 장치와 영상표시장치(200)를 연결할 수 있다. 신호입력부(210)는 DVD(Digital Versatile Disk), 블루레이(Blu-ray), 게임기기, 캠코더, 컴퓨터(노트북) 등과 같은 외부 장치와 연결되어 외부 입력 영상 신호, 외부 입력 음성 신호, 및 외부 입력 데이터 신호를 영상표시장치(200) 내의 신호처리부(240)로 전달한다. 또한, 영상표시장치(200) 내에서 처리된 영상 신호, 음성 신호, 및 데이터 신호를 다른 외부 장치로 출력할 수 있다.Also, the signal input unit 210 can connect an external device to the video display device 200. [ The signal input unit 210 is connected to an external device such as a DVD (Digital Versatile Disk), a Blu-ray, a game device, a camcorder, And transmits the data signal to the signal processing unit 240 in the image display apparatus 200. In addition, the video signal, audio signal, and data signal processed in the video display device 200 can be output to another external device.

신호입력부(210)의 A/V 입력부(112)는, 외부 장치의 영상 및 음성 신호를 영상표시장치(200)로 입력할 수 있도록, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자, IEEE 1394 단자, SPDIF 단자, 리퀴드(Liquid) HD 단자 등을 포함할 수 있다. CVBS 단자, 및 S-비디오 단자를 통해 입력되는 아날로그 신호는 디지털 신호로 변환되어 신호 처리부(240)로 입력될 수 있다. 그 외의 다른 입력단자를 통해 입력되는 디지털 신호는 아날로그/디지털 변환 과정 없이 신호 처리부(140)로 입력될 수 있다.The A / V input unit 112 of the signal input unit 210 includes a CVBS (Composite Video Banking Sync) terminal, a component terminal, and an S-Video A digital video interface (DVI) terminal, a high definition multimedia interface (HDMI) terminal, an RGB terminal, a D-SUB terminal, an IEEE 1394 terminal, a SPDIF terminal, and a liquid HD terminal. The CVBS terminal, and the S-video terminal may be converted into a digital signal and input to the signal processing unit 240. [ The digital signal input through other input terminals can be input to the signal processing unit 140 without performing the analog / digital conversion process.

USB 입력부(213)는, USB 단자를 통해 영상 및 음성 신호를 입력할 수 있다.The USB input unit 213 can input video and audio signals through the USB terminal.

무선신호 입력부(214)는, 영상표시장치(200)를 무선 네트워크망에 연결할 수 있다. 영상표시장치(200)는 무선신호 입력부(214)를 통해 무선 인터넷 접속될 수 있다. 그리고, 무선신호 입력부(214)는, 다른 전자기기와 근거리 무선 통신을 수행할 수 있다.The wireless signal input unit 214 may connect the video display device 200 to a wireless network. The video display device 200 can be connected to the wireless Internet through the wireless signal input unit 214. [ The wireless signal input unit 214 can perform short-range wireless communication with other electronic devices.

또한, 신호입력부(210)는 영상표시장치(200)와 셋탑 박스를 연결할 수 있다. 예를 들어, 셋탑 박스가 IP(internet Protocol) TV용 셋탑 박스인 경우, 양방향 통신이 가능하도록, IP TV용 셋탑 박스의 영상, 음성 또는 데이터 신호를 신호 처리부로 전달할 수 있으며, 신호처리부(240)에서 처리된 신호들을 IP TV용 셋탑 박스로 전달할 수 있다. 한편, 전술한 IPTV는, 인터넷 접속이 가능한 인터넷 TV, 풀브라우징 TV를 포함하는 의미일 수도 있다.Also, the signal input unit 210 may connect the video display device 200 and the set-top box. For example, when the set-top box is a set-top box for an IP (Internet Protocol) TV, the video, audio, or data signals of the set-top box for IP TV can be transmitted to the signal processor, To the IP TV set-top box. Meanwhile, the above-mentioned IPTV may mean an Internet TV capable of accessing the Internet, and a full browsing TV.

신호처리부(240)는 수신되는 스트림 신호, 예를 들어 MPEG-2 TS를 역다중화하여, 각각 영상 신호, 음향 신호 및 데이터 신호로 분리할 수 있다. 또한, 신호처리부(240)는, 역다중화된 영상 신호의 영상 처리를 수행할 수 있다. 예를 들어, 역다중화된 영상 신호가 부호화된 영상 신호인 경우, 이를 복호화할 수 있다. 구체적으로, 역다중화된 영상 신호가 MPEG-2 규격의 부호화된 영상 신호인 경우, MPEG-2 디코더에 의해 복호화될 수 있다.The signal processing unit 240 demultiplexes the received stream signal, for example, an MPEG-2 TS, into a video signal, an audio signal, and a data signal, respectively. Also, the signal processing unit 240 can perform image processing of the demultiplexed video signal. For example, if the demultiplexed video signal is a coded video signal, it can be decoded. Specifically, when the demultiplexed video signal is an MPEG-2 standard-coded video signal, it can be decoded by an MPEG-2 decoder.

신호처리부(240)에서 영상 처리된 영상신호는 디스플레이부(270)를 통해 디스플레이된다. 또한, 신호처리부(240)는 역다중화된 음성 신호의 음성 처리를 수행할 수 있다.The video signal processed by the signal processing unit 240 is displayed through the display unit 270. Also, the signal processing unit 240 can perform the voice processing of the demultiplexed voice signal.

또한, 신호처리부(240)는 OSD(On Screen Display) 처리를 수행할 수 있다. 구체적으로 신호 처리부(240)는, 영상 처리된 영상 신호와, 데이터 처리된 데이터 신호 중 적어도 하나 및 이동 단말기(100)를 통하여 입력되는 입력 신호에 기초하여, 디스플레이부(270)의 화면상에 각종 정보를 그래픽(Graphic)이나 텍스트(Text)로 출력할 수 있다.In addition, the signal processing unit 240 may perform an OSD (On Screen Display) process. Specifically, the signal processing unit 240 displays various types of data on the screen of the display unit 270 based on at least one of the image-processed video signal and the data-processed data signal and the input signal input through the mobile terminal 100 Information can be output as graphic or text.

저장부(260)는, 제어부(280) 내의 각 신호 처리 및 제어를 위한 애플리케이션이 저장될 수도 있고, 신호 처리된 영상 신호, 음성 신호 또는 데이터 신호를 저장할 수도 있다. 또한, 저장부(260)는 신호입력부(210)로 입력되는 영상, 음성 또는 데이터신호의 임시 저장을 위한 기능을 수행할 수도 있다.The storage unit 260 may store an application for each signal processing and control in the control unit 280 or may store a video signal, a voice signal, or a data signal subjected to signal processing. In addition, the storage unit 260 may perform a function for temporarily storing video, audio, or data signals input to the signal input unit 210.

저장부(260)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상표시장치(200)는, 저장부(160) 내에 저장되어 있는 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일 등)을 재생하여 사용자에게 제공할 수 있으며, 저장부(160) 내에 저장되어 있는 애플리케이션을 실행하여 사용자에게 제공할 수 있다.The storage unit 260 may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory) RAM, ROM (EEPROM, etc.), and the like. The video display apparatus 200 can reproduce files (moving picture files, still picture files, music files, document files, etc.) stored in the storage unit 160 and provide them to the user. It is possible to execute the application and provide it to the user.

제어부(280)는 영상표시장치(200) 내의 전술한 전반적인 동작을 제어한다. The control unit 280 controls the above-described overall operation in the image display apparatus 200. [

제어부(280)는 인터페이스부(250)를 통하여, 이동 단말기(100)로부터 이동 단말기(200)의 화면 정보를 수신한다. 제어부(280)는 입력받은 이동 단말기(100)의 화면 정보를 신호 처리하도록 신호처리부(240)를 제어하고, 신호 처리된 영상을 디스플레이부(270)에 출력할 수 있다.The control unit 280 receives screen information of the mobile terminal 200 from the mobile terminal 100 through the interface unit 250. The control unit 280 controls the signal processing unit 240 to process the screen information of the input mobile terminal 100 and outputs the processed signal to the display unit 270. [

또한, 제어부(280)는, 사용자 입력부(255)를 통하여, 사용자로부터 화면 제어를 위한 사용자 명령을 입력받는다. 제어부(280)는 입력된 사용자 명령에 따른 데이터를, 인터페이스부(250)를 통하여, 이동 단말기(100)에 전송할 수 있다.The control unit 280 also receives a user command for controlling the screen from the user through the user input unit 255. [ The control unit 280 can transmit data according to the inputted user command to the mobile terminal 100 through the interface unit 250. [

이하에서는, 전술한 이동 단말기(100)와 영상표시장치(200)의 화면을 서로 공유하기 위하여, 이동 단말기(100) 또는 영상표시장치(200)의 화면 정보를 타 디바이스에 전송하는 미러링(Mirroring) 시스템에 대하여 설명하도록 한다.Hereinafter, in order to share the screen of the mobile terminal 100 and the image display device 200, a mirroring process for transmitting screen information of the mobile terminal 100 or the image display device 200 to another device, The system will be described.

즉, 이동 단말기(100)와 영상표시장치(200)를 포함하는 미러링 시스템에서는 서로 연결된 영상표시장치(200)와 이동 단말기(100) 중 한 디바이스의 화면 정보를 다른 디바이스에 전송하여 출력함에 따라, 양 디바이스에서 사용자에게 동일한 화면을 제공할 수 있게 된다.That is, in the mirroring system including the mobile terminal 100 and the video display device 200, the screen information of one of the video display device 200 and the mobile terminal 100 connected to each other is transmitted to another device, Both devices can provide the same screen to the user.

본 명세서에서는, 이동 단말기(100)의 화면 정보를 영상표시장치(200)에 전송하는 것을 일례로 하여 설명하도록 한다.In this specification, transmission of screen information of the mobile terminal 100 to the video display device 200 will be described as an example.

미러링 시스템은 VNC(Virtual Networking Computing)를 이용하여, 이동 단말기(100)의 화면 정보를 영상표시장치(200)에 전송할 수 있다.The mirroring system can transmit screen information of the mobile terminal 100 to the video display device 200 using VNC (Virtual Networking Computing).

VNC(Virtual Networking Computing)는 원격에 존재하는 디바이스 간의 프레임 버퍼를 공유하는 RFB(Remote Frame Buffer) 프로토콜로서, 네트워크를 통해 클라이언트가 현재의 프레임 버퍼 내용을 요청하면, 서버는 프레임 버퍼를 Capture 후 클라이언트가 이해할 수 있는 그래픽 포맷으로 네트워크를 통해 전달하는 것이다. 이에 따라, 두 디바이스 간의 화면이 공유된다.VNC (Virtual Networking Computing) is an RFB (Remote Frame Buffer) protocol that shares a frame buffer between remote devices. When a client requests the contents of the current frame buffer through the network, And deliver it over the network in an understandable graphical format. Thus, the screen between the two devices is shared.

본 명세서에서는 VNC(Virtual Networking Computing)를 이용하여, 이동 단말기(100)의 화면 정보를 영상표시장치(200)에 전송하는 것을 VNC Service라 명명하여 설명하도록 한다.In this specification, transmission of screen information of the mobile terminal 100 to the video display device 200 using VNC (Virtual Networking Computing) will be described as a VNC service.

도 4는 본 발명의 실시예에 따른 VNC Service를 이용한 미러링 시스템을 예시한 도면이다.4 is a diagram illustrating a mirroring system using a VNC service according to an embodiment of the present invention.

이동 단말기(100)는 전술한 VNC Service을 담당하는 모듈인 VNC Server(300)와 전송된 화면을 사용자에게 출력하는 출력부(115)을 포함하여 구성되고, 영상표시장치(200)는 전술한 VNC Service을 담당하는 모듈인 VNC Client(400)와 전송된 화면을 사용자에게 출력하는 출력부(201)을 포함하여 구성된다.The mobile terminal 100 includes a VNC server 300 that is a module responsible for the VNC Service and an output unit 115 that outputs the transmitted screen to a user. The video display device 200 includes the VNC A VNC client 400, which is a module for service, and an output unit 201 for outputting the transmitted screen to a user.

본 발명의 VNC Server(300)와 VNC Client(400)는 각 디바이스의 제어부(180, 212)에 의해 구현될 수 있고, 독립된 Software Module 등으로 구현될 수 있다.The VNC server 300 and the VNC client 400 of the present invention may be implemented by the control units 180 and 212 of the respective devices and may be implemented by independent software modules or the like.

VNC Server(300)와 VNC Client(400)는 VNC(Virtual Networking Computing)를 이용하여, 이동 단말기(100) 또는 영상표시장치(200)의 화면 정보를 전송하는 VNC Service를 수행한다.The VNC server 300 and the VNC client 400 perform a VNC service for transmitting screen information of the mobile terminal 100 or the video display device 200 using VNC (Virtual Networking Computing).

전술한 바와 같이, VNC Service를 수행하기 위해, VNC Server(300)와 VNC Client(400)는 원격에 존재하는 디바이스 간의 프레임 버퍼를 공유하는 RFB(Remote Frame Buffer) 프로토콜을 이용하여, 일 디바이스의 화면 정보와 Display Control 정보를 타 디바이스에 전송한다. 여기서, 본 발명의 Display Control 정보로는 전송되는 화면과 관련된 정보, 각 디바이스의 프레임 버퍼의 정보 등이 포함될 수 있다.As described above, the VNC Server 300 and the VNC Client 400 use a Remote Frame Buffer (RFB) protocol that shares a frame buffer between devices located remotely in order to perform the VNC Service, Information and Display Control information to other devices. Here, the Display Control information of the present invention may include information related to a screen to be transmitted, information of a frame buffer of each device, and the like.

그리고, 본 발명의 미러링 시스템에서는 UPnP(Universal Plug and Play)를 이용하여, 이동 단말기(100)의 화면 정보를 영상표시장치(200)에 전송할 수 있다.In the mirroring system of the present invention, the screen information of the mobile terminal 100 can be transmitted to the video display device 200 using UPnP (Universal Plug and Play).

UPnP는 동일한 Subnet에 있는 디바이스 간의 연결을 설정해주는 기술로, 디바이스를 로컬 네트워크에 추가하는 경우, UPnP를 지원하는 다른 디바이스와 자동 연결 및 연동시켜준다. UPnP의 주요기능으로는, 로컬 네트워크상에서 특정 리소스를 자동으로 찾는 Device Advertisement, 원격으로 특정 디바이스의 특정 기능을 실행시키거나 정보를 요청하는 Service Action Invocation, 디바이스 간의 이벤트를 교환하는 Data Subscription 기능들이 있다.UPnP is a technology that establishes connection between devices in the same subnet. When a device is added to the local network, it automatically connects to other devices supporting UPnP. Main functions of UPnP include Device Advertisement that automatically finds a specific resource on a local network, Service Action Invocation that remotely executes specific functions of a specific device or request information, and Data Subscription functions that exchange events between devices.

본 명세서에서는 UPnP(Universal Plug and Play)를 이용하여, 이동 단말기(100)의 화면 정보를 영상표시장치(200)에 전송하는 것을 UPnP Service라 명명하여 설명하도록 한다.In this specification, transmission of the screen information of the mobile terminal 100 to the video display device 200 using Universal Plug and Play (UPnP) will be described as UPnP Service.

도 5는 본 발명의 실시예에 따른 UPnP Service를 이용한 미러링 시스템을 예시한 도면이다.5 is a diagram illustrating a mirroring system using a UPnP service according to an embodiment of the present invention.

도면에서는, 영상표시장치(200)와 이동 단말기(100)가 UPnP(Universal Plug and Play)로 연결된 경우를 일례로 설명한다.In the drawing, a case where the video display apparatus 200 and the mobile terminal 100 are connected by UPnP (Universal Plug and Play) will be described as an example.

이동 단말기(100)는 전술한 UPnP Service을 담당하는 모듈인 UPnP Server(301)와 전송된 화면을 사용자에게 출력하는 출력부(151)을 포함하여 구성되고, 차량에 부착된 영상표시장치(200)는 전술한 UPnP Service을 담당하는 모듈인 UPnP Client(401)와 전송된 화면을 사용자에게 출력하는 출력부(201)을 포함하여 구성된다.The mobile terminal 100 includes a UPnP server 301, which is a module responsible for the UPnP service, and an output unit 151 that outputs the transmitted screen to a user. The mobile terminal 100 includes a video display device 200 attached to a vehicle, Includes a UPnP client 401, which is a module responsible for the UPnP service, and an output unit 201, which outputs the transmitted screen to a user.

본 발명의 UPnP Server(301)와 UPnP Client(401)는 각 디바이스의 제어부(180, 212)에 의해 구현될 수 있고, 독립된 Software Module 등으로 구현될 수 있다.The UPnP server 301 and the UPnP client 401 of the present invention may be implemented by the control units 180 and 212 of the respective devices and may be implemented by independent software modules or the like.

UPnP Server(301)와 UPnP Client(401)는 UPnP(Universal Plug and Play)를 이용하여, 이동 단말기(100)의 화면 정보를 영상표시장치(200)에 전송하는 UPnP Service를 수행한다. 즉, UPnP Client(401)는 이동 단말기(100)의 화면 정보를 UPnP Server(301)에 전송할 수 있다.The UPnP Server 301 and the UPnP Client 401 perform a UPnP Service for transmitting screen information of the mobile terminal 100 to the video display device 200 using Universal Plug and Play (UPnP). That is, the UPnP Client 401 can transmit screen information of the mobile terminal 100 to the UPnP Server 301. [

이하에서는, 이동 단말기(100)에 실행 중인 애플리케이션에 발생한 이벤트를 영상표시장치(200)에 출력하고, 해당 이벤트를 영상표시장치(200)에서 처리할 수 있도록 구성된 Notification Service에 대하여 설명하도록 한다.Hereinafter, a Notification Service configured to output an event occurring in an application running on the mobile terminal 100 to the image display apparatus 200 and configured to process the event in the image display apparatus 200 will be described.

즉, 서로 연결된 영상표시장치(200)와 이동 단말기(100) 중 한 디바이스에서 애플리케이션의 이벤트가 발생하면, 사용자는 발생된 이벤트에 대한 Notification을, 다른 디바이스에서 제공받고, 해당 이벤트에 대한 사용자 명령을 입력할 수 있도록 한다.That is, when an application event occurs in one of the video display device 200 and the mobile terminal 100 connected to each other, the user receives notification about the generated event from another device, and receives a user command for the event So that it can be input.

일례로, 이동 단말기(100)에 전화 애플리케이션이 실행 중이고, 전화 애플리케이션에 "전화 수신" 이벤트가 발생한 경우, "전화 수신"의 Notification을 이동 단말기(100)와 연결된 영상표시장치(200)에 표시하고, 영상표시장치(200)에서 "전화 수신"에 대한 "전화 받기", "전화 거절하기" 등의 사용자 명령을 입력받도록 하는 것이다.For example, when a telephone application is running on the mobile terminal 100 and a "telephone reception" event occurs in the telephone application, a notification of "telephone reception" is displayed on the video display device 200 connected to the mobile terminal 100 , And receives user commands such as "call reception" and "call rejection" for "call reception"

그리고, 영상표시장치(200)와 이동 단말기(100)는 Notification Service을 담당하는 모듈인 Notification Service Sink(600)와 Notification Service Source(500)을 각각 포함하여 구성된다.The video display apparatus 200 and the mobile terminal 100 are configured to include a Notification Service Sink 600 and a Notification Service Source 500, respectively, which are modules for performing Notification Service.

도 6은 본 발명의 제 1 실시예에 따른 Notification Service를 예시한 도면이다.6 is a diagram illustrating Notification Service according to the first embodiment of the present invention.

본 발명의 제 1 실시예에 따른 Notification Service에서는, 우선 이벤트가 발생한 애플리케이션은 해당 이벤트의 Notification을 Notification Service Source(500)에 전송한다.In the Notification Service according to the first embodiment of the present invention, an application in which an event occurs first transmits a Notification of the event to the Notification Service Source 500.

그리고, Notification Service Source(500)는 전송받은 해당 이벤트의 Notification을 Notification Service Sink(600)에 전송한다. Notification에는 애플리케이션의 종류, 발생한 이벤트의 종류, Notification의 내용 등의 정보를 포함하게 된다.Then, the Notification Service Source 500 transmits the Notification of the received event to the Notification Service Sink 600. The notification includes information such as the type of the application, the type of event that occurred, and the content of the notification.

Notification Service Sink(600)는 이동 단말기(100)의 화면을 영상표시장치(200)에 출력하는 기능을 수행한다.The Notification Service Sink 600 performs a function of outputting a screen of the mobile terminal 100 to the video display device 200.

본 발명의 제 1 실시예에서는, 전술한 VNC(Virtual Networking Computing) Service 또는 UPnP(Universal Plug and Play) Service를 이용하여, 이동 단말기(100)의 화면을 영상표시장치(200)에 출력하는 것을 일례로 하여 설명하도록 한다.In the first embodiment of the present invention, outputting the screen of the mobile terminal 100 to the video display device 200 using the above-described VNC (Virtual Networking Computing) Service or UPnP (Universal Plug and Play) .

전술한 바와 같이, VNC(Virtual Networking Computing)는 원격에 존재하는 디바이스 간의 프레임 버퍼를 공유하는 RFB(Remote Frame Buffer) 프로토콜로서, 네트워크를 통해 클라이언트가 현재의 프레임 버퍼 내용을 요청하면, 서버는 프레임 버퍼를 Capture 후 클라이언트가 이해할 수 있는 그래픽 포맷으로 네트워크를 통해 전달하는 것이다. 이에 따라, 두 디바이스 간의 화면이 공유된다.As described above, VNC (Virtual Networking Computing) is an RFB (Remote Frame Buffer) protocol that shares a frame buffer between devices existing at remote locations. When a client requests the contents of the current frame buffer through a network, Is captured and then delivered over the network in a graphical format that the client can understand. Thus, the screen between the two devices is shared.

UPnP는 동일한 Subnet에 있는 디바이스들 간의 연결을 설정해주는 기술로, UPnP로 연결된 디바이스들 간의 데이터를 상호 송수신할 수 있다. 따라서, 디바이들 간의 화면 정보를 공유할 수 있다.UPnP is a technology for establishing a connection between devices in the same subnet, and can exchange data between UPnP connected devices. Therefore, screen information between the divisions can be shared.

따라서, Notification Service Sink(600)는, 이동 단말기(100)에 포함된 VNC Server(300) 또는 UPnP Server(301)와, 영상표시장치(200)에 포함된 VNC Client(400) 또는 UPnP Client(401)를 구동시켜, VNC/UPnP Stream 전송을 통해, 이동 단말기(100)의 화면을 영상표시장치(200)에 출력하도록 한다.Accordingly, the Notification Service Sink 600 can be connected to the VNC Server 300 or the UPnP Server 301 included in the mobile terminal 100, the VNC Client 400 or the UPnP Client 401 included in the video display device 200 And outputs the screen of the mobile terminal 100 to the video display device 200 through the VNC / UPnP stream transmission.

즉, VNC Service 또는 UPnP Service를 통해, 애플리케이션의 이벤트에 따라 출력된 이동 단말기(100)의 화면을 그대로 영상표시장치(200)에 출력하는 것이다.That is, the VNC service or the UPnP service outputs the screen of the mobile terminal 100 output to the video display device 200 as it is according to the event of the application.

마지막으로, 사용자가 이동 단말기(100)에 직접 사용자 명령을 입력하면, 사용자 명령에 따라 처리된 화면이 이동 단말기(100)에 출력된다. 이때, 사용자 명령에 따른 이벤트 처리된 이동 단말기(100)의 화면은, VNC Server(300)와 VNC Client(400)의 VNC Stream 또는 UPnP Server(301)와 UPnP Client(401)의 UPnP Stream 통하여, 영상표시장치(200)에 출력하게 된다.Finally, when the user inputs a user command directly to the mobile terminal 100, a screen processed according to the user command is output to the mobile terminal 100. At this time, the screen of the mobile terminal 100 processed by the user command according to the user command is displayed on the VNC server 300 and the VNC stream of the VNC client 400 or through the UPnP Stream of the UPnP Client 401 and the UPnP Server 301, And outputs it to the display device 200.

도 7은 본 발명의 제 2 실시예에 따른 Notification Service를 예시한 도면이다.7 is a diagram illustrating Notification Service according to a second embodiment of the present invention.

본 발명의 제 2 실시예에 따른 Notification Service에서는, 우선 이벤트가 발생한 애플리케이션은 해당 이벤트의 Notification을 Notification Service Source(500)에 전송한다.In the Notification Service according to the second embodiment of the present invention, an application in which an event occurs first transmits a Notification of the event to the Notification Service Source 500.

그리고, Notification Service Source(500)는 전송받은 해당 이벤트의 Notification을 Notification Service Sink(600)에 전송한다. 전술한 바와 같이, Notification에는 애플리케이션의 종류, 발생한 이벤트의 종류, Notification의 내용 등의 정보를 포함하게 된다.Then, the Notification Service Source 500 transmits the Notification of the received event to the Notification Service Sink 600. As described above, the Notification includes information such as the type of the application, the kind of the generated event, and the content of the notification.

Notification Service Sink(600)는 발생한 이벤트에 대한 화면을 영상표시장치(200)에 출력하는 기능을 수행한다.The Notification Service Sink 600 outputs a screen for the generated event to the video display device 200.

본 발명의 제 2 실시예에서는 Notification Service Sink(600)에서 해당 이벤트에 대한 Notification UI(User Interface)(10)를 생성하고, 생성된 Notification UI(10)를 영상표시장치(200)에 출력한다.In the second embodiment of the present invention, a Notification UI (User Interface) 10 for a corresponding event is generated in the Notification Service Sink 600, and the generated Notification UI 10 is output to the video display device 200.

일례로, "전화 수신" 이벤트에 대한 Notification을 전송받은 경우, Notification Service Sink(600)는 "전화 수신"에 해당하는 Notification UI(10)를 생성하고, 생성된 Notification UI(10)를 영상표시장치(200)에 출력한다.For example, when the Notification Service Sink 600 receives the Notification for the "Call Received" event, the Notification Service Sink 600 generates the Notification UI 10 corresponding to " (200).

"전화 수신"에 해당하는 Notification UI(10)로는, "전화 수신"에 대한 알림 표시, 발신자 정보, 사용자 명령을 위한 메뉴 버튼 등이 포함될 수 있다. 그리고, 사용자 명령을 위한 메뉴 버튼은 "전화 받기”버튼, "전화 거절하기" 버튼 등을 포함하여 구성될 수 있다.Notification UI 10 corresponding to "call reception" may include notification display for "call reception", caller information, menu buttons for user command, and the like. The menu button for the user command may be configured to include a "receive call " button, a" reject call "button, and the like.

사용자는 영상표시장치(200)에 출력된 Notification UI(10)를 통해 사용자 명령을 입력할 수 있다. Notification Service Sink(600)는 Notification UI(10)를 통해 입력된 사용자 명령, 즉 애플리케이션 이벤트의 처리 명령을 Notification Service Server(201)에 전송한다.The user can input a user command through the Notification UI 10 output to the video display device 200. [ The Notification Service Sink 600 transmits to the Notification Service Server 201 a user command inputted through the Notification UI 10, that is, a processing command of an application event.

마지막으로, Notification Service Server(201)는 전송받은 사용자 명령을 해당 애플리케이션에 입력하여 해당 이벤트를 처리하도록 한다.Finally, the Notification Service Server 201 inputs the received user command to the corresponding application and processes the corresponding event.

이하에서는, 이동 단말기(100)에 실행 중인 특정 애플리케이션에 발생한 이벤트를 영상표시장치(200)에 출력하고, 해당 이벤트를 영상표시장치(200)에서 처리할 수 있도록 구성된 Notification Service를 위한 Notification UI(10)에 대하여 설명하도록 한다.Hereinafter, a Notification UI 10 for a Notification Service configured to output an event generated in a specific application running on the mobile terminal 100 to the video display device 200 and to process the event in the video display device 200 Will be described.

도 8 내지 도 10은 본 발명의 실시예에 따른 Notification Service의 초기 설정을 위한 Notification UI(10)를 도시한 도면이다.8 to 10 are diagrams illustrating Notification UI 10 for initial setting of Notification Service according to an embodiment of the present invention.

우선, 도 8에 도시된 Notification UI(10)는, 이동 단말기(100)에 설치된 애플리케이션 중에서 Notification Service를 지원하는 애플리케이션들의 리스트 UI(11)를 포함한다.First, the Notification UI 10 shown in FIG. 8 includes a list UI 11 of applications that support the Notification Service among the applications installed in the mobile terminal 100.

즉, 애플리케이션 리스트 UI(11)에는, 이동 단말기(100)에 설치된 애플리케이션 중에서, 영상표시장치(200)에 이벤트 발생을 알리고, 해당 이벤트를 영상표시장치(200)에 출력할 수 있도록 구성된 애플리케이션들이 표시된다.That is, in the application list UI 11, applications configured to notify the occurrence of an event to the video display device 200 and output the corresponding event to the video display device 200 among the applications installed in the mobile terminal 100 are displayed do.

도면과 같이, 애플리케이션 리스트 UI(11)에는, Notification Service를 지원하는 애플리케이션들의 아이콘(Icon)이 표시될 수 있다. 도면에서는, "내비게이션", "동영상", "음악", "시계" 애플리케이션의 아이콘이 표시됨을 볼 수 있다. 이는, 해당 애플리케이션은, 영상표시장치(200)에 연결된 이동 단말기(100)에 설치된 애플리케이션 중에서, Notification Service를 지원하는 애플리케이션들이다.As shown in the figure, an icon (Icon) of applications supporting Notification Service can be displayed in the application list UI 11. In the drawing, icons of "navigation", "video", "music" and "clock" applications are displayed. This application is one that supports the Notification Service among the applications installed in the mobile terminal 100 connected to the video display device 200. [

관련하여, 애플리케이션 리스트 UI(11)에는 Notification Service를 지원하는 모든 애플리케이션들이 표시될 수 있고, Notification Service를 지원하는 애플리케이션들 중에서, 즐겨찾기(Favorite)로 설정된 애플리케이션들만이 표시될 수 있다.In this regard, all the applications supporting the Notification Service can be displayed in the application list UI 11, and only the applications set as favorites among the applications supporting the Notification Service can be displayed.

그리고, 애플리케이션 리스트 UI(11)는, Notification Service를 지원하는 애플리케이션들의 Notification 표시 여부를 설정할 수 있는 "Setting" 메뉴를 포함한다. 이에 대하여는, 후술하도록 한다.The application list UI 11 includes a "Setting" menu for setting whether to display notifications of applications supporting Notification Service. This will be described later.

도 9에 도시된 Notification UI(10)는 Notification Service를 지원하는 애플리케이션들의 Notification 표시 여부를 설정하도록 구성된 UI로, 애플리케이션 리스트 UI(12), 즐겨찾기(Favorite) 설정 UI(13), Notification Service 설정 UI(14)를 포함한다.The Notification UI 10 shown in FIG. 9 is a UI configured to set whether notifications of applications that support the Notification Service are displayed or not. The Notification UI 10 includes an application list UI 12, a favorite setting UI 13, (14).

도 9에 도시된 Notification UI(10)는, 도 8에서 전술한 애플리케이션 리스트 UI(11)에서 사용자가 "Setting" 메뉴를 선택하면, 표시될 수 있다.The Notification UI 10 shown in Fig. 9 can be displayed when the user selects the "Setting" menu in the application list UI 11 described above in Fig.

애플리케이션 리스트 UI(12)에는, 영상표시장치(200)와 데이터 통신하도록 연결된 이동 단말기(100)에 설치된 애플리케이션 중에서, Notification Service를 지원하는 모든 애플리케이션들의 리스트가 표시될 수 있다. 도면과 같이, 애플리케이션들 리스트 UI(12)에는 해당 애플리케이션의 이름과 아이콘이 표시될 수 있다.The application list UI 12 may display a list of all applications supporting the Notification Service among the applications installed in the mobile terminal 100 connected to the video display device 200 for data communication. As shown in the figure, a name and an icon of the application can be displayed in the applications list UI 12. [

즐겨찾기(Favorite) 설정 UI(13)는, 애플리케이션 리스트 UI(12)에 표시된 애플리케이션들의 즐겨찾기(Favorite)를 설정할 수 있도록 구성된다. 도면과 같이, 즐겨찾기(Favorite) 설정 UI(13)는, 즐겨찾기(Favorite) 설정 여부를 선택할 수 있도록, "On", "Off" 메뉴로 표시될 수 있다. 즉, 사용자는 즐겨찾기(Favorite) 설정 UI(13)에 표시된 "On", "Off" 메뉴를 선택하여, 해당 애플리케이션의 즐겨찾기(Favorite)를 설정할 수 있다.The favorite setting UI 13 is configured to set a favorite of the applications displayed in the application list UI 12. [ As shown in the drawing, the favorite setting UI 13 can be displayed in the "On" and "Off" menus so that a favorite setting can be selected. That is, the user can set a favorite of the application by selecting the menu "On" and "Off" displayed on the favorite setting UI 13.

Notification Service 설정 UI(14)에는, 애플리케이션 리스트 UI(12)에 표시된 애플리케이션들의 Notification 표시 여부를 설정할 수 있도록 구성된다. 즉, 해당 애플리케이션의 이벤트가 발생한 경우, 발생된 이벤트를 Notification UI(10)를 통해, 사용자에게 알려줄지 여부를 설정하는 것이다.The Notification Service setting UI 14 is configured to set whether to display Notification of the applications displayed in the application list UI 12. That is, it sets whether to notify the user through the Notification UI 10 when the event of the application is generated.

도면과 같이, Notification Service 설정 UI(14)는, Notification 표시 설정 여부를 선택할 수 있도록, "On", "Off" 메뉴로 표시될 수 있다. 즉, 사용자는 Notification Service 설정 UI(14)에 표시된 "On", "Off" 메뉴를 선택하여, 해당 애플리케이션의 Notification 표시 여부를 설정할 수 있다.As shown in the figure, the Notification Service setting UI 14 can be displayed by the "On" and "Off" menus so that the user can select whether the Notification display is set or not. That is, the user can select the "On" or "Off" menu displayed in the Notification Service setting UI 14 to set whether to display the notification of the application.

도 10에 도시된 Notification UI(10)는 Notification Service를 지원하는 애플리케이션들의 Notification 표시 여부를 설정하도록 구성된 UI로, 애플리케이션 리스트 UI(15), Notification Service 설정 UI(16)를 포함한다.The Notification UI 10 shown in FIG. 10 is a UI configured to set whether notifications of applications supporting Notification Service are displayed or not. The Notification UI 10 includes an application list UI 15 and a Notification Service setting UI 16.

도 10에 도시된 Notification UI(10)도, 도 8에서 전술한 애플리케이션 리스트 UI(11)에서 사용자가 "Setting" 메뉴를 선택하면, 표시될 수 있다.The Notification UI 10 shown in Fig. 10 can also be displayed when the user selects the "Setting" menu in the application list UI 11 described above with reference to Fig.

애플리케이션 리스트 UI(15)에는, 영상표시장치(200)와 데이터 통신하도록 연결된 이동 단말기(100)에 설치된 애플리케이션 중에서, Notification Service를 지원하는 모든 애플리케이션들의 리스트가 표시될 수 있다. 도면과 같이, 애플리케이션들 리스트 UI(12)에는 해당 애플리케이션의 이름과 아이콘이 표시될 수 있다.A list of all applications supporting Notification Service may be displayed in the application list UI 15 among the applications installed in the mobile terminal 100 connected to the video display device 200 in data communication. As shown in the figure, a name and an icon of the application can be displayed in the applications list UI 12. [

Notification Service 설정 UI(16)에는, 애플리케이션 리스트 UI(12)에 표시된 애플리케이션들의 Notification 표시 여부를 설정할 수 있도록 구성된다. 즉, 해당 애플리케이션의 이벤트가 발생한 경우, 발생된 이벤트를 Notification UI(10)를 통해, 사용자에게 알려줄지 여부를 설정하는 것이다.The Notification Service setting UI 16 is configured to set whether the Notifications of the applications displayed in the application list UI 12 are displayed or not. That is, it sets whether to notify the user through the Notification UI 10 when the event of the application is generated.

도면과 같이, Notification Service 설정 UI(16)는, Notification 표시 설정 여부를 선택할 수 있도록, 각 애플리케이션의 아이콘에 체크 박스로 표시될 수 있다. 즉, 사용자는 Notification Service 설정 UI(14)에 표시된 체크 박스를 선택하여, 해당 애플리케이션의 Notification 표시 여부를 설정할 수 있다.As shown in the drawing, the Notification Service setting UI 16 can be displayed as a check box in the icon of each application so that the user can select whether or not to set the Notification display setting. That is, the user can select the check box displayed in the Notification Service setting UI 14 to set whether or not to display the notification of the application.

도 11 내지 도 13은 본 발명의 제 3 실시예에 따른 Notification Service의 Notification UI(10)를 예시한 도면이다.11 to 13 are views illustrating the Notification UI 10 of the Notification Service according to the third embodiment of the present invention.

전술한 바와 같이, 이동 단말기(100)에서 실행중인 애플리케이션의 이벤트가 발생한 경우, Notification Service Source(500)는 해당 이벤트의 Notification을 Notification Service Sink(600)에 전송한다. Notification에는 애플리케이션의 종류, 발생한 이벤트의 종류, Notification의 내용 등의 정보를 포함하게 되며, Notification Service Sink(600)는 발생한 이벤트에 대한 화면을 영상표시장치(200)에 출력하는 기능을 수행한다.As described above, when an event of an application executing in the mobile terminal 100 occurs, the Notification Service Source 500 transmits the notification of the event to the Notification Service Sink 600. [ The notification includes information such as the type of the application, the type of the event that has occurred, and the content of the notification. The Notification Service Sink 600 performs a function of outputting a screen for the generated event to the video display device 200.

그리고, Notification Service Sink(600)에서 해당 이벤트에 대한 Notification UI(User Interface)(10)를 생성하고, 생성된 Notification UI(10)를 영상표시장치(200)에 출력한다.The Notification Service Sink 600 generates a Notification UI (User Interface) 10 for the event and outputs the generated Notification UI 10 to the image display device 200.

도 11에 도시된 Notification UI(10)는, 애플리케이션들의 이벤트가 발생한 경우, 해당 이벤트의 발생을 사용자에게 알리도록 구성된 Notification 알림 UI(17)를 포함한다.The Notification UI 10 shown in FIG. 11 includes a notification notification UI 17 configured to notify a user of occurrence of a corresponding event when an event of an application occurs.

도면과 같이, Notification 알림 UI(17)에는 새로운 이벤트의 발생을 알리는 문구가 팝업(Pop-Up) 창으로 표시될 수 있다.As shown in the figure, the notification notification UI 17 may display a phrase indicating the occurrence of a new event as a pop-up window.

본 명세서에서는, "문자 수신" 이벤트에 대한 Notification을 전송받은 경우를 일례로 설명하도록 한다. 이 경우, Notification Service Sink(600)는 "문자 수신"의 새로운 이벤트가 발생하였다는 Notification 알림 UI(17)를 생성하고, 생성된 Notification 알림 UI(17)를 영상표시장치(200)에 출력한다.In the present specification, a case in which a Notification for a "character receiving" event is received will be described as an example. In this case, the Notification Service Sink 600 generates a notification notification UI 17 indicating that a new event of "character reception" has occurred, and outputs the generated notification notification UI 17 to the image display apparatus 200.

도면과 같이, Notification 알림 UI(17)에는, 해당 이벤트를 확인할지 여부를 선택할 수 있는 "OK"와 "Cancel" 메뉴를 표시된다. 즉, 사용자는 Notification 알림 UI(17)에 표시된 "OK" 메뉴를 선택하여, 해당 이벤트의 Notification을 출력하도록 할 수 있으며, "Cancel" 메뉴를 선택하여, 해당 이벤트의 Notification을 삭제할 수 있다.As shown in the drawing, the Notification notification UI 17 displays "OK" and "Cancel" menus for selecting whether or not to check the event. That is, the user can select the "OK" menu displayed in the notification notification UI 17 to output the notification of the event, and select the "Cancel" menu to delete the notification of the event.

도 12와 도 13에 도시된 Notification UI(10)는, "문자 수신" 이벤트에 대한 Notification 내용을 출력하는 UI로, 본 발명은 다양한 방법으로 Notification 내용을 출력할 수 있다The Notification UI 10 shown in Figs. 12 and 13 is a UI for outputting notification contents for a "character receiving" event, and the present invention can output Notification contents in various ways

도 12에 도시된 Notification UI(18)는, Notification Service Sink(600)가 해당 이벤트의 내용을 표시할 수 있는 Notification UI(18)를 생성하여, 표시하는 것이다.The Notification UI 18 shown in FIG. 12 generates and displays a Notification UI 18 in which the Notification Service Sink 600 can display the contents of the event.

도면과 같이, "문자 수신" 이벤트에 해당하는 Notification UI(18)로는, 문자 내용 발신자 정보, 사용자 명령을 위한 메뉴 버튼 등이 포함될 수 있다. 그리고, 사용자 명령을 위한 메뉴 버튼은 "View", "Reply", "Delete", "Close" 등을 포함하여 구성될 수 있다. 또한, 사용자가 "View"를 메뉴 버튼을 선택하면, 도 13에 도시된 Notification UI(19)가 출력될 수 있다.As shown in the figure, the Notification UI 18 corresponding to the "character receiving" event may include character content sender information, a menu button for a user command, and the like. The menu button for the user command may be composed of "View", "Reply", "Delete", "Close", and the like. When the user selects the "View" menu button, the Notification UI 19 shown in FIG. 13 can be output.

도 13에 도시된 Notification UI(19)에서는, 이동 단말기(100)의 화면을 그대로 전송할 수 있다. 즉, 전술한 미러링 서비스를 이용하여, 이동 단말기(100)의 화면을 그대로 사용자에게 출력하는 것이다. 미러링 서비스를 이용한, 이동 단말기(100)의 화면 출력은 VNC 또는 UPnP Service를 이용하여 제공할 수 있음을 전술하였다. 따라서, 도 13에 도시된 Notification UI(19)에는 문자가 수신된 이동 단말기(100)의 화면이 출력되는 것이다.In the Notification UI 19 shown in Fig. 13, the screen of the mobile terminal 100 can be transmitted as it is. That is, the screen of the mobile terminal 100 is directly output to the user using the above-described mirroring service. It has been described that the screen output of the mobile terminal 100 using the mirroring service can be provided using VNC or UPnP service. Therefore, the screen of the mobile terminal 100 on which the character is received is output in the Notification UI 19 shown in Fig.

관련하여, 미러링 서비스를 이용하여, 이동 단말기(100)의 화면을 출력하는 경우, 영상표시장치(200)는 오디오 재생을 중지시킬 수 있다.The video display apparatus 200 can stop audio reproduction when outputting a screen of the mobile terminal 100 using the mirroring service.

도 14 내지 도 18은 본 발명의 제 4 실시예에 따른 Notification Service의 Notification UI(10)를 예시한 도면이다.FIG. 14 to FIG. 18 are views illustrating the Notification UI 10 of the Notification Service according to the fourth embodiment of the present invention.

도 14에 도시된 Notification UI(10)는, 애플리케이션들의 이벤트가 발생한 경우, 해당 이벤트의 발생을 사용자에게 알리도록 구성된 Notification 알림 UI(20)를 포함한다.The Notification UI 10 shown in FIG. 14 includes a notification notification UI 20 configured to notify a user of occurrence of a corresponding event when an event of an application occurs.

본 명세서에서는, "이메일 수신" 이벤트에 대한 Notification을 전송받은 경우를 일례로 설명하도록 한다. 이 경우, Notification Service Sink(600)는 "이메일 수신"의 새로운 이벤트가 발생하였다는 Notification 알림 UI(20)를 생성하고, 생성된 Notification 알림 UI(20)를 영상표시장치(200)에 출력한다.In the present specification, a case where Notification is received for the "e-mail reception" event will be described as an example. In this case, the Notification Service Sink 600 generates a notification notification UI 20 indicating that a new event of "E-mail reception " has occurred, and outputs the generated notification notification UI 20 to the image display apparatus 200.

도면과 같이, Notification 알림 UI(20)는, 새로운 이벤트의 발생을 알리는 표시를 기존 영상표시장치(200)의 화면(21) 상단부에 표시될 수 있다. 그리고, Notification 알림 UI(20)에는 사용자가 확인하지 않은 Notification의 개수를 같이 표시될 수 있다.As shown in the drawing, the Notification notification UI 20 can be displayed on the upper part of the screen 21 of the existing video display device 200 to notify the occurrence of a new event. In addition, the number of notifications not confirmed by the user can be displayed in the Notification notification UI 20 together.

그리고, 사용자는 Notification 알림 UI(20)를 선택하여, 현재까지 발생한 Notification의 리스트를 출력하도록 할 수 있다.Then, the user can select the Notification Notification UI 20 and output a list of notifications that have occurred so far.

도 15 내지 17에 도시된 Notification UI(10)는, 현재까지 발생한 Notification의 리스트가 표시되는 Notification 리스트 UI(22)를 포함한다.The Notification UI 10 shown in FIGS. 15 to 17 includes a Notification List UI 22 displaying a list of Notifications that have occurred so far.

도 15에 도시된 Notification 리스트 UI(22)는 Notification 리스트(22a)와 삭제 버트(22b)를 포함할 수 있다.The Notification List UI 22 shown in FIG. 15 may include a Notification List 22a and a Delete Butt 22b.

Notification 리스트(22a)에는, Notification이 발생한 애플리케이션의 이름과 아이콘, Notification이 발생한 시간 정보 등이 표시될 수 있다. 삭제 버튼(22b)은 사용자가 해당 Notification을 삭제할 수 있는 기능을 제공한다.In the notification list 22a, the name and icon of the application in which the notification occurs, information on the time when the notification occurred, and the like may be displayed. The delete button 22b provides a function for the user to delete the corresponding notification.

따라서, 사용자는 Notification 리스트(22a)를 선택하여 해당 이벤트의 Notification을 출력하도록 할 수 있으며, 삭제 버튼(22b)을 선택하여 해당 이벤트의 Notification을 삭제할 수 있다.Accordingly, the user can select the Notification list 22a to output the notification of the event, and can delete the notification of the event by selecting the delete button 22b.

또한, Notification 리스트(22a)에는 Notification이 Notification의 발생된 시간 순서대로 정렬되어, 표시될 수 있다.In addition, in the Notification list 22a, the Notifications can be displayed in the order in which the Notifications are generated in order.

도 16와 도 17에 도시된 Notification 리스트 UI(22)에는, 사용자가 Notification 리스트를 정렬할 수 있도록 구성된 네비게이션(25,26)이 포함될 수 있다.The Notification List UI 22 shown in Figs. 16 and 17 may include navigations 25 and 26 configured so that the user can arrange the Notification List.

도 16의 Notification 리스트 UI(22)에는, 네비게이션(25)이 좌우 버튼으로 구성된다. 그리고, 사용자가 네비게이션(25) 버튼를 이용하여 정렬 기준을 선택하면, Notification들이 선택한 시간 기준으로 정렬되어 표시된다.In the notification list UI (22) of Fig. 16, the navigation 25 is composed of right and left buttons. Then, when the user selects an alignment reference using the navigation button 25, the notifications are sorted and displayed based on the selected time.

도면과 같이, 사용자가 버튼을 이용하여 "Older"를 선택하면, Notification 리스트 UI(22)에는 Notification들이 이벤트 발생이 오래된 시간 순서대로 정렬되어 표시된다. 사용자가 버튼을 이용하여 "Today"을 선택하면, Notification 리스트 UI(22)에는 오늘 발생된 Notification들이 표시된다. 사용자가 버튼을 이용하여 "Latest"를 선택하면, Notification 리스트 UI(22)에는 Notification들이 이벤트 발생이 빠른 시간 순서대로 정렬되어 표시된다.As shown in the figure, when the user selects "Older" using the button, notifications are displayed in the Notification list UI 22 in the order of oldest time. When the user selects "Today" using the button, the Notification list UI 22 displays notifications generated today. When the user selects "Latest" using the button, notifications are displayed in the Notification list UI 22 in the order of the earliest time of event occurrence.

도 17의 Notification 리스트 UI(22)에는, 네비게이션(26)이 탭(Tab) 형태로 구성된다. 그리고, 사용자가 네비게이션(26) 탭을 선택하면, Notification들이 선택한 탭에 해당하는 시간 기준으로 정렬되어 표시된다.In the notification list UI 22 of Fig. 17, the navigation 26 is configured in the form of a tab. When the user selects the navigation tab 26, the notifications are displayed in sorted order based on the time corresponding to the selected tab.

도면과 같이, 네비게이션(26)은 "Older", "Today", "Latest" 탭으로 구성될 수 있다. 따라서, 사용자가 "Older" 탭을 선택하면, Notification 리스트 UI(22)에는 Notification들이 이벤트 발생이 오래된 시간 순서대로 정렬되어 표시된다. 사용자가 "Today" 탭을 선택하면, Notification 리스트 UI(22)에는 오늘 발생된 Notification들이 표시된다. 사용자가 "Latest" 탭을 선택하면, Notification 리스트 UI(22)에는 Notification들이 이벤트 발생이 빠른 시간 순서대로 정렬되어 표시된다.As shown in the figure, the navigation 26 can be composed of "Older", "Today", and "Latest" tabs. Accordingly, when the user selects the "Older" tab, the Notifications list UI 22 displays the notifications sorted by the oldest time in the event occurrence. When the user selects the "Today" tab, the Notification list UI 22 displays notifications generated today. When the user selects the "Latest" tab, notifications are displayed in the Notification list UI 22 in the order of the earliest time of occurrence of the events.

사용자는 Notification 리스트 UI(22)에 표시된 Notification을 선택하여, 해당 Notification의 내용을 볼 수 있다.The user can select the Notification displayed in the Notification List UI 22 to view the contents of the Notification.

도 18에 도시된 Notification UI(10)는, "이메일 수신" 이벤트에 대한 Notification 내용을 출력하는 UI로, 본 발명은 다양한 방법으로 Notification 내용을 출력할 수 있다The Notification UI 10 shown in Fig. 18 is a UI for outputting notification contents for an "e-mail reception" event, and the present invention can output Notification contents in various ways

도 (a)에 도시된 Notification UI(19)에서는, 이동 단말기(100)의 화면을 그대로 전송할 수 있다. 즉, 전술한 미러링 서비스를 이용하여, 이동 단말기(100)의 화면을 그대로 사용자에게 출력하는 것이다. 미러링 서비스를 이용한, 이동 단말기(100)의 화면 출력은 VNC 또는 UPnP Service를 이용하여 제공할 수 있음을 전술하였다. 따라서, 도 (a)에 도시된 Notification UI(19)에는 문자가 수신된 이동 단말기(100)의 화면이 출력되는 것이다.In the Notification UI 19 shown in FIG. 5A, the screen of the mobile terminal 100 can be transmitted as it is. That is, the screen of the mobile terminal 100 is directly output to the user using the above-described mirroring service. It has been described that the screen output of the mobile terminal 100 using the mirroring service can be provided using VNC or UPnP service. Accordingly, the screen of the mobile terminal 100 on which the character is received is output to the Notification UI 19 shown in FIG.

관련하여, 미러링 서비스를 이용하여, 이동 단말기(100)의 화면을 출력하는 경우, 영상표시장치(200)은 오디오 재생을 중지시킬 수 있다.In this regard, in the case of outputting the screen of the mobile terminal 100 using the mirroring service, the video display device 200 can stop audio reproduction.

도 (b)에 도시된 Notification UI(23)는, Notification Service Sink(600)가 해당 이벤트의 내용을 표시할 수 있는 Notification UI(23)를 생성하여, 표시하는 것이다. 도면과 같이, "이메일 수신" 이벤트에 해당하는 Notification UI(23)로는, 이메일 내용, 발신자 정보, 사용자 명령을 위한 메뉴 버튼 등이 포함될 수 있다. 그리고, 사용자 명령을 위한 메뉴 버튼은 "View", "Reply", "Delete", "Close" 등을 포함하여 구성될 수 있다.In the Notification UI 23 shown in FIG. 5B, the Notification Service Sink 600 generates and displays a Notification UI 23 that can display the contents of the event. As shown in the figure, the Notification UI 23 corresponding to the "E-mail reception" event may include e-mail contents, sender information, menu buttons for user commands, and the like. The menu button for the user command may be composed of "View", "Reply", "Delete", "Close", and the like.

또한, 사용자가 "View"를 메뉴 버튼을 선택하면, 도 (a)의 도 (a)에 도시된 Notification UI(19)가 출력될 수 있다.Also, when the user selects the menu button "View ", the Notification UI 19 shown in FIG.

도 19는 본 발명의 실시예에 따른 Notification Service의 경고 UI(24)를 예시한 도면이다.19 is a diagram illustrating an alert UI 24 of Notification Service according to an embodiment of the present invention.

영상표시장치(200)가 부착된 차량이 운행중인 경우, 사용자에게 Notification Service을 제공하는 것은, 사용자의 운행에 방해가 될 수 있다. 따라서, 사용자의 운행 안전을 위하여, 차량이 운행중인 경우와 같은 일정한 상황에서는, Notification의 표시, 사용자의 Notification UI(10) 조작 등을 제한할 필요가 있다.Providing the Notification Service to the user when the vehicle with the video display device 200 is in operation may interfere with the user's operation. Therefore, in order to secure the safety of the user, it is necessary to limit the display of Notification and the operation of the Notification UI 10 of the user in a certain situation such as when the vehicle is in operation.

따라서, 차량이 운행중인 경우와 같은 일정한 상황에서, 사용자가 Notification UI(10) 조작하는 경우, Notification Service Sink(600)는 경고 UI(24)를 생성하여, 출력할 수 있다.Accordingly, when the user operates the Notification UI 10 in a certain situation such as when the vehicle is in operation, the Notification Service Sink 600 can generate and output the warning UI 24.

도면과 같이, 경고 UI(24)는 운행 안전을 위해 Notification의 설정, 표시 등을 제한하는 경고 문구가 표시된 팝업 창으로 구성될 수 있다.As shown in the figure, the warning UI 24 may be constituted by a pop-up window in which a warning phrase for restricting setting, display, etc. of notifications is displayed for safety of operation.

상기에서 본 발명의 바람직한 실시예에 대하여 설명하였지만, 본 발명은 이에 한정되는 것이 아니고 특허청구범위와 발명의 상세한 설명 및 첨부한 도면의 범위 안에서 여러 가지로 변형하여 실시하는 것이 가능하고 이 또한 본 발명의 범위에 속하는 것은 당연하다.While the present invention has been described in connection with what is presently considered to be practical exemplary embodiments, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, Of course.

Claims (20)

영상을 출력하는 디스플레이부;
외부의 이동 단말기와 데이터를 송수신하는 통신부;
상기 이동 단말기로부터 상기 이동 단말기에 설치된 애플리케이션의 이벤트 발생 정보인 Notification을 수신하도록 상기 통신부를 제어하고,
상기 Notification에 따라 상기 이벤트 처리 화면인 Notification UI(User Interface)를 생성하여, 사용자에게 출력하도록 상기 디스플레이부를 제어하고,
상기 Notification UI를 통해, 사용자로부터 상기 이벤트의 처리 명령을 입력 받고, 상기 이벤트 처리 명령을 상기 이동 단말기에 송신하도록 상기 통신부를 제어하는 제어부를 포함하고,
상기 Notification UI는,
상기 이벤트가 발생하였음을 표시하도록 구성된 Notification 알림 UI와 상기 이벤트의 내용을 표시하도록 구성된 Notification 표시 UI와 사용자로부터 상기 이벤트 처리 명령의 입력을 제한하도록 구성된 Notification 경고 UI를 포함하고,
상기 Notification 알림 UI는
영상표시장치의 화면과 함께 표시되고,
상기 이동 단말기로부터 수신된 Notification의 히스토리 정보인 Notification 리스트와 상기 Notification 리스트를 상기 이동 단말기로부터 수신된 시간 순서대로 정렬하도록 구성된 내비게이션을 포함하고,
상기 제어부는,
차량 운행중에, 사용자로부터 상기 이벤트 처리 명령이 입력된 경우, 상기 Notification 경고 UI 생성하고, 상기 생성된 Notification 경고 UI를 사용자에게 출력하도록 상기 디스플레이부를 제어하는 것
인 차량에 부착된 영상표시장치.A display unit for outputting an image;
A communication unit for transmitting and receiving data with an external mobile terminal;
And controls the communication unit to receive Notification, which is event occurrence information of an application installed in the mobile terminal, from the mobile terminal,
Generates a Notification UI (User Interface) which is the event processing screen according to the Notification, and controls the display unit to output to the user,
And a control unit for receiving the processing command of the event from the user through the Notification UI and controlling the communication unit to transmit the event processing command to the mobile terminal,
The Notification UI includes:
A notification Notification UI configured to display that the event has occurred, a Notification Display UI configured to display the contents of the event, and a Notification alert UI configured to restrict input of the event processing command from the user,
The Notification notification UI
Is displayed together with the screen of the video display device,
A Notification list, which is history information of a Notification received from the mobile terminal, and a navigation configured to arrange the Notification list in order of time received from the mobile terminal,
Wherein,
When the event processing command is input from a user during a vehicle operation, generates the Notification warning UI and controls the display unit to output the generated Notification warning UI to the user
The image display device being attached to the vehicle. 제 1 항에 있어서,
상기 Notification 표시 UI는,
상기 이동 단말기의 화면 정보이고,
상기 제어부는,
상기 이동 단말기의 화면 정보를 수신하도록 상기 통신부를 제어하고, 상기 수신된 이동 단말기의 화면 정보를 출력하도록 상기 디스플레이부를 제어하여, 상기 Notification 표시 UI를 사용자에게 출력하는 차량에 부착된 영상표시장치.The method according to claim 1,
The Notification Display UI includes:
Is screen information of the mobile terminal,
Wherein,
Wherein the control unit controls the communication unit to receive the screen information of the mobile terminal and controls the display unit to output the screen information of the received mobile terminal to output the Notification display UI to the user. 제 2 항에 있어서,
상기 제어부는,
VNC(Virtual Networking Computing) 또는 UPnP(Universal Plug and Plug)를 이용하여, 상기 이동 단말기의 화면 정보를 수신하는 차량에 부착된 영상표시장치.3. The method of claim 2,
Wherein,
A video display device attached to a vehicle that receives screen information of the mobile terminal using VNC (Virtual Networking Computing) or UPnP (Universal Plug and Plug). 제 1 항에 있어서,
상기 제어부는,
상기 Notification에 따라 상기 이벤트의 내용을 포함하는 상기 Notification 표시 UI를 생성하고, 상기 생성된 Notification 표시 UI를 사용자에게 출력하도록 상기 디스플레이부를 제어하는 차량에 부착된 영상표시장치.The method according to claim 1,
Wherein,
And displays the Notification Display UI including the contents of the event according to the Notification and controls the display unit to output the generated Notification Display UI to the user. 제 1 항에 있어서,
상기 Notification 알림 UI는,
상기 이벤트가 발생하였음을 표시된 팝업 창으로 구성된 차량에 부착된 영상표시장치.The method according to claim 1,
The Notification Notification UI,
And a pop-up window indicating that the event has occurred. 삭제delete 삭제delete 삭제delete 제 1 항에 있어서,
상기 Notification UI는,
상기 애플리케이션의 즐겨찾기 표시 여부 또는 상기 애플리케이션의 Notification UI 출력 여부를 설정하도록 구성된 Notification 설정 UI를 더 포함하는 차량에 부착된 영상표시장치.The method according to claim 1,
The Notification UI includes:
Further comprising a Notification setting UI configured to set whether to display a favorite of the application or notify UI of the application. 삭제delete 외부의 이동 단말기로부터 상기 이동 단말기에 설치된 애플리케이션의 이벤트 정보인 Notification을 수신하는 단계;
상기 Notification에 따라 상기 이벤트 처리 화면인 Notification UI(User Interface)를 생성하여, 사용자에게 출력하는 단계; 상기 Notification UI를 통해, 사용자로부터 상기 이벤트의 처리 명령을 입력받고, 상기 이벤트 처리 명령을 상기 이동 단말기에 송신하는 단계; 및
차량 운행 중에, 사용자로부터 상기 이벤트 처리 명령이 입력된 경우, Notification 경고 UI 생성하고, 상기 생성된 Notification 경고 UI를 사용자에게 출력하는 단계를 포함하고,
상기 Notification UI는,
상기 이벤트가 발생하였음을 표시하도록 구성된 Notification 알림 UI와 상기 이벤트의 내용을 표시하도록 구성된 Notification 표시 UI와 사용자로부터 상기 이벤트 처리 명령의 입력을 제한하도록 구성된 Notification 경고 UI를 포함하고,
상기 Notification 알림 UI는,
상기 Notification UI가 출력되는 영상표시장치의 화면과 함께 표시되고, 상기 이동 단말기로부터 수신된 Notification의 히스토리 정보인 Notification 리스트와 상기 Notification 리스트를 상기 이동 단말기로부터 수신된 시간 순서대로 정렬하도록 구성된 내비게이션을 포함하는 것
인 데이터 처리 방법.Receiving notification from the external mobile terminal, which is event information of an application installed in the mobile terminal;
Generating a Notification UI (User Interface) that is the event processing screen according to the Notification and outputting the Notification UI to a user; Receiving an event processing command from a user through the Notification UI and transmitting the event processing command to the mobile terminal; And
Generating a Notification warning UI when the event processing command is input from a user during a vehicle operation and outputting the generated Notification warning UI to a user,
The Notification UI includes:
A notification Notification UI configured to display that the event has occurred, a Notification Display UI configured to display the contents of the event, and a Notification alert UI configured to restrict input of the event processing command from the user,
The Notification Notification UI,
And a navigation configured to display the Notification list, which is the history information of the Notification received from the mobile terminal, and the Notification list, in order of time received from the mobile terminal, together with a screen of the video display device to which the Notification UI is output that
/ RTI > 제 11 항에 있어서,
상기 Notification 표시 UI는,
상기 이동 단말기의 화면 정보이고,
상기 이동 단말기의 화면 정보를 수신하는 단계; 및
상기 수신된 이동 단말기의 화면 정보를 출력하여, 상기 Notification 표시 UI를 사용자에게 출력하는 단계를 더 포함하는 데이터 처리 방법.12. The method of claim 11,
The Notification Display UI includes:
Is screen information of the mobile terminal,
Receiving screen information of the mobile terminal; And
Outputting the screen information of the received mobile terminal and outputting the Notification Display UI to a user. 제 12 항에 있어서,
상기 이동 단말기의 화면 정보 수신 단계는,
VNC(Virtual Networking Computing) 또는 UPnP(Universal Plug and Plug)를 이용하여, 상기 이동 단말기의 화면 정보를 수신하는 데이터 처리 방법.13. The method of claim 12,
Wherein the step of receiving screen information of the mobile terminal comprises:
A data processing method for receiving screen information of a mobile terminal using VNC (Virtual Networking Computing) or UPnP (Universal Plug and Plug). 제 11 항에 있어서,
상기 Notification에 따라 상기 이벤트의 내용을 포함하는 상기 Notification 표시 UI를 생성단계; 및
상기 생성된 Notification 표시 UI를 사용자에게 출력하는 단계를 더 포함하는 데이터 처리 방법.12. The method of claim 11,
Generating the Notification Display UI including the contents of the event according to the Notification; And
And outputting the generated Notification Display UI to a user. 제 11 항에 있어서,
상기 Notification 알림 UI는,
상기 이벤트가 발생하였음을 표시된 팝업 창으로 구성된 데이터 처리 방법.12. The method of claim 11,
The Notification Notification UI,
And a pop-up window indicating that the event has occurred. 삭제delete 삭제delete 삭제delete 제 11 항에 있어서,
상기 Notification UI는,
상기 애플리케이션의 즐겨찾기 표시 여부 또는 상기 애플리케이션의 Notification UI 출력 여부를 설정하도록 구성된 Notification 설정 UI를 더 포함하는 데이터 처리 방법.12. The method of claim 11,
The Notification UI includes:
Further comprising a notification setting UI configured to set whether to display a favorite of the application or whether or not to output the application's Notification UI. 삭제delete
KR1020120072647A 2012-07-04 2012-07-04 Mobile terminal and image display device mounted to vehicle and data processing method using the same KR101599856B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120072647A KR101599856B1 (en) 2012-07-04 2012-07-04 Mobile terminal and image display device mounted to vehicle and data processing method using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120072647A KR101599856B1 (en) 2012-07-04 2012-07-04 Mobile terminal and image display device mounted to vehicle and data processing method using the same

Publications (2)

Publication Number Publication Date
KR20140005454A KR20140005454A (en) 2014-01-15
KR101599856B1 true KR101599856B1 (en) 2016-03-04

Family

ID=50140843

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120072647A KR101599856B1 (en) 2012-07-04 2012-07-04 Mobile terminal and image display device mounted to vehicle and data processing method using the same

Country Status (1)

Country Link
KR (1) KR101599856B1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001114029A (en) * 1999-10-21 2001-04-24 Matsushita Electric Ind Co Ltd On-vehicle information receiving display device and method
JP2009042019A (en) * 2007-08-08 2009-02-26 Aisin Aw Co Ltd Navigation device and navigation program
JP2009069928A (en) * 2007-09-11 2009-04-02 Hitachi Systems & Services Ltd Connection management system and its method

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110076520A (en) * 2009-12-29 2011-07-06 (주)큐디스 Apparatus and method of car bluetooth interface

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001114029A (en) * 1999-10-21 2001-04-24 Matsushita Electric Ind Co Ltd On-vehicle information receiving display device and method
JP2009042019A (en) * 2007-08-08 2009-02-26 Aisin Aw Co Ltd Navigation device and navigation program
JP2009069928A (en) * 2007-09-11 2009-04-02 Hitachi Systems & Services Ltd Connection management system and its method

Also Published As

Publication number Publication date
KR20140005454A (en) 2014-01-15

Similar Documents

Publication Publication Date Title
KR101556180B1 (en) Mobile terminal, image display device mounted on vehicle and data processing method using the same
US10949188B2 (en) Mobile terminal and control method thereof
EP2754263B1 (en) Mobile terminal, image display device mounted on vehicle and data processing method using the same
US8781828B2 (en) Electronic device and method of controlling the same
US9919598B2 (en) Mobile terminal, image display apparatus mounted in vehicle and data processing method using the same
US9041735B2 (en) Image display device and method of managing content using the same
US10038687B2 (en) Devices and control method thereof and application login system
KR101260770B1 (en) Mobile device and method for controlling play of contents in mobile device
KR101343587B1 (en) Data transfering method using direction information and mobile device using the method
KR20100133206A (en) Mobile terminal and method for participating interactive service thereof, and internet protocol television terminal and communication system
US20160381553A1 (en) Electronic device and electronic device system
KR20110006362A (en) Mobile terminal and method for controlling broadcast thereof
KR101875744B1 (en) Electonic device and method for controlling of the same
KR20150015697A (en) Mobile terminal and method for controlling thereof
KR101987463B1 (en) Mobile terminal and method for controlling of the same
KR101638907B1 (en) Mobile Terminal and Method for controlling contents thereof
KR101599856B1 (en) Mobile terminal and image display device mounted to vehicle and data processing method using the same
KR20120072953A (en) Mobile terminal system and control method thereof
KR20140012896A (en) Mobile terminal and controlling method thereof
KR102033177B1 (en) Mobile terminal and control method for mobile terminal
KR101534741B1 (en) Image display device mounted to vehicle and image displaying method using thereof
KR20150012495A (en) Mobile terminal
KR102014417B1 (en) Terminal and control method thereof
KR20130064421A (en) Mobile device and control method for the same
KR101904869B1 (en) Data transfering method and mobile terminal using the method

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20190123

Year of fee payment: 4