KR20130042113A

KR20130042113A - Multimedia device for processing at least one of video data and method for controlling the same

Info

Publication number: KR20130042113A
Application number: KR1020110106237A
Authority: KR
Inventors: 강승우
Original assignee: 엘지전자 주식회사
Priority date: 2011-10-18
Filing date: 2011-10-18
Publication date: 2013-04-26
Also published as: KR101871709B1

Abstract

PURPOSE: A method for controlling a multimedia device processing one or more video data and the multimedia device thereof are provided to generate a user interface by using the video data. CONSTITUTION: A multimedia device decodes broadcast-related data(S1101). The device receives a video UI(User Interface) execution command through a remote controller(S1102). The device stops the decoding of the broadcast-related data and receives a selection signal of a graphic area mapped with a specific function(S1103,S1104). The device detects video data in a specific section of the whole video clip by using index information and decodes the detected video data(S1105,S1106). [Reference numerals] (AA) Start; (BB) End; (S1101) Decoding broadcast-related video data; (S1102) Receiving a video UI execution command; (S1103) Stopping decoding the broadcast-related video data; (S1104) Selecting a graphic area mapped with a specific function; (S1105) Extracting a corresponding index; (S1106) Executing video decoding of a specific section in a video clip of a video UI;

Description

MULTIMEDIA DEVICE FOR PROCESSING AT LEAST ONE OF VIDEO DATA AND METHOD FOR CONTROLLING THE SAME

본 발명은 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스에 관한 것으로서, 보다 상세하게는 해상도가 향상된 유저 인터페이스(User Interface)를 제공하는 기술에 대한 것이다.The present invention relates to a method of controlling a multimedia device for processing at least one video data and to the multimedia device, and more particularly, to a technology for providing a user interface with improved resolution.

최근 스마트 TV, 네트워크 TV, IPTV, 웹 TV 등의 도입으로 인하여, 다양한 기능의 유저 인터페이스에 대한 개발이 이루어 지고 있다. 전술한 유저 인터페이스(User Interface)라 함은, 예를 들어 사용자가 직관적으로 무엇을 하면 어떤 기능이 실행되는지 쉽게 예측하도록 도와 주는 개념을 의미한다.Recently, due to the introduction of smart TV, network TV, IPTV, Web TV, the development of a user interface of various functions has been made. The above-described user interface refers to a concept that, for example, helps the user to easily predict what function is executed when the user intuitively does what.

다만, 종래 기술에 의한 유저 인터페이스는 단순 그래픽 데이터만으로 구현하는 경우가 대부분이었다. 즉, 종래 기술에 의하면, 썸네일 이미지 등 고정된 정지 영상만을 사용하거나, 해상도가 떨어지는 유저 인터페이스만을 사용하는 문제점이 있었다.However, the user interface according to the related art is mostly implemented by simple graphic data only. That is, according to the related art, there is a problem of using only a fixed still image such as a thumbnail image or using only a user interface having a low resolution.

또한, 전술한 문제점으로 인하여, 사용자는 자신이 원하는 유저 인터페이스에 접근하거나 익숙해 지는데 많은 시간 및 노력이 필요한 한계가 있어왔다. 나아가, 프로그래밍을 통하여 개선된 유저 인터페이스를 개발하는 경우 현저한 개발 비용이 발생하는 문제점도 있다.In addition, due to the above-described problems, the user has a limitation that requires a lot of time and effort to access or become familiar with the user interface desired. Furthermore, when developing an improved user interface through programming, there is a problem that a significant development cost occurs.

본 발명의 일실시예가 이루고자 하는 기술적 과제는, 비디오 데이터를 이용하여 유저 인터페이스를 생성하는 솔루션을 제공하는 것이다.An object of one embodiment of the present invention is to provide a solution for generating a user interface using video data.

또한, 본 발명의 다른 일실시예가 이루고자 하는 기술적 과제는, 하나의 비디오 클립내 포함된 복수개의 비디오 데이터 중 특정 기능에 맵핑된 비디오 데이터에 신속하게 액세스할 수 있는 프로토콜을 정의하는 것이다.Another object of the present invention is to define a protocol for rapidly accessing video data mapped to a specific function among a plurality of video data included in one video clip.

그리고, 본 발명의 또 다른 일실시예가 이루고자 하는 기술적 과제는, 비디오 디코더의 개수와 관계없이 비디오 유저 인터페이스(UI)를 구현할 수 있는 시스템을 제공하는 것이다.Another object of the present invention is to provide a system capable of implementing a video user interface (UI) regardless of the number of video decoders.

본 발명의 일실시예에 의한 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법은, 제1외부 디바이스로부터 수신한 인코딩된 방송 데이터를 디코팅 하는 단계와, 제2외부 디바이스로부터 비디오 클립을 수신하는 단계(상기 비디오 클립은 적어도 하나 이상의 비디오 데이터를 포함하고 각각의 비디오 데이터는 특정 기능에 맵핑되어 있음)와, 상기 특정 기능을 표시하는 그래픽 데이터가 선택된 경우, 대응하는 비디오 데이터를 디텍트 하는 단계와, 상기 방송 데이터의 디코딩을 중지하고, 상기 디텍트된 비디오 데이터가 디코딩 되도록 컨트롤 하는 단계와, 그리고 상기 비디오 데이터를 디코팅 한 후, 상기 특정 기능을 실행하는 단계를 포함한다.A control method of a multimedia device for processing at least one video data according to an embodiment of the present invention includes decoding encoded broadcast data received from a first external device, and receiving a video clip from a second external device. (The video clip includes at least one video data and each video data is mapped to a specific function), and detecting the corresponding video data when graphic data indicating the specific function is selected. And stopping decoding of the broadcast data, controlling the detected video data to be decoded, and executing the specific function after decoding the video data.

그리고, 본 발명의 일실시예에 의한 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스는, 인코딩된 방송 데이터에 포함된 제1비디오 데이터를 디코팅 하는 제1비디오 디코더와, 외부 디바이스로부터 비디오 클립을 수신하는 네트워크 인터페이스 모듈(상기 비디오 클립은 적어도 하나 이상의 제2비디오 데이터를 포함하고 각각의 제2비디오 데이터는 특정 기능에 맵핑되어 있음)과, 상기 특정 기능을 표시하는 그래픽 데이터를 생성하는 OSD 제너레이터와, 상기 그래픽 데이터를 선택하는 신호를 수신하는 유저 인터페이스와, 상기 선택된 그래픽 데이터에 대응하는 제2비디오 데이터를 디텍트 하는 디텍터와, 상기 디텍트된 제2비디오 데이터를 디코딩 하는 제2비디오 디코더와, 상기 제1비디오 데이터, 상기 제2비디오 데이터 및 상기 그래픽 데이터를 믹싱하는 믹싱 모듈과, 그리고 상기 믹싱된 적어도 하나 이상의 데이터가 스크린상에 출력되도록 제어하는 컨트롤러를 포함하도록 설계된다.The multimedia device for processing at least one video data according to an embodiment of the present invention includes a first video decoder for decoding first video data included in encoded broadcast data, and a video clip from an external device. A network interface module (the video clip includes at least one or more second video data and each second video data is mapped to a specific function), an OSD generator for generating graphic data indicating the specific function; A user interface for receiving a signal for selecting the graphic data, a detector for detecting second video data corresponding to the selected graphic data, a second video decoder for decoding the detected second video data, and First video data, the second video data, and the It is designed to include a mixing module for mixing graphic data and a controller for controlling the mixed at least one data to be output on the screen.

본 발명의 일실시예에 의하면, 비디오 데이터를 이용하여 유저 인터페이스를 생성하는 솔루션을 제공한다. 예컨대, 애니메이션(animation) 품질이 높은 경우에도 약 60hz 이상의 비디오 데이터 처리 속도가 보장된다.According to an embodiment of the present invention, a solution for generating a user interface using video data is provided. For example, even when animation quality is high, a video data processing speed of about 60 hz or more is guaranteed.

또한, 본 발명의 다른 일실시예에 의하면, 하나의 비디오 클립내 포함된 복수개의 비디오 데이터 중 특정 기능에 맵핑된 비디오 데이터에 신속하게 액세스할 수가 있다. According to another embodiment of the present invention, video data mapped to a specific function among a plurality of video data included in one video clip can be quickly accessed.

그리고, 본 발명의 또 다른 일실시예에 의하면, 비디오 디코더(video decoder)의 개수와 관계없이 비디오 유저 인터페이스(UI)를 구현할 수 있는 시스템을 제공한다.Further, according to another embodiment of the present invention, a system capable of implementing a video user interface (UI) regardless of the number of video decoders is provided.

도 1은 본 발명의 일실시예에 의한 멀티미디어 디바이스의 전체 구성 요소를 도시한 블록도이다.
도 2는 도 1에 도시된 제어부의 일실시예를 상세히 도시한 도면이다.
도 3은 도 1에 도시된 제어부의 다른 일실시예를 상세히 도시한 도면이다.
도 4는 본 발명의 일실시예에 따른 하나의 비디오 클립에 포함된 복수의 비디오 데이터를 도시한 도면이다.
도 5a는 도 4에 도시된 복수의 비디오 데이터와 맵핑되어 있는 특정 기능을 나열하고 있는 도면이다.
도 5b는 도 5a에 도시된 제1비디오 데이터를 예시한 도면이다.
도 5c는 도 5a에 도시된 제2비디오 데이터를 예시한 도면이다.
도 5d는 도 5a에 도시된 제3비디오 데이터를 예시한 도면이다.
도 5e는 도 5a에 도시된 제4비디오 데이터를 예시한 도면이다.
도 5f는 도 5a에 도시된 제5비디오 데이터를 예시한 도면이다.
도 5g는 도 5a에 도시된 제6비디오 데이터를 예시한 도면이다.
도 6은 본 발명의 일실시예에 의한 멀티미디어 디바이스를 컨트롤 하는 리모트 컨트롤러의 외관을 도시한 도면이다.
도 7은 도 6에 도시된 리모트 컨트롤러의 내부 구성 모듈들을 보다 상세히 도시한 도면이다.
도 8은 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제1실시예를 도시한 도면이다.
도 9는 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제2실시예를 도시한 도면이다.
도 10은 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제3실시예를 도시한 도면이다.
도 11은 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어 방법의 제1실시예를 도시한 플로우 차트이다.
도 12는 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어 방법의 제2실시예를 도시한 플로우 차트이다.
그리고, 도 13은 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어방법의 제3실시예를 도시한 플로우 차트이다.1 is a block diagram showing the overall components of a multimedia device according to an embodiment of the present invention.
FIG. 2 is a diagram illustrating an embodiment of the control unit shown in FIG. 1 in detail.
3 is a view illustrating another embodiment of the control unit shown in FIG. 1 in detail.
4 is a diagram illustrating a plurality of video data included in one video clip according to an embodiment of the present invention.
FIG. 5A is a diagram listing specific functions mapped to the plurality of video data shown in FIG. 4.
FIG. 5B is a diagram illustrating the first video data shown in FIG. 5A.
FIG. 5C is a diagram illustrating the second video data shown in FIG. 5A.
FIG. 5D is a diagram illustrating third video data shown in FIG. 5A.
FIG. 5E is a diagram illustrating fourth video data shown in FIG. 5A.
FIG. 5F is a diagram illustrating fifth video data shown in FIG. 5A.
FIG. 5G is a diagram illustrating sixth video data illustrated in FIG. 5A.
6 is a diagram illustrating an appearance of a remote controller controlling a multimedia device according to an embodiment of the present invention.
7 is a view illustrating in more detail the internal configuration modules of the remote controller shown in FIG.
8 is a diagram illustrating a first embodiment in which a menu screen according to an embodiment of the present invention is implemented.
9 is a view showing a second embodiment implemented a menu screen according to an embodiment of the present invention.
FIG. 10 is a diagram illustrating a third embodiment in which a menu screen according to an embodiment of the present invention is implemented.
11 is a flowchart illustrating a first embodiment of a control method of processing graphic data and video data according to an embodiment of the present invention.
12 is a flowchart illustrating a second embodiment of a control method of processing graphic data and video data according to an embodiment of the present invention.
13 is a flowchart illustrating a third embodiment of a control method for processing graphic data and video data according to an embodiment of the present invention.

이하에서는 도면들을 참조하여 본 발명의 실시예들을 더욱 상세하게 설명하도록 하겠다. Hereinafter, embodiments of the present invention will be described in more detail with reference to the drawings.

이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함을 고려하여 부여되는 것으로서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.The suffix "module" and " part "for components used in the following description are given merely for ease of description, and the" module "and" part "

한편, 본 명세서에서 기술되는 멀티미디어 디바이스는, 예컨대 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 전자 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린, 터치 패드 또는 공간 리모컨 등보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.On the other hand, the multimedia device described herein is, for example, an intelligent electronic device that adds a computer support function to a broadcast reception function. The multimedia device is faithful to the broadcast reception function and has an Internet function added thereto. It can have more convenient interface than pad or space remote controller. In addition, it is connected to the Internet and a computer with the support of a wired or wireless Internet function, and can perform functions such as e-mail, web browsing, banking or gaming. A standardized general-purpose OS can be used for these various functions.

따라서, 본 발명에서 기술되는 멀티미디어 디바이스는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 상기 멀티미디어 디바이스는, 보다 구체적으로 예를 들면, 인터넷 TV, IPTV(internet protocol television), 네트워크 TV, HBBTV(hybrid broadcast broadband television), 스마트 TV 및 오픈하이브리드TV(OHTV) 등이 될 수 있으며, 경우에 따라 스마트폰, PC 및 가전기기에도 적용 가능하다.Therefore, in the multimedia device described in the present invention, various applications can be freely added or deleted, for example, on a general-purpose OS kernel, so that various user-friendly functions can be performed. More specifically, the multimedia device may be, for example, an Internet TV, an Internet Protocol Television (IPTV), a Network TV, a hybrid broadcast broadband television (HBBTV), a smart TV, an Open Hybrid TV (OHTV), or the like. Therefore, it can be applied to smartphones, PCs and home appliances.

나아가, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시예를 상세하게 설명하지만, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다.BRIEF DESCRIPTION OF THE DRAWINGS The above and other features and advantages of the present invention will be more apparent from the following detailed description taken in conjunction with the accompanying drawings, in which: FIG.

본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.As used herein, terms used in the present invention are selected from general terms that are widely used in the present invention while taking into account the functions of the present invention, but these may vary depending on the intention or custom of a person skilled in the art or the emergence of new technologies. In addition, in certain cases, there may be a term arbitrarily selected by the applicant, in which case the meaning thereof will be described in the description of the corresponding invention. Therefore, it is intended that the terminology used herein should be interpreted based on the meaning of the term rather than on the name of the term, and on the entire contents of the specification.

도 1은 본 발명의 일실시예에 의한 멀티미디어 디바이스의 전체 구성 요소를 도시한 블록도이다. 도 1에 도시된 바와 같이, 본 발명의 일실시예에 의한 멀티미디어 디바이스(100)는, 방송 수신 모듈(101), 복조부(104), 네트워크 인터페이스(102), 외부 장치 인터페이스(103), 메모리(105), 제어부(106), 비디오 출력부(107), 오디오 출력부(108), 전원 공급부(109) 그리고 사용자 인터페이스(110) 등을 포함하여 이루어 진다. 한편, 상기 멀티미디어 디바이스(100)는, 리모트 컨트롤러(120)와 데이터 통신이 이루어 지도록 설계되어 있으며, 상기 리모트 컨트롤러(120)에 대해서는 도 6 및 도 7을 참조하여 상세히 후술하도록 하겠다.1 is a block diagram showing the overall components of a multimedia device according to an embodiment of the present invention. As shown in FIG. 1, the multimedia device 100 according to an embodiment of the present invention may include a broadcast receiving module 101, a demodulator 104, a network interface 102, an external device interface 103, and a memory. 105, a control unit 106, a video output unit 107, an audio output unit 108, a power supply unit 109, and a user interface 110. Meanwhile, the multimedia device 100 is designed to perform data communication with the remote controller 120, and the remote controller 120 will be described later in detail with reference to FIGS. 6 and 7.

상기 방송 수신 모듈(101)은, 예컨대 RF 튜너로 설계할 수도 있고 또는 STB 등 외부 디바이스로부터 방송 데이터를 수신하는 인터페이스로 설계 가능하다. 상기 복조부(104)는, 방송 수신 모듈(101)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다.The broadcast reception module 101 may be designed as, for example, an RF tuner or may be designed as an interface for receiving broadcast data from an external device such as an STB. The demodulator 104 receives the digital IF signal DIF converted by the broadcast receiving module 101 and performs a demodulation operation.

외부장치 인터페이스(103)는 외부 장치와 멀티미디어 디바이스(100)간 데이터 통신이 가능하게 하는 인터페이스이다. 외부장치 인터페이스(103)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북), STB 등과 같은 외부 장치와 유/무선으로 접속될 수 있다. The external device interface 103 is an interface that enables data communication between the external device and the multimedia device 100. The external device interface 103 may be connected to an external device such as a digital versatile disk (DVD), a Blu-ray, a game device, a camera, a camcorder, a computer (laptop), an STB, or the like by wire / wireless.

네트워크 인터페이스(102)는, 멀티미디어 디바이스(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스(102)는, 유선 네트워크와의 접속을 위해, 예를 들어 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, 예를 들어 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다.The network interface 102 provides an interface for connecting the multimedia device 100 to a wired / wireless network including an internet network. The network interface 102 may include, for example, an Ethernet terminal for connecting to a wired network, and for example, for connecting to a wireless network, for example, a wireless LAN (WLAN) (Wi-Fi). ), Wireless broadband (Wibro), world interoperability for microwave access (Wimax), high speed downlink packet access (HSDPA) communication standards, and the like.

네트워크 인터페이스(102)는, 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다. The network interface 102 may transmit or receive data with another user or another electronic device through the connected network or another network linked to the connected network.

메모리(105)는, 제어부(106) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수도 있다. 또한, 메모리(105)는 외부장치 인터페이스(103) 또는 네트워크 인터페이스(102)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 메모리(105)는, 예를 들어 다양한 OS, 미들웨어 및 플랫폼을 저장하고 있다.The memory 105 may store a program for each signal processing and control in the control unit 106, and may store signal-processed video, audio, or data signals. In addition, the memory 105 may perform a function for temporarily storing an image, audio, or data signal input from the external device interface 103 or the network interface 102. In addition, the memory 105 stores various OS, middleware, and platforms, for example.

사용자 인터페이스(110)는, 사용자가 입력한 신호를 제어부(106)로 전달하거나, 제어부(106)로부터의 신호를 외부 디바이스(예를 들어, 리모트 컨트롤러(120))로 전송한다. 예를 들어, 사용자 인터페이스(110)는, RF(Radio Frequency) 통신 방식, 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 리모트 컨트롤러(120)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(106)로부터의 제어 신호를 리모트 컨트롤러(120)로 송신한다.The user interface 110 transmits a signal input by the user to the controller 106 or transmits a signal from the controller 106 to an external device (eg, the remote controller 120). For example, the user interface 110 may be configured such as power on / off, channel selection, screen setting, etc. from the remote controller 120 according to various communication methods such as a radio frequency (RF) communication method and an infrared (IR) communication method. The control signal is received and processed, or the control signal from the control unit 106 is transmitted to the remote controller 120.

상기 제어부(106)는, 방송 수신 모듈(101), 복조부(104), 네트워크 인터페이스(102) 또는 외부장치 인터페이스(103)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다. 상기 제어부(106)에 대해서는 도 2 및 도 3을 참조하여 보다 상세히 후술하도록 하겠다.The controller 106 demultiplexes an input stream or processes demultiplexed signals through the broadcast receiving module 101, the demodulator 104, the network interface 102, or the external device interface 103. Can generate and output a signal for video or audio output. The controller 106 will be described later in more detail with reference to FIGS. 2 and 3.

상기 비디오 출력부(107)는, 제어부(106)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스(103)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R, G, B 신호로 변환하여 구동 신호를 생성한다. 상기 비디오 출력부(107)는, PDP, LCD, OLED, 플렉시블 디스플레이 (flexible display), 3차원 디스플레이(3D display) 등이 가능하다. 상기 오디오 출력부(108)는, 제어부(106)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1채널 신호 또는 5.1채널 신호를 입력받아 음성으로 출력한다. The video output unit 107 converts an image signal, a data signal, an OSD signal, or an image signal, data signal, etc. received from the external device interface 103 processed by the controller 106 into R, G, and B signals, respectively. To generate a drive signal. The video output unit 107 may be a PDP, an LCD, an OLED, a flexible display, a 3D display, or the like. The audio output unit 108 receives a signal processed by the control unit 106, for example, a stereo signal, a 3.1 channel signal, or a 5.1 channel signal, and outputs the audio signal.

그리고, 전원 공급부(109)는, 멀티미디어 디바이스(100) 전반에 걸쳐 해당 전원을 공급한다. 특히, 시스템 온 칩(System On Chip, SOC)의 형태로 구현될 수 있는 제어부(106)와, 영상 표시를 위한 비디오 출력부(107) 및 오디오 출력을 위한 오디오 출력부(108)에 전원을 공급할 수 있다.The power supply unit 109 supplies corresponding power to the multimedia device 100. In particular, a control unit 106 that can be implemented in the form of a system-on-chip (SOC), a video output unit 107 for video display, and an audio output unit 108 for audio output .

특히, 본 발명의 실시예와 관련하여 그래픽 데이터 및 비디오 데이터를 처리하여 새로운 방식의 유저 인터페이스를 구현하는 구체적인 과정을 설명하면 다음과 같다.In particular, with reference to an embodiment of the present invention will be described a specific process for implementing a new user interface by processing the graphic data and video data as follows.

전술한 네트워크 인터페이스(102) 또는 외부 장치 인터페이스(103)를 통해, 비디오 UI 를 위한 비디오 클립을 수신하도록 설계된다. 본 발명의 일실시예에 의한 비디오 UI 용 비디오 클립은 적어도 하나의 비디오 데이터를 포함하도록 설계되어 있으며, 또한 각각의 비디오 데이터는 특정 기능에 맵핑되어 있도록 설계한다. 상기 비디오 클립에 대한 상세한 데이터 구조에 대해서는, 도 4 및 도 5를 참조하여 후술하도록 하겠다.Through the network interface 102 or the external device interface 103 described above, it is designed to receive a video clip for the video UI. A video clip for a video UI according to an embodiment of the present invention is designed to include at least one video data, and each video data is designed to be mapped to a specific function. A detailed data structure for the video clip will be described later with reference to FIGS. 4 and 5.

나아가, 본 발명의 다른 일실시예에 의하면, UI 로 사용될 비디오 클립은 미리 디코딩된 상태로 상기 메모리(105)에 저장된다. 이와 같이 설계하는 경우, 비디오 UI 의 구현 속도를 제고(improve, enhance) 할 수 있는 장점이 있다.Furthermore, according to another embodiment of the present invention, the video clip to be used as the UI is stored in the memory 105 in a pre-decoded state. In such a design, there is an advantage that the implementation speed of the video UI can be improved.

그리고, 본 발명의 또 다른 일실시예에 의하면, 전술한 비디오 클립을 상기 메모리(105)에 저장하지 않고, 실시간으로 수신하여 처리하는 것도 가능하다. 이와 같이 설계하는 경우, 메모리 효율성을 제고할 수 있는 효과가 있다.According to another embodiment of the present invention, the video clip described above may be received and processed in real time without being stored in the memory 105. In this design, the memory efficiency can be improved.

특히, 본 발명에서 제안하는 비디오 UI 를 제공하기 위해서는 전술한 제어부(106)의 구성을 일부 변경할 필요가 있는 바, 이에 대해서는 도 2 및 도 3을 참조하여 설명하도록 하겠다.In particular, in order to provide the video UI proposed by the present invention, it is necessary to partially change the configuration of the controller 106 described above, which will be described with reference to FIGS. 2 and 3.

도 2는 도 1에 도시된 제어부의 일실시예를 상세히 도시한 도면이다. 이하, 도 2를 참조하여, 비디오 디코더를 1개 보유하고 있는 멀티미디어 디바이스에 본 발명이 적용된 경우를 설명하도록 하겠다.FIG. 2 is a diagram illustrating an embodiment of the control unit shown in FIG. 1 in detail. Hereinafter, a case in which the present invention is applied to a multimedia device having one video decoder will be described with reference to FIG. 2.

도 1에 도시된 제어부는, 도 2에 도시된 바와 같이 역다중화부(201), 스윗칭 모듈(202), 비디오 디코더(203), OSD 생성부(204), 믹서(205), 프레임레이트 변환부(206), 포맷터(207), 오디오 디코더(208) 그리고 오디오 프로세서(209) 등을 포함하여 이루어 진다. 물론, 이는 일실시예이며 본 발명의 권리범위는 특허청구범위에 의해 정해져야 한다.As shown in FIG. 2, the controller illustrated in FIG. 1 includes a demultiplexer 201, a switching module 202, a video decoder 203, an OSD generator 204, a mixer 205, and frame rate conversion. Section 206, formatter 207, audio decoder 208, audio processor 209, and so forth. Of course, this is one embodiment and the scope of the invention should be defined by the claims.

상기 프레임 레이트 변환부(Frame Rate Conveter; FRC)(206)는, 입력되는 영상의 프레임 레이트를 변환할 수 있다. 예를 들어, 60Hz의 프레임 레이트를 120Hz 또는 240Hz로 변환한다. 그리고, 포맷터(207)는, 프레임 레이트 변환부(206)의 출력 신호를 입력받아, 비디오 출력부에 적합하도록 신호의 포맷을 변경하여 출력한다. 예를 들어, R, G, B 데이터 신호를 출력할 수 있으며, 이러한 R, G, B 데이터 신호는, 낮은 전압 차분 신호(Low voltage differential signaling, LVDS) 또는 mini-LVDS 로 출력될 수 있다.The frame rate converter (FRC) 206 may convert a frame rate of an input video. For example, a 60Hz frame rate is converted to 120Hz or 240Hz. The formatter 207 receives the output signal of the frame rate converter 206 and changes the format of the signal to be suitable for the video output unit. For example, the R, G, and B data signals may be output, and the R, G, and B data signals may be output as low voltage differential signaling (LVDS) or mini-LVDS.

특히, 본 발명의 일실시예에 의한 비디오 UI 를 구현하는 제어부를 상세히 설명하면 다음과 같다.In particular, the controller for implementing the video UI according to an embodiment of the present invention will be described in detail as follows.

오디오 신호 및 비디오 신호를 포함하는 인코딩된 방송 데이터는, 역다중화부(201)로 수신된다. 상기 인코딩된 방송 데이터는, 제1외부 디바이스(예를 들어, 방송국, 서버 등)로부터 전송된다. 상기 비디오 디코더(203)는, 전술한 방송 데이터 중 비디오 신호를 디코딩 하도록 설계되고 오디오 디코더(208)는 전술한 방송 데이터 중 오디오 신호를 디코딩 하도록 설계된다. 또한, 오디오 프로세서(209)는 스피커에서 출력 가능한 오디오 데이터 포맷으로 변환하는 기능을 수행한다.The encoded broadcast data including the audio signal and the video signal is received by the demultiplexer 201. The encoded broadcast data is transmitted from a first external device (eg, broadcast station, server, etc.). The video decoder 203 is designed to decode a video signal of the above-mentioned broadcast data and the audio decoder 208 is designed to decode an audio signal of the above-mentioned broadcast data. In addition, the audio processor 209 converts the audio data format output from the speaker.

한편, 네트워크 인터페이스(102) 또는 외부 장치 인터페이스(103)를 통해, 제2외부 디바이스(예를 들어, CP 등)로부터 비디오 클립을 수신한다. 상기 비디오 클립은 적어도 하나 이상의 비디오 데이터를 포함하고 각각의 비디오 데이터는 특정 기능에 맵핑되어 있다. 전술한 비디오 클립에 대해서는, 도 4 및 도 5를 참조하여 상세히 후술하겠다.Meanwhile, a video clip is received from a second external device (eg, CP, etc.) through the network interface 102 or the external device interface 103. The video clip includes at least one video data and each video data is mapped to a specific function. The above-described video clip will be described later in detail with reference to FIGS. 4 and 5.

나아가, 전술한 비디오 클립은 인코딩된 고화질의 동영상 데이터 포맷이므로, 전술한 비디오 디코더(203)를 통해 디코딩 프로세스가 이루어져야 한다. 따라서, 스윗칭 모듈(202)을 부가하여 방송 데이터의 비디오 신호 또는 비디오 UI 를 위한 비디오 데이터가 선택적으로 디코딩 되도록 설계하는 것도 본 발명의 일특징이다.Furthermore, since the above-described video clip is an encoded high-definition video data format, the decoding process must be performed through the video decoder 203 described above. Therefore, it is also a feature of the present invention to add a switching module 202 to selectively decode the video signal of the broadcast data or the video data for the video UI.

상기 OSD 생성부(204)는, 특정 기능을 표시하는 그래픽 데이터를 생성한다. 또한, 상기 믹서(205)는 전술한 OSD 생성부(204)에 의해 생성된 그래픽 데이터와 비디오 디코더(203)에서 디코딩된 비디오 데이터를 합성하여 동시에 출력 가능하도록 설계된다. 상기 OSD 생성부(204)에 의해 합성된 비디오 UI 의 구체적인 실시예에 대해서는 이하 도 8 내지 도 10을 참조하여 후술하겠다.The OSD generator 204 generates graphic data indicating a specific function. In addition, the mixer 205 is designed to synthesize the graphic data generated by the OSD generation unit 204 described above and the video data decoded by the video decoder 203 and simultaneously output them. A detailed embodiment of the video UI synthesized by the OSD generator 204 will be described below with reference to FIGS. 8 to 10.

상기 특정 기능을 표시하는 그래픽 데이터가 선택된 경우, 제어부는 비디오 클립의 수많은 비디오 데이터 중에서 특정 비디오 데이터를 디텍트 한다. 보다 신속하게 특정 비디오 데이터를 디텍트 하는 방법에 대해서는 도 4 및 도 5를 참조하여 후술하겠다.When graphic data indicating the specific function is selected, the controller detects the specific video data among numerous video data of the video clip. A method of detecting specific video data more quickly will be described later with reference to FIGS. 4 and 5.

상기 스윗칭 모듈(202)의 제어에 따라, 상기 비디오 디코더(203)는 역다중화부(201)를 통해 수신되는 방송 데이터의 디코딩을 중지하고, 상기 디텍트된 비디오 데이터를 디코딩 한다. 상기 비디오 클립에 포함된 특정 비디오 데이터를 디코팅 한 후, 특정 기능을 실행하도록 설계된다.Under the control of the switching module 202, the video decoder 203 stops decoding broadcast data received through the demultiplexer 201 and decodes the detected video data. After decoding the specific video data contained in the video clip, it is designed to execute a specific function.

예를 들어, 사용자가 채널-업(Channel-up)을 표시하는 그래픽 데이터를 선택한 경우, 이에 맵핑되어 있는 고화질의 비디오 영상이 출력된 후 채널 업 기능이 실행된다. 따라서, 종래 기술에 의한 고정된 이미지의 유저 인터페이스만을 제공하는 문제점을 해결할 수가 있다.For example, when the user selects graphic data indicating channel-up, the channel-up function is executed after a high-quality video image mapped thereto is output. Therefore, the problem of providing only the user interface of the fixed image by the prior art can be solved.

나아가, 본 발명의 다른 일실시예에 의한 멀티미디어 디바이스는, 전술한 비디오 클립에 포함된 적어도 하나 이상의 비디오 데이터를 미리 디코딩 하고, 디코딩된 적어도 하나 이상의 비디오 데이터를 시스템 메모리에 저장하도록 설계한다.Furthermore, the multimedia device according to another embodiment of the present invention is designed to decode at least one or more video data included in the above-described video clip in advance, and store the decoded at least one video data in the system memory.

도 3은 도 1에 도시된 제어부의 다른 일실시예를 상세히 도시한 도면이다. 이하, 도 3을 참조하여, 비디오 디코더를 2개 보유하고 있는 멀티미디어 디바이스에 본 발명이 적용된 경우를 설명하도록 하겠다. 3 is a view illustrating another embodiment of the control unit shown in FIG. 1 in detail. Hereinafter, a case in which the present invention is applied to a multimedia device having two video decoders will be described with reference to FIG. 3.

한편, 도 2와 중복되는 프레임레이트 변환부(307), 포맷터(308), 오디오 디코더(309) 그리고 오디오 프로세서(310)는 유사한 기능을 수행하는 바 상세한 설명을 생략하여도 당업자는 도 2 및 도 3을 참조하여 본 발명의 실시예를 구현할 수가 있다.Meanwhile, the frame rate converter 307, the formatter 308, the audio decoder 309, and the audio processor 310, which are overlapped with those of FIG. 2, perform similar functions. Referring to 3, embodiments of the present invention can be implemented.

제1비디오 디코더(302)는, 인코딩된 방송 데이터에 포함된 제1비디오 데이터를 디코팅 한다. 네트워크 인터페이스(102)는, 외부 디바이스(예를 들어, 서버, CP 등)로부터 비디오 클립을 수신한다. 상기 비디오 클립은 적어도 하나 이상의 제2비디오 데이터를 포함하고 각각의 제2비디오 데이터는 특정 기능에 맵핑되어 있다. 전술한 비디오 클립에 대해서는, 도 4 및 도 5를 참조하여 후술하겠다.The first video decoder 302 decodes the first video data included in the encoded broadcast data. The network interface 102 receives a video clip from an external device (eg, server, CP, etc.). The video clip includes at least one second video data and each second video data is mapped to a specific function. The above-described video clip will be described later with reference to FIGS. 4 and 5.

OSD 생성부(304)는, 상기 특정 기능을 표시하는 그래픽 데이터를 생성하고, 사용자 인터페이스(110)는 상기 그래픽 데이터를 선택하는 신호를 수신한다.The OSD generator 304 generates graphic data indicating the specific function, and the user interface 110 receives a signal for selecting the graphic data.

상기 선택된 그래픽 데이터에 대응하는 제2비디오 데이터가 디텍트된 경우, 제2비디오 디코더(303)는, 상기 디텍트된 제2비디오 데이터를 디코딩 한다.When the second video data corresponding to the selected graphic data is detected, the second video decoder 303 decodes the detected second video data.

제1믹서(305)는, 디코딩된 상기 제1비디오 데이터 및 상기 제2비디오 데이터를 우선적으로 합성한다. 나아가, 제2믹서(306)는, 합성된 복수개의 비디오 데이터 및 OSD 생성부(304)에 의해 생성된 그래픽 데이터를 최종적으로 합성하여 출력한다.The first mixer 305 first synthesizes the decoded first video data and the second video data. Further, the second mixer 306 finally synthesizes and outputs the synthesized video data and the graphic data generated by the OSD generator 304.

따라서, 도 3에 도시된 실시예를 구현하는 경우, 도 2와 대비하여, 방송 데이터를 그대로 출력하면서 동시에 비디오 UI 를 구현할 수 있는 기술적 특유의 효과가 있다.Accordingly, in the case of implementing the embodiment shown in FIG. 3, in contrast to FIG. 2, there is a technically unique effect that a video UI can be implemented while outputting broadcast data as it is.

도 4는 본 발명의 일실시예에 따른 하나의 비디오 클립에 포함된 복수의 비디오 데이터를 도시한 도면이다.4 is a diagram illustrating a plurality of video data included in one video clip according to an embodiment of the present invention.

본 발명의 일실시예에 의하면, 비디오 클립(video clip)을 씬별로 분할하여 비디오 데이터를 삽입한다. 또한, 각각의 비디오 데이터와 연동되는 그래픽 데이터를 추가 설계한다. 따라서, 사용자가 선택하는 그래픽 영역에 따라, 비디오 클립내에서 특정 구간만이 재생하는 것도 본 발명의 일특징이다.According to an embodiment of the present invention, a video clip is divided into scenes to insert video data. In addition, graphic data linked with each video data is further designed. Therefore, according to the graphic region selected by the user, it is also a feature of the present invention to play only a specific section in the video clip.

도 4에 도시된 바와 같이, 하나의 비디오 클립이 6개의 애니메이션을 포함하도록 설계한다. 만약, 전체 비디오 클립이 1초라고 가정하면, 하나의 씬당 10 frame/sec 의 단위를 가진다.As shown in Figure 4, one video clip is designed to contain six animations. If we assume that the entire video clip is one second, it has a unit of 10 frames / sec per scene.

또한, 비디오 클립 설계시, 신속한 씬(scene) 전환을 위하여 각 씬의 시작 시점에 i-Frame 을 삽입하여 인코딩 한다. 또는 신속한 검색(search)을 위하여, 비디오 데이터의 시작 부분에 인덱스(index) 정보를 추가 삽입하여 인코딩 한다.In addition, when designing video clips, i-Frames are inserted and encoded at the start of each scene for fast scene switching. Alternatively, for quick search, index information is additionally inserted at the beginning of video data and encoded.

도 5a는 도 4에 도시된 복수의 비디오 데이터와 맵핑되어 있는 특정 기능을 나열하고 있는 도면이다.FIG. 5A is a diagram listing specific functions mapped to the plurality of video data shown in FIG. 4.

예를 들어, 도 5a에 도시된 기능 1(function 1)에 해당하는 그래픽 데이터가 선택된 경우, 전체 비디오 클립 중 제1비디오(video 1)에 해당하는 구간(0-1/6초)이 재생된다. 전술한 그래픽 데이터를 선택하는 과정은, 예컨대 도 6 및 도 7에 도시된 리모트 컨트롤러가 사용될 수 있다.For example, when graphic data corresponding to function 1 shown in FIG. 5A is selected, a section (0-1 / 6 seconds) corresponding to the first video 1 of all video clips is played. . In the process of selecting the aforementioned graphic data, for example, the remote controller shown in FIGS. 6 and 7 may be used.

따라서, 기능 1(function 1)에 해당하는 그래픽 데이터가 리모트 컨트롤러에 의해 포커싱 되다가, 기능 3(fucntion 1)에 해당하는 그래픽 데이터가 선택된 경우에는, 구간을 점프하여 2/6-3/6초 구간이 자동으로 실행된다. 이와 같은 구현이 가능한 이유는, 도 4와 같이 각 구간별로 인덱스 정보를 추가하였기 때문에 가능한 것이다.Therefore, when graphic data corresponding to function 1 is focused by the remote controller, and graphic data corresponding to function 3 is selected, the interval is jumped and the interval is 2 / 6-3 / 6 seconds. This will run automatically. The reason for such an implementation is possible because index information is added for each section as shown in FIG. 4.

종래 기술에 의한 그래픽 UI 는 낮은 화질과 애니메이션 속도가 낮아서 사용자가 보다 직관적으로 UI 를 이용하기 어려운 한계가 있었다. 반면 본 발명의 일실시예에 의한 비디오 UI 는, 비디오 디코딩이 필요한 하나의 비디오 클립내에 복수의 비디오 데이터를 위치시키고, 또한 각 비디오 데이터별로 인덱스를 두어 각 비디오 데이터별로 전환이 신속하게 이루어 지도록 설계한다. 따라서, 처리 속도 및 화질, 애니메이션 속도가 모두 개선되는 기술적 효과가 있다. 전술한 비디오 UI 는, 그래픽 데이터 및 비디오 데이터를 동시에 출력하면서, 특히 특정 영역의 그래픽 데이터가 선택된 경우 특정 기능을 수행하는 것과 관련된 비디오 데이터를 재생하는 새로운 개념의 서비스를 의미한다.The graphic UI according to the prior art has a limitation in that it is difficult for a user to use the UI more intuitively because of low image quality and low animation speed. On the other hand, the video UI according to an embodiment of the present invention is designed to place a plurality of video data in one video clip that needs video decoding, and to index each video data so that the conversion can be performed quickly for each video data. . Therefore, there is a technical effect that the processing speed, image quality, and animation speed are all improved. The aforementioned video UI refers to a new concept of service that simultaneously outputs graphic data and video data, and reproduces video data related to performing a specific function, especially when graphic data of a specific area is selected.

한편, 비디오 데이터는, 예컨대 동영상 재생이 가능한 압축/무압축의 디지털 데이터(예를 들어, MPEG1, MPEG2, MPEG4, H.264 등)로 구성된다. 보다 간단히 예를 들면, 본 발명의 일실시예를 구현하기 위한 비디오 UI를 위해 필요한 비디오 클립을 구성하는 각각의 비디오 데이터들은, 재생(play)/일시정지(pause)/멈춤(stop)이 가능한 디지털 동영상 컨텐트를 의미한다.On the other hand, the video data is composed of, for example, compressed / uncompressed digital data (eg, MPEG1, MPEG2, MPEG4, H.264, etc.) capable of moving picture reproduction. More simply, for example, each of the video data constituting a video clip required for a video UI for implementing an embodiment of the present invention is a digital that can be played, paused, or stopped. Means video content.

나아가, 각각의 function 을 표시하는 그래픽 데이터와 상기 각각의 function 에 대응하는 비디오 클립내 비디오 데이터가 동시에 한 화면상에서 디스플레이 되도록 설계하는 것도 본 발명의 일특징이다. 이를 구현하기 위해, 도 2 또는 도 3에 도시된 바와 같이, 디코딩된 비디오 데이터와 OSD 생성부에 의해 생성된 그래픽 데이터를 믹싱하는 믹서를 추가적으로 설계한다.Furthermore, it is a feature of the present invention to design graphic data indicating each function and video data in a video clip corresponding to each function to be simultaneously displayed on one screen. In order to implement this, as shown in FIG. 2 or FIG. 3, a mixer for mixing the decoded video data and the graphic data generated by the OSD generator is additionally designed.

본 발명의 일실시예에 의하면, 사용자는 비디오 클립내 포함된 복수개의 비디오 데이터가 재생된 화면을 확인 후, 멀티미디어 디바이스에 기존재하는 그래픽 데이터(function)와 각각의 비디오 데이터를 맵핑하도록 선택한다.According to an embodiment of the present invention, the user checks a screen on which a plurality of video data included in a video clip is played, and then selects to map each video data to graphic data existing in the multimedia device.

예를 들어, 비행기가 제1지점에서 제2지점으로 이동하는 비디오 데이터와 채널업을 표시하는 그래픽 데이터를 선택한 경우, 2개의 데이터가 맵핑되어 도 5a에 도시된 바와 같이 메모리에 저장된다.For example, when the plane selects video data moving from the first point to the second point and graphic data indicating the channel up, the two data are mapped and stored in the memory as shown in FIG. 5A.

도 5b에 도시된 바와 같이 제1비디오(Video 1)는, function 1과 맵핑되어 있다. 예를 들어, 채널업(function 1)이 선택된 경우, 왼쪽에 있는 남자가 춤을 추는 비디오 데이터가 재생된다. 다만, 채널업의 그래픽 데이터가 선택되기 전, 왼쪽에 있는 남자는 비디오 데이터가 stop 된 상태이다.As shown in FIG. 5B, the first video Video 1 is mapped to function 1. For example, if channel up (function 1) is selected, video data of the man on the left dancing is played. However, before the graphic data of the channel up is selected, the man on the left has the video data stopped.

도 5c에 도시된 바와 같이 제2비디오(Video 2)는, function 2와 맵핑되어 있다. 예를 들어, 채널다운(function 2)이 선택된 경우, 가운데 있는 여자가 기도하는 비디오 데이터가 재생된다. 다만, 채널다운의 그래픽 데이터가 선택되기 전, 가운데 있는 여자는 비디오 데이터가 stop 된 상태이다.As shown in FIG. 5C, the second video Video 2 is mapped to the function 2. For example, if channel down (function 2) is selected, video data that the middle woman prays is played. However, before the graphic data of the channel-down is selected, the middle woman has the video data stopped.

도 5d에 도시된 바와 같이 제3비디오(Video 3)는, function 3과 맵핑되어 있다. 예를 들어, 볼륨업(function 3)이 선택된 경우, 오른쪽에 있는 남자가 손을 높이 드는 비디오 데이터가 재생된다. 다만, 볼륨업의 그래픽 데이터가 선택되기 전, 오른쪽에 있는 남자는 비디오 데이터가 stop 된 상태이다.As shown in FIG. 5D, the third video Video 3 is mapped to the function 3. For example, when volume up (function 3) is selected, video data of a man on the right raising his hand is played. However, before the volume-up graphic data is selected, the man on the right is in the state where the video data is stopped.

도 5e에 도시된 바와 같이 제4비디오(Video 4)는, function 4와 맵핑되어 있다. 예를 들어, 볼륨다운(function 4)이 선택된 경우, 비행기가 움직이는 비디오 데이터가 재생된다. 다만, 볼륨다운의 그래픽 데이터가 선택되기 전, 비행기에 대한 비디오 데이터는 stop 된 상태이다.As illustrated in FIG. 5E, the fourth video Video 4 is mapped to the function 4. For example, if volume down (function 4) is selected, video data of the plane moving is played. However, the video data for the airplane is stopped before the graphic data of the volume down is selected.

도 5f에 도시된 바와 같이 제5비디오(Video 5)는, function 5와 맵핑되어 있다. 예를 들어, 홈 이동(function 5)이 선택된 경우, 유성별이 떨어지는 비디오 데이터가 재생된다. 다만, 홈 이동의 그래픽 데이터가 선택되기 전, 별에 대한 비디오 데이터는 stop 된 상태이다.As illustrated in FIG. 5F, the fifth video Video 5 is mapped to function 5. For example, when the home movement (function 5) is selected, video data with falling star stars is reproduced. However, the video data for the star is stopped before the graphic data of the home movement is selected.

도 5g에 도시된 바와 같이 제6비디오(Video 5)는, function 6과 맵핑되어 있다. 예를 들어, 백 이동(function 6)이 선택된 경우, 구름이 움직이는 비디오 데이터가 재생된다. 다만, 백 이동의 그래픽 데이터가 선택되기 전, 구름에 대한 비디오 데이터는 stop 된 상태이다.As shown in FIG. 5G, the sixth video Video 5 is mapped to a function 6. For example, if the back movement (function 6) is selected, video data with moving clouds is played. However, the video data for the cloud is stopped before the graphic data for back movement is selected.

도 5b 내지 도 5g에서 설명한 그래픽 데이터 및 비디오 데이터가, 도 2 또는 도 3의 믹서에 의해 합성된 상태로 디스플레이 된다. 이는, 도 8 및 도 9를 참조하여 설명하도록 하겠다.The graphic data and the video data described with reference to FIGS. 5B to 5G are displayed in a state synthesized by the mixer of FIG. 2 or 3. This will be described with reference to FIGS. 8 and 9.

또한, 도 4 및 도 5a에 도시된 바와 같이, 본 발명의 다른 일실시예에 의하면, 전술한 비디오 클립에 포함된 적어도 하나 이상의 비디오 데이터는 시간을 기준으로 연속적으로 연결되어 있다. 그리고, 각각의 비디오 데이터는, 상기 각각의 비디오 데이터를 식별하는 인덱스 정보를 더 포함하고 있다.4 and 5A, according to another embodiment of the present invention, at least one video data included in the above-described video clip is continuously connected based on time. Each video data further includes index information for identifying the respective video data.

따라서, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 전술한 인덱스 정보를 이용하여, 상기 특정 기능을 표시하는 그래픽 데이터에 대응하는 비디오 데이터를 식별하는 것이 가능하다.Accordingly, the multimedia device according to an embodiment of the present invention may identify video data corresponding to graphic data indicating the specific function by using the above-described index information.

그리고, 본 발명의 또 다른 일실시예에 의하면, 제1기능을 표시하는 그래픽 데이터가 선택된 경우, 상기 인덱스 정보를 이용하여 상기 제1기능에 대응하는 제1비디오 데이터를 디코딩 하고, 제2기능을 표시하는 그래픽 데이터가 선택된 경우, 상기 제1비디오 데이터의 디코딩을 중지하고, 상기 인덱스 정보를 이용하여 상기 제2기능에 대응하는 제2비디오 데이터를 디코딩 한다.According to another embodiment of the present invention, when the graphic data indicating the first function is selected, the first video data corresponding to the first function is decoded using the index information, and the second function is decoded. When the graphic data to be displayed is selected, decoding of the first video data is stopped, and second video data corresponding to the second function is decoded using the index information.

도 6은 본 발명의 일실시예에 의한 멀티미디어 디바이스를 컨트롤 하는 리모트 컨트롤러의 외관을 도시한 도면이다.6 is a diagram illustrating an appearance of a remote controller controlling a multimedia device according to an embodiment of the present invention.

도 6의 (a)에 도시된 바와 같이, 멀티미디어 디바이스(600)의 스크린 상에, 리모트 컨트롤러(610)의 움직임에 대응하는 포인터(601)가 표시된다. 사용자는 리모트 컨트롤러(610)를 좌우(도 6의 (b)), 상하(도 6의 (c))로 움직이거나 회전할 수 있다. 이와 같은 리모트 컨트롤러(610)는, 3D 공간상의 움직임에 따라 해당 포인터(601)가 이동되어 표시되므로, 공간 리모콘이라 명명할 수도 있다.As shown in FIG. 6A, a pointer 601 corresponding to the movement of the remote controller 610 is displayed on the screen of the multimedia device 600. The user may move or rotate the remote controller 610 to left and right (FIG. 6B) and up and down (FIG. 6C). The remote controller 610 may be referred to as a spatial remote controller because the pointer 601 is moved and displayed according to the movement in the 3D space.

도 6의 (b)에 도시된 바와 같이, 사용자가 리모트 컨트롤러(610)를 왼쪽으로 이동 시키면, 멀티미디어 디바이스(600)의 스크린 상에 표시된 포인터(601)도 왼쪽으로 이동한다. 한편, 리모트 컨트롤러(610)의 센서를 통하여 감지된 리모트 컨트롤러(610)의 움직임에 관한 정보는 멀티미디어 디바이스(600)로 전송된다. 상기 멀티미디어 디바이스(600)는, 리모트 컨트롤러(610)의 움직임에 관한 정보로부터 포인터(601)의 좌표를 산출할 수 있다. 상기 멀티미디어 디바이스(600)는, 산출한 좌표에 대응하도록 포인터(601)를 표시할 수 있다.As shown in FIG. 6B, when the user moves the remote controller 610 to the left, the pointer 601 displayed on the screen of the multimedia device 600 also moves to the left. Meanwhile, the information about the movement of the remote controller 610 detected through the sensor of the remote controller 610 is transmitted to the multimedia device 600. The multimedia device 600 may calculate the coordinates of the pointer 601 from information about the movement of the remote controller 610. The multimedia device 600 may display a pointer 601 to correspond to the calculated coordinates.

한편, 도 6의 (c)에 도시된 바와 같이, 사용자가 리모트 컨트롤러(610)를 아래쪽으로 이동 시키면, 멀티미디어 디바이스(600)의 스크린 상에 표시된 포인터(601)도 아래쪽으로 이동한다. Meanwhile, as shown in FIG. 6C, when the user moves the remote controller 610 downward, the pointer 601 displayed on the screen of the multimedia device 600 also moves downward.

따라서, 본 발명의 일실시예에 의한 리모트 컨트롤러(610)를 이용하여, 상기 멀티미디어 디바이스(600)의 스크린내 영역 중에서, 비디오 UI와 연동되어 있는 특정 그래픽 영역을 신속하게 선택하는 것이 가능하다.Therefore, using the remote controller 610 according to an embodiment of the present invention, it is possible to quickly select a specific graphic area linked to the video UI from the on-screen area of the multimedia device 600.

나아가, 상기 리모트 컨트롤러(610)를 순간적으로 이동 시켜서, 비디오 클립의 특정 구간을 실행하다가 일시 정지하고, 연속하지 않는 구간의 비디오 클립을 실행할 수 있는 장점이 있다.In addition, the remote controller 610 may be temporarily moved to execute a specific section of the video clip, pause the video, and execute a video clip of a non-contiguous section.

도 7은 도 6에 도시된 리모트 컨트롤러의 내부 구성 모듈들을 보다 상세히 도시한 도면이다.7 is a view illustrating in more detail the internal configuration modules of the remote controller shown in FIG.

도 7에 도시된 바와 같이, 리모트 컨트롤러(710)는, 무선통신부(714), 사용자 입력부(715), 센서부(717), 출력부(716), 전원공급부(711), 저장부(712), 그리고 제어부(713) 등을 포함한다.As shown in FIG. 7, the remote controller 710 includes a wireless communication unit 714, a user input unit 715, a sensor unit 717, an output unit 716, a power supply unit 711, and a storage unit 712. And a control unit 713.

무선통신부(714)는 임의의 외부 장치와 통신 가능하도록 설계된다. 특히, 본 발명의 일실시예에 의하면, RF 모듈(714a) 및 IR 모듈(714b)은 멀티미디어 디바이스(700)와 데이터 통신/적외선 통신이 이루어 지도록 설계한다.The wireless communication unit 714 is designed to be able to communicate with any external device. In particular, according to an embodiment of the present invention, the RF module 714a and the IR module 714b are designed to perform data communication / infrared communication with the multimedia device 700.

나아가, 본 발명의 일실시예에 의하면, 리모트 컨트롤러(710)는, 멀티미디어 디바이스(700)로, 리모트 컨트롤러(710)의 움직임 등에 관한 정보가 담긴 신호를 RF 모듈(714a)을 통하여 전송한다.Furthermore, according to one embodiment of the present invention, the remote controller 710 transmits a signal containing information on the movement of the remote controller 710 and the like to the multimedia device 700 through the RF module 714a.

또한, 리모트 컨트롤러(710)는, 멀티미디어 디바이스(700)가 전송한 신호를 RF 모듈(714a)을 통하여 수신할 수 있다. 또한, 리모트 컨트롤러(710)는 필요에 따라 IR 모듈(714b)을 통하여 멀티미디어 디바이스(700)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 명령을 전송할 수 있다. In addition, the remote controller 710 may receive a signal transmitted from the multimedia device 700 through the RF module 714a. In addition, the remote controller 710 may transmit a command regarding power on / off, channel change, volume change, etc. to the multimedia device 700 through the IR module 714b as necessary.

센서부(717)는 자이로 센서(717a) 또는 가속도 센서(717b)를 구비할 수 있다. 자이로 센서(717a)는 리모트 컨트롤러(710)의 움직임에 관한 정보를 센싱할 수 있다. 일례로, 자이로 센서(717a)는 리모트 컨트롤러(710)의 동작에 관한 정보를 x, y, z 축을 기준으로 센싱할 수 있다. 가속도 센서(717b)는 리모트 컨트롤러(710)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 거리측정센서를 더 구비할 수 있으며, 이에 의해, 멀티미디어 디바이스(700)와의 거리를 센싱할 수 있다.The sensor unit 717 may include a gyro sensor 717a or an acceleration sensor 717b. The gyro sensor 717a may sense information about the movement of the remote controller 710. For example, the gyro sensor 717a may sense information about an operation of the remote controller 710 based on the x, y, and z axes. The acceleration sensor 717b may sense information about a moving speed of the remote controller 710. Meanwhile, the apparatus may further include a distance measuring sensor, whereby the distance with the multimedia device 700 may be sensed.

출력부(716)는 사용자 입력부(715)의 조작에 대응하거나 멀티미디어 디바이스(700)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 일례로, 출력부(716)는 사용자 입력부(715)가 조작되거나 무선 통신부(714)를 통하여 멀티미디어 디바이스(700)와 신호가 송수신 되면 점등되는 LED 모듈(716a), 진동을 발생하는 진동 모듈(716b), 음향을 출력하는 음향 출력 모듈(716c), 또는 영상을 출력하는 디스플레이 모듈(716d)을 구비할 수 있다.The output unit 716 may output a video or audio signal corresponding to a manipulation of the user input unit 715 or corresponding to a signal transmitted from the multimedia device 700. For example, the output unit 716 is an LED module 716a that is turned on when the user input unit 715 is manipulated or a signal is transmitted and received with the multimedia device 700 through the wireless communication unit 714, and the vibration module 716b generating vibration. ), A sound output module 716c for outputting sound, or a display module 716d for outputting an image.

전원공급부(711)는 리모트 컨트롤러(710)의 각 구성요소에 전원을 공급한다. 전원공급부(711)는 리모트 컨트롤러(710)가 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로써 전원 낭비를 줄일 수 있다. The power supply unit 711 supplies power to each component of the remote controller 710. The power supply unit 711 may reduce power waste by stopping power supply when the remote controller 710 does not move for a predetermined time.

저장부(712)는 리모트 컨트롤러(710)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다. 그리고, 제어부(713)는 리모트 컨트롤러(710)의 제어에 관련된 제반사항을 제어한다. 예를 들어, 상기 제어부(713)는, 사용자 입력부(715)의 소정 키 조작에 대응하는 신호 또는 센서부(717)에서 센싱한 리모트 컨트롤러(710)의 움직임에 대응하는 신호를 무선 통신부(714)를 통하여 멀티미디어 디바이스(700)로 전송할 수 있다.The storage unit 712 may store various types of programs, application data, and the like necessary for controlling or operating the remote controller 710. The controller 713 controls various items related to the control of the remote controller 710. For example, the controller 713 may transmit a signal corresponding to a predetermined key operation of the user input unit 715 or a signal corresponding to the movement of the remote controller 710 sensed by the sensor unit 717. It may be transmitted to the multimedia device 700 through.

도 8은 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제1실시예를 도시한 도면이다. 도 8에 도시된 멀티미디어 디바이스(800)는 전술한 도 1 내지 도 3을 참조하여 해석할 수 있으며, 리모트 컨트롤러(820)는 전술한 도 6 및 도 7을 참조하여 해석할 수 있다.8 is a diagram illustrating a first embodiment in which a menu screen according to an embodiment of the present invention is implemented. The multimedia device 800 illustrated in FIG. 8 may be interpreted with reference to FIGS. 1 to 3, and the remote controller 820 may be interpreted with reference to FIGS. 6 and 7.

도 8은, 라이브 방송을 보다가 메뉴 화면으로 변경된 경우의 도면이다. 또한, 도 8은 그래피컬 데이터와 비디오 데이터가 믹싱된 상태로 동시에 디스플레이 됨에 일특징이 있다. 나아가, 라이브 방송을 보다 메뉴 화면으로 변경된 경우를, 도 8에서 예시하였으나, 비디오 디코더가 2개 있는 경우 또는 디코딩 상태로 비디오 클립내 복수의 비디오 데이터들이 저장되어 있는 경우에는, 라이브 방송과 함께 비디오 UI 를 구현하는 것이 가능하다.8 is a diagram when a live broadcast is changed to a menu screen. In addition, FIG. 8 is characterized in that graphical data and video data are simultaneously displayed in a mixed state. Furthermore, although the case where the live broadcast is changed to the menu screen is illustrated in FIG. 8, when there are two video decoders or when a plurality of video data in the video clip is stored in the decoding state, the video UI is accompanied by the live broadcast. It is possible to implement

한편, 도 8 내지 도 10은 모두 방송 데이터의 디코딩을 중지하고 비디오 UI 및 상기 비디오 UI와 연동되는 그래픽 데이터를 출력하는 실시예들을 도시하였으나, 방송 데이터의 디코딩을 유지하면서 오버레이된 형태로 비디오 UI 를 출력하는 실시예도 가능하며, 이는 전술한 도 3을 참조하여 이해할 수가 있다.8 to 10 illustrate embodiments of stopping decoding of broadcast data and outputting a video UI and graphic data linked with the video UI, but the video UI is overlaid while maintaining decoding of the broadcast data. An output embodiment is also possible, which can be understood with reference to FIG. 3 above.

도 8의 (a)에 도시된 바와 같이, 비디오 UI 를 실행한 경우 그래픽 데이터 및 비디오 클립의 메인 화면이 동시에 출력된다. 우선, 6개의 그래픽 데이터 영역들(801, 802, 803, 804, 805, 806)은 리모트 컨트롤러(820)에 의해 선택 가능한 영역이다. 나아가, 각각의 그래픽 데이터 영역은 비디오 클립내 비디오 데이터 중 특정 구간과 맵핑되어 있다. 이에 대해서는 도 4 및 도 5를 참조하여 전술한 바 있다.As shown in FIG. 8A, when the video UI is executed, graphic data and a main screen of a video clip are simultaneously output. First, the six graphic data areas 801, 802, 803, 804, 805, 806 are areas selectable by the remote controller 820. Furthermore, each graphic data area is mapped to a specific section of video data in the video clip. This has been described above with reference to FIGS. 4 and 5.

예를 들어, 제2기능(function 2)의 그래픽 데이터 영역은, 제1비디오 데이터(810)와 맵핑되어 있는 것으로 가정한다. 따라서, 리모트 컨트롤러의 모션에 따라 움직이는 피드백 인디케이터(811)(예를 들어, 화살표)가 전술한 제2기능의 그래픽 데이터 영역(804)에 위치하는 경우, 도 8의 (b)에 도시된 바와 같이 특정 모형의 비디오 데이터가 제1위치 영역(850)에서 제2위치 영역(860)으로 이동한다. 종래 기술에 의하면, 고정된 UI 내지는 해상도가 극히 낮은 UI 만을 제공하는 문제점이 있었다.For example, it is assumed that the graphic data area of the second function 2 is mapped to the first video data 810. Therefore, when the feedback indicator 811 (for example, an arrow) moving in accordance with the motion of the remote controller is located in the graphic data area 804 of the second function described above, as shown in FIG. 8 (b). Video data of a particular model is moved from the first location area 850 to the second location area 860. According to the prior art, there is a problem of providing only a fixed UI or a UI having extremely low resolution.

도 2 또는 도 3에 도시된 OSD 생성부에 의해 생성된 그래픽 데이터와, 비디오 디코더에 의해 디코딩된 비디오 데이터는, 도 2 또는 도 3에 도시된 믹서에 의해 믹싱되도록 설계하며, 따라서, 도 8에 도시된 바와 같이 그래픽 데이터와 비디오 데이터가 오버레이된 형태 또는 각각의 구별된 영역에서 디스플레이 되는 것이 가능하다.Graphic data generated by the OSD generator shown in FIG. 2 or FIG. 3 and video data decoded by the video decoder are designed to be mixed by the mixer shown in FIG. 2 or FIG. As shown, it is possible for graphic data and video data to be displayed in an overlaid form or in each distinct area.

그리고, 비디오 UI 가 실행되면서, 전술한 제2기능이 동시에 실행될 수도 있고, 또는 상기 비디오 클립내 특정 구간이 모두 실행된 후 전술한 제2기능이 실행되도록 하는 것도 모두 본 발명의 권리범위에 속한다. 보다 구체적으로 예를 들어 설명하면, 도 5에 도시된 바와 같이 0-1/6초 동안 제1비디오 데이터가 플레이 된 후, 맵핑된 제1기능이 실행되도록 설계할 수도 있고, 또는 제1비디오 데이터가 플레이 됨과 동시에 맵핑된 제1기능이 실행되도록 설계 가능하다.In addition, while the video UI is executed, the above-described second function may be executed at the same time, or the above-described second function is executed after all of the specific sections in the video clip are included in the scope of the present invention. More specifically, for example, as shown in FIG. 5, after the first video data is played for 0-1 / 6 seconds, the mapped first function may be executed, or the first video data may be executed. Can be designed so that the mapped first function is executed at the same time.

도 9는 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제2실시예를 도시한 도면이다.9 is a view showing a second embodiment implemented a menu screen according to an embodiment of the present invention.

도 9의 (a)에 도시된 바와 같이, 비디오 UI 를 실행한 경우 그래픽 데이터 및 비디오 클립의 메인 화면이 동시에 출력된다. 우선, 6개의 그래픽 데이터 영역들(901, 902, 903, 904, 905, 906)은 리모트 컨트롤러(920)에 의해 선택 가능한 영역이다. As shown in FIG. 9A, when the video UI is executed, graphic data and a main screen of a video clip are simultaneously output. First, six graphic data areas 901, 902, 903, 904, 905, and 906 are areas selectable by the remote controller 920.

예를 들어, 제3기능(function 3)의 그래픽 데이터 영역은, 제2비디오 데이터(909)와 맵핑되어 있는 것으로 가정한다. 따라서, 리모트 컨트롤러의 모션에 따라 움직이는 피드백 인디케이터(911)(예를 들어, 화살표)가 전술한 제3기능의 그래픽 데이터 영역(905)에 위치하는 경우, 도 9의 (b)에 도시된 바와 같이 특정 모형의 제스쳐가 제1위치 영역(950)에서 제2위치 영역(960)을 거쳐, 최종 제3위치 영역(970)으로 이동한다. 전술하여 설명한 바와 같이, 비디오 UI 가 실행되면서, 전술한 제3기능이 동시에 실행될 수도 있고, 또는 상기 비디오 클립내 특정 구간이 모두 실행된 후 전술한 제3기능이 실행되도록 설계한다.For example, it is assumed that the graphic data area of the third function 3 is mapped to the second video data 909. Therefore, when the feedback indicator 911 (for example, an arrow) moving in accordance with the motion of the remote controller is located in the graphic data area 905 of the third function described above, as shown in FIG. 9B. The gesture of the specific model moves from the first location area 950 via the second location area 960 to the final third location area 970. As described above, while the video UI is executed, the above-described third function may be executed at the same time, or the above-described third function is executed after all the specific sections in the video clip are executed.

도 10은 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제3실시예를 도시한 도면이다. 이전 도 8 및 도 9에서는, 특정 그래픽 영역만을 선택한 경우, 특정 그래픽 영역에 대응하는 비디오 클립내 특정 구간만 실행되는 실시예를 설명하였다. 이하, 도 10에서는 본 발명의 일실시예에 의한 리모트 컨트롤러를 이용하여, 특정 그래픽 데이터를 선택한 다음 다른 그래픽 데이터를 선택한 경우의 실시예를 설명하도록 하겠다.FIG. 10 is a diagram illustrating a third embodiment in which a menu screen according to an embodiment of the present invention is implemented. 8 and 9, when only a specific graphic region is selected, an embodiment in which only a specific section in a video clip corresponding to the specific graphic region is executed is described. Hereinafter, an embodiment in the case where specific graphic data is selected and then other graphic data is selected using a remote controller according to an embodiment of the present invention will be described.

우선, 도 10의 (a)에 도시된 바와 같이, 본 발명의 일실시예에 의한 멀티미디어 디바이스(1000)는 6개의 그래픽 데이터 영역(1001, 1002, 1003, 1004, 1005, 1006)을 스크린 상에 출력한다. 이 때, 각 그래픽 데이터 영역은 리모트 컨트롤러(1020)에 의해 선택 가능하다.First, as shown in FIG. 10A, the multimedia device 1000 according to an embodiment of the present invention displays six graphic data areas 1001, 1002, 1003, 1004, 1005, and 1006 on a screen. Output At this time, each graphic data area can be selected by the remote controller 1020.

또한, 4개의 그래픽 데이터 영역들(1003, 1004, 1005, 1006)은, 특정 비디오 데이터(1007, 1008, 1009, 1010, 1011)과 맵핑되어 있는 것으로 가정한다. 예를 들어, 상기 리모트 컨트롤러(1020)의 피드백 인디케이터(1012)가 제2기능을 표시하는 그래픽 데이터 영역(1004)에 일정 시간만 위치한 경우, 비디오 클립내 특정 구간이 실행되다가 멈춘다(1010-->1011). 즉, 상기 피드백 인디케이터(1012)가 다른 그래픽 데이터 영역으로 이동한 경우를 가정하겠다.In addition, it is assumed that four graphic data regions 1003, 1004, 1005, and 1006 are mapped to specific video data 1007, 1008, 1009, 1010, and 1011. For example, when the feedback indicator 1012 of the remote controller 1020 is located only a predetermined time in the graphic data area 1004 displaying the second function, a specific section in the video clip is executed and stops (1010->). 1011). That is, assume that the feedback indicator 1012 is moved to another graphic data area.

예컨대, 도 10의 (b)에 도시된 바와 같이, 리모트 컨트롤러(1030)의 인디케이터가 제1위치(1040)에서 제2위치(1050)로 이동한 경우를 가정하겠다. 즉, 제2기능을 표시하는 그래픽 데이터 영역에서 제3기능을 표시하는 그래픽 데이터 영역으로 이동된 경우이다.For example, as shown in (b) of FIG. 10, it will be assumed that the indicator of the remote controller 1030 moves from the first position 1040 to the second position 1050. That is, the case is moved from the graphic data area displaying the second function to the graphic data area displaying the third function.

따라서, 상기 제2기능에 대응하는 비디오 클립내 특정 구간의 디코딩 및 재생을 멈추고(1060-->1070), 상기 제3기능에 대응하는 비디오 클립내 특정 구간의 디코딩 및 재생을 개시한다(1080-->1090).Accordingly, decoding and playback of the specific section in the video clip corresponding to the second function is stopped (1060-> 1070), and decoding and playback of the specific section in the video clip corresponding to the third function are started (1080-). -> 1090).

특히, 도 4 및 도 5a에서 전술한 인덱스 정보를 이용하므로, 특정 비디오 데이터를 실행하다가 다른 비디오 데이터를 실행하여도 처리 속도가 제고될 수 있는 장점이 있다.In particular, since the index information described above with reference to FIGS. 4 and 5A is used, processing speed can be improved even when executing specific video data and executing other video data.

나아가, 이와 같은 비디오 UI 를 이용하는 경우, 시각적으로 고해상도의 화면을 제공하므로, 사용자가 특정 기능들에 대해 자연스럽게 익숙해 지고 이용의 액세스 시간을 단축할 수 있는 장점이 있다.Furthermore, when using such a video UI, since a visually high resolution screen is provided, the user may be naturally familiar with specific functions and may shorten the access time of use.

도 11은 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어 방법의 제1실시예를 도시한 플로우 차트이다. 이하, 도 1, 도2 그리고 도 11 등을 참조하여 비디오 디코더를 한개 채택한 경우의 비디오 UI 구현 프로세스를 설명하면 다음과 같다.11 is a flowchart illustrating a first embodiment of a control method of processing graphic data and video data according to an embodiment of the present invention. Hereinafter, a video UI implementation process in the case where one video decoder is adopted will be described with reference to FIGS. 1, 2, 11, and the like.

본 발명의 일실시예에 의한 멀티미디어 디바이스는, 방송 관련 데이터를 디코딩 한다(S1101). 디코딩된 비디오 데이터는 스크린을 통해 출력되고, 디코딩된 오디오 데이터는 스피커를 통해 출력된다.The multimedia device according to an embodiment of the present invention decodes broadcast related data (S1101). The decoded video data is output through the screen, and the decoded audio data is output through the speaker.

또한, 리모트 컨트롤러를 통해, 비디오 UI 를 실행하는 명령을 수신한다(S1102). 예를 들어, 단축키 버튼 또는 화면상의 메뉴 아이템을 이용하여 실행 가능하다.In addition, via the remote controller, a command for executing the video UI is received (S1102). For example, it can be executed using a shortcut button or an on-screen menu item.

나아가, 상기 방송 관련 비디오 디코딩을 중지하고(S1103), 특정 기능과 맵핑된 그래픽 영역을 선택하는 신호를 수신한다(S1104). 예를 들어, 도 6 및 도 7에서 전술하여 설명한 리모트 컨트롤러가 이용될 수도 있다.Furthermore, the broadcast-related video decoding is stopped (S1103), and a signal for selecting a graphic region mapped with a specific function is received (S1104). For example, the remote controller described above in FIGS. 6 and 7 may be used.

도 4 및 도 5에서 전술하여 설명한 인덱스 정보를 이용하여, 전체 비디오 클립 중 특정 구간의 비디오 데이터를 디텍트 한다(S1105). 그리고, 상기 특정 구간의 비디오 데이터에 대한 디코딩을 실행한다(S1106).Using the index information described above with reference to FIGS. 4 and 5, video data of a specific section of all video clips is detected (S1105). Then, decoding is performed on the video data of the specific section (S1106).

나아가, 본 발명의 일실시예에 의한 비디오 클립을 구성하는 복수개의 비디오 데이터들은 예컨대, 디코딩된 상태로 메모리에 저장되었다가 추후 추출될 수도 있고 또는 인코딩된 상태로 저장되어 비디오 클립의 비디오 데이터를 매번 디코딩하여 사용할 수도 있으며, 전술한 실시예들 모두 본 발명의 권리범위에 속한다.Furthermore, the plurality of video data constituting the video clip according to an embodiment of the present invention may be stored in a memory in a decoded state and extracted later, or stored in an encoded state to store the video data of the video clip every time. It may be used after decoding, all of the above-described embodiments are within the scope of the present invention.

도 12는 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어 방법의 제2실시예를 도시한 플로우 차트이다. 이하, 도 1, 도3 그리고 도 12 등을 참조하여 비디오 디코더를 2개 채택한 경우의 비디오 UI 구현 프로세스를 설명하면 다음과 같다. 일정 영역의 그래픽 데이터가 선택된 경우, 특정 비디오 데이터가 제한적으로 재생되는 과정을 비디오 UI 라고 이해할 수도 있다.12 is a flowchart illustrating a second embodiment of a control method of processing graphic data and video data according to an embodiment of the present invention. Hereinafter, a video UI implementation process in the case of adopting two video decoders will be described with reference to FIGS. 1, 3, 12 and the like. When graphic data of a certain area is selected, a process of restricting reproduction of specific video data may be understood as a video UI.

본 발명의 일실시예에 의한 멀티미디어 디바이스는, 방송 관련 데이터를 디코딩 한다(S1201). 디코딩된 비디오 데이터는 스크린을 통해 출력되고, 디코딩된 오디오 데이터는 스피커를 통해 출력된다.The multimedia device according to an embodiment of the present invention decodes broadcast related data (S1201). The decoded video data is output through the screen, and the decoded audio data is output through the speaker.

또한, 리모트 컨트롤러를 통해, 비디오 UI 를 실행하는 명령을 수신한다(S1202). 예를 들어, 단축키 버튼 또는 화면상의 메뉴 아이템을 이용하여 실행 가능하다.In addition, via the remote controller, a command for executing the video UI is received (S1202). For example, it can be executed using a shortcut button or an on-screen menu item.

도 11과 달리, 전술한 방송 관련 비디오 디코딩을 중지하지 않고, 도 4 및 도 5에서 전술하여 설명한 인덱스 정보를 이용하여, 전체 비디오 클립 중 특정 구간의 비디오 데이터에 대한 디코딩을 실행한다(S1203).Unlike FIG. 11, without stopping the above-described broadcast related video decoding, decoding of video data of a specific section of all video clips is performed using the index information described above with reference to FIGS. 4 and 5 (S1203).

디코딩된 방송 데이터 및 비디오 클립내 특정 구간의 비디오 데이터를 합성하여 출력한다(S1204). 그리고, 방송 화면과 비디오 UI 가 오버레이(overlay)된 형태로 디스플레이 하거나 또는 별도의 구별된 구획내에서 각각 디스플레이 되도록 설계한다(S1205).The decoded broadcast data and video data of a specific section in the video clip are synthesized and output (S1204). Then, the broadcast screen and the video UI are displayed in an overlayed form or are designed to be displayed in separate sections (S1205).

그리고, 도 13은 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어방법의 제3실시예를 도시한 플로우 차트이다. 이하, 도 10 및 도 13 등을 참조하여, 비디오 클립내 특정 구간을 디코딩 하다가 다른 특정 구간을 디코딩 하는 프로세스를 설명하겠다.13 is a flowchart illustrating a third embodiment of a control method for processing graphic data and video data according to an embodiment of the present invention. Hereinafter, a process of decoding a specific section in a video clip while decoding another specific section will be described with reference to FIGS. 10 and 13.

도 13에서는 도 11에 도시된 S1101 내지 S1106 단계가 실행되는 경우를 가정하였으나, 도 11 대신 도 12에 도시된 S1201 내지 S1205 단계가 실행되는 경우를 전제할 수도 있다.In FIG. 13, it is assumed that the steps S1101 to S1106 shown in FIG. 11 are executed, but it may be assumed that the steps S1201 to S1205 shown in FIG. 12 are executed instead of FIG. 11.

현재 실행되고 있는 제1기능과 다른 제2기능과 맵핑되어 있는 그래픽 영역을 선택한다(S1301). 예를 들어, 도 10의 (b)에 도시된 바와 같이, 특정 그래픽 영역(1040)을 선택하다가 다른 그래픽 영역(1050)을 선택한 경우이다.The graphic area mapped with the second function different from the first function currently being executed is selected (S1301). For example, as shown in (b) of FIG. 10, a specific graphic area 1040 is selected while another graphic area 1050 is selected.

이 때, 인덱스 부가 정보를 이용하여, 선택된 그래픽 영역에 해당하는 비디오 클립내 구간 정보를 추출한다(S1302). 그리고, 최초 선택되었던 제1그래픽 영역의 비디오 데이터에 대한 디코딩을 중지하고, 현재 선택된 제2그래픽 영역의 비디오 데이터에 대한 디코딩을 실행한다.At this time, the section information in the video clip corresponding to the selected graphic area is extracted using the index additional information (S1302). Then, the decoding of the video data of the first selected graphic area is stopped, and the decoding of the video data of the currently selected second graphic area is performed.

종래 기술에 따라, 6개의 캐릭터가 리모콘의 포커스(focus)에 따라 움직이는 UI를 구성한다면, 우선 그래픽으로 표현함에 있어 기술적인 한계가 있고, 개발 비용도 높고, 그래픽 관련 요구되는 품질이 높을 수록 애니메이션(Animation)속도가 문제 된다.According to the prior art, if the six characters constitute the UI moving according to the focus of the remote control, there is a technical limitation in the first graphical representation, the development cost is high, and the higher the quality required for graphics, the animation ( Animation) Speed is a problem.

반면, 도 1 내지 도 13에서 상세히 서술한 바와 같이, 비디오 디코더의 개수와 관계 없이 적용할 수 있으며, 인덱스 정보를 이용하여 빠른 UI 전환이 가능한 비디오 UI 를 구현시, 전술한 종래 기술의 문제점을 모두 해결할 수가 있다.On the other hand, as described in detail with reference to Figures 1 to 13, it can be applied regardless of the number of video decoder, when implementing a video UI capable of fast UI switching using the index information, all the problems of the prior art described above I can solve it.

나아가, 설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시예들을 병합하여 새로운 실시예를 구현하도록 설계하는 것도 가능하다. 그리고, 당업자의 필요에 따라, 이전에 설명된 실시예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다.Further, for convenience of description, the drawings are divided and described, but it is also possible to design a new embodiment by merging the embodiments described in each drawing. And according to the needs of those skilled in the art, it is also within the scope of the present invention to design a computer-readable recording medium having a program recorded thereon for executing the embodiments described above.

본 발명에 따른 디스플레이 장치 및 그 동작 방법은 상기한 바와 같이 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.The display device and its operation method according to the present invention can not be limitedly applied to the configuration and method of the embodiments described above, the embodiments are all or part of each embodiment so that various modifications can be made It may alternatively be configured in combination.

한편, 본 발명의 디스플레이 장치의 동작방법은 디스플레이 장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.On the other hand, the operating method of the display device of the present invention can be implemented as a processor-readable code on a processor-readable recording medium provided in the display device. The processor-readable recording medium includes all kinds of recording apparatuses in which data that can be read by the processor is stored. Examples of the recording medium that can be read by the processor include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and may also be implemented in the form of a carrier wave such as transmission over the Internet . The processor-readable recording medium can also be distributed over network coupled computer systems so that the processor-readable code is stored and executed in a distributed fashion.

또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시예들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안 될 것이다.In addition, although the preferred embodiment of the present invention has been shown and described above, the present invention is not limited to the above-described specific embodiment, the technical field to which the invention belongs without departing from the spirit of the invention claimed in the claims. Of course, various modifications can be made by those skilled in the art, and these modifications will not be individually understood from the technical spirit or the prospect of the present invention.

그리고, 당해 명세서에서는 설명의 편의상 물건 발명과 방법 발명을 각각 구별하여 설명하였다. 그러나, 이와 같은 설명의 순서로 본 발명의 권리범위가 제한되는 것은 아니며, 필요에 따라 물건 발명 및 방법 발명에 대한 각각의 설명은 보충적으로 적용될 수가 있다. In addition, in this specification, object invention and method invention were distinguished and demonstrated for convenience of description, respectively. However, the scope of the present invention is not limited in the order of the description, and each description of the object invention and the method invention may be supplementarily applied as necessary.

201 : 역다중화부
202 : 스윗칭 모듈
203 : 비디오 디코더
204 : OSD 생성부
205 : 믹서
206 : 프레임 레이트 변환부
207 : 포맷터
208 : 오디오 디코더
209 : 오디오 프로세서201: demultiplexing unit
202: switching module
203: Video Decoder
204: OSD generation unit
205: Mixer
206: frame rate converter
207: formatter
208: Audio Decoder
209: audio processor

Claims

In the control method of a multimedia device for processing at least one or more video data,
Decoding encoded broadcast data received from the first external device;
Receiving a video clip from a second external device, wherein the video clip includes at least one video data and each video data is mapped to a specific function;
If graphic data indicating the specific function is selected, detecting corresponding video data;
Stopping decoding of the broadcast data and controlling the detected video data to be decoded; And
After decoding the video data, executing the specific function
Gt; a < / RTI >

The method of claim 1,
Decoding at least one video data included in the video clip in advance; And
Storing the decoded at least one video data in a memory
Further comprising the steps of:

The method of claim 1,
At least one video data included in the video clip is continuously connected based on time,
Each video data further includes index information for identifying the respective video data.

The method of claim 3,
The detecting step,
Identifying video data corresponding to graphic data indicating the specific function using the index information; And
Detecting the identified video data
Gt; a < / RTI >

5. The method of claim 4,
If graphic data indicating a first function is selected, decoding first video data corresponding to the first function using the index information; And
When graphic data indicating a second function is selected, decoding the first video data is stopped, and decoding second video data corresponding to the second function using the index information.
Executing decoding of the second video data after the decoding is completed;
Further comprising the steps of:

The method of claim 1,
The first external device corresponds to a broadcast station,
The second external device is a control method of a multimedia device corresponding to any one of a contents provider or an internet server.

A computer-readable recording medium having recorded thereon a program for executing the method according to any one of claims 1 to 6.

A multimedia device for processing at least one video data,
A first video decoder for decoding first video data included in the encoded broadcast data;
A network interface module for receiving a video clip from an external device, the video clip including at least one second video data, each second video data mapped to a particular function;
An OSD generator for generating graphical data indicative of the particular function;
A user interface for receiving a signal for selecting the graphic data;
A detector for detecting second video data corresponding to the selected graphic data;
A second video decoder to decode the detected second video data;
A mixing module for mixing the first video data, the second video data, and the graphic data; And
A controller for controlling the at least one mixed data to be output on a screen
Multimedia device comprising a.

9. The method of claim 8,
The second video decoder,
And pre-decode at least one or more second video data included in the video clip.

10. The method of claim 9,
The multimedia device comprising:
System memory for storing at least one or more second video data decoded by the second video decoder
Lt; / RTI >

9. The method of claim 8,
At least one second video data included in the video clip is continuously connected based on time.
Each second video data further includes index information identifying the respective second video data.

The method of claim 11,
The detector,
And use the index information to identify video data corresponding to graphic data indicative of the particular function, and to detect the identified video data.

The method of claim 12,
The user interface includes:
Multimedia device designed to communicate with a remote controller designed to change the position of the feedback signal on the screen in response to motion.

The method of claim 13,
The controller,
If the position of the feedback signal is located in the first graphic data area, control to decode second video data corresponding to the first graphic data area;
When the position of the feedback signal is changed from the first graphic data area to the second graphic data area, the decoding of the second video data corresponding to the first graphic data area is stopped, and the second graphic data area corresponds to the second graphic data area. A multimedia device that controls to decode second video data.

9. The method of claim 8,
The multimedia device comprising:
Multimedia device corresponding to at least one of a network TV, IPTV or web TV.