KR101871709B1 - 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스 - Google Patents

적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스 Download PDF

Info

Publication number
KR101871709B1
KR101871709B1 KR1020110106237A KR20110106237A KR101871709B1 KR 101871709 B1 KR101871709 B1 KR 101871709B1 KR 1020110106237 A KR1020110106237 A KR 1020110106237A KR 20110106237 A KR20110106237 A KR 20110106237A KR 101871709 B1 KR101871709 B1 KR 101871709B1
Authority
KR
South Korea
Prior art keywords
video
video data
data
graphic
graphic data
Prior art date
Application number
KR1020110106237A
Other languages
English (en)
Other versions
KR20130042113A (ko
Inventor
강승우
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020110106237A priority Critical patent/KR101871709B1/ko
Publication of KR20130042113A publication Critical patent/KR20130042113A/ko
Application granted granted Critical
Publication of KR101871709B1 publication Critical patent/KR101871709B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스이 개시된다. 본 발명의 일실시예는, 제1외부 디바이스로부터 수신한 인코딩된 방송 데이터를 디코팅 하는 단계와, 제2외부 디바이스로부터 비디오 클립을 수신하는 단계와, 상기 특정 기능을 표시하는 그래픽 데이터가 선택된 경우, 대응하는 비디오 데이터를 디텍트 하는 단계와, 상기 방송 데이터의 디코딩을 중지하고, 상기 디텍트된 비디오 데이터가 디코딩 되도록 컨트롤 하는 단계와, 그리고 상기 비디오 데이터를 디코팅 한 후, 상기 특정 기능을 실행하는 단계를 포함한다.

Description

적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스{MULTIMEDIA DEVICE FOR PROCESSING AT LEAST ONE OF VIDEO DATA AND METHOD FOR CONTROLLING THE SAME}
본 발명은 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스에 관한 것으로서, 보다 상세하게는 해상도가 향상된 유저 인터페이스(User Interface)를 제공하는 기술에 대한 것이다.
최근 스마트 TV, 네트워크 TV, IPTV, 웹 TV 등의 도입으로 인하여, 다양한 기능의 유저 인터페이스에 대한 개발이 이루어 지고 있다. 전술한 유저 인터페이스(User Interface)라 함은, 예를 들어 사용자가 직관적으로 무엇을 하면 어떤 기능이 실행되는지 쉽게 예측하도록 도와 주는 개념을 의미한다.
다만, 종래 기술에 의한 유저 인터페이스는 단순 그래픽 데이터만으로 구현하는 경우가 대부분이었다. 즉, 종래 기술에 의하면, 썸네일 이미지 등 고정된 정지 영상만을 사용하거나, 해상도가 떨어지는 유저 인터페이스만을 사용하는 문제점이 있었다.
또한, 전술한 문제점으로 인하여, 사용자는 자신이 원하는 유저 인터페이스에 접근하거나 익숙해 지는데 많은 시간 및 노력이 필요한 한계가 있어왔다. 나아가, 프로그래밍을 통하여 개선된 유저 인터페이스를 개발하는 경우 현저한 개발 비용이 발생하는 문제점도 있다.
본 발명의 일실시예가 이루고자 하는 기술적 과제는, 비디오 데이터를 이용하여 유저 인터페이스를 생성하는 솔루션을 제공하는 것이다.
또한, 본 발명의 다른 일실시예가 이루고자 하는 기술적 과제는, 하나의 비디오 클립내 포함된 복수개의 비디오 데이터 중 특정 기능에 맵핑된 비디오 데이터에 신속하게 액세스할 수 있는 프로토콜을 정의하는 것이다.
그리고, 본 발명의 또 다른 일실시예가 이루고자 하는 기술적 과제는, 비디오 디코더의 개수와 관계없이 비디오 유저 인터페이스(UI)를 구현할 수 있는 시스템을 제공하는 것이다.
본 발명의 일실시예에 의한 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법은, 제1외부 디바이스로부터 수신한 인코딩된 방송 데이터를 디코팅 하는 단계와, 제2외부 디바이스로부터 비디오 클립을 수신하는 단계(상기 비디오 클립은 적어도 하나 이상의 비디오 데이터를 포함하고 각각의 비디오 데이터는 특정 기능에 맵핑되어 있음)와, 상기 특정 기능을 표시하는 그래픽 데이터가 선택된 경우, 대응하는 비디오 데이터를 디텍트 하는 단계와, 상기 방송 데이터의 디코딩을 중지하고, 상기 디텍트된 비디오 데이터가 디코딩 되도록 컨트롤 하는 단계와, 그리고 상기 비디오 데이터를 디코팅 한 후, 상기 특정 기능을 실행하는 단계를 포함한다.
그리고, 본 발명의 일실시예에 의한 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스는, 인코딩된 방송 데이터에 포함된 제1비디오 데이터를 디코팅 하는 제1비디오 디코더와, 외부 디바이스로부터 비디오 클립을 수신하는 네트워크 인터페이스 모듈(상기 비디오 클립은 적어도 하나 이상의 제2비디오 데이터를 포함하고 각각의 제2비디오 데이터는 특정 기능에 맵핑되어 있음)과, 상기 특정 기능을 표시하는 그래픽 데이터를 생성하는 OSD 제너레이터와, 상기 그래픽 데이터를 선택하는 신호를 수신하는 유저 인터페이스와, 상기 선택된 그래픽 데이터에 대응하는 제2비디오 데이터를 디텍트 하는 디텍터와, 상기 디텍트된 제2비디오 데이터를 디코딩 하는 제2비디오 디코더와, 상기 제1비디오 데이터, 상기 제2비디오 데이터 및 상기 그래픽 데이터를 믹싱하는 믹싱 모듈과, 그리고 상기 믹싱된 적어도 하나 이상의 데이터가 스크린상에 출력되도록 제어하는 컨트롤러를 포함하도록 설계된다.
본 발명의 일실시예에 의하면, 비디오 데이터를 이용하여 유저 인터페이스를 생성하는 솔루션을 제공한다. 예컨대, 애니메이션(animation) 품질이 높은 경우에도 약 60hz 이상의 비디오 데이터 처리 속도가 보장된다.
또한, 본 발명의 다른 일실시예에 의하면, 하나의 비디오 클립내 포함된 복수개의 비디오 데이터 중 특정 기능에 맵핑된 비디오 데이터에 신속하게 액세스할 수가 있다.
그리고, 본 발명의 또 다른 일실시예에 의하면, 비디오 디코더(video decoder)의 개수와 관계없이 비디오 유저 인터페이스(UI)를 구현할 수 있는 시스템을 제공한다.
도 1은 본 발명의 일실시예에 의한 멀티미디어 디바이스의 전체 구성 요소를 도시한 블록도이다.
도 2는 도 1에 도시된 제어부의 일실시예를 상세히 도시한 도면이다.
도 3은 도 1에 도시된 제어부의 다른 일실시예를 상세히 도시한 도면이다.
도 4는 본 발명의 일실시예에 따른 하나의 비디오 클립에 포함된 복수의 비디오 데이터를 도시한 도면이다.
도 5a는 도 4에 도시된 복수의 비디오 데이터와 맵핑되어 있는 특정 기능을 나열하고 있는 도면이다.
도 5b는 도 5a에 도시된 제1비디오 데이터를 예시한 도면이다.
도 5c는 도 5a에 도시된 제2비디오 데이터를 예시한 도면이다.
도 5d는 도 5a에 도시된 제3비디오 데이터를 예시한 도면이다.
도 5e는 도 5a에 도시된 제4비디오 데이터를 예시한 도면이다.
도 5f는 도 5a에 도시된 제5비디오 데이터를 예시한 도면이다.
도 5g는 도 5a에 도시된 제6비디오 데이터를 예시한 도면이다.
도 6은 본 발명의 일실시예에 의한 멀티미디어 디바이스를 컨트롤 하는 리모트 컨트롤러의 외관을 도시한 도면이다.
도 7은 도 6에 도시된 리모트 컨트롤러의 내부 구성 모듈들을 보다 상세히 도시한 도면이다.
도 8은 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제1실시예를 도시한 도면이다.
도 9는 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제2실시예를 도시한 도면이다.
도 10은 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제3실시예를 도시한 도면이다.
도 11은 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어 방법의 제1실시예를 도시한 플로우 차트이다.
도 12는 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어 방법의 제2실시예를 도시한 플로우 차트이다.
그리고, 도 13은 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어방법의 제3실시예를 도시한 플로우 차트이다.
이하에서는 도면들을 참조하여 본 발명의 실시예들을 더욱 상세하게 설명하도록 하겠다.
이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함을 고려하여 부여되는 것으로서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.
한편, 본 명세서에서 기술되는 멀티미디어 디바이스는, 예컨대 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 전자 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린, 터치 패드 또는 공간 리모컨 등보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.
따라서, 본 발명에서 기술되는 멀티미디어 디바이스는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 상기 멀티미디어 디바이스는, 보다 구체적으로 예를 들면, 인터넷 TV, IPTV(internet protocol television), 네트워크 TV, HBBTV(hybrid broadcast broadband television), 스마트 TV 및 오픈하이브리드TV(OHTV) 등이 될 수 있으며, 경우에 따라 스마트폰, PC 및 가전기기에도 적용 가능하다.
나아가, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시예를 상세하게 설명하지만, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다.
본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.
도 1은 본 발명의 일실시예에 의한 멀티미디어 디바이스의 전체 구성 요소를 도시한 블록도이다. 도 1에 도시된 바와 같이, 본 발명의 일실시예에 의한 멀티미디어 디바이스(100)는, 방송 수신 모듈(101), 복조부(104), 네트워크 인터페이스(102), 외부 장치 인터페이스(103), 메모리(105), 제어부(106), 비디오 출력부(107), 오디오 출력부(108), 전원 공급부(109) 그리고 사용자 인터페이스(110) 등을 포함하여 이루어 진다. 한편, 상기 멀티미디어 디바이스(100)는, 리모트 컨트롤러(120)와 데이터 통신이 이루어 지도록 설계되어 있으며, 상기 리모트 컨트롤러(120)에 대해서는 도 6 및 도 7을 참조하여 상세히 후술하도록 하겠다.
상기 방송 수신 모듈(101)은, 예컨대 RF 튜너로 설계할 수도 있고 또는 STB 등 외부 디바이스로부터 방송 데이터를 수신하는 인터페이스로 설계 가능하다. 상기 복조부(104)는, 방송 수신 모듈(101)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다.
외부장치 인터페이스(103)는 외부 장치와 멀티미디어 디바이스(100)간 데이터 통신이 가능하게 하는 인터페이스이다. 외부장치 인터페이스(103)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북), STB 등과 같은 외부 장치와 유/무선으로 접속될 수 있다.
네트워크 인터페이스(102)는, 멀티미디어 디바이스(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스(102)는, 유선 네트워크와의 접속을 위해, 예를 들어 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, 예를 들어 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다.
네트워크 인터페이스(102)는, 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다.
메모리(105)는, 제어부(106) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수도 있다. 또한, 메모리(105)는 외부장치 인터페이스(103) 또는 네트워크 인터페이스(102)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 메모리(105)는, 예를 들어 다양한 OS, 미들웨어 및 플랫폼을 저장하고 있다.
사용자 인터페이스(110)는, 사용자가 입력한 신호를 제어부(106)로 전달하거나, 제어부(106)로부터의 신호를 외부 디바이스(예를 들어, 리모트 컨트롤러(120))로 전송한다. 예를 들어, 사용자 인터페이스(110)는, RF(Radio Frequency) 통신 방식, 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 리모트 컨트롤러(120)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(106)로부터의 제어 신호를 리모트 컨트롤러(120)로 송신한다.
상기 제어부(106)는, 방송 수신 모듈(101), 복조부(104), 네트워크 인터페이스(102) 또는 외부장치 인터페이스(103)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다. 상기 제어부(106)에 대해서는 도 2 및 도 3을 참조하여 보다 상세히 후술하도록 하겠다.
상기 비디오 출력부(107)는, 제어부(106)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스(103)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R, G, B 신호로 변환하여 구동 신호를 생성한다. 상기 비디오 출력부(107)는, PDP, LCD, OLED, 플렉시블 디스플레이 (flexible display), 3차원 디스플레이(3D display) 등이 가능하다. 상기 오디오 출력부(108)는, 제어부(106)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1채널 신호 또는 5.1채널 신호를 입력받아 음성으로 출력한다.
그리고, 전원 공급부(109)는, 멀티미디어 디바이스(100) 전반에 걸쳐 해당 전원을 공급한다. 특히, 시스템 온 칩(System On Chip, SOC)의 형태로 구현될 수 있는 제어부(106)와, 영상 표시를 위한 비디오 출력부(107) 및 오디오 출력을 위한 오디오 출력부(108)에 전원을 공급할 수 있다.
특히, 본 발명의 실시예와 관련하여 그래픽 데이터 및 비디오 데이터를 처리하여 새로운 방식의 유저 인터페이스를 구현하는 구체적인 과정을 설명하면 다음과 같다.
전술한 네트워크 인터페이스(102) 또는 외부 장치 인터페이스(103)를 통해, 비디오 UI 를 위한 비디오 클립을 수신하도록 설계된다. 본 발명의 일실시예에 의한 비디오 UI 용 비디오 클립은 적어도 하나의 비디오 데이터를 포함하도록 설계되어 있으며, 또한 각각의 비디오 데이터는 특정 기능에 맵핑되어 있도록 설계한다. 상기 비디오 클립에 대한 상세한 데이터 구조에 대해서는, 도 4 및 도 5를 참조하여 후술하도록 하겠다.
나아가, 본 발명의 다른 일실시예에 의하면, UI 로 사용될 비디오 클립은 미리 디코딩된 상태로 상기 메모리(105)에 저장된다. 이와 같이 설계하는 경우, 비디오 UI 의 구현 속도를 제고(improve, enhance) 할 수 있는 장점이 있다.
그리고, 본 발명의 또 다른 일실시예에 의하면, 전술한 비디오 클립을 상기 메모리(105)에 저장하지 않고, 실시간으로 수신하여 처리하는 것도 가능하다. 이와 같이 설계하는 경우, 메모리 효율성을 제고할 수 있는 효과가 있다.
특히, 본 발명에서 제안하는 비디오 UI 를 제공하기 위해서는 전술한 제어부(106)의 구성을 일부 변경할 필요가 있는 바, 이에 대해서는 도 2 및 도 3을 참조하여 설명하도록 하겠다.
도 2는 도 1에 도시된 제어부의 일실시예를 상세히 도시한 도면이다. 이하, 도 2를 참조하여, 비디오 디코더를 1개 보유하고 있는 멀티미디어 디바이스에 본 발명이 적용된 경우를 설명하도록 하겠다.
도 1에 도시된 제어부는, 도 2에 도시된 바와 같이 역다중화부(201), 스윗칭 모듈(202), 비디오 디코더(203), OSD 생성부(204), 믹서(205), 프레임레이트 변환부(206), 포맷터(207), 오디오 디코더(208) 그리고 오디오 프로세서(209) 등을 포함하여 이루어 진다. 물론, 이는 일실시예이며 본 발명의 권리범위는 특허청구범위에 의해 정해져야 한다.
상기 프레임 레이트 변환부(Frame Rate Conveter; FRC)(206)는, 입력되는 영상의 프레임 레이트를 변환할 수 있다. 예를 들어, 60Hz의 프레임 레이트를 120Hz 또는 240Hz로 변환한다. 그리고, 포맷터(207)는, 프레임 레이트 변환부(206)의 출력 신호를 입력받아, 비디오 출력부에 적합하도록 신호의 포맷을 변경하여 출력한다. 예를 들어, R, G, B 데이터 신호를 출력할 수 있으며, 이러한 R, G, B 데이터 신호는, 낮은 전압 차분 신호(Low voltage differential signaling, LVDS) 또는 mini-LVDS 로 출력될 수 있다.
특히, 본 발명의 일실시예에 의한 비디오 UI 를 구현하는 제어부를 상세히 설명하면 다음과 같다.
오디오 신호 및 비디오 신호를 포함하는 인코딩된 방송 데이터는, 역다중화부(201)로 수신된다. 상기 인코딩된 방송 데이터는, 제1외부 디바이스(예를 들어, 방송국, 서버 등)로부터 전송된다. 상기 비디오 디코더(203)는, 전술한 방송 데이터 중 비디오 신호를 디코딩 하도록 설계되고 오디오 디코더(208)는 전술한 방송 데이터 중 오디오 신호를 디코딩 하도록 설계된다. 또한, 오디오 프로세서(209)는 스피커에서 출력 가능한 오디오 데이터 포맷으로 변환하는 기능을 수행한다.
한편, 네트워크 인터페이스(102) 또는 외부 장치 인터페이스(103)를 통해, 제2외부 디바이스(예를 들어, CP 등)로부터 비디오 클립을 수신한다. 상기 비디오 클립은 적어도 하나 이상의 비디오 데이터를 포함하고 각각의 비디오 데이터는 특정 기능에 맵핑되어 있다. 전술한 비디오 클립에 대해서는, 도 4 및 도 5를 참조하여 상세히 후술하겠다.
나아가, 전술한 비디오 클립은 인코딩된 고화질의 동영상 데이터 포맷이므로, 전술한 비디오 디코더(203)를 통해 디코딩 프로세스가 이루어져야 한다. 따라서, 스윗칭 모듈(202)을 부가하여 방송 데이터의 비디오 신호 또는 비디오 UI 를 위한 비디오 데이터가 선택적으로 디코딩 되도록 설계하는 것도 본 발명의 일특징이다.
상기 OSD 생성부(204)는, 특정 기능을 표시하는 그래픽 데이터를 생성한다. 또한, 상기 믹서(205)는 전술한 OSD 생성부(204)에 의해 생성된 그래픽 데이터와 비디오 디코더(203)에서 디코딩된 비디오 데이터를 합성하여 동시에 출력 가능하도록 설계된다. 상기 OSD 생성부(204)에 의해 합성된 비디오 UI 의 구체적인 실시예에 대해서는 이하 도 8 내지 도 10을 참조하여 후술하겠다.
상기 특정 기능을 표시하는 그래픽 데이터가 선택된 경우, 제어부는 비디오 클립의 수많은 비디오 데이터 중에서 특정 비디오 데이터를 디텍트 한다. 보다 신속하게 특정 비디오 데이터를 디텍트 하는 방법에 대해서는 도 4 및 도 5를 참조하여 후술하겠다.
상기 스윗칭 모듈(202)의 제어에 따라, 상기 비디오 디코더(203)는 역다중화부(201)를 통해 수신되는 방송 데이터의 디코딩을 중지하고, 상기 디텍트된 비디오 데이터를 디코딩 한다. 상기 비디오 클립에 포함된 특정 비디오 데이터를 디코팅 한 후, 특정 기능을 실행하도록 설계된다.
예를 들어, 사용자가 채널-업(Channel-up)을 표시하는 그래픽 데이터를 선택한 경우, 이에 맵핑되어 있는 고화질의 비디오 영상이 출력된 후 채널 업 기능이 실행된다. 따라서, 종래 기술에 의한 고정된 이미지의 유저 인터페이스만을 제공하는 문제점을 해결할 수가 있다.
나아가, 본 발명의 다른 일실시예에 의한 멀티미디어 디바이스는, 전술한 비디오 클립에 포함된 적어도 하나 이상의 비디오 데이터를 미리 디코딩 하고, 디코딩된 적어도 하나 이상의 비디오 데이터를 시스템 메모리에 저장하도록 설계한다.
도 3은 도 1에 도시된 제어부의 다른 일실시예를 상세히 도시한 도면이다. 이하, 도 3을 참조하여, 비디오 디코더를 2개 보유하고 있는 멀티미디어 디바이스에 본 발명이 적용된 경우를 설명하도록 하겠다.
한편, 도 2와 중복되는 프레임레이트 변환부(307), 포맷터(308), 오디오 디코더(309) 그리고 오디오 프로세서(310)는 유사한 기능을 수행하는 바 상세한 설명을 생략하여도 당업자는 도 2 및 도 3을 참조하여 본 발명의 실시예를 구현할 수가 있다.
제1비디오 디코더(302)는, 인코딩된 방송 데이터에 포함된 제1비디오 데이터를 디코팅 한다. 네트워크 인터페이스(102)는, 외부 디바이스(예를 들어, 서버, CP 등)로부터 비디오 클립을 수신한다. 상기 비디오 클립은 적어도 하나 이상의 제2비디오 데이터를 포함하고 각각의 제2비디오 데이터는 특정 기능에 맵핑되어 있다. 전술한 비디오 클립에 대해서는, 도 4 및 도 5를 참조하여 후술하겠다.
OSD 생성부(304)는, 상기 특정 기능을 표시하는 그래픽 데이터를 생성하고, 사용자 인터페이스(110)는 상기 그래픽 데이터를 선택하는 신호를 수신한다.
상기 선택된 그래픽 데이터에 대응하는 제2비디오 데이터가 디텍트된 경우, 제2비디오 디코더(303)는, 상기 디텍트된 제2비디오 데이터를 디코딩 한다.
제1믹서(305)는, 디코딩된 상기 제1비디오 데이터 및 상기 제2비디오 데이터를 우선적으로 합성한다. 나아가, 제2믹서(306)는, 합성된 복수개의 비디오 데이터 및 OSD 생성부(304)에 의해 생성된 그래픽 데이터를 최종적으로 합성하여 출력한다.
따라서, 도 3에 도시된 실시예를 구현하는 경우, 도 2와 대비하여, 방송 데이터를 그대로 출력하면서 동시에 비디오 UI 를 구현할 수 있는 기술적 특유의 효과가 있다.
도 4는 본 발명의 일실시예에 따른 하나의 비디오 클립에 포함된 복수의 비디오 데이터를 도시한 도면이다.
본 발명의 일실시예에 의하면, 비디오 클립(video clip)을 씬별로 분할하여 비디오 데이터를 삽입한다. 또한, 각각의 비디오 데이터와 연동되는 그래픽 데이터를 추가 설계한다. 따라서, 사용자가 선택하는 그래픽 영역에 따라, 비디오 클립내에서 특정 구간만이 재생하는 것도 본 발명의 일특징이다.
도 4에 도시된 바와 같이, 하나의 비디오 클립이 6개의 애니메이션을 포함하도록 설계한다. 만약, 전체 비디오 클립이 1초라고 가정하면, 하나의 씬당 10 frame/sec 의 단위를 가진다.
또한, 비디오 클립 설계시, 신속한 씬(scene) 전환을 위하여 각 씬의 시작 시점에 i-Frame 을 삽입하여 인코딩 한다. 또는 신속한 검색(search)을 위하여, 비디오 데이터의 시작 부분에 인덱스(index) 정보를 추가 삽입하여 인코딩 한다.
도 5a는 도 4에 도시된 복수의 비디오 데이터와 맵핑되어 있는 특정 기능을 나열하고 있는 도면이다.
예를 들어, 도 5a에 도시된 기능 1(function 1)에 해당하는 그래픽 데이터가 선택된 경우, 전체 비디오 클립 중 제1비디오(video 1)에 해당하는 구간(0-1/6초)이 재생된다. 전술한 그래픽 데이터를 선택하는 과정은, 예컨대 도 6 및 도 7에 도시된 리모트 컨트롤러가 사용될 수 있다.
따라서, 기능 1(function 1)에 해당하는 그래픽 데이터가 리모트 컨트롤러에 의해 포커싱 되다가, 기능 3(fucntion 1)에 해당하는 그래픽 데이터가 선택된 경우에는, 구간을 점프하여 2/6-3/6초 구간이 자동으로 실행된다. 이와 같은 구현이 가능한 이유는, 도 4와 같이 각 구간별로 인덱스 정보를 추가하였기 때문에 가능한 것이다.
종래 기술에 의한 그래픽 UI 는 낮은 화질과 애니메이션 속도가 낮아서 사용자가 보다 직관적으로 UI 를 이용하기 어려운 한계가 있었다. 반면 본 발명의 일실시예에 의한 비디오 UI 는, 비디오 디코딩이 필요한 하나의 비디오 클립내에 복수의 비디오 데이터를 위치시키고, 또한 각 비디오 데이터별로 인덱스를 두어 각 비디오 데이터별로 전환이 신속하게 이루어 지도록 설계한다. 따라서, 처리 속도 및 화질, 애니메이션 속도가 모두 개선되는 기술적 효과가 있다. 전술한 비디오 UI 는, 그래픽 데이터 및 비디오 데이터를 동시에 출력하면서, 특히 특정 영역의 그래픽 데이터가 선택된 경우 특정 기능을 수행하는 것과 관련된 비디오 데이터를 재생하는 새로운 개념의 서비스를 의미한다.
한편, 비디오 데이터는, 예컨대 동영상 재생이 가능한 압축/무압축의 디지털 데이터(예를 들어, MPEG1, MPEG2, MPEG4, H.264 등)로 구성된다. 보다 간단히 예를 들면, 본 발명의 일실시예를 구현하기 위한 비디오 UI를 위해 필요한 비디오 클립을 구성하는 각각의 비디오 데이터들은, 재생(play)/일시정지(pause)/멈춤(stop)이 가능한 디지털 동영상 컨텐트를 의미한다.
나아가, 각각의 function 을 표시하는 그래픽 데이터와 상기 각각의 function 에 대응하는 비디오 클립내 비디오 데이터가 동시에 한 화면상에서 디스플레이 되도록 설계하는 것도 본 발명의 일특징이다. 이를 구현하기 위해, 도 2 또는 도 3에 도시된 바와 같이, 디코딩된 비디오 데이터와 OSD 생성부에 의해 생성된 그래픽 데이터를 믹싱하는 믹서를 추가적으로 설계한다.
본 발명의 일실시예에 의하면, 사용자는 비디오 클립내 포함된 복수개의 비디오 데이터가 재생된 화면을 확인 후, 멀티미디어 디바이스에 기존재하는 그래픽 데이터(function)와 각각의 비디오 데이터를 맵핑하도록 선택한다.
예를 들어, 비행기가 제1지점에서 제2지점으로 이동하는 비디오 데이터와 채널업을 표시하는 그래픽 데이터를 선택한 경우, 2개의 데이터가 맵핑되어 도 5a에 도시된 바와 같이 메모리에 저장된다.
도 5b에 도시된 바와 같이 제1비디오(Video 1)는, function 1과 맵핑되어 있다. 예를 들어, 채널업(function 1)이 선택된 경우, 왼쪽에 있는 남자가 춤을 추는 비디오 데이터가 재생된다. 다만, 채널업의 그래픽 데이터가 선택되기 전, 왼쪽에 있는 남자는 비디오 데이터가 stop 된 상태이다.
도 5c에 도시된 바와 같이 제2비디오(Video 2)는, function 2와 맵핑되어 있다. 예를 들어, 채널다운(function 2)이 선택된 경우, 가운데 있는 여자가 기도하는 비디오 데이터가 재생된다. 다만, 채널다운의 그래픽 데이터가 선택되기 전, 가운데 있는 여자는 비디오 데이터가 stop 된 상태이다.
도 5d에 도시된 바와 같이 제3비디오(Video 3)는, function 3과 맵핑되어 있다. 예를 들어, 볼륨업(function 3)이 선택된 경우, 오른쪽에 있는 남자가 손을 높이 드는 비디오 데이터가 재생된다. 다만, 볼륨업의 그래픽 데이터가 선택되기 전, 오른쪽에 있는 남자는 비디오 데이터가 stop 된 상태이다.
도 5e에 도시된 바와 같이 제4비디오(Video 4)는, function 4와 맵핑되어 있다. 예를 들어, 볼륨다운(function 4)이 선택된 경우, 비행기가 움직이는 비디오 데이터가 재생된다. 다만, 볼륨다운의 그래픽 데이터가 선택되기 전, 비행기에 대한 비디오 데이터는 stop 된 상태이다.
도 5f에 도시된 바와 같이 제5비디오(Video 5)는, function 5와 맵핑되어 있다. 예를 들어, 홈 이동(function 5)이 선택된 경우, 유성별이 떨어지는 비디오 데이터가 재생된다. 다만, 홈 이동의 그래픽 데이터가 선택되기 전, 별에 대한 비디오 데이터는 stop 된 상태이다.
도 5g에 도시된 바와 같이 제6비디오(Video 5)는, function 6과 맵핑되어 있다. 예를 들어, 백 이동(function 6)이 선택된 경우, 구름이 움직이는 비디오 데이터가 재생된다. 다만, 백 이동의 그래픽 데이터가 선택되기 전, 구름에 대한 비디오 데이터는 stop 된 상태이다.
도 5b 내지 도 5g에서 설명한 그래픽 데이터 및 비디오 데이터가, 도 2 또는 도 3의 믹서에 의해 합성된 상태로 디스플레이 된다. 이는, 도 8 및 도 9를 참조하여 설명하도록 하겠다.
또한, 도 4 및 도 5a에 도시된 바와 같이, 본 발명의 다른 일실시예에 의하면, 전술한 비디오 클립에 포함된 적어도 하나 이상의 비디오 데이터는 시간을 기준으로 연속적으로 연결되어 있다. 그리고, 각각의 비디오 데이터는, 상기 각각의 비디오 데이터를 식별하는 인덱스 정보를 더 포함하고 있다.
따라서, 본 발명의 일실시예에 의한 멀티미디어 디바이스는, 전술한 인덱스 정보를 이용하여, 상기 특정 기능을 표시하는 그래픽 데이터에 대응하는 비디오 데이터를 식별하는 것이 가능하다.
그리고, 본 발명의 또 다른 일실시예에 의하면, 제1기능을 표시하는 그래픽 데이터가 선택된 경우, 상기 인덱스 정보를 이용하여 상기 제1기능에 대응하는 제1비디오 데이터를 디코딩 하고, 제2기능을 표시하는 그래픽 데이터가 선택된 경우, 상기 제1비디오 데이터의 디코딩을 중지하고, 상기 인덱스 정보를 이용하여 상기 제2기능에 대응하는 제2비디오 데이터를 디코딩 한다.
도 6은 본 발명의 일실시예에 의한 멀티미디어 디바이스를 컨트롤 하는 리모트 컨트롤러의 외관을 도시한 도면이다.
도 6의 (a)에 도시된 바와 같이, 멀티미디어 디바이스(600)의 스크린 상에, 리모트 컨트롤러(610)의 움직임에 대응하는 포인터(601)가 표시된다. 사용자는 리모트 컨트롤러(610)를 좌우(도 6의 (b)), 상하(도 6의 (c))로 움직이거나 회전할 수 있다. 이와 같은 리모트 컨트롤러(610)는, 3D 공간상의 움직임에 따라 해당 포인터(601)가 이동되어 표시되므로, 공간 리모콘이라 명명할 수도 있다.
도 6의 (b)에 도시된 바와 같이, 사용자가 리모트 컨트롤러(610)를 왼쪽으로 이동 시키면, 멀티미디어 디바이스(600)의 스크린 상에 표시된 포인터(601)도 왼쪽으로 이동한다. 한편, 리모트 컨트롤러(610)의 센서를 통하여 감지된 리모트 컨트롤러(610)의 움직임에 관한 정보는 멀티미디어 디바이스(600)로 전송된다. 상기 멀티미디어 디바이스(600)는, 리모트 컨트롤러(610)의 움직임에 관한 정보로부터 포인터(601)의 좌표를 산출할 수 있다. 상기 멀티미디어 디바이스(600)는, 산출한 좌표에 대응하도록 포인터(601)를 표시할 수 있다.
한편, 도 6의 (c)에 도시된 바와 같이, 사용자가 리모트 컨트롤러(610)를 아래쪽으로 이동 시키면, 멀티미디어 디바이스(600)의 스크린 상에 표시된 포인터(601)도 아래쪽으로 이동한다.
따라서, 본 발명의 일실시예에 의한 리모트 컨트롤러(610)를 이용하여, 상기 멀티미디어 디바이스(600)의 스크린내 영역 중에서, 비디오 UI와 연동되어 있는 특정 그래픽 영역을 신속하게 선택하는 것이 가능하다.
나아가, 상기 리모트 컨트롤러(610)를 순간적으로 이동 시켜서, 비디오 클립의 특정 구간을 실행하다가 일시 정지하고, 연속하지 않는 구간의 비디오 클립을 실행할 수 있는 장점이 있다.
도 7은 도 6에 도시된 리모트 컨트롤러의 내부 구성 모듈들을 보다 상세히 도시한 도면이다.
도 7에 도시된 바와 같이, 리모트 컨트롤러(710)는, 무선통신부(714), 사용자 입력부(715), 센서부(717), 출력부(716), 전원공급부(711), 저장부(712), 그리고 제어부(713) 등을 포함한다.
무선통신부(714)는 임의의 외부 장치와 통신 가능하도록 설계된다. 특히, 본 발명의 일실시예에 의하면, RF 모듈(714a) 및 IR 모듈(714b)은 멀티미디어 디바이스(700)와 데이터 통신/적외선 통신이 이루어 지도록 설계한다.
나아가, 본 발명의 일실시예에 의하면, 리모트 컨트롤러(710)는, 멀티미디어 디바이스(700)로, 리모트 컨트롤러(710)의 움직임 등에 관한 정보가 담긴 신호를 RF 모듈(714a)을 통하여 전송한다.
또한, 리모트 컨트롤러(710)는, 멀티미디어 디바이스(700)가 전송한 신호를 RF 모듈(714a)을 통하여 수신할 수 있다. 또한, 리모트 컨트롤러(710)는 필요에 따라 IR 모듈(714b)을 통하여 멀티미디어 디바이스(700)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 명령을 전송할 수 있다.
센서부(717)는 자이로 센서(717a) 또는 가속도 센서(717b)를 구비할 수 있다. 자이로 센서(717a)는 리모트 컨트롤러(710)의 움직임에 관한 정보를 센싱할 수 있다. 일례로, 자이로 센서(717a)는 리모트 컨트롤러(710)의 동작에 관한 정보를 x, y, z 축을 기준으로 센싱할 수 있다. 가속도 센서(717b)는 리모트 컨트롤러(710)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 거리측정센서를 더 구비할 수 있으며, 이에 의해, 멀티미디어 디바이스(700)와의 거리를 센싱할 수 있다.
출력부(716)는 사용자 입력부(715)의 조작에 대응하거나 멀티미디어 디바이스(700)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 일례로, 출력부(716)는 사용자 입력부(715)가 조작되거나 무선 통신부(714)를 통하여 멀티미디어 디바이스(700)와 신호가 송수신 되면 점등되는 LED 모듈(716a), 진동을 발생하는 진동 모듈(716b), 음향을 출력하는 음향 출력 모듈(716c), 또는 영상을 출력하는 디스플레이 모듈(716d)을 구비할 수 있다.
전원공급부(711)는 리모트 컨트롤러(710)의 각 구성요소에 전원을 공급한다. 전원공급부(711)는 리모트 컨트롤러(710)가 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로써 전원 낭비를 줄일 수 있다.
저장부(712)는 리모트 컨트롤러(710)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다. 그리고, 제어부(713)는 리모트 컨트롤러(710)의 제어에 관련된 제반사항을 제어한다. 예를 들어, 상기 제어부(713)는, 사용자 입력부(715)의 소정 키 조작에 대응하는 신호 또는 센서부(717)에서 센싱한 리모트 컨트롤러(710)의 움직임에 대응하는 신호를 무선 통신부(714)를 통하여 멀티미디어 디바이스(700)로 전송할 수 있다.
도 8은 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제1실시예를 도시한 도면이다. 도 8에 도시된 멀티미디어 디바이스(800)는 전술한 도 1 내지 도 3을 참조하여 해석할 수 있으며, 리모트 컨트롤러(820)는 전술한 도 6 및 도 7을 참조하여 해석할 수 있다.
도 8은, 라이브 방송을 보다가 메뉴 화면으로 변경된 경우의 도면이다. 또한, 도 8은 그래피컬 데이터와 비디오 데이터가 믹싱된 상태로 동시에 디스플레이 됨에 일특징이 있다. 나아가, 라이브 방송을 보다 메뉴 화면으로 변경된 경우를, 도 8에서 예시하였으나, 비디오 디코더가 2개 있는 경우 또는 디코딩 상태로 비디오 클립내 복수의 비디오 데이터들이 저장되어 있는 경우에는, 라이브 방송과 함께 비디오 UI 를 구현하는 것이 가능하다.
한편, 도 8 내지 도 10은 모두 방송 데이터의 디코딩을 중지하고 비디오 UI 및 상기 비디오 UI와 연동되는 그래픽 데이터를 출력하는 실시예들을 도시하였으나, 방송 데이터의 디코딩을 유지하면서 오버레이된 형태로 비디오 UI 를 출력하는 실시예도 가능하며, 이는 전술한 도 3을 참조하여 이해할 수가 있다.
도 8의 (a)에 도시된 바와 같이, 비디오 UI 를 실행한 경우 그래픽 데이터 및 비디오 클립의 메인 화면이 동시에 출력된다. 우선, 6개의 그래픽 데이터 영역들(801, 802, 803, 804, 805, 806)은 리모트 컨트롤러(820)에 의해 선택 가능한 영역이다. 나아가, 각각의 그래픽 데이터 영역은 비디오 클립내 비디오 데이터 중 특정 구간과 맵핑되어 있다. 이에 대해서는 도 4 및 도 5를 참조하여 전술한 바 있다.
예를 들어, 제2기능(function 2)의 그래픽 데이터 영역은, 제1비디오 데이터(810)와 맵핑되어 있는 것으로 가정한다. 따라서, 리모트 컨트롤러의 모션에 따라 움직이는 피드백 인디케이터(811)(예를 들어, 화살표)가 전술한 제2기능의 그래픽 데이터 영역(804)에 위치하는 경우, 도 8의 (b)에 도시된 바와 같이 특정 모형의 비디오 데이터가 제1위치 영역(850)에서 제2위치 영역(860)으로 이동한다. 종래 기술에 의하면, 고정된 UI 내지는 해상도가 극히 낮은 UI 만을 제공하는 문제점이 있었다.
도 2 또는 도 3에 도시된 OSD 생성부에 의해 생성된 그래픽 데이터와, 비디오 디코더에 의해 디코딩된 비디오 데이터는, 도 2 또는 도 3에 도시된 믹서에 의해 믹싱되도록 설계하며, 따라서, 도 8에 도시된 바와 같이 그래픽 데이터와 비디오 데이터가 오버레이된 형태 또는 각각의 구별된 영역에서 디스플레이 되는 것이 가능하다.
그리고, 비디오 UI 가 실행되면서, 전술한 제2기능이 동시에 실행될 수도 있고, 또는 상기 비디오 클립내 특정 구간이 모두 실행된 후 전술한 제2기능이 실행되도록 하는 것도 모두 본 발명의 권리범위에 속한다. 보다 구체적으로 예를 들어 설명하면, 도 5에 도시된 바와 같이 0-1/6초 동안 제1비디오 데이터가 플레이 된 후, 맵핑된 제1기능이 실행되도록 설계할 수도 있고, 또는 제1비디오 데이터가 플레이 됨과 동시에 맵핑된 제1기능이 실행되도록 설계 가능하다.
도 9는 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제2실시예를 도시한 도면이다.
도 9의 (a)에 도시된 바와 같이, 비디오 UI 를 실행한 경우 그래픽 데이터 및 비디오 클립의 메인 화면이 동시에 출력된다. 우선, 6개의 그래픽 데이터 영역들(901, 902, 903, 904, 905, 906)은 리모트 컨트롤러(920)에 의해 선택 가능한 영역이다.
예를 들어, 제3기능(function 3)의 그래픽 데이터 영역은, 제2비디오 데이터(909)와 맵핑되어 있는 것으로 가정한다. 따라서, 리모트 컨트롤러의 모션에 따라 움직이는 피드백 인디케이터(911)(예를 들어, 화살표)가 전술한 제3기능의 그래픽 데이터 영역(905)에 위치하는 경우, 도 9의 (b)에 도시된 바와 같이 특정 모형의 제스쳐가 제1위치 영역(950)에서 제2위치 영역(960)을 거쳐, 최종 제3위치 영역(970)으로 이동한다. 전술하여 설명한 바와 같이, 비디오 UI 가 실행되면서, 전술한 제3기능이 동시에 실행될 수도 있고, 또는 상기 비디오 클립내 특정 구간이 모두 실행된 후 전술한 제3기능이 실행되도록 설계한다.
도 10은 본 발명의 일실시예에 의한 메뉴 화면이 구현된 제3실시예를 도시한 도면이다. 이전 도 8 및 도 9에서는, 특정 그래픽 영역만을 선택한 경우, 특정 그래픽 영역에 대응하는 비디오 클립내 특정 구간만 실행되는 실시예를 설명하였다. 이하, 도 10에서는 본 발명의 일실시예에 의한 리모트 컨트롤러를 이용하여, 특정 그래픽 데이터를 선택한 다음 다른 그래픽 데이터를 선택한 경우의 실시예를 설명하도록 하겠다.
우선, 도 10의 (a)에 도시된 바와 같이, 본 발명의 일실시예에 의한 멀티미디어 디바이스(1000)는 6개의 그래픽 데이터 영역(1001, 1002, 1003, 1004, 1005, 1006)을 스크린 상에 출력한다. 이 때, 각 그래픽 데이터 영역은 리모트 컨트롤러(1020)에 의해 선택 가능하다.
또한, 4개의 그래픽 데이터 영역들(1003, 1004, 1005, 1006)은, 특정 비디오 데이터(1007, 1008, 1009, 1010, 1011)과 맵핑되어 있는 것으로 가정한다. 예를 들어, 상기 리모트 컨트롤러(1020)의 피드백 인디케이터(1012)가 제2기능을 표시하는 그래픽 데이터 영역(1004)에 일정 시간만 위치한 경우, 비디오 클립내 특정 구간이 실행되다가 멈춘다(1010-->1011). 즉, 상기 피드백 인디케이터(1012)가 다른 그래픽 데이터 영역으로 이동한 경우를 가정하겠다.
예컨대, 도 10의 (b)에 도시된 바와 같이, 리모트 컨트롤러(1030)의 인디케이터가 제1위치(1040)에서 제2위치(1050)로 이동한 경우를 가정하겠다. 즉, 제2기능을 표시하는 그래픽 데이터 영역에서 제3기능을 표시하는 그래픽 데이터 영역으로 이동된 경우이다.
따라서, 상기 제2기능에 대응하는 비디오 클립내 특정 구간의 디코딩 및 재생을 멈추고(1060-->1070), 상기 제3기능에 대응하는 비디오 클립내 특정 구간의 디코딩 및 재생을 개시한다(1080-->1090).
특히, 도 4 및 도 5a에서 전술한 인덱스 정보를 이용하므로, 특정 비디오 데이터를 실행하다가 다른 비디오 데이터를 실행하여도 처리 속도가 제고될 수 있는 장점이 있다.
나아가, 이와 같은 비디오 UI 를 이용하는 경우, 시각적으로 고해상도의 화면을 제공하므로, 사용자가 특정 기능들에 대해 자연스럽게 익숙해 지고 이용의 액세스 시간을 단축할 수 있는 장점이 있다.
도 11은 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어 방법의 제1실시예를 도시한 플로우 차트이다. 이하, 도 1, 도2 그리고 도 11 등을 참조하여 비디오 디코더를 한개 채택한 경우의 비디오 UI 구현 프로세스를 설명하면 다음과 같다.
본 발명의 일실시예에 의한 멀티미디어 디바이스는, 방송 관련 데이터를 디코딩 한다(S1101). 디코딩된 비디오 데이터는 스크린을 통해 출력되고, 디코딩된 오디오 데이터는 스피커를 통해 출력된다.
또한, 리모트 컨트롤러를 통해, 비디오 UI 를 실행하는 명령을 수신한다(S1102). 예를 들어, 단축키 버튼 또는 화면상의 메뉴 아이템을 이용하여 실행 가능하다.
나아가, 상기 방송 관련 비디오 디코딩을 중지하고(S1103), 특정 기능과 맵핑된 그래픽 영역을 선택하는 신호를 수신한다(S1104). 예를 들어, 도 6 및 도 7에서 전술하여 설명한 리모트 컨트롤러가 이용될 수도 있다.
도 4 및 도 5에서 전술하여 설명한 인덱스 정보를 이용하여, 전체 비디오 클립 중 특정 구간의 비디오 데이터를 디텍트 한다(S1105). 그리고, 상기 특정 구간의 비디오 데이터에 대한 디코딩을 실행한다(S1106).
나아가, 본 발명의 일실시예에 의한 비디오 클립을 구성하는 복수개의 비디오 데이터들은 예컨대, 디코딩된 상태로 메모리에 저장되었다가 추후 추출될 수도 있고 또는 인코딩된 상태로 저장되어 비디오 클립의 비디오 데이터를 매번 디코딩하여 사용할 수도 있으며, 전술한 실시예들 모두 본 발명의 권리범위에 속한다.
도 12는 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어 방법의 제2실시예를 도시한 플로우 차트이다. 이하, 도 1, 도3 그리고 도 12 등을 참조하여 비디오 디코더를 2개 채택한 경우의 비디오 UI 구현 프로세스를 설명하면 다음과 같다. 일정 영역의 그래픽 데이터가 선택된 경우, 특정 비디오 데이터가 제한적으로 재생되는 과정을 비디오 UI 라고 이해할 수도 있다.
본 발명의 일실시예에 의한 멀티미디어 디바이스는, 방송 관련 데이터를 디코딩 한다(S1201). 디코딩된 비디오 데이터는 스크린을 통해 출력되고, 디코딩된 오디오 데이터는 스피커를 통해 출력된다.
또한, 리모트 컨트롤러를 통해, 비디오 UI 를 실행하는 명령을 수신한다(S1202). 예를 들어, 단축키 버튼 또는 화면상의 메뉴 아이템을 이용하여 실행 가능하다.
도 11과 달리, 전술한 방송 관련 비디오 디코딩을 중지하지 않고, 도 4 및 도 5에서 전술하여 설명한 인덱스 정보를 이용하여, 전체 비디오 클립 중 특정 구간의 비디오 데이터에 대한 디코딩을 실행한다(S1203).
디코딩된 방송 데이터 및 비디오 클립내 특정 구간의 비디오 데이터를 합성하여 출력한다(S1204). 그리고, 방송 화면과 비디오 UI 가 오버레이(overlay)된 형태로 디스플레이 하거나 또는 별도의 구별된 구획내에서 각각 디스플레이 되도록 설계한다(S1205).
그리고, 도 13은 본 발명의 일실시예에 의한 그래픽 데이터 및 비디오 데이터를 처리하는 제어방법의 제3실시예를 도시한 플로우 차트이다. 이하, 도 10 및 도 13 등을 참조하여, 비디오 클립내 특정 구간을 디코딩 하다가 다른 특정 구간을 디코딩 하는 프로세스를 설명하겠다.
도 13에서는 도 11에 도시된 S1101 내지 S1106 단계가 실행되는 경우를 가정하였으나, 도 11 대신 도 12에 도시된 S1201 내지 S1205 단계가 실행되는 경우를 전제할 수도 있다.
현재 실행되고 있는 제1기능과 다른 제2기능과 맵핑되어 있는 그래픽 영역을 선택한다(S1301). 예를 들어, 도 10의 (b)에 도시된 바와 같이, 특정 그래픽 영역(1040)을 선택하다가 다른 그래픽 영역(1050)을 선택한 경우이다.
이 때, 인덱스 부가 정보를 이용하여, 선택된 그래픽 영역에 해당하는 비디오 클립내 구간 정보를 추출한다(S1302). 그리고, 최초 선택되었던 제1그래픽 영역의 비디오 데이터에 대한 디코딩을 중지하고, 현재 선택된 제2그래픽 영역의 비디오 데이터에 대한 디코딩을 실행한다.
종래 기술에 따라, 6개의 캐릭터가 리모콘의 포커스(focus)에 따라 움직이는 UI를 구성한다면, 우선 그래픽으로 표현함에 있어 기술적인 한계가 있고, 개발 비용도 높고, 그래픽 관련 요구되는 품질이 높을 수록 애니메이션(Animation)속도가 문제 된다.
반면, 도 1 내지 도 13에서 상세히 서술한 바와 같이, 비디오 디코더의 개수와 관계 없이 적용할 수 있으며, 인덱스 정보를 이용하여 빠른 UI 전환이 가능한 비디오 UI 를 구현시, 전술한 종래 기술의 문제점을 모두 해결할 수가 있다.
나아가, 설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시예들을 병합하여 새로운 실시예를 구현하도록 설계하는 것도 가능하다. 그리고, 당업자의 필요에 따라, 이전에 설명된 실시예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다.
본 발명에 따른 디스플레이 장치 및 그 동작 방법은 상기한 바와 같이 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
한편, 본 발명의 디스플레이 장치의 동작방법은 디스플레이 장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시예들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안 될 것이다.
그리고, 당해 명세서에서는 설명의 편의상 물건 발명과 방법 발명을 각각 구별하여 설명하였다. 그러나, 이와 같은 설명의 순서로 본 발명의 권리범위가 제한되는 것은 아니며, 필요에 따라 물건 발명 및 방법 발명에 대한 각각의 설명은 보충적으로 적용될 수가 있다.
201 : 역다중화부
202 : 스윗칭 모듈
203 : 비디오 디코더
204 : OSD 생성부
205 : 믹서
206 : 프레임 레이트 변환부
207 : 포맷터
208 : 오디오 디코더
209 : 오디오 프로세서

Claims (15)

  1. 삭제
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스에 있어서,
    인코딩된 방송 데이터에 포함된 제1비디오 데이터를 디코딩하는 제1비디오 디코더;
    외부 디바이스로부터 비디오 클립을 수신하는 네트워크 인터페이스 모듈-상기 비디오 클립은 적어도 하나 이상의 제2비디오 데이터를 포함하고 각각의 제2비디오 데이터는 특정 기능에 맵핑되어 있음-;
    상기 특정 기능을 표시하는 그래픽 데이터를 생성하는 OSD 제너레이터;
    상기 그래픽 데이터를 선택하는 신호를 수신하는 유저 인터페이스;
    상기 선택된 그래픽 데이터에 대응하는 제2비디오 데이터를 디텍트 하는 디텍터;
    상기 디텍트된 제2비디오 데이터를 디코딩 하는 제2비디오 디코더;
    상기 제1비디오 데이터, 상기 제2비디오 데이터 및 상기 그래픽 데이터를 믹싱하는 믹싱 모듈; 그리고
    상기 믹싱된 적어도 하나 이상의 데이터가 스크린상에 출력되도록 제어하는 컨트롤러를 포함하고,
    상기 비디오 클립에 포함된 적어도 하나 이상의 제2비디오 데이터는 시간을 기준으로 연속적으로 연결되어 있으며, 각각의 제2비디오 데이터는 상기 각각의 제2비디오 데이터를 식별하는 인덱스 정보를 더 포함하고,
    상기 디텍터는 상기 인덱스 정보를 이용하여, 상기 특정 기능을 표시하는 그래픽 데이터에 대응하는 비디오 데이터를 식별하고, 그리고 상기 식별된 비디오 데이터를 디텍트 하고,
    상기 유저 인터페이스는 모션에 따라 피드백 신호의 위치가 스크린상에서 변경되도록 설계된 리모트 컨트롤러와 통신이 이루어지도록 설계되는 것을 특징으로 하는 멀티미디어 디바이스.
  9. 제8항에 있어서,
    상기 제2비디오 디코더는,
    상기 비디오 클립에 포함된 적어도 하나 이상의 제2비디오 데이터를 미리 디코딩 하는 멀티미디어 디바이스.
  10. 제9항에 있어서,
    상기 멀티미디어 디바이스는,
    상기 제2비디오 디코더에 의해 디코딩된 적어도 하나 이상의 제2비디오 데이터를 저장하고 있는 시스템 메모리
    를 더 포함하는 멀티미디어 디바이스.
  11. 삭제
  12. 삭제
  13. 삭제
  14. 제8항에 있어서,
    상기 컨트롤러는,
    상기 피드백 신호의 위치가 제1그래픽 데이터 영역에 위치하는 경우, 상기 제1그래픽 데이터 영역에 대응하는 제2비디오 데이터를 디코딩 하도록 제어하고,
    상기 피드백 신호의 위치가 상기 제1그래픽 데이터 영역에서 제2그래픽 데이터 영역으로 변경된 경우, 상기 제1그래픽 데이터 영역에 대응하는 제2비디오 데이터의 디코딩을 중지하고, 상기 제2그래픽 데이터 영역에 대응하는 제2비디오 데이터를 디코딩 하도록 제어하는 멀티미디어 디바이스.
  15. 삭제
KR1020110106237A 2011-10-18 2011-10-18 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스 KR101871709B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110106237A KR101871709B1 (ko) 2011-10-18 2011-10-18 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110106237A KR101871709B1 (ko) 2011-10-18 2011-10-18 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스

Publications (2)

Publication Number Publication Date
KR20130042113A KR20130042113A (ko) 2013-04-26
KR101871709B1 true KR101871709B1 (ko) 2018-06-27

Family

ID=48440890

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110106237A KR101871709B1 (ko) 2011-10-18 2011-10-18 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스

Country Status (1)

Country Link
KR (1) KR101871709B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106878825B (zh) * 2017-01-09 2021-07-06 腾讯科技(深圳)有限公司 基于直播的声效展示方法和装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003523103A (ja) * 1998-09-16 2003-07-29 エイシーティヴィー,インコーポレイテッド 圧縮ディジタルデータのシームレスビデオ切り換えシステム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101265625B1 (ko) * 2006-09-11 2013-05-22 엘지전자 주식회사 멀티 채널을 정의하는 방송 신호를 처리하는 방송 수신기 및 그 제어방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003523103A (ja) * 1998-09-16 2003-07-29 エイシーティヴィー,インコーポレイテッド 圧縮ディジタルデータのシームレスビデオ切り換えシステム

Also Published As

Publication number Publication date
KR20130042113A (ko) 2013-04-26

Similar Documents

Publication Publication Date Title
KR102212270B1 (ko) 통합된 컨텐츠 소스들을 이용하여 미디어 컨텐츠를 제시하기 위한 방법들, 시스템들 및 매체들
KR102058041B1 (ko) 영상표시장치, 및 그 동작방법
CN112153406A (zh) 一种直播数据生成方法、显示设备及服务器
CN111107428A (zh) 一种双路媒体流数据的播放方法及显示设备
CN111601142B (zh) 一种字幕的显示方法及显示设备
KR102287510B1 (ko) 서버, 영상제공장치, 및 이를 포함하는 영상 제공 시스템
KR102269277B1 (ko) 서버, 홈 디바이스 접속 서버, 단말기, 및 이를 포함하는 홈 디바이스 원격제어시스템
KR101556165B1 (ko) 비디오 데이터를 처리하는 디스플레이 장치 및 그 제어 방법
KR101911249B1 (ko) 컴퓨팅 디바이스 및 ui 제공 방법
KR102187745B1 (ko) 영상제공장치, 및 그 동작방법
KR20170119572A (ko) 이동 단말기
KR101871709B1 (ko) 적어도 하나 이상의 비디오 데이터를 처리하는 멀티미디어 디바이스의 제어 방법 및 상기 멀티미디어 디바이스
KR20130039575A (ko) 영상표시장치 및 그 동작방법
KR101847616B1 (ko) 영상표시장치, 서버 및 그 동작방법
KR101812172B1 (ko) 리모트 컨트롤러 및 멀티미디어 디바이스의 제어 방법
CN111885415B (zh) 一种音频数据快速输出方法及显示设备
KR20150093490A (ko) 영상표시장치의 동작 방법
CN113010074A (zh) 一种网页视频Video控制栏显示方法及显示设备
KR102112004B1 (ko) 서로 다른 데이터 타입 및 디바이스 타입의 적어도 2개 이상의 아이템을 컨트롤 하는 멀티미디어 디바이스 및 그 제어 방법
KR102281839B1 (ko) 영상제공장치
CN111586457A (zh) 一种重复执行输入指令对应操作的方法及显示设备
KR20160097023A (ko) 영상표시장치,
KR20130079926A (ko) 영상표시장치, 및 그 동작방법
CN113009963B (zh) 一种浏览器语音提醒方法及显示设备
KR102205160B1 (ko) 영상제공장치의 동작 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant