KR20150006566A - 컨트롤 디바이스 및 그 제어 방법 - Google Patents

Abstract

사용자가 외부 디바이스를 제어하고자 하는 경우 보다 직관적인 사용자 인터페이스를 제공할 수 있는 컨트롤 디바이스 및 그 제어 방법을 개시한다. 본 발명의 일 실시예에 따라 적어도 하나의 외부 디바이스 제어하는 컨트롤 디바이스의 제어 방법은, 제1 영역 및 제2 영역을 포함하는 GUI를 디스플레이하는 단계 - 상기 제1 영역은 상기 적어도 하나의 외부 디바이스에 각각 매칭되는 아이콘들을 포함함- 상기 아이콘들 중 제1 아이콘을 선택 및 이동시키기 위한 제1 커맨드를 수신하는 단계와, 상기 수신된 제1 커맨드에 따라, 상기 제1 영역 내 제1 아이콘을 상기 제2 영역에 접근시키는 단계와, 상기 제1 아이콘의 적어도 일부가 상기 제1 영역을 벗어난 경우, 상기 제2 영역을, 복수 개의 서브 영역을 포함하도록 구조화하는 단계와, 상기 제1 아이콘의 적어도 일부가 상기 제2 영역 내 복수 개의 서브 영역 중 제1 서브 영역과 오버랩되는 경우, 상기 제1 서브 영역을 하이라이트하는 단계와, 상기 제1 아이콘의 선택 및 이동을 해제하는 제2 커맨드를 수신하는 단계와, 상기 수신된 제2 커맨드에 따라, 상기 제2 영역의 구조화를 해제하는 단계를 포함한다.

Description

컨트롤 디바이스 및 그 제어 방법{CONTROL DEVICE AND METHOD FOR CONTROLLING THE SAME}

본 발명은 컨트롤 디바이스 및 그 제어 방법에 관한 것으로, 더욱 상세하게는 적어도 하나의 외부 디바이스와 네트워크로 연결된 컨트롤 디바이스 및 그 제어 방법에 관한 것이다.

일반적으로 가정 내에는 조명기기, 스피커, 에어컨, 전화기 등 많은 가전 기기들이 있으며, 이들 가전 기기를 휴대용 단말기 등을 컨트롤러로서 사용하여 원격으로 제어하는 기술이 점차 발전하고 있다.

그러나, 휴대용 단말기를 컨트롤러로서 사용하여, 임의의 가전 기기가 특정 기능을 실행하도록 제어하고자 하는 경우, 사용자는 여러 단계를 거쳐 원하는 메뉴에 도달하여 일일이 가전 기기들을 설정해야 하는 등 사용상 불편함이 존재하였다.

본 발명의 일 실시예가 이루고자 하는 기술적 과제는, 사용자가 외부 디바이스를 제어하고자 하는 경우 보다 직관적인 사용자 인터페이스를 제공함으로써 사용자 편의성을 제고하는 것이다.

또한, 본 발명의 일 실시예가 이루고자 하는 기술적 과제는, 제어하고자 하는 디바이스의 종류에 최적화된 사용자 인터페이스를 제공하는 것이다.

본 발명의 일 실시예에 따라 적어도 하나의 외부 디바이스 제어하는 컨트롤 디바이스의 제어 방법은, 제1 영역 및 제2 영역을 포함하는 GUI를 디스플레이하는 단계 - 상기 제1 영역은 상기 적어도 하나의 외부 디바이스에 각각 매칭되는 아이콘들을 포함함 -와, 상기 아이콘들 중 제1 아이콘을 선택 및 이동시키기 위한 제1 커맨드를 수신하는 단계와, 상기 수신된 제1 커맨드에 따라, 상기 제1 영역 내 제1 아이콘을 상기 제2 영역에 접근시키는 단계와, 상기 제1 아이콘의 적어도 일부가 상기 제1 영역을 벗어난 경우, 상기 제2 영역을, 복수 개의 서브 영역을 포함하도록 구조화하는 단계 - 상기 제2 영역 내 복수 개의 서브 영역은 서로 다른 설정 모드로 기 설정되어 있음 -와, 상기 제1 아이콘의 적어도 일부가 상기 제2 영역 내 복수 개의 서브 영역 중 제1 서브 영역과 오버랩되는 경우, 상기 제1 서브 영역을 하이라이트하는 단계와, 상기 제1 아이콘의 선택 및 이동을 해제하는 제2 커맨드를 수신하는 단계와, 상기 수신된 제2 커맨드에 따라, 상기 제2 영역의 구조화를 해제하는 단계를 포함한다.

본 발명의 다른 일 실시예에 따라 적어도 하나의 외부 디바이스와 네트워크로 연결된 컨트롤 디바이스의 제어 방법은, 제1 영역 및 제2 영역을 포함하는 GUI를 디스플레이하는 단계 - 상기 제1 영역은 상기 적어도 하나의 외부 디바이스에 각각 매칭되는 아이콘들을 포함함 -와, 상기 아이콘들 중 제1 아이콘을 선택 및 이동시키기 위한 제1 커맨드를 수신하는 단계와, 상기 수신된 제1 커맨드에 따라, 상기 제1 영역 내 제1 아이콘을 상기 제2 영역에 접근시키는 단계와, 상기 제1 아이콘의 적어도 일부가 상기 제1 영역을 벗어난 경우, 상기 제2 영역을, 복수 개의 서브 영역을 포함하도록 구조화하는 단계 - 상기 제2 영역 내 복수 개의 서브 영역은 서로 다른 설정 모드로 기 설정되어 있음 -와, 상기 제1 아이콘이, 기 설정된 시간 이상, 상기 제2 영역 내 복수 개의 서브 영역 중 인접한 제1 서브 영역 및 제2 서브 영역과 오버랩되는 단계와, 상기 제1 서브 영역과 상기 제2 서브 영역의 사이에, 상기 제1 서브 영역에 기 설정된 제1 설정 모드의 설정값과 상기 제2 서브 영역에 기 설정된 제2 설정 모드의 설정값 사이의 설정값을 갖는 제3 설정 모드로 설정된 제3 서브 영역을 형성하는 단계를 포함한다.

본 발명의 일 실시예에 의하면, 사용자가 외부 디바이스를 제어하고자 하는 경우 보다 직관적인 사용자 인터페이스를 제공함으로써 사용자 편의성을 제고할 수 있다.

또한, 본 발명의 일 실시예에 의하면, 제어하고자 하는 디바이스의 종류에 최적화된 사용자 인터페이스를 제공할 수 있다.

도 1은 본 발명의 일 실시예에 의한 컨트롤 디바이스 및 적어도 하나의 외부 디바이스를 포함하는 시스템을 개략적으로 도시한 도면이다.
도 2는 본 발명의 일 실시예에 의한 컨트롤 디바이스의 구성 모듈들을 도시한 블록도이다.
도 3은 도 2에 도시된 컨트롤 디바이스의 전면 사시도이다.
도 4는 도 2에 도시된 컨트롤 디바이스의 후면 사시도이다.
도 5는 본 발명의 일 실시예에 의한 컨트롤 디바이스의 구성 모듈들을 도시한 블록도이다.
도 6은 도 5에 도시된 멀티미디어 디바이스의 제어부를 보다 상세히 도시한 블록도이다.
도 7은 본 발명의 일 실시예에 따른 리모트 컨트롤러의 외관을 간략히 도시한 도면이다.
도 8은 도 7에 도시된 리모트 컨트롤러의 구성모듈들을 상세히 도시한 블록도이다.
도 9는 본 발명의 일 실시예에 의한 컨트롤 디바이스 내 구성 모듈들을 보다 간략히 도시한 도면이다.
도 10은 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예를 도시한 도면이다.
도 11 내지 도 15는 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하는 방법의 일 예시를 설명하기 위한 도면이다.
도 16 내지 도 18은 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하기 위한 방법의 일 예시를 도시한 도면이다.
도 19는 본 발명의 일 실시에에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하기 위한 방법의 일 예시를 도시한 도면이다.
도 20 및 도 21은 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하기 위한 방법의 일 예시들을 도시한 도면이다.
도 22는 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하기 위한 방법의 일 예시를 도시한 도면이다.
도 23은 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예를 도시한 도면이다.
도 24 내지 도 26은 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하는 방법의 일 예시를 설명하기 위한 도면이다.
도 27은 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하기 위한 방법의 일 예시를 도시한 도면이다.
도 28은 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예시를 도시한 도면이다.
도 29는 도 28에 도시된 GUI의 제2 가이드 영역에서 제1 가이드 영역으로 진입하는 일 예시를 설명하기 위한 도면이다.
도 30 및 도 31은 본 발명의 일 실시예에 의한 컨트롤 디바이스에서 멀티태스킹시 오디오 신호의 간섭을 처리하기 위한 일 예시를 설명하기 위한 도면이다.
도 32는 본 발명의 일 실시예에 의한 컨트롤 디바이스에서 음악 재생 중 이어폰이 분리된 경우를 처리하기 위한 일 예시를 설명하기 위한 도면이다.
도 33은 본 발명의 일 실시예에 의한 컨트롤 디바이스의 제어 방법의 일 예시를 도시한 흐름도이다.
도 34는 본 발명의 일 실시예에 의한 컨트롤 디바이스의 제어 방법의 일 예시를 도시한 흐름도이다.

이하에서는 도면을 참조하여 본 발명을 더욱 상세하게 설명한다.

이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함을 고려하여 부여되는 것으로서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.

한편, 본 명세서에서 기술되는 멀티미디어 디바이스는, 예컨대 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 네트워크 TV로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행 가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.

나아가, 본 발명에서 기술되는 멀티미디어 디바이스는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다.

더욱이, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시 예를 상세하게 설명하지만, 본 발명이 실시 예들에 의해 제한되거나 한정되는 것은 아니다.

본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.

도 1은 본 발명의 일 실시예에 의한 컨트롤 디바이스 및 적어도 하나의 외부 디바이스를 포함하는 시스템을 개략적으로 도시한 도면이다.

도 1에 도시된 바와 같이, 본 발명의 일 실시예에 의한 시스템은 컨트롤 디바이스(110) 및 상기 컨트롤 디바이스(110)와 유/무선 네트워크로 연결된 적어도 하나의 외부 디바이스(120)를 포함한다.

컨트롤 디바이스(110)는 네트워크 TV, 스마트 TV, HBBTV(Hybrid Brodacast Broadband Television), 인터넷 TV, 웹 TV, IPTV(Internet Protocol Television), PC, PDA(personal digital assistant), 노트북, 넷북(netbook) 등을 포함하는 멀티미디어 디바이스일 수 있다.

또는, 컨트롤 디바이스(110)는 휴대폰, 태블릿 PC 등을 포함하는 이동 단말기일 수 있다.

외부 디바이스(120)는 스피커, 조명기기, DVD 플레이어, BD 플레이어, STB, 에어컨, 냉장고 등 가정 내 또는 사무실 내에 존재하는 전자 장치로서, 이에 제한을 두지 않는다.

컨트롤 디바이스(110)는 유/무선 네트워크로 연결된 적어도 하나의 외부 디바이스(120)에 제어 신호를 전송하여 외부 디바이스들(120)을 제어한다. 외부 디바이스(120)는 컨트롤 디바이스(110)로부터 전송되는 제어 신호를 수신할 수 있는 수신기를 구비하며, 실시예에 따라, 외부 디바이스(120)의 상태 정보를 컨트롤 디바이스(110)로 전송하기 위한 송신기를 구비할 수도 있다.

외부 디바이스(120)는 컨트롤 디바이스(110)와 같은 공간(예를 들어, 가정 내 같은 방 또는 동일한 사무실 내)에 존재할 수도 있고, 컨트롤 디바이스(110)와 다른 공간(예를 들어, 가정 내 다른 방 또는 동일한 회사 내 다른 사무실)에 존재할 수도 있다. 또는, 외부 디바이스(120)는 컨트롤 디바이스(110)와 다른 장소에 존재할 수도 있다. 즉, 예를 들어, 외부 디바이스(120)는 가정 내에 존재하고 사용자는 컨트롤 디바이스(110)를 소지한 채로 외출한 경우일 수도 있다.

도 2는 본 발명의 일 실시예에 의한 컨트롤 디바이스의 구성 모듈들을 도시한 블록도이다. 다만, 컨트롤 디바이스의 일 예로서 이동 단말기(200)를 예로 들어 설명하도록 하겠다. 물론, 본 발명의 권리범위가 이동 단말기(200)로 제한되는 것은 아니다.

도 2를 참조하면, 이동 단말기(200)는 무선 통신부(210), A/V(Audio/Video) 입력부(220), 사용자 입력부(230), 센싱부(240), 출력부(250), 메모리(260), 인터페이스부(270), 제어부(280) 및 전원 공급부(290) 등을 포함할 수 있다. 다만 도 2에 도시된 구성요소들이 모두 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 이동 단말기가 구현될 수도 있다.

이하, 상기 구성요소들에 대해 차례로 살펴본다.

무선 통신부(210)는 이동 단말기(200)와 무선 통신 시스템 사이 또는 컨트롤 디바이스(200)와 이동 단말기(200)가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(210)는 방송 수신 모듈(211), 이동통신 모듈(212), 무선 인터넷 모듈(213), 근거리 통신 모듈(214) 및 위치정보 모듈(215) 등을 포함할 수 있다.

방송 수신 모듈(211)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다.

상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.

상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있다. 이러한 경우에는 상기 이동통신 모듈(212)에 의해 수신될 수 있다.

상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.

상기 방송 수신 모듈(211)은, 예를 들어, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(211)은, 상술한 디지털 방송 시스템뿐만 아니라 다른 방송 시스템에 적합하도록 구성될 수도 있다.

방송 수신 모듈(211)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(260)에 저장될 수 있다.

이동통신 모듈(212)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.

무선 인터넷 모듈(213)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 이동 단말기(200)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.

근거리 통신 모듈(214)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신(short range communication) 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.

위치정보 모듈(215)은 이동 단말기의 위치를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Position System) 모듈이 있다.

도 2를 참조하면, A/V(Audio/Video) 입력부(220)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(221)와 마이크(222) 등이 포함될 수 있다. 카메라(221)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(251)에 표시될 수 있다.

카메라(221)에서 처리된 화상 프레임은 메모리(260)에 저장되거나 무선 통신부(210)를 통하여 외부로 전송될 수 있다. 카메라(221)는 사용 환경에 따라 2개 이상이 구비될 수도 있다.

마이크(222)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(212)을 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(222)에는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.

사용자 입력부(230)는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(230)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다.

센싱부(240)는 이동 단말기(200)의 개폐 상태, 이동 단말기(200)의 위치, 사용자 접촉 유무, 이동 단말기의 방위, 이동 단말기의 가속/감속 등과 같이 이동 단말기(200)의 현 상태를 감지하여 이동 단말기(200)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 이동 단말기(200)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(290)의 전원 공급 여부, 인터페이스부(270)의 외부 기기 결합 여부 등을 센싱할 수도 있다. 한편, 상기 센싱부(240)는 근접 센서(241)를 포함할 수 있다.

출력부(250)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 이에는 디스플레이부(251), 음향 출력 모듈(252), 알람부(253), 및 햅틱 모듈(254) 등이 포함될 수 있다.

디스플레이부(251)는 이동 단말기(200)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 이동 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 이동 단말기(200)가 화상 통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.

디스플레이부(251)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.

이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 투명 디스플레이라 호칭될 수 있는데, 상기 투명 디스플레이의 대표적인 예로는 TOLED(Transparant OLED) 등이 있다. 디스플레이부(251)의 후방 구조 또한 광 투과형 구조로 구성될 수 있다. 이러한 구조에 의하여, 사용자는 단말기 바디의 디스플레이부(251)가 차지하는 영역을 통해 단말기 바디의 후방에 위치한 사물을 볼 수 있다.

이동 단말기(200)의 구현 형태에 따라 디스플레이부(251)이 2개 이상 존재할 수 있다. 예를 들어, 이동 단말기(200)에는 복수의 디스플레이부들이 하나의 면에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.

디스플레이부(251)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 디스플레이부(251)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.

터치 센서는 디스플레이부(251)의 특정 부위에 가해진 압력 또는 디스플레이부(251)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다.

터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(280)로 전송한다. 이로써, 제어부(280)는 디스플레이부(251)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.

도 2를 참조하면, 상기 터치스크린에 의해 감싸지는 이동 단말기의 내부 영역 또는 상기 터치 스크린의 근처에 근접 센서(241)가 배치될 수 있다. 상기 근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접 센서는 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다.

상기 근접 센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.

음향 출력 모듈(252)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(210)로부터 수신되거나 메모리(260)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력 모듈(252)은 이동 단말기(200)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력하기도 한다. 이러한 음향 출력 모듈(252)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.

알람부(253)는 이동 단말기(200)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(253)는 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 상기 비디오 신호나 오디오 신호는 디스플레이부(251)나 음성 출력 모듈(252)을 통해서도 출력될 수 있어서, 그들(251,252)은 알람부(253)의 일부로 분류될 수도 있다.

햅틱 모듈(haptic module)(254)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(254)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(254)이 발생하는 진동의 세기와 패턴 등은 제어 가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.

햅틱 모듈(254)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.

햅틱 모듈(254)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(254)은 이동 단말기(200)의 구성 태양에 따라 2개 이상이 구비될 수 있다.

메모리(260)는 제어부(280)의 동작을 위한 프로그램을 저장할 수 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)을 임시 저장할 수도 있다. 상기 메모리(260)는 상기 터치스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.

메모리(260)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 이동 단말기(200)는 인터넷(internet)상에서 상기 메모리(260)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.

인터페이스부(270)는 이동 단말기(200)에 연결되는 모든 외부기기와의 통로 역할을 한다. 인터페이스부(270)는 외부 기기로부터 데이터를 전송받거나, 전원을 공급받아 이동 단말기(200) 내부의 각 구성 요소에 전달하거나, 이동 단말기(200) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 인터페이스부(270)에 포함될 수 있다.

식별 모듈은 이동 단말기(200)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module, UIM), 가입자 인증 모듈(Subscriber Identify Module, SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module, USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 포트를 통하여 단말기(200)와 연결될 수 있다.

상기 인터페이스부는 이동 단말기(200)가 외부 크래들(cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동 단말기(200)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동 단말기로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동 단말기가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.

제어부(controller, 280)는 통상적으로 이동 단말기의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 제어부(280)는 멀티 미디어 재생을 위한 멀티미디어 모듈(281)을 구비할 수도 있다. 멀티미디어 모듈(281)은 제어부(280) 내에 구현될 수도 있고, 제어부(280)와 별도로 구현될 수도 있다.

상기 제어부(280)는 상기 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.

전원 공급부(290)는 제어부(280)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.

여기에 설명되는 다양한 실시예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.

하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 실시예들이 제어부(280) 자체로 구현될 수 있다.

소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션으로 소프트웨어 코드가 구현될 수 있다. 상기 소프트웨어 코드는 메모리(260)에 저장되고, 제어부(280)에 의해 실행될 수 있다.

도 3은 도 2에 도시된 컨트롤 디바이스의 전면 사시도이다. 도 2와 마찬가지로 설명의 편의상 이동 단말기를 예시하여 설명하도록 하겠다.

도시된 이동 단말기(200)는 바 형태의 단말기 바디를 구비하고 있다. 다만, 본 발명은 여기에 한정되지 않고, 2 이상의 바디들이 상대 이동 가능하게 결합되는 슬라이드 타입, 폴더 타입, 스윙 타입, 스위블 타입 등 다양한 구조에 적용이 가능하다.

바디는 외관을 이루는 케이스(케이싱, 하우징, 커버 등)를 포함한다. 본 실시예에서, 케이스는 프론트 케이스(201)와 리어 케이스(202)로 구분될 수 있다. 프론트 케이스(101)와 리어 케이스(102)의 사이에 형성된 공간에는 각종 전자부품들이 내장된다. 프론트 케이스(01)와 리어 케이스(02) 사이에는 적어도 하나의 중간 케이스가 추가로 배치될 수도 있다.

케이스들은 합성수지를 사출하여 형성되거나 금속 재질, 예를 들어 스테인레스 스틸(STS) 또는 티타늄(Ti) 등과 같은 금속 재질을 갖도록 형성될 수도 있다.

단말기 바디, 주로 프론트 케이스(201)에는 디스플레이부(251), 음향출력부(252), 카메라(221), 사용자 입력부(230/231,232), 마이크(222), 인터페이스(270) 등이 배치될 수 있다.

디스플레이부(251)는 프론트 케이스(201)의 주면의 대부분을 차지한다. 디스플레이부(251)의 양단부 중 일 단부에 인접한 영역에는 음향출력부(251)와 카메라(221)가 배치되고, 다른 단부에 인접한 영역에는 사용자 입력부(231)와 마이크(222)가 배치된다. 사용자 입력부(232)와 인터페이스(270) 등은 프론트 케이스(201) 및 리어 케이스(202)의 측면들에 배치될 수 있다.

사용자 입력부(230)는 이동 단말기(200)의 동작을 제어하기 위한 명령을 입력받기 위해 조작되는 것으로서, 복수의 조작 유닛들(231,232)을 포함할 수 있다. 조작 유닛들(231,232)은 조작부(manipulating portion)로도 통칭 될 수 있으며, 사용자가 촉각 적인 느낌을 가면서 조작하게 되는 방식(tactile manner)이라면 어떤 방식이든 채용될 수 있다.

제1 또는 제2 조작 유닛들(231, 232)에 의하여 입력되는 내용은 다양하게 설정될 수 있다. 예를 들어, 제1 조작 유닛(231)은 시작, 종료, 스크롤 등과 같은 명령을 입력받고, 제2 조작 유닛(232)은 음향출력부(252)에서 출력되는 음향의 크기 조절 또는 디스플레이부(251)의 터치 인식 모드로의 전환 등과 같은 명령을 입력받을 수 있다.

도 4는 도 2에 도시된 컨트롤 디바이스의 후면 사시도이다. 도 2와 마찬가지로 설명의 편의상 이동 단말기를 예시하여 설명하도록 하겠다.

도 4를 참조하면, 단말기 바디의 후면, 다시 말해서 리어 케이스(202)에는 카메라(221')가 추가로 장착될 수 있다. 카메라(221')는 카메라(221, 도 3 참조)와 실질적으로 반대되는 촬영 방향을 가지며, 카메라(221)와 서로 다른 화소를 가지는 카메라일 수 있다.

예를 들어, 카메라(221)는 화상 통화 등의 경우에 사용자의 얼굴을 촬영하여 상대방에 전송함에 무리가 없도록 저 화소를 가지며, 카메라(221')는 일반적인 피사체를 촬영하고 바로 전송하지는 않는 경우가 많기에 고 화소를 가지는 것이 바람직하다. 카메라(221,221')는 회전 또는 팝업(pop-up) 가능하게 단말기 바디에 설치될 수도 있다.

카메라(221')에 인접하게는 플래쉬(223)와 거울(224)이 추가로 배치된다. 플래쉬(223)는 카메라(221')로 피사체를 촬영하는 경우에 피사체를 향해 빛을 비추게 된다. 거울(224)은 사용자가 카메라(221')를 이용하여 자신을 촬영(셀프 촬영)하고자 하는 경우에, 사용자 자신의 얼굴 등을 비춰볼 수 있게 한다.

단말기 바디의 후면에는 음향 출력부(252')가 추가로 배치될 수도 있다. 음향 출력부(252')는 음향 출력부(252, 도 4 참조)와 함께 스테레오 기능을 구현할 수 있으며, 통화시 스피커폰 모드의 구현을 위하여 사용될 수도 있다.

단말기 바디의 측면에는 통화 등을 위한 안테나 외에 방송신호 수신용 안테나(216)가 추가적으로 배치될 수 있다. 방송수신모듈(211, 도 2 참조)의 일부를 이루는 안테나(216)는 단말기 바디에서 인출 가능하게 설치될 수 있다.

단말기 바디에는 이동 단말기(200)에 전원을 공급하기 위한 전원공급부(290)가 장착된다. 전원공급부(290)는 단말기 바디에 내장되거나, 단말기 바디의 외부에서 직접 탈착될 수 있게 구성될 수 있다.

리어 케이스(202)에는 터치를 감지하기 위한 터치 패드(235)가 추가로 장착될 수 있다. 터치 패드(235) 또한 디스플레이부(251)와 마찬가지로 광 투과형으로 구성될 수 있다. 이 경우에, 디스플레이부(251)가 양면에서 시각 정보를 출력하도록 구성된다면, 터치 패드(235)를 통해서도 상기 시각 정보를 인지할 수 있게 된다. 상기 양면에 출력되는 정보는 상기 터치 패드(235)에 의해 모두 제어될 수도 있다. 이와 달리, 터치 패드(235)에는 디스플레이가 추가로 장착되어, 리어 케이스(202)에도 터치 스크린이 배치될 수도 있다.

도 5는 본 발명의 일 실시예에 의한 컨트롤 디바이스의 구성 모듈들을 도시한 블록도이다. 다만, 컨트롤 디바이스의 일 예로서 멀티미디어 디바이스(300)를 예로 들어 설명하도록 하겠다. 물론, 본 발명의 권리범위가 멀티미디어 디바이스(300)로 제한되는 것은 아니다.

도 5를 참조하면, 멀티미디어 디바이스(300)는 방송 수신 모듈(301), 복조부(302), 네트워크 인터페이스부(303), 외부장치 인터페이스부(304), 메모리(305), 제어부(306), 비디오 출력부(307), 오디오 출력부(308), 전원 공급부(309) 그리고 사용자 인터페이스(311) 등을 포함할 수 있다. 상기 방송 수신 모듈(201)은, 예컨대 RF 튜너로 설계할 수도 있고 또는 STB 등 외부 디바이스로부터 방송 데이터를 수신하는 인터페이스로 설계 가능하다. 다만, 다만 도 5에 도시된 구성요소들이 모두 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 멀티미디어 디바이스가 구현될 수도 있다.

이하, 상기 구성요소들에 대해 차례로 살펴본다.

방송 수신 모듈(301)은, 예를 들어 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다.

복조부(302)는, 방송 수신 모듈(301)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다.

예를 들어, 방송 수신 모듈(301)에서 출력되는 디지털 IF 신호가 ATSC 방식인경우, 복조부(302)는 예컨대, 8-VSB(8-Vestigal Side Band) 복조를 수행한다. 또한, 복조부(302)는 채널 복호화를 수행할 수도 있다.

외부장치 인터페이스부(304)는 외부 장치와 멀티미디어 디바이스(300)간 데이터 통신이 가능하게 하는 인터페이스이다. 외부장치 인터페이스부(304)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북), STB 등과 같은 외부 장치와 유/무선으로 접속될 수 있다. 상기 외부 디바이스(200)는 외부장치 인터페이스부(304)를 통해 멀티미디어 디바이스(300)와 유/무선으로 연결될 수 있다. 외부장치 인터페이스부(304)는 연결된 외부 장치를 통하여 외부에서 입력되는 영상, 음성 또는 데이터 신호를 제어부(306)로 전달한다. 또한, 제어부(306)에서 처리된 영상, 음성 또는 데이터신호를, 외부 장치로 출력할 수 있다.

상기 외부장치 인터페이스부(304)는, 예를 들어 USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자 등을 포함할 수 있다. 외부장치 인터페이스부(304)는 무선 네트워크와의 접속을 위해, 예를 들어 블루투스(Bluetooth), WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다.

네트워크 인터페이스부(303)는, 멀티미디어 디바이스(300)를 인터넷 망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스부(303)는, 유선 네트워크와의 접속을 위해, 예를 들어 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, 예를 들어 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다.

네트워크 인터페이스부(303)는, 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다.

메모리(305)는, 제어부(306) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다. 또한, 메모리(305)는 외부장치 인터페이스부(304) 또는 네트워크 인터페이스부(303)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 메모리(305)는, 예를 들어 다양한 OS, 미들웨어 및 플랫폼을 저장하고 있다.

메모리(305)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.

사용자 인터페이스(311)는, 사용자가 입력한 신호를 제어부(306)로 전달하거나, 제어부(306)로부터의 신호를 외부 디바이스(예를 들어, 제2 리모트 컨트롤러(500))로 전송한다. 예를 들어, 사용자 인터페이스(311)는, RF(Radio Frequency) 통신 방식, 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 리모트 컨트롤러(400)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(306)로부터의 제어 신호를 리모트 컨트롤러(400)로 송신하도록 설계되어 있다.

제어부(306)는, 방송 수신 모듈(301), 복조부(302), 네트워크 인터페이스부(303) 또는 외부장치 인터페이스부(304)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다. 상기 제어부(306)에 대해서는 도 6을 참조하여 보다 상세히 후술하도록 하겠다.

상기 비디오 출력부(307)는, 제어부(306)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(304)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R, G, B 신호로 변환하여 구동 신호를 생성한다. 상기 비디오 출력부(307)는, PDP, LCD, OLED, 플렉시블 디스플레이 (flexible display), 3차원 디스플레이(3D display) 등이 가능하다.

상기 오디오 출력부(308)는, 제어부(306)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1채널 신호 또는 5.1채널 신호를 입력받아 음성으로 출력한다. 음성 출력부(308)는 다양한 형태의 스피커로 구현될 수 있다.

그리고, 전원 공급부(309)는, 멀티미디어 디바이스(300) 전반에 걸쳐 해당 전원을 공급한다. 특히, 시스템 온 칩(System On Chip, SOC)의 형태로 구현될 수 있는 제어부(306)와, 영상 표시를 위한 비디오 출력부(307) 및 오디오 출력을 위한 오디오 출력부(308)에 전원을 공급할 수 있다.

도 6은 도 5에 도시된 멀티미디어 디바이스의 제어부를 보다 상세히 도시한 블록도이다.

도 6에 도시된 바와 같이, 멀티미디어 디바이스(300)의 제어부(306)는, 역다중화부(310), 영상처리부(320), GUI 생성부(330), 믹서(340), 프레임 레이트 변환부(350) 그리고 포맷터(360) 등을 포함한다. 또한, 음성 처리부(미도시), 데이터 처리부(미도시)를 더 포함하도록 설계하는 것도 본 발명의 권리범위에 속한다.

상기 역다중화부(310)는, 입력되는 스트림을 역다중화한다. 예를 들어, MPEG-2 TS가 입력되는 경우 이를 역다중화하여, 각각 영상, 음성 및 데이터 신호로 분리할 수 있다.

영상 처리부(320)는, 역다중화된 영상 신호의 영상 처리를 수행할 수 있다. 이를 위해, 영상 처리부(320)는, 영상 디코더(322) 및 스케일러(324)를 구비할 수 있다. 상기 영상 디코더(322)는, 역다중화된 영상신호를 복호화하며, 상기 스케일러(324)는, 복호화된 영상신호의 해상도를 비디오 출력부에서 출력 가능하도록 스케일링(scaling)을 수행한다. 그리고, 영상 처리부(320)에서 복호화된 영상 신호는, 믹서(340)로 입력된다.

GUI 생성부(330)는, 사용자 입력에 따라 또는 자체적으로 GUI 신호를 생성한다. 따라서, 믹서(340)는, GUI 생성부(330)에서 생성된 GUI 신호와 영상처리부(320)에서 영상 처리된 복호화된 영상 신호를 믹싱할 수 있다. GUI 생성부(300)는 볼륨 제어 또는 화면 제어 등과 같이 환경 설정 정보를 포함하는 OSD(On Screen Display) 신호를 생성하는 OSD 생성부를 포함한다.

믹싱된 신호는 포맷터(360)에 제공된다. 복호화된 방송 영상 신호 또는 외부 입력 신호와 OSD 신호가 믹싱됨으로 인하여, 방송 영상 또는 외부 입력 영상 상에 OSD 가 오버레이 되어 표시될 수 있게 된다.

프레임 레이트 변환부(Frame Rate Conveter; FRC)(350)는, 입력되는 영상의 프레임 레이트를 변환할 수 있다. 예를 들어, 60Hz의 프레임 레이트를 120Hz 또는 240Hz로 변환한다. 60Hz의 프레임 레이트를 120Hz로 변환하는 경우, 제1 프레임과 제2 프레임 사이에, 동일한 제1 프레임을 삽입하거나, 제1 프레임과 제2 프레임으로부터 예측된 제3 프레임을 삽입하는 것이 가능하다. 60Hz의 프레임 레이트를 240Hz로 변환하는 경우, 동일한 프레임을 3개 더 삽입하거나, 예측된 프레임을 3개 삽입하는 것이 가능하다. 한편, 별도의 변환 없이 입력되는 프레임 레이트를 유지하는 것도 가능하다.

그리고, 포맷터(360)는, 프레임 레이트 변환부(350)의 출력 신호를 입력받아, 비디오 출력부에 적합하도록 신호의 포맷을 변경하여 출력한다. 예를 들어, R, G, B 데이터 신호를 출력할 수 있으며, 이러한 R, G, B 데이터 신호는, 낮은 전압 차분 신호(Low voltage differential signaling, LVDS) 또는 mini-LVDS로 출력될 수 있다.

도 7은 본 발명의 일 실시예에 따른 리모트 컨트롤러의 외관을 간략히 도시한 도면이다. 도 6과 마찬가지로 설명의 편의상 멀티미디어 디바이스(300)를 예시하여 설명하도록 하겠다.

우선, 도 7의 (a)을 참조하면, 멀티미디어 디바이스(300)의 화면에 리모트 컨트롤러(400)에 대응하는 포인터(P)가 표시되는 것을 예시한다.

사용자는 리모트 컨트롤러(400)를 상하, 좌우(도 7의 (b)), 앞뒤(도 7의 (c))로 움직이거나 회전할 수 있다. 멀티미디어 디바이스(300)의 화면에 표시된 포인터(P)는 리모트 컨트롤러(400)의 움직임에 대응한다. 이러한 리모트 컨트롤러(400)는, 도면과 같이, 3D 공간상의 움직임에 따라 해당 포인터(P)가 이동되어 표시되므로, 공간 리모콘이라 명명할 수 있다.

도 7의 (b)는 사용자가 리모트 컨트롤러(400)를 왼쪽으로 이동하면, 멀티미디어 디바이스(300)의 화면에 표시된 포인터(P)도 이에 대응하여 왼쪽으로 이동하는 것을 예시한다.

리모트 컨트롤러(400)의 센서를 통하여 감지된 리모트 컨트롤러(400)의 움직임에 관한 정보는 멀티미디어 디바이스(300)로 전송된다. 멀티미디어 디바이스(300)는 리모트 컨트롤러(400)의 움직임에 관한 정보로부터 포인터(P)의 좌표를 산출할 수 있다. 멀티미디어 디바이스(300)는 산출한 좌표에 대응하도록 포인터(P)를 표시할 수 있다.

도 7의 (c)는, 리모트 컨트롤러(400) 내의 특정 버튼을 누른 상태에서, 사용자가 리모트 컨트롤러(400)를 멀티미디어 디바이스(300)에서 멀어지도록 이동하는 경우를 예시한다. 이에 의해, 포인터(P)에 대응하는 화면 내의 선택 영역이 줌인 되어 확대 표시될 수 있다. 이와 반대로, 사용자가 리모트 컨트롤러(400)를 멀티미디어 디바이스(300)에 가까워지도록 이동하는 경우, 포인터(P)에 대응하는 화면 내의 선택 영역이 줌아웃 되어 축소 표시될 수 있다. 한편, 리모트 컨트롤러(400)가 멀티미디어 디바이스(300)에서 멀어지는 경우, 선택 영역이 줌아웃 되고, 리모트 컨트롤러(400)가 멀티미디어 디바이스(300)에 가까워지는 경우, 선택 영역이 줌인 될 수도 있다.

도 8은 도 7에 도시된 리모트 컨트롤러의 구성모듈들을 상세히 도시한 블록도이다.

도 8에 도시된 바와 같이, 리모트 컨트롤러(400)는, 무선통신부(414), 사용자 입력부(415), 센서부(417), 출력부(416), 전원공급부(411), 저장부(412), 그리고 제어부(413) 등을 포함한다.

무선통신부(414)는 임의의 외부 장치와 통신 가능하도록 설계된다.

리모트 컨트롤러(400)는 RF 통신규격에 따라 멀티미디어 디바이스(300)와 신호를 송수신할 수 있는 RF 모듈(414a)을 구비할 수 있다. 또한, 리모트 컨트롤러(400)는 IR 통신규격에 따라 멀티미디어 디바이스(300)와 신호를 송수신할 수 있는 IR 모듈(414b)을 구비할 수 있다.

리모트 컨트롤러(400)는 멀티미디어 디바이스(300)로 리모트 컨트롤러(400)의 움직임 등에 관한 정보가 담긴 신호를 RF 모듈(414a)을 통하여 전송한다.

또한, 리모트 컨트롤러(400)는 멀티미디어 디바이스(300)가 전송한 신호를 RF 모듈(414b)을 통하여 수신할 수 있다. 또한, 리모트 컨트롤러(400)는 필요에 따라 IR 모듈(414b)을 통하여 멀티미디어 디바이스(300)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 명령을 전송할 수 있다.

사용자 입력부(415)는 키패드, 버튼, 터치 패드, 또는 터치 스크린 등으로 구성될 수 있다.

센서부(417)는 자이로 센서(417a) 또는 가속도 센서(417b)를 구비할 수 있다. 자이로 센서(417a)는 리모트 컨트롤러(400)의 움직임에 관한 정보를 센싱할 수 있다. 일례로, 자이로 센서(417a)는 리모트 컨트롤러(400)의 동작에 관한 정보를 x, y, z 축을 기준으로 센싱할 수 있다. 가속도 센서(417b)는 리모트 컨트롤러(400)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 거리측정센서를 더 구비할 수 있으며, 이에 의해, 멀티미디어 디바이스(300)와의 거리를 센싱할 수 있다.

출력부(416)는 사용자 입력부(415)의 조작에 대응하거나 멀티미디어 디바이스(300)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 일례로, 출력부(416)는 사용자 입력부(415)가 조작되거나 무선 통신부(414)를 통하여 멀티미디어 디바이스(300)와 신호가 송수신 되면 점등되는 LED 모듈(416a), 진동을 발생하는 진동 모듈(416b), 음향을 출력하는 음향 출력 모듈(416c), 또는 영상을 출력하는 디스플레이 모듈(416d)을 구비할 수 있다.

전원공급부(411)는 리모트 컨트롤러(400)의 각 구성요소에 전원을 공급한다. 전원공급부(411)는 리모트 컨트롤러(400)가 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로써 전원 낭비를 줄일 수 있다.

저장부(412)는 리모트 컨트롤러(400)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다. 그리고, 제어부(413)는 리모트 컨트롤러(400)의 제어에 관련된 제반사항을 제어한다. 예를 들어, 상기 제어부(413)는, 사용자 입력부(415)의 소정 키 조작에 대응하는 신호 또는 센서부(417)에서 센싱한 리모트 컨트롤러(400)의 움직임에 대응하는 신호를 무선 통신부(414)를 통하여 멀티미디어 디바이스(300)로 전송할 수 있다.

도 9는 본 발명의 일 실시예에 의한 컨트롤 디바이스 내 구성 모듈들을 보다 간략히 도시한 도면이다.

도 9를 참조하면, 본 발명의 일 실시예에 의한 컨트롤 디바이스(500)는 통신부(510), 제어부(520), 메모리(530), 입력 수신부(540), 디스플레이부(550)를 포함한다.

입력 수신부(540)는 사용자 입력을 수신 및/또는 센싱한다. 입력 수신부(540)는 사용자가 컨트롤 디바이스(500)를 사용하여 제어하고자 하는 외부 디바이스(120)에 대한 커맨드를 수신한다.

입력 수신부(540)는 사용자의 터치를 감지하는 터치 센서, 사용자가 음성을 입력하는 경우 음성 신호를 수신하는 음성 수신부, 리모트 컨트롤러(400)로부터 전송되는 제어 신호를 수신하는 제어 신호 수신부 등을 포함할 수 있다. 디스플레이부(550)를 통해 그래픽 사용자 인터페이스(GUI)가 디스플레이되거나, 디스플레이부(550)가 터치 스크린을 포함하는 경우, 디스플레이부(550)가 입력 수신부(540)로도 사용될 수 있다.

입력 수신부(540)는 도 2에 도시된 이동 단말기(200)의 A/V 입력부(220), 사용자 입력부(230), 센싱부(240), 디스플레이부(251) 등에서 구현될 수 있다. 또한, 입력 수신부(540)는 도 5에 도시된 멀티미디어 디바이스(300)의 사용자 인터페이스부(311), 비디오 출력부(307) 등에서 구현될 수 있다.

또한, 디스플레이부(550)는 도 2에 도시된 이동 단말기(200)의 디스플레이부(251)에서 구현될 수도 있고, 도 5에 도시된 멀티미디어 디바이스(300)의 비디오 출력부(307)에서 구현될 수도 있다.

제어부(520)는 통신부(510), 메모리(530), 입력 수신부(540) 및 디스플레이부(550) 각각을 제어한다.

제어부(520)는 사용자가 컨트롤 디바이스(500)를 사용하여 외부 디바이스(120)를 제어할 수 있도록 GUI를 생성하고, 생성된 GUI가 디스플레이부(550)를 통해 디스플레이되도록 제어한다.

제어부(520)는 도 2에 도시된 이동 단말기(200)의 제어부(280)에서 구현될 수도 있고, 도 5에 도시된 멀티미디어 디바이스(300)의 제어부(306)에서 구현될 수도 있다.

상기 GUI는 적어도 하나의 외부 디바이스(120)에 각각 매칭되는 아이콘들을 포함하는 제1 영역 및 상기 적어도 하나의 외부 디바이스(120)의 연결 및 설정 모드를 선택하는 커맨드를 수신하기 위한 제2 영역을 포함한다.

상기 적어도 하나의 외부 디바이스(120)의 연결이란, 외부 디바이스(120)가 컨트롤 디바이스(500)와 단순히 유/무선 네트워크에 의해 연결되어 있는 것과는 다른 의미이며, 외부 디바이스(120)가 특정 모드로 설정된 상태에서 컨트롤 디바이스(500)와 연결되어 컨트롤 디바이스(500)의 제어를 받는 상태를 의미한다. 이하에서는, 외부 디바이스의 연결이라는 용어를 사용할 경우 이러한 의미인 것으로 전제한다.

입력 수신부(540)는 상기 아이콘들 중 임의의 아이콘을 선택 및 이동시키기 위한 커맨드를 수신한다. 상기 커맨드는 디스프레이부(550) 내 터치 스크린을 터치하는 사용자 입력에 의해 수신될 수도 있고, 도 7에 도시된 리모트 컨트롤러(400)로부터 수신될 수도 있다. 예를 들어, 사용자가 상기 아이콘을 손으로 터치하여 드래그함으로써 상기 커맨드가 발생할 수도 있고, 사용자가 리모트 컨트롤러(400)의 움직임에 대응하는 포인터(P)를 상기 아이콘 상에 위치시킨 후 리모트 컨트롤러(400)를 사용하여 선택 및 드래그함으로써 상기 커맨드가 발생할 수도 있다.

제어부(520)는 외부 디바이스(120)의 타입에 따라 상기 GUI 내 제2 영역을 구조화한다. 상기 구조화된 제2 영역은 복수 개의 서브 영역을 포함하며, 상기 복수 개의 서브 영역은 서로 다른 설정 모드로 기 설정되어 있다.

예를 들어, 외부 디바이스(120)가 오디오 신호를 출력하는 오디오 출력기기인 경우, 상기 제2 영역 내 복수 개의 서브 영역은 팝(pop), 락(rock), 힙합(hip-hop), 재즈(jazz) 등의 이퀄라이저 모드가 각각 다르게 설정되어 있을 수 있다. 또는, 오디오 출력기기인 외부 디바이스(120)의 설치 위치에 따라, 각 음역대(Hz)의 음량(DB)을 조절하여 안락한 침실에서 음악을 감상하기에 적합한 설정 모드와 체력 단련실에서 신나게 음악을 감상하기에 적합한 설정 모드 등으로 상기 서브 영역 각각을 설정할 수도 있다.

또는, 예를 들어, 외부 디바이스(120)가 조명기기인 경우, 외부 디바이스(120)의 위치에 따라. 숙면에 적합한 설정 모드와 공부에 적합한 설정 모드 등으로 상기 서브 영역 각각을 설정할 수도 있다.

이러한 서브 영역 각각의 설정 모드는 사용자가 컨트롤 디바이스(500)를 통해 미리 설정해두고, 컨트롤 디바이스(500)는 기 설정된 설정 모드들을 메모리(530)에 저장해 둔다.

컨트롤 디바이스(500) 내 제어부(520)는 입력 수신부(540)로부터 커맨드가 수신된 경우, 메모리(530)에 액세스하여 기 설정된 설정 모드들을 디텍트하고, 상기 디텍트된 설정 모드들에 각각 매칭되는 서브 영역을 포함하도록 상기 GUI의 제2 영역을 구조화하여 출력한다. 제어부(520)는 외부 디바이스(120)의 타입에 따라, 외부 디바이스(120)가 오디오 출력기기인 경우에는 오디오 출력기기에 대응하여 저장된 설정 모드들을 메모리(530)로부터 디텍트하고, 외부 디바이스(120)가 조명기기인 경우에는 조명기기에 대응하여 저장된 설정 모드들을 메모리(530)로부터 디텍트할 수 있다.

메모리(530)는 도 2에 도시된 이동 단말기(200)의 메모리(260)에서 구현될 수도 있고, 도 5에 도시된 멀티미디어 디바이스(300)의 메모리(305)에서 구현될 수도 있다.

제어부(520)는 외부 디바이스(120)의 타입을 판단하고, 판단된 외부 디바이스(120)의 타입에 따라 상기 GUI 내 제2 영역을 다른 형태로 구조화할 수 있다.

또한, 제어부(520)는, 입력 수신부(540)에서 수신되는 커맨드에 따라, 외부 디바이스(120)를 상기 제2 영역 내 서브 영역에 기 설정된 설정 모드로 설정할 수 있다. 또한, 제어부(520)는, 입력 수신부(540)에서 수신되는 커맨드에 따라, 외부 디바이스(120)에 설정되어 있던 설정 모드를 해제할 수 있다.

외부 디바이스(120)가 특정 설정 모드로 설정되거나 특정 설정 모드로부터 해제되는 경우, 통신부(510)는 이에 대응하는 제어 신호를 외부 디바이스(120)로 전송하고, 이에 따라 외부 디바이스(120)가 제어된다.

통신부(510)는 도 2에 도시된 이동 단말기(200)의 이동통신 모듈(212), 무선 인터넷 모듈(213), 근거리 통신 모듈(214) 등에서 구현될 수도 있고, 도 5에 도시된 멀티미디어 디바이스(300)의 네트워크 인터페이스부(303), 외부장치 인터페이스부(304) 등에서 구현될 수도 있다.

컨트롤 디바이스(500)를 사용하여 외부 디바이스(120)를 제어하는 보다 구체적인 방법은 도 10 내지 도 35를 참조하여 후술하기로 한다. 이하에서 참조되는 도 10 내지 도 32에 도시된 GUI는 컨트롤 디바이스(500)의 제어부(520)에서 생성되어 디스플레이부(550)를 통해 출력되는 것을 전제한다. 또한, 외부 디바이스들을 제어하기 위한 프로그램 또는 애플리케이션이 컨트롤 디바이스(500)에 설치되어 있는 것으로 가정한다.

도 10은 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예를 도시한 도면이다.

도 10을 참조하면, 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI는 제1 영역(610) 및 제2 영역(620)을 포함한다. 실시예에 따라, 상기 GUI는, 현재 제어하고자 하는 외부 디바이스들의 타입 및 컨트롤 디바이스를 사용하여 제어할 수 있는 기타 외부 디바이스들의 타입을 표시하는 제3 영역(630)을 더 포함할 수 있다.

상기 제1 영역(610)은 복수 개의 외부 디바이스(611, 612, 613, 614)에 각각 매칭되는 아이콘들(611a, 612a, 613a, 614a)을 포함한다. 현재 제어 대상이 되는 외부 디바이스들(611, 612, 613, 614)은 오디오 출력기기이며, 가정 내에서 서로 다른 장소에 위치하는 것으로 가정한다.

도 10에는 일 예로서, 체력 단련실에 위치하는 제1 디바이스(611), 거실에 위치하는 제2 디바이스(612), 아기 방에 위치하는 제3 디바이스(613), 부엌에 위치하는 제4 디바이스(614)를 도시하였다. 그 이외의 오디오 출력기기가 존재하는 경우, 사용자는 제1 영역(610) 내 아이콘들(611a, 612a, 613a, 614a)이 위치하는 부분을 화살표(H) 방향으로 이동시킴으로써 다른 디바이스들을 확인할 수 있다.

상기 아이콘들(611a, 612a, 613a, 614a)은 외부 디바이스들(611, 612, 613, 614) 각각이 어느 위치에 존재하는지 사용자가 직관적으로 알 수 있도록 하는 그림을 포함할 수 있으며, 상기 위치를 인디케이트하는 인디케이터(예를 들어, 체력 단련실을 나타내는 대표 단어(EXERCISE))가 아이콘들(611a, 612a, 613a, 614a) 근처에 함께 표시될 수도 있다.

상기 제2 영역은 외부 디바이스들(611, 612, 613, 614)의 연결 및 설정 모드를 선택하는 커맨드를 수신하기 위한 인터페이스이다.

사용자는 제1 영역 내 아이콘들(611a, 612a, 613a, 614a)을 선택 및 드래그하여 제2 영역(620)으로 옮김으로써, 아이콘들(611a, 612a, 613a, 614a)에 매칭되는 외부 디바이스들(611, 612, 613, 614)을 연결할 수 있다.

예를 들어, 사용자가 체력 단련실에 위치하는 제1 디바이스(611)를 통하여 음악을 감상하고자 하는 경우, 사용자는 제1 디바이스(611)에 해당하는 제1 아이콘(611a)을 선택하여 제1 영역(610)에서 제2 영역(620)으로 드래그함으로써, 제1 디바이스(611)를 컨트롤 디바이스와 연결할 수 있다.

사용자는 외부 디바이스를 컨트롤 디바이스와 연결하고자 하는 경우 복잡한 단계의 메뉴를 거칠 필요가 없으며, 원하는 외부 디바이스에 해당하는 아이콘을 제2 영역(620)으로 드래그하는 직관적인 동작만 하면 된다.

제2 영역(620) 내에는 사용자 편의를 위하여 Drag Here to Connect 라는 가이드 메시지를 표시할 수도 있다.

제 3 영역(630)에는 현재 제어 대상이 되는 외부 디바이스들(611, 612, 613, 614)의 타입 및 컨트롤 디바이스를 사용하여 제어할 수 있는 기타 외부 디바이스들의 타입을 표시한다. 외부 디바이스들의 타입을 대표하는 글씨나 그림을 표시할 수 있으며, 현재 제어 대상이 되는 외부 디바이스들(611, 612, 613, 614)의 타입을 나타내는 그림(631)을 중앙에 배치하고 하이라이트할 수 있다. 사용자 편의를 위하여, 상기 그림(631)과 함께 오디오 출력기기임을 알 수 있는 글씨(SPEAKER, 632)를 표시할 수도 있다.

컨트롤 디바이스는 상기 제3 영역(630)을 통해 제어하고자 하는 외부 디바이스의 타입을 선택하는 커맨드를 수신할 수 있다. 사용자는 상기 제3 영역(630) 부분을 드래그하여 제어하고자 하는 외부 디바이스의 타입을 나타내는 인디케이터를 중앙에 오도록 하여 외부 디바이스의 타입을 선택할 수 있다.

실시예에 따라, 사용자가 이미 음악을 재생중인 경우였다면, 상기 GUI에, 현재 재생 또는 일시 정지 중인 음악 컨텐츠에 대응하는 정보를 표시하는 제4 영역(640)이 포함된 GUI를 디스플레이할 수도 있다.

도 11 내지 도 15는 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하는 방법의 일 예시를 설명하기 위한 도면이다.

도 11은 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예를 도시한 것이다.

도 11을 참조하면, 컨트롤 디바이스는 상기 GUI의 제1 영역(610) 내 아이콘들(611a, 612a, 613a, 614a) 중에서 임의의 아이콘을 선택 및 이동시키기 위한 제1 커맨드를 수신한다. 상기 제1 커맨드는 입력 수신부(540)를 통해 수신된다. 예를 들어, 사용자가 체력 단력실에 위치하는 제1 디바이스(611)에 매칭되는 제1 아이콘(611a)을 선택하는 경우를 가정하여 설명한다.

상기 제1 커맨드는 사용자가 GUI 상에서 제1 아이콘(611a)을 선택 및 드래그함으로써 발생할 수 있다.

컨트롤 디바이스는 상기 수신된 제1 커맨드에 따라, 제1 영역(610) 내 제1 아이콘(611a)을 제2 영역(620)에 접근시킨다. 그리고, 컨트롤 디바이스는, 제1 아이콘(611a)의 적어도 일부가 제1 영역(610)을 벗어난 경우, 상기 제2 영역(620)을 구조화한다.

제2 영역(620)을 구조화한다는 의미는 제2 영역(620)을 복수 개의 서브 영역(621, 622, 623, 624)으로 분할한다는 의미이다. 구조화된 제2 영역(620)은 복수 개의 서브 영역(621, 622, 623, 624)을 포함하며, 상기 복수 개의 서브 영역(621, 622, 623, 624) 각각은 서로 다른 모드로 기 설정되어 있다.

컨트롤 디바이스는 제2 영역(620)을 구조화할 때, 외부 디바이스들(611~614)의 타입에 따라 적절한 설정 모드들을 메모리(503)로부터 디텍트하여 제2 영역(620)을 구조화한다. 예를 들어, 컨트롤 디바이스는 외부 디바이스들(611~614)이 오디오 출력기기인 경우, 오디오 출력기기에 대응하여 저장된 설정 모드들을 메모리(530)로부터 디텍트하고, 상기 디텍트된 설정 모드들에 각각 매칭된 서브 영역(621, 622, 623, 624)으로 제2 영역(620)을 분할한다.

구조화된 제2 영역(620)에서 복수 개의 서브 영역(621, 622, 623, 624) 각각의 사이를 구획하는 지시선(예를 들어, 점선, 실선 등)을 표시하여 사용자가 복수 개의 서브 영역(621, 622, 623, 624) 각각을 인지할 수 있도록 한다.

도 11을 참조하면, 구조화된 제2 영역(620)은 네 개의 서브 영역(621, 622, 623, 624)을 포함하고, 제1 서브 영역(621)은 제1 설정 모드(preset 1)로 기 설정되어 있고, 제2 서브 영역(622)은 제2 설정 모드(preset 2)로 기 설정되어 있고, 제3 서브 영역(623)은 제3 설정 모드(preset 3)로 기 설정되어 있고, 제4 서브 영역(624)은 제4 설정 모드(preset 4)로 기 설정되어 있다. 사용자 편의를 위하여, 서브 영역들(621, 622, 623, 624) 각각에 설정 모드의 특징을 나타내는 설명 문구 등을 간략히 기재할 수도 있다.

예를 들어, 상기 제2 영역(620) 내 복수 개의 서브 영역(621~624)은 팝(pop), 락(rock), 힙합(hip-hop), 재즈(jazz) 등의 이퀄라이저 모드가 각각 다르게 설정되어 있을 수 있다. 또는, 외부 디바이스(611~614)가 설치된 위치에 따라, 각 음역대(Hz)의 음량(DB)을 조절하여 안락한 침실에서 음악을 감상하기에 적합한 설정 모드와 체력 단련실에서 신나게 음악을 감상하기에 적합한 설정 모드 등으로 상기 서브 영역(621~624) 각각을 설정할 수도 있다.

사용자가 제1 아이콘(611a)을 선택하여 드래그를 하면 제2 영역(620)이 구조화되어 복수 개의 서브 영역(621, 622, 623, 624)이 나타나므로, 사용자는 원하는 설정 모드로 기 설정되어 있는 서브 영역들 중에서 원하는 서브 영역을 선택할 수 있다. 예를 들어, 사용자가 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)를 제1 설정 모드로 설정하고자 하는 경우, 사용자는 제1 아이콘(611a)을 선택하여 제2 영역(620) 내 제1 서브 영역(621)까지 드래그하면 된다.

도 12 및 도 13은 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예시들을 도시한 도면이다.

도 12 및 도 13을 참조하면, 컨트롤 디바이스는, 제1 아이콘(611a)의 적어도 일부가 제2 영역(620) 내 복수 개의 서브 영역(621, 622, 623, 624)과 오버랩되는 경우, 오버랩된 서브 영역을 하이라이트한다. 만일, 제1 아이콘(611a)이 인접한 두 개 이상의 서브 영역과 오버랩되는 경우, 제1 아이콘(611a)과 상대적으로 넓은 면적에서 오버랩되는 하나의 서브 영역만이 하이라이트될 수도 있다.

컨트롤 디바이스는, 상기 수신된 제1 커맨드에 따라 제1 아이콘(611a)을 제2 영역(620)에 접근시키다가, 제1 아이콘(611a)이 제2 영역(620) 내 복수 개의 서브 영역(621, 622, 623, 624) 중 임의의 서브 영역과 오버랩되었음을 디텍팅한 경우, 오버랩된 서브 영역을 하이라이트함으로써 사용자가 명확히 인지할 수 있도록 한다.

컨트롤 디바이스가 상기 서브 영역을 하이라이트하는 과정의 일 예시를 설명하면 다음과 같다.

컨트롤 디바이스는 상기 제1 아이콘(611a)에 대응하는 영역의 제1 좌표 정보를 디텍트한다. 상기 제1 좌표 정보는 디스플레이부(550)의 스크린 상의 좌표 정보를 의미한다.

그리고, 컨트롤 디바이스는, 상기 제1 아이콘(611a)과 오버랩되는 서브 영역의 제2 좌표 정보를 디텍트한다. 상기 제2 좌표 정보는 디스플레이부(550)의 스크린 상의 좌표 정보를 의미하며, 상기 서브 영역 전체의 좌표 정보를 의미할 수 있다.

그 후, 컨트롤 디바이스는 상기 제1 좌표 정보와 제2 좌표 정보를 비교하고, 비교 결과 상기 제1 좌표 정보와 상기 제2 좌표 정보가 일치하는 부분이 있는 경우, 상기 서브 영역을 하이라이트한다.

도 12의 (a)에 도시된 바와 같이, 제1 아이콘(611a)의 일부가 제4 서브 영역(624)과 오버랩된 경우 제4 서브 영역(624)이 하이라이트되며, 도 12의 (b)에 도시된 바와 같이 제1 아이콘(611a)이 제4 서브 영역(624)과 완전히 오버랩될 때까지 제4 서브 영역(624)의 하이라이트 상태가 계속 유지된다. 컨트롤 디바이스는, 제1 아이콘(611a)의 적어도 일부와 오버랩되는 서브 영역이 디텍팅되는 경우, 제1 아이콘(611a)이 제2 영역(620)을 완전히 벗어나지 않는 한, 상기 서브 영역의 하이라이트 상태를 유지한다. 이로써, 사용자는, 하이라이트된 서브 영역에 아이콘을 드롭(drop)할 경우 상기 서브 영역에 기 설정되어 있는 설정 모드로 상기 아이콘에 매칭되는 외부 디바이스를 설정할 수 있음을 직관적으로 인지할 수 있다.

또는, 도 13의 (a)에 도시된 바와 같이, 제1 아이콘(611a)의 일부가 제2 서브 영역(622)과 오버랩된 경우 제2 서브 영역(622)이 하이라이트되며, 도 13의 (b)에 도시된 바와 같이 제1 아이콘(611a)이 제2 서브 영역(622)과 완전히 오버랩될 때까지 제2 서브 영역(622)의 하이라이트 상태가 계속 유지된다. 이때, 제2 서브 영역(622)은 도 12의 제4 서브 영역(624)과 다른 색상으로 하이라이트될 수 있다. 즉, 컨트롤 디바이스는, 아이콘들(611a~614a)과 오버랩되는 서브 영역(621~624) 별로 서로 다른 색상을 사용하여 하이라이트함으로써, 사용자로 하여금, 복수 개의 서브 영역(621~624) 각각이 서로 다른 설정 모드로 설정되어 있음을 직관적으로 인지할 수 있도록 한다.

도 14는 본 발명의 다른 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예시를 도시한 도면이다.

도 14를 참조하면, 컨트롤 디바이스는 상기 GUI의 제1 영역(610) 내 아이콘들(611a, 612a, 613a, 614a) 중에서 임의의 아이콘을 선택 및 이동시키기 위한 제1 커맨드를 수신한다. 예를 들어, 사용자가 체력 단력실에 위치하는 제1 디바이스(611)에 매칭되는 제1 아이콘(611a)을 선택하는 경우를 가정하여 설명한다.

상기 제1 커맨드는 사용자가 GUI 상에서 제1 아이콘(611a)을 선택 및 드래그함으로써 발생한다.

컨트롤 디바이스는 상기 수신된 제1 커맨드에 따라, 제1 영역(610) 내 제1 아이콘(611a)을 제2 영역(620)에 접근시킨다. 그리고, 컨트롤 디바이스는, 제1 아이콘(611a)의 적어도 일부가 제1 영역(610)을 벗어난 경우, 상기 제2 영역(620)을 구조화한다.

제2 영역(620)을 구조화한다는 의미는 제2 영역(620)을 복수 개의 서브 영역(621, 622, 623, 624)으로 분할한다는 의미이다. 구조화된 제2 영역(620)은 복수 개의 서브 영역(621, 622, 623, 624)을 포함하며, 상기 복수 개의 서브 영역(621, 622, 623, 624) 각각은 서로 다른 모드로 기 설정되어 있다.

그 후, 컨트롤 디바이스는 상기 복수 개의 서브 영역(621, 622, 623, 624) 중에서 상기 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)에 대하여 제1 우선순위를 갖는 설정 모드로 기 설정된 서브 영역을 하이라이트한다. 즉, 컨트롤 디바이스는 사용자가 제1 아이콘(611a)을 선택하여 제2 영역(620)으로 드래그하는 경우, 제1 디바이스(611)에 대하여 최우선순위를 갖는 설정 모드로 기 설정된 서브 영역을 사용자가 인지할 수 있도록, 상기 서브 영역을 하이라이트할 수 있다.

사용자는 제2 영역(620) 내 복수 개의 서브 영역(621, 622, 623, 624)에 각각 기 설정된 설정 모드들 중에서 외부 디바이스 별로 우선순위를 미리 결정해 둘 수 있으며, 컨트롤 디바이스는, 사용자 입력에 의한 상기 우선순위를 메모리(530)에 저장할 수 있다.

도 15는 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예를 도시한 도면이다. 도 15의 (a) 내지 (d)는 외부 디바이스의 모드 설정이 완료된 경우의 GUI의 예시들을 도시한 것이다.

컨트롤 디바이스는 상기 제1 아이콘(611a)의 선택 및 이동을 해제하는 제2 커맨드를 수신한다. 상기 제2 커맨드는 입력 수신부(540)를 통해 수신된다.

상기 제2 커맨드는 사용자가 상기 제1 아이콘(611a)을 제2 영역(620) 내 특정 서브 영역까지 드래그하고 선택을 해제하는 것에 의해 발생할 수 있다. 실시예에 따라, 상기 제2 커맨드는 사용자가 상기 제1 아이콘(611a)을 제2 영역(620) 내 특정 서브 영역 내에 완전히 위치하도록 한 상태에서 발생할 수도 있고, 상기 제1 아이콘(611a)이 특정 서브 영역과 일부만 오버랩된 상태에서 발생할 수도 있다. 도 15에서는, 사용자가 상기 제1 아이콘(611a)을 제2 영역(620) 내 제4 서브 영역(624)에 위치시킨 후 선택을 해제하는 경우를 가정하여 설명한다.

컨트롤 디바이스는 상기 수신된 제2 커맨드에 따라, 제2 영역(620)의 구조화를 해제한다. 따라서, 제2 영역(620)에는 상기 복수 개의 서브 영역(621~624)의 표시가 사라진다. 그리고, 컨트롤 디바이스는 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)를 상기 제4 서브 영역(624)의 제4 설정 모드로 설정한다.

이 경우, 컨트롤 디바이스는, 상기 제1 아이콘(611a) 내부를 도 12에서 제4 서브 영역(624)을 하이라이트했던 색상과 동일한 색상으로 하이라이트할 수도 있고(도 15의 (a)), 상기 제1 아이콘(611a) 주변에 상기 제4 설정 모드의 특징을 나타내는 인디케이터를 표시할 수도 있고(도 15의 (b)), 상기 제1 아이콘(611a) 내부를 하이라이트함과 동시에 상기 인디케이터를 함께 표시할 수도 있다(도 15의 (c)). 이로써, 사용자는 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)가 제4 설정 모드로 설정되었음을 인지할 수 있다.

또는, 사용자가 제1 디바이스(611)를 원하는 바에 따라 제4 설정 모드로 설정한 이상 더 이상 설정 모드에 대한 정보는 필요하지 않다고 여길 수도 있으므로, 제4 설정 모드를 나타내는 색상이나 인디케이터를 제2 영역(620)에 더 이상 표시하지 않을 수도 있다(도 15의 (d)).

또한, 제1 아이콘(611a)이 본래 위치하였던 제1 영역(610) 상의 위치에는 제1 아이콘(611a)과 동일한 아이콘(611b)을 활성화하거나 하이라이트하여, 현재 제1 디바이스(611)가 컨트롤 디바이스와 연결 상태에 있음을 표시할 수 있다.

도 10 내지 도 15와 관련하여 상술한 바에 따라 사용자는 외부 디바이스를 컨트롤 디바이스에 연결 및 특정 모드로의 설정을 동시에 할 수 있다. 또한, 외부 디바이스에 대하여 특정 모드가 미리 설정되어 있는 경우라면, 사용자는, 외부 디바이스에 대응하는 아이콘을 선택하여 제2 영역(620)으로 드래그 앤 드롭(drag and drop)하는 것에 의해 외부 디바이스를 컨트롤 디바이스에 연결하여 사용할 수도 있다.

도 16 내지 도 18은 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하기 위한 방법의 일 예시를 도시한 도면이다.

도 16 내지 도 18은 적어도 하나의 외부 디바이스가 이미 연결 및 모드 설정이 완료된 상태에서 다른 외부 디바이스를 연결 및 모드를 설정하는 실시예를 설명하기 위한 것이다.

도 16의 (a)에 도시된 바와 같이, GUI 내 제2 영역(620)에 제1 아이콘(611a)이 존재한다. 따라서, 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)는 컨트롤 디바이스와 연결된 상태이며, 제4 설정 모드로 설정되어 있다.

그리고, 도 16의 (b)에 도시된 바와 같이, 컨트롤 디바이스는 상기 GUI의 제1 영역(610) 내 아이콘들(612a, 613a, 614a) 중에서 임의의 아이콘을 선택 및 이동시키기 위한 제3 커맨드를 수신한다. 상기 제3 커맨드는 입력 수신부(540)를 통해 수신된다. 예를 들어, 사용자가 아기 방에 위치하는 제3 디바이스(613)에 매칭되는 제3 아이콘(613a)을 선택하는 경우를 가정하여 설명한다.

상기 제3 커맨드는 사용자가 GUI의 제1 영역(610)에서 제3 아이콘(613a)을 선택 및 드래그함으로써 발생될 수 있다.

컨트롤 디바이스는 상기 수신된 제3 커맨드에 따라, 제1 영역(610) 내 제3 아이콘(613a)을 제2 영역(620)에 접근시킨다. 그리고, 컨트롤 디바이스는, 제3 아이콘(613a)의 적어도 일부가 제1 영역(610)을 벗어난 경우, 상기 제2 영역(620)을 구조화한다.

제2 영역(620)을 구조화한다는 의미는 제2 영역(620)을 복수 개의 서브 영역(621, 622, 623, 624)으로 분할한다는 의미이다. 구조화된 제2 영역(620)은 복수 개의 서브 영역(621, 622, 623, 624)을 포함하며, 상기 복수 개의 서브 영역(621, 622, 623, 624) 각각은 서로 다른 모드로 기 설정되어 있다.

이 때, 컨트롤 디바이스는, 연결 및 모드 설정이 완료된 제1 디바이스(611)에 매칭되는 제1 아이콘(611a)을 제4 서브 영역(624) 내에 위치시킨다. 이로써, 사용자는, 제1 디바이스(611)가 어떠한 설정 모드로 설정되어 있는지를 인지한 상태에서, 이를 참고하여 제3 디바이스(613)의 설정 모드를 선택할 수 있다.

또는, 실시예에 따라, 도 14에서 상술한 바와 같이, 컨트롤 디바이스는 복수 개의 서브 영역(621, 622, 623, 624) 중에서 상기 제3 아이콘(613a)에 매칭되는 제3 디바이스(613)에 대하여 제1 우선순위를 갖는 설정 모드가 존재하는 경우에는, 상기 설정 모드로 기 설정된 서브 영역을 하이라이트할 수도 있다.

그 후, 도 17에 도시된 바와 같이, 컨트롤 디바이스는, 제3 아이콘(613a)의 적어도 일부가 제2 영역(620) 내 복수 개의 서브 영역(621, 622, 623, 624)과 오버랩되는 경우, 오버랩된 서브 영역을 하이라이트한다. 만일, 제3 아이콘(613a)이 인접한 두 개 이상의 서브 영역과 오버랩되는 경우, 제3 아이콘(613a)과 상대적으로 넓은 면적에서 오버랩되는 하나의 서브 영역만이 하이라이트될 수도 있다.

컨트롤 디바이스는, 상기 수신된 제1 커맨드에 따라 제3 아이콘(613a)을 제2 영역(620)에 접근시키다가, 제3 아이콘(613a)이 제2 영역(620) 내 복수 개의 서브 영역(621, 622, 623, 624) 중 임의의 서브 영역과 오버랩되었음을 디텍팅한 경우, 오버랩된 서브 영역을 하이라이트함으로써 사용자가 명확히 인지할 수 있도록 한다. 컨트롤 디바이스는, 제3 아이콘(613a)의 적어도 일부와 오버랩되는 서브 영역이 디텍팅되는 경우, 제3 아이콘(613a)이 제2 영역(620)을 완전히 벗어나지 않는 한, 상기 서브 영역의 하이라이트 상태를 유지한다.

도 17에 도시된 바와 같이, 제3 아이콘(613a)이 제3 서브 영역(623)과 오버랩되는 경우, 제3 서브 영역(623)은 도 12 및 도 13에서와는 다른 색상으로 하이라이트된다.

도 18은 제3 디바이스(623)의 모드 설정이 완료된 경우의 GUI를 도시한 것이다.

컨트롤 디바이스는 상기 제3 아이콘(613a)의 선택 및 이동을 해제하는 제4 커맨드를 수신한다. 상기 제4 커맨드는 입력 수신부(540)를 통해 수신된다.

상기 제4 커맨드는 사용자가 상기 제3 아이콘(613a)을 제2 영역(620) 내 특정 서브 영역까지 드래그하고 선택을 해제하는 것에 의해 발생할 수 있다. 실시예에 따라, 상기 제4 커맨드는 사용자가 상기 제3 아이콘(613a)을 제2 영역(620) 내 특정 서브 영역 내에 완전히 위치하도록 한 상태에서 발생할 수도 있고, 상기 제3 아이콘(613a)이 특정 서브 영역과 일부만 오버랩된 상태에서 발생할 수도 있다. 도 18에서는, 사용자가 상기 제3 아이콘(613a)을 제2 영역(620) 내 제3 서브 영역(623)에 위치시킨 후 선택을 해제하는 경우를 가정하여 설명한다.

컨트롤 디바이스는 상기 수신된 제4 커맨드에 따라, 제2 영역(620)의 구조화를 해제한다. 따라서, 제2 영역(620)에는 상기 복수 개의 서브 영역(621~624)의 표시가 사라진다. 그리고, 컨트롤 디바이스는 제3 아이콘(613a)에 매칭되는 제3 디바이스(613)를 상기 제3 서브 영역(623)의 제3 설정 모드로 설정한다.

상기 GUI 내 제2 영역(620) 내에는 제1 아이콘(611a)과 제3 아이콘(613a)이 존재하므로, 사용자는 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)와 제3 아이콘(613a)에 매칭되는 제3 디바이스(613)가 컨트롤 디바이스에 연결 및 특정 모드로 설정되었음을 인지할 수 있다. 상기 GUI 내에서 제1 아이콘(611a)과 제3 아이콘(613a)을 표시하는 방법은 도 15에서 상술한 방법이 적용될 수 있다.

도 19는 본 발명의 일 실시에에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하기 위한 방법의 일 예시를 도시한 도면이다.

도 19는 적어도 하나의 외부 디바이스가 이미 연결 및 모드 설정이 완료된 상태에서, 연결 및 모드 설정을 해제하기 위한 실시예를 설명하기 위한 것이다.

도 19의 (a)에 도시된 바와 같이, GUI의 제2 영역(620)에 제1 아이콘(611a), 제2 아이콘(612a) 및 제3 아이콘(613a)이 존재한다. 따라서, 제1 아이콘(611a), 제2 아이콘(612a) 및 제3 아이콘(613a)에 매칭되는 외부 디바이스들이 컨트롤 디바이스와 연결된 상태이며, 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)는 제1 설정 모드로 설정되어 있고, 제2 아이콘(612a)에 매칭되는 제2 디바이스(612)는 제3 설정 모드로 설정되어 있고, 제3 아이콘(613a)에 매칭되는 제3 디바이스(613)는 제2 설정 모드로 설정되어 있다.

도 19의 (b)에 도시된 바와 같이, 컨트롤 디바이스는 상기 GUI의 제2 영역(620) 내 아이콘들(611a, 612a, 613a) 중에서 임의의 아이콘을 선택 및 이동시키기 위한 제5 커맨드를 수신한다. 상기 제5 커맨드는 입력 수신부(540)를 통해 수신된다. 예를 들어, 사용자가 아기 방에 위치하는 제3 디바이스(613)에 매칭되는 제3 아이콘(613a)을 선택하는 경우를 가정하여 설명한다.

상기 제5 커맨드는 사용자가 GUI의 제2 영역(620)에서 제3 아이콘(613a)을 선택 및 드래그함으로써 발생할 수 있다.

컨트롤 디바이스는 상기 수신된 제5 커맨드에 따라, 제2 영역(620) 내 제3 아이콘(613a)을 제2 영역(620) 밖으로 이동시키고, 제3 디바이스(613)에 설정되었던 제2 설정 모드를 해제한다.

컨트롤 디바이스는 제3 아이콘(613a)이 제2 영역(620)을 벗어난 후에는, 상기 제5 커맨드가 계속하여 수신되는지 여부에 상관 없이 제3 아이콘(613a)을 제1 영역(610) 내 본래의 자리로 복귀시킬 수 있다. 즉, 컨트롤 디바이스는, 사용자가 제3 아이콘(613a)을 제1 영역(610) 내 본래의 자리까지 선택 및 드래그 상태를 유지하지 않더라도 제3 아이콘(613a)이 제2 영역(620)을 벗어난 경우라면, 사용자가 제3 아이콘(613a)의 선택 및 드래그 상태를 해제하였더라도 상기 제3 아이콘(613a)을 제1 영역(610) 내 본래의 자리로 복귀시킬 수 있다.

컨트롤 디바이스는 제1 영역(610) 내에서 제3 아이콘(613a)을 비활성화하거나 하이라이트하지 않음으로써, 제3 디바이스(613)의 연결 및 모드 설정이 해제되었음을 사용자가 직관적으로 인지할 수 있도록 한다.

사용자는 외부 디바이스의 연결 및 모드 설정을 해제하고자 하는 경우, 제2 영역(620) 내에 위치하는 아이콘을 드래그 앤 드롭에 의해 제2 영역(620)을 벗어나도록 함으로써 손쉽게 해제할 수 있다.

도 20 및 도 21은 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하기 위한 방법의 일 예시들을 도시한 도면이다.

도 20은 하나의 외부 디바이스가 이미 연결 및 모드 설정이 완료된 상태에서, 모드 설정을 변경하기 위한 실시예를 설명하기 위한 것이고, 도 21은 복수 개의 외부 디바이스가 이미 연결 및 모드 설정이 완료된 상태에서, 상기 복수 개의 외부 디바이스 중 적어도 어느 하나의 모드 설정을 변경하기 위한 실시예를 설명하기 위한 것이다.

먼저, 도 20의 (a)를 참조하면, GUI의 제2 영역(620)에 제1 아이콘(611a)이 존재한다. 따라서, 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)가 컨트롤 디바이스와 연결 및 제4 설정 모드로 설정된 상태이다.

컨트롤 디바이스는, 제2 영역(620) 내 제1 아이콘(621a)을 선택하는 제6 커맨드를 수신한다. 상기 제6 커맨드는 기 설정된 시간 동안 연속하여 수신된다. 상기 제6 커맨드는 기 설정된 시간 동안 GUI 상의 동일한 영역으로부터 계속하여 수신되는 것이 바람직하다.

상기 제6 커맨드는 사용자가 GUI의 제2 영역(620)에서 제1 아이콘(611a)을 선택한 상태에서, 기 설정된 시간 동안, 손 또는 리모트 컨트롤러(400)의 포인터(P)의 위치를 변경하지 않고 상기 선택을 유지하는 경우에 발생할 수 있다.

컨트롤 디바이스는, 상기 수신된 제6 커맨드에 따라, 상기 제2 영역(620)을 재 구조화한다. 상기 제2 영역(620)의 재 구조화는, 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)의 모드 설정시 제2 영역(620)이 구조화된 형태(예를 들어, 도 11에 도시된 제2 영역의 형태)와 동일한 형태로 구조화되는 것을 말한다. 다만, 이 경우, 제1 디바이스(611)는 제4 설정 모드로 설정된 상태이므로, 상기 제1 아이콘(611a)은 재 구조화된 제2 영역(620) 내 제4 서브 영역(624)에 위치된다.

사용자는, 재 구조화된 제2 영역(620) 내의 제1 아이콘(611a)의 위치를 다른 서브 영역으로 변경하여 설정 모드를 변경할 수도 있고, 제2 영역(620) 밖으로 변경하여 연결 및 설정 모드를 해제할 수도 있으며, 제1 아이콘(611a)이 아닌 다른 아이콘들을 선택하여 다른 외부 디바이스를 연결 및 모드 설정을 할 수도 있다.

도 21을 참조하면, 복수 개의 외부 디바이스(611, 612)가 이미 연결 및 모드 설정이 완료된 상태인 것을 제외하고는 도 20과 동일하므로 자세한 설명은 생략한다. 도 21의 (b)를 참조하면, 복수 개의 외부 디바이스(611, 612)에 각각 대응하는 제1 아이콘(611a)과 제2 아이콘(612a)이, 재 구조화된 제2 영역(620) 내에서, 각각의 설정 모드에 따라 제4 서브 영역(624)과 제3 서브 영역(623)에 위치하는 것을 확인할 수 있다.

도 22는 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하기 위한 방법의 일 예시를 도시한 도면이다.

도 22의 전 단계로서, 도 10 내지 도 14와 관련하여 상술한 예시들 중 적어도 하나가 동일하게 적용될 수 있으며, 이에 대한 자세한 내용은 생략한다. 사용자가 제1 디바이스(611)를 연결하고자 하는 경우를 가정하여 설명한다.

도 22의 (a)를 참조하면, 컨트롤 디바이스는 제1 디바이스(611)에 매칭되는 제1 아이콘(611a)이, 기 설정된 시간 이상, GUI의 제2 영역(620) 내 복수 개의 서브 영역들(621~624) 중 인접한 두 개의 서브 영역과 오버랩되는지 여부를 디텍팅한다. 제1 아이콘(611a)이 인접한 두 개의 서브 영역과 오버랩되는지 여부는 도 12 및 도 13과 관련하여 상술한 바와 같은 좌표 영역 비교 과정에 의해 디텍팅할 수 있다. 이 경우, 컨트롤 디바이스는, 제1 아이콘(611a)과 오버랩되는 상기 인접한 두 개의 서브 영역을 서로 다른 색상으로 하이라이트할 수 있다.

예를 들어, 도 22의 (b)를 참조하면, 컨트롤 디바이스는, 기 설정된 시간 이상, 상기 제1 아이콘(611a)이 인접한 제4 서브 영역(624) 및 제2 서브 영역(622)과 오버랩되는 경우, 상기 제4 서브 영역(624)과 상기 제2 서브 영역(622)의 사이에 제5 서브 영역(625)을 형성한다.

컨트롤 디바이스는, 상기 제5 서브 영역(625)을, 상기 제4 서브 영역(624)에 기 설정된 제4 설정 모드의 설정값과 상기 제2 서브 영역(622)에 기 설정된 제2 서브 영역의 설정값 사이의 설정값을 갖는 제5 설정 모드로 설정한다. 예를 들어, 상기 제4 설정 모드에 대응하는 각 음역대(Hz)의 음량(DB)의 크기와 상기 제2 설정 모드에 대응하는 각 음역대(Hz)의 음량(DB)의 크기를 음역대(Hz) 별로 더하여 2로 나눈 값들을 제5 설정 모드로 결정할 수 있으나, 이에 한정하지 않는다.

그 이후, 컨트롤 디바이스는 상기 제1 아이콘(611a)이 제2 영역(620) 내 임의의 서브 영역과 오버랩되는 경우, 상기 오버랩되는 서브 영역을 하이라이트한다. 예를 들어, 상기 제1 아이콘(611a)이 제5 서브 영역(625)과 오버랩되는 경우, 상기 제5 서브 영역(625)을 하이라이트한다. 이 경우, 상기 제5 서브 영역(625)을 하이라이트하는 색상은 도 22의 (a)에서 제4 서브 영역(624) 및 제1 서브 영역(621)을 각각 하이라이트하던 색상과는 다르다. 이로써, 사용자는 제5 서브 영역(625)의 설정 모드가 기존 제4 설정 모드 및 제1 설정 모드와는 다르다는 것을 직관적으로 인지할 수 있다.

컨트롤 디바이스는, 상기 제1 아이콘(611a)의 선택 및 이동을 해제하는 제7 커맨드를 수신한다. 상기 제7 커맨드는 입력 수신부(540)를 통해 수신된다.

상기 제7 커맨드는 사용자가 제1 아이콘(611a)을 제2 영역(620) 내 특정 서브 영역까지 드래그하고 선택을 해제하는 것에 의해 발생할 수 있다. 도 22의 (c)에서는, 사용자가 상기 제1 아이콘(611a)을 제2 영역(620) 내 제5 서브 영역(625)에 위치시킨 후 선택을 해제하는 경우를 가정하여 설명한다.

컨트롤 디바이스는 상기 수신된 제7 커맨드에 따라, 상기 제2 영역(620)의 구조화를 해제한다. 따라서, 제2 영역(620)에는 복수 개의 서브 영역(621~625)의 표시가 사라진다. 그리고, 컨트롤 디바이스는 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)를 상기 제5 서브 영역(625)의 제5 설정 모드로 설정한다.

상기 GUI 내 제2 영역(620) 내에는 제1 아이콘(611a)이 존재하므로, 사용자는 제1 아이콘(611a)에 매칭되는 제1 디바이스(611)가 컨트롤 디바이스에 연결 및 특정 모드로 설정되었음을 인지할 수 있다. 상기 GUI 내에서 제1 아이콘(611a)을 표시하는 방법은 도 15에서 상술한 방법이 적용될 수 있다.

도 10 내지 도 22에서는 외부 디바이스가 오디오 출력기기인 경우를 예로 하여 설명하였으나, 그 밖의 다른 전자 기기인 경우에도 위와 같은 방법이 적용될 수 있다.

도 11 내지 도 22에서는 GUI 내 제2 영역(620)이, 복수 개의 서브 영역이 시계 방향 또는 반시계 방향으로 배열되는 파이(pie)형으로 구조화된 예시를 도시하였으나, 제2 영역(620)의 구조화 형태는 실시예에 따라 달라질 수 있다.

도 23은 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예를 도시한 도면이다.

도 23을 참조하면, 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI는 제1 영역(710) 및 제2 영역(720)을 포함한다. 실시예에 따라, 상기 GUI는, 현재 제어하고자 하는 외부 디바이스들의 타입 및 컨트롤 디바이스를 사용하여 제어할 수 있는 기타 외부 디바이스들의 타입을 표시하는 제3 영역(730)을 더 포함할 수 있다.

상기 제1 영역(710)은 복수 개의 외부 디바이스(711, 712, 713, 714)에 각각 매칭되는 아이콘들(711a, 712a, 713a, 714a)을 포함한다. 현재 제어 대상이 되는 외부 디바이스들(711, 712, 713, 714)은 조명기기며, 가정 내에서 서로 다른 장소에 위치하는 것으로 가정한다.

도 23에는 일 예로서, 체력 단련실에 위치하는 제1 디바이스(711), 거실에 위치하는 제2 디바이스(712), 아기 방에 위치하는 제3 디바이스(713), 부엌에 위치하는 제4 디바이스(714)를 도시하였다. 그 이외의 조명기기가 존재하는 경우, 사용자는 제1 영역(710) 내 아이콘들(711a, 712a, 713a, 714a)이 위치하는 부분을 화살표(H) 방향으로 이동시킴으로써 다른 디바이스들을 확인할 수 있다.

상기 아이콘들(711a, 712a, 713a, 714a)은 외부 디바이스들(711, 712, 713, 714) 각각이 어느 위치에 존재하는지 사용자가 직관적으로 알 수 있도록 하는 그림을 포함할 수 있으며, 상기 위치를 인디케이트하는 인디케이터(예를 들어, 체력 단련실을 나타내는 대표 단어(EXERCISE))가 아이콘들(711a, 712a, 713a, 714a) 근처에 함께 표시될 수도 있다.

상기 제2 영역은 외부 디바이스들(611, 612, 613, 614)의 연결 및 설정 모드를 선택하는 커맨드를 수신하기 위한 인터페이스이다.

사용자는 제1 영역 내 아이콘들(711a, 712a, 713a, 714a)을 선택 및 드래그하여 제2 영역(720)으로 옮김으로써, 아이콘들(711a, 712a, 713a, 714a)에 매칭되는 외부 디바이스들(711, 712, 713, 714)을 연결할 수 있다.

예를 들어, 사용자가 체력 단련실에 위치하는 제1 디바이스(711)를 통하여 음악을 감상하고자 하는 경우, 사용자는 제1 디바이스(711)에 해당하는 제1 아이콘(711a)을 선택하여 제1 영역(710)에서 제2 영역(720)으로 드래그함으로써, 제1 디바이스(711)를 컨트롤 디바이스와 연결할 수 있다.

사용자는 외부 디바이스를 컨트롤 디바이스와 연결하고자 하는 경우 복잡한 단계의 메뉴를 거칠 필요가 없으며, 원하는 외부 디바이스에 해당하는 아이콘을 제2 영역(720)으로 드래그하는 직관적인 동작만 하면 된다.

제2 영역(720) 내에는 사용자 편의를 위하여 Drag Here to Connect 라는 가이드 메시지를 표시할 수도 있다.

제 3 영역(730)에는 현재 제어 대상이 되는 외부 디바이스들(711, 712, 713, 714)의 타입 및 컨트롤 디바이스를 사용하여 제어할 수 있는 기타 외부 디바이스들의 타입을 표시한다. 외부 디바이스들의 타입을 대표하는 글씨나 그림을 표시할 수 있으며, 현재 제어 대상이 되는 외부 디바이스들(711, 712, 713, 714)의 타입을 나타내는 그림(731)을 중앙에 배치하고 하이라이트할 수 있다. 사용자 편의를 위하여, 상기 그림(731)과 함께 조명기기임을 알 수 있는 글씨(LIGHTING, 732)를 표시할 수도 있다.

컨트롤 디바이스는 상기 제3 영역(730)을 통해 제어하고자 하는 외부 디바이스의 타입을 선택하는 커맨드를 수신할 수 있다. 사용자는 상기 제3 영역(730) 부분을 좌/우 또는 시계방향/반시계방향으로 드래그하여 제어하고자 하는 외부 디바이스의 타입을 나타내는 그림 및/또는 글씨를 중앙에 오도록 함으로썰 외부 디바이스의 타입을 선택할 수 있다. 예를 들어, 사용자가 도 10에 도시된 GUI를 통해 오디오 출력기기를 제어하다가 조명기기를 제어하고자 하는 경우, 사용자는 도 10에 도시된 GUI의 제3 영역(630) 부분을 좌/우 또는 시계방향/반시계방향으로 드래그하여 조명기기를 나타내는 인디케이터를 중앙에 오도록 하여 도 23과 같은 GUI를 띄울 수 있다.

도 24 내지 도 26은 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하는 방법의 일 예시를 설명하기 위한 도면이다.

도 23은 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예를 도시한 것이다.

도 23을 참조하면, 컨트롤 디바이스는 상기 GUI의 제1 영역(710) 내 아이콘들(711a, 712a, 713a, 714a) 중에서 임의의 아이콘을 선택 및 이동시키기 위한 제8 커맨드를 수신한다. 상기 제8 커맨드는 입력 수신부(540)를 통해 수신된다. 예를 들어, 사용자가 체력 단력실에 위치하는 제1 디바이스(711)에 매칭되는 제1 아이콘(711a)을 선택하는 경우를 가정하여 설명한다.

상기 제8 커맨드는 사용자가 GUI 상에서 제1 아이콘(711a)을 선택 및 드래그함으로써 발생할 수 있다.

컨트롤 디바이스는 상기 수신된 제8 커맨드에 따라, 제1 영역(710) 내 제1 아이콘(711a)을 제2 영역(720)에 접근시킨다. 그리고, 컨트롤 디바이스는, 제1 아이콘(711a)의 적어도 일부가 제1 영역(710)을 벗어난 경우, 상기 제2 영역(720)을 구조화한다.

제2 영역(720)을 구조화한다는 의미는 제2 영역(720)을 복수 개의 서브 영역(721, 722, 723, 724)으로 분할한다는 의미이다. 구조화된 제2 영역(720)은 복수 개의 서브 영역(721, 722, 723)을 포함하며, 상기 복수 개의 서브 영역(721, 722, 723) 각각은 서로 다른 모드로 기 설정되어 있다.

컨트롤 디바이스는 제2 영역(720)을 구조화할 때, 외부 디바이스들(711~714)의 타입에 따라 적절한 설정 모드들을 메모리(503)로부터 디텍트하여 제2 영역(720)을 구조화한다. 예를 들어, 컨트롤 디바이스는 외부 디바이스들(711~714)이 조명기기인 경우, 오디오 출력기기에 대응하여 저장된 설정 모드들을 메모리(530)로부터 디텍트하고, 상기 디텍트된 설정 모드들에 각각 매칭된 서브 영역(721, 722, 723)을 포함하도록 제2 영역(720)을 구조화한다.

구조화된 제2 영역(720)에서 복수 개의 서브 영역(721, 722, 723) 사이를 구획하는 지시선(예를 들어, 점선, 실선 등)을 표시하여 사용자가 복수 개의 서브 영역(721, 722, 723) 각각을 인지할 수 있도록 한다.

도 24를 참조하면, 구조화된 제2 영역(720)은 네 개의 서브 영역(721, 722, 723, 724)을 포함하고, 제1 서브 영역(721)은 제1 설정 모드(preset 1)로 기 설정되어 있고, 제2 서브 영역(722)은 제2 설정 모드(preset 2)로 기 설정되어 있고, 제3 서브 영역(723)은 제3 설정 모드(preset 3)로 기 설정되어 있다. 사용자 편의를 위하여, 서브 영역들(721, 722, 723) 각각에 설정 모드의 특징을 나타내는 설명 문구 등을 간략히 기재할 수도 있다.

예를 들어, 상기 제2 영역(720) 내 복수 개의 서브 영역(721~723)은, 외부 디바이스(711~714)가 설치된 위치에 따라, 숙면에 적합한 설정 모드와 공부에 적합한 설정 모드 등으로 각각 설정될 수 있다.

컨트롤 디바이스는 상기 제2 영역(720) 내에서 상기 복수 개의 서브 영역(721~723)을 계층화할 수 있다. 복수 개의 서브 영역(721~723)을 계층화한다는 의미는, 상기 서브 영역(721~723) 각각에 설정된 설정 모드의 설정값의 크기 변화의 추세를 직관적으로 알 수 있도록 상기 복수 개의 서브 영역(721~723)을 배열한다는 의미이다.

예를 들어 도 24를 참조하면, 구조화된 제2 영역(720) 내에서 복수 개의 서브 영역(721~723)이 동심원 형태로 배열되어 있다. 제1 서브 영역(721)은 제2 영역(720) 내에서 가장 외곽에 배열되고, 제1 서브 영역(722)의 안쪽에 제2 서브 영역(722)이 배열되고, 제3 서브 영역(723)은 제2 영역(720) 내에서 가장 안쪽에 배열된다. 제1 서브 영역(721)은 제1 설정 모드로 기 설정되어 있으며, 상기 제1 설정 모드는 조명기기의 세기가 가장 약한 값을 갖는다. 반면, 제3 서브 영역(723)은 제3 설정 모드로 기 설정되어 있으며, 상기 제3 설정 모드는 조명기기의 세기가 가장 큰 값을 갖는다. 즉, 외곽에 배열된 제1 서브 영역(721)으로부터, 중심에 배열된 제3 서브 영역(723)으로 갈수록 설정 모드의 설정 값이 점차 커진다. 사용자는, 도 24에 도시된 GUI의 제2 영역(720)을 보고, 외곽에서 중심으로 갈수록 설정값의 크기가 커지는 추세를 직관적으로 인지할 수 있다. 도 24에서는 구조화된 제2 영역(720) 내의 서브 영역(721~723)의 배열 형태가 동심 원형인 경우를 예로 들어 설명하였으나, 설정 모드의 설정값의 크기 변화의 추세를 직관적으로 알 수 있는 다른 타입으로 제2 영역(720)을 계층화하는 것도 가능하다.

사용자가 제1 아이콘(711a)을 선택하여 드래그를 하면 제2 영역(720)이 구조화되어 복수 개의 서브 영역(721, 722, 723)이 나타나므로, 사용자는 원하는 설정 모드로 기 설정되어 있는 서브 영역을 선택할 수 있다. 예를 들어, 사용자가 제1 아이콘(711a)에 매칭되는 제1 디바이스(711)를 제1 설정 모드로 설정하고자 하는 경우, 사용자는 제1 아이콘(711a)을 선택하여 제2 영역(720) 내 제1 서브 영역(721)까지 드래그하면 된다.

실시예에 따라, 사용자는 제2 영역(720) 내 복수 개의 서브 영역(721, 722, 723)에 각각 기 설정된 설정 모드들 중에서 외부 디바이스 별로 우선순위를 미리 결정해 둘 수 있으며, 컨트롤 디바이스는, 사용자 입력에 의한 상기 우선순위를 메모리(530)에 저장할 수 있다.

그리고, 컨트롤 디바이스는, 상기 제8 커맨드가 수신된 경우, 제2 영역(730)을 구조화한 후 제1 아이콘(711a)에 매칭되는 제1 디바이스(711)에 대하여 제1 우선순위를 갖는 설정 모드로 기 설정된 서브 영역을 하이라이트할 수도 있다.

도 25는 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예시를 도시한 도면이다.

도 25를 참조하면, 컨트롤 디바이스는, 제1 아이콘(711a)의 적어도 일부가 제2 영역(720) 내 복수 개의 서브 영역(721, 722, 723, 724)과 오버랩되는 경우, 오버랩된 서브 영역을 하이라이트한다. 만일, 제1 아이콘(711a)이 인접한 두 개 이상의 서브 영역과 오버랩되는 경우, 제1 아이콘(711a)과 상대적으로 넓은 면적에서 오버랩되는 하나의 서브 영역만이 하이라이트될 수도 있다.

도 25의 예시는 제2 영역(720)의 구조화 형태를 제외하고는 도 12 및 도 13에서 상술한 바와 같으므로, 이하에서는 차이점을 위주로 설명한다. 당업자라면 도 12 및 도 13을 참조하여 도 25의 예시를 충분히 구현할 수 있다.

도 25의 (a)에 도시된 바와 같이, 컨트롤 디바이스는, 제1 아이콘(711a)의 적어도 일부가 제2 영역(720) 내 제1 서브 영역(721)과 오버랩되는 경우, 제1 서브 영역(721)을 하이라이트하며, 사용자 편의성을 위하여 제1 서브 영역(721)의 폭을 넓힐 수 있다. 컨트롤 디바이스는 제1 서브 영역(721)을 하이라이트하는 경우, 제1 서브 영역(721)의 폭을 하이라이트하기 전의 폭보다 넓혀서 사용자에 의해 명확히 인지되도록 할 수 있다.

마찬가지로, 도 26의 (b)에 도시된 바와 같이, 제1 아이콘(711a)의 적어도 일부가 제2 영역(720) 내 제2 서브 영역(722)과 오버랩되는 경우, 제2 서브 영역(722)을 하이라이트하며, 사용자 편의성을 위하여 제2 서브 영역(722)의 폭을 넓힐 수 있다. 또한, 도 26의 (c)에 도시된 바와 같이, 제1 아이콘(711a)의 적어도 일부가 제2 영역(720) 내 제3 서브 영역(723)과 오버랩되는 경우, 제3 서브 영역(723)을 하이라이트하며, 사용자 편의성을 위하여 제3 서브 영역(723)의 간격을 넓힐 수 있다.

이 경우, 컨트롤 디바이스는 제1 서브 영역(721), 제2 서브 영역(722) 및 제3 서브 영역(723)을 각기 다른 색상으로 하이라이트할 수 있다. 이로써, 사용자는 제1 서브 영역(721), 제2 서브 영역(722) 및 제3 서브 영역(723)이 각기 다른 설정 모드로 기 설정되어 있음을 직관적으로 인지할 수 있다.

도 26는 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예를 도시한 도면이다.

도 26의 예시는 제2 영역(720)의 구조화 형태를 제외하고는 도 15에서 상술한 바와 같으므로 자세한 설명을 생략한다. 당업자라면 도 15를 참조하여 도 26의 예시를 충분히 구현할 수 있다.

도 23 내지 도 26과 관련하여 상술한 바에 따라 사용자는 외부 디바이스를 컨트롤 디바이스에 연결 및 특정 모드로의 설정을 동시에 할 수 있다. 또한, 외부 디바이스에 대하여 특정 모드가 미리 설정되어 있는 경우라면, 사용자는, 외부 디바이스에 대응하는 아이콘을 선택하여 제2 영역(720)으로 드래그 앤 드롭(drag and drop)하는 것에 의해 외부 디바이스를 컨트롤 디바이스에 연결하여 사용할 수도 있다.

도 27은 본 발명의 일 실시예에 의한 컨트롤 디바이스를 사용하여 외부 디바이스를 제어하기 위한 방법의 일 예시를 도시한 도면이다.

도 27의 전 단계로서, 도 23 내지 도 26과 관련하여 상술한 예시들 중 적어도 하나가 동일하게 적용될 수 있으며, 이에 대한 자세한 내용은 생략한다. 사용자가 제1 디바이스(711)를 연결 및 모드 설정하고자 하는 경우를 가정하여 설명한다.

도 27의 예시는 제2 영역(720)의 구조화 형태를 제외하고는 도 22에서 상술한 바와 같으므로, 이하에서는 차이점을 위주로 설명한다. 당업자라면 도 22를 참조하여 도 27의 예시를 충분히 구현할 수 있다.

예를 들어, 도 27의 (b)를 참조하면, 컨트롤 디바이스는, 기 설정된 시간 이상, 상기 제1 아이콘(711a)이 인접한 제1 서브 영역(721) 및 제2 서브 영역(722) 모두와 오버랩되는 경우, 상기 제1 서브 영역(721)과 상기 제2 서브 영역(722)의 사이에 제4 서브 영역(724)을 형성한다.

컨트롤 디바이스는, 상기 제4 서브 영역(724)를, 상기 제1 서브 영역(721)에 기 설정된 제1 설정 모드의 설정값과 상기 제2 서브 영역(722)에 기 설정된 제2 서브 영역의 설정값 사이의 설정값을 갖는 제4 설정 모드로 설정한다. 예를 들어, 상기 제1 설정 모드에 대응하는 조명기기의 세기(예를 들어, 조도의 크기)와 상기 제2 설정 모드에 대응하는 조명기기의 세기(예를 들어, 조도의 크기)를 더하여 2로 나눈 값들을 제4 설정 모드로 결정할 수 있으나, 이에 한정하지 않는다.

상술한 실시예들에서는 오디오 출력기기를 제어하고자 하는 경우에는 GUI 내 제2 영역을 파이(pie) 형태로 구조화하고, 조명기기 기기를 제어하고자 하는 경우에는 GUI 내 제2 영역을 동심 원형 형태로 계층화하여 구조화하는 경우를 예시하였으나 이에 한정하지 않는다.

실시예에 따라, 컨트롤 디바이스는, GUI 내 제2 영역을 구조화하는 경우, 외부 디바이스가 설정 모드의 설정값의 변화 추세를 사용자가 직관적으로 인지할 필요가 있는 제1 타입의 디바이스인 경우에는, 제2 영역을 계층화하여 구조화하고, 외부 디바이스가 설정 모드의 설정값의 변화 추세를 사용자가 직관적으로 인지할 필요가 없는 제2 타입의 디바이스인 경우에는, 제2 영역을 계층화하지 않을 수 있다. 제어하고자 하는 외부 디바이스가 제1 타입의 디바이스인지 제2 타입의 디바이스인지 여부는 사용자가 미리 설정해둘 수도 있고, 설정 모드의 설정값의 변화 추세에 따라 컨트롤 디바이스의 제어부에서 결정할 수도 있다. 후자의 경우, 예를 들어, 기 설정된 설정 모드가 오디오 출력기기의 음량 조절 또는 조명기기의 세기 등인 경우, 컨트롤 디바이스는 상기 제2 영역을 계층화하여 구조화할 수 있다.

도 28은 본 발명의 일 실시예에 의한 컨트롤 디바이스에 출력되는 GUI의 일 예시를 도시한 도면이다.

도 28에 도시된 바와 같이, 컨트롤 디바이스는 외부 디바이스를 컨트롤 디바이스에 연결 및 모드 설정을 하기 위한 제1 가이드 영역(810), 컨트롤 디바이스 내 애플리케이션의 기능들을 제어하기 위한 제2 가이드 영역(820), 및 상기 애플리케이션 내 컨텐츠 목록이나 컨텐츠 정보를 표시하기 위한 제3 가이드 영역(830)을 연속적으로 포함하는 GUI를 출력할 수 있다.

상기 제1 가이드 영역(810)은 도 10 내지 도 27과 관련하여 상술한 바와 같은 GUI에 해당한다.

상기 제2 가이드 영역(820)에는 현재 컨트롤 디바이스에 연결 및 모드 설정이 완료된 외부 디바이스들을 표시하는 인디케이트 바(821)를 포함한다. 사용자가 현재 컨트롤 디바이스에 연결 및 모드 설정이 완료된 외부 디바이스들의 연결을 해제하거나 모드 설정을 변경하거나 그 밖의 다른 외부 디바이스들을 연결하고자 하는 경우에, 사용자는 상기 인디케이트 바(821)를 선택함으로써 상기 제1 가이드 영역(810)으로 진입하도록 컨트롤 디바이스를 구현하는 것도 가능하다.

도 29는 도 28에 도시된 GUI의 제2 가이드 영역에서 제1 가이드 영역으로 진입하는 일 예시를 설명하기 위한 도면이다.

도 29에서는 사용자가 음악 재생 애플리케이션 내에 진입하여 음악을 감상하는 경우를 가정하며, 제어하고자 하는 디바이스가 오디오 출력기기인 경우를 가정하여 설명한다.

도 29의 (a)은 GUI의 제2 가이드 영역(920). 제2 가이드 영역(920)에는 음악 재생 애플리케이션의 기능을 제어하기 위한 기능제어 영역(921)과, 현재 컨트롤 디바이스에 연결 및 모드 설정이 완료된 외부 디바이스들을 표시하는 인디케이트 바(930)를 포함한다. 인디케이트 바(930)는 부엌에 위치하는 제1 디바이스(931), 거실에 위치하는 제2 디바이스(932) 및 체력 단련실에 위치하는 제3 디바이스(933)가 컨트롤 디바이스에 연결 및 모드 설정이 완료되었음을 표시하고 있다.

사용자가 상기 인디케이트 바(930)를 선택(터치 또는 리모트 컨트롤러(400)의 포인터(P)에 의한 선택)하면, 도 29의 (a) 내지 (c)에 도시된 바와 같이, 인디케이트 바(930)가 점차 아래로 내려오면서, 도 28의 제1 가이드 영역과 같은 제1 가이드 영역(910)을 진입한다. 사용자는 이와 같은 GUI의 변화를 통하여, 외부 디바이스의 연결 및 모드 설정을 위한 영역으로 진입하고 있음을 직관적으로 인지할 수 있다.

도 30 및 도 31은 본 발명의 일 실시예에 의한 컨트롤 디바이스에서 멀티태스킹시 오디오 신호의 간섭을 처리하기 위한 일 예시를 설명하기 위한 도면이다.

도 30의 (a)에 도시된 바와 같이, 사용자가 음악 재생 애플리케이션 내에 진입하여 음악을 감상하는 경우를 가정하며, 제어하고자 하는 디바이스가 오디오 출력기기인 경우를 가정하여 설명한다.

그리고, 도 30의 (b)에 도시된 바와 같이, 사용자가 컨텐츠 제공 애플리케이션에 접속하여 컨텐츠 재생을 선택하였다고 가정한다.

이러한 경우, 음악 재생 애플리케이션에 의해서도 오디오 신호가 출력되고 컨텐츠 제공 애플리케이션에 의해서도 오디오 신호가 출력되므로 오디오 신호의 간섭이 발생한다.

이 때, 컨트롤 디바이스는, 도 31의 (a) 및 (b)에 도시된 바와 같은 팝업 가이드(1010)를 출력한다. 사용자가 팝업 가이드(1010) 상에서 스피커 출력(1011)을 선택하는 경우(도 31의 (a)), 컨트롤 디바이스는, 현재 컨트롤 디바이스에 연결된 오디오 출력기기를 통하여 컨텐츠 내 오디오 신호를 출력하고, 재생중인 음악의 재생을 일시 정지한다. 사용자가 팝업 가이드(1010) 상에서 컨트롤 디바이스 출력(1012)을 선택하는 경우(도 31의 (b)), 컨트롤 디바이스는, 상기 오디오 출력기기를 통한 음악 재생을 계속하면서 컨텐츠 내 오디오 신호는 컨트롤 디바이스에 내장된 오디오 출력부를 통해 출력한다.

상기 팝업 가이드(1010)는 사용자 편의를 위하여 현재 컨트롤 디바이스에 연결된 오디오 출력기기를 표시하는 인디케이터(1013)를 포함할 수 있다.

도 32는 본 발명의 일 실시예에 의한 컨트롤 디바이스에서 음악 재생 중 이어폰이 분리된 경우를 처리하기 위한 일 예시를 설명하기 위한 도면이다.

도 32의 (a)에 도시된 바와 같이, 컨트롤 디바이스에 연결된 이어폰(1110)을 통해 음악이 재생되고 있다. 이 때, 도 32의 (b) 및 (c)에 도시된 바와 같이 이어폰(1110)이 분리되는 경우, 컨트롤 디바이스는 팝업 가이드(1120)를 출력한다. 사용자가 팝업 가이드(1110) 상에서 재생 정지(1122)를 선택하는 경우(도 32의 (b)), 컨트롤 디바이스는 음악의 재생을 일시 정지한다. 사용자가 팝업 가이드(1110) 상에서 스피커 출력(1121)을 선택하는 경우(도 31의 (c)), 컨트롤 디바이스는, 컨트롤 디바이스에 연결된 오디오 출력기기를 통하여 음악을 이어서 출력한다.

상기 팝업 가이드(1120)는 사용자 편의를 위하여 현재 컨트롤 디바이스에 연결된 오디오 출력기기를 표시하는 인디케이터(1123)를 포함할 수 있다.

도 33은 본 발명의 일 실시예에 의한 컨트롤 디바이스의 제어 방법의 일 예시를 도시한 흐름도이다.

도 33을 참조하면, 컨트롤 디바이스는 제1 영역 및 제2 영역을 포함하는 GUI를 디스플레이한다(S1201). 상기 제1 영역은 복수 개의 외부 디바이스에 각각 매칭되는 아이콘들을 포함하고, 상기 제2 영역은 상기 외부 디바이스의 연결 및 설정 모드를 선택하는 커맨드를 수신하기 위한 인터페이스이다.

컨트롤 디바이스는, 상기 아이콘들 중 제1 아이콘을 선택 및 이동시키기 위한 제1 커맨드를 수신한다(S1202). 그리고, 컨트롤 디바이스는, 상기 수신된 제1 커맨드에 따라 상기 제1 영역 내 제1 아이콘을 상기 제2 영역에 접근시킨다(S1203).

컨트롤 디바이스는 상기 제1 아이콘의 적어도 일부가 상기 제1 영역을 벗어난 경우, 상기 제2 영역을 복수 개의 서브 영역을 포함하도록 구조화한다(S1204). 이 때, 상기 복수 개의 서브 영역은 서로 다른 모드로 기 설정되어 있다.

실시예에 따라, 컨트롤 디바이스는, 상기 제2 영역을 구조화하는 경우, 외부 디바이스에 대응하는 설정 모드의 설정값의 변화 추세가 디텍팅되는 경우 상기 제2 영역을 계층화하여 구조화할 수 있다.

또는, 컨트롤 디바이스는, 상기 제2 영역을 구조화하는 경우, 외부 디바이스의 타입에 따라 제2 영역의 구조화 형태를 달리할 수 있다. 예를 들어, 컨트롤 디바이스는, 외부 디바이스가 제1 타입의 디바이스인 경우 상기 제2 영역을 제1 타입으로 구조화하고, 외부 디바이스가 제2 타입의 디바이스인 경우 상기 제2 영역을 제2 타입으로 구조화할 수 있다.

그 후, 컨트롤 디바이스는, 상기 제1 아이콘의 적어도 일부가 상기 구조화된 제2 영역 내 복수 개의 서브 영역 중 제1 서브 영역과 오버랩되는 경우, 상기 제1 서브 영역을 하이라이트한다(S1205).

컨트롤 디바이스는, 상기 제1 아이콘의 선택 및 이동을 해제하는 제2 커맨드를 수신한다(S1206). 그리고, 컨트롤 디바이스는, 상기 수신된 제2 커맨드에 따라, 상기 제2 영역의 구조화를 해제한다(S1207).

그 후, 컨트롤 디바이스는, 상기 제1 아이콘에 매칭되는 외부 디바이스를 상기 제1 서브 영역의 설정 모드로 설정한다(S1208).

도 34는 본 발명의 일 실시예에 의한 컨트롤 디바이스의 제어 방법의 일 예시를 도시한 흐름도이다.

도 34를 참조하면, 컨트롤 디바이스는 제1 영역 및 제2 영역을 포함하는 GUI를 디스플레이한다(S1301). 상기 제1 영역은 복수 개의 외부 디바이스에 각각 매칭되는 아이콘들을 포함하고, 상기 제2 영역은 상기 외부 디바이스의 연결 및 설정 모드를 선택하는 커맨드를 수신하기 위한 인터페이스이다.

컨트롤 디바이스는, 상기 아이콘들 중 제1 아이콘을 선택 및 이동시키기 위한 제1 커맨드를 수신한다(S1302). 그리고, 컨트롤 디바이스는, 상기 수신된 제1 커맨드에 따라 상기 제1 영역 내 제1 아이콘을 상기 제2 영역에 접근시킨다(S1303).

컨트롤 디바이스는 상기 제1 아이콘의 적어도 일부가 상기 제1 영역을 벗어난 경우, 상기 제2 영역을 복수 개의 서브 영역을 포함하도록 구조화한다(S1304). 이 때, 상기 복수 개의 서브 영역은 서로 다른 모드로 기 설정되어 있다.

실시예에 따라, 컨트롤 디바이스는, 상기 제2 영역을 구조화하는 경우, 외부 디바이스에 대응하는 설정 모드의 설정값의 변화 추세가 디텍팅되는 경우 상기 제2 영역을 계층화하여 구조화할 수 있다.

또는, 컨트롤 디바이스는, 상기 제2 영역을 구조화하는 경우, 외부 디바이스의 타입에 따라 제2 영역의 구조화 형태를 달리할 수 있다. 예를 들어, 컨트롤 디바이스는, 외부 디바이스가 제1 타입의 디바이스인 경우 상기 제2 영역을 제1 타입으로 구조화하고, 외부 디바이스가 제2 타입의 디바이스인 경우 상기 제2 영역을 제2 타입으로 구조화할 수 있다.

그 후, 컨트롤 디바이스는, 상기 제1 아이콘이, 기설정된 시간 이상, 상기 제2 영역 내 복수 개의 서브 영역 중 서로 인접한 제1 서브 영역 및 제2 서브 영역과 오버랩되는지 여부를 디텍팅한다(S1305).

컨트롤 디바이스는, 상기 제1 아이콘이 기설정된 시간 이상 서로 인접한 제1 서브 영역 및 제2 서브 영역과 오버랩되는 경우, 제1 서브 영역과 제2 서브 영역의 사이에 제3 서브 영역을 형성한다(S1306). 상기 제3 서브 영역은 제1 서브 영역에 기 설정된 제1 설정 모드의 설정값과 제2 서브 영역에 기 설정된 설정값 사이의 설정값을 갖는 제3 설정 모드로 설정된다.

그리고, 컨트롤 디바이스는, 상기 제1 아이콘의 적어도 일부가 상기 제3 서브 영역과 오버랩되는 경우, 상기 제3 서브 영역을 하이라이트한다(S1307).

컨트롤 디바이스는, 상기 제1 아이콘의 선택 및 이동을 해제하는 제2 커맨드를 수신한다(S1308). 그리고, 컨트롤 디바이스는, 상기 수신된 제2 커맨드에 따라, 상기 제2 영역의 구조화를 해제한다(S1309).

그 후, 컨트롤 디바이스는, 상기 제1 아이콘에 매칭되는 외부 디바이스를 상기 제3 서브 영역의 제3 설정 모드로 설정한다(S1310).

설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시예들을 병합하여 새로운 실시예를 구현하도록 설계하는 것도 가능하다. 그리고, 당업자의 필요에 따라, 이전에 설명된 실시예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다.

본 발명에 따른 멀티미디어 디바이스 및 그 동작 방법은 상기한 바와 같이 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

한편, 본 발명의 멀티미디어 디바이스의 동작방법은 디스플레이 장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.

또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.

그리고, 당해 명세서에서는 물건 발명과 방법 발명이 모두 설명되고 있으며, 필요에 따라 양발명의 설명은 보충적으로 적용될 수가 있다.

610, 710: 제1 영역
620, 720: 제2 영역

Claims (16)

1. 적어도 하나의 외부 디바이스 제어하는 컨트롤 디바이스의 제어 방법에 있어서,
   제1 영역 및 제2 영역을 포함하는 GUI를 디스플레이하는 단계 - 상기 제1 영역은 상기 적어도 하나의 외부 디바이스에 각각 매칭되는 아이콘들을 포함함 -;
   상기 아이콘들 중 제1 아이콘을 선택 및 이동시키기 위한 제1 커맨드를 수신하는 단계;
   상기 수신된 제1 커맨드에 따라, 상기 제1 영역 내 제1 아이콘을 상기 제2 영역에 접근시키는 단계;
   상기 제1 아이콘의 적어도 일부가 상기 제1 영역을 벗어난 경우, 상기 제2 영역을, 복수 개의 서브 영역을 포함하도록 구조화하는 단계;
   상기 제1 아이콘의 적어도 일부가 상기 제2 영역 내 복수 개의 서브 영역 중 제1 서브 영역과 오버랩되는 경우, 상기 제1 서브 영역을 하이라이트하는 단계;
   상기 제1 아이콘의 선택 및 이동을 해제하는 제2 커맨드를 수신하는 단계; 및
   상기 수신된 제2 커맨드에 따라, 상기 제2 영역의 구조화를 해제하는 단계;를 포함하는 컨트롤 디바이스의 제어 방법.
2. 제 1 항에 있어서,
   상기 제1 아이콘에 매칭되는 제1 외부 디바이스를, 상기 제1 서브 영역에 기 설정된 제1 설정 모드로 설정하는 단계;를 더 포함하는 컨트롤 디바이스의 제어 방법.
3. 제 2 항에 있어서,
   상기 제1 설정 모드로 설정하는 단계는, 상기 제2 영역 내에 상기 제1 설정 모드를 인디케이트하는 인디케이터를 표시하는, 컨트롤 디바이스의 제어 방법.
4. 제 1 항에 있어서,
   상기 적어도 하나의 디바이스 각각에 대하여, 상기 복수 개의 서브 영역에 각각 기 설정된 설정 모드들 중에서 우선순위를 결정하는 단계;를 더 포함하는 컨트롤 디바이스의 제어 방법.
5. 제 4 항에 있어서,
   상기 제2 영역의 구조화 단계와 상기 제1 서브 영역의 하이라이트 단계 사이에,
   상기 제2 영역 내 복수 개의 서브 영역 중에서, 상기 제1 아이콘에 매칭되는 제1 외부 디바이스에 대하여 제1 우선순위를 갖는 설정 모드로 기 설정된 서브 영역을 하이라이트하는 단계;를 더 포함하는 컨트롤 디바이스의 제어 방법.
6. 제 1 항에 있어서,
   상기 1 서브 영역의 하이라이트 단계는,
   상기 제1 아이콘에 대응하는 영역의 제1 좌표 정보를 디텍트하는 단계;
   상기 제1 서브 영역의 제2 좌표 정보를 디텍트하는 단계;
   상기 제1 좌표 정보와 상기 제2 좌표 정보를 비교하는 단계; 및
   상기 비교 결과, 상기 제1 좌표 정보와 상기 제2 좌표 정보가 일치하는 부분이 있는 경우, 상기 제1 서브 영역을 하이라이트하는 단계;를 포함하는 컨트롤 디바이스의 제어 방법.
7. 제 1 항에 있어서,
   상기 제2 영역의 구조화 단계는,
   상기 제1 외부 디바이스가 제1 타입의 디바이스인 경우 상기 제2 영역을 제1 타입으로 구조화하고, 상기 제1 외부 디바이스가 제2 타입의 디바이스인 경우 상기 제2 영역을 상기 제1 타입과는 다른 제2 타입으로 구조화하는 컨트롤 디바이스의 제어 방법.
8. 제 7 항에 있어서,
   상기 제2 타입의 구조화는, 상기 제2 영역 내에서 상기 복수 개의 서브 영역을 계층화하는 것인, 컨트롤 디바이스의 제어 방법.
9. 제 2 항에 있어서,
   상기 제1 외부 디바이스를 제1 설정 모드로 설정하는 단계 후에,
   상기 제2 영역 내의 제1 아이콘을 선택 및 이동시키기 위한 제3 커맨드를 수신하는 단계;
   상기 수신된 제3 커맨드에 따라, 상기 제2 영역 내 제1 아이콘을 상기 제2 영역 밖으로 이동시키는 단계; 및
   상기 제1 외부 디바이스에 설정된 제1 설정 모드를 해제하는 단계;를 더 포함하는 컨트롤 디바이스의 제어 방법.
10. 제 9 항에 있어서,
    상기 제1 설정 모드의 해제 단계 후에,
    상기 제1 아이콘을 상기 제1 영역 내로 복귀시키는 단계;를 더 포함하는 컨트롤 디바이스의 제어 방법.
11. 제 2 항에 있어서,
    상기 제1 외부 디바이스를 제1 설정 모드로 설정하는 단계 후에,
    상기 제2 영역 내 제1 아이콘을 선택하는 제4 커맨드를 수신하는 단계 - 상기 제4 커맨드는 기 설정된 시간 동안 연속하여 수신됨 -; 및
    상기 수신된 제4 커맨드에 따라, 상기 제2 영역을, 상기 복수 개의 서브 영역을 포함하도록 재 구조화하는 단계;를 더 포함하는 컨트롤 디바이스의 제어 방법.
12. 제 11 항에 있어서,
    상기 제2 영역의 재 구조화 단계는, 상기 제1 아이콘을 상기 제2 영역 내 제1 서브 영역에 위치시키는, 컨트롤 디바이스의 제어 방법.
13. 적어도 하나의 외부 디바이스를 제어하는 컨트롤 디바이스의 제어 방법에 있어서,
    제1 영역 및 제2 영역을 포함하는 GUI를 디스플레이하는 단계 - 상기 제1 영역은 상기 적어도 하나의 외부 디바이스에 각각 매칭되는 아이콘들을 포함함 -;
    상기 아이콘들 중 제1 아이콘을 선택 및 이동시키기 위한 제1 커맨드를 수신하는 단계;
    상기 수신된 제1 커맨드에 따라, 상기 제1 영역 내 제1 아이콘을 상기 제2 영역에 접근시키는 단계;
    상기 제1 아이콘의 적어도 일부가 상기 제1 영역을 벗어난 경우, 상기 제2 영역을, 복수 개의 서브 영역을 포함하도록 구조화하는 단계 - 상기 제2 영역 내 복수 개의 서브 영역은 서로 다른 설정 모드로 기 설정되어 있음 -;
    상기 제1 아이콘이, 기 설정된 시간 이상, 상기 제2 영역 내 복수 개의 서브 영역 중 인접한 제1 서브 영역 및 제2 서브 영역과 오버랩되는 단계; 및
    상기 제1 서브 영역과 상기 제2 서브 영역의 사이에, 상기 제1 서브 영역에 기 설정된 제1 설정 모드의 설정값과 상기 제2 서브 영역에 기 설정된 제2 설정 모드의 설정값 사이의 설정값을 갖는 제3 설정 모드로 설정된 제3 서브 영역을 형성하는 단계;를 포함하는 컨트롤 디바이스의 제어 방법.
14. 제 13 항에 있어서,
    상기 제1 아이콘이 서로 인접한 제1 서브 영역 및 제2 서브 영역 모두와 오버랩되는 단계는, 상기 제1 서브 영역과 상기 제2 서브 영역이 서로 다른 색상으로 하이라이트되는, 컨트롤 디바이스의 제어 방법.
15. 제 14 항에 있어서,
    상기 제1 아이콘의 적어도 일부가 상기 제3 서브 영역과 오버랩되는 경우, 상기 제3 서브 영역을 하이라이트하는 단계;
    상기 제1 아이콘의 선택 및 이동을 해제하는 제2 커맨드를 수신하는 단계;
    상기 수신된 제2 커맨드에 따라, 상기 제2 영역의 구조화를 해제하는 단계; 및
    상기 제1 아이콘에 매칭되는 제1 외부 디바이스를, 상기 제3 서브 영역의 제3 설정 모드로 설정하는 단계;를 포함하는 컨트롤 디바이스의 제어 방법.
16. 제 1 항에 있어서,
    상기 제2 영역 내 복수 개의 서브 영역은 서로 다른 설정 모드로 기 설정되어 있는, 컨트롤 디바이스의 제어 방법.

Images