KR102114612B1 - 리모트 컨트롤러 및 멀티미디어 디바이스의 제어 방법 - Google Patents

Abstract

리모트 컨트롤러 및 멀티미디어 디바이스의 제어 방법이 개시된다. 본 발명의 일 실시예에 따른 멀티미디어 디바이스 및 적어도 하나의 외부 디바이스를 제어하는 리모트 컨트롤러의 제어 방법은, 외부의 움직임을 감지하는 단계와, 상기 외부의 움직임이 감지된 경우, 이미지 센서를 온(on) 시키는 단계와, 상기 이미지 센서에서 피사체를 촬영하여 이미지를 생성하는 단계와, 상기 생성된 이미지를 멀티미디어 디바이스로 전송하는 단계와, 상기 전송된 이미지에 대응하는 코드값을 멀티미디어 디바이스로부터 수신하는 단계와, 상기 수신된 코드값에 대응하는 제어 신호를 송신하는 단계를 포함한다.

Description

리모트 컨트롤러 및 멀티미디어 디바이스의 제어 방법{METHOD FOR CONTROLLING REMOTE CONTROLLER AND MULTIMEDIA DEVICE}

본 발명은 리모트 컨트롤러 및 멀티미디어 디바이스의 제어 방법에 관한 것으로서, 보다 상세하게는 하나의 리모트 컨트롤러를 사용하여 멀티미디어 디바이스 및 외부 디바이스를 제어하는 기술에 관한 것이다.

전자 기술의 발달에 따라, 점차 더 많은 종류의 전자 장치가 개발되어 보급되고 있다. 최근 보급되는 전자 장치들은 사용자의 편의를 위해 리모트 컨트롤러의 신호를 수신할 수 있는 기능을 구비한다. 이에 따라, 사용자는 리모트 컨트롤러를 이용하여 TV, 오디오, DVD 플레이어, 에어컨, 선풍기 등의 각종 전자 장치들을 제어할 수 있다.

한편, 최근 개발되고 있는 멀티미디어 디바이스(예를 들어, TV 등)는 인터넷 네트워크와 연결되어 다양한 정보들을 수신하는 기능을 탑재하고 있다. 이러한 멀티미디어 디바이스 및 이에 연결된 전자 장치(예를 들어, STB, DB 플레이어, DVD 플레이어, PC 등)를 제어하기 위해서는 디바이스의 수만큼 리모트 컨트롤러가 필요한 문제가 있다.

물론, 하나의 리모트 컨트롤러를 사용하여 복수 개의 디바이스를 제어하기 위한 기술 논의도 이루어지고 있으나, 대부분 하나의 통신 규격으로 제한되는 문제가 있다. 또한, 리모트 컨트롤러를 사용하여 적외선 통신 방식에 의해 복수 개의 디바이스를 제어하는 경우, STB 등과 같은 디바이스가 TV와 다른 장소에 위치하는 경우 적외선 신호의 직진성으로 인하여 리모트 컨트롤러의 제어 신호가 디바이스에 도달하기 어려운 문제점도 존재한다.

본 발명의 일 실시예가 이루고자 하는 기술적 과제는, 멀티미디어 디바이스에 의한 제스처 인식 기능을 활용하여, 하나의 리모트 컨트롤러를 사용하여 복수 개의 디바이스를 제어하기 위한 솔루션을 제공하는 것이다.

또한, 본 발명의 일 실시예가 이루고자 하는 기술적 과제는, 카메라가 내장된 리모트 컨트롤러를 방범 장치로서 활용하는 방안을 제공하는 것이다.

본 발명의 일 실시예에 따른 멀티미디어 디바이스 및 적어도 하나의 외부 디바이스를 제어하는 리모트 컨트롤러의 제어 방법은, 외부의 움직임을 감지하는 단계와, 상기 외부의 움직임이 감지된 경우, 이미지 센서를 온(on) 시키는 단계와, 상기 이미지 센서에서 피사체를 촬영하여 이미지를 생성하는 단계와, 상기 생성된 이미지를 멀티미디어 디바이스로 전송하는 단계와, 상기 전송된 이미지에 대응하는 코드값을 멀티미디어 디바이스로부터 수신하는 단계와, 상기 수신된 코드값에 대응하는 제어 신호를 송신하는 단계를 포함한다.

상기 이미지는 제1 통신 규격에 따라 멀티미디어 디바이스로 전송되고, 상기 제어 신호는 제2 통신 규격에 따라 송신될 수 있다.

상기 제어 신호 송신 단계는, 상기 제어 신호를 복수 개의 방향을 향해 송신할 수 있다.

본 발명의 일 실시예에 따른 멀티미디어 디바이스 및 적어도 하나의 외부 디바이스를 제어하는 리모트 컨트롤러는, 외부의 움직임을 감지하고 외부의 움직임이 감지된 경우 이미지 센서를 온(on) 시키는 움직임 감지 센서와, 피사체를 촬영하여 이미지를 생성하는 이미지 센서와, 상기 생성된 이미지를 멀티미디어 디바이스로 전송하고 상기 전송된 이미지에 대응하는 코드값을 멀티미디어 디바이스로부터 수신하는 제1 통신 모듈과, 상기 수신된 코드값에 대응하는 제어 신호를 송신하는 제2 통신 모듈을 포함한다.

상기 이미지는 제1 통신 규격에 따라 멀티미디어 디바이스로 전송되고, 상기 제어 신호는 제2 통신 규격에 따라 송신될 수 있다.

상기 제2 통신 모듈은 상기 제어 신호를 복수 개의 방향을 향해 송신할 수 있다.

본 발명의 다른 일 실시예에 따른 멀티미디어 디바이스 및 적어도 하나의 외부 디바이스를 제어하는 리모트 컨트롤러의 제어 방법은, 특정 모드로 설정되는 단계와, 외부의 움직임을 감지하는 단계와, 상기 외부의 움직임이 감지된 경우 이미지 센서를 온(on) 시키는 단계와, 상기 이미지 센서에서 피사체를 촬영하여 이미지를 생성하는 단계와, 멀티미디어 디바이스를 제어하기 위한 제어 신호를 제1 통신 규격에 따라 송신하는 단계와, 상기 생성된 이미지를 제2 통신 규격에 따라 멀티미디어 디바이스로 전송하는 단계를 포함한다.

상기 제어 신호는 멀티미디어 디바이스를 온 시키기 위한 제1 제어 신호 및 리모트 컨트롤러로부터 전송되는 이미지를 저장하기 위한 제2 제어 신호를 포함할 수 있다.

상기 제어 신호는 리모트 컨트롤러로부터 전송되는 이미지를 디스플레이하기 위한 제3 제어 신호를 더 포함할 수 있다.

본 발명의 일 실시예에 따른 적어도 하나의 외부 디바이스와 연결된 멀티미디어 디바이스의 제어 방법은, 리모트 컨트롤러로부터 이미지를 수신하는 단계와, 상기 수신된 이미지로부터 이미지 정보를 추출하는 단계와, 상기 추출된 이미지 정보로부터 제스처를 인식하는 단계와, 상기 인식된 제스처에 매칭되는 코드값을 검출하는 단계와, 상기 검출된 코드값을 리모트 컨트롤러로 전송하는 단계를 포함한다.

상기 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법은 제스처에 매칭되는 코드값들을 상기 적어도 하나의 외부 디바이스 별로 구분하여 데이터베이스를 구축하는 단계를 더 포함한다.

상기 이미지 정보는 피사체의 외곽 정보, 모션 벡터 정보, 또는 이미지의 색상 정보 중 적어도 하나를 포함할 수 있다.

상기 제스처 인식 단계는 피사체 모션의 궤적을 인식할 수 있다.

상기 제스처 인식 단계는 피사체 일부분의 형태를 인식할 수 있다.

본 발명의 일 실시예에 의하면, 멀티미디어 디바이스에 의한 제스처 인식 기능을 활용하여, 하나의 리모트 컨트롤러를 사용하여 복수 개의 디바이스를 제어할 수 있다.

또한, 본 발명의 일 실시예에 의하면, 카메라가 내장된 리모트 컨트롤러를 방범 장치로서 활용할 수 있다.

도 1은 본 발명의 일 실시예에 따른 리모트 컨트롤러 및 이에 의해 제어되는 복수 개의 디바이스를 포함한 시스템을 개략적으로 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 리모트 컨트롤러의 구성 모듈들을 도시한 블록도이다.
도 3은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 구성 모듈들을 설명하기 위한 블록도이다.
도 4는 도 3에 도시된 멀티미디어 디바이스의 제어부를 보다 상세히 도시한 블록도이다.
도 5는 본 발명의 일 실시예에 따라 멀티미디어 디바이스가 저장하고 있는 코드값들의 데이터베이스의 일 예를 도시한 도면이다.
도 6은 본 발명의 일 실시예에 따른 리모트 컨트롤러를 사용하여 제스처 인식에 의해 디바이스를 제어하는 방법의 일 예시를 나타낸 흐름도이다.
도 7은 본 발명의 일 실시예에 따른 리모트 컨트롤러 및 이에 의해 제어되는 복수 개의 디바이스를 포함한 시스템을 개략적으로 도시한 도면이다.
도 8은 복수 개의 리모트 컨트롤러가 존재하는 실시예를 설명하기 위한 도면이다.
도 9는 본 발명의 일 실시예에 따른 리모트 컨트롤러를 방범 장치로서 활용하는 방법의 일 예시를 나타낸 흐름도이다.

이하에서는 도면을 참조하여 본 발명을 더욱 상세하게 설명한다.

이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함을 고려하여 부여되는 것으로서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.

한편, 본 명세서에서 기술되는 멀티미디어 디바이스는, 예컨대 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 네트워크 TV로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행 가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.

나아가, 본 발명에서 기술되는 멀티미디어 디바이스는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다.

더욱이, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시 예를 상세하게 설명하지만, 본 발명이 실시 예들에 의해 제한되거나 한정되는 것은 아니다.

본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.

도 1은 본 발명의 일 실시예에 따른 리모트 컨트롤러 및 이에 의해 제어되는 복수 개의 디바이스를 포함한 시스템을 개략적으로 도시한 도면이다. 이하, 도 1을 참조하여, 본 발명의 일 실시예에 따른 리모트 컨트롤러 및 이에 의해 제어되는 복수 개의 디바이스를 포함한 시스템을 설명하면 다음과 같다.

도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 리모트 컨트롤러(100)는 멀티미디어 디바이스(300) 및 그 밖의 외부 디바이스(200)를 제어할 수 있다.

멀티미디어 디바이스(300)는 예컨대 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 네트워크 TV로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가된 장치이다. 예를 들어, 멀티미디어 디바이스(300)는 네트워크 TV, 스마트 TV, HBBTV(Hybrid Brodacast Broadband Television), 인터넷 TV, 웹 TV, IPTV(Internet Protocol Television) 등에 해당한다.

외부 디바이스(200)는 멀티미디어 디바이스(300)를 제외한 임의의 전자 장치를 의미하며, 멀티미디어 디바이스(300)와 유/무선으로 연결된 전자 장치(예를 들어, DVD 플레이어, BD 플레이어, STB, 사운드 바 등)일 수도 있고, 멀티미디어 디바이스(300)와 무관하게 기능하는 전자 장치(에어컨, 세탁기 등)일 수도 있으며, 이에 제한을 두지 않는다. 물론, 외부 디바이스(200)가 에어컨, 세탁기 등의 전자 장치인 경우라도, 외부 디바이스(200)의 기능에 따라 멀티미디어 디바이스(300)와 유/무선으로 연결되어 사용될 수도 있다.

리모트 컨트롤러(100)에 의해 제어되는 외부 디바이스(200)로서 DVD 플레이어(210), BD(Blu-ray Disc) 플레이어(220), 및 사운드 바(230)를 예시하였으나, 이에 한정되지 않으며 그 밖에 임의의 전자 장치도 리모트 컨트롤러(100)에 의해 제어되는 외부 디바이스(200)에 해당할 수 있다.

본 명세서에서는, 경우에 따라 멀티미디어 디바이스(300)와 외부 디바이스(200)를 구별하지 않고 디바이스라 통칭할 수도 있다.

리모트 컨트롤러(100)는 피사체를 촬영할 수 있는 이미지 센서를 내장하고 있다. 사용자는 리모트 컨트롤러(100)를 향하여 임의의 디바이스의 기능을 제어하기 위한 제스처를 취함으로써 멀티미디어 디바이스(300) 및 외부 디바이스(200)를 제어할 수 있다.

리모트 컨트롤러(100)는 이미지 센서에서 생성된 이미지를 멀티미디어 디바이스(300)로 전송하고, 상기 이미지에 대응하는 IR 코드값을 멀티미디어 디바이스(300)로부터 수신하도록 설계된다. 멀티미디어 디바이스(300)는 리모트 컨트롤러(100)로부터 전송된 이미지를 분석하여 제스처를 인식하도록 설계된다.

리모트 컨트롤러(100)와 멀티미디어 디바이스(300) 간의 데이터 송수신은 제1 통신 모듈을 통해 이루어진다. 실시예에 따라, 제1 통신 모듈 내에서, 리모트 컨트롤러(100)에서 멀티미디어 디바이스(300)로의 이미지 전송은 제1 통신 규격(예를 들어, WLAN)에 따라 이루어지고, 멀티미디어 디바이스(300)에서 리모트 컨트롤러(100)로의 IR 코드값 전송은 제2 통신 규격(예를 들어, 블루투스)에 따라 이루어질 수도 있다.

상기 IR 코드값은 특정 디바이스의 특정 기능에 맵핑되어 있다. 리모트 컨트롤러(100)는 상기 수신된 IR 코드값에 대응하는 IR 신호를 송신하여 외부 디바이스(200)를 제어한다. 리모트 컨트롤러(100)의 IR 신호의 송신은 제2 통신 모듈을 통해 이루어진다. 제2 통신 모듈 내에서, 상기 IR 신호의 송신은 제3 통신 규격(예를 들어, 적외선 통신)에 따라 이루어질 수 있다.

물론, 사용자가 제어하고자 하는 디바이스가 멀티미디어 디바이스(300) 자체인 경우에는, 멀티미디어 디바이스(300)는 리모트 컨트롤러(100)로부터 전송된 이미지를 분석하여 제스처를 인식하고, 제스처에 매칭되는 제어 신호를 생성하여 멀티미디어 디바이스(300) 내 구성 모듈들을 제어할 수 있다.

또한, 리모트 컨트롤러(100)는 사용자에 의해 방범 모드로 설정된 경우, 사용자 부재시 방범 장치로서 활용될 수도 있다.

도 2는 본 발명의 일 실시예에 따른 리모트 컨트롤러의 구성 모듈들을 도시한 블록도이다. 이하, 도 2를 참조하여, 본 발명의 일 실시예에 따른 리모트 컨트롤러의 구성 모듈들을 설명하면 다음과 같다. 다만, 도 2는 설명의 편의를 위한 실시예이며, 도 2에 도시된 구성모듈들 이외에 다른 구성 모듈을 포함하거나, 일부의 구성 모듈이 생략되는 형태도 본 발명의 권리범위에 속한다.

도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 리모트 컨트롤러(100)는 음성 입력부(110), 음성 인식부(120), 제어부(130), 움직임 감지 센서(140), 이미지 센서(150), 통신부(160), 저장부(170), 및 전원부(미도시)를 포함한다. 실시예에 따라, 리모트 컨트롤러(100)의 현 상태를 표시하는 디스플레이부를 더 포함할 수도 있고, 상기 음성 입력부(110)와 음성 인식부(120)는 포함하지 않을 수도 있다.

움직임 감지 센서(140)는 외부의 움직임을 감지한다. 움직임 감지 센서(140)는, 예를 들어, 적외선 센서 및/또는 열감지 센서를 포함할 수 있으며, 리모트 컨트롤러(100) 외부의 임의의 움직임을 감지할 수 있다.

움직임 감지 센서(140)는 외부의 움직임이 감지된 경우, 이미지 센서(150)를 온(on) 시키도록 설계될 수 있다. 사용자가 부재중인 경우에도 이미지 센서(150)가 항상 온 상태에 있으면 불필요한 대기 전력이 많이 소모되기 때문이다. 또는, 움직임 감지 센서(140)가 외부의 움직임이 감지되었음을 제어부(130)에 알리고, 제어부(130)의 제어에 의해 이미지 센서(150)가 온 되도록 설계될 수도 있다.

이미지 센서(150)는 피사체로부터 획득한 광학 신호를 전기적인 신호로 변환하여 이미지를 생성한다. 상기 생성된 이미지는 정지 이미지 또는 동영상을 포함한다.

리모트 컨트롤러(100)가 음성 인식 기능을 탑재하는 경우, 음성 입력부(110)와 음성 인식부(120)를 포함할 수 있다. 음성 인식부(120)는 제어부(130) 내에 포함되도록 구현될 수도 있다.

음성 입력부(110)는 사용자가 발화하는 음성을 수신한다. 음성 입력부(110)는 사용자의 음성을 센싱하여 전기적인 음성 신호로 변환하는 마이크로폰을 포함하여 이루어진다. 음성 입력부(110)는 복수 개 구비될 수도 있다.

음성 인식부(120)는 음성 입력부(110)에 의해 획득된 음성 신호에서 주변 잡음 신호를 제거한 후, 잡음 신호가 제거된 음성 신호를 텍스트로 변환한다. 음성 인식부(120)는 음성 신호의 파형에서 특징 정보를 추출하고, 추출된 특징 정보에 기초하여 음성 신호를 텍스트로 변환할 수 있다. 추출되는 특징 정보의 예로는, 입력되는 음성에 포함된 휴지(休止) 정보, 입력되는 음성의 음절의 개수 정보, 입력되는 음성의 진동수 정보, 입력되는 음성의 고저 정보 등일 수 있다.

예를 들어, 사용자가 “TV 채널 업”이라는 음성을 발화한 경우, 음성 인식부(120)는 텍스트 변환 작업을 통해 음성 신호를 “TV 채널 업”이라는 텍스트로 변환할 수 있다. 그리고, 변환된 텍스트에 매칭되는 제어 신호를 검출한다. 저장부(170)는 텍스트와 제어 신호의 맵핑 데이터를 미리 저장하고 있을 수 있다.

상기 이미지 센서(150)는 음성 입력부(110)와 음성 인식부(120)에 의해 인식된 사용자의 음성에 의해 온(on)되도록 설계될 수도 있다.

통신부(160)는 무선 통신 프로토콜에 따라 임의의 디바이스들과 통신 가능하도록 설계된다. 통신부(160)는 멀티미디어 디바이스(300)와 데이터 통신이 이루어지도록 설계된 RF 모듈(162)와, 기타 외부 장치들(200)과 적외선 통신이 이루어지도록 설계된 IR 모듈(164)을 포함한다. 멀티미디어 디바이스(300)가 리모트 컨트롤러(100)의 제어 대상이 되는 경우에는, 멀티미디어 디바이스(300)와도 IR 모듈(164)을 통해 통신할 수도 있다. 실시예에 따라, 통신부(140)는 인터넷 네트워크 등을 통해 외부 서버 등과 데이터를 송수신하도록 설계될 수도 있다.

저장부(170)는 제어부(130)의 각종 신호 처리를 위한 프로그램, 수신된 음성 신호를 텍스트로 변환하는데 필요한 프로그램, 알고리즘, 애플리케이션 등을 저장하고 있을 수 있다. 또한, 저장부(170)는 예를 들어 다양한 OS, 미들웨어 및 플랫폼을 저장하고 있다. 저장부(170)는 이미지 센서(150)에서 생성된 이미지, 음성 입력부(110)에서 생성된 음성 신호를 저장 또는 임시 저장하는 역할도 수행할 수 있다. 저장부(170)는 제어부(130) 내에 포함되도록 설계될 수도 있다.

제어부(130)는 리모트 컨트롤러(100)의 전반적인 동작을 제어한다. 제어부(130)는 음성 입력부(110), 음성 인식부(120), 움직임 감지 센서(140), 이미지 센서(150), 통신부(160), 저장부(170) 등 리모트 컨트롤러(100)에 포함된 구성 모듈들의 동작을 제어할 수 있다.

특히, 리모트 컨트롤러(100)가 방범 모드로 설정된 경우의 실시예에 대하여 설명하면 다음과 같다.

리모트 컨트롤러(100)는 사용자에 의해 방범 모드로 설정될 수 있다. 리모트 컨트롤러(100)가 방범 모드로 설정된 경우, 움직임 감지 센서(140)는 외부의 움직임을 감지하고, 움직임이 감지된 경우 이미지 센서(150)를 온 시킨다. 실시예에 따라, 움직임 감지 센서(140)로부터 움직임 감지를 통지받은 제어부(130)의 제어에 의해 이미지 센서(150)가 온 될 수도 있다.

이미지 센서(150)는 피사체를 촬영하여 이미지를 생성한다. 상기 생성되는 이미지는 기설정된 조건에 따라 정지 이미지일 수도 있고 동영상일 수도 있다. 생성되는 이미지가 정지 이미지인 경우, 방범 기능에 충실할 수 있도록, 기설정된 간격 마다 피사체를 촬영하여 복수 개의 정지 이미지가 생성되도록 구현될 수도 있다.

제어부(130)는 멀티미디어 디바이스(300)를 제어하기 위한 제어 신호를 송신하도록 통신부(160)를 제어한다. 상기 제어 신호는 통신부(160)의 IR 모듈(164)을 통해 송신될 수 있다.

또한, 제어부(130)는 상기 생성된 이미지를 멀티미디어 디바이스(300)로 전송하도록 통신부(160)를 제어한다. 상기 생성된 이미지는 통신부(160)의 RF 모듈(164)을 통해 전송될 수 있다.

멀티미디어 디바이스(300)는 리모트 컨트롤러(100)로부터 전송된 이미지를 저장하고, 경우에 따라 상기 이미지를 디스플레이하도록 설계된다.

멀티미디어 디바이스(300)를 제어하기 위한 상기 제어 신호는 멀티미디어 디바이스(300)를 온 시키기 위한 제1 제어 신호 및 리모트 컨트롤러(100)로부터 전송되는 이미지를 저장하기 위한 제2 제어 신호를 포함한다. 경우에 따라, 상기 제어 신호는 리모트 컨트롤러(100)로부터 전송되는 이미지를 디스플레이하기 위한 제3 제어 신호를 포함할 수도 있다.

멀티미디어 디바이스(300)는 상기 제1 제어 신호에 따라 전원을 온 하고 리모트 컨트롤러(100)로부터 상기 이미지를 수신하며, 상기 제2 제어 신호에 따라 상기 수신된 이미지를 저장부에 저장한다. 또한, 상기 제3 제어 신호에 따라 상기 수신된 이미지를 비디오 출력부를 통해 디스플레이할 수도 있다. 멀티미디어 디바이스(300)가 상기 제3 제어 신호에 따라 이미지를 디스플레이하는 경우, 침입자에게 심리적으로 부담을 주는 효과가 있을 수 있다.

리모트 컨트롤러(100)는 외부의 움직임이 더 이상 감지되지 않을 때까지 또는 사용자에 의해 기설정된 시간 동안 피사체 촬영을 완료한 후, 상기 제어 신호를 송신하고 멀티미디어 디바이스(300)로 생성된 이미지를 전송하도록 설계될 수 있다.

또는, 리모트 컨트롤러(100)는 피사체 촬영이 계속되는 중에, 상기 제어 신호를 송신하고, 이미지 생성이 완료된 부분을 멀티미디어 디바이스(300)로 전송하도록 설계될 수 있다. 이 경우, 리모트 컨트롤러(100)는 피사체 촬영을 완료할 때까지 복수 회에 걸쳐 멀티미디어 디바이스(300)로 이미지를 전송하고, 멀티미디어 디바이스(300)는 복수 회에 걸쳐 이미지를 수신하고 저장할 수 있다.

한편, 리모트 컨트롤러(100)를 사용하여 제스처 인식을 통해 디바이스를 제어하는 실시예에 대하여 설명하면 다음과 같다.

사용자가 리모트 컨트롤러(100)에 구비된 로컬키 등을 이용하여 이미지 센서(150)를 온 시킨 경우 또는 움직임 감지 센서(140)에서 움직임이 감지되는 것에 의해 이미지 센서(150)를 온 시킨 경우, 이미지 센서(150)는 피사체를 촬영하여 이미지를 생성한다.

제어부(130)는 상기 생성된 이미지를 멀티미디어 디바이스(300)로 전송하도록 통신부(160)를 제어한다. 상기 생성된 이미지는 통신부(160)의 RF 모듈(164)을 통해 전송될 수 있다.

멀티미디어 디바이스(300)는 리모트 컨트롤러(100)로부터 전송된 이미지를 분석하여 제스처를 인식하고, 인식된 제스처에 매칭되는 IR 코드값을 검출하여 리모트 컨트롤러(100)로 전송하도록 설계될 수 있다.

제어부(130)는 상기 IR 코드값에 대응하는 IR 신호를 송신하도록 통신부(160)를 제어한다. 상기 IR 신호는 통신부(160)의 IR 모듈(164)을 통해 송신될 수 있다. 상기 IR 코드값은 특정 디바이스의 특정 기능에 맵핑되어 있으므로, 특정 디바이스가 상기 IR 신호를 수신하고 이에 따라 특정 기능이 실행된다.

또한, 본 발명의 일 실시예에 의하면, 사용자가 멀티미디어 디바이스(300)를 통해 제3자와 화상 채팅 또는 화상 통화를 하는 경우, 리모트 컨트롤러(100) 내 이미지 센서(150)에서 생성된 사용자의 이미지를 멀티미디어 디바이스(300)로 전송함으로써 사용자는 리모트 컨트롤러(100)를 들고 자유롭게 이동하면서 화상 채팅 또는 화상 통화를 할 수 있다.

또한, 본 발명의 일 실시예에 의한 리모트 컨트롤러(100)에 의하면, 이미지 센서(150)가 복수 개 구비될 수도 있다. 이미지 센서(150)가 복수 개 구비되는 경우, 예를 들어, 하나의 이미지 센서(150)는 피사체와의 거리 정보 및/또는 피사체의 골격 정보를 이미지로 획득하도록 설계되고, 또 다른 하나의 이미지 센서(150)는 피사체의 색상 정보를 이미지로 획득하도록 설계될 수도 있다.

도 3은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 구성 모듈들을 설명하기 위한 블록도이다. 이하, 도 3을 참조하여, 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 구성 모듈들을 설명하면 다음과 같다. 다만, 도 3은 설명의 편의를 위한 실시예이며, 도 3에 도시된 구성모듈들 이외에 다른 구성 모듈을 포함하거나, 일부의 구성 모듈이 생략되는 형태도 본 발명의 권리범위에 속한다.

도 3에 도시된 바와 같이, 본 발명의 일실시예에 의한 멀티미디어 디바이스(300)는, 방송 수신 모듈(301), 복조부(302), 네트워크 인터페이스부(303), 외부장치 인터페이스부(304), 저장부(305), 제어부(306), 비디오 출력부(307), 오디오 출력부(308), 전원 공급부(309) 그리고 사용자 인터페이스(311) 등을 포함하여 이루어 진다. 상기 방송 수신 모듈(301)은, 예컨대 RF 튜너로 설계할 수도 있고 또는 STB 등 외부 디바이스로부터 방송 데이터를 수신하는 인터페이스로 설계 가능하다.

방송 수신 모듈(301)은, 예를 들어 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다.

복조부(302)는, 방송 수신 모듈(301)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다.

예를 들어, 방송 수신 모듈(301)에서 출력되는 디지털 IF 신호가 ATSC 방식인경우, 복조부(302)는 예컨대, 8-VSB(8-Vestigal Side Band) 복조를 수행한다. 또한, 복조부(302)는 채널 복호화를 수행할 수도 있다.

외부장치 인터페이스부(304)는 외부 장치와 멀티미디어 디바이스(300)간 데이터 통신이 가능하게 하는 인터페이스이다. 외부장치 인터페이스부(304)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북), STB 등과 같은 외부 장치와 유/무선으로 접속될 수 있다. 상기 외부 디바이스(200)는 외부장치 인터페이스부(304)를 통해 멀티미디어 디바이스(300)와 유/무선으로 연결될 수 있다. 외부장치 인터페이스부(304)는 연결된 외부 장치로부터 입력되는 영상, 음성 또는 데이터 신호를 제어부(306)로 전달한다. 또한, 제어부(306)에서 처리된 영상, 음성 또는 데이터신호를, 외부 장치로 출력할 수 있다.

상기 외부장치 인터페이스부(304)는, 예를 들어 USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자 등을 포함할 수 있다. 외부장치 인터페이스부(304)는 무선 네트워크와의 접속을 위해, 예를 들어 블루투스(Bluetooth), WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다. 외부장치 인터페이스부(304)는 리모트 컨트롤러(100)와 무선 네트워크로 연결되어 리모트 컨트롤러(100)와 데이터를 송수신할 수 있다.

네트워크 인터페이스부(303)는, 멀티미디어 디바이스(300)를 인터넷 망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스부(303)는, 유선 네트워크와의 접속을 위해, 예를 들어 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, 예를 들어 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다.

네트워크 인터페이스부(303)는, 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다.

저장부(305)는, 제어부(306) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다. 또한, 저장부(305)는 외부장치 인터페이스부(304) 또는 네트워크 인터페이스부(303)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 저장부(305)는, 예를 들어 다양한 OS, 미들웨어 및 플랫폼을 저장하고 있다. 또한, 저장부(305)는 리모트 컨트롤러(100)로부터 수신한 이미지를 분석하여 제스처를 인식하기 위한 프로그램 또는 애플리케이션 등을 저장하고 있다.

사용자 인터페이스(311)는, 사용자가 입력한 신호를 제어부(306)로 전달하거나, 제어부(306)로부터의 신호를 외부 디바이스(예를 들어, 원격 제어 장치)로 전송한다. 예를 들어, 사용자 인터페이스(311)는, RF(Radio Frequency) 통신 방식, 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격 제어 장치로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(306)로부터의 제어 신호를 원격 제어 장치로 송신하도록 설계되어 있다. 상기 원격 제어 장치는 리모트 컨트롤러(100)일 수도 있고, 멀티미디어 디바이스(300)에 오리엔트된(oriented) 별도의 리모트 컨트롤러일 수도 있다. 사용자 인터페이스(311)는 IR 통신 방식에 따라 리모트 컨트롤러(100)로부터 송신되는 제어 신호를 수신할 수 있다.

제어부(306)는, 방송 수신 모듈(301), 복조부(302), 네트워크 인터페이스부(303) 또는 외부장치 인터페이스부(304)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다.

비디오 출력부(307)는, 제어부(306)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(304)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R, G, B 신호로 변환하여 구동 신호를 생성한다. 상기 비디오 출력부(307)는, PDP, LCD, OLED, 플렉시블 디스플레이 (flexible display), 3차원 디스플레이(3D display) 등이 가능하다.

오디오 출력부(308)는, 제어부(306)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1채널 신호 또는 5.1채널 신호를 입력받아 음성으로 출력한다. 음성 출력부(308)는 다양한 형태의 스피커로 구현될 수 있다.

그리고, 전원 공급부(309)는, 멀티미디어 디바이스(300) 전반에 걸쳐 해당 전원을 공급한다. 특히, 시스템 온 칩(System On Chip, SOC)의 형태로 구현될 수 있는 제어부(306)와, 영상 표시를 위한 비디오 출력부(307) 및 오디오 출력을 위한 오디오 출력부(308)에 전원을 공급할 수 있다.

도 4는 도 3에 도시된 멀티미디어 디바이스의 제어부를 보다 상세히 도시한 블록도이다.

도 4에 도시된 바와 같이, 멀티미디어 디바이스(300)의 제어부(306)는, 역다중화부(310), 영상처리부(320), GUI 생성부(330), 믹서(340), 프레임 레이트 변환부(350) 그리고 포맷터(360) 등을 포함한다. 또한, 음성 처리부(미도시), 데이터 처리부(미도시)를 더 포함하도록 설계하는 것도 본 발명의 권리범위에 속한다.

상기 역다중화부(310)는, 입력되는 스트림을 역다중화한다. 예를 들어, MPEG-2 TS가 입력되는 경우 이를 역다중화하여, 각각 영상, 음성 및 데이터 신호로 분리할 수 있다.

영상 처리부(320)는, 역다중화된 영상 신호의 영상 처리를 수행할 수 있다. 이를 위해, 영상 처리부(320)는, 영상 디코더(322) 및 스케일러(324)를 구비할 수 있다. 상기 영상 디코더(322)는, 역다중화된 영상신호를 복호화하며, 상기 스케일러(324)는, 복호화된 영상신호의 해상도를 비디오 출력부에서 출력 가능하도록 스케일링(scaling)을 수행한다. 그리고, 영상 처리부(320)에서 복호화된 영상 신호는, 믹서(340)로 입력된다.

GUI 생성부(330)는, 사용자 입력에 따라 또는 자체적으로 GUI 신호를 생성한다. 따라서, 믹서(340)는, GUI 생성부(330)에서 생성된 GUI 신호와 영상처리부(320)에서 영상 처리된 복호화된 영상 신호를 믹싱할 수 있다. GUI 생성부(300)는 볼륨 제어 또는 화면 제어 등과 같이 환경 설정 정보를 포함하는 OSD(On Screen Display) 신호를 생성하는 OSD 생성부를 포함한다.

믹싱된 신호는 포맷터(360)에 제공된다. 복호화된 방송 영상 신호 또는 외부 입력 신호와 OSD 신호가 믹싱됨으로 인하여, 방송 영상 또는 외부 입력 영상 상에 OSD 가 오버레이 되어 표시될 수 있게 된다.

프레임 레이트 변환부(Frame Rate Conveter; FRC)(350)는, 입력되는 영상의 프레임 레이트를 변환할 수 있다. 예를 들어, 60Hz의 프레임 레이트를 120Hz 또는 240Hz로 변환한다. 60Hz의 프레임 레이트를 120Hz로 변환하는 경우, 제1 프레임과 제2 프레임 사이에, 동일한 제1 프레임을 삽입하거나, 제1 프레임과 제2 프레임으로부터 예측된 제3 프레임을 삽입하는 것이 가능하다. 60Hz의 프레임 레이트를 240Hz로 변환하는 경우, 동일한 프레임을 3개 더 삽입하거나, 예측된 프레임을 3개 삽입하는 것이 가능하다. 한편, 별도의 변환 없이 입력되는 프레임 레이트를 유지하는 것도 가능하다.

그리고, 포맷터(360)는, 프레임 레이트 변환부(350)의 출력 신호를 입력받아, 비디오 출력부에 적합하도록 신호의 포맷을 변경하여 출력한다. 예를 들어, R, G, B 데이터 신호를 출력할 수 있으며, 이러한 R, G, B 데이터 신호는, 낮은 전압 차분 신호(Low voltage differential signaling, LVDS) 또는 mini-LVDS로 출력될 수 있다.

특히, 본 발명의 실시예와 관련하여 설명하면 다음과 같다.

제어부(306)는 리모트 컨트롤러(100)로부터 수신된 이미지를 분석하여 제스처를 인식하도록 설계된다. 멀티미디어 디바이스(300)가 제스처를 인식하는 과정을 설명하면 다음과 같다. 리모트 컨트롤러(100)로부터 이미지가 전송되기 전, 특정 디바이스의 제어 모드로 미리 설정된 것으로 가정한다. 즉, 사용자가 리모트 컨트롤러(100), 멀티미디어 디바이스(300)에 오리엔트된 별도의 리모트 컨트롤러, 또는 멀티미디어 디바이스(300)에 구비된 로컬키 등을 통하여, 외부입력으로 진입한 후에 제어하고자 하는 특정 디바이스의 제어 모드를 선택하는 과정이 선행될 수 있다.

제어부(306)는 외부장치 인터페이스부(204)를 통해 수신된 이미지로부터 이미지 정보를 추출한다. 상기 이미지 정보는 피사체의 외곽 정보, 모션 벡터 정보 또는 이미지의 색상 정보 중 적어도 하나를 포함한다. 즉, 제어부(306)는 수신된 이미지로부터, 배경과 구분되는 피사체의 외곽 정보를 추출할 수 있다. 상기 외곽 정보는 피사체의 신체 각 부분(예를 들어, 손가락, 손 바닥, 팔꿈치 등)의 외곽을 구분하는 정보를 포함할 수도 있다. 또한, 제어부(306)는 수신된 이미지로부터, 피사체가 움직이는 궤적을 알 수 있는 모션 벡터 정보를 추출할 수 있다. 또한, 제어부(306)는 수신된 이미지로부터, 이미지의 R(Red), G(Green), 및 B(Blue) 각 색상에 대한 정보를 추출할 수 있다.

제어부(306)는 상기 추출된 이미지 정보에 기초하여 제스처를 인식한다. 인식되는 제스처에는 피사체 모션의 궤적에 의해 인식되는 제1 타입 제스처 및 피사체 일부분의 형태에 의해 인식되는 제2 타입 제스처가 있을 수 있다. 제1 타입 제스처는 사용자가 신체의 일부분을 사용하여 특정 방향으로 움직이는 등(예를 들어, 손을 사용하여 시계 방향으로 원을 그리는 움직임) 피사체의 모션을 추적하여 인식되는 제스처이다. 제2 타입 제스처는 사용자가 신체의 일부분을 사용하여 임의로 만든 특정 형태(예를 들어, 손으로 주먹을 쥔 상태에서 엄지를 위로 드는 형태)에 의해 인식되는 제스처이다.

저장부(305)에는 제스처에 매칭되는 IR 코드값들을 복수 개의 외부 디바이스 별로 구분하여 구축된 데이터베이스가 저장되어 있다.

제어부(306)는 저장부(305)에 액세스하여, 인식된 제스처에 매칭되는 IR 코드값을 검출하고, 외부장치 인터페이스부(204)를 통해 상기 검출된 IR 코드값을 리모트 컨트롤러(100)로 전송한다.

도 5는 본 발명의 일 실시예에 따라 멀티미디어 디바이스가 저장하고 있는 코드값들의 데이터베이스의 일 예를 도시한 도면이다.

도 5에 도시된 바와 같이, 멀티미디어 디바이스(300)의 저장부(305)는 제스처에 매칭되는 코드값들을 복수 개의 디바이스(예를 들어, TV, STB 등) 별로 구분하여 데이터베이스를 구축하여, 서로 다른 메모리 어드레스에 저장하도록 설계될 수 있다. 즉, 제1 어드레스에는 TV의 기능들에 대한 IR 코드값을 저장하고, 제2 어드레스에는 STB의 기능들에 대한 IR 코드값을 저장한다.

예를 들어, 사용자 편의를 위하여, TV와 STB에 공통적으로 존재하는 채널 업/다운의 기능에는 동일한 제스처가 맵핑되도록 데이터베이스를 구축할 수 있다. 사용자에 의해 TV 제어 모드가 설정되고, 피사체 모션의 궤적이 시계 방향으로 원을 그리는 제스처가 인식되면, 제어부(306)는 저장부(305)의 Address 1에 액세스하여 0X01 값을 검출할 수 있다. 반면, 이와 동일한 제스처가 인식되었으나 사용자에 의해 STB 제어 모드가 설정된 경우라면, 제어부(306)는 저장부(305)의 Address 2에 액세스하여 0X51 값을 검출할 수 있다.

또한, 데이터베이스에 저장된 제스처에는 상술한 제1 타입 제스처(G1) 또는 제2 타입 제스처(G2) 중 적어도 하나를 포함할 수 있다.

도 6은 본 발명의 일 실시예에 따른 리모트 컨트롤러를 사용하여 제스처 인식에 의해 디바이스를 제어하는 방법의 일 예시를 나타낸 흐름도이다. 이하, 도 6을 참조하여, 본 발명의 일 실시예에 따른 리모트 컨트롤러를 사용하여 제스처 인식에 의해 디바이스를 제어하는 방법의 일 예시를 설명하면 다음과 같다.

먼저, 리모트 컨트롤러(100)의 이미지 센서(150)가 온(on) 된다(S401). 이미지 센서(150)는 사용자가 리모트 컨트롤러(100)에 구비된 로컬키를 누름으로써 온 될 수도 있고, 움직임 감지 센서(140)에 움직임이 감지되는 경우 움직임 감지 센서(140) 또는 제어부(130)의 제어에 의해 온 될 수도 있다.

이미지 센서(150)는 피사체를 촬영하여 이미지를 생성한다(S402). 리모트 컨트롤러(100)는 상기 생성된 이미지를 멀티미디어 디바이스(300)로 전송하기 위하여, 기설정된 통신 규격에 맞도록 이미지를 압축할 수도 있다.

리모트 컨트롤러(100)는 멀티미디어 디바이스(300)로 상기 생성된 이미지를 전송한다(S403). 상기 생성된 이미지가 압축된 경우, 리모트 컨트롤러(100)는 압축된 이미지 파일을 멀티미디어 디바이스(300)로 전송할 수도 있다.

멀티미디어 디바이스(300)는 리모트 컨트롤러(100)로부터 전송된 이미지를 수신하고, 수신된 이미지로부터 이미지 정보를 추출한다(S404). 상기 이미지 정보는 피사체의 외곽 정보, 모션 벡터 정보 또는 이미지의 색상 정보 중 적어도 하나를 포함한다.

그리고, 멀티미디어 디바이스(300)는 상기 추출된 이미지 정보에 기초하여 제스처를 인식한다(S405). 인식되는 제스처에는 피사체 모션의 궤적에 의해 인식되는 제1 타입 제스처 및 피사체 일부분의 형태에 의해 인식되는 제2 타입 제스처가 있을 수 있다.

멀티미디어 디바이스(300)는 저장부에 액세스하여 인식된 제스처에 매칭되는 IR 코드값을 검출하고(S406), 상기 검출된 IR 코드값을 리모트 컨트롤러(100)로 전송한다(S407).

리모트 컨트롤러(100)는 멀티미디어 디바이스(300)로부터 전송된 IR 코드값을 수신하고, 상기 수신된 IR 코드값에 대응하는 IR 신호를 송신한다(S407).

상기 IR 신호는 특정 디바이스의 특정 기능에 맵핑되어 있으므로, 상기 IR 신호에 의해 특정된 외부 디바이스(200)가 상기 IR 신호를 수신하고, 이에 따라 특정 기능을 실행한다(S408).

실시예에 따라, 단계(S408)에서 특정 기능이 실행된 이후, 외부 디바이스(200)는 자신의 상태 정보를 멀티미디어 디바이스(300)로 전송하고, 멀티미디어 디바이스(300)는 상기 상태 정보를 수신하도록 설계될 수도 있다. 이 경우, 멀티미디어 디바이스(300)는 상기 수신된 상태 정보에 기초하여 GUI를 생성 및 디스플레이하며, 사용자는 상기 GUI를 통해 외부 디바이스(200)의 현재 상태를 알 수 있다. 예를 들어, 단계(S408)에서 실행된 특정 기능이 에어컨의 설정 온도를 낮추는 기능이었던 경우, 사용자는, 멀티미디어 디바이스(300)에 디스플레이된 GUI를 통해, 자신의 제어 명령이 에어컨에 제대로 전달되어 에어컨의 설정 온도가 낮춰졌음을 확인할 수 있다.

또한, 실시예에 따라, 멀티미디어 디바이스(300)를 제어하는 모드인 경우인 경우에는, 멀티미디어 디바이스(300)는 단계(S405)에서 제스처를 인식하고, 인식된 제스처에 대응하는 제어 신호를 생성하여 특정 기능을 실행하도록 설계된다. 이 경우, 단계(S406) 내지 단계(S408)는 생략된다. 즉, 멀티미디어 디바이스(300)의 제어부는 추출된 이미지 정보로부터 제스처를 인식하고, 인식된 제스처에 대응하는 제어 신호를 생성하여 멀티미디어 디바이스(300) 내 구성 모듈들을 제어할 수 있다.

도 7은 본 발명의 일 실시예에 따른 리모트 컨트롤러 및 이에 의해 제어되는 복수 개의 디바이스를 포함한 시스템을 개략적으로 도시한 도면이다.

도 7에 도시된 바와 같이, 본 발명의 일 실시예에 따른 리모트 컨트롤러(100)는 멀티미디어 디바이스(300) 및 그 밖의 외부 디바이스(200)를 제어할 수 있다. 리모트 컨트롤러(100)에 의해 제어되는 외부 디바이스(200)로서 DVD 플레이어(210), BD(Blu-ray Disc) 플레이어(220), 사운드 바(230), 및 에어컨(240)을 예시하였으나, 이에 한정되지 않는다.

리모트 컨트롤러(100)는 복수 개의 IR 신호 송신부(101)를 구비하고, 상기 복수 개의 IR 신호 송신부(101)를 통해 IR 신호를 복수 개의 방향으로 송신한다.

예를 들어, 사용자가 에어컨(240)을 제어하고자 하는 경우 사용자는 에어컨(240)의 기능과 관련된 제스처를 취하고, 리모트 컨트롤러(100)는 사용자를 촬영하여 생성된 이미지를 멀티미디어 디바이스(300)로 전송한다. 그리고, 리모트 컨트롤러(100)는 멀티미디어 디바이스(300)에서 제스처 인식에 의해 검출된 IR 코드값을 수신하고, 상기 수신된 IR 코드값에 대응하는 IR 신호를 송신한다. 이 경우, 상기 IR 신호는 복수 개의 IR 신호 송신부(101)를 통해 복수 개의 방향으로 송신된다. IR 신호는 직진성이 있으므로, 복수 개의 IR 신호 송신부(101) 중 특정 IR 신호 송신부(101)를 통해 송신된 IR 신호가 에어컨(240)에 수신되어 에어컨(240)이 제어된다.

종래의 리모트 컨트롤러의 경우, IR 신호의 직진성으로 인하여, 사용자가 리모트 컨트롤러를 손에 쥔 상태에서 제어하고자 하는 디바이스를 향하여 제어 신호를 송신해야만 하는 불편이 있었다.

실시예에 따르면, 사용자는 리모트 컨트롤러(100)가 어디 있는지 찾을 필요가 없으며, 임의의 디바이스를 제어하고자 하는 경우 제스처를 취하기만 하면, 리모트 컨트롤러(100)가 사용자의 제스처에 대응하는 IR 신호를 복수 개의 방향을 향해 송신함으로써 손쉽게 디바이스를 제어할 수 있다. 사용자는 제어하고자 하는 복수 개의 디바이스(200, 300)의 위치를 고려하여 리모트 컨트롤러(100)를 임의의 장소에 배치하기만 하면 된다.

상기 IR 신호 송신부(101)는 도 2의 IR 모듈(164)에 포함되어 구현된다.

도 8은 복수 개의 리모트 컨트롤러가 존재하는 실시예를 설명하기 위한 도면이다.

도 8에 도시된 바와 같이, 댁 내에 총 세 개의 리모트 컨트롤러(100A, 100B, 100C)가 존재하는 경우를 예로 들어 설명한다. 편의상, 리모트 컨트롤러(100A)를 1번 리모트 컨트롤러, 리모트 컨트롤러(100B)를 2번 리모트 컨트롤러, 리모트 컨트롤러(100C)를 3번 리모트 컨트롤러라 칭하기로 한다. 세 개의 리모트 컨트롤러(100A, 100B, 100C)를 통칭하고자 하는 경우에는 리모트 컨트롤러(100)라 칭하기로 한다.

리모트 컨트롤러(100)와 디바이스(200, 300) 사이에 장벽이 존재하는 경우, 리모트 컨트롤러(100)가 송신하는 IR 신호의 직진성으로 인하여, 디바이스(200, 300)에 상기 IR 신호가 제대로 전달되기 어렵다. 따라서, 필요에 따라, 사용자는 댁 내 거실과 방에 적어도 하나의 리모트 컨트롤러(100)를 각각 설치하여 사용할 수 있다.

도 8을 참조하면, 거실에는 멀티미디어 디바이스(300) 및 이에 연결된 DVD 플레이어(210)가 설치되어 있고, 첫 번째 방에는 에어컨(240)이 설치되어 있으며, 두 번째 방에는 사운드 바(230)가 설치되어 있다.

사용자가 거실에서 멀티미디어 디바이스(300)와 DVD 플레이어를 제어하고자 하는 경우에는 1번 리모트 컨트롤러(100A)를 사용하여 제어할 수 있다. 마찬가지로, 사용자가 첫 번째 방에서 에어컨(240)을 제어하고자 하는 경우에는 2번 리모트 컨트롤러(100B)를 사용하여 제어할 수 있고, 사용자가 두 번째 방에서 사운드 바(230)를 제어하고자 하는 경우에는 3번 리모트 컨트롤러(100C)를 사용하여 제어할 수 있다.

한편, 예를 들어, 사용자가 거실에서 첫 번째 방 안에 설치된 에어컨(240)을 제어하고자 하는 경우, 거실과 첫 번째 방은 벽에 의해 가로막혀 있기 때문에 1번 리모트 컨트롤러(100A)에서 송신되는 IR 신호로는 에어컨(240)을 제어할 수 없다.

이 경우, 1번 리모트 컨트롤러(100A)는 에어컨(240)의 특정 기능에 매칭되는 IR 코드값을 RF 모듈(162)을 통해 2번 및 3번 리모트 컨트롤러(100B, 100C)로 전송하고, 2번 및 3번 리모트 컨트롤러(100B, 100C)는 상기 IR 코드값을 수신하여 이에 대응하는 IR 신호를 송신한다. 에어컨(240)은 2번 리모트 컨트롤러(100B)에서 송신되는 IR 신호를 수신할 수 있고, 이에 따라 에어컨(240)의 특정 기능이 실행된다. 실시예에 따라, 1번 리모트 컨트롤러(100A)가 에어컨(240)과 2번 리모트 컨트롤러(100B)가 동일한 장소에 설치되어 있다는 정보를 미리 알고 있는 경우라면, 1번 리모트 컨트롤러(100A)는 상기 IR 코드값을 2번 리모트 컨트롤러(100B)에만 전송하도록 설계될 수도 있다.

도 9는 본 발명의 일 실시예에 따른 리모트 컨트롤러를 방범 장치로서 활용하는 방법의 일 예시를 나타낸 흐름도이다. 이하, 도 9를 참조하여, 본 발명의 일 실시예에 따른 리모트 컨트롤러를 방범 장치로서 활용하는 방법의 일 예시를 설명하면 다음과 같다.

도 9를 참조하면, 사용자에 의해 리모트 컨트롤러(100)가 방범 모드로 설정된다(S601).

리모트 컨트롤러(100)는 어떠한 움직임이 감지된 경우 이미지 센서(150)를 온(on) 시킨다. 리모트 컨트롤러(100)는 움직임 감지 센서(140)에 의해 어떠한 움직임이 감지된 경우, 움직임 감지 센서(140) 또는 제어부(130)의 제어에 의해 이미지 센서(150)가 온 되도록 설계될 수 있다.

리모트 컨트롤러(100)는 피사체를 촬영하여 이미지를 생성한다(S603). 상기 생성되는 이미지는 기설정된 조건에 따라 정지 이미지일 수도 있고 동영상일 수도 있다. 생성되는 이미지가 정지 이미지인 경우, 방범 기능에 충실할 수 있도록, 기설정된 간격 마다 피사체를 촬영하여 복수 개의 정지 이미지가 생성되도록 구현될 수도 있다.

리모트 컨트롤러(100)는 멀티미디어 디바이스(300)를 제어하기 위한 제어 신호를 송신한다(S604). 상기 제어 신호는 리모트 컨트롤러(100) 내 IR 모듈(164)에서 송신되는 IR 신호일 수 있다. 상기 제어 신호는 멀티미디어 디바이스(300)를 온 시키기 위한 제1 제어 신호 및 리모트 컨트롤러(100)로부터 전송되는 이미지를 저장하기 위한 제2 제어 신호를 포함한다. 상기 제어 신호는 리모트 컨트롤러(100)로부터 전송되는 이미지를 디스플레이하기 위한 제3 제어 신호를 포함할 수도 있다.

멀티미디어 디바이스(300)는 상기 제1 제어 신호에 따라 전원을 온(on) 한다(S605).

리모트 컨트롤러(100)는 상기 생성된 이미지를 멀티미디어 디바이스(300)로 전송한다(S606). 상기 이미지는 리모트 컨트롤러(100) 내 RF 모듈(162)을 통해 전송될 수 있다.

멀티미디어 디바이스(300)는 상기 이미지를 수신하고, 상기 제2 제어 신호에 따라 상기 수신된 이미지를 저장한다(S607). 상기 제어 신호에 제3 제어 신호도 포함되어 있는 경우, 멀티미디어 디바이스(300)는 상기 수신된 이미지를 디스플레이한다(S607).

실시예에 따라, 리모트 컨트롤러(100)는 상기 제1 제어 신호 내지 제3 제어 신호를 단계(S604)에서 한꺼번에 송신하고, 멀티미디어 디바이스(300)가 상기 제1 제어 신호 내지 제3 제어 신호를 한꺼번에 수신할 수 있다. 이 경우, 멀티미디어 디바이스(300)는 상기 단계(S605)에서 제1 제어 신호에 따라 전원을 온 하고 제2 및 제3 제어 신호는 저장부에 임시로 저장하여 둔다. 그리고, 멀티미디어 디바이스(300)는 리모트 컨트롤러(100)로부터 이미지가 수신되었을 때, 상기 제2 제어 신호에 따라 이미지를 저장하고 상기 제3 제어 신호에 따라 이미지를 디스플레이하도록 설계될 수 있다.

또는, 실시예에 따라, 리모트 컨트롤러(100)는 상기 제1 제어 신호만을 단계(S604)에서 송신하고, 멀티미디어 디바이스(300)가 단계(S605)에서 제1 제어 신호에 따라 전원을 온 하도록 설계될 수도 있다. 그리고, 리모트 컨트롤러(100)는 단계(S606)에서 이미지를 전송하면서 상기 제2 제어 신호 및 제3 제어 신호를 함께 전송할 수 있고, 멀티미디어 디바이스(300)는 이미지를 수신하고 상기 제2 제어 신호에 따라 이미지를 저장하며, 제3 제어 신호에 따라 이미지를 디스플레이한다.

리모트 컨트롤러(100)는 외부의 움직임이 더 이상 감지되지 않을 때까지 또는 사용자에 의해 기설정된 시간 동안 피사체 촬영을 일단 완료한 후(S602), 상기 제어 신호를 송신하고(S604), 멀티미디어 디바이스(300)로 생성된 이미지를 전송하도록 설계될 수 있다(S606).

또는, 리모트 컨트롤러(100)는 피사체 촬영이 계속되는 중에, 상기 제어 신호를 송신하고, 이미지 생성이 완료된 부분을 멀티미디어 디바이스(300)로 전송하도록 설계될 수 있다. 이 경우, 리모트 컨트롤러(100)는 피사체 촬영을 완료할 때까지 복수 회에 걸쳐 멀티미디어 디바이스(300)로 이미지를 전송할 수 있다. 즉, 단계(S603), 단계(S606) 및 단계(S607)가 복수 회 반복되거나, 일부 단계들이 오버랩되어 수행될 수도 있다.

설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시예들을 병합하여 새로운 실시예를 구현하도록 설계하는 것도 가능하다. 그리고, 당업자의 필요에 따라, 이전에 설명된 실시예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다.

본 발명에 따른 멀티미디어 디바이스 및 그 동작 방법은 상기한 바와 같이 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

한편, 본 발명의 멀티미디어 디바이스의 동작방법은 디스플레이 장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.

또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.

그리고, 당해 명세서에서는 물건 발명과 방법 발명이 모두 설명되고 있으며, 필요에 따라 양발명의 설명은 보충적으로 적용될 수가 있다.

100: 리모트 컨트롤러
200: 외부 디바이스
300: 멀티미디어 디바이스

Claims (14)

1. 멀티미디어 디바이스 및 제1 외부 디바이스를 제어하는 리모트 컨트롤러의 제어 방법에 있어서,
   외부의 움직임을 감지하는 단계;
   상기 외부의 움직임이 감지된 경우, 이미지 센서를 온(on) 시키는 단계;
   상기 이미지 센서에서 피사체를 촬영하여 이미지를 생성하는 단계;
   상기 생성된 이미지를 멀티미디어 디바이스로 전송하는 단계;
   상기 전송된 이미지에 대응하는 코드값을 멀티미디어 디바이스로부터 수신하는 단계; 및
   상기 수신된 코드값에 대응하는 제어 신호를 송신하는 단계;를 포함하고,
   상기 제어 신호를 송신하는 단계는
   상기 멀티미디어 디바이스로부터 상기 제어 신호의 수신 범위 밖에 위치하는 제2 외부 디바이스에 매칭되는 코드값이 수신된 경우, 상기 리모트 컨트롤러로부터 송신되는 제어 신호의 수신 범위 내에 위치하는 다른 리모트 컨트롤러에 상기 제2 외부 디바이스에 매칭되는 코드값을 전송하는 것을 특징으로 하는
   리모트 컨트롤러의 제어 방법.
2. 제 1 항에 있어서,
   상기 이미지는 제1 통신 규격에 따라 멀티미디어 디바이스로 전송되고, 상기 제어 신호는 제2 통신 규격에 따라 송신되는 리모트 컨트롤러의 제어 방법.
3. 제 1 항에 있어서,
   상기 제어 신호 송신 단계는, 상기 제어 신호를 복수 개의 방향을 향해 송신하는 리모트 컨트롤러의 제어 방법.
4. 멀티미디어 디바이스 및 적어도 하나의 외부 디바이스를 제어하는 리모트 컨트롤러에 있어서,
   외부의 움직임을 감지하고, 외부의 움직임이 감지된 경우 이미지 센서를 온(on) 시키는 움직임 감지 센서;멀티미디어 디바이스 및 제1 외부 디바이스를 제어하는 리모트 컨트롤러에 있어서,
   외부의 움직임을 감지하고, 외부의 움직임이 감지된 경우 이미지 센서를 온(on) 시키는 움직임 감지 센서;
   피사체를 촬영하여 이미지를 생성하는 이미지 센서;
   상기 생성된 이미지를 멀티미디어 디바이스로 전송하고, 상기 전송된 이미지에 대응하는 코드값을 멀티미디어 디바이스로부터 수신하는 제1 통신 모듈;
   상기 수신된 코드값에 대응하는 제어 신호를 송신하는 제2 통신 모듈; 및
   상기 움직임 감지 센서, 상기 이미지 센서, 상기 제1 통신 모듈 및 상기 제2 통신 모듈 중 적어도 하나를 제어하는 제어부;를 포함하고,
   상기 제어부는
   상기 멀티미디어 디바이스로부터 상기 제어 신호의 수신 범위 밖에 위치하는 제2 외부 디바이스에 매칭되는 코드값이 수신된 경우, 상기 리모트 컨트롤러로부터 송신되는 제어 신호의 수신 범위 내에 위치하는 다른 리모트 컨트롤러에 상기 제2 외부 디바이스에 매칭되는 코드값을 전송하도록 상기 제2 통신 모듈을 제어하는 것을 특징으로 하는
   리모트 컨트롤러.
5. 제 4 항에 있어서,
   상기 이미지는 제1 통신 규격에 따라 멀티미디어 디바이스로 전송되고, 상기 제어 신호는 제2 통신 규격에 따라 송신되는 리모트 컨트롤러.
6. 제 4 항에 있어서,
   상기 제2 통신 모듈은 상기 제어 신호를 복수 개의 방향을 향해 송신하는 리모트 컨트롤러.
7. 삭제
8. 삭제
9. 삭제
10. 삭제
11. 삭제
12. 삭제
13. 삭제
14. 삭제

Images