KR101612957B1 - 원격 제어 장치 및 방법 - Google Patents

원격 제어 장치 및 방법 Download PDF

Info

Publication number
KR101612957B1
KR101612957B1 KR1020090086157A KR20090086157A KR101612957B1 KR 101612957 B1 KR101612957 B1 KR 101612957B1 KR 1020090086157 A KR1020090086157 A KR 1020090086157A KR 20090086157 A KR20090086157 A KR 20090086157A KR 101612957 B1 KR101612957 B1 KR 101612957B1
Authority
KR
South Korea
Prior art keywords
virtual image
remote control
target device
image
target
Prior art date
Application number
KR1020090086157A
Other languages
English (en)
Other versions
KR20110028185A (ko
Inventor
김종철
박종순
박진영
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020090086157A priority Critical patent/KR101612957B1/ko
Priority to PCT/KR2010/005078 priority patent/WO2011019154A2/en
Priority to PCT/KR2010/005079 priority patent/WO2011019155A2/en
Priority to US12/856,455 priority patent/US8928452B2/en
Priority to US12/856,436 priority patent/US8539541B2/en
Publication of KR20110028185A publication Critical patent/KR20110028185A/ko
Application granted granted Critical
Publication of KR101612957B1 publication Critical patent/KR101612957B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208Display device provided on the remote control
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224Touch pad or touch panel provided on the remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42225User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details characterized by types of remote control, e.g. universal remote control

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Selective Calling Equipment (AREA)
  • Details Of Television Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 원격 제어 장치 및 방법에 관한 것이다. 본 발명에 따르면 사용자에게 보다 직관적이고 사용이 용이한 사용자 인터페이스를 제공할 수 있다. 본 발명에 따르면 보다 직관적이고 용이하게 타겟 장치가 제공하는 다수의 컨텐츠를 열람하고, 소정의 컨텐츠를 상기 타겟 장치에서 실행시킬 수 있다. 본 발명에 따르면 보다 직관적이고 용이하게 타겟 장치에 연결된 외부 기기를 선택하고, 상기 외부 기기가 제공하는 컨텐츠를 상기 타겟 장치에서 실행시킬 수 있다.
원격 제어 장치, 리모컨, 카메라, 실제 이미지, 가상 이미지, 합성

Description

원격 제어 장치 및 방법{REMOTE CONTROL DEVICE AND METHOD FOR REMOTE CONTROLLING USING THE SAME}
본 발명은 원격 제어 장치 및 방법에 관한 것이다. 보다 구체적으로, 본 발명은 타겟 장치를 촬영한 실제 이미지와 상기 타겟 장치가 제공하는 컨텐츠의 가상 이미지를 합성하여 표시하는 원격 제어 장치 및 방법에 관한 것이다.
텔레비전, DVD 플레이어, 게임기, 오디오 등 가전 제품들을 제어하는 리모컨이 존재한다. 이러한 리모컨은 적외선을 이용하여 가전 제품에 바이너리 코드를 전송하고, 그에 따라 가전 제품의 볼륨, 채널, 동작 모드 등을 제어한다.
최근에는 일 가정에 구비되는 가전 제품의 종류 및 수가 증가함에 따라, 이들 다수의 가전 제품들을 하나의 리모컨으로 제어할 수 있는 통합 리모컨이 출시되었다.
하지만, 이러한 통합 리모컨도 다수의 가전 제품들에 대한 리모컨을 하나의 기기로 통합하였다는 것 외에는 별다른 편의성을 제공하지 못하고 있다.
보다 편리하고, 직관적으로 가전 제품을 제어할 수 있는 새로운 원격 제어 장치가 요구된다.
본 발명은 사용자에게 보다 직관적이고 사용이 용이한 사용자 인터페이스를 제공하는 원격 제어 장치 및 방법을 제공하는 것을 목적으로 한다.
본 발명은 보다 직관적이고 용이하게 타겟 장치가 제공하는 다수의 컨텐츠를 브라우징(browsing)하고, 소정의 컨텐츠를 선택하여 실행시키는 원격 제어 장치 및 방법을 제공하는 것을 목적으로 한다.
본 발명은 보다 직관적이고 용이하게 타겟 장치에 연결된 외부 기기를 선택하고, 상기 외부 기기가 제공하는 컨텐츠를 상기 타겟 장치에서 실행시키는 원격 제어 장치 및 방법을 제공하는 것을 목적으로 한다.
본 발명의 일 실시예에 따른 원격 제어 장치는 타겟 장치를 촬영하는 카메라부; 상기 타겟 장치가 제공하는 컨텐츠의 정보를 수신하고, 상기 타겟 장치로 제어 신호를 송신하는 통신부; 상기 타겟 장치를 촬영한 실제 이미지와 상기 컨텐츠에 대한 가상 이미지가 합성된 합성 이미지를 표시하는 디스플레이부; 상기 가상 이미지를 조작하는 사용자 입력을 수신하는 사용자 입력부; 및 상기 수신된 사용자 입력에 따라 상기 가상 이미지를 조작하여 표시하도록 제어하는 제어부;를 포함한다.
본 발명의 일 실시예에 따른 원격 제어 방법은 타겟 장치를 촬영하는 단계; 상기 타겟 장치가 제공하는 컨텐츠의 정보를 수신하는 단계; 상기 수신된 컨텐츠의 정보를 기반으로 상기 컨텐츠에 대한 가상 이미지를 생성하는 단계; 상기 타겟 장 치를 촬영한 실제 이미지와 상기 컨텐츠에 대한 가상 이미지를 합성하여 표시하는 단계;를 포함한다.
본 발명에 따르면 사용자에게 보다 직관적이고 사용이 용이한 사용자 인터페이스를 제공할 수 있다.
본 발명에 따르면 보다 직관적이고 용이하게 타겟 장치가 제공하는 다수의 컨텐츠를 열람하고, 소정의 컨텐츠를 상기 타겟 장치에서 실행시킬 수 있다.
본 발명에 따르면 보다 직관적이고 용이하게 타겟 장치에 연결된 외부 기기를 선택하고, 상기 외부 기기가 제공하는 컨텐츠를 상기 타겟 장치에서 실행시킬 수 있다.
이하, 첨부한 도면을 참조하여 본 발명의 일 실시예를 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 따른 원격 제어 장치의 구성을 나타낸다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 원격 제어 장치(10)는 타겟 장치의 이미지를 촬영하는 카메라(12), 상기 타겟 장치에 제어명령을 송신하고, 상기 타겟 장치와 통신하는 근거리 통신모듈(13), 상기 타겟 장치의 촬영된 실제 이미지 또는 그와 관련된 가상 이미지를 표시하는 디스플레이부(14), 상기 타겟 장치를 제어하는 제어 신호를 생성하고, 상기 타겟 장치와 관련된 가상 이미지를 생성하며, 상기 실제 이미지와 상기 가상 이미지를 합성하여 표시하도록 제어하는 제어부(11)를 포함할 수 있다.
타겟 장치는 본 발명에 따른 원격 제어 장치에 의해 제어되는 전자 장치로서, TV 등의 방송 수신 장치 또는 디스플레이부가 장착된 영상 표시 장치일 수 있다. 또한, 실시예에 따라서는, 상기 타겟 장치는 DVD 플레이어, 블루레이 플레이어, VCR, PC, MP3 플레이어, 오디오, DVix 플레이어, 게임기 등 상기 방송 수신 장치 또는 영상 표시 장치와 연결된 외부 장치일 수 있다.
카메라(12)는 타겟 장치의 이미지를 촬영하여 제어부(11)로 전달한다. 카메라는 휴대폰 등의 통상적인 이동 단말기에 장착되는 카메라 모듈일 수 있다.
근거리 통신 모듈(13)은 상기 타겟 장치와 통신을 수행하며, 원격 제어 장치(10)의 명령을 전달하고, 타겟 장치로부터 데이터를 수신한다. 근거리 통신 모듈(13)로는 블루투스 모듈, 적외선 통신 모듈, 직비(zigbee) 모듈, NFC(Near Field Communication) 모듈, RF 통신 모듈 등 임의의 통신 모듈 또는 이들의 조합을 사용할 수 있다.
디스플레이부(14)는 카메라(12)가 촬영한 이미지를 표시한다. 또한 실시예에 따라서는, 제어부(11)의 제어에 따라 카메라(12)가 촬영한 타겟 장치의 실제 이미지와 제어부(11)가 생성해낸 가상 이미지가 합성된 이미지를 출력한다.
디스플레이부(14)는 LCD, OLED, VFD, 전기 영동 장치 등 정보를 표시할 수 있는 임의의 디스플레이 장치일 수 있다.
또한, 디스플레이부(14)는 전면에 터치 패널이 장착된 터치 스크린일 수 있다. 터치 패널은 전기 저항막 방식, 또는 정전 용량 방식 등 널리 공지된 임의의 방식의 터치 패널일 수 있다.
제어부(11)는 전술한 구성 요소들의 동작을 제어하면, 그 중에서도 카메라(12)가 촬영한 실제 영상에, 그와 관련된 가상 이미지를 합성한 이미지를 생성해 낸다. 후술하는 바와 같이, 가상 이미지는 촬영된 타겟 장치와 관련된 이미지로서, 타겟 장치가 TV인 경우에는 복수의 채널들에 대한 채널 브라우징 이미지 또는 TV에 연결된 외부 장치들의 정보를 포함하는 이미지일 수 있다. 타겟 장치가 DVD 플레이어, 블루레이 플레이어, VCR, PC, MP3 플레이어, 오디오, DVix 플레이어, 게임기 등의 외부 장치인 경우에는 상기 외부 장치들이 제공할 수 있는 컨텐츠에 대한 정보를 포함하는 이미지일 수 있다.
또한, 실시예에 따라서는, 원격 제어 장치(10)의 내부에는 원격 제어 장치(10)에 인가되는 사용자의 제스쳐를 검출하기 위한 움직임 센서가 장착될 수도 있다. 움직임 센서로는 가속도 센서, 자이로 센서, 지자기 센서 등 원격 제어 장치(10)의 움직임을 검출해낼 수 있는 임의의 센서를 사용할 수 있다.
후술하는 바와 같이, 원격 제어 장치(10)에 인가되는 제스쳐를 검출하여 그 제스쳐에 다양한 명령을 맵핑할 수 있다. 제스쳐에 의해 명령을 입력함으로써 사용자에게 보다 직관적이고, 쉬운 사용자 인터페이스를 제공할 수 있다.
도 2a 및 도 2b는 본 발명의 일 실시예에 따른 원격 제어 장치(10)의 외관을 나타낸다. 도 2a는 원격 제어 장치(10)의 정면을 포함하는 사시도이고, 도 2b는 후면을 포함하는 사시도이다. 실시예에 따라, 원격 제어 장치(10)의 정면은 사용자를 향할 수 있고, 후면은 제어하고자 하는 타겟 장치를 향할 수 있다.
도 2a에 도시된 바와 같이, 원격 제어 장치(10)의 정면에는 디스플레이 부(14)가 배치된다. 디스플레이부(14)는 터치 스크린일 수 있다.
디스플레이부(14)를 제외한 나머지 부분들에는 기타 제어 버튼들이 배치될 수 있다. 제어 버튼은 전원버튼(21), 채널 조정 버튼(24), 볼륨 조정 버튼(25), 뮤트 버튼(23), 이전 채널 버튼(22) 등을 포함할 수 있다. 이 외에도, 제어 버튼은 타겟 장치의 종류에 따라 다양한 버튼을 포함할 수 있으며, 실시예에 따라 달라질 수 있다. 실시예에 따라서는, 디스플레이부(14)로 터치 스크린을 사용하고, 제어 버튼들 중 한 두개만 남기고, 나머지 버튼들을 터치 스크린에 표시할 수도 있다.
도 2b를 참조하면, 원격 제어 장치(10)의 후면에는 카메라(12)가 배치된다. 카메라(12)는 동작시에 타겟 장치를 촬영하는 방향을 향할 수 있다. 바람직하게는 카메라(12)와 디스플레이부(14)가 향하는 방향은 서로 반대 방향일 수 있다. 즉, 카메라(12)는 제어할 타겟 장치를 향하고, 디스플레이부(14)는 사용자를 향할 수 있다.
실시예에 따라서는, 카메라(12)에는 액추에이터가 연결되어 상하(27) 또는 좌우(28) 방향으로 방향 전환이 가능하도록 구성될 수 있다.
도 3 및 도 4는 본 발명의 일 실시예에 따른 원격 제어 장치(10)와 외부 장치 간의 네트워크 구성도를 나타낸다.
도 3과 같이 원격 제어 장치(10)는 타겟 장치 중 하나, 예컨대 TV(31)와 직접 통신을 하고, TV(31)는 기타 외부 장치들(32,33)과 유선 또는 무선으로 통신할 수 있다. TV(31) 대신에 튜너가 없는 영상 표시 장치를 사용할 수도 있다.
본 실시예에서는, 원격 제어 장치(10)는 TV(31)와 통신한다. TV는 원격 제어 장치(10)로부터 전송받은 명령에 따라, 외부 장치들(32,33)에게 명령을 전송하거나, 외부 장치들(32,33)로부터 데이터를 수신하여 원격 제어 장치(10)로 전송한다. TV(31)에는 원격 제어 장치(10)와 통신 가능한 근거리 무선 통신 모듈이 장착되어야 하고, 외부 장치들(32,33)은 TV(31)와의 유선 또는 무선 통신 모듈이 장착되면 된다.
TV(31) 또는 영상 표시 장치는 외부 장치(32,33)로부터 콘텐츠를 전송받아 표시할 수 있다. 예를 들어, DVD 플레이어(32)는 DVD 타이틀을 재생하여 TV(31)에 전송하며 TV(31)에 DVD 타이틀에 포함된 콘텐츠가 표시된다. 또한, 게임기(33)에 게임 타이틀을 재생시키면, 게임 화면이 TV(31)에 표시된다. 외부 장치가 MP3 플레이어인 경우에는 사운드만 TV(31)를 통해 출력될 수도 있다.
본 발명의 일 실시예에 따라, 도 4에 도시된 바와 같이, 원격 제어 장치(10)는 TV(31) 뿐만 아니라, 기타 외부 장치들(32,33)과도 직접 통신이 가능하도록 구성될 수 있다. 이 경우는 외부 장치들(32,33)에는 TV(31)와의 유선 또는 무선 통신 모듈 외에도 원격 제어 장치(10)와 통신하기 위한 근거리 무선 통신 모듈이 장착되어야 한다.
전술한 바와 같이, 원격 제어 장치(10), TV(31) 또는 외부 장치(32,33)에 장착되는 근거리 무선 통신 모듈은 블루투스 모듈, 적외선 통신 모듈, 직비(zigbee) 모듈, NFC(Near Field Communication) 모듈, RF 통신 모듈 등 임의의 근거리 무선 통신 모듈일 수 있다.
도 3 및 도 4에 도시된 바와 같이, 사용자(34)는 원격 제어 장치(10)를 제어하고자 하는 타겟 장치 쪽으로 카메라가 향하게 한 다음, 다양한 방법으로 타겟 장치를 제어할 수 있다.
후술하는 다양한 실시예들에서, 사용자는 원격 제어 장치(10)를 조작하여 동작 모드를 변경할 수 있으며, 후술하는 실시예들은 원격 제어 장치(10)가 특정 동작 모드에 있는 경우에 수행될 수 있다. 특정 동작 모드는 제어 모드, 메뉴 조작 모드, 화면 동기화 모드 등을 포함할 수 있다.
본 발명의 일 실시예에 따라, 원격 제어 장치(10)가 향하는 타겟 장치에서 표시되는 콘텐츠가 원격 제어 장치(10)의 디스플레이(14)에 표시되도록 구성할 수 있다. 이와 같은 동작은 원격 제어 장치가 예컨대, 화면 동기화 모드에 있는 경우에 수행될 수 있다.
도 3 또는 도 4에서 원격 제어 장치(10)가 턴온된 상태에서 TV(31)를 향하면, 현재 TV(31) 화면에서 재생되고 있는 콘텐츠, 즉 TV 방송 프로그램 또는 DVD 플레이어에서 재생하고 있는 화면이 원격 제어 장치(10)의 화면에 그대로 표시될 수 있다.
TV(31)는 튜너 또는 TV가 IPTV 또는 브로드밴드 TV인 경우에는 인터넷 케이블을 통해 수신한 방송 프로그램을 표시할 수도 있고, 외부 장치들(32,33)로부터 수신한 콘텐츠를 표시할 수도 있다.
원격 제어 장치(10)가 TV(31)를 향하면, 원격 제어 장치(10)의 제어부(11)는 카메라(12)를 통해 현재 원격 제어 장치(10)가 TV(31)를 향하고 있음을 판단하고, 도 5와 같이, TV(31)로부터 현재 재생 중인 콘텐츠를 수신받아 디스플레이(14)에 표시하도록 제어할 수 있다.
TV(31)는 표시되고 있는 이미지 데이터를 전술한 근거리 통신 모듈을 이용해서 원격 제어 장치(10)로 전송하고, 원격 제어 장치(10)는 그 이미지 데이터를 디스플레이(14)에 표시한다.
일단 TV(31)의 재생 중인 콘텐츠를 원격 제어 장치(10)에 표시하는 동작이 개시되면, 원격 제어 장치(10)(또는 카메라(12))가 다른 곳을 향하더라도, 사용자로부터 다른 입력이 있을 때까지 TV(31)로부터 콘텐츠를 계속 수신해서 표시할 수 있다.
본 발명의 일 실시예에 따른 원격 제어 장치(10)는 타겟 장치를 촬영하는 카메라부(12), 상기 타겟 장치가 제공하는 컨텐츠의 정보를 수신하고, 상기 타겟 장치로 제어 신호를 송신하는 통신부(13), 상기 타겟 장치를 촬영한 실제 이미지와 상기 컨텐츠에 대한 가상 이미지가 합성된 합성 이미지를 표시하는 디스플레이부(14), 상기 가상 이미지를 조작하는 사용자 입력을 수신하는 사용자 입력부, 및 상기 수신된 사용자 입력에 따라 상기 가상 이미지를 조작하여 표시하도록 제어하는 제어부(11)를 포함할 수 있다.
이하, 첨부한 도 6 내지 도 12를 참조하여 본 발명의 일 실시예에 따른 원격 제어 장치(10)의 동작을 설명하기로 한다.
도 6a는 본 발명의 일 실시예에 따라 상기 타겟 장치의 실제 이미지(71)와 상기 타겟 장치가 제공하는 컨텐츠에 대한 가상 이미지(72)가 합성된 합성 이미지를 표시하는 원격 제어 장치(10)의 예시도이다.
도 6a에 도시된 바와 같이, 상기 원격 제어 장치(10)의 카메라부(12)는 타겟 장치를 촬영하여 상기 타겟 장치의 실제 이미지를 제어부(11)에 제공한다.
상술한 바와 같이, 상기 타겟 장치는 TV와 같은 방송 수신 장치일 수 있으나, 상기 타겟 장치는 이에 제한되지 않고 소정의 이미지 또는 영상을 출력하는 디스플레이 장치, 소정의 음성을 출력하는 오디오 장치, 상기 방송 수신 장치와 유선 또는 무선으로 연결되어 소정의 컨텐츠를 제공하는 DVD 플레이어, 블루레이 플레이어, 게임기, 휴대용 단말기, USB 메모리, VCR, 컴퓨터, MP3 플레이어 등과 같은 외부 기기일 수 있다.
상기 통신부(13)는 상기 타겟 장치가 제공하는 컨텐츠의 정보를 수신한다. 본 발명의 일 실시예에 따르면, 상기 타겟 장치가 상술한 바와 같은 방송 수신 장치이면, 상기 컨텐츠는 상기 방송 수신 장치가 제공하는 방송 채널이며, 상기 컨텐츠의 정보는 방송 채널 정보일 수 있다. 즉, 상기 컨텐츠의 정보는 상기 방송 수신 장치가 제공하는 채널의 채널 번호, 방송국 이름, 대표 이미지 등을 포함할 수 있다.
실시예에 따라, 상기 타겟 장치가 DVD 플레이어이면, 상기 컨텐츠는 상기 DVD 플레이어에 삽입된 DVD 타이틀일 수 있으며, 상기 컨텐츠의 정보는 상기 DVD 타이틀의 타이틀, 장르, 재생 시간, 시청 등급, 대표 이미지, 주요 장면에 대한 스 냅샷 등을 포함할 수 있다.
실시예에 따라, 상기 타겟 장치가 컴퓨터이면, 상기 컨텐츠는 상기 컴퓨터에 저장된 영상, 음성, 이미지, 텍스트 데이터일 수 있으며, 상기 컨텐츠의 정보는 상기 컨텐츠의 타이틀, 대표 이미지 등일 수 있다.
상기 수신된 컨텐츠의 정보는 상기 제어부(11)로 제공되며, 상기 제어부(11)는 상기 컨텐츠의 정보를 기반으로 상기 컨텐츠에 대한 가상 이미지를 생성한다.
구체적으로, 상기 제어부(11)는 상기 수신된 컨텐츠의 정보를 기반으로 상기 타겟 장치가 제공하는 컨텐츠에 대한 가상 이미지를 생성한다.
여기서, 상기 가상 이미지는 상기 카메라부(12)에 의해 촬영된 실제 이미지와 달리 현실에 존재하지 않는 객체를 나타내는 이미지로서, 상기 가상 이미지는 상기 제어부(11)에 의해 생성된 그래픽, 이미지, 동영상 등일 수 있다.
상기 제어부(11)는 상기 타겟 장치가 제공하는 컨텐츠에 대한 가상 이미지를 생성한다. 실시예에 따라, 상기 컨텐츠에 대한 가상 이미지는 상기 컨텐츠의 제목, 대표 이미지와 같은 컨텐츠의 정보를 포함할 수 있다.
예를 들어, 도 6a에 도시된 바와 같이, 상기 컨텐츠에 대한 가상 이미지(72)는 상기 타겟 장치, 즉 방송 수신 장치가 제공하는 방송 채널의 채널 번호를 포함할 수 있다. 실시예에 따라, 상기 가상 이미지(72)는 해당 채널에서 방송되는 프로그램의 대표 이미지를 더 포함할 수도 있다.
상기 제어부(11)는 상기 생성된 가상 이미지(72)를 상기 카메라부(12)가 촬영한 타겟 장치의 실제 이미지(71)와 합성하여 합성 이미지를 생성하고, 상기 디스 플레이부(14)가 상기 합성 이미지를 표시하도록 제어할 수 있다.
즉, 도 6a에서 상기 원격 제어 장치(10)의 디스플레이부(14)에 표시되는 방송 수신 장치의 이미지(71)는 카메라부(12)가 촬영한 실제 이미지이고, 상기 방송 수신 장치의 이미지(71) 주변에 위치하는 이미지(72)는 상기 제어부(11)에 의해 생성된 가상 이미지이다. 각각의 가상 이미지(72)는 상기 방송 수신 장치가 제공하는 채널에 대응하며, 사용자는 상기 실제 이미지(71) 주변에 표시된 가상 이미지(72)를 통해 상기 방송 수신 장치가 제공하는 채널의 목록을 확인할 수 있다.
본 발명의 일 실시예에 따르면, 상기 컨텐츠는 복수 개일 수 있으며, 상기 디스플레이부(14)는 상기 복수의 컨텐츠에 대응하는 복수의 가상 이미지들을 소정 패턴으로 배열하여 표시할 수 있다.
예를 들어, 도 6a에 도시된 바와 같이, 상기 타겟 장치가 제공하는 컨텐츠, 즉 방송 수신 장치가 제공하는 채널은 복수 개일 수 있으며, 상기 디스플레이부(14)는 상기 복수의 컨텐츠에 대응하는 복수의 가상 이미지(72)를 소정 패턴, 예컨대 상기 타겟 장치의 실제 이미지(71)를 중심으로 파노라마 식으로 배열하여 표시할 수 있다.
도 6a에서 상기 가상 이미지(72)는 상기 타겟 장치의 실제 이미지(71)를 중심으로 좌우로 배열되었으나, 실시예에 따라, 상기 가상 이미지(72)는 상기 실제 이미지(71)를 중심으로 상하 또는 대각선으로도 배열될 수 있다.
실시예에 따라, 도 6b에 도시된 바와 같이, 상기 컨텐츠의 가상 이미지(72)는 상기 타겟 장치의 실제 이미지(71) 주변에 원형으로 배열되어 사용자가 상기 복 수의 컨텐츠에 대한 가상 이미지(72)를 한눈에 확인할 수 있도록 한다.
도 6a 및 도 6b는 상기 타겟 장치가 방송 수신 장치인 경우에 대해 도시하였으나, 도 6c에 도시된 바와 같이, 상기 타겟 장치가 컴퓨터인 경우, 상기 원격 제어 장치(10)는 상기 컴퓨터의 실제 이미지(73) 및 상기 컴퓨터가 제공하는 컨텐츠, 예컨대 상기 컴퓨터에 저장된 컨텐츠의 가상 이미지(74)를 합성하여 표시할 수 있다.
마찬가지로, 상기 컴퓨터에 저장된 컨텐츠는 복수 개일 수 있으며, 이 경우, 상기 디스플레이부(14)는 상기 복수의 컨텐츠에 대응하는 복수의 가상 이미지들(74)을 상기 컴퓨터의 실제 이미지(73) 주변에 소정 패턴으로 배열하여 표시할 수 있다.
상기 사용자 입력부는 상기 표시된 가상 이미지를 조작하는 사용자 입력을 수신하고, 상기 제어부(11)는 상기 수신된 사용자 입력에 따라 상기 가상 이미지를 조작하여 표시하도록 제어할 수 있다.
본 발명의 일 실시예에 따르면, 상기 사용자 입력부는 터치 스크린, 키 버튼 및 움직임 센서 중 적어도 하나일 수 있다.
본 발명의 일 실시예에 따르면, 상기 사용자 입력부가 터치 스크린인 경우, 상기 터치 스크린은 사용자의 드래그 제스쳐를 검출하고, 상기 제어부(11)는 상기 검출된 드래그 제스쳐에 응답하여 상기 가상 이미지(72)를 드래그 방향으로 이동시킬 수 있다.
예를 들어, 도 7a에 도시된 바와 같이, 상기 원격 제어 장치(10)는 사용자 입력부로 터치 스크린을 포함할 수 있고, 상기 터치 스크린이 사용자의 드래그 제스쳐를 검출하면, 상기 제어부(11)는 상기 검출된 드래그 제스쳐에 응답하여 상기 표시된 가상 이미지(72)를 드래그 방향으로 이동시킬 수 있다.
그 결과, 상기 복수의 채널에 대응하는 복수의 가상 이미지들(72)은 상기 드래그 방향으로 이동되면서 복수의 채널이 연속적으로 스캐닝(즉, 채널 브라우징)될 수 있다. 즉, 도 6a에서 상기 원격 제어 장치(10)는 CH 7부터 CH 13까지의 채널에 대한 가상 이미지(72)를 표시하였지만, 도 7a와 같은 드래그 제스쳐에 의해 상기 원격 제어 장치(10)는 CH 7 내지 CH 13 외에 CH 2 내지 CH 6과 같은 다른 채널들을 연속적으로 브라우징할 수 있다.
따라서, 사용자는 상술한 바와 같은 사용자 입력을 입력함으로써, 상기 타겟 장치가 제공하는 컨텐츠의 목록을 보다 용이하고 직관적으로 확인할 수 있다.
본 발명의 일 실시예에 따르면, 상기 사용자 입력부가 키 버튼이고, 사용자가 소정의 키 버튼을 누르는 경우, 상기 제어부(11)는 상기 키 버튼 입력에 응답하여 상기 가상 이미지들(72)을 연속적으로 브라우징할 수 있다.
본 발명의 일 실시예에 따르면, 상기 사용자 입력부가 움직임 센서인 경우, 상기 움직임 센서는 상기 원격 제어 장치의 움직임을 검출하고, 상기 제어부(11)는 상기 원격 제어 장치(10)의 움직임 방향으로 상기 가상 이미지를 이동시킬 수도 있다.
도 7b는 본 발명의 일 실시예에 따라 움직임 센서가 검출한 원격 제어 장치의 움직임 방향에 따라 가상 이미지를 이동시키는 모습을 도시하는 예시도로서, (i)는 상기 원격 제어 장치(10)의 정면도이고, (ii)는 상기 원격 제어 장치(10) 및 타겟 장치(31)의 평면도이다.
도 7b에 도시된 바와 같이, 사용자가 상기 원격 제어 장치(10)를 소정 방향, 예컨대 시계 반대 방향으로 틸팅시키는 경우, 상기 원격 제어 장치(10)에 내장된 움직임 센서는 상기 원격 제어 장치(10)의 틸팅을 검출하고, 상기 제어부(11)는 상기 검출된 틸팅에 응답하여 상기 가상 이미지(72)를 원격 제어 장치(10)의 틸팅 방향, 즉 우측으로 이동시킬 수 있다.
그 결과, 도 7a와 유사하게, 상기 복수의 가상 이미지(72)는 연속적으로 스캐닝되어 상기 디스플레이부(14)에 표시되지 않은 다른 컨텐츠에 대한 가상 이미지들이 디스플레이부에 표시되어, 사용자는 다수의 컨텐츠의 목록을 한눈에 파악할 수 있게 된다.
실시예에 따라, 상기 움직임 센서는 관성 센서, 지자기 센서, 가속도 센서 등과 같이 상기 원격 제어 장치(10)의 움직임 방향, 회전 방향, 틸팅 방향 등을 검출할 수 있는 센서를 포함할 수 있다.
도 7b에서 상기 원격 제어 장치(10)는 반시계 반대 방향으로 틸팅되고, 상기 가상 이미지(72)는 우측으로 이동하여 컨텐츠가 브라우징 되었지만, 이와 반대로 상기 원격 제어 장치(10)는 시계 방향으로 틸팅될 수 있고, 상기 움직임 센서는 상기 시계 방향으로의 틸팅을 검출할 수도 있다.
구체적으로, 상기 원격 제어 장치(10)가 시계 방향으로 틸팅되면, 상기 원격 제어 장치(10)에 내장된 움직임 센서는 상기 원격 제어 장치(10)의 틸팅 방향을 검 출하고, 상기 검출된 틸팅 방향에 응답하여 상기 제어부(11)는 상기 표시된 가상 이미지(72)를 상기 틸팅 방향, 즉 좌측으로 이동시켜 컨텐츠를 브라우징할 수 있다.
이 경우, 상기 채널에 대한 가상 이미지들(72)이 좌측으로 이동되면서, 도 6a에 표시된 CH 7 ~ CH 13 외에 CH 14 이상의 다른 채널들에 대한 가상 이미지가 표시되고, 그 결과 사용자는 상기 채널 목록을 한눈에 파악할 수 있게 된다.
본 발명의 일 실시예에 따르면, 상기 원격 제어 장치(10)는 사용자 입력부를 통해 별도의 사용자 입력을 입력받지 않고, 상기 카메라부(12)가 촬영한 실제 이미지의 변화 패턴을 분석하여 상기 가상 이미지들을 조작할 수 있다.
구체적으로, 도 7c에 도시된 바와 같이, 사용자에 의해 상기 원격 제어 장치(10)가 우측으로 움직인 경우, 상기 카메라부(12)에 의해 촬영된 상기 타겟 장치의 실제 이미지(71)는 상기 디스플레이부(14) 상에서 좌측으로 이동할 것이다.
이 경우, 상기 제어부(11)는 상기 카메라부(12)에 의해 촬영된 영상, 예컨대 타겟 장치의 실제 이미지의 변화 패턴을 분석하여, 상기 원격 제어 장치(10)의 이동 방향을 결정할 수 있다. 즉, 도 7c에서 상기 제어부(11)는 상기 카메라부(12)가 촬영한 영상 중 상기 타겟 장치의 실제 이미지(71)가 좌측으로 이동하는 것을 파악하여, 상기 원격 제어 장치(10)가 우측으로 이동한 것으로 결정할 수 있다.
그리고 나서, 상기 제어부(11)는 상기 결정된 이동 방향으로 상기 가상 이미지를 이동시킬 수 있다. 즉, 도 7c에서 상기 제어부(11)는 상기 가상 이미지(72)를 상기 원격 제어 장치(10)의 이동 방향인 우측으로 이동시켜 채널을 브라우징할 수 있다.
이와 같이, 본 발명의 원격 제어 장치(10)는 사용자 입력부를 통한 사용자 입력 없이 상기 카메라부(12)가 촬영한 영상을 분석함으로써 상기 가상 이미지(72)를 이동시킬 수 있다.
본 발명의 일 실시예에 따르면, 상기 사용자 입력부는 소정의 컨텐츠에 대한 가상 이미지를 선택하는 사용자 입력을 수신하고, 상기 제어부(11)는 상기 선택된 가상 이미지에 대응하는 컨텐츠를 상기 타겟 장치에서 실행시키는 제어 신호를 생성할 수 있다.
예를 들어, 도 7d에 도시된 바와 같이, 상기 사용자 입력부가 터치 스크린인 경우, 상기 터치 스크린은 상기 가상 이미지들(72) 중 소정의 가상 이미지를 터치하는 사용자의 터치 제스쳐를 검출할 수 있다.
이 경우, 상기 제어부(11)는 상기 검출된 터치 제스쳐에 응답하여, 상기 터치된 가상 이미지에 대응하는 컨텐츠, 예컨대 도 7d에서 CH 12를 상기 타겟 장치에서 실행시키는 제어 신호를 생성할 수 있다.
그리고 나서, 상기 통신부(13)는 상기 생성된 제어 신호를 상기 타겟 장치로 송신하고, 그 결과, 상기 타겟 장치는 상기 사용자에 의해 선택된 채널을 출력할 수 있다.
실시예에 따라, 상기 가상 이미지를 선택하는 사용자 입력은 선택할 가상 이미지를 상기 디스플레이부(14)의 소정 위치에 위치시키는 제스쳐일 수 있다.
예를 들어, 도 7d에 도시된 바와 같이, 소정의 가상 이미지(즉, CH 12의 가 상 이미지)를 터치하는 대신, 상기 소정의 가상 이미지를 드래그 앤 드랍 제스쳐를 통해 상기 타겟 장치의 실제 이미지(71)로 위치시키는 경우, 상기 제어부(11)는 해당 가상 이미지에 대응하는 컨텐츠를 상기 타겟 장치에서 실행시키도록 제어하는 제어 신호를 생성할 수 있다.
실시예에 따라, 도 7b에서, 상기 움직임 센서가 더 이상 상기 원격 제어 장치(10)의 틸팅을 검출하지 않는 경우, 즉, 상기 원격 제어 장치(10)가 틸팅 전으로 복귀한 경우, 상기 제어부(11)는 상기 가상 이미지들(72)의 이동을 정지시키고, 상기 디스플레이부의 소정 위치에 위치한 가상 이미지에 대응하는 컨텐츠를 타겟 장치에 실행시키도록 제어하는 제어 신호를 생성할 수 있다.
다시 말해, 상기 원격 제어 장치(10)가 틸팅 전으로 복귀하면, 상기 제어부(11)는 상기 디스플레이부의 소정 위치, 예컨대 상기 타겟 장치의 실제 이미지(71)가 표시된 위치에 위치하여 상기 타겟 장치의 실제 이미지(71)와 겹쳐진 가상 이미지를 선택할 수 있다. 그리고 나서, 상기 선택된 가상 이미지에 대응하는 컨텐츠를 타겟 장치에서 실행시키는 제어 신호를 생성하여 타겟 장치로 송신할 수 있다.
그 결과, 사용자는 상기 타겟 장치가 제공하는 다수의 컨텐츠를 브라우징할 뿐만 아니라, 특정 컨텐츠를 선택하여 상기 타겟 장치에서 실행시킬 수 있다.
본 발명의 일 실시예에 따르면, 상기 통신부(13)는 상기 타겟 장치와 연결된 외부 기기에 대한 정보를 더 수신하고, 상기 디스플레이부(14)는 상기 외부 기기에 대한 가상 이미지를 더 표시할 수 있다.
예를 들어, 도 8a에 도시된 바와 같이, 본 발명의 원격 제어 장치(10)는 상기 타겟 장치가 제공하는 컨텐츠에 대한 가상 이미지(72) 외에 상기 타겟 장치에 연결된 외부 기기에 대한 가상 이미지(81)를 더 제공할 수 있다.
실시예에 따라, 상기 컨텐츠에 대한 가상 이미지(72)와 상기 외부 기기에 대한 가상 이미지(81)는 함께 표시될 수 있으나, 이에 제한되지 않고, 각각의 가상 이미지가 개별적으로 표시될 수도 있다.
상기 통신부(13)는 상기 타겟 장치와 연결된 외부 기기에 대한 정보를 수신한다. 예를 들어, 상기 타겟 장치가 방송 수신 장치인 경우, 상기 통신부(13)는 상기 방송 수신 장치에 무선 또는 유선으로 연결된 외부 기기, 예컨대 DVD 플레이어, 게임기, 컴퓨터, USB 메모리 등에 대한 정보를 수신할 수 있다. 상기 수신된 외부 기기에 대한 정보는 외부 기기의 종류, 상기 외부 기기가 제공하는 컨텐츠의 타이틀, 장르, 재생 시간, 시청 등급, 대표 이미지 등을 포함할 수 있다.
그리고 나서, 상기 제어부(11)는 상기 수신된 외부 기기의 정보를 기반으로 상기 외부 기기에 대한 가상 이미지(81)를 생성한다. 그리고 나서, 상기 제어부(11)는 상기 생성된 외부 기기에 대한 가상 이미지(81)를 상기 타겟 장치의 실제 이미지(71)와 합성하여 디스플레이부에 표시하도록 제어한다.
그 결과, 사용자는 상기 원격 제어 장치(10)를 통해 상기 타겟 장치에 연결된 외부 기기를 용이하게 파악할 수 있다.
본 발명의 일 실시예에 따르면, 상기 외부 기기가 복수 개인 경우, 상기 디스플레이부(14)는 상기 복수의 외부 기기에 대응하는 복수의 가상 이미지들을 소정 패턴으로 배열하여 표시할 수 있다.
예를 들어, 도 8a에 도시된 바와 같이, 상기 디스플레이부(14)는 상기 복수의 외부 기기에 대응하는 복수의 가상 이미지들(81)을 상기 타겟 장치의 실제 이미지(71)를 중심으로 상하 방향으로 파노라마 식으로 배열할 수 있다.
실시예에 따라, 도 6a 및 도 6b와 유사하게, 상기 복수의 가상 이미지들(81)은 상하 방향 외에 상기 타겟 장치의 실제 이미지(71)를 중심으로 좌우 방향으로 배열될 수 있고, 상기 타겟 장치의 실제 이미지(71) 주변에 원형으로 배열될 수도 있다.
실시예에 따라, 상기 타겟 장치가 제공하는 컨텐츠에 대한 가상 이미지(72)와 상기 외부 기기에 대한 가상 이미지(81)를 동시에 제공하고자 하는 경우, 도 8a에 도시된 바와 같이, 상기 원격 제어 장치(10)는 상기 컨텐츠에 대한 가상 이미지(72)의 배열 패턴(예컨대, 좌우 방향의 파노라마)과 상기 외부 기기에 대한 가상 이미지(81)의 배열 패턴(예컨대, 상하 방향의 파노라마)을 다르게 하여 표시할 수 있다.
본 발명의 일 실시예에 따르면, 상기 사용자 입력부는 상기 외부 기기에 대한 가상 이미지(81)를 이동시키는 사용자 입력을 수신하고, 상기 제어부(11)는 상기 사용자 입력에 응답하여 상기 외부 기기에 대한 가상 이미지(81)를 이동시킬 수 있다.
상기 외부 기기에 대한 가상 이미지(81)의 이동은 도 7a 내지 도 7c를 참조로 기술된 컨텐츠의 가상 이미지(72) 이동과 유사하다.
예를 들어, 도 8b에 도시된 바와 같이, 상기 사용자 입력부가 터치 스크린인 경우, 상기 터치 스크린이 소정 방향으로의 드래그 제스쳐를 검출하면, 상기 제어부(11)는 상기 검출된 드래그 제스쳐에 응답하여, 상기 외부 기기에 대한 가상 이미지(82)를 상기 드래그 방향으로 이동시킬 수 있다.
또한, 도 8c에 도시된 바와 같이, 상기 사용자 입력부가 움직임 센서인 경우, 상기 움직임 센서가 상기 원격 제어 장치(10)의 움직임을 검출하면, 상기 제어부(11)는 상기 검출된 원격 제어 장치(10)의 움직임에 응답하여, 상기 외부 기기에 대한 가상 이미지(82)를 상기 원격 제어 장치(10)의 움직임 방향으로 이동시킬 수 있다.
예를 들어, 도 8c와 같이, 사용자가 상기 원격 제어 장치(10)를 아래 방향으로 틸팅시킨 경우, 상기 원격 제어 장치(10)에 내장된 움직임 센서는 상기 원격 제어 장치(10)의 틸팅을 검출하고, 상기 제어부(11)는 상기 검출된 틸팅에 응답하여 상기 외부 기기에 대한 가상 이미지(81)를 틸팅 방향인 아래 방향으로 이동시킬 수 있다.
마찬가지로, 상기 원격 제어 장치(10)가 윗 방향으로 틸팅된 경우, 상기 움직임 센서는 상기 원격 제어 장치(10)의 틸팅을 검출하고, 상기 제어부(11)는 상기 검출된 틸팅에 응답하여 상기 외부 기기에 대한 가상 이미지(81)를 틸팅 방향인 윗 방향으로 이동시킬 수 있다.
실시예에 따라, 상기 원격 제어 장치(10)는 키 버튼을 통해 상기 가상 이미지(81)의 이동 방향을 입력받을 수 있으며, 상기 제어부(11)는 상기 외부 기기의 가상 이미지(81)를 상기 입력받은 이동 방향으로 이동시킬 수 있다.
실시예에 따라, 상기 원격 제어 장치(10)는 도 7c와 유사하게 상기 카메라부(12)가 촬영한 영상의 변화 패턴을 분석하여 원격 제어 장치(10)의 이동 방향을 결정하고, 상기 외부 기기의 가상 이미지(81)를 상기 이동 방향으로 이동시킬 수도 있다.
그 결과, 본 발명의 원격 제어 장치(10)는 복수의 외부 기기에 대응하는 복수의 가상 이미지들(81)을 연속적으로 이동시키면서 브라우징할 수 있어, 사용자는 상기 타겟 장치에 연결된 복수의 외부 기기들을 한눈에 파악할 수 있다.
본 발명의 일 실시예에 따르면, 상기 사용자 입력부는 소정의 외부 기기에 대한 가상 이미지를 선택하는 사용자 입력을 수신하고, 상기 제어부(11)는 상기 선택된 가상 이미지에 대응하는 외부 기기의 출력 신호가 상기 타겟 장치에서 출력되도록 제어하는 외부 입력 전환 신호를 생성할 수 있다.
예를 들어, 도 9a에 도시된 바와 같이, 터치 스크린을 통해 소정의 가상 이미지(81), 예컨대 컴퓨터에 대한 가상 이미지를 터치하는 터치 입력을 검출하면, 상기 제어부(11)는 상기 검출된 터치 입력에 응답하여, 상기 선택된 가상 이미지에 대응하는 외부 기기, 즉 컴퓨터의 출력 신호가 상기 타겟 장치에서 출력되도록 제어하는 외부 입력 전환 신호를 생성할 수 있다.
상기 생성된 외부 입력 전환 신호는 상기 통신부(13)에 의해 상기 타겟 장치로 송신되고, 상기 타겟 장치는 상기 외부 입력 전환 신호를 수신하여 상기 선택된 외부 기기, 즉 컴퓨터의 출력 신호를 출력하도록 외부 입력을 전환할 수 있다.
상술한 컨텐츠에 대한 가상 이미지(72)의 선택과 유사하게, 상기 외부 기기에 대한 가상 이미지(81)는 드래그 앤 드랍을 통해 선택될 수도 있고, 키 버튼을 통해 선택될 수도 있고, 상기 원격 제어 장치(10)가 틸팅 전으로 복귀한 경우, 디스플레이부의 소정 위치에 위치한 외부 기기의 가상 이미지(81)를 선택하여 외부 입력 전환 신호를 생성할 수 있다.
본 발명의 일 실시예에 따르면, 상기 외부 입력 전환 신호가 상기 타겟 장치로 송신되면, 상기 통신부(13)는 상기 외부 기기가 제공하는 컨텐츠의 정보를 수신할 수 있다.
그리고 나서, 상기 제어부(11)는 상기 수신된 컨텐츠의 정보를 기반으로 외부 기기가 제공하는 컨텐츠에 대한 가상 이미지를 생성할 수 있다. 그리고 나서, 상기 제어부(11)는 상기 타겟 장치의 실제 이미지(71)와 상기 외부 기기가 제공하는 컨텐츠에 대한 가상 이미지를 합성하여 표시하도록 제어할 수 있다.
예를 들어, 도 9b에 도시된 바와 같이, 상기 외부 입력 전환 신호가 상기 타겟 장치로 송신되면, 상기 통신부(13)는 상기 선택된 외부 기기, 즉 도 9a에서 컴퓨터가 제공하는 컨텐츠의 정보를 수신하고, 상기 제어부(11)는 상기 수신된 컨텐츠의 정보를 기반으로 상기 컴퓨터가 제공하는 컨텐츠에 대한 가상 이미지(82)를 생성하여, 이를 상기 타겟 장치의 실제 이미지(71)와 합성하여 표시하도록 제어할 수 있다.
그 결과, 상기 타겟 장치의 주변에는 상기 타겟 장치가 제공하는 컨텐츠의 가상 이미지, 즉 채널에 대한 가상 이미지(72)가 표시되는 대신, 상기 컴퓨터가 제 공하는 컨텐츠의 가상 이미지(82)가 표시되어 사용자는 도 7a 내지 도 7의 입력을 통해 상기 컴퓨터가 제공하는 컨텐츠를 브라우징하고 원하는 컨텐츠를 타겟 장치에서 실행시킬 수 있다.
본 발명의 일 실시예에 따르면, 상기 사용자 입력부는 상기 합성 이미지, 즉 실제 이미지(71)와 가상 이미지(72)가 합성된 이미지를 지속적으로 표시하도록 하는 사용자 입력을 더 수신하고, 상기 제어부(11)는 상기 카메라부(12)가 향하는 방향에 관계없이 상기 합성 이미지를 지속적으로 표시하도록 제어할 수 있다.
예를 들어, 도 10에 도시된 바와 같이, 상기 원격 제어 장치(10)는 외부에 'lock' 버튼(16)을 구비하고, 사용자로부터 타겟 장치의 실제 이미지(71) 및 그 컨텐츠의 가상 이미지(72)를 지속적으로 표시하도록 하는 사용자 입력을 수신할 수 있다.
즉, 도 10에 도시된 바와 같이, 카메라부(12)가 영상 수신 장치를 촬영하는 경우, 상기 제어부(11)는 상기 영상 수신 장치의 실제 이미지(71) 및 상기 영상 수신 장치가 제공하는 컨텐츠의 가상 이미지(72)를 합성하여 표시하도록 제어하며, 사용자가 상기 'lock' 버튼(16)을 누르는 경우, 상기 제어부(11)는 상기 카메라부(12)가 향하는 방향에 관계없이 상기 실제 이미지(71) 및 가상 이미지(72)를 지속적으로 표시하도록 제어할 수 있다.
그 결과, 사용자가 'lock' 버튼(16)을 누르고 상기 원격 제어 장치(10)를 임의의 방향으로 향하게 하더라도, 상기 원격 제어 장치(10)는 lock 버튼(16)을 누른 때 표시되었던 실제 이미지 및 가상 이미지를 지속적으로 표시할 수 있다.
이 경우에도, 상기 통신부(13)는 상기 타겟 장치로부터 컨텐츠의 정보를 수신하고, 제어 신호를 타겟 장치로 송신할 수 있다.
따라서, 상기 원격 제어 장치(10)를 상기 타겟 장치로 향하지 않고도, 사용자는 도 7a 내지 도 7d의 입력을 입력하여 상기 타겟 장치가 제공하는 컨텐츠를 브라우징할 수 있으며, 원하는 컨텐츠를 선택하여 실행시킬 수 있다.
본 발명의 일 실시예에 따르면, 상기 사용자 입력부는 상기 합성 이미지를 줌인 또는 줌아웃하는 줌 명령을 수신하고, 상기 제어부(11)는 상기 줌 명령에 따라 상기 합성 이미지를 줌인 또는 줌아웃하여 표시하도록 제어할 수 있다.
실시예에 따라, 상기 합성 이미지를 줌인 또는 줌아웃하는 줌 명령은 키 버튼을 통해 입력받을 수 있다. 예를 들어, 도 11에 도시된 바와 같이, 상기 원격 제어 장치(10)에 구비된 줌 버튼(24)을 누르는 경우, 예컨대 '-' 버튼을 누르는 경우, 상기 실제 이미지(71) 및 가상 이미지(72)가 합성된 합성 이미지는 줌아웃되어 축소될 수 있다.
반대로, '+' 버튼을 누르는 경우, 상기 합성 이미지는 줌인되어 확대되어 표시될 수 있다.
실시예에 따라, 상기 줌 명령은 터치 스크린 상의 멀티 터치일 수 있다. 예를 들어, 사용자가 두 개의 손가락을 터치 스크린에 접촉시키고, 두 손가락 사이의 거리를 증가시키는 경우, 상기 터치 스크린은 해당 멀티 터치 제스쳐를 검출하고, 상기 제어부(11)는 상기 멀티 터치 제스쳐에 응답하여 상기 합성 이미지를 줌인시킬 수 있다.
도 9a에 도시된 바와 같이 외부 기기의 가상 이미지(81)를 통해 상기 외부 기기를 선택하는 실시예와 달리, 본 발명의 다른 실시예에 따르면, 외부 기기의 실제 이미지를 통해 외부 기기를 선택할 수 있다.
본 발명의 다른 실시예에 따르면, 상기 사용자 입력부는 외부 기기의 출력 신호를 타겟 장치로 전송하여 출력시키는 '외부 입력 전환 명령'을 입력받는다. 그리고 나서, 상기 제어부(11)는 상기 외부 입력 전환 명령에 응답하여, 상기 원격 제어 장치(10)를 '외부 입력 전환 모드'로 설정한다.
이 경우, 사용자는 상기 타겟 장치로 출력 신호를 전송할 외부 기기를 선택하기 위해, 상기 원격 제어 장치(10)를 상기 선택할 외부 기기로 향하도록 위치시킨다.
예를 들어, 사용자가 컴퓨터의 출력 신호를 상기 타겟 장치로 전송시키고자 하는 경우, 사용자는 상기 원격 제어 장치(10)를 상기 컴퓨터로 향하도록 위치시킬 수 있다.
이 경우, 상기 카메라부(12)는 상기 선택될 외부 기기, 즉 컴퓨터를 촬영할 수 있고, 도 12a에 도시된 바와 같이, 상기 디스플레이부(14)는 상기 촬영된 컴퓨터의 실제 이미지(73)를 표시할 수 있다.
도 12a의 상단에 표시된 메시지는 상기 원격 제어 장치(10)가 현재 '외부 입력 전환 모드'에 있음을 사용자에게 알려주는 메시지이다.
그리고 나서, 사용자는 상기 촬영된 외부 기기의 실제 이미지(73)를 선택하는 사용자 입력을 입력받을 수 있다.
예를 들어, 도 12b에 도시된 바와 같이, 사용자가 터치 스크린 상에 표시된 컴퓨터의 실제 이미지(73)를 터치하는 경우, 상기 터치 스크린은 상기 실제 이미지(73)의 터치 입력을 검출하고, 상기 제어부(11)는 상기 터치 입력에 응답하여 상기 터치된 실제 이미지(73)에 대응하는 외부 기기, 즉 컴퓨터의 출력 신호를 상기 타겟 장치로 전송시켜 상기 타겟 장치에서 출력시키는 외부 입력 전환 신호를 생성하며, 상기 외부 입력 전환 신호는 통신부(13)를 통해 타겟 장치로 전송될 수 있다.
상기 타겟 장치는 상기 외부 입력 전환 신호를 수신하고, 그에 따라 상기 선택된 컴퓨터를 외부 기기로 설정하여 상기 컴퓨터에서 출력되는 출력 신호를 수신하여 출력할 수 있다.
실시예에 따라, 상기 카메라부(12)가 상기 선택될 외부 기기, 즉 컴퓨터를 기설정된 시간 동안 촬영하는 경우, 상기 제어부(11)는 상기 촬영된 외부 기기를 자동으로 선택하여, 상기 외부 기기의 출력 신호를 타겟 장치로 전송시켜 출력시키는 외부 입력 전환 신호를 생성할 수 있다.
즉, 상술한 실시예에 따르면, 외부 기기를 선택하는 별도의 사용자 입력 없이, 선택할 외부 기기를 기설정된 시간 동안 촬영함으로써 상기 촬영된 외부 기기의 출력 신호를 상기 타겟 장치로 전송하여 출력시킬 수 있다.
실시예에 따라, 상기 원격 제어 장치(10)는 선택될 외부 기기의 실제 이미지(73)를 타겟 장치의 실제 이미지(71)가 표시된 지점으로 드래그 앤 드랍하는 사용자 입력을 입력받아, 외부 기기의 출력 신호를 상기 타겟 장치로 전송하여 출력 시킬 수도 있다.
예를 들어, 도 12c에 도시된 바와 같이, 사용자는 선택할 외부 기기 및 타겟 장치가 디스플레이부(14)에 모두 표시되도록 상기 원격 제어 장치(10)를 조절할 수 있다. 이 경우, 사용자는 상술한 줌 명령을 입력함으로써 상기 디스플레이부(14)에 표시되는 이미지를 확대 또는 축소시킬 수 있다.
상기 디스플레이부(14)가 상기 외부 기기 및 타겟 장치의 실제 이미지(73,71)를 표시하면, 사용자는 상기 외부 기기의 실제 이미지(73)를 상기 타겟 장치의 실제 이미지(71)로 드래그 앤 드랍시킬 수 있다.
이 경우, 상기 터치 스크린은 상기 드래그 앤 드랍 제스쳐를 검출하고, 상기 제어부(11)는 상기 검출된 드래그 앤 드랍 제스쳐에 응답하여, 상기 외부 기기, 예컨대 컴퓨터의 출력 신호를 상기 타겟 장치로 전송하여 출력시킬 수 있다.
도 13은 본 발명의 일 실시예에 따른 원격 제어 방법을 설명하는 흐름도이다.
단계(S91)은 타겟 장치를 촬영한다. 즉, 본 발명의 원격 제어 장치(10)에 구비된 카메라부(12)는 상기 타겟 장치를 촬영하여 타겟 장치의 실제 이미지를 제공한다.
실시예에 따라, 상기 타겟 장치는 방송 프로그램을 제공하는 방송 수신 장치일 수 있다.
단계(S92)는 타겟 장치가 제공하는 컨텐츠의 정보를 수신한다. 즉, 통신부(13)는 상기 타겟 장치가 제공하는 컨텐츠의 정보를 수신하며, 실시예에 따라, 상기 타겟 장치가 방송 수신 장치이면 상기 컨텐츠는 방송 수신 장치가 제공하는 다수의 채널의 방송 프로그램일 수 있다.
실시예에 따라, 상기 컨텐츠의 정보는 상기 채널의 채널 번호, 방송국, 채널에서 제공되는 방송 프로그램의 대표 이미지 등을 포함할 수 있다.
단계(S93)은 수신된 컨텐츠의 정보를 기반으로 컨텐츠에 대한 가상 이미지를 생성한다. 즉, 상기 제어부(11)는 상기 수신된 컨텐츠의 정보를 기반으로 타겟 장치가 제공하는 컨텐츠에 대한 가상 이미지를 생성한다.
단계(S94)는 상기 타겟 장치를 촬영한 실제 이미지와 상기 가상 이미지를 합성하여 표시한다. 즉, 상기 제어부(11)는 상기 생성된 가상 이미지와 상기 카메라부(12)가 촬영한 타겟 장치의 실제 이미지를 합성하여 디스플레이부에 표시하도록 제어한다.
실시예에 따라, 상기 컨텐츠가 복수 개인 경우, 상기 복수의 컨텐츠에 대응하는 복수의 가상 이미지들을 소정 패턴으로 배열하여 표시할 수 있다.
단계(S95)는 상기 가상 이미지를 조작하는 사용자 입력을 수신한다. 예를 들어, 사용자 입력부를 통해 상기 가상 이미지를 이동시키거나 상기 가상 이미지와 실제 이미지가 합성된 이미지를 줌인 또는 줌아웃시키는 사용자 입력을 수신할 수 있다.
실시예에 따라, 상기 사용자 입력부는 터치 스크린, 키 버튼 및 움직임 센서 중 적어도 하나를 포함할 수 있다.
단계(S96)은 수신된 사용자 입력에 따라 가상 이미지를 조작하여 표시한다. 즉, 상기 제어부(11)는 상기 사용자 입력에 따라 가상 이미지를 이동시키거나 디스플레이부에 표시된 이미지를 줌인 또는 줌아웃시킬 수 있다.
그 결과, 사용자는 상기 타겟 장치가 제공하는 컨텐츠, 예컨대 방송 수신 장치가 제공하는 다수의 채널들의 목록을 용이하게 확인할 수 있다.
단계(S97)은 가상 이미지를 선택하는 사용자 입력을 수신한다. 즉, 사용자가 상기 표시된 가상 이미지들을 이동시켜 방송 수신 장치가 제공하는 채널들을 브라우징한 후, 사용자는 시청하고자 하는 채널을 선택하는 사용자 입력을 입력한다.
단계(S98)은 선택된 가상 이미지에 대응하는 컨텐츠를 타겟 장치에서 실행시키는 제어 신호를 생성한다. 즉, 원하는 채널의 가상 이미지가 선택되면, 상기 제어부(11)는 상기 선택된 가상 이미지에 대응하는 채널을 방송 수신장치에서 실행시키는 제어 신호를 생성한다.
단계(S99)는 상기 제어 신호를 상기 타겟 장치로 송신한다.
본 발명에 따르면, 사용자는 본 발명의 원격 제어 장치(10)를 통해 타겟 장치가 제공하는 컨텐츠, 예컨대 방송 수신 장치가 제공하는 채널들을 직관적이고 용이하게 브라우징할 수 있다.
또한, 상기 원격 제어 장치(10)에 표시된 채널에 대한 가상 이미지를 선택하여 방송 수신 장치의 채널을 원하는 채널로 전환할 수 있다.
본 발명의 일 실시예에 따라, 원격 제어 장치(10)가 외부 장치를 향하는 경우에는 그 외부 장치의 정보를 가상 이미지로 생성하여 표시할 수 있다. 본 실시 예도 원격 제어 장치(10)가 제어 모드에 있는 경우에 수행될 수 있다.
도 14에 도시된 바와 같이, 원격 제어 장치(10)가 외부 장치, 예컨대 DVD 플레이어(32)를 향한다고 가정한다. 원격 제어 장치(10)의 카메라는 DVD 플레이어(32)의 이미지를 촬영하고, 제어부는 촬영된 이미지를 분석하여 원격 제어 장치(10)가 DVD 플레이어(32)를 향하고 있음을 판단한다.
원격 제어 장치(10)의 제어부는 DVD 플레이어(32)로부터 DVD 플레이어(32)에 저장되어 있는 재생가능한 컨텐츠 목록을 수신하여 DVD 플레이어의 이미지(62) 주변에 가상 이미지(61)로 표시할 수 있다. 예를 들어, DVD 플레이어(32)에 삽입되어 있는 DVD 타이틀에 인어공주와 쿵푸팬더가 포함되어 있는 경우에는 DVD 플레이어(32)로부터 인어공주와 쿵푸팬더의 제목을 수신하여 가상 이미지를 생성할 수 있다. 그리고 나서, 도 15와 같이 DVD 플레이어의 실제 이미지(62)의 주변에 가상 이미지(61)를 표시할 수 있다. 이와 같이 표시된 이미지로부터 사용자는 DVD 플레이어(31)에서 재생가능한 컨텐츠 목록을 쉽게 파악할 수 있다.
또한, DVD 플레이어 이미지(62)의 주변에 재생 가능한 컨텐츠 목록의 가상 이미지(61)를 표시함으로써, 사용자가 직관적으로 컨텐츠를 파악할 수 있다.
컨텐츠 목록의 가상 이미지(61)는 컨텐츠들의 제목 등의 텍스트를 포함할 수도 있고, DVD 타이틀의 겉표지 이미지, 컨텐츠들을 나타내는 캐릭터나, 광고 이미지를 포함할 수도 있다.
본 발명의 일 실시예에 따라, 원격 제어 장치를 사용하여 원격 제어 장치가 향하는 타겟 장치의 메뉴를 제어할 수 있다. 본 실시예는 원격 제어 장치(10)가 예컨대, 메뉴 조작 모드에 있는 경우에 수행될 수 있다.
도 3 또는 도 4와 같이, 원격 제어 장치(10)가 TV(31)를 향하고 있다고 가정하면, 즉 원격 제어 장치(10)의 카메라가 TV(31)를 향하고 있다고 가정한다. 원격 제어 장치(10)가 TV(31)를 향한 상태에서, 도 16과 같이, 사용자가 원격 제어 장치(10)의 일측에 장착된 버튼(65)을 누르면, 원격 제어 장치(10)의 디스플레이(14)에 TV(31)를 제어할 수 있는 메뉴(66)를 표시할 수 있다.
TV(31)의 제어 메뉴는 화면 조정, 예약 녹화, 볼륨 조정, 시간 조정 등을 포함할 수 있다.
위와 같은 동작은 TV(31) 뿐만 아니라, 다른 외부장치들(32,33)에 대해서도 마찬가지로 동작할 수 있다.
원격 제어 장치(10)의 버튼(65)은 사용자가 원격 제어 장치(10)를 통상적인 카메라의 촬영 버튼의 위치에 배치될 수 있다. 사용자는 카메라로 타겟 장치를 촬영하는 것과 유사하게, 원격 제어 장치(10)를 향한 상태에서, 카메라의 촬영 버튼을 누르는 것과 동일하게 버튼(65)을 누르면, 촬영되고 있는 타겟 장치의 메뉴를 표시할 수 있다.
메뉴(66)가 표시된 상태에서, 사용자는 디스플레이를 터치하여, 메뉴를 선택하고 TV(31)의 메뉴를 제어할 수 있다.
본 발명의 일 실시예에 따라, 원격 제어 장치(10)에 타겟 장치들의 위치를 입력하면, 원격 제어 장치(10)의 카메라가 타겟 장치를 향하지 않은 상태에서도 타겟 장치들을 제어할 수 있다. 이 경우에는 원격 제어 장치(10)에 움직임 센서가 장착된다.
도 17에 도시된 바와 같이, 사용자(34)가 원격 제어 장치(10)의 카메라가 타겟 장치들, 즉 TV(31) 및 외부 장치들(32,33)을 스캔하도록 한다. 스캔된 타겟 장치들의 상대적인 위치 및 이미지는 원격 제어 장치(10) 내의 메모리에 저장된다. 원격 제어 장치(10)는 타겟 장치들의 이미지 및 그 위치를 디스플레이에 표시할 수 있다.
이 상태에서 사용자가 원격 제어 장치(10)를 좌우로 움직이면, 원격 제어 장치(10) 내의 움직임 센서가 그 움직임을 검출하여 원격 제어 장치(10)의 디스플레이에 표시한다.
즉, 원격 제어 장치(10)가 제어하고자 하는 타겟 장치를 향하지 않아도, 움직임 센서를 사용하여, 사용자가 원격 제어 장치(10)에 인가하는 움직임을 검출할 수 있고, 그 움직임에 따라 표시되는 타겟 장치를 변경할 수 있다. 표시되는 타겟 장치에 따라, 전술한 실시예들과 동일한 동작들을 구현할 수 있다.
본 실시예는 원격 제어 장치(10)가 일단 타겟 장치들을 촬영하여 타겟 장치들의 상대적인 위치 및 이미지를 저장하고 나면, 원격 제어 장치(10)가 타겟 장치를 향하지 않아도, 또는 원격 제어 장치(10)의 카메라가 디스에이블된 상태에서도 전술한 다양한 실시예들의 동작을 구현할 수 있다.
본 실시예에 따르면, 사용자는 타겟장치들을 제어하기 위해, 원격 제어 장치 를 제어할 타겟장치를 향하게 할 필요가 없다. 단지, 원격 제어 장치가 제어할 타겟 장치들과 무선 통신 가능한 범위 내에 있기만 하면 된다.
본 발명의 실시예에 따른 원격 제어 장치(10)로는 적절한 소프트웨어를 장착하기만 하면, 카메라, 디스플레이 및 근거리 통신 모듈이 장착된 전자 장치라면 어느 것이든 사용할 수 있다. 예컨대, 휴대폰 등의 이동 단말기에 적절한 소프트웨어를 장착하면, 원격 제어 장치(10)로 사용할 수 있다. 특히 최근에 출시된 터치 스크린이 장착된 터치 스크린폰은 원격 제어 장치(10)로 사용하기에 적합하다.
도 18는 본 발명의 일 실시예에 따라, 원격 제어 장치(10)로 사용 가능한 이동 단말기(100)의 구성도를 나타낸다. 이동 단말기(100)는 휴대폰 뿐만 아니라, 스마트 폰, MP3 플레이어, PMP(Portable Multimedia Player), 디지털방송용 단말기, 노트북 컴퓨터, 네비게이션 등을 포함할 수 있다.
도시된 이동 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1은 다양한 구성요소를 가지고 있는 이동 단말기를 나타내고 있다. 그러나 도시된 구성요소 모두가 필수구성요소인 것은 아니다. 도시된 구성요소 보다 많은 구성요소에 의해 이동 단말기가 구현될 수도 있고, 그 보다 적은 구성요소에 의해서도 이동 단말기가 구현될 수 있다.
이하 상기 구성요소들에 대해 차례로 살펴본다.
무선 통신부(110)는 이동 단말기(100)와 무선 통신 시스템 간의 무선 통신 또는 이동 단말기(100)와 이동 단말기(100)가 위치한 네트웍간의 무선 통신을 하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들어, 무선 통신부(110)는 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치정보 모듈(115) 등을 포함할 수 있다.
방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.
한편, 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있으며, 이러한 경우에는 상기 이동통신 모듈(112)에 의해 수신될 수 있다.
상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.
상기 방송 수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 모든 방송 시스템에 적합하도록 구성된다.
방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.
또한, 이동통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기에서, 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 무선 인터넷 모듈(113)은 내장되거나 외장될 수 있다.
근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신 모듈(114)은 도 1의 근거리 통신 모듈(13)로 사용될 수 있다.
또한, 위치정보 모듈(115)은 이동 단말기의 위치를 확인하거나 얻기 위한 모듈이다. 일례로 GPS(Global Position System) 모듈이 있다. GPS 모듈은 복수 개의 인공위성으로부터 위치 정보를 수신한다. 여기에서, 위치 정보는 위도 및 경도로 표시되는 좌표 정보를 포함할 수 있다. 예를 들어, GPS 모듈은, 3개 이상의 위성으로부터 정확한 시간과 거리를 측정하여 3개의 각각 다른 거리를 삼각 방법에 따라서 현 위치를 정확히 계산할 수 있다. 3개의 위성으로부터 거리와 시간 정보를 얻고 1개 위성으로 오차를 수정하는 방법이 사용될 수 있다. 특히, GPS 모듈은 위성으로부터 수신한 위치 정보로부터, 위도, 경도, 고도의 위치뿐만 아니라 3차원의 속도 정보와 함께 정확한 시간까지 얻을 수 있다.
한편, A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 카메라(121)은 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 그리고, 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.
카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)은 단말기의 구성 태양에 따라 2개 이상이 구비될 수도 있다. 카메라(121)는 도 1의 카메라(12)로 사용될 수 있다.
마이크(122)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 그리고, 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(112)를 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이 크(122)는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)를 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.
사용자 입력부(130)는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다. 사용자 입력부(130)는 도 1에서, 디스플레이부(14)에 터치 패널을 장착한 터치 스크린일 수도 있다.
센싱부(140)는 이동 단말기(100)의 개폐 상태, 이동 단말기(100)의 위치, 사용자 접촉 유무, 이동 단말기의 방위, 이동 단말기의 가속/감속 등과 같이 이동 단말기(100)의 현 상태를 감지하여 이동 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 이동 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등과 관련된 센싱 기능을 담당한다.
인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 포함될 수 있다.
여기에서, 식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module; 'UIM'), 가입자 인증 모듈(Subscriber Identify Module; 'SIM'), 범용 사용자 인증 모듈(Universal Subscriber Identity Module; 'USIM') 등을 포함할 수 있다. 또한, 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 포트를 통하여 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 전송받거나 전원을 공급받아 이동 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.
출력부(150)는 오디오 신호 또는 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 것으로, 이에는 디스플레이부(151)과 음향 출력 모듈(152), 알람부(153) 등이 포함될 수 있다.
디스플레이부(151)는 이동 단말기(100)에서 처리되는 정보를 표시 출력한다. 예를 들어 이동 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 그리고 이동 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다. 디스플레이부(151)는 도 1의 디스플레이부(14)일 수 있다.
한편, 전술한 바와 같이, 디스플레이부(13)과 터치패드가 상호 레이어 구조를 이루어 터치 스크린으로 구성되는 경우, 디스플레이부(151)은 출력 장치 이외에 입력 장치로도 사용될 수 있다. 디스플레이부(151)은 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 그리고 이동 단말기(100)의 구현 형태에 따라 디스플레이부(151)이 2개 이상 존재할 수도 있다. 예를 들어, 이동 단말기(100)에 외부 디스플레이부(미도시)과 내부 디스플레이부(미도시)이 동시에 구비될 수 있다.
음향 출력 모듈(152)는 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력 모듈(152)은 이동 단말기(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력한다. 이러한 음향 출력 모듈(152)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.
알람부(153)는 이동 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력 등이 있다. 알람부(153)은 오디오 신호나 비디오 신호 이외에 다른 형태로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. 호 신호가 수신되거나 메시지가 수신된 경우, 이를 알리기 위해 알람부(153)은 진동을 출력할 수 있다. 또는, 키 신호가 입력된 경우, 키 신호 입력에 대한 피드백으로 알람부(153)은 진동을 출력할 수 있다. 상기와 같은 진동 출력을 통해 사용자는 이벤트 발생을 인지할 수 있다. 물론 이벤트 발생 알림을 위한 신호는 디스플레이부(151)이나 음성 출력 모듈(152)을 통해서도 출력될 수 있다.
메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다.
메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 이동 단말기(100)는 인터넷(internet)상에서 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.
그리고 제어부(180)는 통상적으로 이동 단말기의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 또한, 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 멀티미디어 모듈(181)은 제어부(180) 내에 구현될 수도 있고, 제어부(180)와 별도로 구현될 수도 있다. 제어부(180)는 도 1의 제어부(11)일 수 있다.
전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.
여기에 설명되는 다양한 실시예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터로 읽을 수 있는 기록매체 내에서 구현될 수 있다.
하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(180)에 의해 구현될 수 있다.
소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 또한, 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수 있다.
도 1은 본 발명의 일 실시예에 따른 원격 제어 장치의 구성을 나타낸다.
도 2a 및 도 2b는 본 발명의 일 실시예에 따른 원격 제어 장치(10)의 외관을 나타낸다.
도 3 및 도 4는 본 발명의 일 실시예에 따른 원격 제어 장치(10)와 외부 장치 간의 네트워크 구성도를 나타낸다.
도 5 내지 도 12는 본 발명의 일 실시예에 따른 원격 제어 장치의 동작을 설명하는 예시도이다.
도 13은 본 발명의 일 실시예에 따른 원격 제어 방법을 설명하는 흐름도이다.
도 14 및 도 15는 본 발명의 실시예에 따른 외부 장치 제어 방법을 나타낸다.
도 16 은 본 발명의 실시예에 따른 타겟 장치 제어 방법을 나타낸다.
도 17은 본 발명의 일 실시예에 따라, 원격 제어 장치가 타겟 장치를 향하지 않은 상태에서 제어하는 방법을 나타낸다.
도 18는 본 발명의 일 실시예에 따라 원격 제어 장치로 사용될 수 있는 이동 단말기의 구성을 나타낸다.

Claims (26)

  1. 타겟 장치를 원격 제어하는 원격 제어 장치로서,
    상기 타겟 장치를 촬영하는 카메라부;
    상기 타겟 장치가 제공하는 컨텐츠의 정보를 수신하고, 상기 타겟 장치로 제어 신호를 송신하는 통신부;
    상기 타겟 장치를 촬영한 실제 이미지와 상기 컨텐츠에 대한 가상 이미지가 합성된 합성 이미지를 표시하는 디스플레이부;
    상기 가상 이미지를 조작하는 사용자 입력을 수신하는 사용자 입력부; 및
    상기 수신된 사용자 입력에 따라 상기 가상 이미지를 조작하여 표시하고, 상기 수신된 사용자 입력에 대응하는 상기 제어 신호를 생성하고, 상기 생성된 제어 신호를 상기 타겟 장치로 송신하도록 제어하는 제어부;
    를 포함하는 원격 제어 장치.
  2. 제 1항에 있어서,
    상기 타겟 장치는 방송 수신 장치이며, 상기 컨텐츠의 정보는 상기 방송 수신 장치의 채널 정보인 원격 제어 장치.
  3. 제 1항에 있어서,
    상기 사용자 입력부는 터치 스크린, 키 버튼 및 움직임 센서 중 적어도 하나인 원격 제어 장치.
  4. 제 1항에 있어서,
    상기 사용자 입력부는 소정의 컨텐츠에 대한 가상 이미지를 선택하는 사용자 입력을 수신하고, 상기 제어부는 상기 선택된 가상 이미지에 대응하는 컨텐츠를 상기 타겟 장치에서 표시하는 제어 신호를 생성하여 전송하는 원격 제어 장치.
  5. 제 1항에 있어서,
    상기 통신부는 상기 타겟 장치와 연결된 외부 기기에 대한 정보를 더 수신하고, 상기 디스플레이부는 상기 외부 기기에 대한 가상 이미지를 더 표시하는 원격 제어 장치.
  6. 제 5항에 있어서,
    상기 사용자 입력부는 소정의 외부 기기에 대한 가상 이미지를 선택하는 사용자 입력을 수신하고, 상기 제어부는 상기 선택된 가상 이미지에 대응하는 외부 기기의 출력 신호가 상기 타겟 장치에서 출력되도록 제어하는 외부 입력 전환 신호를 생성하는 원격 제어 장치.
  7. 제 6항에 있어서,
    상기 외부 입력 전환 신호가 상기 타겟 장치로 송신되면, 상기 통신부는 상기 외부 기기가 제공하는 컨텐츠에 대한 정보를 수신하고, 상기 제어부는 상기 타겟 장치를 촬영한 실제 이미지와 상기 외부 기기가 제공하는 컨텐츠에 대한 가상 이미지를 합성하여 표시하도록 제어하는 원격 제어 장치.
  8. 타겟 장치를 원격 제어하는 원격 제어 장치에서 실행되는 원격 제어 방법에 있어서,
    상기 타겟 장치를 촬영하는 단계;
    상기 타겟 장치가 제공하는 컨텐츠의 정보를 수신하는 단계;
    상기 수신된 컨텐츠의 정보를 기반으로 상기 컨텐츠에 대한 가상 이미지를 생성하는 단계;
    상기 타겟 장치를 촬영한 실제 이미지와 상기 컨텐츠에 대한 가상 이미지를 합성하여 표시하는 단계;
    상기 표시된 가상 이미지를 선택하는 사용자 입력을 수신하는 단계;
    상기 선택된 가상 이미지에 대응하는 컨텐츠를 상기 타겟 장치에서 실행시키는 제어 신호를 생성하는 단계; 및
    상기 생성된 제어 신호를 상기 타겟 장치로 송신하는 단계;
    를 포함하는 원격 제어 방법.
  9. 제 8항에 있어서,
    상기 가상 이미지를 조작하는 사용자 입력을 수신하는 단계; 및
    상기 수신된 사용자 입력에 따라 상기 가상 이미지를 조작하여 표시하는 단계;
    를 더 포함하는 원격 제어 방법.
  10. 제 8항에 있어서,
    상기 타겟 장치는 방송 수신 장치이며, 상기 컨텐츠의 정보는 채널 정보인 원격 제어 방법.
  11. 제 8항에 있어서,
    상기 타겟 장치와 연결된 외부 기기의 정보를 수신하는 단계; 및
    상기 수신된 외부 기기의 정보를 기반으로 상기 외부 기기에 대한 가상 이미지를 표시하는 단계;
    를 더 포함하는 원격 제어 방법.
  12. 제 11항에 있어서,
    소정의 외부 기기에 대한 가상 이미지를 선택하는 사용자 입력을 수신하는 단계;
    상기 선택된 가상 이미지에 대응하는 외부 기기의 출력 신호가 상기 타겟 장치에서 출력되도록 제어하는 외부 입력 전환 신호를 생성하는 단계; 및
    상기 외부 입력 전환 신호를 상기 타겟 장치로 송신하는 단계;
    를 더 포함하는 원격 제어 방법.
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
  21. 삭제
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
KR1020090086157A 2009-08-14 2009-09-11 원격 제어 장치 및 방법 KR101612957B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020090086157A KR101612957B1 (ko) 2009-09-11 2009-09-11 원격 제어 장치 및 방법
PCT/KR2010/005078 WO2011019154A2 (en) 2009-08-14 2010-08-02 Remote control device and remote control method using the same
PCT/KR2010/005079 WO2011019155A2 (en) 2009-08-14 2010-08-02 Remote control device and remote control method using the same
US12/856,455 US8928452B2 (en) 2009-08-14 2010-08-13 Remote control device and remote control method using the same
US12/856,436 US8539541B2 (en) 2009-08-14 2010-08-13 Remote control device and remote control method using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090086157A KR101612957B1 (ko) 2009-09-11 2009-09-11 원격 제어 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20110028185A KR20110028185A (ko) 2011-03-17
KR101612957B1 true KR101612957B1 (ko) 2016-04-26

Family

ID=43934670

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090086157A KR101612957B1 (ko) 2009-08-14 2009-09-11 원격 제어 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101612957B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11620824B2 (en) 2018-10-12 2023-04-04 Samsung Electronics Co., Ltd. Mobile apparatus and control method thereof to control an object displayed on a target device

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9639984B2 (en) 2013-06-03 2017-05-02 Daqri, Llc Data manipulation based on real world object manipulation

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070210932A1 (en) 2006-03-09 2007-09-13 Fujifilm Corporation Remote control device, method and system

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070210932A1 (en) 2006-03-09 2007-09-13 Fujifilm Corporation Remote control device, method and system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11620824B2 (en) 2018-10-12 2023-04-04 Samsung Electronics Co., Ltd. Mobile apparatus and control method thereof to control an object displayed on a target device

Also Published As

Publication number Publication date
KR20110028185A (ko) 2011-03-17

Similar Documents

Publication Publication Date Title
US8539541B2 (en) Remote control device and remote control method using the same
US8965314B2 (en) Image display device and method for operating the same performing near field communication with a mobile terminal
EP3048799B1 (en) Image display apparatus
US9749575B1 (en) Display device and operating method thereof
US9201470B2 (en) Mobile terminal and three-dimensional (3D) multi-angle view controlling method thereof
US11449297B2 (en) Image display apparatus
US10331342B2 (en) Mobile terminal and control method therefor
EP3291533A1 (en) Terminal and controlling method thereof
KR101592033B1 (ko) 이동 단말기 및 그 화면 분할 방법
KR20170131104A (ko) 이동 단말기 및 그 제어방법
KR20170004482A (ko) 이동 단말기
EP3417630B1 (en) Display device and operating method thereof
KR20170089662A (ko) 증강현실을 제공하는 웨어러블 디바이스
EP3434005B1 (en) Display device and operating method thereof
KR20180079879A (ko) 이동 단말기 및 그 제어방법
KR20170143384A (ko) 이동 단말기 및 그 제어방법
KR20150104711A (ko) 디스플레이 장치 및 그의 동작 방법
KR20170099088A (ko) 전자 기기 및 그 제어방법
KR101612957B1 (ko) 원격 제어 장치 및 방법
KR101608990B1 (ko) 전자 장치의 원격 제어 장치 및 그것을 이용한 원격 제어 방법
KR20160148959A (ko) 이동 단말기 및 그 제어방법
KR101612958B1 (ko) 원격 제어 장치 및 방법
KR20170035755A (ko) 이동 단말기 및 그 제어 방법
KR20150146307A (ko) 이동단말기 및 그 제어방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190314

Year of fee payment: 4