KR20120137902A - 디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치 - Google Patents

디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치 Download PDF

Info

Publication number
KR20120137902A
KR20120137902A KR1020110057060A KR20110057060A KR20120137902A KR 20120137902 A KR20120137902 A KR 20120137902A KR 1020110057060 A KR1020110057060 A KR 1020110057060A KR 20110057060 A KR20110057060 A KR 20110057060A KR 20120137902 A KR20120137902 A KR 20120137902A
Authority
KR
South Korea
Prior art keywords
movement
user
menu
gui
display
Prior art date
Application number
KR1020110057060A
Other languages
English (en)
Other versions
KR101789683B1 (ko
Inventor
조찬영
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020110057060A priority Critical patent/KR101789683B1/ko
Priority to EP12159044.2A priority patent/EP2535788B1/en
Priority to US13/440,770 priority patent/US9491520B2/en
Publication of KR20120137902A publication Critical patent/KR20120137902A/ko
Application granted granted Critical
Publication of KR101789683B1 publication Critical patent/KR101789683B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4821End-user interface for program selection using a grid, e.g. sorted out by channel and broadcast time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/048023D-info-object: information is displayed on the internal or external surface of a three dimensional manipulable object, e.g. on the faces of a cube that can be rotated by the user

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)
  • Details Of Television Systems (AREA)
  • Selective Calling Equipment (AREA)

Abstract

디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치가 제공된다. 본 디스플레이 장치는 세 개의 축 방향으로 배열된 복수의 센서 어레이를 이용하여, 복수의 센서 어레이에 의해 정의되는 3차원 공간에서의 사용자 움직임을 감지하는 리모컨으로부터 리모컨 신호를 수신하는 수신부 및 3차원 공간에서의 사용자 움직임에 대응되는 제어 동작을 수행하는 제어부를 포함한다. 이에 의해, 3차원 공간상에서 입력이 가능한 리모컨을 이용하여 디스플레이 장치를 제어함으로써, 사용자는 직관적이고 편리하게 디스플레이 장치를 제어할 수 있게 된다.

Description

디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치{Display apparatus and Method for controlling display apparatus and remote controller}
본 발명은 디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치에 관한 것으로, 외부의 리모컨 장치에 의해 제어 동작이 수행되는 디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치에 관한 것이다.
최근에는 디스플레이 장치에서 사용자의 입력을 수신하는 장치(이하 "사용자 입력 장치")로 광마우스, 터치 패널, 모션 센싱 등이 개발되어 왔다. 특히, 사용자 입력 장치는 사용자의 편의성을 위하여 점점 지능화, 고도화되도록 발전하고 있다.
한편, TV와 모니터 등은 인터넷을 비롯한 다기능 스마트 디스플레이 장치로 발전하고 있으며, 특히, 3D 디스플레이 장치가 활성화되어 이에 맞는 콘텐츠 또는 GUI를 제공하여야 한다.
그러나, TV 또는 모니터 등의 디스플레이 장치가 점차 대형화, 스마트화, 다기능화, 3D화 되는 현상 속에서, 사용자 입력 장치가 디스플레이 장치의 사용자 입력 환경에 따라가기 부족함이 많다.
특히, 이러한 상황을 해결하기 위해서는 터치 패널, 모션 센싱 리모컨 등이 사용되고 있는데, 터치 패널의 경우, 대형 화면에 사용자가 근접해야 하는 단점이 있고, 모션 센싱 리모컨은 리모컨을 손에 쥐고 사용해야 하는 한계가 있다.
따라서, 본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로, 본 발명의 목적은, 세 개의 축 방향으로 배열된 복수의 센서 어레이를 이용하여, 복수의 센서 어레이에 의해 정의되는 3차원 공간에서의 사용자 움직임을 감지하는 리모컨으로부터 리모컨 신호를 수신하여, 3차원 공간에서의 사용자 움직임에 대응되는 제어 동작을 수행하는 디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치를 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 디스플레이 장치는, 세 개의 축 방향으로 배열된 복수의 센서 어레이를 이용하여, 상기 복수의 센서 어레이에 의해 정의되는 3차원 공간에서의 사용자 움직임을 감지하는 리모컨으로부터 리모컨 신호를 수신하는 수신부; 및 상기 3차원 공간에서의 사용자 움직임에 대응되는 제어 동작을 수행하는 제어부;를 포함한다.
그리고, GUI를 생성하는 GUI 생성부; 상기 GUI를 디스플레이하는 디스플레이부;를 포함하며, 상기 제어부는, 상기 3차원 공간에서의 사용자 움직임의 속성에 따라 상기 GUI의 표시를 변경하도록 상기 GUI 생성부 및 상기 디스플레이부를 제어하며, 상기 사용자의 움직임의 속성은 움직임 방향, 움직임 거리, 움직임 속도 및 움직임 패턴 중 적어도 하나를 포함할 수 있다.
또한, 2차원으로 표현되는 GUI를 생성하는 GUI 생성부; 상기 GUI 및 커서를 디스플레이하는 디스플레이부;를 포함하며, 상기 제어부는, 상기 3차원 공간에서 2축 방향으로의 사용자 움직임에 따라 상기 GUI 상에서 상기 커서를 이동시키고, 나머지 1축 방향으로의 사용자 움직임에 따라 상기 커서가 위치한 메뉴를 선택할 수 있다.
그리고, 상기 제어부는, 상기 메뉴가 선택되면, 상기 3축 방향의 사용자 움직임 중 1축 방향의 사용자 움직임에 따라 상기 메뉴의 설정값을 조절할 수 있다.
또한, 상기 메뉴가 볼륨 조절 메뉴인 경우, 상기 제어부는, 상기 볼륨 조절 메뉴가 선택되면, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 볼륨이 커지도록 제어하고, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 상기 볼륨이 작아지도록 제어할 수 있다.
그리고, 상기 메뉴가 채널 변경 메뉴인 경우, 상기 제어부는, 상기 채널 변경 메뉴가 선택되면, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 채널을 제1 방향으로 변경되도록 제어하고, 상기 1축 방향의 사용자 움직임이 제2 방향으로 움직이면, 채널을 제1 방향과 반대방향으로 변경되도록 제어할 수 있다.
또한, 입체감을 가지는 3차원 GUI를 생성하는 GUI 생성부; 상기 3차원 GUI를 디스플레이하는 디스플레이부;를 포함하며, 상기 제어부는, 상기 3차원 공간에서의 사용자 움직임에 따라 상기 3차원 GUI의 표시 상태를 변경하고, 메뉴를 선택할 수 있다.
그리고, 상기 제어부는, 상기 복수의 센서 어레이들 각각에 대해서, 사용자 움직임을 감지한 센서들의 위치를 기준으로 중심 센서 또는 최 가장자리 센서를 각 축 방향으로 검출하여, 검출된 센서의 위치에 따라 상기 사용자 움직임을 판단할 수 있다.
또한, 상기 리모컨 신호에 포함된 센서 신호에 따라 상기 3차원 공간에서의 사용자의 움직임 좌표값을 산출하는 좌표 산출부;를 더 포함하며, 상기 제어부는 상기 좌표 산출부에서 산출된 움직임 좌표값에 따라 상기 사용자의 움직임을 확인할 수 있다.
그리고, 상기 복수 개의 센서 어레이는 각각 동작주파수가 상이할 수 있다.
한편, 상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 디스플레이 장치 제어 방법은, 세 개의 축 방향으로 배열된 복수의 센서 어레이를 이용하여, 상기 복수의 센서 어레이에 의해 정의되는 3차원 공간에서의 사용자 움직임을 감지하는 리모컨으로부터 리모컨 신호를 수신하는 단계; 및 상기 3차원 공간에서의 사용자 움직임에 대응되는 제어 동작을 수행하는 단계;를 포함한다.
그리고, 상기 수행하는 단계는, 상기 3차원 공간에서의 사용자 움직임의 속성에 따라 GUI의 표시를 변경하는 단계;를 더 포함하며, 상기 사용자의 움직임의 속성은 움직임 방향, 움직임 거리, 움직임 속도 및 움직임 패턴 중 적어도 하나를 포함할 수 있다.
또한, 상기 수행하는 단계는, 상기 3차원 공간에서 2축 방향으로의 사용자 움직임에 따라 2차원 GUI 상에서 상기 커서를 이동시키고, 나머지 1축 방향으로의 사용자 움직임에 따라 상기 커서가 위치한 메뉴를 선택하는 단계;를 더 포함할 수 있다.
그리고, 상기 수행하는 단계는, 상기 메뉴가 선택되면, 상기 3축 방향의 사용자 움직임 중 1축 방향의 사용자 움직임에 따라 상기 메뉴의 설정값을 조절하는 단계;를 더 포함할 수 있다.
또한, 상기 메뉴가 볼륨 조절 메뉴인 경우, 상기 수행하는 단계는, 상기 볼륨 조절 메뉴가 선택되면, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 볼륨이 커지도록 제어하고, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 상기 볼륨이 작아지도록 제어하는 단계;를 더 포함할 수 있다.
그리고, 상기 메뉴가 채널 변경 메뉴인 경우, 상기 수행하는 단계는, 상기 채널 변경 메뉴가 선택되면, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 채널을 제1 방향으로 변경되도록 제어하고, 상기 1축 방향의 사용자 움직임이 제2 방향으로 움직이면, 채널을 제1 방향과 반대방향으로 변경되도록 제어하는 단계;를 더 포함할 수 있다.
또한, 상기 수행하는 단계는, 상기 3차원 공간에서의 사용자 움직임에 따라 3차원 GUI의 표시 상태를 변경하고, 메뉴를 선택하는 단계;를 더 포함할 수 있다.
그리고, 상기 수행하는 단계는, 상기 복수의 센서 어레이들 각각에 대해서, 사용자 움직임을 감지한 센서들의 위치를 기준으로 중심 센서 또는 최 가장자리 센서를 각 축 방향으로 검출하여, 검출된 센서의 위치에 따라 상기 사용자 움직임을 판단하여 상기 제어 동작을 수행할 수 있다.
또한, 상기 리모컨 신호에 포함된 센서 신호에 따라 상기 3차원 공간에서의 사용자의 움직임 좌표값을 산출하는 단계;를 더 포함하며, 상기 수행하는 단계는, 상기 좌표 산출부에서 산출된 움직임 좌표값에 따라 상기 사용자의 움직임을 확인할 수 있다.
그리고, 상기 복수 개의 센서 어레이는 각각 동작주파수가 상이할 수 있다.
한편, 상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 리모컨 장치는, 세 개의 축 방향으로 배열된 복수의 센서 어레이를 이용하여, 상기 복수의 센서 어레이에 의해 정의되는 3차원 공간에서의 사용자 움직임을 센싱하는 센싱부; 및 상기 사용자 움직임에 따른 리모컨 신호를 디스플레이 장치로 전송하는 리모컨 신호 송신부;를 포함한다.
그리고, 상기 센싱부는, 센서들이 매트릭스 형태로 각각 배열되며, 힌지에 의해 서로 연결된 제1 및 제2 센싱부;를 포함하며, 상기 제1 및 제2 센싱부는 상기 힌지를 기준으로 회전 이동되어 개폐될 수 있다.
또한, 상기 센싱부에 포함된 센서들 각각은 동작 주파수가 서로 상이할 수 있다.
상술한 바와 같이, 본 발명의 다양한 실시예에 따르면, 3차원 공간상에서 입력이 가능한 리모컨을 이용하여 디스플레이 장치를 제어함으로써, 사용자는 직관적이고 편리하게 디스플레이 장치를 제어할 수 있게 된다.
도 1은 본 발명의 일 실시예에 따른, 디스플레이 시스템을 도시한 도면,
도 2는 본 발명의 일 실시예에 따른, 디스플레이 장치의 블럭도를 도시한 도면,
도 3은 본 발명의 일 실시예에 따른, 좌표값 산출 방법을 설명하기 위해 도시한 도면,
도 4는 본 발명의 일 실시예에 따른, 리모컨 장치의 블럭도를 도시한 도면,
도 5a 내지 도 5 는 본 발명의 일 실시예에 따른, 리모컨 장치에 의해 볼륨을 조절하는 방법을 설명하기 위한 도면,
도 6a 내지 도 6 는 본 발명의 일 실시예에 따른, 리모컨 장치에 의해 채널을 변경하는 방법을 설명하기 위한 도면,
도 7은 본 발명의 일 실시예에 따른, 리모컨 장치에 의해 제어되는 3차원 GUI를 도시한 도면,
도 8은 본 발명의 일 실시예에 따른, 디스플레이 장치 제어 방법을 설명하기 위한 흐름도, 그리고,
도 9는 본 발명의 일 실시예에 따른, 키보드로 이용 가능한 리모컨 장치를 도시한 도면이다.
이하에서는 도면을 참조하여 본 발명에 대해 더욱 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른, 디스플레이 시스템(10)을 도시한 도면이다. 도 1에 도시된 바와 같이, 디스플레이 시스템(10)은 입력되는 영상을 디스플레이하는 디스플레이 장치(100) 및 사용자 명령을 입력받는 리모컨 장치(200)를 포함한다.
디스플레이 장치(100)는 다양한 소스로부터 입력되는 영상을 처리하여 사용자에게 제공한다. 특히, 디스플레이 장치(100)는 외부의 리모컨 장치(200)에서 수신되는 리모컨 신호에 따라 제어 동작을 수행한다. 리모컨 장치(200)에서 수신되는 리모컨 신호에 의해 제어 동작이 수행되는 실시예에 대해서는 도 2 내지 도 7을 참조하여 추후에 자세히 설명하기로 한다.
여기서 디스플레이 장치(100)는 TV, 모니터, 프로젝션, 노트북 등으로 구현될 수 있으나, 이에 한정되는 것은 아니다. 또한, 디스플레이 장치(100)는 3D 영상 및 3D GUI를 생성하기 위하여, 3D 기능을 포함할 수 있다.
리모컨 장치(200)는 복수의 면에 포함된 센서 어레이를 통해 사용자의 움직임을 감지한다. 구체적으로, 리모컨 장치(200)는 세 개의 축 방향으로 배열된 복수의 센서 어레이를 이용하여, 복수의 센서 어레이에 의해 정의되는 3차원 공간에서의 사용자 움직임을 감지한다.
이때, 리모컨 장치(200)는 도 1에 도시된 바와 같이, 2개의 면에 포함된 센서 어레이를 이용하여 3차원 공간상의 사용자 움직임을 감지할 수 있다. 그러나, 이는 일 실시예에 불과할 뿐, 3개 내지 5개의 면에 포함된 센서 어레이를 이용하여 3차원 공간상의 사용자 움직임을 감지할 수 있다.
그리고, 리모컨 장치(200)는 센서 어레이에 의해 감지된 3차원 공간상의 사용자 움직임 정보가 포함된 리모컨 신호를 생성하여, 이를 외부의 디스플레이 장치(100)로 송신한다.
따라서, 복수 개의 센서 어레이로 정의되는 3차원 공간상의 사용자 움직임을 감지하여 디스플레이 장치를 감지함으로써, 사용자는 디스플레이 장치(100)를 보다 직관적으로 제어할 수 있게 된다.
이하에서는 도 2 내지 도 4를 참조하여, 디스플레이 장치(100) 및 리모컨 장치(200)를 더욱 상세히 설명하기로 한다.
도 2는 본 발명의 일 실시예에 따른, 디스플레이 장치(100)의 블럭도를 도시한 도면이다. 도 2에 도시된 바와 같이, 디스플레이 장치(100)는 영상 입력부(110), 영상 처리부(120), 디스플레이부(130), 제어부(140), GUI 생성부(150), 리모컨 신호 수신부(160) 및 좌표 산출부(170)를 포함한다.
영상 입력부(110)는 다양한 소스로부터 영상 신호를 입력받는다. 구체적으로, 영상 입력부(110)는 무선 또는 유선으로 연결된 외부기기(DVD, 셋탑박스 등)로부터 영상 신호를 입력받을 수 있으며, 방송국 또는 위성으로부터 방송 신호를 수신할 수도 있다.
영상 처리부(120)는 입력된 영상 신호에 대해 비디오 디코딩, 비디오 스케일링 등의 신호 처리를 수행한다. 그리고, 영상 처리부(120)는 처리된 영상 신호를 디스플레이부(130)로 출력하거나, 영상 신호를 압축하여 저장부(미도시)에 저장하도록 한다.
디스플레이부(130)는 영상 처리부(120)로부터 처리된 영상 신호를 출력한다. 또한, 디스플레이부(130)는 GUI 생성부(130)에서 생성한 GUI(Graphic User Interface)를 처리된 영상과 함께 디스플레이할 수 있다.
GUI 생성부(150)는 사용자에게 제공하기 위한 GUI를 생성한다. 이때, GUI 생성부(140)에서 생성된 GUI는 OSD(On Screen Display) 메뉴 형태로 화면에 표시될 수 있다. 또한, GUI 생성부(140)는 2차원 GUI를 생성할 수 있을 뿐 아니라, 입체감 있는 3차원 GUI 역시 생성할 수 있다. GUI 생성부(150)에서 생성된 GUI에 대해서는 추후에 자세히 설명하기로 한다.
리모컨 신호 수신부(160)는 외부의 리모컨 장치(200)로부터 리모컨 신호를 수신한다. 이때, 리모컨 신호는 리모컨 장치(200)가 세 개의 축 방향으로 배열된 복수의 센서 어레이를 이용하여, 복수의 센서 어레이에 의해 정의되는 3차원 공간에서 감지된 사용자 움직임에 대한 정보가 포함된다. 여기서, 리모컨 신호는 복수 개의 센서 어레이에 포함된 센서들의 온/오프 정보를 포함한다.
좌표 산출부(170)는 리모컨 신호 수신부(160)로부터 수신된 리모컨 신호를 이용하여 3차원 공간상의 좌표값을 산출한다. 구체적으로, 좌표 산출부(170)는 리모컨 신호에 포함된 센서들의 온/오프 정보를 이용하여, 사용자 움직임에 대한 3차원 공간상의 복수 개의 좌표값을 산출한다.
이때, 좌표 산출부(170)는 제어부(140)의 제어에 의해, 복수의 센서 어레이들 각각에 대해서, 사용자 움직임을 감지한 센서들의 위치를 기준으로 중심 센서 또는 최 가장자리 센서를 각 축 방향으로 검출하여, 검출된 센서의 위치에 따라 사용자 움직임에 대한 좌표값을 출력할 수 있다.
즉, 도 3의 위쪽에 도시된 도면과 같이, 좌표 산출부(170)는 산출된 복수 개의 좌표 중에서 각 축에 대한 중간값을 사용자 움직임에 대한 좌표값으로 출력할 수 있다. 또는, 도 3의 아래쪽에 도시된 도면과 같이, 좌표 산출부(170)는 산출된 복수 개의 좌표값 중에서 각 축에 대한 최대값을 사용자 움직임에 대한 좌표값으로 출력할 수 있다. 그러나, 이는 일 실시예에 불과할 뿐 중간값과 최대값의 조합을 이용하여, 사용자 움직임에 대한 좌표값으로 출력할 수 있다. 예를 들어, x,y축은 중간값, z 축은 최대값을 사용자 움직임에 대한 좌표값으로 출력할 수 있다.
제어부(140)는 리모컨 장치(200)를 통해 입력된 사용자 명령에 따라 디스플레이 장치(100)의 전반적인 동작을 제어한다.
구체적으로, 제어부(140)는 리모컨 장치(200)로부터 수신된 복수의 센서 어레이에 의해 정의되는 3차원 공간에서 감지된 사용자 움직임에 대한 정보를 이용하여 디스플레이 장치(100) 전반에 대한 제어 동작을 수행하게 된다.
구체적으로, 제어부(140)는 3차원 공간에서의 사용자 움직임의 속성에 따라 GUI의 표시를 변경하도록 GUI 생성부(150)를 제어한다. 이때, 사용자 움직임의 속성에는 움직임 방향, 움직임 거리, 움직임 속도 및 움직임 패턴 중 적어도 하나를 포함할 수 있다.
예를 들어, 3차원 공간상에서 사용자의 움직임이 z 축 방향으로 이동된 경우, 제어부(140)는 사용자의 움직임 방향에 따라 GUI 크기를 조절할 수 있다. z 축을 기준으로 양의 방향으로 이동된 경우, 제어부(140)는 GUI 크기가 커지도록 GUI 생성부(150)를 제어할 수 있으며, z 축을 기준으로 음의 방향으로 이동된 경우, 제어부(140)는 GUI 크기가 작아지도록 GUI 생성부(150)를 제어할 수 있다. 또한, 상술한 실시예 이외에도 움직임 거리, 움직임 속도 및 움직임 패턴을 이용하여 GUI의 표시를 변경할 수 있다.
또한, 제어부(140)는 2차원으로 표현되는 GUI 및 커서를 생성하도록 GUI 생성부(140)를 제어하고, 3차원 공간에서 2축 방향으로의 사용자 움직임에 따라 2차원 GUI 상에서 커서를 이동시키며, 나머지 1축 방향으로의 사용자 움직임에 따라 커서가 위치한 메뉴를 선택할 수 있다.
예를 들어, 제어부(140)는 x,y축 방향으로의 사용자 움직임을 감지하여, 2차원 GUI 상에서 커서를 이동하고, z축 방향으로의 사용자 움직임을 감지하여, 2차원 GUI 상에서 커서가 위한 메뉴를 선택할 수 있다. 이때, z축 방향으로 사용자의 왕복 움직임이 감지된 경우 또는 z축 방향으로 기설정된 거리 이상의 사용자 움직임이 감지된 경우, 제어부(140)는 메뉴를 선택할 수 있다.
또한, 메뉴가 선택되면, 제어부(140)는 3축 방향의 사용자 움직임 중 1축 방향의 사용자 움직임에 따라 메뉴의 설정값을 조절할 수 있다. 예를 들어, 메뉴가 선택된 후, 양의 x축 방향으로 사용자 움직임이 감지되면, 제어부(140)는 설정값이 높아지도록 조절하고, 음의 x축 방향으로 사용자 움직임이 감지되면, 제어부(140)는 설정값이 낮아지도록 조절할 수 있다.
또한, 제어부(140)는 입체감을 가지는 3차원 GUI를 생성하도록 GUI 생성부를 제어할 수 있으며, 3차원 공간에서의 사용자 움직임에 따라 3차원 GUI의 표시 상태를 변경하고, 메뉴를 선택할 수 있다. 이에 대해서는 도 7을 참조하여 후술하기로 한다.
도 4는 본 발명의 일 실시예에 따른, 리모컨 장치(200)를 도시한 도면이다. 도 4에 도시된 바와 같이, 3차원 공간에서 사용자 움직임을 감지하기 위한 리모컨 장치(200)는 센싱부(210), 리모컨 신호 생성부(220) 및 리모컨 신호 송신부(230)를 포함한다. 이때, 사용자 움직임은 사용자의 검지 손가락 또는 막대 모양의 센싱 장치 등을 통해 감지될 수 있다.
센싱부(210)는 복수 개의 면에 배치된 복수 개의 센싱 어레이를 포함한다. 예를 들어, 센싱부(210)는 도 1에 도시된 바와 같이, 2개의 면에 배치된 복수 개의 센싱 어레이를 포함할 수 있다. 이때, 도 1에 도시된 아랫면에 배치된 센싱 어레이를 이용하여, x-y 평면 방향의 사용자 움직임을 감지하고, 옆 면에 배치된 센싱 어레이를 이용하여, z축 방향의 사용자 움직임을 감지할 수 있다. 그러나, 이는 일 실시예에 불과할 뿐, 3개 내지 5개의 면에 배치된 복수 개의 센싱 어레이를 이용하여, 3차원 공간상의 사용자 움직임을 감지할 수 있게 된다.
또한, 복수의 센싱 어레이가 배치된 아랫면과 복수의 센싱 어레이가 배치된 옆면은 힌지에 의해 서로 연결될 수 있다. 이에 의해, 옆면과 아랫면은 서로 회전 이동이 가능하여 개폐될 수 있다. 즉, 도 9에 도시된 바와 같이, 옆면과 아랫면이 닫혀있는 경우, 키보드(200-1)로 이용될 수 있고, 옆면과 아랫면이 열려있는 경우, 3차원 공간상에서 사용자 움직임을 감지하는 리모컨 장치(200-2)로 이용될 수 있다.
이때, 센싱 어레이는 빛을 발하는 발광 소자 및 반사된 빛을 수신하는 수광 소자를 포함한다. 따라서, 발광 소자에 의해 생성된 빛이 특정 물체 또는 사용자의 손에 의해 반사되면, 수광소자는 반사된 빛을 감지하여, 해당 좌표값에 대한 사용자의 움직임을 감지한다.
또한, 복수 개의 센싱 어레이에 포함된 복수 개의 센서들은 각각 동작 주파수가 상이하다. 이는 복수 개의 센서들 각각의 동작 주파수를 서로 상이하게 함으로써, 센서들의 오감지를 감소시킬 수 있게 된다.
한편, 센싱 어레이는 광센서, 초음파 센서, 레이저 센서 및 적외선 센서 중 하나로 구현될 수 있으나, 이는 일 실시예에 불과할 뿐, 사용자 움직임을 감지할 수 있는 다른 센서로 구현될 수 있다.
리모컨 신호 생성부(220)는 센싱부(210)에 의해 감지된 복수 개의 센서 온/오프 정보가 포함된 리모컨 신호를 생성한다.
그리고, 리모컨 신호 송신부(230)는 생성된 리모컨 신호를 외부의 디스플레이 장치(100)로 송신한다. 이때, 리모컨 신호 송신부(230)는 IR 방식으로 리모컨 신호를 송신할 수 있다.
이하에서는 도 5a 내지 도 7을 참조하여, 디스플레이 장치의 GUI 제어 방법에 대한 실시예를 설명하기로 한다.
도 5a 내지 도 5b는 본 발명의 일 실시예에 따른 리모컨 장치(200)를 이용하여, 볼륨을 조절하는 방법에 대해 설명하기로 한다.
도 5a에 도시된 바와 같이, 디스플레이 장치(100)는 디스플레이 화면에 볼륨 조절 메뉴(510) 및 채널 변경 메뉴(520)를 생성하여 디스플레이한다.
이때, 디스플레이 장치(100)는 3차원 공간상에서 감지된 사용자의 움직임 중 x,y 축 방향의 움직임을 감지하여, 도 5a에 도시된 바와 같이, 커서를 볼륨 조절 메뉴(510)로 이동시킨다.
그리고, 커서가 볼륨 조절 메뉴(510)에 위치한 상태에서 z축 방향으로 연속적인 왕복 움직임이 있다고 판단된 경우 또는 z축 방향으로 기설정된 거리 이상의 사용자 움직임이 있다고 판단된 경우, 디스플레이 장치(100)는 볼륨 조절 메뉴(510)를 선택한다.
볼륨 조절 메뉴(510)가 선택되면, 디스플레이 장치(100)는 도 5b에 도시된 바와 같이, 볼륨 조절 메뉴(510) 및 채널 변경 메뉴(520)를 제거하고, 볼륨 상태 조절 GUI(530)를 생성한다.
볼륨 상태 조절 GUI가 생성된 상태에서, 양의 x축 방향으로 사용자 움직임이 감지되면, 디스플레이 장치(100)는 감지된 사용자 움직임의 거리에 대응되게 볼륨을 높이고, 음의 x축 방향으로 사용자 움직임이 감지되면, 디스플레이 장치(100)는 감지된 사용자 움직임의 거리에 대응되게 불륨을 낮춘다.
도 6a 및 도 6b는 본 발명의 일 실시예에 따른 리모컨 장치(200)를 이용하여, 채널을 변경하는 방법을 설명하기 위한 도면이다.
도 6a에 도시된 바와 같이, 디스플레이 장치(100)는 디스플레이 화면에 볼륨 조절 메뉴(510) 및 채널 변경 메뉴(520)를 생성하여 디스플레이한다.
이때, 디스플레이 장치(100)는 3차원 공간상에서 감지된 사용자의 움직임 중 x,y 축 방향의 움직임을 감지하여, 도 6a에 도시된 바와 같이, 커서를 채널 변경 메뉴(520)로 이동시킨다.
그리고, 커서가 채널 변경 메뉴(520)에 위치한 상태에서 z축 방향으로 연속적인 왕복 움직임이 있다고 판단된 경우 또는 z축 방향으로 기설정된 거리 이상의 사용자 움직임이 있다고 판단된 경우, 디스플레이 장치(100)는 채널 변경 메뉴(520)를 선택한다.
채널 변경 메뉴(520)가 선택되면, 디스플레이 장치(100)는 도 6b에 도시된 바와 같이, 볼륨 조절 메뉴(510) 및 채널 변경 메뉴(520)를 제거하고, 채널 변경이 가능하다는 정보를 포함하는 GUI(540)를 생성한다.
채널 변경이 가능하다는 정보가 포함된 GUI(540)가 생성된 상태에서, 양의 x축 방향으로 사용자 움직임이 감지되면, 디스플레이 장치(100)는 제1 방향으로 채널을 변경하고, 음의 x축 방향으로 사용자 움직임이 감지되면, 디스플레이 장치(100)는 제1 방향의 반대 방향으로 채널을 변경할 수 있다. 예를 들어, 도 6a 도시된 바와 같이, 11번 채널(HD MBC)가 디스플레이된 상태에서 음의 x축 방향으로 사용자 움직임이 감지되면, 디스플레이 장치(100)는 채널 번호를 감소하는 방향으로 채널을 변경하여 9번 채널(HD KBS1)로 이동한다.
한편, 도 5a 내지 도 6b에서의 커서 이동, 메뉴 선택 및 설정 변경에 이용되는 x,y,z 축은 일 실시예에 불과할 뿐, 다른 축을 이용하여, 커서 이동, 설정 변경이 가능하다. 예를 들어, 디스플레이 장치(100)는 x,z 축을 이용하여 커서를 이동하고, y축을 이용하여 메뉴를 선택하며, x 축을 이용하여 설정을 변경할 수 있다.
또한, 상술한 실시예에서는 사용자 움직임의 방향 또는 거리를 감지하여, 설정을 변경하는 것으로 설명하였으나, 이는 일 실시예에 불과할 뿐, 사용자 움직임의 속도 또는 사용자 움직임의 패턴을 이용하여, 설정을 변경할 수 있다.
또한, 도 5a 내지 도 6b에서는 볼륨 조절 및 채널 변경에 대하여 설명하였으나, 이는 일 실시예에 불과할 뿐, GUI를 이용한 디스플레이 장치(100)의 설정값 변경이라면 본 발명의 기술적 사상이 적용될 수 있음은 물론이다.
도 7은 본 발명의 일 실시예에 따른, 3차원 GUI를 제어하기 위한 방법을 설명하기 위한 도면이다. 도 7에 도시된 바와 같이, 3차원 GUI는 XY 평면(710)에 포함된 메뉴, XZ 평면(720)에 포함된 메뉴 및 YZ 평면(730)에 포함된 메뉴를 포함한다. 이때, 각각의 평면(710,720,730)에는 각각 상이한 항목의 메뉴들을 포함할 수 있다. 예를 들어, XY 평면(710)은 채널 설정 메뉴, XZ 평면(720)은 음향 설정 메뉴, YZ 평면(730)은 화면 설정 메뉴를 포함할 수 있다.
XY 평면(710)에 있는 메뉴를 설정하는 경우, 디스플레이 장치(100)는 X,Y축 방향의 사용자 움직임을 감지하여, 커서를 이동하고, Z축 방향의 사용자 움직임을 감지하여, 커서가 위치하는 메뉴를 선택할 수 있다.
이와 마찬가지로, XZ 평면(720)에 있는 메뉴를 설정하는 경우, 디스플레이 장치(100)는 X,Z축 방향의 사용자 움직임을 감지하여, 커서를 이동하고, Y축 방향의 사용자 움직임을 감지하여, 커서가 위치하는 메뉴를 선택할 수 있다.
이와 마찬가지로, YZ 평면(730)에 있는 메뉴를 설정하는 경우, 디스플레이 장치(100)는 Y,Z축 방향의 사용자 움직임을 감지하여, 커서를 이동하고, X축 방향의 사용자 움직임을 감지하여, 커서가 위치하는 메뉴를 선택할 수 있다.
또한, 사용자 움직임의 특정 패턴이 존재한다면, 디스플레이 장치(100)는 XY 평면(710), XZ 평면(720), YZ 평면(730)을 위치를 변경할 수 있다. 예를 들어, 사용자 움직임이 X-Y축 방향으로의 회전이 존재한다면, 디스플레이 장치(100)는 XY 평면(710), XZ 평면(720), YZ 평면(730)의 위치를 변경할 수 있다.
한편, 디스플레이 장치(100)는 도 5a 내지 도 7에서 설명한 실시예 이외의 다른 동작을 이용하여 GUI를 제어할 수 있다. 예를 들어, 디스플레이 장치(100)는 특정 사용자 움직임이 감지되면, 3차원 GUI의 각각의 평면에 존재하는 메뉴의 위치를 서로 변경할 수 있다. 또한, 디스플레이 장치(100)는 특정 사용자 움직임이 감지되면, 3차원 GUI에서 2차원 GUI로 변경할 수 있다.
또한, 도 5a 내지 도 7에서는 디스플레이 장치(100)가 3차원 공간상의 사용자 움직임에 따라 GUI를 제어하는 것으로 설명하였으나, 이는 일 실시예에 불과할 뿐, 디스플레이 장치(100)의 동작 자체를 제어할 수 있다. 예를 들어, 3차원 공간상의 특정 사용자 움직임이 감지되면, 디스플레이 장치(100)는 디스플레이 장치(100)의 전원이 오프가 되도록 제어할 수 있다. 또한, 3차원 공간상의 특정 사용자 움직임이 감지되면, 디스플레이 장치(100)는 디스플레이 장치(100)의 연결 소스를 변경할 수 있으며, 모드를 변경할 수도 있다.
이하에서는 도 8을 참조하여, 3차원 공간상에서 사용자 움직임을 감지하는 리모컨 장치(200)를 이용한 디스플레이 장치(100)의 제어 방법에 대해 설명하기로 한다.
도 8은 본 발명의 일 실시예에 따른, 디스플레이 장치(100) 제어 방법을 설명하기 위한 흐름도이다.
우선, 디스플레이 장치(100)는 복수의 센서 어레이에 의해 정의되는 3차원 공간에서의 사용자 움직임을 감지하는 리모컨 장치(200)로부터 리모컨 신호를 수신한다(S810). 이때, 리모컨 신호에는 복수 개의 면에 배치된 복수의 센서 어레이를 통해 3차원 공간상의 사용자 움직임에 대한 정보가 포함된다. 더욱 구체적으로, 리모컨 신호에는 3차원 평면상에 배치된 복수 개의 센서들에 대한 온/오프 정보가 포함되어 있다.
리모컨 장치(200)로부터 리모컨 신호가 수신되면, 디스플레이 장치(100)는 리모컨 신호에 포함된 3차원 공간에서의 사용자 움직임에 대응되는 제어 동작을 수행할 수 있다(S820). 구체적으로, 디스플레이 장치(100)는 3차원 공간에서의 사용자 움직임에 따라 GUI를 생성하거나 제어할 수 있으며, 디스플레이 장치(100) 동작 자체를 제어할 수 있다. 예를 들어, 디스플레이 장치(100)는 도 2 내지 도 7에서 설명한 바와 같이, 3차원 공간에서의 사용자 움직임에 따라, 생성된 GUI의 표시를 변경할 수 있고, GUI를 선택하거나 조절할 수 있다.
이때, 디스플레이 장치(100)는 사용자 움직임은 사용자 움직임의 방향, 속도, 거리 및 패턴 등을 포함할 수 있다.
상술한 바와 같이, 3차원 공간상에서 사용자 움직임을 감지하는 리모컨 장치(200)를 이용하여 디스플레이 장치(100)를 제어함으로써, 사용자는 직관적이고 편리하게 디스플레이 장치(100)를 제어할 수 있게 된다.
이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
110: 영상 입력부 120: 영상 처리부
130: 디스플레이부 140: 제어부
150: GUI 생성부 160: 리모컨 신호 수신부
170: 좌표 산출부 210: 센싱부
220: 리모컨 신호 생성부 230: 리모컨 신호 송신부

Claims (23)

  1. 디스플레이 장치에 있어서,
    세 개의 축 방향으로 배열된 복수의 센서 어레이를 이용하여, 상기 복수의 센서 어레이에 의해 정의되는 3차원 공간에서의 사용자 움직임을 감지하는 리모컨으로부터 리모컨 신호를 수신하는 수신부; 및
    상기 3차원 공간에서의 사용자 움직임에 대응되는 제어 동작을 수행하는 제어부;를 포함하는 디스플레이 장치.
  2. 제1항에 있어서,
    GUI를 생성하는 GUI 생성부;
    상기 GUI를 디스플레이하는 디스플레이부;를 포함하며,
    상기 제어부는,
    상기 3차원 공간에서의 사용자 움직임의 속성에 따라 상기 GUI의 표시를 변경하도록 상기 GUI 생성부 및 상기 디스플레이부를 제어하며,
    상기 사용자의 움직임의 속성은 움직임 방향, 움직임 거리, 움직임 속도 및 움직임 패턴 중 적어도 하나를 포함하는 것을 특징으로 하는 디스플레이 장치.
  3. 제1항에 있어서,
    2차원으로 표현되는 GUI를 생성하는 GUI 생성부;
    상기 GUI 및 커서를 디스플레이하는 디스플레이부;를 포함하며,
    상기 제어부는,
    상기 3차원 공간에서 2축 방향으로의 사용자 움직임에 따라 상기 GUI 상에서 상기 커서를 이동시키고, 나머지 1축 방향으로의 사용자 움직임에 따라 상기 커서가 위치한 메뉴를 선택하는 것을 특징으로 하는 디스플레이 장치.
  4. 제3항에 있어서,
    상기 제어부는,
    상기 메뉴가 선택되면, 상기 3축 방향의 사용자 움직임 중 1축 방향의 사용자 움직임에 따라 상기 메뉴의 설정값을 조절하는 것을 특징으로 하는 디스플레이 장치.
  5. 제4항에 있어서,
    상기 메뉴가 볼륨 조절 메뉴인 경우,
    상기 제어부는,
    상기 볼륨 조절 메뉴가 선택되면, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 볼륨이 커지도록 제어하고, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 상기 볼륨이 작아지도록 제어하는 것을 특징으로 하는 디스플레이 장치.
  6. 제4항에 있어서,
    상기 메뉴가 채널 변경 메뉴인 경우,
    상기 제어부는,
    상기 채널 변경 메뉴가 선택되면, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 채널을 제1 방향으로 변경되도록 제어하고, 상기 1축 방향의 사용자 움직임이 제2 방향으로 움직이면, 채널을 제1 방향과 반대방향으로 변경되도록 제어하는 것을 특징으로 하는 디스플레이 장치.
  7. 제1항에 있어서,
    입체감을 가지는 3차원 GUI를 생성하는 GUI 생성부;
    상기 3차원 GUI를 디스플레이하는 디스플레이부;를 포함하며,
    상기 제어부는,
    상기 3차원 공간에서의 사용자 움직임에 따라 상기 3차원 GUI의 표시 상태를 변경하고, 메뉴를 선택하는 것을 특징으로 하는 디스플레이 장치.
  8. 제1항 내지 제7항 중 어느 한 항에 있어서,
    상기 제어부는,
    상기 복수의 센서 어레이들 각각에 대해서, 사용자 움직임을 감지한 센서들의 위치를 기준으로 중심 센서 또는 최 가장자리 센서를 각 축 방향으로 검출하여, 검출된 센서의 위치에 따라 상기 사용자 움직임을 판단하는 것을 특징으로 하는 디스플레이 장치.
  9. 제1 내지 제7항 중 어느 한 항에 있어서,
    상기 리모컨 신호에 포함된 센서 신호에 따라 상기 3차원 공간에서의 사용자의 움직임 좌표값을 산출하는 좌표 산출부;를 더 포함하며,
    상기 제어부는 상기 좌표 산출부에서 산출된 움직임 좌표값에 따라 상기 사용자의 움직임을 확인하는 것을 특징으로 하는 디스플레이 장치.
  10. 제1항에 있어서,
    상기 복수 개의 센서 어레이는 각각 동작주파수가 상이한 것을 특징으로 하는 디스플레이 장치.
  11. 디스플레이 장치 제어 방법에 있어서,
    세 개의 축 방향으로 배열된 복수의 센서 어레이를 이용하여, 상기 복수의 센서 어레이에 의해 정의되는 3차원 공간에서의 사용자 움직임을 감지하는 리모컨으로부터 리모컨 신호를 수신하는 단계; 및
    상기 3차원 공간에서의 사용자 움직임에 대응되는 제어 동작을 수행하는 단계;를 포함하는 디스플레이 장치 제어 방법.
  12. 제11항에 있어서,
    상기 수행하는 단계는,
    상기 3차원 공간에서의 사용자 움직임의 속성에 따라 GUI의 표시를 변경하는 단계;를 더 포함하며,
    상기 사용자의 움직임의 속성은 움직임 방향, 움직임 거리, 움직임 속도 및 움직임 패턴 중 적어도 하나를 포함하는 것을 특징으로 하는 디스플레이 장치 제어 방법.
  13. 제11항에 있어서,
    상기 수행하는 단계는,
    상기 3차원 공간에서 2축 방향으로의 사용자 움직임에 따라 2차원 GUI 상에서 상기 커서를 이동시키고, 나머지 1축 방향으로의 사용자 움직임에 따라 상기 커서가 위치한 메뉴를 선택하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치 제어 방법.
  14. 제13항에 있어서,
    상기 수행하는 단계는,
    상기 메뉴가 선택되면, 상기 3축 방향의 사용자 움직임 중 1축 방향의 사용자 움직임에 따라 상기 메뉴의 설정값을 조절하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치 제어 방법.
  15. 제14항에 있어서,
    상기 메뉴가 볼륨 조절 메뉴인 경우,
    상기 수행하는 단계는,
    상기 볼륨 조절 메뉴가 선택되면, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 볼륨이 커지도록 제어하고, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 상기 볼륨이 작아지도록 제어하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치 제어 방법.
  16. 제14항에 있어서,
    상기 메뉴가 채널 변경 메뉴인 경우,
    상기 수행하는 단계는,
    상기 채널 변경 메뉴가 선택되면, 상기 1축 방향의 사용자 움직임이 제1 방향으로 움직이면, 채널을 제1 방향으로 변경되도록 제어하고, 상기 1축 방향의 사용자 움직임이 제2 방향으로 움직이면, 채널을 제1 방향과 반대방향으로 변경되도록 제어하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치 제어 방법.
  17. 제11항에 있어서,
    상기 수행하는 단계는,
    상기 3차원 공간에서의 사용자 움직임에 따라 3차원 GUI의 표시 상태를 변경하고, 메뉴를 선택하는 단계;를 더 포함하는 것을 특징으로 하는 디스플레이 장치 제어 방법.
  18. 제11항 내지 제17항 중 어느 한 항에 있어서,
    상기 수행하는 단계는,
    상기 복수의 센서 어레이들 각각에 대해서, 사용자 움직임을 감지한 센서들의 위치를 기준으로 중심 센서 또는 최 가장자리 센서를 각 축 방향으로 검출하여, 검출된 센서의 위치에 따라 상기 사용자 움직임을 판단하여 상기 제어 동작을 수행하는 것을 특징으로 하는 디스플레이 장치 제어 방법.
  19. 제11항 내지 제17항 중 어느 한 항에 있어서,
    상기 리모컨 신호에 포함된 센서 신호에 따라 상기 3차원 공간에서의 사용자의 움직임 좌표값을 산출하는 단계;를 더 포함하며,
    상기 수행하는 단계는,
    상기 좌표 산출부에서 산출된 움직임 좌표값에 따라 상기 사용자의 움직임을 확인하는 것을 특징으로 하는 디스플레이 장치 제어 방법.
  20. 제11항에 있어서,
    상기 복수 개의 센서 어레이는 각각 동작주파수가 상이한 것을 특징으로 하는 디스플레이 장치 제어 방법.
  21. 리모컨 장치에 있어서,
    세 개의 축 방향으로 배열된 복수의 센서 어레이를 이용하여, 상기 복수의 센서 어레이에 의해 정의되는 3차원 공간에서의 사용자 움직임을 센싱하는 센싱부;
    상기 사용자 움직임에 따른 리모컨 신호를 디스플레이 장치로 전송하는 리모컨 신호 송신부;를 포함하는 리모컨 장치.
  22. 제21항에 있어서,
    상기 센싱부는,
    센서들이 매트릭스 형태로 각각 배열되며, 힌지에 의해 서로 연결된 제1 및 제2 센싱부;를 포함하며,
    상기 제1 및 제2 센싱부는 상기 힌지를 기준으로 회전 이동되어 개폐되는 것을 특징으로 하는 리모컨 장치.
  23. 제21항에 있어서,
    상기 센싱부에 포함된 센서들 각각은 동작 주파수가 서로 상이한 것을 특징으로 하는 리모컨 장치.
KR1020110057060A 2011-06-13 2011-06-13 디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치 KR101789683B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020110057060A KR101789683B1 (ko) 2011-06-13 2011-06-13 디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치
EP12159044.2A EP2535788B1 (en) 2011-06-13 2012-03-12 Display apparatus and method for controlling a display apparatus
US13/440,770 US9491520B2 (en) 2011-06-13 2012-04-05 Display apparatus and method for controlling display apparatus and remote controller having a plurality of sensor arrays

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110057060A KR101789683B1 (ko) 2011-06-13 2011-06-13 디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치

Publications (2)

Publication Number Publication Date
KR20120137902A true KR20120137902A (ko) 2012-12-24
KR101789683B1 KR101789683B1 (ko) 2017-11-20

Family

ID=45936742

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110057060A KR101789683B1 (ko) 2011-06-13 2011-06-13 디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치

Country Status (3)

Country Link
US (1) US9491520B2 (ko)
EP (1) EP2535788B1 (ko)
KR (1) KR101789683B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014106991A1 (ko) * 2013-01-04 2014-07-10 엘지전자 주식회사 영상표시장치의 동작 방법
KR101961708B1 (ko) 2017-09-22 2019-03-25 에스케이브로드밴드주식회사 셋탑박스, 원격 제어기기, iptv 시스템 및 이의 구동 방법
KR101977598B1 (ko) 2017-11-09 2019-05-13 에스케이브로드밴드주식회사 셋탑박스 및 그의 구동 방법
KR102368910B1 (ko) * 2020-11-17 2022-02-28 주식회사 에이엘에이엔 셋탑박스 기반 객실 관리 시스템

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9566414B2 (en) 2013-03-13 2017-02-14 Hansen Medical, Inc. Integrated catheter and guide wire controller
US9283046B2 (en) 2013-03-15 2016-03-15 Hansen Medical, Inc. User interface for active drive apparatus with finite range of motion
US10849702B2 (en) 2013-03-15 2020-12-01 Auris Health, Inc. User input devices for controlling manipulation of guidewires and catheters
USD749102S1 (en) * 2013-05-10 2016-02-09 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US11020016B2 (en) 2013-05-30 2021-06-01 Auris Health, Inc. System and method for displaying anatomy and devices on a movable display
US20150173725A1 (en) * 2013-12-20 2015-06-25 Alcon Research, Ltd. Motion-Sensing Footswitch and Methods for a Surgical System
EP3243476B1 (en) 2014-03-24 2019-11-06 Auris Health, Inc. Systems and devices for catheter driving instinctiveness
US20150375399A1 (en) * 2014-06-27 2015-12-31 Hansen Medical, Inc. User interface for medical robotics system
US10499999B2 (en) 2014-10-09 2019-12-10 Auris Health, Inc. Systems and methods for aligning an elongate member with an access site
US20160117081A1 (en) * 2014-10-27 2016-04-28 Thales Avionics, Inc. Controlling entertainment system using combination of inputs from proximity sensor and touch sensor of remote controller
CN105808015B (zh) * 2016-05-27 2018-10-12 京东方科技集团股份有限公司 防窥用户交互装置及方法
US11037464B2 (en) 2016-07-21 2021-06-15 Auris Health, Inc. System with emulator movement tracking for controlling medical devices
CN110831534B (zh) 2017-12-08 2023-04-28 奥瑞斯健康公司 用于医疗仪器导航和瞄准的系统和方法
EP3762809A4 (en) * 2018-03-07 2021-12-01 University of Massachusetts Medical School Office Of Technology Management SYSTEM TO FACILITATE VOICE-BASED COMMUNICATION FOR PEOPLE WHO CANNOT SPEAK OR WRITE
KR20210010871A (ko) 2018-05-18 2021-01-28 아우리스 헬스, 인코포레이티드 로봇식 원격작동 시스템을 위한 제어기
US11872007B2 (en) 2019-06-28 2024-01-16 Auris Health, Inc. Console overlay and methods of using same
KR102300232B1 (ko) * 2019-10-10 2021-09-09 주식회사 오성전자 센서가 적용된 모션 감지 리모컨

Family Cites Families (101)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3478220A (en) * 1966-05-11 1969-11-11 Us Navy Electro-optic cursor manipulator with associated logic circuitry
US3559478A (en) * 1967-04-05 1971-02-02 Gen Technical Services Inc Inertial sensing system for use in navigation and guidance
US4205304A (en) * 1977-09-22 1980-05-27 General Electric Company Two dimensional light beam selection system
FR2416094A1 (fr) * 1978-02-01 1979-08-31 Zarudiansky Alain Dispositif de manipulation a distance
US4384201A (en) * 1978-04-24 1983-05-17 Carroll Manufacturing Corporation Three-dimensional protective interlock apparatus
JPS6059546B2 (ja) * 1984-05-25 1985-12-25 満雄 上和野 流速測定方法および装置
US4746770A (en) * 1987-02-17 1988-05-24 Sensor Frame Incorporated Method and apparatus for isolating and manipulating graphic objects on computer video monitor
JPS6465625A (en) * 1987-09-07 1989-03-10 Alps Electric Co Ltd Optical type coordinate input device
JP2683093B2 (ja) * 1989-04-04 1997-11-26 アルプス電気株式会社 光学式座標入力装置
JPH04355815A (ja) * 1991-06-03 1992-12-09 Pfu Ltd タッチスクリーン
JPH05189137A (ja) * 1992-01-16 1993-07-30 Sumitomo Heavy Ind Ltd 計算機用コマンド入力装置
EP0829799A3 (en) * 1992-05-26 1998-08-26 Takenaka Corporation Wall computer module
JPH07184515A (ja) * 1993-12-27 1995-07-25 Toyo Sangyo Kk 実験用動物の運動量測定方法及びその装置
US5594469A (en) * 1995-02-21 1997-01-14 Mitsubishi Electric Information Technology Center America Inc. Hand gesture machine control system
JPH08335125A (ja) * 1995-06-08 1996-12-17 Matsushita Electric Ind Co Ltd ワイヤレス入力システム
US5880462A (en) * 1995-08-24 1999-03-09 Hsia; Chih-Yu Keying apparatus with thumb gap
JPH09319500A (ja) * 1996-05-31 1997-12-12 Stanley Electric Co Ltd 光学式座標入力装置
JPH113169A (ja) * 1997-06-13 1999-01-06 Tokai Rika Co Ltd タッチ操作情報出力装置
US6130663A (en) * 1997-07-31 2000-10-10 Null; Nathan D. Touchless input method and apparatus
US20020036617A1 (en) * 1998-08-21 2002-03-28 Timothy R. Pryor Novel man machine interfaces and applications
US6198485B1 (en) * 1998-07-29 2001-03-06 Intel Corporation Method and apparatus for three-dimensional input entry
US6501515B1 (en) * 1998-10-13 2002-12-31 Sony Corporation Remote control system
US7030860B1 (en) * 1999-10-08 2006-04-18 Synaptics Incorporated Flexible transparent touch sensing system for electronic devices
US7227526B2 (en) * 2000-07-24 2007-06-05 Gesturetek, Inc. Video-based image control system
US20030014575A1 (en) * 2001-07-11 2003-01-16 Lun Wang Single-unit multiple-transmission device
US20030014574A1 (en) * 2001-07-11 2003-01-16 Kuo Shih-Jen Multiple-channel wireless input unit
JP4974319B2 (ja) * 2001-09-10 2012-07-11 株式会社バンダイナムコゲームス 画像生成システム、プログラム及び情報記憶媒体
US20030214481A1 (en) * 2002-05-14 2003-11-20 Yongming Xiong Finger worn and operated input device and method of use
US20040041828A1 (en) * 2002-08-30 2004-03-04 Zellhoefer Jon William Adaptive non-contact computer user-interface system and method
JP2004173003A (ja) * 2002-11-20 2004-06-17 Toshiba Corp 放送受信装置とコード信号出力装置及びその制御方法
JP4035610B2 (ja) * 2002-12-18 2008-01-23 独立行政法人産業技術総合研究所 インタフェース装置
JP2004341892A (ja) * 2003-05-16 2004-12-02 Fuji Xerox Co Ltd 指示入力装置、指示入力方法、及びプログラム
US20070057946A1 (en) * 2003-07-24 2007-03-15 Dan Albeck Method and system for the three-dimensional surface reconstruction of an object
US7123180B1 (en) * 2003-07-29 2006-10-17 Nvidia Corporation System and method for controlling an electronic device using a single-axis gyroscopic remote control
JP4400143B2 (ja) * 2003-08-20 2010-01-20 パナソニック株式会社 表示装置および表示方法
JP5090161B2 (ja) * 2004-06-29 2012-12-05 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ グラフィカルユーザインタフェースの多階層表示
US20060007176A1 (en) * 2004-07-06 2006-01-12 Chung-Yi Shen Input method and control module defined with an initial position and moving directions and electronic product thereof
US20060023410A1 (en) * 2004-07-30 2006-02-02 Mark Solomon Apparatus for storing a structure within an electronic device
WO2006035509A1 (en) * 2004-09-29 2006-04-06 Nec Corporation Error calculation circuit for mixer
US8842186B2 (en) * 2004-10-25 2014-09-23 I-Interactive Llc Control system and method employing identification of a displayed image
US20060152482A1 (en) * 2005-01-07 2006-07-13 Chauncy Godwin Virtual interface and control device
US7825902B2 (en) * 2005-03-31 2010-11-02 Avego Technologies General Ip (Singapore) Pte. Ltd. Controller, system and method for identifying a number of interactions with a computer input area
KR100677457B1 (ko) * 2005-05-24 2007-02-02 엘지전자 주식회사 단말기의 카메라를 이용한 메뉴 입력 장치 및 방법
TWI316195B (en) * 2005-12-01 2009-10-21 Ind Tech Res Inst Input means for interactive devices
JP2007172024A (ja) * 2005-12-19 2007-07-05 Pioneer Electronic Corp 多次元配列された項目の選択装置及びそのカーソル移動方法
US8139029B2 (en) * 2006-03-08 2012-03-20 Navisense Method and device for three-dimensional sensing
US8614669B2 (en) * 2006-03-13 2013-12-24 Navisense Touchless tablet method and system thereof
US8578282B2 (en) * 2006-03-15 2013-11-05 Navisense Visual toolkit for a virtual user interface
CN200944226Y (zh) * 2006-08-31 2007-09-05 广东威创日新电子有限公司 相邻红外模块不同频率红外管的新型红外触摸装置
KR100783552B1 (ko) * 2006-10-11 2007-12-07 삼성전자주식회사 휴대 단말기의 입력 제어 방법 및 장치
US20080106527A1 (en) * 2006-11-06 2008-05-08 Rpo Pty Limited Waveguide Configurations for Minimising Substrate Area
KR100851977B1 (ko) * 2006-11-20 2008-08-12 삼성전자주식회사 가상 평면을 이용하여 전자 기기의 사용자 인터페이스를제어하는 방법 및 장치.
TWI319539B (en) * 2006-11-29 2010-01-11 Ind Tech Res Inst Pointing device
US7877706B2 (en) * 2007-01-12 2011-01-25 International Business Machines Corporation Controlling a document based on user behavioral signals detected from a 3D captured image stream
WO2008104082A1 (en) * 2007-03-01 2008-09-04 Titan Medical Inc. Methods, systems and devices for threedimensional input, and control methods and systems based thereon
JP5169041B2 (ja) * 2007-07-03 2013-03-27 株式会社リコー 液体吐出ヘッドユニット、画像形成装置
CA2591808A1 (en) * 2007-07-11 2009-01-11 Hsien-Hsiang Chiu Intelligent object tracking and gestures sensing input device
US9335912B2 (en) * 2007-09-07 2016-05-10 Apple Inc. GUI applications for use with 3D remote controller
WO2009048113A1 (ja) * 2007-10-12 2009-04-16 Sony Corporation 入力装置、制御装置、制御システム、制御方法及びハンドヘルド装置
KR101451271B1 (ko) * 2007-10-30 2014-10-16 삼성전자주식회사 방송수신장치 및 그 제어방법
WO2009062153A1 (en) * 2007-11-09 2009-05-14 Wms Gaming Inc. Interaction with 3d space in a gaming system
US8432372B2 (en) * 2007-11-30 2013-04-30 Microsoft Corporation User input using proximity sensing
US8780278B2 (en) * 2007-11-30 2014-07-15 Microsoft Corporation Motion-sensing remote control
US8166421B2 (en) * 2008-01-14 2012-04-24 Primesense Ltd. Three-dimensional user interface
US20090184922A1 (en) * 2008-01-18 2009-07-23 Imu Solutions, Inc. Display indicator controlled by changing an angular orientation of a remote wireless-display controller
TW200933462A (en) * 2008-01-29 2009-08-01 Tron Intelligence Inc Sensing analysis method applicable to optical touch screen
US8259163B2 (en) * 2008-03-07 2012-09-04 Intellectual Ventures Holding 67 Llc Display with built in 3D sensing
FR2933212B1 (fr) * 2008-06-27 2013-07-05 Movea Sa Pointeur a capture de mouvement resolue par fusion de donnees
US20090322680A1 (en) * 2008-06-30 2009-12-31 Maurizio Sole Festa Radio frequency pointing device
JP5063510B2 (ja) * 2008-07-01 2012-10-31 日東電工株式会社 光学式タッチパネルおよびその製造方法
JP5005627B2 (ja) * 2008-07-10 2012-08-22 任天堂株式会社 情報処理プログラムおよび情報処理装置
JP5210074B2 (ja) * 2008-07-29 2013-06-12 日東電工株式会社 3次元センサ用光導波路およびそれを用いた3次元センサ
TWI400630B (zh) * 2008-08-11 2013-07-01 Imu Solutions Inc 選擇裝置及方法
JP4720874B2 (ja) * 2008-08-14 2011-07-13 ソニー株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP2010122936A (ja) * 2008-11-20 2010-06-03 Seiko Epson Corp センシング回路、表示装置および電子機器
JP5088308B2 (ja) * 2008-12-03 2012-12-05 富士通モバイルコミュニケーションズ株式会社 入力装置
EP2389622A1 (en) * 2009-01-26 2011-11-30 Zrro Technologies (2009) Ltd. Device and method for monitoring an object's behavior
US20100194860A1 (en) * 2009-02-03 2010-08-05 Bit Cauldron Corporation Method of stereoscopic 3d image capture using a mobile device, cradle or dongle
JP2011034380A (ja) * 2009-08-03 2011-02-17 Nitto Denko Corp タッチパネルおよびタッチパネル付表示装置
US20110037695A1 (en) * 2009-08-16 2011-02-17 Bor Igal Ergonomic control unit for providing a pointing function
US8432305B2 (en) * 2009-09-03 2013-04-30 Samsung Electronics Co., Ltd. Electronic apparatus, control method thereof, remote control apparatus, and control method thereof
KR100974894B1 (ko) * 2009-12-22 2010-08-11 전자부품연구원 멀티 적외선 카메라 방식의 3차원 공간 터치 장치
KR101646953B1 (ko) * 2010-01-12 2016-08-09 엘지전자 주식회사 디스플레이 장치 및 그 제어방법
US10007393B2 (en) * 2010-01-19 2018-06-26 Apple Inc. 3D view of file structure
US20120056846A1 (en) * 2010-03-01 2012-03-08 Lester F. Ludwig Touch-based user interfaces employing artificial neural networks for hdtp parameter and symbol derivation
TWI406156B (zh) * 2010-03-12 2013-08-21 Primax Electronics Ltd 氣流感應式電腦游標訊號產生裝置以及氣流感應式滑鼠裝置
US8320622B2 (en) * 2010-03-29 2012-11-27 Sharp Laboratories Of America, Inc. Color gradient object tracking
KR101334107B1 (ko) * 2010-04-22 2013-12-16 주식회사 굿소프트웨어랩 차량용 멀티미디어 제어를 위한 사용자 인터페이스 장치 및 방법
CN101833403B (zh) * 2010-04-26 2012-09-19 鸿富锦精密工业(深圳)有限公司 基于图像识别的触摸系统
TW201138437A (en) * 2010-04-30 2011-11-01 Hon Hai Prec Ind Co Ltd System and method for remotely switching TV channels
US8593402B2 (en) * 2010-04-30 2013-11-26 Verizon Patent And Licensing Inc. Spatial-input-based cursor projection systems and methods
US8860672B2 (en) * 2010-05-26 2014-10-14 T-Mobile Usa, Inc. User interface with z-axis interaction
US20110298708A1 (en) * 2010-06-07 2011-12-08 Microsoft Corporation Virtual Touch Interface
US9247238B2 (en) * 2011-01-31 2016-01-26 Microsoft Technology Licensing, Llc Reducing interference between multiple infra-red depth cameras
US20120218395A1 (en) * 2011-02-25 2012-08-30 Microsoft Corporation User interface presentation and interactions
US9104239B2 (en) * 2011-03-09 2015-08-11 Lg Electronics Inc. Display device and method for controlling gesture functions using different depth ranges
US8884877B2 (en) * 2011-04-29 2014-11-11 Movea Pointing device
US8686943B1 (en) * 2011-05-13 2014-04-01 Imimtek, Inc. Two-dimensional method and system enabling three-dimensional user interaction with a device
US8773512B1 (en) * 2011-06-30 2014-07-08 Aquifi, Inc. Portable remote control device enabling three-dimensional user interaction with at least one appliance
US8971572B1 (en) * 2011-08-12 2015-03-03 The Research Foundation For The State University Of New York Hand pointing estimation for human computer interaction
JP2014044679A (ja) * 2012-08-28 2014-03-13 Fujitsu Component Ltd 座標検出装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014106991A1 (ko) * 2013-01-04 2014-07-10 엘지전자 주식회사 영상표시장치의 동작 방법
KR101961708B1 (ko) 2017-09-22 2019-03-25 에스케이브로드밴드주식회사 셋탑박스, 원격 제어기기, iptv 시스템 및 이의 구동 방법
KR101977598B1 (ko) 2017-11-09 2019-05-13 에스케이브로드밴드주식회사 셋탑박스 및 그의 구동 방법
KR102368910B1 (ko) * 2020-11-17 2022-02-28 주식회사 에이엘에이엔 셋탑박스 기반 객실 관리 시스템

Also Published As

Publication number Publication date
US9491520B2 (en) 2016-11-08
EP2535788A1 (en) 2012-12-19
KR101789683B1 (ko) 2017-11-20
US20120314022A1 (en) 2012-12-13
EP2535788B1 (en) 2016-12-28

Similar Documents

Publication Publication Date Title
KR20120137902A (ko) 디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치
US9104239B2 (en) Display device and method for controlling gesture functions using different depth ranges
US9477324B2 (en) Gesture processing
US10101874B2 (en) Apparatus and method for controlling user interface to select object within image and image input device
EP2638461B1 (en) Apparatus and method for user input for controlling displayed information
KR102071575B1 (ko) 이동로봇, 사용자단말장치 및 그들의 제어방법
US20180292907A1 (en) Gesture control system and method for smart home
US20130257736A1 (en) Gesture sensing apparatus, electronic system having gesture input function, and gesture determining method
US20120139907A1 (en) 3 dimensional (3d) display system of responding to user motion and user interface for the 3d display system
EP2268005A2 (en) Display apparatus for providing a user menu and method for providing user interface (ui) applicable thereto
EP2538309A2 (en) Remote control with motion sensitive devices
EP2609752A2 (en) Remote control device
KR102402048B1 (ko) 전자 장치 및 그 제어 방법
US20150234467A1 (en) Method and apparatus for gesture detection and display control
US20160070410A1 (en) Display apparatus, electronic apparatus, hand-wearing apparatus and control system
KR20140089660A (ko) 터치 패드, 디스플레이 장치 및 터치 패드의 제어 방법
US20150084936A1 (en) Method and apparatus for drawing three-dimensional object
US10506290B2 (en) Image information projection device and projection device control method
EP3056974B1 (en) Display apparatus and method
WO2014007956A1 (en) Method and device for movement of objects in a stereoscopic display
KR102590132B1 (ko) 디스플레이 장치, 및 디스플레이 장치의 제어방법
CN103870146A (zh) 一种信息处理方法及电子设备
KR20120055434A (ko) 디스플레이 시스템 및 그 디스플레이 방법
US10488576B2 (en) Image display apparatus
US9223499B2 (en) Communication device having a user interaction arrangement

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant