KR20150025721A - 디스플레이 장치, 원격 제어 장치 및 그 제어 방법 - Google Patents

디스플레이 장치, 원격 제어 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20150025721A
KR20150025721A KR20130103695A KR20130103695A KR20150025721A KR 20150025721 A KR20150025721 A KR 20150025721A KR 20130103695 A KR20130103695 A KR 20130103695A KR 20130103695 A KR20130103695 A KR 20130103695A KR 20150025721 A KR20150025721 A KR 20150025721A
Authority
KR
South Korea
Prior art keywords
operation mode
remote control
control device
user
feedback
Prior art date
Application number
KR20130103695A
Other languages
English (en)
Inventor
나문성
김관영
김민섭
윤현규
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR20130103695A priority Critical patent/KR20150025721A/ko
Publication of KR20150025721A publication Critical patent/KR20150025721A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227—Providing Remote input by a user located remotely from the client device, e.g. at work
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

디스플레이 장치가 개시된다. 디스플레이 장치는 디스플레이부, 햅틱 피드백을 제공하기 위한 햅틱 액츄에이터를 포함하는 원격 제어 장치와 통신을 수행하기 위한 통신부 및 복수의 동작 모드 중에서 사용자가 선택한 동작 모드로 동작하는 제어부를 포함하며, 제어부는 복수의 동작 모드 중에서 햅틱 피드백을 제공하도록 설정된 적어도 하나의 동작 모드에서 햅틱 액츄에이터를 구동시키기 위한 피드백 신호를 통신부를 통해 원격 제어 장치로 전송할 수 있다.

Description

디스플레이 장치, 원격 제어 장치 및 그 제어 방법{DISPLAY APPARATUS, REMOTE CONTROLLER AND CONTROLLING METHOD THEREOF}
본 발명은 디스플레이 장치, 원격 제어 장치 및 그 제어 방법에 관한 것으로서, 보다 상세하게는 햅틱 피드백을 사용하는 디스플레이 장치, 원격 제어 장치 및 그 제어 방법에 관한 것이다.
종래에 TV를 비롯한 전자 제품의 리모컨은 IR을 통한 단방향 통신이 주를 이루었으나, 최근에는 RF를 이용한 양방향 통신 리모컨이 등장하고 있다. 또한, 리모컨은 버튼만을 갖춘 형태에서 다양한 움직임을 입력하여 제어 가능한 터치 패드가 구비된 형태로 바뀌고 있다.
특히, 종래의 리모컨은 IR 위주의 단방향 리모컨으로, TV와 같은 디스플레이 장치에서의 동작 환경과 관계없이 일방적인 피드백이 제공되었다. 예를 들어, 버튼을 눌렀을 때 사운드나 불빛을 통한 입력에 대한 반응을 출력하여 사용자가 인식할 수 있도록 하였다.
또한, 양방향 통신을 사용하더라도 리모컨 자체에서 입력을 센싱하고 데이터를 처리하여 자체적인 햅틱 피드백을 주도록 했다.
그러나, 보통의 리모컨은 피드백을 주지 않아, 버튼 입력이나 터치 등에 대한 사용성이 떨어지고, 터치 패드 같은 경우, 아무런 피드백이 없을 시 사용자가 이동에 대한 세밀한 조정을 하기가 쉽지 않다.
또한, 실제 TV가 실행되고 있는 모드와 상관없이 햅틱 피드백이 발생하는 경우가 발생하여 피드백의 의미가 저하되는 문제가 발생하였다. 예를 들면, 사용자가 원하지 않는 상황에서 사운드가 나온다거나, 불빛이 나오는 경우 또는 진동과 같은 피드백이 필요없는 경우 또는 조건이나 동작 모드에 따라 다른 피드백이 필요한 경우에 적절한 지원이 되지 않는 문제점이 있다.
본 발명의 목적은 TV 모드에 따라 피드백 동작 여부를 결정하고, 이동 범위에 따른 피드백을 주기 위한 디스플레이 장치, 원격 제어 장치 및 그 제어 방법을 제공함에 있다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 디스플레이 장치는 디스플레이부, 햅틱 피드백을 제공하기 위한 햅틱 액츄에이터를 포함하는 원격 제어 장치와 통신을 수행하기 위한 통신부 및 복수의 동작 모드 중에서 사용자가 선택한 동작 모드로 동작하는 제어부를 포함하며, 상기 제어부는, 상기 복수의 동작 모드 중에서 상기 햅틱 피드백을 제공하도록 설정된 적어도 하나의 동작 모드에서, 상기 햅틱 액츄에이터를 구동시키기 위한 피드백 신호를 상기 통신부를 통해 상기 원격 제어 장치로 전송할 수 있다.
여기서, 상기 복수의 동작 모드는, 상기 디스플레이부에 포인터를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 포인터를 이동시키는 제1 동작 모드 및 상기 디스플레이부에 복수의 오브젝트를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드를 포함하며, 상기 제어부는, 상기 제2 동작 모드에서, 상기 피드백 신호를 상기 원격 제어 장치로 전송할 수 있다.
또한, 상기 제어부는, 상기 제2 동작 모드에서 상기 원격 제어 장치로부터 제어 신호가 수신될 때마다 상기 피드백 신호를 상기 원격 제어 장치로 전송할 수 있다.
그리고, 상기 제어부는, 상기 제1 동작 모드에서 상기 제2 동작 모드로 변경되면 상기 피드백 신호를 상기 원격 제어 장치로 전송하여 상기 제2 동작 모드로 동작하는 동안에 상기 원격 제어 장치가 상기 햅틱 피드백을 지속적으로 제공할 수 있다.
한편, 상기 제어부는, 상기 제2 동작 모드에서는 상기 복수의 오브젝트 중에서 하나의 오브젝트를 하이라이트 표시하고, 상기 원격 제어 장치의 제어에 따라 상기 하이라이트 표시된 오브젝트가 변경될 때마다 상기 피드백 신호를 전송할 수 있다.
또한, 상기 원격 제어 장치는 터치 패드를 포함하며, 상기 제어부는, 상기 제1 동작 모드에서 상기 터치 패드를 터치하여 드래깅하는 사용자 조작이 입력되면, 터치 좌표 및 드래깅 궤적에 따라 상기 포인터를 이동시키고, 상기 제2 동작 모드에서 상기 터치 패드를 터치하여 드래깅하는 사용자 조작이 입력되면, 드래깅 거리 및 드래깅 방향에 따라 상기 하이라이트 표시된 오브젝트를 변경할 수 있다.
한편, 본 발명의 일 실시 예에 따른 원격 제어 장치는 사용자 조작을 입력받기 위한 입력부, 상기 사용자 조작에 따른 제어 신호를 디스플레이 장치로 전송하기 위한 통신부, 햅틱 피드백을 제공하기 위한 햅틱 액츄에이터 및 상기 디스플레이 장치의 동작 모드에 따라 선택적으로 상기 햅틱 액츄에이터를 구동시켜, 상기 햅틱 피드백을 제공하는 제어부를 포함할 수 있다.
여기서, 상기 제어부는, 상기 디스플레이 장치가 포인터를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 포인터를 이동시키는 제1 동작 모드로 동작하는 동안에는 상기 햅틱 액츄에이터를 비구동시키고, 상기 디스플레이 장치가 복수의 오브젝트를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드로 동작하는 동안에는 상기 햅틱 액츄에이터를 구동시켜 상기 햅틱 피드백을 제공할 수 있다.
또한, 상기 제어부는, 상기 디스플레이 장치가 상기 제2 동작 모드로 동작하는 상태에서, 상기 복수의 오브젝트 중에서 하이라이트 표시된 오브젝트를 변경하기 위한 사용자 조작이 입력될 때마다 상기 햅틱 피드백을 제공할 수 있다.
한편, 본 발명의 일 실시 예에 따른 디스플레이 장치의 제어 방법에 있어서, 햅틱 피드백을 제공하기 위한 햅틱 액츄에이터를 포함하는 원격 제어 장치와 통신을 수행하는 단계 및 복수의 동작 모드 중에서 사용자가 선택한 동작 모드로 동작하는 단계를 포함하며, 상기 사용자가 선택한 동작 모드로 동작하는 단계는, 상기 복수의 동작 모드 중에서 상기 햅틱 피드백을 제공하도록 설정된 적어도 하나의 동작 모드에서 상기 햅틱 액츄에이터를 구동시키기 위한 피드백 신호를 상기 원격 제어 장치로 전송할 수 있다.
여기서, 상기 복수의 동작 모드는, 상기 디스플레이부에 포인터를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 포인터를 이동시키는 제1 동작 모드 및 상기 디스플레이부에 복수의 오브젝트를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드를 포함하며, 상기 사용자가 선택한 동작 모드로 동작하는 단계는, 상기 제2 동작 모드에서 상기 피드백 신호를 상기 원격 제어 장치로 전송할 수 있다.
또한, 상기 사용자가 선택한 동작 모드로 동작하는 단계는, 상기 제2 동작 모드에서 상기 원격 제어 장치로부터 제어 신호가 수신될 때마다 상기 피드백 신호를 상기 원격 제어 장치로 전송할 수 있다.
그리고, 상기 사용자가 선택한 동작 모드로 동작하는 단계는, 상기 제1 동작 모드에서 상기 제2 동작 모드로 변경되면 상기 피드백 신호를 상기 원격 제어 장치로 전송하여 상기 제2 동작 모드로 동작하는 동안에 상기 원격 제어 장치가 상기 햅틱 피드백을 지속적으로 제공할 수 있다.
또한, 상기 사용자가 선택한 동작 모드로 동작하는 단계는, 상기 제2 동작 모드에서는 상기 복수의 오브젝트 중에서 하나의 오브젝트를 하이라이트 표시하고, 상기 원격 제어 장치의 제어에 따라 상기 하이라이트 표시된 오브젝트가 변경될 때마다 상기 피드백 신호를 전송할 수 있다.
여기서, 상기 원격 제어 장치는 터치 패드를 포함하며, 상기 사용자가 선택한 동작 모드로 동작하는 단계는, 상기 제1 동작 모드에서 상기 터치 패드를 터치하여 드래깅하는 사용자 조작이 입력되면, 터치 좌표 및 드래깅 궤적에 따라 상기 포인터를 이동시키고, 상기 제2 동작 모드에서 상기 터치 패드를 터치하여 드래깅하는 사용자 조작이 입력되면, 드래깅 거리 및 드래깅 방향에 따라 상기 하이라이트 표시된 오브젝트를 변경할 수 있다.
한편, 본 발명의 일 실시 예에 따른 원격 제어 장치의 제어 방법에 있어서, 사용자 조작을 입력받는 단계, 상기 사용자 조작에 따른 제어 신호를 디스플레이 장치로 전송하는 단계 및 상기 디스플레이 장치의 동작 모드에 따라 선택적으로 햅틱 액츄에이터를 구동시켜 햅틱 피드백을 제공하는 단계를 포함할 수 있다.
또한, 상기 햅틱 피드백을 제공하는 단계는, 상기 디스플레이 장치가 포인터를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 포인터를 이동시키는 제1 동작 모드로 동작하는 동안에는 상기 햅틱 액츄에이터를 비구동시키고, 상기 디스플레이 장치가 복수의 오브젝트를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드로 동작하는 동안에는 상기 햅틱 액츄에이터를 구동시켜 상기 햅틱 피드백을 제공할 수 있다.
그리고, 상기 햅틱 피드백을 제공하는 단계는, 상기 디스플레이 장치가 상기 제2 동작 모드로 동작하는 상태에서 상기 복수의 오브젝트 중에서 하이라이트 표시된 오브젝트를 변경하기 위한 사용자 조작이 입력될 때마다, 상기 햅틱 피드백을 제공할 수 있다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, TV 모드에 따라 햅틱 피드백의 동작 여부를 결정할 수 있고, 햅틱 피드백이 동작하는 경우 이동 범위에 따른 햅틱 피드백을 제공하여 오동작을 줄이고 손쉬운 조작을 가능하게 한다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 나타내는 블럭도이다.
도 2는 본 발명의 일 실시 예에 따른 제1 동작 모드로 동작하는 디스플레이 장치를 나타낸 도면이다.
도 3은 본 발명의 일 실시 예에 따른 제2 동작 모드로 동작하는 디스플레이 장치를 나타낸 도면이다.
도 4 및 도 5는 본 발명의 일 실시 예에 따른 동작 모드에 따라 피드백 신호를 선택적으로 전송하는 디스플레이 장치를 도시한 도면이다.
도 6은 본 발명의 일 실시 예에 따른 제어부의 구성을 나타낸 블럭도이다.
도 7 및 도 8은 본 발명의 일 실시 예에 따른 복수의 피드백 신호를 전송하는 디스플레이 장치를 도시한 도면이다.
도 9는 본 발명의 일 실시 예에 따른 원격 제어 장치의 구성을 도시한 블럭도이다.
도 10은 본 발명의 일 실시 예에 따른 원격 제어 장치의 구성을 상세하게 도시한 블럭도이다.
도 11은 본 발명의 일 실시 예에 따른 디스플레이 장치의 제어 방법을 설명하기 위한 흐름도이다.
도 12는 본 발명의 일 실시 예에 따른 원격 제어 장치의 제어 방법을 설명하기 위한 흐름도이다.
이하에서는 도면을 참조하여 본 발명을 더욱 상세하게 설명한다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 나타내는 블럭도이다.
도 1에 따르면, 디스플레이 장치(100)는 디스플레이부(110), 통신부(120) 및 제어부(130)을 포함할 수 있다.
디스플레이 장치(100)는 TV, 스마트 폰, 태블릿, 데스크탑 PC, 노트북 등과 같은 다양한 형태의 전자 장치로 구현될 수 있다.
또한, 디스플레이부(110)는 복수의 컨텐츠를 디스플레이할 수 있는데, 여기서, 복수의 컨텐츠는 문서, 이미지, 동영상, 음악등과 같은 멀티미디어 컨텐츠뿐만 아니라 주소록, 문자메시지, 이메일 등을 포함할 수 있다.
통신부(120)는 햅틱 피드백을 제공하기 위한 햅틱 액츄에이터를 포함하는 원격 제어 장치(미도시)와 통신을 수행할 수 있다.
여기서, 통신부(120)는 원격 제어 장치(미도시)와 양방향 통신을 사용하여 원격 제어 장치(미도시)로부터 제어 신호를 수신받거나, 원격 제어 장치(미도시)로 피드백 신호를 전송할 수 있다. 이에 대한 자세한 설명은 후술하기로 한다.
한편, 양방향 통신에는 WiFi, 블루투스, RF 신호 등이 사용될 수 있다.
제어부(130)는 복수의 동작 모드 중에서 사용자가 선택한 동작 모드로 동작하도록 할 수 있다.
여기서, 제어부(130)는 복수의 동작 모드 중에서 햅틱 피드백을 제공하도록 설정된 적어도 하나의 동작 모드에서, 햅틱 액츄에이터를 구동시키기 위한 피드백 신호를 통신부(120)를 통해 원격 제어 장치(미도시)로 전송할 수 있다.
구체적으로, 원격 제어 장치(미도시)는 햅틱 피드백을 제공하기 위한 햅틱 액츄에이터를 포함하고 있는데, 제어부(130)는 디스플레이 장치(100)가 실행되는 복수의 동작 모드 중에서 원격 제어 장치(미도시)에 햅틱 피드백을 제공하도록 설정된 동작 모드에서는 원격 제어 장치(미도시)의 햅틱 액츄에이터를 구동시키기 위한 피드백 신호를 원격 제어 장치(미도시)로 전송할 수 있고, 이에 따라, 원격 제어 장치(미도시)는 사용자에게 햅틱 피드백을 제공할 수 있다.
한편, 복수의 동작 모드는 디스플레이부(110)에 포인터를 표시하고 원격 제어 장치(미도시)의 제어에 따라 포인터를 이동시키는 제1 동작 모드 및 디스플레이부(110)에 복수의 오브젝트를 표시하고 원격 제어 장치(미도시)의 제어에 따라 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드를 포함한다.
복수의 동작 모드에 대해 도면을 참조하여 상세히 설명하기로 한다.
도 2는 본 발명의 일 실시 예에 따른 제1 동작 모드로 동작하는 디스플레이 장치를 나타낸 도면이다.
도 2를 참조하면, 디스플레이 장치(200)의 디스플레이부(210)에는 동영상 이미지 또는 정지 영상 이미지 또는 인터넷 창 등이 디스플레이될 수 있다. 여기서, 디스플레이부(210)에는 사용자가 원하는 컨텐츠를 선택하거나 실행할 수 있도록 포인터(220)가 표시될 수 있다.
이에 따라, 제어부(130)는 원격 제어 장치(240)의 제어에 따라 디스플레이부(210)에 표시되는 포인터(220)를 이동시켜 디스플레이할 수 있다.
구체적으로, 원격 제어 장치(240)에 구비된 터치 패드(250)에 입력되는 사용자의 입력에 따라 제어부(130)는 디스플레이부(210)에 표시되는 포인터를 이동시킬 수 있다.
즉, 제1 동작 모드로 동작하는 디스플레이 장치(200)에 있어서, 제어부(130)는 원격 제어 장치(240)의 터치 패드(250)를 터치하여 드래깅하는 사용자 조작이 입력되면, 터치 좌표 및 드래깅 궤적에 따라 포인터를 이동시킬 수 있다. 여기서, 터치 패드(250)는 터치 입력이 입력되면, 입력된 터치 입력에 대응되는 터치 패드(250) 상에서의 좌표 데이터를 검출할 수 있고, 원격 제어 장치(240)가 검출된 좌표 데이터를 디스플레이 장치(200)로 전송하면, 디스플레이 장치(200)는 수신단자(230)를 통해 수신받은 좌표 데이터에 기초하여 터치 좌표 및 드래깅 궤적을 산출하고 이에 따라 포인터(220)를 이동시켜 디스플레이할 수 있다.
도 3은 본 발명의 일 실시 예에 따른 제2 동작 모드로 동작하는 디스플레이 장치를 나타낸 도면이다.
도 3을 참조하면, 디스플레이 장치(300)의 디스플레이부(310)에는 복수의 오브젝트가 디스플레이될 수 있다. 여기서 복수의 오브젝트라 함은 일 예로 아이콘 또는 썸네일 이미지 등을 의미할 수 있다. 특히, 복수의 오브젝트가 아이콘으로 구현되는 경우, 도 3과 같이, 영화에 관한 아이콘, 음악에 관한 아이콘, 게임에 관한 아이콘 등 카테고리별로 구별되는 아이콘으로 디스플레이되거나, 사용자 설정에 따라 설정된 아이콘으로 디스플레이될 수도 있다.
이에 따라, 제어부(130)는 원격 제어 장치(340)의 제어에 따라 복수의 오브젝트 중 하나를 선택할 수 있다.
구체적으로, 원격 제어 장치(340)에 구비된 터치 패드(350)에 입력되는 사용자의 입력에 따라 제어부(130)는 디스플레이부(310)에 디스플레이되는 복수의 오브젝트 중 하나를 선택할 수 있다.
즉, 제2 동작 모드로 동작하는 디스플레이 장치(300)에 있어서, 제어부(130)는 원격 제어 장치(340)의 터치 패드(350)를 터치하여 드래깅하는 사용자 조작이 입력되면, 드래깅 거리 및 드래깅 방향에 따라 하이라이트 표시된 오브젝트를 변경할 수 있다.
예를 들면, 사용자가 터치 패드(350) 상에서 오른쪽 방향으로 터치 패드(350)의 가로 길이의 절반만큼 드래깅하는 사용자 조작을 입력하면, 터치 패드(350)는 입력된 터치 입력에 대응되는 터치 패드(350) 상에서의 좌표 데이터 및 지속적으로 입력되는 터치 입력이 중단되는 때의 터치 패드(350) 상에서의 좌표 데이터를 검출할 수 있다.
이에 따라, 원격 제어 장치(340)가 입력된 터치 입력에 대응되는 터치 패드(350) 상에서의 좌표 데이터 및 지속적으로 입력되는 터치 입력이 중단되는 때의 터치 패드(350) 상에서의 좌표 데이터를 디스플레이 장치(300)로 전송하면, 디스플레이 장치(300)는 수신단자(330)를 통해 수신받은 입력된 터치 입력에 대응되는 터치 패드(350) 상에서의 좌표 데이터 및 지속적으로 입력되는 터치 입력이 중단되는 때의 터치 패드(350) 상에서의 좌표 데이터에 기초하여 드래깅 거리 및 드래깅 방향을 산출할 수 있고, 산출된 드래깅 거리 및 드래깅 방향에 따라 하이라이트 표시된 오브젝트를 변경할 수 있다.
즉, 사용자가 터치 패드(350) 상에서 오른쪽 방향으로 터치 패드(350)의 가로 길이의 절반만큼 드래깅하는 조작이 입력되었다면, 디스플레이 장치(300)는 하이라이트(320) 표시를 오른쪽으로 한 칸만큼 움직여서 디스플레이할 수 있다.
한편, 제어부(130)는 제2 동작 모드에서 피드백 신호를 원격 제어 장치(340)로 전송할 수 있다.
여기서, 피드백 신호는 원격 제어 장치(340)에 구비된 햅틱 액츄에이터를 구동시키기 위한 신호이다.
또한, 제어부(130)는 제2 동작 모드에서만 피드백 신호를 원격 제어 장치(340)로 전송할 뿐, 제1 동작 모드에서는 피드백 신호를 원격 제어 장치(340)로 전송하지 않을 수 있다.
즉, 제어부(130)는 동작 모드에 따라 피드백 신호를 선택적으로 원격 제어 장치(340)로 전송할 수 있다.
도 4 및 도 5는 본 발명의 일 실시 예에 따른 동작 모드에 따라 피드백 신호를 선택적으로 전송하는 디스플레이 장치를 도시한 도면이다.
도 4를 참조하면, 디스플레이 장치(410)는 디스플레이부에 포인터를 디스플레이하는 제1 동작 모드로 동작하고 있고, 원격 제어 장치(420)의 제어에 따라 포인터를 이동시킬 수 있다.
여기서, 제어부(130)는 원격 제어 장치(420)의 제어에 따라 포인터를 이동시키는 경우 원격 제어 장치(420)의 햅틱 액츄에이터를 구동시키기 위한 피드백 신호를 전송하지 않을 수 있고, 이에 따라, 디스플레이 장치(410)의 디스플레이부 상에서 포인터가 이동하더라도, 원격 제어 장치(420)는 햅틱 피드백이 제공되지 않는다.
도 5를 참조하면, 디스플레이 장치(510)는 디스플레이부에 복수의 오브젝트를 표시하는 제2 동작 모드로 동작하고 있고, 원격 제어 장치(520)의 제어에 따라 복수의 오브젝트 중 하나를 선택할 수 있다.
여기서, 제어부(130)는 원격 제어 장치(520)의 제어에 따라 복수의 오브젝트 중 하나를 선택할 수 있는데, 이때, 원격 제어 장치(520)의 햅틱 액츄에이터를 구동시키기 위한 피드백 신호를 전송할 수 있다.
이에 따라, 제어부(130)는 복수의 오브젝트 중 하나가 선택되면, 피드백 신호를 원격 제어 장치(520)로 전송할 수 있고, 원격 제어 장치(520)는 햅틱 피드백이 제공된다.
한편, 일 예로, 제어부(130)는 제2 동작 모드에서 원격 제어 장치(520)로부터 제어 신호가 수신될 때마다 피드백 신호를 원격 제어 장치(520)로 전송할 수 있다.
예를 들면, 사용자가 원격 제어 장치(520)의 터치 패드에 입력할 때마다 원격 제어 장치(520)는 디스플레이 장치(510)로 제어 신호를 전송할 수 있고, 제어부(130)는 원격 제어 장치(520)로부터 제어 신호를 수신받을 때마다 이에 대한 피드백 신호를 원격 제어 장치(520)로 전송할 수 있다.
즉, 사용자가 원격 제어 장치(520)를 사용하여 제어 신호를 디스플레이 장치(510)로 전송하여 복수의 오브젝트 중 하나를 선택하기 위해 한 칸씩 움직일 때마다, 제어부(130)는 원격 제어 장치(520)로 피드백 신호를 전송하여 원격 제어 장치(520)에 햅틱 피드백을 제공할 수 있다.
또한, 제어부(130)는 제2 동작 모드에서는 복수의 오브젝트 중에서 하나의 오브젝트를 하이라이트 표시하고, 원격 제어 장치(520)의 제어에 따라 하이라이트 표시된 오브젝트가 변경될 때마다 피드백 신호를 전송할 수 있다.
예를 들면, 제어부(130)는 하이라이트 표시된 오브젝트가 한 번 변경되면 원격 제어 장치(520)로 피드백 신호를 전송하여 햅틱 액츄에이터를 구동시켜 햅틱 피드백을 제공하고, 또 다시 하이라이트 표시된 오브젝트가 한 번 변경되면 제어부(130)는 또 다시 원격 제어 장치(520)로 피드백 신호를 전송하여 햅틱 액츄에이터를 구동시켜 햅틱 피드백을 제공할 수 있다.
한편, 일 예로, 제어부(130)는 제1 동작 모드에서 제2 동작 모드로 변경되면 피드백 신호를 원격 제어 장치로 전송하여 제2 동작 모드로 동작하는 동안에 원격 제어 장치(520)가 햅틱 피드백을 지속적으로 제공하도록 할 수 있다.
예를 들면, 사용자의 설정에 의하여 디스플레이 장치(510)의 동작 모드가 제1 동작 모드 즉, 포인터가 표시되는 모드에서 제2 동작 모드 즉, 복수의 오브젝트 및 하이라이트가 표시되는 모드로 변경될 때, 제어부(130)는 피드백 신호를 원격 제어 장치(520)로 전송할 수 있고, 이후, 사용자가 원격 제어 장치(520)를 사용하여 제어 신호를 디스플레이 장치(510)로 전송하여 복수의 오브젝트 중 하나를 선택하기 위해 한 칸씩 움직일 때마다, 원격 제어 장치(520)에 포함된 마이크로 프로세서(미도시)에 의해 햅틱 피드백을 제공할 수 있다.
즉, 제어부(130)는 제1 동작 모드에서 제2 동작 모드로 변경될 때 한 번만 피드백 신호를 원격 제어 장치(520)로 전송하면, 그 이후부터는 원격 제어 장치(520)로부터 제어 신호를 수신할 때마다 제어부(130)가 피드백 신호를 원격 제어 장치(520)로 전송하여 원격 제어 장치(520)의 햅틱 액츄에이터를 구동시키는 것이 아니라, 원격 제어 장치(520) 자체 내에 구비된 마이크로 프로세서(미도시)에 의해 사용자 조작이 입력될 때마다 햅틱 피드백을 제공하도록 할 수 있다.
도 6은 본 발명의 일 실시 예에 따른 제어부의 구성을 나타낸 블럭도이다.
제어부(130)는 모드 판별부(610) 및 터치 처리부(620)를 포함할 수 있다.
여기서, 모드 판별부(610)는 모드 전환을 제어하고 관리할 수 있다. 예를 들면, 현재 디스플레이부 상에 포인터가 디스플레이되어 있는 포인터 모드인지 복수의 오브젝트가 디스플레이되어 있는 상태에서 복수의 오브젝트 중 하나를 선택하는 아이콘 모드인지를 판단할 수 있고, 포인터 모드와 아이콘 모드의 전환을 제어할 수 있다.
이러한, 모드 판별부(610)는 스위치의 플래그를 이용하여 동작 모드를 구분할 수 있다. 즉, 모드 판별부(610)는 스위치의 플래그에 "0"이라고 설정되어 있으면 포인터 모드로 판단할 수 있고, "1"이라고 설정되어 있으면 아이콘 모드라고 판단할 수 있다.
한편, 터치 처리부(620)는 원격 제어 장치(미도시)로부터 수신된 좌표 데이터를 처리할 수 있다. 구체적으로, 원격 제어 장치(미도시)로부터 좌표 데이터를 받아 디스플레이 장치(미도시)의 설정에 맞게 변환하여 디스플레이부 상에서의 위치를 판단할 수 있다.
이에 따라, 터치 처리부(620)는 디스플레이부 상에서의 포인터의 이동 속도나, 아이콘의 이동 범위(한 칸인지, 두 칸이지 여부)를 판단할 수 있다.
한편, 제어부(130)는 원격 제어 장치의 제어에 따라 하이라이트 표시된 오브젝트가 복수 번 변경되는 경우에 복수의 피드백 신호를 전송할 수 있다. 이에 대하여, 도면을 참조하여 설명하기로 한다.
도 7 및 도 8은 본 발명의 일 실시 예에 따른 복수의 피드백 신호를 전송하는 디스플레이 장치를 도시한 도면이다.
도 7을 참조하면, 제어부(130)는 원격 제어 장치(730)의 제어에 따라 하이라이트(720) 표시된 오브젝트가 한 번 변경되는 경우 1차 피드백 신호를 원격 제어 장치(730)로 전송할 수 있다.
즉, 사용자가 원격 제어 장치(730)을 사용하여 터치 패드의 일정 부분까지만 드래깅하면, 제어부(130)는 드래깅 거리 및 드래깅 방향에 따라 하이라이트(720) 표시를 한 칸씩 드래깅 방향에 대응되는 방향으로 움직여 디스플레이할 수 있다.
그리고 제어부(130)는 하이라이트(720) 표시를 한 칸씩 움직일 때마다 피드백 신호를 원격 제어 장치(730)로 전송하여 햅틱 액츄에이터를 구동시킬 수 있고, 이에 따라 햅틱 피드백이 제공될 수 있다.
한편, 도 8을 참조하면, 제어부(130)는 원격 제어 장치(830)의 제어에 따라 하이라이트(820) 표시된 오브젝트가 복수 번 변경되는 경우 복수 개의 피드백 신호를 원겨 제어 장치(830)로 전송할 수 있다.
즉, 사용자가 원격 제어 장치(830)을 사용하여 터치 패드의 일정 부분 이상의 범위까지 드래깅하면, 제어부(130)는 드래깅 거리 및 드래깅 방향에 따라 하이라이트(820) 표시를 한번에 복수 개의 칸만큼 드래깅 방향에 대응되는 방향으로 움직여 디스플레이할 수 있다.
그리고, 제어부(130)는 하이라이트(820) 표시를 한번에 복수 번 움직일 때 복수 번의 피드백 신호를 원격 제어 장치(830)로 전송하여 햅틱 액츄에이터를 복수 번 구동시킬 수 있고, 이에 따라 햅틱 피드백이 복수 번 제공될 수 있다.
예를 들어, 사용자가 원격 제어 장치(830)를 사용하여 디스플레이부 상에서 하이라이트(820) 표시가 한번에 두 칸 이동시키기 위한 드래깅 조작을 입력하면, 제어부(130)는 디스플레이부 상에서 하이라이트(820) 표시가 한번에 두 칸 이동하는 동안 1차 피드백 및 2차 피드백 신호를 원격 제어 장치(830)로 전송할 수 있다.
즉, 제어부(130)는 원격 제어 장치(830)의 터치 패드 상에서 입력되는 드래깅 조작 범위를 기 설정된 범위로 구분하고 기 설정된 범위마다 햅틱 피드백을 복수 번 제공할 수 있도록 피드백 신호를 원격 제어 장치(830)로 전송할 수 있다.
이에 따라, 사용자는 디스플레이 장치의 화면을 보지 않고도, 햅틱 피드백만으로 몇 번째 아이콘이 지정되는지 알 수 있다.
한편, 상술한 예에서는 포인터를 움직이거나, 복수의 오브젝트 중 하나를 선택하는 경우만을 설명하였으나, 이에 한정되지 않는다.
예를 들면, 디스플레이 장치(100)에서 동영상을 디스플레이하는 경우, 사용자는 원격 제어 장치에 구비된 터치 패드 상에서 드래깅하는 사용자 조작이 입력되면, 드래깅 방향에 따라 빨리 감기 기능을 실행할 수도 있고 또는 배속으로 써칭하는 기능을 수행할 수도 있다.
즉, 터치 패드 상에서 입력되는 드래깅하는 사용자 조작은 단지 포인터를 이동시키거나, 복수의 오브젝트 중 하나를 선택하는데 한정되지 않고, 각각의 실행되는 프로그램 상에서 각각 다른 기능을 수행할 수 있다.
한편, 도 9는 본 발명의 일 실시 예에 따른 원격 제어 장치의 구성을 도시한 블럭도이다.
원격 제어 장치(900)는 입력부(910), 통신부(920), 햅틱 액츄에이터(930) 및 제어부(940)를 포함할 수 있다.
원격 제어 장치(900)는 일반적인 리모컨 또는 어플리케이션 프로그램에 의해 디스플레이 장치(100)를 제어할 수 있는 스마트 폰 등과 같이 다양한 형태로 구현될 수 있다.
입력부(910)는 사용자 조작을 입력받을 수 있다. 여기서, 사용자 조작을 입력받을 수 있는 입력부(910)는 상술한 바와 같이 일 예로 터치 패드만을 들었으나, 터치 패드에 한정되는 것은 아니며, 터치 버튼 키의 경우에도 적용될 수 있다.
통신부(920)는 사용자 조작에 따른 제어 신호를 디스플레이 장치(100)로 전송할 수 있다. 여기서, 통신부(920)는 사용자 조작에 따른 제어 신호가 볼륨 조절이나 채널 변경과 같은 단방향 통신만으로도 수행할 수 있는 경우에는 IR 신호를 사용하여 전송할 수 있고, 사용자 조작에 따른 제어 신호를 전송하고 피드백 신호를 수신받는 경우에는 단방향 통신만으로는 수행할 수 없으므로, 양방향 통신을 사용하여야 한다. 이때, 양방향 통신으로는, WiFi, 블루투스, RF 등이 사용될 수 있다.
햅틱 액츄에이터(930)는 햅틱 피드백을 제공할 수 있다. 여기서, 햅틱 피드백이라 함은 휴대용 기기에 진동이나 힘, 충격을 발생시킴으로써 사용자의 촉감을 느낄 수 있게 하는 기술로서, 컴퓨터 촉각 기술이라고도 한다.
또한 햅틱 액츄에이터(930)는 제어부(130)의 제어에 의해 기 설정된 이벤트에 따라 진동 조건(예를 들어, 진동 주파수, 진동 길이, 진동 강도, 진동 파형, 진동 위치 등)을 상이하게 적용하여 다양한 피드백을 제공할 수 있다. 이때, 진동 방식을 상이하게 적용하여 다양한 햅틱 피드백을 생성하는 방법은 종래의 기술이므로 자세한 설명은 생략한다.
또한, 햅틱 액츄에이터(930)는 원격 제어 장치(900)의 앞면(리모컨 상에서 터치 패드가 존재하는 면)에 햅틱 피드백을 제공할 수 있을 뿐 아니라, 뒷면에도 햅틱 피드백을 제공할 수 있다. 또한, 햅틱 액츄에이터(930)는 원격 제어 장치(900) 전체에 햅틱 피드백을 제공할 수 있으나, 이는 일 실시 에에 불과할 뿐, 원격 제어 장치(900)의 일부 영역(예를 들어, 터치 지점, 테두리 부분)에만 햅틱 피드백을 제공할 수 있다.
한편, 상술한 예에서는, 햅틱 액츄에이터(930)가 진동 센서를 이용하여 햅틱 피드백을 제공하는 것으로 설명하였으나, 이는 일 실시 예에 불과할 뿐, 피에조 센서(piezo sensor)를 이용하여 햅틱 피드백을 제공할 수도 있다.
제어부(940)는 디스플레이 장치(100)의 동작 모드에 따라 선택적으로 햅틱 액츄에이터(930)를 구동시켜 햅틱 피드백을 제공할 수 있다.
구체적으로, 디스플레이 장치(100)가 디스플레이부(110)에 포인터를 표시하고 원격 제어 장치(900)의 제어에 따라 포인터를 이동시키는 제1 동작 모드인 경우 원격 제어 장치(900)의 제어부(940)는 햅틱 액츄에이터(930)를 구동시키지 않는다.
물론, 디스플레이 장치(100)가 제1 동작 모드인 경우에는 디스플레이 장치(100)도 원격 제어 장치(900)로 햅틱 액츄에이터(930)를 구동시키기 위한 피드백 신호를 전송하지 않는다.
한편, 디스플레이 장치(100)가 디스플레이부(110)에 복수의 오브젝트를 표시하고 원격 제어 장치(900)의 제어에 따라 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드인 경우, 디스플레이 장치(100)의 제어부(130)는 원격 제어 장치(900)로 햅틱 액츄에이터(930)를 구동시키기 위한 피드백 신호를 전송할 수 있고, 이에 따라, 원격 제어 장치(900)의 제어부(940)는 햅틱 액츄에이터(930)를 구동시켜 햅틱 피드백을 제공할 수 있다.
또한, 제어부(940)는 디스플레이 장치(100)가 제2 동작 모드로 동작하는 상태에서, 복수의 오브젝트 중에서 하이라이트 표시된 오브젝트를 변경하기 위한 사용자 조작이 입력될 때마다 햅틱 피드백을 제공할 수 있다.
이때, 제어부(940)는 복수의 오브젝트 중에서 하이라이트 표시된 오브젝트를 변경하기 위한 사용자 조작이 입력될 때마다 디스플레이 장치(100)로부터 피드백 신호를 수신하고, 수신된 피드백 신호에 따라 햅틱 피드백을 제공할 수 있다.
또한, 제어부(940)는 디스플레이 장치(100)가 제1 동작 모드에서 제2 동작 모드로 변경되는 때, 피드백 신호를 한 번만 수신하면, 이때부터는 복수의 오브젝트 중에서 하이라이트 표시된 오브젝트를 변경하기 위한 사용자 조작이 입력될 때마다 디스플레이 장치(100)로부터 피드백 신호를 수신하지 않아도, 입력된 사용자 조작에 대해 지속적으로 햅틱 피드백을 제공할 수 있다.
즉, 제어부(940)는 디스플레이 장치(100)가 제1 동작 모드에서 제2 동작 모드로 변경되는 때, 피드백 신호를 한 번만 수신하면, 사용자 조작이 입력될 때마다 자체적으로 햅틱 피드백을 제공할 수 있다.
도 10은 본 발명의 일 실시 예에 따른 원격 제어 장치의 구성을 상세하게 도시한 블럭도이다.
도 10을 참조하면, 원격 제어 장치(900)는 터치 버튼(1010), 제어부(1020), 통신부(1030), 햅틱 액츄에이터(1040) 및 터치 패드(1050)를 포함할 수 있다.
터치 버튼(1010) 및 터치 패드(1050)는 사용자 조작을 입력받을 수 있으며, 특히, 터치 패드(1050)는 사용자의 터치 입력을 입력받아 좌표 데이터를 출력할 수 있다.
또한, 통신부(1030)는 디스플레이 장치(100)와 양방향 및 단방향 통신을 할 수 있다.
또한, 햅틱 액츄에이터(1040)는 사용자에게 진동과 같은 피드백을 줄 수 있다.
그리고, 제어부(1020)는 상술한 바와 같이 디스플레이 장치(100)의 동작 모드에 따라 선택적으로 햅틱 액츄에이터를 구동시켜 햅틱 피드백을 제공할 수 있다.
한편, 도면에는 도시하지 않았지만, 원격 제어 장치(900)가 복수 개인 경우에도 디스플레이 장치(100)는 복수의 원격 제어 장치(900)로 피드백 신호를 전송하여 각각의 원격 제어 장치(900)가 햅틱 피드백을 제공하도록 할 수 있다.
또한, 3D 영상을 디스플레이하는 디스플레이 장치의 경우 사용자 1,2가 각각 다른 영상을 시청하는 듀얼 디스플레이 모드인 경우에도, 사용자 1,2는 서로 다른 원격 제어 장치(900)를 사용할 수 있고, 디스플레이 장치(100)는 각각의 원격 제어 장치(900)로 개별적으로 피드백 신호를 전송하여, 각각의 원격 제어 장치(900)가 햅틱 피드백을 제공하도록 할 수도 있다.
한편, 도 11은 본 발명의 일 실시 예에 따른 디스플레이 장치의 제어 방법을 설명하기 위한 흐름도이다.
도 11에 도시된 방법에 따르면, 햅틱 피드백을 제공하기 위한 햅틱 액츄에이터를 포함하는 원격 제어 장치와 통신을 수행할 수 있다(S1110).
그리고, 복수의 동작 모드 중에서 사용자가 선택한 동작 모드로 동작할 수 있다(S1120).
여기서, 사용자가 선택한 동작 모드로 동작하는 단계는, 복수의 동작 모드 중에서 햅틱 피드백을 제공하도록 설정된 적어도 하나의 동작 모드에서 햅틱 액츄에이터를 구동시키기 위한 피드백 신호를 원격 제어 장치로 전송할 수 있다.
또한, 복수의 동작 모드는 디스플레이부에 포인터를 표시하고 원격 제어 장치의 제어에 따라 포인터를 이동시키는 제1 동작 모드 및 디스플레이부에 복수의 오브젝트를 표시하고 원격 제어 장치의 제어에 따라 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드를 포함한다.
그리고, 사용자가 선택한 동작 모드로 동작하는 단계는, 제2 동작 모드에서 피드백 신호를 원격 제어 장치로 전송할 수 있다.
또한, 사용자가 선택한 동작 모드로 동작하는 단계는, 제2 동작 모드에서 원격 제어 장치로부터 제어 신호가 수신될 때마다 피드백 신호를 원격 제어 장치로 전송할 수 있다.
또한, 사용자가 선택한 동작 모드로 동작하는 단계는, 제1 동작 모드에서 제2 동작 모드로 변경되면 피드백 신호를 원격 제어 장치로 전송하여 제2 동작 모드로 동작하는 동안에 원격 제어 장치가 햅틱 피드백을 지속적으로 제공하도록 할 수 있다.
또한, 사용자가 선택한 동작 모드로 동작하는 단계는, 제2 동작 모드에서는 복수의 오브젝트 중에서 하나의 오브젝트를 하이라이트 표시하고, 원격 제어 장치의 제어에 따라 하이라이트 표시된 오브젝트가 변경될 때마다 피드백 신호를 전송할 수 있다.
한편, 원격 제어 장치는 터치 패드를 포함하며, 사용자가 선택한 동작 모드로 동작하는 단계는, 제1 동작 모드에서 터치 패드를 터치하여 드래깅하는 사용자 조작이 입력되면, 터치 좌표 및 드래깅 궤적에 따라 포인터를 이동시키고, 제2 동작 모드에서 터치 패드를 터치하여 드래깅하는 사용자 조작이 입력되면 드래깅 거리 및 드래깅 방향에 따라 하이라이트 표시된 오브젝트를 변경할 수 있다.
도 12는 본 발명의 일 실시 예에 따른 원격 제어 장치의 제어 방법을 설명하기 위한 흐름도이다.
도 12에 도시된 방법에 따르면, 사용자 조작을 입력받을 수 있다(S1210).
그리고, 사용자 조작에 따른 제어 신호를 디스플레이 장치로 전송할 수 있다(S1220).
또한, 디스플레이 장치의 동작 모드에 따라 선택적으로 햅틱 액츄에이터를 구동시켜 햅틱 피드백을 제공할 수 있다(S1230).
여기서, 햅틱 피드백을 제공하는 단계는, 디스플레이 장치가 포인터를 표시하고 원격 제어 장치의 제어에 따라 포인터를 이동시키는 제1 동작 모드로 동작하는 동안에는 햅틱 액츄에이터를 비구동시키고, 디스플레이 장치가 복수의 오브젝트를 표시하고 원격 제어 장치의 제어에 따라 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드로 동작하는 동안에는 햅틱 액츄에이터를 구동시켜 햅틱 피드백을 제공할 수 있다.
또한, 햅틱 피드백을 제공하는 단계는, 디스플레이 장치가 제2 동작 모드로 동작하는 상태에서 복수의 오브젝트 중에서 하이라이트 표시된 오브젝트를 변경하기 위한 사용자 조작이 입력될 때마다, 햅틱 피드백을 제공할 수 있다.
한편, 본 발명에 따른 제어 방법을 순차적으로 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
일 예로, 햅틱 피드백을 제공하기 위한 햅틱 액츄에이터를 포함하는 원격 제어 장치와 통신을 수행하는 단계 및 복수의 동작 모드 중에서 사용자가 선택한 동작 모드로 동작하는 단계를 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
또한, 일 예로, 사용자 조작에 따른 제어 신호를 디스플레이 장치로 전송하는 단계 및 디스플레이 장치의 동작 모드에 따라 선택적으로 햅틱 액츄에이터를 구동시켜 햅틱 피드백을 제공하는 단계를 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 디스플레이 장치 및 원격 제어 장치에 대해 도시한 상술한 블록도에서는 버스(bus)를 미도시하였으나, 디스플레이 장치 및 원격 제어 장치에서 각 구성요소 간의 통신은 버스를 통해 이루어질 수도 있다. 또한, 각 디바이스에는 상술한 다양한 단계를 수행하는 CPU, 마이크로 프로세서 등과 같은 프로세서가 더 포함될 수도 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100: 디스플레이 장치 110: 디스플레이부
120: 통신부 130: 제어부
900: 원격 제어 장치 910: 입력부
920: 통신부 930: 햅틱 액츄에이터
940: 제어부

Claims (18)

  1. 디스플레이 장치에 있어서,
    디스플레이부;
    햅틱 피드백을 제공하기 위한 햅틱 액츄에이터를 포함하는 원격 제어 장치와 통신을 수행하기 위한 통신부; 및
    복수의 동작 모드 중에서 사용자가 선택한 동작 모드로 동작하는 제어부;를 포함하며,
    상기 제어부는,
    상기 복수의 동작 모드 중에서 상기 햅틱 피드백을 제공하도록 설정된 적어도 하나의 동작 모드에서, 상기 햅틱 액츄에이터를 구동시키기 위한 피드백 신호를 상기 통신부를 통해 상기 원격 제어 장치로 전송하는 것을 특징으로 하는 디스플레이 장치.
  2. 제1항에 있어서,
    상기 복수의 동작 모드는,
    상기 디스플레이부에 포인터를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 포인터를 이동시키는 제1 동작 모드 및 상기 디스플레이부에 복수의 오브젝트를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드를 포함하며,
    상기 제어부는,
    상기 제2 동작 모드에서, 상기 피드백 신호를 상기 원격 제어 장치로 전송하는 것을 특징으로 하는 디스플레이 장치.
  3. 제2항에 있어서,
    상기 제어부는,
    상기 제2 동작 모드에서 상기 원격 제어 장치로부터 제어 신호가 수신될 때마다 상기 피드백 신호를 상기 원격 제어 장치로 전송하는 것을 특징으로 하는 디스플레이 장치.
  4. 제2항에 있어서,
    상기 제어부는,
    상기 제1 동작 모드에서 상기 제2 동작 모드로 변경되면 상기 피드백 신호를 상기 원격 제어 장치로 전송하여 상기 제2 동작 모드로 동작하는 동안에 상기 원격 제어 장치가 상기 햅틱 피드백을 지속적으로 제공하도록 하는 것을 특징으로 하는 디스플레이 장치.
  5. 제2항에 있어서,
    상기 제어부는,
    상기 제2 동작 모드에서는 상기 복수의 오브젝트 중에서 하나의 오브젝트를 하이라이트 표시하고, 상기 원격 제어 장치의 제어에 따라 상기 하이라이트 표시된 오브젝트가 변경될 때마다 상기 피드백 신호를 전송하는 것을 특징으로 하는 디스플레이 장치.
  6. 제5항에 있어서,
    상기 원격 제어 장치는 터치 패드를 포함하며,
    상기 제어부는,
    상기 제1 동작 모드에서 상기 터치 패드를 터치하여 드래깅하는 사용자 조작이 입력되면, 터치 좌표 및 드래깅 궤적에 따라 상기 포인터를 이동시키고,
    상기 제2 동작 모드에서 상기 터치 패드를 터치하여 드래깅하는 사용자 조작이 입력되면, 드래깅 거리 및 드래깅 방향에 따라 상기 하이라이트 표시된 오브젝트를 변경하는 것을 특징으로 하는 디스플레이 장치.
  7. 원격 제어 장치에 있어서,
    사용자 조작을 입력받기 위한 입력부;
    상기 사용자 조작에 따른 제어 신호를 디스플레이 장치로 전송하기 위한 통신부;
    햅틱 피드백을 제공하기 위한 햅틱 액츄에이터; 및
    상기 디스플레이 장치의 동작 모드에 따라 선택적으로 상기 햅틱 액츄에이터를 구동시켜, 상기 햅틱 피드백을 제공하는 제어부;를 포함하는 원격 제어 장치.
  8. 제7항에 있어서,
    상기 제어부는,
    상기 디스플레이 장치가 포인터를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 포인터를 이동시키는 제1 동작 모드로 동작하는 동안에는 상기 햅틱 액츄에이터를 비구동시키고,
    상기 디스플레이 장치가 복수의 오브젝트를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드로 동작하는 동안에는 상기 햅틱 액츄에이터를 구동시켜 상기 햅틱 피드백을 제공하는 것을 특징으로 하는 원격 제어 장치.
  9. 제8항에 있어서,
    상기 제어부는,
    상기 디스플레이 장치가 상기 제2 동작 모드로 동작하는 상태에서, 상기 복수의 오브젝트 중에서 하이라이트 표시된 오브젝트를 변경하기 위한 사용자 조작이 입력될 때마다 상기 햅틱 피드백을 제공하는 것을 특징으로 하는 원격 제어 장치.
  10. 디스플레이 장치의 제어 방법에 있어서,
    햅틱 피드백을 제공하기 위한 햅틱 액츄에이터를 포함하는 원격 제어 장치와 통신을 수행하는 단계; 및
    복수의 동작 모드 중에서 사용자가 선택한 동작 모드로 동작하는 단계;를 포함하며,
    상기 사용자가 선택한 동작 모드로 동작하는 단계는,
    상기 복수의 동작 모드 중에서 상기 햅틱 피드백을 제공하도록 설정된 적어도 하나의 동작 모드에서 상기 햅틱 액츄에이터를 구동시키기 위한 피드백 신호를 상기 원격 제어 장치로 전송하는 것을 특징으로 하는 제어 방법.
  11. 제10항에 있어서,
    상기 복수의 동작 모드는,
    상기 디스플레이부에 포인터를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 포인터를 이동시키는 제1 동작 모드 및 상기 디스플레이부에 복수의 오브젝트를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드를 포함하며,
    상기 사용자가 선택한 동작 모드로 동작하는 단계는,
    상기 제2 동작 모드에서 상기 피드백 신호를 상기 원격 제어 장치로 전송하는 것을 특징으로 하는 제어 방법.
  12. 제11항에 있어서,
    상기 사용자가 선택한 동작 모드로 동작하는 단계는,
    상기 제2 동작 모드에서 상기 원격 제어 장치로부터 제어 신호가 수신될 때마다 상기 피드백 신호를 상기 원격 제어 장치로 전송하는 것을 특징으로 하는 제어 방법.
  13. 제11항에 있어서,
    상기 사용자가 선택한 동작 모드로 동작하는 단계는,
    상기 제1 동작 모드에서 상기 제2 동작 모드로 변경되면 상기 피드백 신호를 상기 원격 제어 장치로 전송하여 상기 제2 동작 모드로 동작하는 동안에 상기 원격 제어 장치가 상기 햅틱 피드백을 지속적으로 제공하도록 하는 것을 특징으로 하는 제어 방법.
  14. 제11항에 있어서,
    상기 사용자가 선택한 동작 모드로 동작하는 단계는,
    상기 제2 동작 모드에서는 상기 복수의 오브젝트 중에서 하나의 오브젝트를 하이라이트 표시하고, 상기 원격 제어 장치의 제어에 따라 상기 하이라이트 표시된 오브젝트가 변경될 때마다 상기 피드백 신호를 전송하는 것을 특징으로 하는 제어 방법.
  15. 제14항에 있어서,
    상기 원격 제어 장치는 터치 패드를 포함하며,
    상기 사용자가 선택한 동작 모드로 동작하는 단계는,
    상기 제1 동작 모드에서 상기 터치 패드를 터치하여 드래깅하는 사용자 조작이 입력되면, 터치 좌표 및 드래깅 궤적에 따라 상기 포인터를 이동시키고,
    상기 제2 동작 모드에서 상기 터치 패드를 터치하여 드래깅하는 사용자 조작이 입력되면, 드래깅 거리 및 드래깅 방향에 따라 상기 하이라이트 표시된 오브젝트를 변경하는 것을 특징으로 하는 제어 방법.
  16. 원격 제어 장치의 제어 방법에 있어서,
    사용자 조작을 입력받는 단계;
    상기 사용자 조작에 따른 제어 신호를 디스플레이 장치로 전송하는 단계; 및
    상기 디스플레이 장치의 동작 모드에 따라 선택적으로 햅틱 액츄에이터를 구동시켜 햅틱 피드백을 제공하는 단계;를 포함하는 제어 방법.
  17. 제16항에 있어서,
    상기 햅틱 피드백을 제공하는 단계는,
    상기 디스플레이 장치가 포인터를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 포인터를 이동시키는 제1 동작 모드로 동작하는 동안에는 상기 햅틱 액츄에이터를 비구동시키고,
    상기 디스플레이 장치가 복수의 오브젝트를 표시하고 상기 원격 제어 장치의 제어에 따라 상기 복수의 오브젝트 중 하나를 선택할 수 있는 제2 동작 모드로 동작하는 동안에는 상기 햅틱 액츄에이터를 구동시켜 상기 햅틱 피드백을 제공하는 것을 특징으로 하는 제어 방법.
  18. 제17항에 있어서,
    상기 햅틱 피드백을 제공하는 단계는,
    상기 디스플레이 장치가 상기 제2 동작 모드로 동작하는 상태에서 상기 복수의 오브젝트 중에서 하이라이트 표시된 오브젝트를 변경하기 위한 사용자 조작이 입력될 때마다, 상기 햅틱 피드백을 제공하는 것을 특징으로 하는 제어 방법.
KR20130103695A 2013-08-30 2013-08-30 디스플레이 장치, 원격 제어 장치 및 그 제어 방법 KR20150025721A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20130103695A KR20150025721A (ko) 2013-08-30 2013-08-30 디스플레이 장치, 원격 제어 장치 및 그 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20130103695A KR20150025721A (ko) 2013-08-30 2013-08-30 디스플레이 장치, 원격 제어 장치 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20150025721A true KR20150025721A (ko) 2015-03-11

Family

ID=53021891

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130103695A KR20150025721A (ko) 2013-08-30 2013-08-30 디스플레이 장치, 원격 제어 장치 및 그 제어 방법

Country Status (1)

Country Link
KR (1) KR20150025721A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3098796A1 (en) * 2015-05-29 2016-11-30 Samsung Electronics Co., Ltd. Remote control apparatus, method of providing vibration feedback thereof, and display system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3098796A1 (en) * 2015-05-29 2016-11-30 Samsung Electronics Co., Ltd. Remote control apparatus, method of providing vibration feedback thereof, and display system
CN106210814A (zh) * 2015-05-29 2016-12-07 三星电子株式会社 遥控装置、提供遥控装置的振动反馈的方法以及显示系统

Similar Documents

Publication Publication Date Title
US9519350B2 (en) Interface controlling apparatus and method using force
EP2733575B1 (en) System and method for feedforward and feedback with haptic effects
US9015584B2 (en) Mobile device and method for controlling the same
EP2357551A2 (en) Information processing apparatus controlled by touch gestures performed on a remote device, corresponding information processing method and program
KR102441357B1 (ko) 디스플레이 장치 및 그 제어 방법
US20150193036A1 (en) User terminal apparatus and control method thereof
US20160349946A1 (en) User terminal apparatus and control method thereof
KR20130108843A (ko) 휴대단말기의 스크린 관리 방법 및 장치
KR20150037014A (ko) 전자장치 및 전자장치의 사용자 인터페이스 제공방법
EP2341492B1 (en) Electronic device including touch screen and operation control method thereof
US20100162155A1 (en) Method for displaying items and display apparatus applying the same
JP6102474B2 (ja) 表示装置、入力制御方法、及び入力制御プログラム
EP2998838A1 (en) Display apparatus and method for controlling the same
US10908868B2 (en) Data processing method and mobile device
EP3016400A2 (en) Display apparatus, system, and controlling method thereof
US10416848B2 (en) User terminal, electronic device, and control method thereof
JP2018514014A (ja) 複数のオペレーティングシステムを駆動するデバイス、及びその方法
JP2013161181A (ja) 表示制御装置および表示制御装置の制御方法
US20180348994A1 (en) Display device and computer-readable non-transitory recording medium with display control program stored thereon
KR20150025721A (ko) 디스플레이 장치, 원격 제어 장치 및 그 제어 방법
JP2016133978A (ja) 情報処理装置、情報処理方法及びプログラム
KR20120030644A (ko) 기기 모니터 형태의 터치 디스플레이 리모컨을 이용한 기기 제어 시스템 및 방법
WO2018167860A1 (ja) タッチジェスチャ判定装置、タッチジェスチャ判定方法、タッチジェスチャ判定プログラム、及びタッチパネル入力装置
KR102125100B1 (ko) 웨어러블 디바이스의 제어 방법 및 그 장치
US10983658B2 (en) Cursor control system and cursor control method

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination