KR20150039026A - 디스플레이 장치의 동작 방법 - Google Patents

디스플레이 장치의 동작 방법 Download PDF

Info

Publication number
KR20150039026A
KR20150039026A KR20130117526A KR20130117526A KR20150039026A KR 20150039026 A KR20150039026 A KR 20150039026A KR 20130117526 A KR20130117526 A KR 20130117526A KR 20130117526 A KR20130117526 A KR 20130117526A KR 20150039026 A KR20150039026 A KR 20150039026A
Authority
KR
South Korea
Prior art keywords
display device
screen
user
terminal
display
Prior art date
Application number
KR20130117526A
Other languages
English (en)
Inventor
조용진
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR20130117526A priority Critical patent/KR20150039026A/ko
Publication of KR20150039026A publication Critical patent/KR20150039026A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Telephone Function (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명은 카메라를 통해 사용자의 손모양을 감지하는 단계, 상기 손모양에 대응하는 타 단말기를 검색하고, 검색된 단말기와 근거리 무선 통신을 수행하는 단계, 상기 타 단말기의 동작 화면을 표시하는 단계를 포함하는 디스플레이 장치의 동작방법에 관한 것이다.

Description

디스플레이 장치의 동작 방법{Operation method for Display apparatus}
본 발명은 디스플레이 장치 및 그 동작 방법에 관한 것이며, 더욱 상세하게는 사용자의 손모양을 감지하여 상기 손모양과 대응되는 단말기와 페어링하여 단말기의 화면을 표시하는 디스플레이 장치 및 그 동작 방법에 관한 것이다.
디스플레이 장치는 영상을 표시하는 장치로, 점점 다양한 기능들을 갖추게 되고 있고, 종합적인 멀티미디어 기기(multimedia player)로 구현되고 있다.
한편, 디스플레이 장치를 통해, 영상을 표시하면서, 입력을 통해, 표시되는 영상과 관련된, 동작을 수행하고자 하는 요구가 증대되고 있다.
또한, 디스플레이 장치는 다양한 크기와 형상으로 구현되고 있으며, 휴대가 간편하도록 핸드-헬드(hand-held) 타입(type)뿐만 아니라, 시계 타입, 안경 타입에 대한 연구가 증가하고 있다.
또한, 최근 무선 네트워크 기술이 빠르게 향상되면서 디스플레이 장치에도 무선 네트워크 기술이 적용되고 있고, 기존 단말기와의 인터페이스를 위한 연구도 확대되고 있다.
본 발명이 해결하고자 하는 과제는 사용자 이용 편의성을 향상시킬 수 있는 디스플레이 장치 및 그 동작 방법을 제공하는 것이다.
본 발명의 또 다른 과제는 사용자의 손모양을 감지하여 상기 손모양과 대응되는 단말기와 페어링하여 단말기의 화면을 표시하는 디스플레이 장치 및 그 동작 방법을 제공하는 것이다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 디스플레이 장치의 동작 방법은, 카메라를 통해 사용자의 손모양을 감지하는 단계, 상기 손모양에 대응하는 타 단말기를 검색하고, 검색된 단말기와 근거리 무선 통신을 수행하는 단계, 상기 타 단말기의 동작 화면을 표시하는 단계를 포함한다.
본 발명의 실시예에 따르면 다음과 같은 효과가 하나 혹은 그 이상 있다.
첫째,　손모양의 감지만으로 간편하게 다른 단말기와 페어링하는 장점이 있다.
둘째,　디스플레이 장치의 사용자가 편리하게 페어링된 단말기의 화면을 볼 수 있는 장점도 있다.
셋째, 디스플레이 장치와 페어링된 단말기의 이벤트 발생시 사용자가 단말기의 조작 없이 이벤트를 컨트롤할 수 있는 장점도 있다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 블록도이다.
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치(100)를 전면 사시도이다.
도 3는 도 2에 도시된 디스플레이 장치(100)의 후면 사시도이다.
도 4는 본 발명의 실시예에 따른 디스플레이 장치의 제어 방법의 순서도이다.
도 5a 내지 도 5d는 본 발명의 실시예에 따라 디스플레이 장치(100)가 단말기와 대응하는 손모양을 감지하는 동작을 설명하는 도면이다.
도 6a 내지 도 6b는 본 발명의 실시예에 따라 디스플레이 장치(100)의 페어링 동작을 설명하는 도면이다.
도 7a 내지 도 7b는 본 발명의 실시예에 따라 표시된 화면이 이동하는 동작을 설명하는 도면이다.
도 8a 내지 도 8d는 본 발명의 실시예에 따라 표시된 화면의 크기를 조절하는 동작을 설명하는 도면이다.
도 9a 내지 도 9c는 본 발명의 실시예에 따라 단말기와 페어링이 종료되는 동작을 설명하는 도면이다.
도 10은 본 발명의 실시예에 따른 디스플레이 장치의 제어 방법의 순서도이다.
도 11a 내지 도 11e는 본 발명의 실시예에 따라, 스마트 폰과 페어링 동작 중에 이벤트 발생하는 경우 디스플레이 장치(100)의 동작을 설명하는 도면이다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 블록도이다. 도 1을 참조하여 본 발명의 일 실시 예에 따른 디스플레이 장치를 기능에 따른 구성요소 관점에서 살펴보면 다음과 같다.
도 1을 참조하면, 디스플레이 장치(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180), 음성 인식부(182) 및 전원 공급부(190)를 포함할 수 있다. 이와 같은 구성요소들은 실제 응용에서 구현될 때 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다.
무선 통신부(110)는 방송수신 모듈(111), 이동통신 모듈(113), 무선 인터넷 모듈(115), 근거리 통신 모듈(117), 및 GPS 모듈(119) 등을 포함할 수 있다.
무선 통신부(110)는 디스플레이 장치(100)에 유선 또는 무선으로 연결되는 모든 외부기기와의 인터페이스 역할을 수행한다. 무선 통신부(110)는 이러한 외부 기기로부터 데이터를 전송 받거나 전원을 공급받아 디스플레이 장치(100) 내부의 각 구성 요소에 전달할 수 있고, 디스플레이 장치(100) 내부의 데이터가 외부 기기로 전송되도록 할 수 있다.
방송수신 모듈(111)은 방송 채널을 통하여 외부의 방송관리 서버로부터 방송 신호 및 방송관련 정보 중 적어도 하나를 수신한다. 이때, 방송 채널은 위성 채널, 지상파 채널 등을 포함할 수 있다. 방송관리 서버는, 방송 신호 및 방송 관련 정보 중 적어도 하나를 생성하여 전송하는 서버나, 기 생성된 방송 신호 및 방송관련 정보 중 적어도 하나를 제공받아 단말기에 전송하는 서버를 의미할 수 있다.
방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다. 방송관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 방송관련 정보는, 이동통신망을 통하여도 제공될 수 있으며, 이 경우에는 이동통신 모듈(113)에 의해 수신될 수 있다. 방송관련 정보는 다양한 형태로 존재할 수 있다.
방송수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 또한, 방송수신 모듈(111)은, 이와 같은 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 모든 방송 시스템에 적합하도록 구성될 수 있다. 방송수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.
이동통신 모듈(113)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호, 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
무선 인터넷 모듈(115)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 무선 인터넷 모듈(115)은 디스플레이 장치(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.
근거리 통신 모듈(117)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), NFC(Near Field Communication) 등이 이용될 수 있다.
GPS(Global Position System) 모듈(119)은 복수 개의 GPS 인공위성으로부터 위치 정보를 수신한다.
A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(123) 등이 포함될 수 있다. 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 그리고, 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.
카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는 단말기의 구성 태양에 따라 2개 이상이 구비될 수도 있다.
마이크(123)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리한다. 그리고, 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(113)를 통하여 이동통신 기지국으로 전송 가능한 형태로 변환되어 출력될 수 있다. 마이크 (123)는 외부의 음향 신호를 입력 받는 과정에서 발생하는 잡음(noise)를 제거하기 위한 다양한 잡음 제거 알고리즘이 사용될 수 있다.
출력부(150)는 오디오 신호 또는 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 것이다. 출력부(150)에는 디스플레이부(151), 음향출력 모듈(153), 및 알람부(155) 등이 포함될 수 있다.
디스플레이부(151)는 디스플레이 장치(100)에서 처리되는 정보를 표시 출력한다. 예를 들어 디스플레이 장치(100)가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 그리고 디스플레이 장치(100)가 화상 통화 모드 또는 촬영 모드인 경우, 촬영되거나 수신된 영상을 각각 혹은 동시에 표시할 수 있으며, UI, GUI를 표시한다.
디스플레이부(151)는 평상시에는 유리처럼 투명한 상태일 수 있다. 즉, 투명 디스플레이부(151)의 표시면을 통하여 그 뒷면의 주위 사물을 관찰할 수 있음을 의미한다. 다만, 이때 사용한 "투명"이라는 의미는, 광이 100% 투과된다는 의미는 아니다. 즉, 100%의 광투과율 및 실질적으로 투명이라고 느낄 수 있는 상태까지 포함함을 의미한다.
평상시에 투명한 상태에 있던 디스플레이부(151)에 포함된 투명전자소자에 제어부(180)로부터의 제어 신호가 인가되면, 영상이 표시될 수 있다. 즉, 디스플레이(151)를 통하여 볼 수 있는 사물의 영상이 상대적으로 흐릿해지는 대신에, 그 위치에 사용자가 원하는 영상이 표시됨을 의미한다.
음향출력 모듈(153)은 호 신호 수신, 통화 모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력한다. 또한, 음향출력 모듈(153)은 디스플레이 장치(100)에서 수행되는 기능, 예를 들어, 호 신호 수신음, 메시지 수신음 등과 관련된 음향 신호를 출력한다. 이러한 음향출력 모듈(153)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.
알람부(155)는 디스플레이 장치(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 디스플레이 장치(100)에서 발생하는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력 등이 있다. 알람부(155)는 오디오 신호나 비디오 신호 이외에 다른 형태로 이벤트 발생을 알리기 위한 신호를 출력한다. 알람부(155)는 호 신호가 수신되거나 메시지가 수신된 경우, 이를 알리기 위해 신호를 출력할 수 있다. 또한, 알람부(155)는 키 신호가 입력된 경우, 키 신호 입력에 대한 피드백으로 신호를 출력할 수 있다. 이러한 알람부(155)가 출력하는 신호를 통해 사용자는 이벤트 발생을 인지할 수 있다. 디스플레이 장치(100)에서 이벤트 발생 알림을 위한 신호는 디스플레이부(151)나 음향출력 모듈(153)를 통해서도 출력될 수 있다.
메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입력되거나 출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다.
메모리(160)는 본 발명에 따른 음성 인식용 데이터 베이스가 구비된다. 상기 음성 인식용 데이터 베이스는 사용자의 다양한 음성 특징 값들과, 상기 음성 특징 값들 별로 디스플레이 장치(100)의 서로 다른 동작 명령이 매핑되어 있다.
메모리(160)에는 본 발명에 따른 적어도 하나의 음성이 태깅된 UI 오브젝트가 다수개 구비된다.
메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 디스플레이 장치(100)는 인터넷(internet)상에서 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.
인터페이스부(170)는 디스플레이 장치(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 수행한다. 디스플레이 장치(100)에 연결되는 외부기기의 예로는, 유/무선 이어 마이크, 외부 충전기, 유/무선 데이터 포트, 메모리 카드(Memory card), SIM(Subscriber Identification Module) 카드, UIM(User Identity Module) 카드 등과 같은 카드 소켓, 오디오 I/O(Input/Output) 단자, 비디오 I/O(Input/Output) 단자, 이어폰 등이 있다. 인터페이스부(170)는 이러한 외부 기기로부터 데이터를 전송 받거나 전원을 공급받아 디스플레이 장치(100) 내부의 각 구성 요소에 전달할 수 있고, 디스플레이 장치(100) 내부의 데이터가 외부 기기로 전송되도록 할 수 있다.
인터페이스부(170)는 디스플레이 장치(100)가 외부 크래들(cradle)과 연결될 때 연결된 크래들로부터의 전원이 디스플레이 장치(100)에 공급되는 통로가 되거나, 사용자에 의해 크래들에서 입력되는 각종 명령 신호가 디스플레이 장치(100)로 전달되는 통로가 될 수 있다.
제어부(180)는 통상적으로 상기 각부의 동작을 제어하여 디스플레이 장치(100)의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 또한, 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 재생 모듈(181)을 구비할 수도 있다. 멀티미디어 재생 모듈(181)은 제어부(180) 내에 하드웨어로 구성될 수도 있고, 제어부(180)와 별도로 소프트웨어로 구성될 수도 있다.
제어부(180)는 통상적으로 상기 각부의 동작을 제어하여 디스플레이 장치(100)의 전반적인 동작을 제어한다. 예를 들어, 디스플레이부(151)에 소정 영상을 출력하도록 영상 신호 처리를 수행할 수 있다.
그 외, 제어부(180)는, 무선 통신부(110)로부터 수신되는 입력 영상에 대한 신호 처리를 수행하거나, 전원 공급부(190) 내에 구비되는 배터리의 전원 제어를 수행할 수도 있다.
음성 인식부(182)는 음성 인식 알고리즘이 적용된 음성 인식 엔진을 구동하여 마이크(123)로 입력된 사용자의 음성을 인식한다.
즉, 음성 인식부(182)는 마이크(123)를 통해 입력되는 사용자의 음성을 디지털 데이터로 변환하고, 상기 디지털 데이터를 증폭(Pre-emphasis)한 후, 상기 디지털 변환된 음성의 시작 지점과 끝 지점을 검출한다.
음성 인식부(182)는 상기 검출한 시작 지점과 끝 지점 사이의 음성에 대한 음성 특징 값들을 추출하고, 메모리(160)에 구비된 음성 인식용 데이터 베이스에서 상기 추출된 음성 특징 값과 매칭되는 디스플레이 장치(100)의 동작을 제어부(180)에게 알려준다. 이때, 상기 음성 특징 값들은, 마이크(123)로부터 입력된 음성의 파형, 음성의 포맷(format) 및 음성의 피치(pitch) 중 적어도 하나를 포함할 수 있다.
일 예로, 상기 음성 인식용 데이터 베이스에서 상기 음성 인식부(182)가 추출한 음성 특징 값과 매칭되는 동작이 "전화번호부"이면, 제어부(180)는 "전화번호부" 메뉴 기능을 실행하고, 디스플레이부(151) 화면 상에 "전화번호부"메뉴를 표시한다.
또한, 상기 음성 인식용 데이터 베이스에서 상기 음성 인식부(182)가 추출한 음성 특징 값과 매칭되는 동작이 "텍스트"이면, 제어부(180)는 디스플레이부(151) 화면 상에 "텍스트"를 표시한다.
상기와 같은, 음성 인식부(182)는 하나의 "모듈" 또는 "유닛" 형태로 디스플레이 장치(100)에 구비될 수 있거나, 또는 메모리(160)에 소프트웨어 형태로 구비될 수 있다. 또한, 음성 인식부(182)는 제어부(180) 내에 포함되어 구성될 수 있고, 이 경우 제어부(180)는 음성 인식부(182)의 동작을 동일하게 수행할 수 있다.
전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가 받아 각 구성요소들의 동작에 필요한 전원을 공급한다.
이와 같은 구성의 디스플레이 장치(100)는 유무선 통신 시스템 및 위성 기반 통신 시스템을 포함하여, 프레임(frame) 또는 패킷(packet)을 통하여 데이터(data)를 전송할 수 있는 통신 시스템에서 동작 가능하도록 구성될 수 있다.
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치(100)를 전면 사시도이고, 도 3는 도 2에 도시된 디스플레이 장치(100)의 후면 사시도이다. 이하에서는 도 2 및 도 3를 참조하여, 본 발명과 관련된 디스플레이 장치(100)를 외형에 따른 구성요소 관점에서 살펴 보기로 한다.
본 명세서에서 기술되는 디스플레이 장치는, 글래스를 통해 외부 대상물을 투과하거나, 글래스의 디스플레이부(151)에 영상을 표시하거나, 외부로 투사 영상을 투사하거나, 또는 이들의 조합일 수도 있다.
도 2를 참조하면, 디스플레이 장치(100)는, 사용자가 착용 가능한 헤드 마운트 타입의 디스플레이 장치(100)를 예시한다. 디스플레이 장치(100)의 외관은 안경 모양일 수 있다. 안경을 구성하는 안경 테의 공간에는 각종 전자부품들이 내장된다.
디스플레이 장치(100)의 외관에는 글래스(125), 디스플레이부(151L, 151R), 음향출력모듈(153), 제1 카메라(121a), 제2 카메라(121b) 및 마이크(123)가 배치될 수 있다.
글래스(125)는 좌안 글래스(125L)와 우안 글래스(125R)를 구비할 수 있다. 좌안 글래스(125L)와 우안 글래스(125R)는, 광을 투과한다. 이에 의해, 디스플레이 장치(100)를 착용한 사용자가 외부 대상물을 육안으로 인식할 수 있게 된다. 즉, 사용자는 글래스(125L,125R)를 통해 투과되는 실제 영상을 인식할 수 있게 된다.
디스플레이부(151L,151R)는, 글래스(110L,110R) 상에 각각 부착될 수 있으나, 이와 달리 다양한 변형이 가능하다. 예를 들어, 디스플레이부(151)는, 좌안 글래스(110L)와 우안 글래스(110R) 중 어느 하나에 부착될 수 있다. 또는 디스플레이부(115L,115R)는, 글래스(110L,110R)와 일체형으로 구성되는 것도 가능하다.
제1 카메라(121a)는 사용자 등에 대한 이미지 또는 동영상을 촬영하기에 적절한 형태로 구현될 수 있다.
제1 카메라(121a)에 인접하게는 플래쉬(미도시)가 추가로 배치될 수도 있다. 또한, 제1 카메라(121a) 인접하게 다른 카메라를 더 설치하여 3차원 입체 영상의 촬영을 위해 사용할 수도 있다.
플래쉬는 제1 카메라(121a)로 피사체를 촬영하는 경우에 상기 피사체를 향해 빛을 비추게 된다.
도 3을 참조하면, 디스플레이 장치(100)의 후면에는 제2 카메라(121b), 마이크(123) 및 음향출력 모듈(153) 추가로 장착될 수 있다.
제2 카메라(121b)는 제1 카메라(121a)와 실질적으로 반대되는 촬영 방향을 가지며, 제1 카메라(121a)와 서로 다른 화소를 가질 수 있다. 제2 카메라(121b)는 사용자의 눈동자의 움직임을 감지할 수 있다. 디스플레이 장치(100)는 제2 카메라(121b)가 감지한 사용자의 눈동자의 움직임을 통하여, 사용자 시선에 따른 동작을 제어할 수 있다.
음향출력 모듈(153)은 리시버 또는 스피커의 형태로 구현될 수 있다.
마이크(123)는 사용자의 음성, 기타 소리 등을 입력 받기 적절한 형태로 구현될 수 있다.
인터페이스부(170)는 외부 기기와 데이터가 교환되는 통로로 사용될 수 있다. 디스플레이 장치(100) 외관의 일 영역에는 통화 등을 위한 안테나 외에 방전송호 수신용 안테나(미도시)가 배치될 수 있다.
디스플레이 장치(100) 외관의 일측에는 디스플레이 장치(100)에 전원을 공급하기 위한 전원 공급부(190)가 장착될 수 있다. 전원 공급부(190)는, 예를 들어 충전 가능한 배터리로서, 충전 등을 위하여 디스플레이 장치(100)에 착탈 가능하게 결합될 수 있다.
이하의 실시예에서는 디스플레이부(115L,115R)와 글래스(110L,110R)가 일체형으로 구성되는 것을 가정하여 설명하나 이에 본 발명의 범위가 제한되지는 아니한다.
도 4는 본 발명의 실시예에 따른 디스플레이 장치의 제어 방법의 순서도이다.
도 4를 참조하면, 디스플레이 장치(100)는 단말기와 대응하는 손모양을 저장한다(S210). 여기서, 단말기는 디스플레이 장치(100)와 통신 연결이 가능한 장치이다. 예를 들면, 단말기에는, 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 카메라, 네비게이션, 타블렛 컴퓨터(tablet computer), 이북(e-book) 단말기, 영상 표시 장치 등이 포함된다.
단말기와 대응하는 손모양은 제조시 디폴트로 설정될 수 있고, 사용자가 설정하여 저장할 수도 있다.
예를 들어, 디스플레이 장치(100)는 스마트 폰을 쥐고 있는 손모양과 스마트 폰(smart phone)을 대응하여 메모리(160)에 저장할 수 있다. 또는, 디스플레이 장치(100)는 양손으로 타블렛 컴퓨터(tablet computer)를 쥐고 있는 손모양과 타블렛 컴퓨터(tablet computer)를 대응하여 메모리(160)에 저장할 수 있다.
또는, 디스플레이 장치(100)는 영상표시장치의 리모컨을 쥐고 있는 손모양과 영상표시장치를 대응하여 메모리(160)에 저장할 수 있다. 또는, 디스플레이 장치(100)는 양손으로 컴퓨터 키보드를 치는 손모양과 노트북 컴퓨터(notebook computer)를 대응하여 메모리(160)에 저장할 수 있다.
디스플레이 장치(100)는 사용자 입력을 수신하여, 카메라(121a, 121b)를 실행한다(S215). 여기서, 사용자 입력은 사용자의 음성명령일 수 있다. 또한, 사용자 입력은 디스플레이 장치(100)에 포함된 사용자 입력부(미도시)를 누르는 동작일 수 있다. 한편, 카메라(121a, 121b)는 디스플레이 장치의 전원구동시 디폴트로 실행될 수도 있다.
디스플레이 장치(100)는 제1 카메라(121a)를 통하여 사용자의 손모양을 감지한다(S220).
사용자의 손모양이 기 설정된 시간 동안 감지된 경우, 디스플레이 장치(100)는 손모양에 대응하는 단말기를 검색하고, 손모양에 대응하는 단말기와 근거리 무선통신을 수행한다(S225,S230).
이때, 근거리 무선 통신 기술로 적외선 통신, 블루투스 통신, 지그비(Zigbee) 통신, UWB(Utra WideBand) 통신, 와이파이 다이렉트(Wi-Fi Direct), NFC(Near Field Communication) 통신 중 적어도 하나를 이용할 수 있다. 이하, 본 실시예에서는, 블루투스 통신 기술을 이용하여 근거리 무선 통신을 수행함을 예시하여 설명하도록 한다.
기설정된 시간은 디스플레이 장치(100)가 사용자의 손모양을 인식하기 위해 사용자 설정에 의한 시간 또는 출고시 디폴트로 설정된 시간이다. 예를 들어, 기설정된 시간을 3초라고 가정하면, 특정 단말기와 페어링 동작을 수행하기 위해 손모양을 3초동안 인식해야 상기 손모양에 대응되는 단말기와 페어링 동작이 수행된다.
기 설정 시간은 사용자의 설정에 의해 다시 설정될 수 있다. 예를 들어, 3초로 기 설정 시간은 사용자에 의해 2초로 다시 설정될 수 있다
이 경우, 디스플레이 장치(100)는 S210단계에서 메모리(160)에 저장된 손모양과 대응하는 단말기와 페어링 동작을 수행한다.
예를 들어, 디스플레이 장치(100)는 스마트 폰을 쥐고 있는 손모양을 2초 동안 감지하는 경우, 스마트 폰을 쥐고 있는 손모양에 대응하는 스마트 폰과 페어링 동작을 수행한다.
또는, 디스플레이 장치(100)는 양손으로 타블렛 컴퓨터를 쥐고 있는 손모양을 2초 동안 감지하는 경우, 양손으로 타블렛 컴퓨터를 쥐고 있는 손모양에 대응하여 타블렛 컴퓨터와 페어링 동작을 수행한다.
또는, 디스플레이 장치(100)는 영상표시장치의 리모컨을 쥐고 있는 손모양을 2초 동안 감지하는 경우, 영상표시장치의 리모컨을 쥐고 있는 손모양에 대응하는 영상표시장치와 페어링 동작을 수행한다.
또는, 디스플레이 장치(100)는 양손으로 컴퓨터 키보드를 치는 손모양을 2초 동안 감지하는 경우, 양손으로 컴퓨터 키보드를 치는 손모양에 대응하는 노트북 컴퓨터와 페어링 동작을 수행한다.
단말기와 페어링이 된 상태에서, 디스플레이 장치(100)는 페어링된 단말기의 동작 화면을 표시한다(S240).
예를 들면, 디스플레이 장치(100)는 스마트 폰과 페어링된 경우, 스마트 폰의 동작 화면을 디스플레이부(151) 일 영역에 표시한다. 또는, 디스플레이 장치(100)는 타블렛 컴퓨터와 페어링된 경우, 타블렛 컴퓨터의 동작 화면을 디스플레이부(151) 일 영역에 표시한다.
또는, 디스플레이 장치(100)는 영상표시장치와 페어링된 경우, 영상표시장치의 동작 화면을 디스플레이부(151) 일 영역에 표시한다. 또는, 디스플레이 장치(100)는 노트북과 페어링된 경우, 노트북의 동작 화면을 디스플레이부(151) 일 영역에 표시한다.
페어링된 단말기의 화면이 표시된 상태에서, 디스플레이 장치(100)는 표시된 화면을 이동하기 위한 사용자 입력의 수신 여부에 대해 판단한다(S245).
표시된 화면을 이동하기 위한 사용자 입력이 수신되는 경우, 디스플레이 장치(100)는 표시된 화면을 이동한다.(S250).
예를 들면, 디스플레이 장치(100)는 제2 카메라(121b)를 통해, 사용자의 눈동자의 움직임을 감지하고, 눈동자의 움직임(또는 사용자의 시선)에 따라, 화면을 이동할 수 있다. 사용자의 눈동자가 좌측으로 이동하게 되면, 디스플레이 장치(100)는 제2 카메라(121b)를 통해 사용자의 눈동자의 움직임을 감지하고, 그에 따라, 디스플레이부(151) 일 부분에 표시된 화면을 좌측으로 이동한다.
또한, 화면의 제1 영역에 사용자의 손가락을 기 설정된 시간만큼(예를 들면, 3초) 위치시킨 후, 손가락을 움직이면, 디스플레이 장치(100)는 사용자 손가락의 움직임을 감지하여, 그에 따라 상하좌우로 화면을 이동할 수 있다. 이경우, 제1 영역은 화면 아래부분이 될 수 있다.
한편, 디스플레이 장치(100)는 사용자의 주먹을 움켜쥐는 손모양을 감지하는 경우, 화면을 현재 위치하는 영역에 고정할 수 있다. 스마트 폰의 화면(431)이 디스플레이부(151) 일 영역에 표시된 상태에서, 디스플레이 장치(100)의 사용자는 주먹을 움켜쥘 수 있다. 이 경우, 디스플레이 장치(100)는 주먹을 움켜쥐는 손모양(433)을 제1 카메라(121a)를 통하여 감지한다. 사용자의 주먹을 움켜쥐는 손모양(433)을 감지하는 경우, 디스플레이 장치(100)는 화면(434)을 현재 위치한 영역에 고정한다. 이때, 디스플레이 장치(100)를 착용한 사용자가 고개를 돌려는 경우, 화면(434)은 상대적으로 디스플레이부(151)에서 사용자가 고개를 돌리는 반대 방향으로 이동한다.
사용자가 고개를 돌려 고정된 화면(434)이 사용자의 시야에 들어오지 않는 경우, 화면(434)은 사라진다. 디스플레이 장치(100)를 착용한 사용자가 다시 고개를 원위치로 돌려, 고정된 화면(434)이 사용자의 시야에 들어오는 경우, 고정된 화면(434)이 디스플레이부(151) 일 영역에 고정된 상태로 표시된다. 만일, 화면이 사라진 상태로, 기 설정된 시간이 경과하게 되면, 페어링 동작 중인 스마트 폰과의 페어링 동작은 종료된다.
S245단계에서, 표시된 화면 이동을 위한 사용자 입력을 수신하지 않은 경우, 디스플레이 장치(100)는 화면 크기를 조절하기 위한 사용자 입력을 수신하는지 판단한다(S252).
화면 크기를 조절하기 위한 사용자 입력을 수신하는 경우, 디스플레이 장치(100)는 사용자의 입력을 수신하여 화면의 크기를 조절할 수 있다(S255).
예를 들면, 디스플레이 장치(100)는 사용자의 손모양을 감지하여, 손모양에 대응하는 단말기와 페어링 동작 하는 상태에서, 페어링된 단말기 화면을 표시한다. 만일, 화면이 표시된 상태에서, 사용자가 손모양을 유지한채, 사용자가 손을 위로 움직이는 경우, 디스플레이 장치(100)는 화면의 크기를 위로 확대한다. 또한, 화면이 표시된 상태에서, 사용자가 손모양을 유지한채, 사용자가 손을 오른쪽으로 움직이는 경우, 디스플레이 장치(100)는 화면의 크기를 오른쪽으로 확대한다.
또 다른 예를 들면, 화면(431)이 표시된 상태에서, 사용자는 화면(431)의 제2 영역에 기 설정된 시간(예를 들면, 3초)동안 손가락을 위치시킬 수 있다. 그 상태에서, 손가락을 상하 좌우로 움직이는 경우, 디스플레이 장치(100)는 화면(431)의 크기를 확대하거나 축소할 수 있다. 예를 들면, 사용자가 화면(431)의 우측 아래쪽 일부분(445)에 3초동안 손가락을 위치시킨 후, 손가락을 위쪽으로 움직이는 경우, 디스플레이 장치(100)는 화면(431)이 위쪽으로 작아지는 동작을 수행한다. 여기서, 제2 영역은 화면(431)의 우측 아래쪽 일부분(445)일 수 있다.
한편, 디스플레이 장치(100)는 제1 단말기와 페어링 된 상태에서, 페어링 된 제1 단말기 하고만 대응되는 손모양을 저장하는 경우가 있다. 이경우, 디스플레이 장치(100)는 사용자의 기 설정된 왼쪽 손모양과 제1 단말기와 대응되는 오른쪽 손모양을 동시에 기 설정된 시간동안 감지하여 저장할 수 있다. 예를 들면, 검지 손가락만 피고 나머지 손가락을 접은 왼손과, 엄지와 검지 손가락을 피고 나머지 손가락을 접은 오른손을 동시에 감지한 경우, 디스플레이 장치(100)는 엄지와 검지 손가락을 피고 나머지 손가락을 접은 오른손모양을 제1 단말기와 대응되는 손모양을 저장한다. 상기 손모양이 저장된 상태에서, 디스플레이 장치(100)는 엄지와 검지 손가락을 피고 나머지 손가락을 접은 오른손모양을 감지하는 경우, 제1 단말기와 페어링 동작을 수행한다.
디스플레이 장치(100)는 페어링 종료를 위한 사용자 입력이 수신되었는지 판단한다(S260).
페어링 종료를 위한 사용자 입력이 수신되는 경우, 디스플레이 장치(100)는 페어링 동작을 종료한다(S270).
여기서, 페어링 종료를 위한 사용자 입력은 사용자의 음성 입력일 수 있다.
예를 들어, 마이크(123)를 통해서 "종료"라는 음성명령을 수신하는 경우, 디스플레이 장치(100)는 페어링 된 단말기와 페어링 동작을 종료한다.
또 다른 예를 들면, 화면이 표시된 상태에서, 사용자가 화면의 제3 영역에 손가락을 위치시켜 기 설정된 시간(예를 들면, 3초)이 경과하면, 디스플레이 장치(100)는 페어링 된 단말기와 페어링 동작을 종료한다. 여기서, 제3 영역은 화면의 우측 상단의 일부분일 수 있다.
또 다른 예를 들면, 화면이 표시된 상태에서, 사용자가 화면의 우측 상단에서 좌측 하단으로 손가락을 이동시키는 경우, 디스플레이 장치(100)는 페어링 된 단말기와 페어링 동작을 종료한다.
도 5a 내지 도 5d는 본 발명의 실시예에 따라 디스플레이 장치(100)가 단말기와 대응하는 손모양을 감지하는 동작을 설명하는 도면이다.
도 5a를 참조하면, 디스플레이 장치(100)는 제1 카메라(121a)를 통하여 사용자의 손모양(410)을 감지한다. 도 5a의 (a)에 도시된 바와 같이, 사용자의 손모양(410)이 스마트 폰을 쥐고 있는 모양인 경우, 디스플레이 장치(100)는 스마트 폰을 쥐고 있는 손모양(410)과 대응되는 단말기(예를 들면, 사용자가 소지한 스마트 폰)와 페어링 동작을 수행한다.
한편, 도 5a의 (b)는 디스플레이 장치(100)의 우안 디스플레이부(151R)가 투명한 상태일 때, 우안 디스플레이부(151R)를 투과하여 보여지는 사용자의 손모양(410)을 도시한다.
도 5b를 참조하면, 디스플레이 장치(100)는 제1 카메라(121a)를 통하여 사용자의 손모양(411)을 감지한다. 도 5b의 (a)에 도시된 바와 같이, 사용자의 손모양(411)이 양손으로 타블렛 컴퓨터(tablet computer)를 쥐고 있는 모양인 경우, 디스플레이 장치(100)는 타블렛 컴퓨터를 양손으로 쥐고 있는 손모양(411)과 대응되는 단말기(예를 들어, 사용자가 소지한 타블렛 컴퓨터)와 페어링 동작을 수행한다.
한편, 도 5b의 (b)는 디스플레이 장치(100)의 우안 디스플레이부(151R)가 투명한 상태일 때, 우안 디스플레이부(151R)를 투과하여 보여지는 사용자의 손모양(410)을 도시한다.
도 5c를 참조하면, 디스플레이 장치(100)는 제1 카메라(121a)를 통하여 사용자의 손모양(412)을 감지한다. 도 5c의 (a)에 도시된 바와 같이, 사용자의 손모양(412)이 영상표시장치의 리모컨을 쥐고 있는 모양인 경우, 디스플레이 장치(100)는 리모컨을 쥐고 있는 손모양(412)과 대응되는 단말기(예를 들어, 사용자의 영상표시장치)와 페어링 동작을 수행한다.
한편, 도 5c의 (b)는 디스플레이 장치(100)의 우안 디스플레이부(151R)가 투명한 상태일 때, 우안 디스플레이부(151R)를 투과하여 보여지는 사용자의 손모양(410)을 도시한다.
도 5d를 참조하면, 디스플레이 장치(100)는 제1 카메라(121a)를 통하여 사용자의 손모양(413)을 감지한다. 도 5d의 (a)에 도시된 바와 같이, 사용자의 손모양(413)이 양손으로 컴퓨터 키보드를 치는 모양인 경우, 디스플레이 장치(100)는 양손으로 컴퓨터 키보드를 치는 손모양(413)과 대응되는 단말기(예를 들어, 사용자의 노트북 컴퓨터(notebook computer)와 페어링 동작을 수행한다.
한편, 도 5d의 (b)는 디스플레이 장치(100)의 우안 디스플레이부(151R)가 투명한 상태일 때, 우안 디스플레이부(151R)를 투과하여 보여지는 사용자의 손모양(410)을 도시한다.
도 6a 내지 도 6b는 본 발명의 실시예에 따라 디스플레이 장치(100)의 페어링 동작을 설명하는 도면이다.
여기서, 페어링 동작의 수행은 근거리 통신 방식을 통하여 이루어질 수 있다. 이하에서는 블루투스(Bluetooth) 통신방식을 이용하여 페어링이 수행되는 것으로 설명하나 이에 한정되지 아니한다.
또한 본 실시예에서는 디스플레이 장치(100)는 스마트 폰과 페어링 동작을 수행하는 것으로 설명하였으나 이에 한정되지 아니한다.
도 6a를 참조하면, 도 6a(a)에 도시된 바와 같이, 제1 카메라(121a)를 통하여 사용자가 스마트폰을 쥐고있는 손모양을 감지하는 경우, 디스플레이 장치(100)는 페어링 동작이 가능한 스마트 폰을 검색한다. 검색이 완료된 경우, 디스플레이 장치(100)는 검색된 스마트 폰 리스트(420)를 디스플레이부(151) 일 영역에 표시한다.
만약, 제1 스마트 폰이 선택되는 경우, 도 6a(b)에 도시된 바와 같이, 디스플레이 장치(100)는 "스마트폰과 페어링을 하시겠습니까? "라는 메시지를 디스플레이부(151) 일 영역에 표시한다. 또한, 디스플레이 장치(100)는 "예"(422) 및 "아니오"(423)의 메뉴를 디스플레이부(151) 일 영역에 표시한다. 사용자가 "예"(422)로 표시된 영역에 손가락을 기 설정된 시간만큼(예를 들면, 3초)위치시킨 경우, 디스플레이 장치(100)는 스마트폰과 페어링 동작을 수행한다.
도 6b를 참조하면, 스마트 폰과 페어링 동작을 수행한 경우, 디스플레이 장치(100)는 스마트 폰의 화면(431)을 디스플레이부(151) 일 영역에 표시한다. 도 6b에 도시된 바와 같이, 스마트 폰과 페어링 동작을 수행한 경우, 디스플레이 장치(100)는 스마트 폰에서 재생 중인 동영상을 디스플레이부(151) 일 영역에 표시한다.
도 7a 내지 도 7b는 본 발명의 실시예에 따라 표시된 화면이 이동하는 동작을 설명하는 도면이다.
도 7a를 참조하면, 스마트 폰의 화면(431)이 디스플레이부(151) 일 영역에 표시된 상태에서, 디스플레이 장치(100)의 사용자는 화면(431) 상의 제1 영역(432)에 사용자의 손가락을 기 설정된 시간(예를 들면, 3초)만큼 위치시킨 후, 손가락을 움직인다. 여기서, 제1 영역(432)은 화면(431)의 아래 부분일 수 있다.
사용자의 손가락의 움직임에 따라, 디스플레이 장치(100)는 화면(431)을 움직인다. 예를 들면, 화면(431) 아래의 일부분(432)에 사용자의 손가락을 3초간 위치시킨 후, 손가락을 위쪽 방향으로 움직이는 경우, 화면(431)도 위쪽 방향으로 움직인다. 또한, 화면(431) 아래의 일부분(432)에 사용자의 손가락을 3초간 위치시킨 후, 손가락을 오른쪽 방향으로 움직이는 경우, 화면(431)도 오른쪽 방향으로 움직인다.
도 7b를 참조하면, 스마트 폰의 화면(431)이 디스플레이부(151) 일 영역에 표시된 상태에서, 디스플레이 장치(100)의 사용자는 주먹을 움켜쥘 수 있다. 이 경우, 디스플레이 장치(100)는 주먹을 움켜쥐는 손모양(433)을 제1 카메라(121a)를 통하여 감지한다. 사용자의 주먹을 움켜쥐는 손모양(433)을 감지하는 경우, 디스플레이 장치(100)는 화면(434)을 현재 위치한 영역에 고정한다. 이때, 디스플레이 장치(100)를 착용한 사용자가 고개를 돌려, 고정된 화면(434)이 사용자의 시야에 들어오지 않는 경우, 화면(434)은 사라진다. 이때, 디스플레이 장치(100)를 착용한 사용자가 고개를 돌리는 경우, 화면(434)은 상대적으로 디스플레이부(151)에서 사용자가 고개를 돌리는 반대 방향으로 이동한다.
디스플레이 장치(100)를 착용한 사용자가 다시 고개를 원위치로 돌려, 고정된 화면(434)이 사용자의 시야에 들어오는 경우, 고정된 화면(434)이 디스플레이부(151) 일 영역에 표시된다. 만일, 화면이 사라진 상태로, 기 설정된 시간이 경과하게 되면, 페어링 동작 중인 스마트 폰과의 페어링 동작은 종료된다.
도 8a 내지 도 8d는 본 발명의 실시예에 따라 표시된 화면의 크기를 조절하는 동작을 설명하는 도면이다.
도 8a를 참조하면, 디스플레이 장치(100)가 스마트폰을 쥐고 있는 손모양을 감지하여, 스마트 폰과 페어링 동작을 수행하고, 스마트 폰의 화면을 표시한다. 이 경우, 디스플레이부(151)에는 스마트 폰의 화면(431)이 표시된 상태에서, 사용자의 스마트 폰을 쥐고 있는 손모양이 동시에 표시된다. 이 때, 사용자의 손의 상하좌우 움직임을 감지하는 경우, 디스플레이 장치(100)는 화면(431)의 크기를 조절한다.
도 8b를 참조하면, 화면(441)이 표시된 상태에서, 사용자의 손(440)이 위쪽으로 움직이는 경우, 디스플레이 장치(100)는 화면(441)이 위쪽으로 커지는 동작을 수행한다.
도 8c를 참조하면, 화면(444)이 표시된 상태에서, 사용자의 손(440)이 왼쪽으로 움직이는 경우, 디스플레이 장치(100)는 화면(444)이 왼쪽으로 커지는 동작을 수행한다.
도 8d를 참조하면, 화면(431)이 표시된 상태에서, 사용자는 화면(431)상의 제2 영역(445)에 기 설정된 시간(예를 들면, 3초)동안 손가락을 위치시킬 수 있다. 이때, 제2 영역(445)은 화면(431)의 우측 아래쪽 일부분일 수 있다. 그 상태에서, 손가락을 상하 좌우로 움직이는 경우, 디스플레이 장치(100)는 화면(431)의 크기를 확대하거나 축소할 수 있다. 예를 들면, 사용자가 화면(431)의 우측 아래쪽 일부분(445)에 3초동안 손가락을 위치시킨 후, 손가락을 위쪽으로 움직이는 경우, 디스플레이 장치(100)는 화면(431)이 위쪽으로 작아지는 동작을 수행한다.
도 9a 내지 도 9c는 본 발명의 실시예에 따라 단말기와 페어링이 종료되는 동작을 설명하는 도면이다.
도 9a를 참조하면, 디스플레이 장치(100)는 사용자의 음성명령을 수신하여 페어링 동작을 종료할 수 있다. 디스플레이 장치(100)는 사용자의 "종료"라는 음성명령을 수신하는 경우, 페어링 중인 단말기와 페어링을 종료하는 동작을 수행한다. 이때, "종료"라는 단어와 대응하여, 페어링을 종료하는 동작이 메모리(160)에 저장되어 있음은 물론이다. 마이크(123)를 통하여 사용자의 음성 명령을 수신하면 음성 인식부(182)는 음성명령을 감지한다. 제어부(180)는 "종료"의 음성명령에 따라 페어링 수행 중인 단말기와 페어링을 종료하는 동작을 수행한다.
도 9b를 참조하면, 화면(431)이 표시된 상태에서, 사용자는 화면(431)상의 제 3영역(452)에 기 설정된 시간(예를 들면, 3초)동안 손가락을 위치시킬 수 있다. 이때, 제 3영역(452)은 화면(431)상의 우측 위쪽 일부분(452)일 수 있다. 이 경우, 디스플레이 장치(100)는 페어링 중인 단말기와 페어링을 종료하는 동작을 수행한다.
도 9c를 참조하면, 화면(431)이 표시된 상태에서, 사용자는 화면(431)의 우측 상단에서 좌측 하단으로 손가락을 이동시키는 동작(453)을 수행할 수 있다. 이경우, 디스플레이 장치(100)는 페어링 중인 단말기와 페어링을 종료하는 동작을 수행한다.
도 10은 본 발명의 실시예에 따른 디스플레이 장치의 제어 방법의 순서도이다. 이하에서는 디스플레이 장치(100)와 페어링 동작 중인 단말기가 스마트 폰인 것으로 예를 들어 설명하지만, 이에 한정되지는 아니한다.
도 10을 참조하면, 디스플레이 장치(100)는 단말기와 대응하는 손모양을 저장한다(S310). S310단계는 도 4의 S210단계와 동일하므로 그에 대한 상세한 설명은 생략하도록 한다.
디스플레이 장치(100)는 사용자 입력을 수신하여, 카메라(121a, 121b)를 실행한다(S315). S315단계는 도 4의 S215단계와 동일하므로 그에 대한 상세한 설명은 생략하도록 한다.
디스플레이 장치(100)는 제1 카메라(121a)를 통하여 사용자의 손모양을 감지한다(S320). S320단계는 도 4의 S220단계와 동일하므로 그에 대한 상세한 설명은 생략하도록 한다.
사용자의 손모양을 기 설정된 시간 동안 감지한 경우, 디스플레이 장치(100)는 손모양에 대응하는 단말기를 검색한다(S325). S325단계는 도 4의 S225단계와 동일하므로 그에 대한 상세한 설명은 생략하도록 한다.
디스플레이 장치(100)는 사용자의 손모양을 기설정된 시간 동안 감지한 경우, 손모양에 대응하는 단말기와 근거리 무선통신을 수행한다 (S330). S330단계는 도 4의 S230단계와 동일하므로 그에 대한 상세한 설명은 생략하도록 한다.
단말기와 페어링이 된 상태에서, 디스플레이 장치(100)는 페어링된 단말기의 화면을 표시한다(S340). S340단계는 도 4의 S240단계와 동일하므로 그에 대한 상세한 설명은 생략하도록 한다.
디스플레이 장치(100)는 페어링 동작 중인 단말기의 이벤트가 발생되었는지 판단한다(S350). 여기서, 단말기가 스마트 폰인 경우, 이벤트는 음성 통화를 위한 호 신호의 수신 또는 문자메시지 수신일 수 있다.
페어링 동작 중인 단말기의 이벤트가 발생하는 경우, 디스플레이 장치(100)는 이벤트 발생 정보를 수신한다(S360).
페어링 동작 중인 단말기의 이벤트 발생 정보를 수신한 상태에서, 디스플레이 장치(100)는 이벤트 발생 정보를 표시한다(S370). 예를 들어, 스마트 폰과 페어링되어 스마트 폰에서 재생 중인 동영상을 표시할 때, 스마트 폰에 음성 통화를 위한 호 신호가 수신되는 이벤트가 발생할 수 있다. 이 경우, 디스플레이 장치(100)는 스마트 폰의 음성 통화를 위한 호 신호 수신의 이벤트 발생 정보를 수신한다. 디스플레이 장치(100)는 상기 이벤트 발생 정보를 디스플레이부(151) 일 영역에 표시한다.
이벤트 발생 정보를 표시한 상태에서, 디스플레이 장치(100)는 이벤트 화면의 활성화를 위한 사용자 입력이 수신했는지 판단한다(S380).
여기서, 사용자 입력은 이벤트 발생 정보를 디스플레이부(151) 일 영역에 표시하는 경우, 이벤트 발생 정보가 표시된 일 영역에 사용자의 손가락을 기 설정된 시간(예를 들면, 3초)동안 위치시키는 입력일 수 있다.
한편, 이벤트 화면의 활성화를 위한 사용자 입력을 수신하지 않은 경우, 디스플레이 장치(100)는 페어링 된 단말기 화면을 계속적으로 표시한다. 또한, 기 표시된 단말기 화면에 사용자 손가락을 기 설정된 시간동안 위치 시키는 경우, 디스플레이 장치(100)는 이벤트 발생 정보를 더이상 표시하지 않는다.
이벤트 화면의 활성화를 위한 사용자 입력을 수신하는 경우, 디스플레이 장치(100)는 이벤트 화면을 활성화한다(S390).
도 11a 내지 도 11e는 본 발명의 실시예에 따라, 스마트 폰과 페어링 동작 중에 이벤트 발생하는 경우 디스플레이 장치(100)의 동작을 설명하는 도면이다.
도 11a를 참조하면, 스마트 폰과 페어링 되고, 스마트 폰의 화면(431)이 표시한 상태에서, 스마트 폰에 음성 통화를 위한 호 신호 수신 이벤트가 발생한다. 즉, 디스플레이 장치(100)는 스마트 폰에서 재생 중인 동영상을 디스플레이부(151) 일 영역에 표시한 상태에서, 스마트 폰에 음성 통화를 위한 호 신호 수신 이벤트가 발생한다. 이 경우, 디스플레이 장치(100)는 음성 통화를 위한 호 신호 수신 이벤트 발생 정보를 수신한다. 디스플레이 장치(100)는 수신한 이벤트 발생 정보를 표시한다. 즉, 디스플레이 장치(100)는 디스플레이부(151) 일 영역에 "전화가 왔습니다"(511)와 같이 이벤트 발생 정보를 표시한다.
도 11b를 참조하면, 디스플레이부(151) 일 영역에 "전화가 왔습니다"(511)와 같이 이벤트 발생 정보를 표시한 상태에서, 디스플레이 장치(100)는 이벤트 화면의 활성화를 위한 사용자 입력을 수신할 수 있다. 여기서, 사용자 입력은 이벤트 발생 정보를 디스플레이부(151) 일 영역에 표시하는 경우, "전화가 왔습니다"(511)가 표시된 영역에 사용자의 손가락을 기 설정된 시간(예를 들면, 3초)동안 위치시키는 입력일 수 있다.
한편, 스마트 폰과 페어링 되어 스마트 폰에서 재생 중인 동영상이 디스플레이 장치(100)에서 재생될 때, 스마트 폰에서 이벤트 발생의 경우, 재생 중인 동영상이 정지될 수 있다.
도 11c를 참조하면, 사용자 입력을 받은 경우, 디스플레이 장치(100)는 이벤트 화면을 활성화 한다. 즉, 동영상 재생 중에, 음성 통화를 위한 호 신호 수신 이벤트가 발생하고, 이벤트 화면 활성화를 위한 사용자 입력을 수신하는 경우, 디스플레이 장치(100)는 음성 통화 어플리케이션 화면(512)을 디스플레이부(151) 일 영역에 표시한다. 이때, 디스플레이 장치(100)는 멀티태스킹을 수행할 수 있다. 예를 들면, 음성 통화 어플리케이션 화면(512)은, 이벤트 발생 전에 재생 중인 동영상(513)과 동시에 표시될 수 있다.
한편, 이벤트 화면이 활성화 된 상태에서, 이벤트 화면에 손가락을 기 설정시간동안 위치시키는 입력이 수신되는 경우, 디스플레이 장치(100)는 페어링 된 단말기의 화면과 이벤트 화면을 분할하여 표시할 수 있다.
도 11d를 참조하면, 음성 통화 어플리케이션 화면(512)과 이벤트 발생 전에 재생 중인 동영상 화면(513)이 동시에 표시된다. 이 경우, 디스플레이 장치(100)는 사용자의 입력을 수신하여, 음성 통화 어플리케이션 화면(512)과 동영상 화면(513)의 크기를 조절할 수 있다. 여기서, 사용자 입력은 음성 통화 어플리케이션 화면(512)과 동영상 화면(513)의 경계의 일영역(514)에 손가락을 기 설정된 시간(예를 들면, 3초)동안 위치시킨 후, 손가락을 상하로 움직이는 동작일 수 있다. 예를 들어, 사용자가 음성 통화 어플리케이션 화면(512)과 동영상 화면(513)의 경계의 일영역(514)에 손가락을 3초간 위치시킨 후, 손가락을 위쪽 방향으로 움직이는 경우, 음성 통화 어플리케이션 화면(512)은 작아지고, 동영상 화면(513)은 커질 수 있다.
도 11e를 참조하면, 이벤트 화면 활성화 상태에서, 사용자 입력을 수신하는 경우, 디스플레이 장치(100)는 이벤트 화면을 종료하는 동작을 수행한다. 여기서, 사용자 입력은 음성 통화 어플리케이션 화면(512)의 제 4영역(515)에 손가락을 기 설정된 시간(예를 들면, 3초)동안 위치시키는 동작일 수 있다. 이때, 제 4영역(515)은 음성 통화 어플리케이션 화면(512)의 우측 위쪽 일부분일 수 있다.
한편, 페어링 된 단말기에서 이벤트가 종료되는 경우, 이벤트 화면의 표시 동작이 종료됨은 물론이다.
또한, 본 발명에 따른 디스플레이 장치 및 그 제어방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
한편, 본 발명은 MSM(Mobile Station Modem) 등과 같이 디스플레이 장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.
110 : 무선 통신부
120 : A/V 입력부
150 : 출력부
151 : 디스플레이부
160 : 메모리
170 : 인터페이스부
180 : 제어부

Claims (10)

  1. 카메라를 통해 사용자의 손모양을 감지하는 단계;
    상기 손모양에 대응하는 타 단말기를 검색하고, 검색된 단말기와 근거리 무선 통신을 수행하는 단계; 및
    상기 타 단말기의 동작 화면을 표시하는 단계;를 포함하는 디스플레이 장치의 동작방법.
  2. 제 1항에 있어서,
    상기 단말기에 대응하는 손모양을 미리 저장하는 단계;를 더 포함하는 디스플레이 장치의 동작방법.
  3. 제 1항에 있어서,
    상기 표시된 화면은 사용자의 시선에 따라 이동되는 디스플레이 장치의 동작방법.
  4. 제 1항에 있어서,
    상기 표시된 화면은 기 설정된 사용자의 입력을 수신하여 특정 영역에 고정되는 디스플레이 장치의 동작방법.
  5. 제 1항에 있어서,
    기 설정된 사용자의 입력을 수신하여 상기 단말기와의 페어링 동작을 종료하는 단계;를 더 포함하는 디스플레이 장치의 동작방법.
  6. 제 1항에 있어서,
    기 설정된 사용자 입력을 수신하여 상기 표시된 화면을 이동하는 단계;를 더 포함하는 디스플레이 장치의 동작방법.
  7. 제1항에 있어서,
    기 설정된 사용자 입력을 수신하여 표시된 화면의 크기를 조절하는 단계;를 더 포함하는 디스플레이 장치의 동작방법.
  8. 제 1항에 있어서,
    상기 근거리 무선 통신은,
    블루투스(Bluetooth) 통신인 것을 특징으로 하는 디스플레이 장치의 동작방법.
  9. 제 1항에 있어서,
    상기 단말기의 이벤트가 발생하는 경우,
    상기 이벤트 발생 정보를 수신하여 디스플레이부에 표시하는 단계;를 더 포함하는 디스플레이 장치의 동작방법.
  10. 제 9항에 있어서,
    기 설정된 사용자 입력을 수신하여 상기 이벤트 화면을 활성화 하는 단계;를 더 포함하는 디스플레이 장치의 동작방법.
KR20130117526A 2013-10-01 2013-10-01 디스플레이 장치의 동작 방법 KR20150039026A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20130117526A KR20150039026A (ko) 2013-10-01 2013-10-01 디스플레이 장치의 동작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20130117526A KR20150039026A (ko) 2013-10-01 2013-10-01 디스플레이 장치의 동작 방법

Publications (1)

Publication Number Publication Date
KR20150039026A true KR20150039026A (ko) 2015-04-09

Family

ID=53029467

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130117526A KR20150039026A (ko) 2013-10-01 2013-10-01 디스플레이 장치의 동작 방법

Country Status (1)

Country Link
KR (1) KR20150039026A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210057432A (ko) * 2019-11-12 2021-05-21 한국전자기술연구원 헤드 마운트 디스플레이 및 제어 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210057432A (ko) * 2019-11-12 2021-05-21 한국전자기술연구원 헤드 마운트 디스플레이 및 제어 방법

Similar Documents

Publication Publication Date Title
KR20170128820A (ko) 이동단말기 및 그 제어방법
KR102102643B1 (ko) 글래스 타입 단말기
CN104902212A (zh) 一种视频通信方法及装置
KR20150082841A (ko) 이동 단말기 및 그 제어 방법
KR20150084608A (ko) 단말기 및 그 동작 방법
US10215990B2 (en) Wearable device
KR102591413B1 (ko) 이동단말기 및 그 제어방법
US9411411B2 (en) Wearable electronic device having touch recognition unit and detachable display, and method for controlling the electronic device
KR20150033203A (ko) 이동단말기 및 그 제어방법
KR20160000345A (ko) 이동 단말기 및 그 제어 방법
KR20160127606A (ko) 이동 단말기 및 그 제어 방법
KR20180000511A (ko) 이동단말기 및 그 제어방법
KR200473246Y1 (ko) 안경형 원격 제어 장치
KR20160122119A (ko) 이동단말기 및 그 제어방법
KR20150039026A (ko) 디스플레이 장치의 동작 방법
KR101817863B1 (ko) 스마트 우산 및 그 제어방법
CN105204624A (zh) 拍摄模糊处理方法及装置
KR20160066269A (ko) 이동 단말기 및 그 제어 방법
KR101643861B1 (ko) 이동 단말기 및 그 제어방법
KR101781860B1 (ko) 휴대 단말기 및 그 제어 방법
KR101769998B1 (ko) 이동 단말 장치 및 이의 자동 밝기 조절 방법
KR20180006013A (ko) Ptt 기능을 갖는 무선 디바이스 간의 통신 네트워크 시스템
KR20160043426A (ko) 이동 단말기 및 그 제어 방법
KR20150099940A (ko) 단말기 및 상기 단말기에서의 ａｖ 데이터 출력 제어 방법
KR20150025415A (ko) 휴대 단말기 및 그 제어 방법

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination