KR102238330B1 - 디스플레이 장치 및 그의 동작 방법 - Google Patents

디스플레이 장치 및 그의 동작 방법 Download PDF

Info

Publication number
KR102238330B1
KR102238330B1 KR1020140058777A KR20140058777A KR102238330B1 KR 102238330 B1 KR102238330 B1 KR 102238330B1 KR 1020140058777 A KR1020140058777 A KR 1020140058777A KR 20140058777 A KR20140058777 A KR 20140058777A KR 102238330 B1 KR102238330 B1 KR 102238330B1
Authority
KR
South Korea
Prior art keywords
user
display device
exercise
wearable device
screen
Prior art date
Application number
KR1020140058777A
Other languages
English (en)
Other versions
KR20150131695A (ko
Inventor
강상규
박세원
안우석
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020140058777A priority Critical patent/KR102238330B1/ko
Priority to US14/477,657 priority patent/US10088901B2/en
Publication of KR20150131695A publication Critical patent/KR20150131695A/ko
Application granted granted Critical
Publication of KR102238330B1 publication Critical patent/KR102238330B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은 웨어러블 장치를 인식하는 단계 및 사용자가 인식된 웨어러블 장치를 착용하고 있는지 여부를 나타내는 웨어러블 장치의 착용 상태에 기초하여 상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하는 단계를 포함한다.

Description

디스플레이 장치 및 그의 동작 방법{DISPLAY DEVICE AND OPERATING METHOD THEREOF}
본 발명은 디스플레이 장치 및 그의 동작 방법에 관한 것이다.
최근 차세대 스마트 기기로서 웨어러블 디바이스(wearable device)가 주목받고 있다. 웨어러블 디바이스는 높은 판매 가격대를 형성하는 고사양 스마트폰 시장이 성숙기에 진입하면서 새로운 수익원으로 주목받기 시작하였다.
웨어러블 디바이스는 사람의 신체 부위에 착탈 가능한 장치로, 사람의 신체에 대한 정보, 운동을 수행하는 사람의 운동에 대한 정보, 기타 스마트 폰의 기능을 축소해 놓은 기능을 가진다.
특히, 웨어러블 디바이스는 시계, 밴드, 안경 등과 같이 사용자가 일반적으로 착용하는 제품에 적용되어 있고, 스마트 폰 TV 등과 연동하여 정보를 교환할 수 있다.
그러나, 종래의 웨어러블 디바이스와 스마트 폰, TV 등과 같은 단말기는 사용자가 웨어러블 장치를 착용했는지 여부, 사용자의 운동 상태 등을 고려하여 제공되는 사용자 인터페이스 화면을 달리 하지 못했다.
본 발명은 사용자의 웨어러블 장치의 착용 상태, 사용자의 운동 상태에 기초하여 사용자에게 최적화된 인터페이스 화면을 제공할 수 있는데 그 목적이 있다.
본 발명은 사용자의 핸드 제스쳐에 기초하여 디스플레이 장치의 기능 또는 웨어러블 장치의 기능을 손쉽게 제어할 수 있는 디스플레이 장치 및 그 동작 방법의 제공에 목적이 있다.
본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은 웨어러블 장치를 인식하는 단계 및 사용자가 인식된 웨어러블 장치를 착용하고 있는지 여부를 나타내는 웨어러블 장치의 착용 상태에 기초하여 상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하는 단계를 포함한다.
본 발명의 실시 예에 따른 디스플레이 장치는 디스플레이부와 웨어러블 장치와 통신을 수행하기 위한 통신부 및 상기 웨어러블 장치를 인식하고, 사용자가 인식된 웨어러블 장치를 착용하고 있는지 여부를 나타내는 웨어러블 장치의 착용 상태에 기초하여 상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하도록 상기 디스플레이부를 제어하는 제어부를 포함한다.
본 발명의 다양한 실시 예에 따르면, 사용자의 웨어러블 장치의 착용 상태, 사용자의 운동 상태에 기초하여 사용자에게 최적화된 인터페이스 화면을 제공할 수 있다.
또한, 사용자가 운동 중에는 움직임이 많으므로 복잡한 동작의 제스처 인식이 어려워지기 때문에 간소화된 제스처 동작만을 인식하게 함으로써 디스플레이 장치 또는 웨어러블 장치의 기능을 손쉽게 제어할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 헬스 연동 시스템의 구성을 설명하기 위한 도면이다.
도 2은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.
도 3은 본 발명의 일 실시 예에 따른 웨어러블 장치의 블록도이다.
도 4는 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 흐름도이다.
도 5 내지 도 7은 본 발명의 실시 예에 따라 웨어러블 장치의 착용 상태에 기초하여 사용자에게 제공되는 인터페이스 화면을 설명하기 위한 도면이다.
도 8 내지 도 9는 본 발명의 실시 예에 따라 웨어러블 장치의 착용 상태 및 사용자의 운동 상태에 기초하여 제공되는 인터페이스 화면을 설명하기 위한 도면이다.
도 10 내지 도 13은 본 발명의 일 실시 예에 따라 인식된 핸드 제스쳐에 해당하는 손에 웨어러블 장치가 착용되어 있는지 여부에 기초하여 인식된 핸드 제스쳐에 대응하는 디스플레이 장치의 기능 또는 인식된 핸드 제스쳐에 대응하는 웨어러블 장치의 기능을 제어하는 과정을 설명하는 도면이다.
도 14 내지 도 21은 본 발명의 일 실시 예에 사용자의 운동 상태에 기초하여 인식된 사용자의 핸드 제스쳐에 대응하는 디스플레이 장치의 기능 또는 인식된 핸드 제스쳐에 대응하는 웨어러블 장치의 기능을 제어하는 과정을 설명하는 도면이다.
도 22 내지 도 23은 본 발명의 실시 예에 따라 사용자가 운동을 종료한 것을 확인하고, 사용자의 운동 결과를 표시하는 실시 예를 설명하는 도면이다.
도 24는 본 발명의 일 실시 예에 따라 웨어러블 장치를 착용한 사용자의 운동 중 사용자의 이상 상태를 알려주는 실시 예이다.
도 25는 본 발명의 일 실시 예에 따라 디스플레이 장치와 웨어러블 장치가 연동된 경우, 웨어러블 장치의 기능을 제어하는 실시 예를 설명하는 도면이다.
이하, 본 발명과 관련된 실시 예에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
도 1은 본 발명의 일 실시 예에 따른 헬스 연동 시스템의 구성을 설명하기 위한 도면이다.
본 발명의 헬스 연동 시스템은 디스플레이 장치(100) 및 웨어러블 장치(300)를 포함한다.
디스플레이 장치(100)와 웨어러블 장치(300)는 유선 통신 또는 무선 통신을 통해 정보를 송수신할 수 있다.
디스플레이 장치(100)는 주위에 위치한 웨어러블 장치(300)의 존재를 인식할 수 있고, 인식한 웨어러블 장치(300)와 연동될 수 있다.
디스플레이 장치(100)는 운동 기구에 구비될 수 있다. 즉, 디스플레이 장치(100)는 운동 기구에 구비되어 사용자가 운동을 하면서 미디어 컨텐트 등을 시청할 수 있는 형태로 배치될 수 있다. 여기서, 운동 기구는 러닝 머신, 헬스용 자전거 중 어느 하나일 수 있으나, 이에 한정될 필요는 없고, 사용자가 디스플레이 장치(100)를 보면서 운동을 할 수 있는 어떠한 형태의 운동 기구라도 상관없다.
본 발명의 실시예에 따른 디스플레이 장치(100)는, 예를 들어 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등 보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고, 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.
따라서, 본 발명에서 기술되는 디스플레이 장치(100)는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 디스플레이 장치(100)는, 보다 구체적으로 예를 들면, 네트워크 TV, HBBTV, 스마트 TV, LED TV, OLED TV 등이 될 수 있으며, 경우에 따라 스마트폰에도 적용 가능하다.
본 발명의 실시 예에 따른 웨어러블 장치(300)는 사용자의 신체에 착탈 가능한 장치로서, 사용자의 신체에 대한 정보 또는 사용자가 운동을 할 때 운동에 대한 운동 정보 등을 획득할 수 있는 장치일 수 있다. 웨어러블 장치(300)는 손목, 발목 에 착용 가능한 시계, 밴드 형태를 가질 수 있으나, 이에 한정될 필요는 없고, 사용자의 머리에 착용 가능한 헤드셋, 이어폰 등 사용자의 신체 부위에 착용 가능한 형태이기만 하면 된다.
도 2은 본 발명의 일 실시예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.
도 2을 참조하면, 디스플레이 장치(100)는 방송 수신부(130), 외부장치 인터페이스부(135), 저장부(140), 사용자입력 인터페이스부(150), 제어부(170), 디스플레이부(180), 오디오 출력부(185), 전원공급부(190)를 포함할 수 있다. 한편, 방송 수신부(130)는 튜너(131), 복조부(132) 및 네트워크 인터페이스부(133)를 포함할 수 있다.
외부장치 인터페이스부(135)는 인접하는 외부 장치 내의 애플리케이션 또는 애플리케이션 목록을 수신하여, 제어부(170) 또는 저장부(140)로 전달할 수 있다.
네트워크 인터페이스부(133)는 디스플레이 장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공할 수 있다. 네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다.
또한, 디스플레이 장치(100)에 미리 등록된 다른 사용자 또는 다른 전자 기기 중 선택된 사용자 또는 선택된 전자기기에, 디스플레이 장치(100)에 저장된 일부의 컨텐츠 데이터를 송신할 수 있다.
네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다.
그리고, 네트워크 인터페이스부(133)는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크 인터페이스부(133)는 네트워크를 통하여 컨텐츠 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다.
또한, 네트워크 인터페이스부(133)는 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있으며, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.
네트워크 인터페이스부(133)는 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다.
저장부(140)는 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.
또한, 저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있으며, 채널 기억 기능을 통하여 소정 이미지에 관한 정보를 저장할 수도 있다.
저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다.
디스플레이 장치(100)는 저장부(140) 내에 저장되어 있는 컨텐츠 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.
사용자입력 인터페이스부(150)는 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달할 수 있다. 예를 들어, 사용자입력 인터페이스부(150)는 블루투스(Bluetooth), WB(Ultra Wideband), 지그비(ZigBee) 방식, RF(Radio Frequency) 통신 방식 또는 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(170)로부터의 제어 신호를 원격제어장치(200)로 송신하도록 처리할 수 있다.
또한, 사용자입력 인터페이스부(150)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 제어 신호를 제어부(170)에 전달할 수 있다.
제어부(170)에서 영상 처리된 영상 신호는 디스플레이부(180)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.
제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 오디오 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.
그 외, 제어부(170)는, 디스플레이 장치(100) 내의 전반적인 동작을 제어할 수 있다.
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 디스플레이 장치(100)를 제어할 수 있으며, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 디스플레이 장치(100) 내로 다운받을 수 있도록 할 수 있다.
제어부(170)는 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(180) 또는 오디오 출력부(185)를 통하여 출력될 수 있도록 한다.
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(135)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(180) 또는 오디오 출력부(185)를 통해 출력될 수 있도록 한다.
한편, 제어부(170)는 영상을 표시하도록 디스플레이부(180)를 제어할 수 있으며, 예를 들어 튜너(131)를 통해 입력되는 방송 영상, 또는 외부장치 인터페이스부(135)를 통해 입력되는 외부 입력 영상, 또는 네트워크 인터페이스부를 통해 입력되는 영상, 또는 저장부(140)에 저장된 영상이 디스플레이부(180)에서 표시되도록 제어할 수 있다. 이 경우, 디스플레이부(180)에 표시되는 영상은 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.
또한, 제어부(170)는 디스플레이 장치(100) 내에 저장된 컨텐츠, 또는 수신된 방송 컨텐츠, 외부로 부터 입력되는 외부 입력 컨텐츠가 재생되도록 제어할 수 있으며, 상기 컨텐츠는 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 등 다양한 형태일 수 있다.
디스플레이부(180)는 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(135)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성할 수 있다.
한편, 도 2에 도시된 디스플레이 장치(100)는 본 발명의 일실시예에 불과하므로. 도시된 구성요소들 중 일부는 실제 구현되는 디스플레이 장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.
즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
본 발명의 또 다른 실시예에 따르면, 디스플레이 장치(100)는 도 2에 도시된 바와 달리, 튜너(131)와 복조부(132)를 구비하지 않고 네트워크 인터페이스부(133) 또는 외부장치 인터페이스부(135)를 통해서 영상을 수신하여 재생할 수도 있다.
예를 들어, 디스플레이 장치(100)는 방송 신호 또는 다양한 네트워크 서비스에 따른 컨텐츠들을 수신하기 위한 등과 같은 셋탑 박스 등과 같은 영상 처리 장치와 상기 영상 처리 장치로부터 입력되는 컨텐츠를 재생하는 컨텐츠 재생 장치로 분리되어 구현될 수 있다.
이 경우, 이하에서 설명할 본 발명의 실시예에 따른 디스플레이 장치의 동작 방법은 도 2을 참조하여 설명한 바와 같은 디스플레이 장치(100)뿐 아니라, 상기 분리된 셋탑 박스 등과 같은 영상 처리 장치 또는 디스플레이부(180) 및 오디오출력부(185)를 구비하는 컨텐츠 재생 장치 중 어느 하나에 의해 수행될 수도 있다.
도 3은 본 발명의 일 실시 예에 따른 웨어러블 장치의 블록도이다.
도 3을 참조하면, 웨어러블 장치(300)는 통신부(310), 디스플레이부(330), 감지부(350), 메모리부(370) 및 제어부(390)를 포함한다.
통신부(310)는 디스플레이 장치(100)의 통신부(173)와 유선 통신 또는 무선 통신을 통해 정보를 교환할 수 있다. 특히, 통신부(310)는 사용자의 신체 정보 및 운동 정보를 획득하여 디스플레이 장치(100)의 통신부(173)에 전송할 수 있다.
사용자의 신체 정보는 사용자의 심박수, 사용자의 체온, 혈압 등 사용자의 신체 부위에 대한 정보를 포함할 수 있다.
사용자의 운동 정보는 사용자의 맥박수, 운동 거리, 운동 시간, 걸음 수, 목표량, 달성량 등을 포함할 수 있다.
통신부(310)는 디스플레이 장치(100)의 통신부(173)로부터 제어 명령을 수신하여 수신할 수 있다. 이에 대해서는 후술한다.
디스플레이부(330)는 제어부(390)에서 처리된 영상 신호, 오디오 신호 등을 표시할 수 있다.
감지부(350)는 사용자의 신체 상태를 감지할 수 있다. 감지부(350)는 사용자의 심박수, 사용자의 체온, 혈압 등을 감지할 수 있다. 이를 위해 감지부(350)는 심박 센서, 온도 센서, 혈압 측정 센서 등을 포함할 수 있다.
감지부(350)는 사용자의 운동 상태를 감지할 수 있다. 감지부(350)는 사용자의 운동 상태를 확인하기 위해 가속도 센서, 진동 센서 등을 포함할 수 있다.
메모리부(370)는 제어부(390)가 처리한 신호 및 신호 처리를 제어하기 위한 프로그램을 저장할 수 있다. 또한, 메모리부(370)는 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.
제어부(390)는 웨어러블 장치(300)의 전반적인 동작을 제어할 수 있다. 제어부(390)는 사용자의 운동 정보를 통신부(310)를 통해 디스플레이 장치(100)에 전송할 수 있다.
제어부(390)는 디스플레이 장치(100)로부터 제어 명령을 수신하여 제어 명령에 대응하는 웨어러블 장치(300)의 기능을 제어할 수 있다.
다음으로, 도 4를 참조하여, 본 발명의 일 실시 예에 따른 디스플레이 장치(100)의 동작 방법을 설명한다.
이하에서는 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법을 도 1 내지 도 3의 내용에 결부시켜 설명한다.
도 4는 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 흐름도이다.
제어부(170)는 디스플레이 장치(100)의 주위에 위치한 웨어러블 장치(300)를 인식한다(S101).
일 실시 예에서 제어부(170)는 디스플레이 장치(100)와 일정 거리 범위 내에 위치한 웨어러블 장치(300)의 존재를 유무선 통신을 통해 인식할 수 있다. 이를 위해 디스플레이 장치(100) 및 웨어러블 장치(300)는 근거리 무선 통신을 수행할 수 있다. 여기서, 근거리 무선 통신은 블루투스, 와이파이, NFC(Near Field Communication), 지그비 중 어느 하나의 규격이 사용될 수 있다. 특히, NFC 규격을 통해 통신을 수행하는 경우, 웨어러블 장치(300)를 착용한 사용자는 웨어러블 장치(300)에 장착된 NFC 태그를 통해 디스플레이 장치(100)에 장착된 NFC 리더기에 태깅할 수 있다. 디스플레이 장치(100)의 제어부(170)는 통신부(171)에 포함된 NFC 리더기를 통해 웨어러블 장치(300)에 대한 정보를 수신하여 웨어러블 장치(300)를 인식할 수 있다.
디스플레이 장치(100)는 NFC 태깅을 통해 웨어러블 장치(300)에 대한 정보를 수신할 수 있다. 웨어러블 장치(300)에 대한 정보는 웨어러블 장치(300)의 식별 정보, 웨어러블 장치(300)가 수집한 사용자의 운동 정보를 포함할 수 있다.
웨어러블 장치(300)의 식별 정보는 웨어러블 장치(300)를 식별하기 위한 정보일 수 있다.
웨어어블 장치(300)가 수집한 사용자의 운동 정보는 후술하겠지만, 사용자의 맥박수, 운동 거리, 운동 시간, 걸음 수, 목표량, 달성량 등을 포함할 수 있다.
또 다른 실시 예에서 제어부(170)는 영상 획득부(171)를 통해 획득한 사용자의 영상을 이용하여 웨어러블 장치(300)를 인식할 수 있다. 구체적으로, 영상 획득부(171)는 디스플레이 장치(100)의 전면에 위치한 사용자의 영상을 촬영할 수 있다. 제어부(170)는 촬영된 사용자의 영상을 통해 사용자가 웨어러블 장치(300)를 착용하고 있는지를 확인하여 웨어러블 장치(300)의 존재를 인식할 수 있다. 이를 위해 저장부(140)는 웨어러블 장치(300)에 대한 이미지를 저장할 수 있고, 제어부(170)는 저장된 웨어러블 장치(300)에 대한 이미지와 촬영을 통해 추출된 웨어러블 장치(300)의 이미지를 비교하여 비교 결과에 따라 웨어러블 장치(300)를 인식할 수 있다.
제어부(170)는 인식된 웨어러블 장치(300)의 착용 상태를 확인한다(S103).
제어부(170)는 사용자가 인식된 웨어러블 장치(300)를 착용하고 있는지 또는 착용하고 있지 않는지를 확인할 수 있다.
일 실시 예에서 제어부(170)는 사용자의 영상을 획득하여 웨어러블 장치(300)의 착용 상태를 확인할 수 있다. 즉, 제어부(170)는 획득한 사용자의 영상으로부터 웨어러블 장치(300)에 대한 이미지를 추출하여 사용자가 웨어러블 장치(300)를 착용하고 있는지를 확인할 수 있다. 영상 획득부(171)에 포함된 카메라는 사용자의 영상을 촬영할 수 있고, 제어부(170)는 촬영된 사용자의 영상으로부터 사용자의 특정 신체 부위에 착용된 웨어러블 장치(300)의 이미지를 추출하여 사용자가 웨어러블 장치(300)를 착용하고 있는지를 확인할 수 있다.
또 다른 실시 예에서 제어부(170)는 인식된 웨어러블 장치(300)로부터 사용자의 신체 정보를 수신하여 웨어러블 장치(300)의 착용 상태를 판단할 수 있다. 즉, 디스플레이 장치(100)는 웨어러블 장치(300)에 구비된 다양한 종류의 센서를 통해 감지된 사용자의 신체 정보를 웨어러블 장치(300)로부터 수신할 수 있고, 수신된 사용자의 신체 정보를 이용하여 웨어러블 장치(300)의 착용 상태를 확인할 수 있다. 여기서, 사용자의 신체 정보는 사용자의 심박수, 사용자의 체온, 혈압 등 사용자의 신체 부위에 대한 정보를 포함할 수 있다.
사용자의 맥박수에 대한 정보를 실시간으로 수신하는 경우, 사용자가 웨어러블 장치(300)를 착용하고 있는 것으로 확인할 수 있다.
사용자가 웨어러블 장치(300)를 착용하고 있는 것으로 확인된 경우(S105), 제어부(170)는 웨어러블 장치(300)로부터 사용자의 운동 정보를 수신한다(S107).
일 실시 예에서 사용자의 운동 정보는 사용자의 맥박수, 운동 거리, 운동 시간, 걸음 수, 목표 운동량, 달성 운동량 등을 포함할 수 있으나, 이에 한정될 필요는 없고, 웨어러블 장치(300)의 종류 또는 운동의 종류에 따라 다양한 정보를 포함할 수 있다.
제어부(170)는 수신한 사용자의 운동 정보 및 표시 중인 미디어 컨텐트를 하나의 화면에 제공한다(S109).
만약, 사용자가 웨어러블 장치(300)를 착용하고 있지 않는 것으로 확인된 경우(S105), 제어부(170)는 표시 중인 미디어 컨텐트를 전체 화면으로 제공한다(S111).
일 실시 예에서 제어부(170)는 웨어러블 장치(300)의 착용 상태에 기초하여 사용자 인터페이스 화면을 달리 제공할 수 있다. 제어부(170)는 사용자가 웨어러블 장치(300)를 착용한 것으로 확인한 경우, 웨어러블 장치(300)로부터 수신한 운동 정보 및 재생 중인 미디어 컨텐트를 하나의 화면에 동시에 제공할 수 있다.
제어부(170)는 사용자가 웨어러블 장치(300)를 착용하지 않는 것으로 확인한 경우, 미디어 컨텐트를 디스플레이부(180)의 전체 화면에 제공할 수 있다.
또 다른 실시 예에서 제어부(170)는 웨어러블 장치(300)의 착용 상태 및 사용자의 운동 상태에 기초하여 사용자 인터페이스 화면을 달리 제공할 수 있다. 제어부(170)는 사용자가 웨어러블 장치(300)를 착용하고 있고, 사용자의 운동량이 기준 운동량 이상인 경우, 미디어 컨텐트의 재생 화면을 사용자의 운동 정보를 표시하는 화면보다 더 크게 표시할 수 있다. 제어부(170)는 사용자가 웨어러블 장치(300)를 착용하고 있고, 사용자의 운동량이 기준 운동량 미만인 경우, 미디어 컨텐트의 재생 화면을 사용자의 운동 정보를 표시하는 화면보다 더 작게 표시할 수 있다. 여기서, 기준 운동량은 디스플레이부(180)를 통해 표시되는 사용자 인터페이스 화면을 달리 제공하기 위해 기준이 되는 문턱 값일 수 있다. 구체적으로, 기준 운운도량은 디스플레이부(180)를 통해 표시되는 사용자 인터페이스 화면의 크기를 변경하기 위해 필요한 문턱 값일 수 있다. 예를 들어, 기준 운동량은 기 설정된 초당 사용자의 움직임 횟수, 또는 초당 사용자의 움직임 량 중 어느 하나일 수 있다. 디스플레이 장치(100)는 사용자의 0.5초당 움직임의 횟수가 2회 이상인 경우, 사용자의 운동량이 기준 운동량 이상인 것으로 확인할 수 있다. 웨어러블 장치(300)는 사용자의 초당 움직임 횟수를 확인할 수 있고, 이에 대한 정보를 디스플레이 장치(100)로 전송할 수 있다. 이를 위해 웨어러블 장치(300)는 가속도 센서, 진동 센서 등과 같이 사용자의 움직임을 감지할 수 있는 센서를 구비할 수 있다.
기준 운동량은 사용자에 따라 달리 설정될 수 있다.
단계 S103 내지 S111를 도 5 내지 도 10을 참조하여 상세히 설명한다.
먼저, 도 5 내지 도 7은 본 발명의 실시 예에 따라 웨어러블 장치의 착용 상태에 기초하여 사용자에게 제공되는 인터페이스 화면을 설명하기 위한 도면이다.
이하에서 웨어러블 장치(300)는 사용자의 손목에 착용하는 형태의 장치임을 가정하여 설명하나, 이에 한정될 필요는 없고, 사용자의 인체에 착용할 수 있는 어떤 형태의 장치일 수 있다.
또한 이하에서는 디스플레이 장치(100)가 미디어 컨텐트의 재생 중 임을 가정하여 설명하나, 이에 한정될 필요는 없고, 디스플레이 장치(100)의 초기 화면을 표시하고 있는 상태일 수도 있다.
먼저, 도 5는 사용자가 웨어러블 장치(300)를 착용하고 있지 않는 상태에서 제공되는 사용자 인터페이스 화면의 예이다.
도 5를 참조하면, 사용자가 웨어러블 장치(300)를 착용하고 있지 않는 것으로 확인된 경우, 제어부(170)는 현재 재생 중인 미디어 컨텐트를 전체 화면으로 표시하도록 디스플레이부(180)를 제어할 수 있다. 영상 획득부(171)는 디스플레이 장치(100)의 전면에 위치한 사용자의 영상을 촬영할 수 있다. 제어부(170)는 촬영된 사용자의 영상으로부터 웨어러블 장치(300)에 대한 이미지를 추출할 수 없는 경우, 현재 재생 중인 미디어 컨텐트를 전체 화면으로 표시하도록 디스플레이부(180)를 제어할 수 있다.
도 6은 사용자가 웨어러블 장치(300)를 착용하고 있는 상태에서 제공되는 사용자 인터페이스 화면의 예이다.
도 6을 참조하면, 사용자가 웨어러블 장치(300)를 착용하고 있는 것으로 확인된 경우, 제어부(170)는 현재 재생 중인 미디어 컨텐트 및 수신한 운동 정보를 하나의 화면으로 표시하도록 디스플레이부(180)를 제어할 수 있다.
영상 획득부(171)는 디스플레이 장치(100)의 전면에 위치한 사용자의 영상을 촬영할 수 있다. 제어부(170)는 촬영된 사용자의 영상으로부터 웨어러블 장치(300)에 대한 이미지를 추출한 경우, 현재 재생 중인 미디어 컨텐트 및 수신한 운동 정보를 하나의 화면으로 표시하도록 디스플레이부(180)를 제어할 수 있다.
디스플레이부(180)의 화면은 수신한 운동 정보를 표시하는 제1 화면(181) 및재생 중인 미디어 컨텐트를 표시하는 제2 화면(183)을 포함할 수 있다. 제1 화면(181)의 크기와 제2 화면(183)의 크기는 같을 수도 있고, 다를 수도 있다.
일 실시 예에서 디스플레이 장치(100)와 웨어러블 장치(300)가 연동되는 경우, 제1 화면(181)에 표시되는 운동 정보는 웨어러블 장치(300)에도 그대로 표시될 수 있다. 즉, 디스플레이 장치(100)에 표시되는 운동 정보와 웨어러블 장치(300)에 표시되는 운동 정보는 서로 동일할 수 있다.
일 실시 예에서 제1 화면(181)에 표시되는 사용자의 운동 정보는 디스플레이 장치(100)와 웨어러블 장치(300)가 연동되기 전 사용자가 수행했던 운동 정보를 반영한 정보를 나타낼 수 있다.
도 6의 실시 예에 따르면, 사용자는 미디어 컨텐트를 시청하면서 자신이 어느 정도 운동을 했는지를 쉽게 확인할 수 있다.
다음으로 도 7을 설명한다.
도 7은 복수의 웨어러블 장치들이 인식된 경우, 제공되는 사용자 인터페이스 화면의 예이다.
디스플레이 장치(100)의 제어부(170)는 복수의 웨어러블 장치들(300_1,300_2)을 인식할 수 있다. 일 실시 예에서 복수의 웨어러블 장치들(300_1,300_2) 각각은 복수의 사용자들 각각에 대응될 수 있다. 즉, 복수의 웨어러블 장치들(300_1,300_2) 각각은 복수의 사용자들 각각이 소유하고 있는 장치들 일 수 있다.
또 다른 실시 예에서 복수의 웨어러블 장치들(300_1,300_2)은 한 명의 사용자가 소유하고, 종류가 다른 장치일 수 있다.
도 7의 예에서는 복수의 웨어러블 장치들(300_1,300_2) 각각은 복수의 사용자들 각각에 대응됨을 가정하여 설명한다.
복수의 사용자들 각각이 웨어러블 장치들(300_1, 300_2)을 착용하고 있는 것으로 확인된 경우, 제어부(170)는 현재 재생 중인 미디어 컨텐트 및 복수의 웨어러블 장치들(300_1, 300_2) 각각으로부터 수신한 운동 정보를 하나의 화면으로 표시하도록 디스플레이부(180)를 제어할 수 있다.
영상 획득부(171)는 디스플레이 장치(100)의 전면에 위치한 복수의 사용자들에 대한 영상을 촬영할 수 있다. 제어부(170)는 촬영된 복수의 사용자들에 대한 영상으로부터 웨어러블 장치들(300_1, 300_2)에 대한 이미지를 추출한 경우, 현재 재생 중인 미디어 컨텐트 및 웨어러블 장치들(300_1, 300_2) 각각으로부터 수신한 운동 정보를 하나의 화면으로 표시하도록 디스플레이부(180)를 제어할 수 있다.
디스플레이부(180)의 화면은 제1 웨어러블 장치(300_1)로부터 수신한 운동 정보를 표시하는 제1 화면(181) 및 재생 중인 미디어 컨텐트를 표시하는 제2 화면(183) 및 제2 웨어러블 장치(300_2)로부터 수신한 운동 정보를 표시하는 제3 화면(185)을 포함할 수 있다.
제1 화면(181) 및 제3 화면(183)은 웨어러블 장치를 착용한 사용자가 위치한 방향에 대응되도록 제공될 수 있다. 구체적으로, 제1 웨어러블 장치(300_1)를 착용한 사용자가 디스플레이 장치(100)의 좌측에 위치하는 경우, 디스플레이 장치(100)는 제1 웨어러블 장치(300_1)로부터 수신한 운동 정보를 표시하는 제1 화면(181)을 디스플레이부(180)의 좌측에 표시할 수 있다. 제2 웨어러블 장치(300_2)를 착용한 사용자가 디스플레이 장치(100)의 우측에 위치하는 경우, 디스플레이 장치(100)는 제2 웨어러블 장치(300_2)로부터 수신한 운동 정보를 표시하는 제2 화면(185)을 디스플레이부(180)의 우측에 표시할 수 있다.
이에 따라 복수의 사용자들 각각은 자신의 위치에 대응되는 운동 정보를 디스플레이부(180)를 통해 쉽게 확인할 수 있다.
다음으로 도 8 내지 도 9는 본 발명의 실시 예에 따라 웨어러블 장치의 착용 상태 및 사용자의 운동 상태에 기초하여 제공되는 인터페이스 화면을 설명하기 위한 도면이다.
일 실시 예에서 사용자의 운동 상태는 사용자가 운동 기구를 이용하여 멈춰있거나, 천천히 걷고 있거나, 빨리 걷고 있거나, 달리기를 하고 있는 상태일 수 있다. 사용자의 운동 상태는 사용자의 운동량이 기준 운동량 이상 또는 미만인 경우에 따라 구분될 수 있다.
먼저, 도 8은 사용자가 웨어러블 장치(300)를 착용하고 있고, 사용자의 운동량이 기준 운동량 이상인 경우, 제공되는 사용자 인터페이스 화면이다.
도 8을 참조하면, 사용자가 웨어러블 장치(300)를 착용하고 있고, 사용자의 운동량이 기준 운동량 이상인 경우, 제어부(170)는 사용자의 운동량이 기준 운동량 이상인 것으로 판단할 수 있고, 사용자의 운동 정보를 표시하는 제1 화면(181) 및 재생 중인 미디어 컨텐트를 표시하는 제2 화면(183)을 하나의 화면에 동시에 표시할 수 있다. 특히, 이 경우, 제어부(170)는 사용자의 운동 정보를 표시하는 제1 화면(181)의 크기를 재생 중인 미디어 컨텐트를 표시하는 제2 화면(183)의 크기보다 더 작게 제공할 수 있다.
예를 들어, 웨어러블 장치(300)를 착용한 사용자가 뛰고 있거나, 걷고 있는 경우, 제어부(170)는 사용자의 운동량이 기준 운동량 이상인 것으로 판단할 수 있고, 사용자의 운동 정보를 표시하는 제1 화면(181) 및 재생 중인 미디어 컨텐트를 표시하는 제2 화면(183)을 하나의 화면에 동시에 표시할 수 있다. 또한, 웨어러블 장치(300)를 착용한 사용자가 뛰고 있거나, 걷고 있는 경우, 제어부(170)는 사용자의 운동량이 기준 운동량 이상인 것으로 판단할 수 있고, 사용자의 운동 정보를 표시하는 제1 화면(181)의 크기를 재생 중인 미디어 컨텐트를 표시하는 제2 화면(183)의 크기보다 더 작게 제공할 수 있다.
사용자가 뛰거나 걷는 중에는 미디어 컨텐트의 시청에 더 집중 할 것이므로, 제어부(170)는 사용자의 운동 정보를 표시하는 제1 화면(181)의 크기를 재생 중인 미디어 컨텐트를 표시하는 제2 화면(183)의 크기보다 더 작게 제공할 수 있다.
또 다른 실시 예에서 웨어러블 장치(300)를 착용한 사용자의 운동량이 기준 운동량 이상인 경우, 제어부(170)는 재생 중인 미디어 컨텐트의 오디오 출력을 증가시킬 수 있다. 즉, 사용자가 운동을 시작한 경우, 미디어 컨텐트의 오디오가 잘 들리지 않을 수 있으므로, 제어부(170)는 사용자의 운동량이 기준 운동량 이상인 경우, 미디어 컨텐트의 오디오 출력을 증가시켜 사용자가 미디어 컨텐트의 시청에 집중할 수 있도록 한다.
다음으로 도 9를 설명한다.
도 9는 사용자가 웨어러블 장치(300)를 착용하고 있고, 사용자의 운동량이 기준 운동량 미만인 경우, 제공되는 사용자 인터페이스 화면이다.
웨어러블 장치(300)를 착용한 사용자가 멈춰있는 경우, 제어부(170)는 사용자의 운동량이 기준 운동량 미만인 것으로 판단할 수 있고, 사용자의 운동 정보를 표시하는 제1 화면(181), 재생 중인 미디어 컨텐트를 표시하는 제2 화면(183) 및 사용자의 운동 결과를 나타내는 제3 화면(187)을 하나의 화면에 동시에 표시할 수 있다.
일 실시 예에서 웨어러블 장치(300)를 착용한 사용자의 운동량이 기준 운동량 이상인 경우, 사용자의 운동 정보를 표시하는 화면의 크기는 사용자의 운동량이 기준 운동량 미만인 경우, 사용자의 운동 정보를 표시하는 화면의 크기보다 더 작을 수 있다. 사용자가 뛰거나 걷는 중에는 미디어 컨텐트의 시청에 더 집중 할 것이므로, 제어부(170)는 사용자가 정지해 있는 중인 경우에 비해 사용자의 운동 정보가 표시되는 화면의 크기를 더 작게 표시할 수 있다.
또 다른 실시 예에서 사용자의 운동량이 기준 운동량 미만인 경우, 제어부(170)는 사용자의 운동 정보를 표시하는 제1 화면(181)을 사용자의 운동 결과를 표시하는 제3 화면(187)으로 변경하여 표시할 수 있다. 즉, 제어부(170)는 사용자의 운동량이 기준 운동량 미만인 경우, 사용자의 운동 결과를 표시하는 제3 화면(187)과 재생 중인 미디어 컨텐트를 표시하는 제2 화면(183)만을 표시할 수 있다.
다시 도 4를 설명한다.
그 후, 제어부(170)는 사용자의 핸드 제스쳐를 인식한다(S113).
즉, 제어부(170)는 웨어러블 장치(300)를 착용한 사용자의 영상에 기초하여 사용자의 핸드 제스쳐를 인식할 수 있다. 구체적으로, 영상 획득부(171)는 디스플레이 전면에 위치한 사용자의 영상을 획득할 수 있고, 획득한 사용자의 영상을 이용하여 사용자의 핸드 제스쳐를 인식할 수 있다. 저장부(140)는 복수의 핸드 제스쳐 패턴을 저장하고 있을 수 있고, 제어부(170)는 인식된 핸드 제스쳐와 기 저장된 핸드 제스쳐 패턴을 비교할 수 있다. 제어부(170)는 비교 결과, 인식된 핸드 제스쳐가 기 저장된 핸드 제스쳐 패턴의 유사도가 기준 유사도를 초과하는 경우, 인식된 핸드 제스쳐를 기 저장된 핸드 제스쳐 패턴에 매칭되는 것으로 판단할 수 있다. 기준 유사도는 인식된 핸드 제스쳐가 기 저장된 핸드 제스쳐로 인식되기 위한 문턱 값일 수 있다.
제어부(170)는 인식된 핸드 제스쳐에 해당하는 손에 웨어러블 장치(300)가 착용되어 있는지 여부 및 사용자의 운동 상태 중 적어도 하나에 기초하여 디스플레이 장치(100)의 기능 또는 웨어러블 장치(300)의 기능을 선택적으로 제어한다(S113).
일 실시 예에서 제어부(170)는 인식된 핸드 제스쳐에 해당하는 손에 웨어러블 장치(300)가 착용되어 있는지 여부에 기초하여 인식된 핸드 제스쳐에 대응하는 디스플레이 장치(100)의 기능 또는 인식된 핸드 제스쳐에 대응하는 웨어러블 장치(300)의 기능을 선택적으로 제어할 수 있다.
구체적으로, 제어부(170)는 인식된 핸드 제스쳐에 해당하는 손에 웨어러블 장치(300)가 착용된 경우, 인식된 핸드 제스쳐에 대응하는 웨어러블 장치(300)의 기능을 제어할 수 있고, 인식된 핸드 제스쳐에 해당하는 손에 웨어러블 장치(300)가 착용되지 않은 경우, 인식된 핸드 제스쳐에 대응하는 디스플레이 장치(100)의 기능을 제어할 수 있다.
이에 대해서는 도 10 내지 도 13을 참조하여 설명한다.
도 10 내지 도 13은 본 발명의 일 실시 예에 따라 인식된 핸드 제스쳐에 해당하는 손에 웨어러블 장치가 착용되어 있는지 여부에 기초하여 인식된 핸드 제스쳐에 대응하는 디스플레이 장치의 기능 또는 인식된 핸드 제스쳐에 대응하는 웨어러블 장치의 기능을 제어하는 과정을 설명하는 도면이다.
먼저, 도 10 내지 도 11을 참조하여 인식된 핸드 제스쳐에 해당하는 손에 웨어러블 장치가 착용된 경우, 디스플레이 장치(100)가 웨어러블 장치(300)의 기능을 제어하는 과정을 설명한다.
도 10에 도시된 바와 같이, 디스플레이 장치(100)의 제어부(170)는 주먹을 쥐고 있는 사용자의 핸드 제스쳐(310) 및 핸드 제스쳐(310)에 해당하는 손에 웨어러블 장치(300)가 착용되어 있음을 인식할 수 있다. 제어부(170)는 인식된 사용자의 핸드 제스쳐(310)에 대응하는 웨어러블 장치(300)의 기능을 제어할 수 있다. 이를 위해 디스플레이 장치(100)의 저장부(140)는 복수의 핸드 제스쳐들 및 복수의 핸드 제스쳐들 각각에 대응하는 웨어러블 장치(300)의 기능을 대응시켜 저장하고 있을 수 있다. 제어부(170)는 인식된 핸드 제스쳐(310)에 대응하는 웨어러블 장치(300)의 기능을 저장부(140)를 통해 검색할 수 있고, 검색 결과에 대응하는 기능이 웨어러블 장치(300)에서 수행될 수 있도록 웨어러블 장치(300)에 제어 명령을 전송할 수 있다.
예를 들어, 도 10에 도시된 핸드 제스쳐(310)가 웨어러블 장치(300)가 수신한 메시지를 표시하는 기능에 대응하는 제스쳐인 경우, 제어부(170)는 이에 대한 제어 명령을 전송할 수 있다. 도 11에 도시된 바와 같이, 메시지를 표시하는 제어 명령을 수신한 웨어러블 장치(300)는 수신한 메시지를 표시할 수 있다.
다음으로 도 12 내지 도 13을 설명한다.
도 12 내지 도 13은 인식된 핸드 제스쳐에 해당하는 손에 웨어러블 장치가 착용되지 않은 경우, 디스플레이 장치(100)의 기능을 제어하는 과정을 설명한다.
도 12에 도시된 바와 같이, 디스플레이 장치(100)의 제어부(170)는 주먹을 쥐고 있는 사용자의 핸드 제스쳐(310) 및 핸드 제스쳐(310)에 해당하는 손에 웨어러블 장치(300)가 착용되어 있지 않음을 인식할 수 있다. 제어부(170)는 인식된 사용자의 핸드 제스쳐(310)에 대응하는 디스플레이 장치(100)의 기능을 제어할 수 있다. 이를 위해 디스플레이 장치(100)의 저장부(140)는 복수의 핸드 제스쳐들 및 복수의 핸드 제스쳐들 각각에 대응하는 디스플레이 장치(300)의 기능을 대응시켜 저장하고 있을 수 있다. 제어부(170)는 인식된 핸드 제스쳐(310)에 대응하는 디스플레이 장치(100)의 기능을 저장부(140)를 통해 검색할 수 있고, 검색 결과에 대응하는 기능이 디스플레이 장치(300)의 기능을 제어할 수 있다.
예를 들어, 도 12에 도시된 핸드 제스쳐(310)가 디스플레이 장치(100)에서 재생 중인 미디어 컨텐트를 전체 화면으로 표시하는 기능에 대응하는 제스쳐인 경우, 제어부(170)는 도 13에 도시된 바와 같이, 재생 중인 미디어 컨텐트를 전체 화면으로 표시할 수 있다.
다시 도 4를 설명한다.
또 다른 실시 예에서 제어부(170)는 사용자의 운동 상태에 기초하여 인식된 핸드 제스쳐에 대응하는 디스플레이 장치(100)의 기능 또는 인식된 핸드 제스쳐에 대응하는 웨어러블 장치(300)의 기능을 제어할 수 있다.
구체적으로, 제어부(170)는 인식된 사용자의 핸드 제스쳐에 해당하는 손에 웨어러블 장치(300)가 착용되었는지 여부에 상관없이 사용자의 운동 상태에 기초하여 디스플레이 장치(100)의 기능 또는 인식된 핸드 제스쳐에 대응하는 웨어러블 장치(300)의 기능을 제어할 수 있다. 이에 대해서는 도 14 내지 도 21을 참조하여 설명한다.
도 14 내지 도 21은 본 발명의 일 실시 예에 사용자의 운동 상태에 기초하여 인식된 사용자의 핸드 제스쳐에 대응하는 디스플레이 장치의 기능 또는 인식된 핸드 제스쳐에 대응하는 웨어러블 장치의 기능을 제어하는 과정을 설명하는 도면이다.
먼저, 도 14 내지 도 15를 참조하여 본 발명의 일 실시 예에 사용자의 운동 상태에 기초하여 인식된 사용자의 핸드 제스쳐에 대응하는 디스플레이 장치의 기능을 제어하는 과정을 설명한다.
도 14에 도시된 바와 같이, 사용자가 모든 손가락을 편 상태로 손을 좌에서 우(또는 우에서 좌)로 이동하는 핸드 제스쳐(320)가 인식되고, 사용자의 운동량이 기준 운동량 이상인 경우, 제어부(170)는 제2 화면(183)에서 재생하고 있는 미디어 컨텐트를 다른 미디어 컨텐트로 변경할 수 있다. 예를 들어, 사용자가 모든 손가락을 편 상태로 손을 좌에서 우(또는 우에서 좌)로 이동하는 핸드 제스쳐(320)는 방송 프로그램의 채널을 변경하는 기능에 대응되고, 사용자의 운동량이 기준 운동량 이상인 경우, 도 15에 도시된 바와 같이, 제어부(170)는 인식된 핸드 제스쳐(320)에 따라 제2 화면(183)에 표시하는 채널을 변경할 수 있다. 상기 핸드 제스쳐(320)에 대응하는 기능은 예시에 불과하고, 불륨 조절 등과 같이, 상대적으로 조작이 단순한 디스플레이 장치(100)의 일부 기능에 대응될 수 있다.
도 14 내지 도 15의 실시 예에 따르면, 사용자가 운동 중에는 움직임이 많아 디스플레이 장치(100)가 복잡한 핸드 제스쳐를 인식하는데 어렵기 때문에 상대적으로 단순한 핸드 제스쳐로 디스플레이 장치의 기능을 제어할 수 있도록 한다.
다음으로 도 16 내지 도 17를 참조하여 참조하여 본 발명의 일 실시 예에 사용자의 운동 상태에 기초하여 인식된 사용자의 핸드 제스쳐에 대응하는 웨어러블 장치의 기능을 제어하는 과정을 설명한다.
도 16에 도시된 바와 같이, 사용자가 검지 손가락만을 편 상태로 손을 좌에서 우(또는 우에서 좌)로 이동하는 핸드 제스쳐(320)가 인식되고, 사용자의 운동량이 기준 운동량 이상인 경우, 제어부(170)는 웨어러블 장치(300)의 기능을 제어할 수 있다.
사용자가 검지 손가락을 편 상태로 손을 좌에서 우(또는 우에서 좌)로 이동하는 핸드 제스쳐(330)가 날씨 정보를 표시하는 웨어러블 장치(300)의 기능에 대응됨을 가정한다. 핸드 제스쳐(330)가 인식되고, 사용자의 운동량이 기준 운동량 이상인 경우, 제어부(170)는 웨어러블 장치(300)에 인식된 핸드 제스쳐(330)에 대응하는 기능인 날씨 정보를 표시하라는 제어 명령을 웨어러블 장치(300)에 전송할 수 있다. 웨어러블 장치(300)는 날씨 정보 표시에 대응하는 제어 명령을 디스플레이 장치(100)로부터 수신하여 도 17에 도시된 바와 같이, 날씨 정보를 표시한다.
도 16 내지 도 17의 실시 예에 따르면, 사용자가 운동 중에는 움직임이 많아 디스플레이 장치(100)가 복잡한 핸드 제스쳐를 인식하는데 어렵기 때문에 상대적으로 단순한 핸드 제스쳐로 웨어러블 장치의 기능을 제어할 수 있도록 한다. 또한, 사용자의 운동 중에도 단순한 핸드 제스쳐로 웨어러블 장치(300)의 기능을 제어할 수 있는 효과도 있다.
다음으로 도 18 내지 도 21을 참조하여 본 발명의 또 다른 실시 예에 따라 사용자의 운동 상태에 기초하여 인식된 핸드 제스쳐에 대응하는 웨어러블 장치의 기능 또는 인식된 핸드 제스쳐에 대응하는 디스플레이 장치의 기능을 제어하는 과정을 설명한다.
도 18 내지 도 21의 실시 예에 따르면, 사용자의 운동량이 기준 운동량을 초과하는 경우, 제어부(170)는 웨어러블 장치(300)를 착용한 손의 방향에 관계 없이 오른손에 대한 핸드 제스쳐 및 왼손에 대한 핸드 제스쳐 중 어느 하나를 통해 디스플레이 장치(100)의 기능 또는 웨어러블 장치(300)의 기능을 제어할 수 있다.
구체적으로, 사용자의 운동량이 기준 운동량을 초과하는 경우, 제어부(170)는 웨어러블 장치(300)를 착용한 손의 방향에 관계 없이 오른손에 대한 핸드 제스쳐를 통해 디스플레이 장치(100)의 기능을 제어할 수 있고, 왼손에 대한 핸드 제스쳐는 웨어러블 장치(300)의 기능을 제어할 수 있다. 반대로, 사용자의 운동량이 기준 운동량을 초과하는 경우, 제어부(170)는 웨어러블 장치(300)를 착용한 손의 방향에 관계 없이 왼손에 대한 핸드 제스쳐를 통해 디스플레이 장치(100)의 기능을 제어할 수 있고, 오른손에 대한 핸드 제스쳐는 웨어러블 장치(300)의 기능을 제어할 수 있다.
먼저, 도 18 내지 도 19는 사용자가 운동 중 왼손에 대한 제스쳐를 취하는 경우, 디스플레이 장치(100)의 기능을 제어하는 과정을 설명하는 도면이다.
도 18의 경우, 사용자의 왼손에는 웨어러블 장치(300)가 착용되어 있거나 웨어러블 장치(300)가 착용되지 않는 상태임을 가정한다.
제어부(170)는 사용자의 운동량이 기준 운동량 이상이고, 인식된 핸드 제스쳐(310)에 대응하는 손이 왼손인 경우, 사용자의 왼손에 웨어러블 장치(300)가 착용되어 있는지 여부에 관계없이 인식된 핸드 제스쳐에 대응하는 디스플레이 장치(100)의 기능을 제어할 수 있다. 즉, 핸드 제스쳐(310)에 대응하는 기능이 재생 중인 미디어 컨텐트를 전체 화면으로 표시하는 기능인 경우, 도 19에 도시된 바와 같이, 제어부(170)는 제2 화면(183)에서 재생 중인 미디어 컨텐트를 전체 화면으로 표시할 수 있다.
다음으로 도 20 내지 도 21을 설명한다.
도 20 내지 도 21은 사용자가 운동 중 오른손에 대한 제스쳐를 취하는 경우, 웨어러블 장치(300)의 기능을 제어하는 과정을 설명하는 도면이다.
도 20의 경우, 사용자의 오른손에는 웨어러블 장치(300)가 착용되어 있거나 웨어러블 장치(300)가 착용되지 않는 상태임을 가정한다.
제어부(170)는 사용자의 운동량이 기준 운동량 이상이고, 인식된 핸드 제스쳐(310)에 대응하는 손이 오른손인 경우, 사용자의 오른손에 웨어러블 장치(300)가 착용되어 있는지 여부에 관계없이 인식된 핸드 제스쳐에 대응하는 웨어러블 장치(300)의 기능을 제어할 수 있다. 즉, 핸드 제스쳐(340)에 대응하는 기능이 웨어러블 장치(300)가 수신한 메시지를 표시하는 기능인 경우, 도 21에 도시된 바와 같이, 제어부(170)는 웨어러블 장치(300)에 수신한 메시지를 표시하라는 제어 명령을 전송할 수 있고, 웨어러블 장치(300)는 수신한 제어 명령에 따라 자신이 수신한 메시지를 표시할 수 있다.
다시 도 4를 설명한다.
또 다른 실시 예에서 제어부(170)는 사용자의 핸드 제스쳐가 인식되고, 사용자의 운동량이 기준 운동량 미만인 경우, 인식된 핸드 제스쳐에 대응하는 디스플레이 장치(100)의 기능을 제어할 수 있다. 즉, 이 경우, 제어부(170)는 사용자가 운동을 하지 않는 것으로 보고, 사용자의 핸드 제스쳐에 대응하는 디스플레이 장치(100)의 기능만을 제어할 수 있다.
그 후, 제어부(170)는 수신된 사용자의 운동 정보를 통해 사용자가 운동을 종료하였는지 확인한다(S115).
사용자가 운동을 종료한 것으로 확인된 경우, 제어부(170)는 사용자의 운동 결과를 제공하고(S117), 사용자가 운동을 종료하지 않는 것으로 확인된 경우, 단계 S107로 돌아간다.
일 실시 예에서 제어부(170)는 웨어러블 장치(300)로부터 수신한 운동 정보에 기초하여 기 설정된 시간 동안 사용자의 운동량이 기준 운동량 미만인 경우, 사용자가 운동을 종료한 것으로 확인할 수 있다. 구체적으로, 제어부(170)는 일정 시간 동안 사용자의 운동량이 기준 운동량 이상이고, 그 후, 기 설정된 시간 동안 사용자의 운동량이 기준 운동량 미만인 경우, 사용자가 운동을 종료한 것으로 확인할 수 있다.
또 다른 실시 예에서 제어부(170)는 운동 종료를 나타내는 사용자의 핸드 제스쳐에 따라 사용자가 운동을 종료한 것으로 확인할 수 있고, 운동 결과를 디스플레이부(180)를 통해 표시하도록 제어할 수 있다.
단계 S115 내지 S117를 도 22 내지 도 23을 참조하여 설명한다.
도 22 내지 도 23은 본 발명의 실시 예에 따라 사용자가 운동을 종료한 것을 확인하고, 사용자의 운동 결과를 표시하는 실시 예를 설명하는 도면이다.
먼저, 도 22는 웨어러블 장치(300)로부터 수신한 운동 정보에 기초하여 사용자의 운동 결과를 제공하는 실시 예이다.
도 22를 참조하면, 사용자가 운동을 종료한 경우, 즉, 기 설정된 시간 동안 사용자의 운동량이 기준 운동량 미만 인 경우, 제어부(170)는 사용자의 운동 결과를 제3 화면(187)을 통해 제공할 수 있다. 제어부(170)는 실시간으로 웨어러블 장치(300)로부터 사용자의 운동 정보를 수신할 수 있고, 수신한 운동 정보에 기초하여 사용자가 운동을 종료한 것으로 확인할 수 있다. 사용자가 운동을 종료한 것으로 판단된 경우, 제어부(170)는 디스플레이부(180)의 제3 화면(187)을 통해 사용자의 운동 결과를 표시할 수 있다.
다음으로 도 23을 설명한다.
도 23은 인식된 핸드 제스쳐에 기초하여 사용자의 운동 결과를 제공하는 실시 예이다.
도 23을 참조하면, 사용자가 운동 종료를 나타내는 핸드 제스쳐(350)가 인식된 경우, 제어부(170)는 사용자의 운동 결과를 제3 화면(187)을 통해 제공할 수 있다. 즉, 손가락 중 엄지만을 올리는 핸드 제스쳐(350)가 인식된 경우, 제어부(170)는 사용자가 운동을 종료했음을 인식하고, 운동 결과를 제3 화면(187)을 통해 표시할 수 있다.
일 실시 예에서 제어부(170)는 인식된 핸드 제스쳐(350)에 대응하는 손의 방향에 관계 없이 사용자의 운동 결과를 디스플레이부(180)를 통해 제공할 수 있다.
또 다른 실시 예에서 제어부(170)는 인식된 핸드 제스쳐(350)에 대응하는 손에 웨어러블 장치(300)를 착용했는지 여부에 관계 없이 사용자의 운동 결과를 디스플레이부(180)를 통해 제공할 수 있다.
다음으로 도 24를 설명한다.
도 24는 본 발명의 일 실시 예에 따라 웨어러블 장치를 착용한 사용자의 운동 중 사용자의 이상 상태를 알려주는 실시 예이다.
도 24는 사용자(A)가 웨어러블 장치(300)를 착용 중이고, 사용자(A)가 운동 중인 경우를 가정하여 설명한다.
제어부(170)는 사용자의 심박수를 포함하는 운동 정보를 웨어러블 장치(300)로부터 수신하여 사용자의 심박수가 이상 상태에 있는 경우, 심박수의 이상 상태를 디스플레이부(180)를 통해 제공할 수 있다. 제어부(170)는 사용자의 심박수가 기준 심박수 범위를 벗어나는 경우, 미디어 컨텐트의 재생 화면의 일측에 위치한 팝업창을 통해 심박수의 이상 상태를 표시할 수 있다.
사용자는 운동 중 심박수의 이상 상태를 쉽게 확인할 수 있고, 그에 따라 운동을 종료하는 등의 조치를 수행할 수 있다.
다음으로 도 25를 설명한다.
도 25는 본 발명의 일 실시 예에 따라 디스플레이 장치(100)와 웨어러블 장치(300)가 연동된 경우, 웨어러블 장치(300)의 기능을 제어하는 실시 예를 설명하는 도면이다.
도 25는 단계 S101 이후, 수행될 수 있는 실시 예이다.
디스플레이 장치(100)가 웨어러블 장치(300)를 인식한 경우, 디스플레이 장치(100)의 디스플레이부(180)는 웨어러블 장치(300)의 설정 메뉴를 표시할 수 있다.
일 실시 예에서 웨어러블 장치(300)의 설정 메뉴는 웨어러블 장치(300)의 자체 설정 버튼의 선택에 의해 디스플레이 장치(100) 상에 표시될 수 있다.
또 다른 실시 예에서 웨어러블 장치(300)의 설정 메뉴는 디스플레이 장치(100)에 표시된 설정 메뉴 버튼의 선택 입력에 의해 표시될 수 있다.
디스플레이 장치(100)가 웨어러블 장치(300)의 설정 메뉴를 표시하는 경우, 디스플레이 장치(100)는 사용자의 핸드 제스쳐를 인식하여 웨어러블 장치(100)의 기능을 설정할 수 있다. 즉, 커서의 선택, 커서의 이동 등과 같은 디스플레이 장치(100)의 기능에 대응하는 핸드 제스쳐가 인식된 경우, 디스플레이 장치(100)는 인식된 핸드 제스쳐에 따라 웨어러블 장치(300)의 기능을 설정할 수 있다.
사용자는 화면이 작은 웨어러블 장치(300)를 보지 않고, 화면이 큰 디스플레이 장치(100)를 통해 웨어러블 장치(100)의 기능을 설정할 수 있다.
본 발명의 일 실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
상기와 같이 설명된 디스플레이 장치는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

Claims (22)

  1. 디스플레이 장치의 동작 방법에 있어서,
    웨어러블 장치를 인식하는 단계; 및
    사용자가 인식된 웨어러블 장치를 착용하고 있는지 여부를 나타내는 웨어러블 장치의 착용 상태에 기초하여 상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하는 단계를 포함하고,
    상기 동작 방법은
    상기 사용자가 상기 웨어러블 장치를 착용하고 있는 것으로 확인된 경우, 상기 웨어러블 장치로부터 상기 사용자의 운동 정보를 수신하는 단계를 더 포함하고,
    상기 제공하는 단계는
    상기 운동 정보에 포함된 상기 사용자의 운동량이 기준 운동량 이상인 경우, 상기 사용자의 상기 운동 정보를 표시하는 화면의 크기를 상기 사용자의 운동량이 기준 운동량 미만인 경우, 상기 사용자의 운동 정보를 표시하는 화면의 크기보다 더 작게 표시하도록 상기 디스플레이 장치를 제어하는 단계를 포함하는
    디스플레이 장치의 동작 방법.
  2. 제1항에 있어서,
    상기 제공하는 단계는
    상기 디스플레이 장치가 재생 중인 미디어 컨텐트를 하나의 화면에 표시하는 단계를 더 포함하는
    디스플레이 장치의 동작 방법.
  3. 제1항에 있어서,
    상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하는 단계는
    사용자가 상기 웨어러블 장치를 착용하고 있지 않는 것으로 확인된 경우, 상기 디스플레이 장치가 재생 중인 미디어 컨텐트를 전체 화면으로 표시하는 단계를 포함하는
    디스플레이 장치의 동작 방법.
  4. 제1항에 있어서,
    상기 웨어러블 장치를 인식하는 단계는
    복수의 웨어러블 장치들을 인식하는 단계를 포함하고,
    상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하는 단계는
    복수의 사용자들 각각이 상기 복수의 웨어러블 장치들 각각을 착용하고 있는 것으로 확인된 경우, 상기 디스플레이 장치가 재생 중인 미디어 컨텐트 및 복수의 웨어러블 장치들 각각으로부터 수신한 운동 정보를 하나의 화면으로 표시하는 단계를 포함하는
    디스플레이 장치의 동작 방법.
  5. 제2항에 있어서,
    상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하는 단계는 상기 웨어러블 장치의 착용 상태 및 사용자의 운동 상태에 기초하여 상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하는 단계를 포함하는
    디스플레이 장치의 동작 방법.
  6. 제5항에 있어서,
    사용자의 운동량이 기준 운동량 이상인 경우, 상기 재생 중인 미디어 컨텐트의 오디오 출력을 증가시키는 단계를 더 포함하고,
    상기 기준 운동량은 기 설정된 초당 사용자의 움직임 횟수 또는 초당 사용자의 움직임 량 중 어느 하나인
    디스플레이 장치의 동작 방법.
  7. 삭제
  8. 제5항에 있어서,
    상기 웨어러블 장치의 착용 상태 및 사용자의 운동 상태에 기초하여 상기 상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하는 단계는
    사용자의 운동량이 기준 운동량 미만 경우, 사용자의 운동 정보를 표시하는 제1 화면, 재생 중인 미디어 컨텐트를 표시하는 제2 화면 및 사용자의 운동 결과를 표시하는 제3 화면을 하나의 화면에 표시하거나,
    사용자의 운동량이 기준 운동량 미만인 경우, 사용자의 운동 정보를 표시하는 화면을 사용자의 운동 결과를 표시하는 화면으로 변경하여 상기 사용자의 운동 결과를 표시하는 화면과 상기 재생 중인 미디어 컨텐트를 표시하는 화면을 하나의 화면에 표시하는 단계를 포함하는
    디스플레이 장치의 동작 방법.
  9. 제1항에 있어서,
    적어도 하나의 사용자의 핸드 제스쳐를 인식하는 단계; 및
    인식된 핸드 제스쳐에 해당하는 손에 상기 웨어러블 장치가 착용되어 있는지 여부에 기초하여 상기 핸드 제스쳐에 대응하는 상기 디스플레이 장치의 기능 또는 상기 핸드 제스쳐에 대응하는 웨어러블 장치의 기능을 선택적으로 제어하는 단계를 더 포함하는
    디스플레이 장치의 동작 방법.
  10. 제1항에 있어서,
    적어도 하나의 사용자의 핸드 제스쳐를 인식하는 단계; 및
    사용자의 운동 상태에 기초하여 인식된 핸드 제스쳐에 대응하는 디스플레이 장치의 기능 또는 인식된 핸드 제스쳐에 대응하는 웨어러블 장치의 기능을 선택적으로 제어하는 단계를 더 포함하는
    디스플레이 장치의 동작 방법.
  11. 제1항에 있어서,
    상기 웨어러블 장치의 착용 상태는
    상기 웨어러블 장치에 포함된 센서를 통해 감지된 사용자의 신체 정보를 상기 웨어러블 장치로부터 수신하여 판단되거나,
    상기 디스플레이 장치에 포함된 카메라를 통해 획득한 사용자의 영상으로부터 사용자의 특정 신체 부위에 착용된 웨어러블 장치의 이미지를 추출하여 판단되는
    디스플레이 장치의 동작 방법.
  12. 제1항에 있어서,
    상기 디스플레이 장치는 운동 기구와 결합된
    디스플레이 장치의 동작 방법.
  13. 디스플레이 장치에 있어서,
    디스플레이부;
    웨어러블 장치와 통신을 수행하기 위한 통신부; 및
    상기 웨어러블 장치를 인식하고, 사용자가 인식된 웨어러블 장치를 착용하고 있는지 여부를 나타내는 웨어러블 장치의 착용 상태에 기초하여 상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하도록 상기 디스플레이부를 제어하는 제어부를 포함하고,
    상기 제어부는
    상기 사용자가 상기 웨어러블 장치를 착용하고 있는 것으로 확인된 경우, 상기 웨어러블 장치로부터 상기 사용자의 운동 정보를 상기 통신부를 통해 수신하고,
    상기 운동 정보에 포함된 상기 사용자의 운동량이 기준 운동량 이상인 경우, 상기 사용자의 상기 운동 정보를 표시하는 화면의 크기를 상기 사용자의 운동량이 기준 운동량 미만인 경우, 상기 사용자의 운동 정보를 표시하는 화면의 크기보다 더 작게 표시하도록 상기 디스플레이부를 제어하는
    디스플레이 장치.
  14. 제13항에 있어서,
    상기 제어부는
    상기 디스플레이 장치가 재생 중인 미디어 컨텐트를 하나의 화면에 더 표시하도록 상기 디스플레이부를 제어하는
    디스플레이 장치.
  15. 제13항에 있어서,
    상기 제어부는
    사용자가 상기 웨어러블 장치를 착용하고 있지 않는 것으로 확인된 경우, 상기 디스플레이 장치가 재생 중인 미디어 컨텐트를 전체 화면으로 표시하도록 상기 디스플레이부를 제어하는
    디스플레이 장치.
  16. 제13항에 있어서,
    상기 제어부는
    복수의 웨어러블 장치들을 인식하고, 복수의 사용자들 각각이 상기 복수의 웨어러블 장치들 각각을 착용하고 있는 것으로 확인된 경우, 상기 디스플레이 장치가 재생 중인 미디어 컨텐트 및 복수의 웨어러블 장치들 각각으로부터 수신한 운동 정보를 하나의 화면으로 표시하도록 상기 디스플레이부를 제어하는
    디스플레이 장치.
  17. 제14항에 있어서,
    상기 제어부는
    상기 웨어러블 장치의 착용 상태 및 사용자의 운동 상태에 기초하여 상기 디스플레이 장치의 사용자 인터페이스 화면을 다르게 제공하는
    디스플레이 장치.
  18. 제17항에 있어서,
    상기 제어부는
    사용자의 운동량이 기준 운동량 이상인 경우, 상기 재생 중인 미디어 컨텐트의 오디오 출력을 증가시키고,
    상기 기준 운동량은 기 설정된 초당 사용자의 움직임 횟수 또는 초당 사용자의 움직임 량 중 어느 하나인
    디스플레이 장치.
  19. 삭제
  20. 제17항에 있어서,
    상기 제어부는
    사용자의 운동량이 기준 운동량 미만 경우, 사용자의 운동 정보를 표시하는 제1 화면, 재생 중인 미디어 컨텐트를 표시하는 제2 화면 및 사용자의 운동 결과를 표시하는 제3 화면을 하나의 화면에 표시하도록 상기 디스플레이부를 제어하거나,
    사용자의 운동량이 기준 운동량 미만인 경우, 사용자의 운동 정보를 표시하는 화면을 사용자의 운동 결과를 표시하는 화면으로 변경하여 상기 사용자의 운동 결과를 표시하는 화면과 상기 재생 중인 미디어 컨텐트를 표시하는 화면을 하나의 화면에 표시하도록 상기 디스플레이부를 제어하는
    디스플레이 장치.
  21. 제13항에 있어서,
    적어도 하나의 사용자의 핸드 제스쳐를 인식하기 위한 카메라를 더 포함하고,
    상기 제어부는
    상기 카메라를 통해 인식된 핸드 제스쳐에 해당하는 손에 상기 웨어러블 장치가 착용되어 있는지 여부에 기초하여 상기 핸드 제스쳐에 대응하는 상기 디스플레이 장치의 기능 또는 상기 핸드 제스쳐에 대응하는 웨어러블 장치의 기능을 선택적으로 제어하는
    디스플레이 장치.
  22. 제13항에 있어서,
    적어도 하나의 사용자의 핸드 제스쳐를 인식하기 위한 카메라를 더 포함하고,
    상기 제어부는
    사용자의 운동 상태에 기초하여 상기 카메라를 통해 인식된 핸드 제스쳐에 대응하는 디스플레이 장치의 기능 또는 인식된 핸드 제스쳐에 대응하는 웨어러블 장치의 기능을 선택적으로 제어하는 단계를 더 포함하는
    디스플레이 장치.
KR1020140058777A 2014-05-16 2014-05-16 디스플레이 장치 및 그의 동작 방법 KR102238330B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140058777A KR102238330B1 (ko) 2014-05-16 2014-05-16 디스플레이 장치 및 그의 동작 방법
US14/477,657 US10088901B2 (en) 2014-05-16 2014-09-04 Display device and operating method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140058777A KR102238330B1 (ko) 2014-05-16 2014-05-16 디스플레이 장치 및 그의 동작 방법

Publications (2)

Publication Number Publication Date
KR20150131695A KR20150131695A (ko) 2015-11-25
KR102238330B1 true KR102238330B1 (ko) 2021-04-09

Family

ID=54538518

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140058777A KR102238330B1 (ko) 2014-05-16 2014-05-16 디스플레이 장치 및 그의 동작 방법

Country Status (2)

Country Link
US (1) US10088901B2 (ko)
KR (1) KR102238330B1 (ko)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102356599B1 (ko) * 2014-12-05 2022-01-28 삼성전자주식회사 이미지의 관심 영역 결정 방법 및 관심 영역 결정 장치
WO2016105166A1 (en) * 2014-12-26 2016-06-30 Samsung Electronics Co., Ltd. Device and method of controlling wearable device
USD766956S1 (en) * 2015-04-28 2016-09-20 IncludeFitness, Inc. Display screen with an animated graphical user interface
US20170083101A1 (en) * 2015-09-17 2017-03-23 International Business Machines Corporation Gesture recognition data transfer
US10805574B2 (en) * 2015-09-30 2020-10-13 Sony Corporation Information processing device, information processing method, and program for decreasing reduction of visibility
WO2017090986A1 (en) 2015-11-23 2017-06-01 Samsung Electronics Co., Ltd. Electronic apparatus and method for controlling electronic apparatus thereof
WO2017113379A1 (zh) * 2015-12-31 2017-07-06 华为技术有限公司 一种用户界面的菜单显示方法及手持终端
US10105594B2 (en) * 2016-06-17 2018-10-23 Disney Enterprises, Inc. Wearable garments recognition and integration with an interactive gaming system
CN111176594B (zh) * 2019-09-23 2023-02-28 广东小天才科技有限公司 一种智能音箱的屏幕显示方法及智能音箱、存储介质
KR20220001862A (ko) * 2020-06-30 2022-01-06 삼성전자주식회사 사용자 모니터링 및 정보 제공 방법 및 그 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050215870A1 (en) * 2004-03-19 2005-09-29 Rademaker William B System for monitoring physical parameters of individuals performing physical activities and apparatus for indicating oar positions
US20060084551A1 (en) * 2003-04-23 2006-04-20 Volpe Joseph C Jr Heart rate monitor for controlling entertainment devices
US20130222271A1 (en) * 2012-02-28 2013-08-29 Motorola Mobility, Inc. Methods and Apparatuses for Operating a Display in an Electronic Device

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5803870A (en) * 1996-05-06 1998-09-08 Unisen, Inc. Exercise machine using heart rate control for cardiopulmonary interval training
JP3694267B2 (ja) * 2002-01-11 2005-09-14 コナミスポーツライフ株式会社 運動支援装置
WO2006053349A1 (en) * 2004-11-09 2006-05-18 Gustav James Smit An exercise system
US20070032345A1 (en) * 2005-08-08 2007-02-08 Ramanath Padmanabhan Methods and apparatus for monitoring quality of service for an exercise machine communication network
US20110224564A1 (en) * 2010-03-10 2011-09-15 Sotera Wireless, Inc. Body-worn vital sign monitor
KR101183737B1 (ko) * 2010-11-15 2012-09-17 서인아 동작 인식이 가능한 멀티 이어폰 장치 및 이 장치의 동작 인식 방법
KR20130077336A (ko) * 2011-12-29 2013-07-09 주식회사 네오블루 인텔리전트 가상 트레이닝 방법 및 이를 수행하는 어플리케이션 실행 장치
US8947382B2 (en) * 2012-02-28 2015-02-03 Motorola Mobility Llc Wearable display device, corresponding systems, and method for presenting output on the same

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060084551A1 (en) * 2003-04-23 2006-04-20 Volpe Joseph C Jr Heart rate monitor for controlling entertainment devices
US20050215870A1 (en) * 2004-03-19 2005-09-29 Rademaker William B System for monitoring physical parameters of individuals performing physical activities and apparatus for indicating oar positions
US20130222271A1 (en) * 2012-02-28 2013-08-29 Motorola Mobility, Inc. Methods and Apparatuses for Operating a Display in an Electronic Device

Also Published As

Publication number Publication date
KR20150131695A (ko) 2015-11-25
US10088901B2 (en) 2018-10-02
US20150331598A1 (en) 2015-11-19

Similar Documents

Publication Publication Date Title
KR102238330B1 (ko) 디스플레이 장치 및 그의 동작 방법
CN110850593B (zh) 移动设备和通过移动设备配对电子设备的方法
EP3345379B1 (en) Method for electronic device to control object and electronic device
US9900498B2 (en) Glass-type terminal and method for controlling the same
KR102191177B1 (ko) 디스플레이 장치 및 그의 동작 방법
CN104010220B (zh) 内容服务提供方法和装置
US9436290B2 (en) Display device and operating method thereof
TWI544336B (zh) 眼鏡、電子裝置與其配對的方法以及順暢內容播放的方法
CN108476258B (zh) 用于电子设备控制对象的方法以及电子设备
US10133903B2 (en) Remote control device and operating method thereof
KR20120033723A (ko) 3ｄ 안경 및 그의 제어 방법
US10162423B2 (en) Image display apparatus and operation method thereof
KR20170035167A (ko) 디스플레이 장치 및 그의 동작 방법
US10503776B2 (en) Image display apparatus and information providing method thereof
KR20180016805A (ko) 디스플레이 장치 및 그의 동작 방법
KR102220198B1 (ko) 디스플레이 장치 및 그의 동작 방법
CN108600797B (zh) 一种信息处理法方法和电子设备
KR20160004739A (ko) 디스플레이 장치 및 그의 동작 방법
KR20180043139A (ko) 디스플레이 장치 및 그의 동작 방법
KR102650267B1 (ko) 디스플레이 장치 및 그의 동작 방법
KR20150064597A (ko) 디스플레이 장치 및 그의 동작 방법
KR20170081454A (ko) 디스플레이 장치
KR20160044254A (ko) 디스플레이 장치 및 그의 동작 방법
KR20240044943A (ko) 투명 디스플레이 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant