KR101430614B1 - 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법 - Google Patents

웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법 Download PDF

Info

Publication number
KR101430614B1
KR101430614B1 KR1020140065865A KR20140065865A KR101430614B1 KR 101430614 B1 KR101430614 B1 KR 101430614B1 KR 1020140065865 A KR1020140065865 A KR 1020140065865A KR 20140065865 A KR20140065865 A KR 20140065865A KR 101430614 B1 KR101430614 B1 KR 101430614B1
Authority
KR
South Korea
Prior art keywords
image
wearable
wearer
display area
virtual display
Prior art date
Application number
KR1020140065865A
Other languages
English (en)
Inventor
이성호
Original Assignee
주식회사 모리아타운
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 모리아타운 filed Critical 주식회사 모리아타운
Priority to KR1020140065865A priority Critical patent/KR101430614B1/ko
Application granted granted Critical
Publication of KR101430614B1 publication Critical patent/KR101430614B1/ko
Priority to US14/526,060 priority patent/US20150346816A1/en
Priority to JP2014233065A priority patent/JP5967839B2/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00—Non-optical adjuncts; Attachment thereof
    • G02C11/10—Electronic devices other than hearing aids
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Otolaryngology (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)

Abstract

본 발명은 디스플레이 장치 및 동작 방법에 관한 것으로, 보다 상세하게는 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법에 관한 것이다. 본 발명은 웨어러블 안경을 이용한 디스플레이 장치에 있어서, 상기 웨어러블 안경에 탑재되어 착용자 시점의 제1 영상을 획득하는 카메라, 상기 제1 영상을 분석하여 상기 웨어러블 안경의 가상 표시 영역을 결정하는 연산부, 상기 웨어러블 안경과 연동 가능한 스마트 기기로부터 제2 영상을 수신하는 데이터 연동부 및 상기 제2 영상을 상기 가상 표시 영역에 디스플레이하는 디스플레이부를 포함하는 것을 특징으로 한다. 본 발명에 의하면, 착용자 시점의 제1 영상을 분석하여 획득한 가상 표시 영역에 스마트 기기와 연동 가능한 제2 영상을 디스플레이함으로써, 광고, 영상 통화 등의 특정 목적의 영상을 보다 효과적으로 착용자에게 전달할 수 있는 장점이 있다.

Description

웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법{DISPLAY DEVICE USING WEARABLE EYEGLASSES AND METHOD FOR OPERATING THE SAME}
본 발명은 디스플레이 장치 및 동작 방법에 관한 것으로, 보다 상세하게는 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법에 관한 것이다.
최근 '입는 컴퓨터'라는 개념의 웨어러블 디바이스가 개발되고 있다. 웨어러블 디바이스란 일상적으로 몸에 걸치고 다닐 수 있는 형태로 설계된 기기로, 신체에 부착하여 컴퓨팅 행위를 할 수 있는 모든 것을 지칭하며, 일부 컴퓨팅 기능을 수행할 수 있는 어플리케이션을 포함한다. 예를 들어, 시계, 팔찌, 헤드셋 등의 제품의 형태에 컴퓨터 기능이 내장될 수 있다. 특히, 안경에 적용된 웨어러블 디바이스로 '구글 글래스(Google Glass)'가 공지되어 있다.
본 발명은 착용자 시점의 제1 영상을 분석하여 획득한 가상 표시 영역에 스마트 기기와 연동 가능한 제2 영상을 디스플레이함으로써, 광고, 영상 통화 등의 특정 목적의 영상을 보다 효과적으로 착용자에게 전달할 수 있는 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법을 제공하는 것을 목적으로 한다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있고, 본 발명의 실시예에 의해 보다 분명하게 이해될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
이러한 목적을 달성하기 위한 본 발명은 웨어러블 안경을 이용한 디스플레이 장치에 있어서, 상기 웨어러블 안경에 탑재되어 착용자 시점의 제1 영상을 획득하는 카메라, 상기 제1 영상을 분석하여 상기 웨어러블 안경의 가상 표시 영역을 결정하는 연산부, 상기 웨어러블 안경과 연동 가능한 스마트 기기로부터 제2 영상을 수신하는 데이터 연동부 및 상기 제2 영상을 상기 가상 표시 영역에 디스플레이하는 디스플레이부를 포함하는 것을 특징으로 한다.
또한 본 발명의 웨어러블 안경을 이용한 디스플레이 장치의 동작 방법은 상기 웨어러블 안경에 탑재된 카메라가 착용자 시점의 제1 영상을 획득하는 단계, 연산부가 상기 제1 영상을 분석하여 상기 웨어러블 안경의 가상 표시 영역을 결정하는 단계, 데이터 연동부가 상기 웨어러블 안경과 연동 가능한 스마트 기기로부터 제2 영상을 수신하는 단계, 디스플레이부가 제2 영상을 가상 표시 영역에 디스플레이하는 단계를 포함하는 것을 특징으로 한다.
전술한 바와 같은 본 발명에 의하면, 착용자 시점의 제1 영상을 분석하여 획득한 가상 표시 영역에 스마트 기기와 연동 가능한 제2 영상을 디스플레이함으로써, 광고, 영상 통화 등의 특정 목적의 영상을 보다 효과적으로 착용자에게 전달할 수 있는 장점이 있다.
도 1은 본 발명의 실시예에 따른 웨어러블 안경을 이용한 디스플레이 장치의 구성도.
도 2는 본 발명의 일 실시예에 따른 웨어러블 안경의 디스플레이 화면을 도시한 도면.
도 3은 본 발명의 실시예에 따른 웨어러블 안경을 이용한 디스플레이 장치의 동작 방법을 설명하기 위한 흐름도.
전술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술되며, 이에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 상세한 설명을 생략한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하기로 한다. 도면에서 동일한 참조부호는 동일 또는 유사한 구성요소를 가리키는 것으로 사용된다.
도 1은 본 발명의 실시예에 따른 웨어러블 안경을 이용한 디스플레이 장치의 구성도이다. 도 1을 참조하면, 웨어러블 안경을 이용한 디스플레이 장치(102)는 착용자 시점의 영상을 획득하는 카메라(104), 착용자 시점의 영상을 분석하여 가상 표시 영역을 결정하는 연산부(미도시), 웨어러블 안경과 연동 가능한 스마트 기기(108)로부터 영상 또는 데이터를 수신하는 데이터 연동부(106), 데이터 연동부(106)로부터 수신한 영상 또는 데이터를 웨어러블 안경의 가상 표시 영역에 디스플레이하는 디스플레이부(110)를 포함한다.
카메라(104)는 착용자 시점의 제1 영상을 획득하는 기능을 수행한다. 카메라(104)는 웨어러블 안경에 탑재되며, 웨어러블 안경의 착용자가 바라보는 방향의 영상을 촬영하여 획득할 수 있다. 즉, 카메라(104)가 촬영하여 획득한 제1 영상에는 웨어러블 안경을 착용한 착용자가 바라보는 방향에 존재하는 물체들이 포함될 수 있다.
연산부(미도시)는 제1 영상을 분석하여 웨어러블 안경의 가상 표시 영역을 결정하는 기능을 수행한다. 상술한 바와 같이, 제1 영상에는 착용자가 바라보는 방향에 존재하는 다수의 물체들이 포함될 수 있다. 연산부는 다수의 물체들 중 특정 물체의 경계선을 인식하여 특정 물체의 경계선을 가상 표시 영역으로 결정할 수 있다. 예를 들어, 제1 영상에는 착용자가 바라보는 방향에 존재하는 건물, 또는 건물에 설치된 전광판, 광고판과 같은 디스플레이 장치들이 포함될 수 있다. 연산부는 전광판의 경계선을 인식하여 인식된 경계선을 가상 표시 영역으로 결정할 수 있다.
본 발명의 다른 실시예에서, 가상 표시 영역은 착용자(사용자)의 설정에 따라 미리 정해질 수도 있다. 예를 들어, 착용자가 가상 표시 영역으로 지정될 위치, 가상 표시 영역의 크기를 미리 지정하도록 함으로써, 착용자가 원하는 위치에 가상 표시 영역이 배치되도록 구성될 수 있다.
가상 표시 영역(116)이란 데이터, 영상 등이 디스플레이될 영역으로, 도 1의 제1 영상(112)에 포함되는 특정의 영역(114)에 대응될 수 있다. 즉, 웨어러블 안경에 표시되는 가상 표시 영역(116)이 착용자의 전방 방향을 향하여 확장하면 실제의 배경에서의 특정의 영역(114)에 대응될 수 있다.
본 발명의 일 실시예에서, 연산부는 제1 영상을 분석하여 특정 물체를 인식하고 착용자가 이동함에 따라 인식된 특정 물체의 위치가 변화하면, 특정 물체의 변화된 위치를 트래킹하여 웨어러블 안경의 가상 표시 영역을 갱신하도록 구성될 수 있다. 즉, 제1 영상에서 특정 물체의 경계선을 가상 표시 영역으로 결정하면, 착용자가 이동함에 따라 특정 물체의 경계선이 변화하는 것을 감지하고, 경계선의 변화를 트래킹하여 웨어러블 안경 상의 가상 표시 영역의 위치를 갱신할 수 있다. 그에 따라, 착용자가 이동함에 따라 착용자에 대한 특정 물체의 상대적인 위치가 달라지더라도, 가상 표시 영역은 인식된 특정 물체에 대하여 고정될 수 있다.
데이터 연동부(106)는 웨어러블 안경과 연동 가능한 스마트 기기(108)로부터 제2 영상 또는 데이터를 수신하는 기능을 수행한다. 여기서, 스마트 기기(108)란 스마트폰, 태블릿 등 데이터의 송수신이 가능한 전자 기기를 의미한다. 데이터 연동부(106)는 블루투스, Wi-Fi 신호를 이용하여 스마트 기기(108)와 연동될 수 있고, 스마트 기기(108)를 통해 인터넷에 접속되어 음성 통화, 영상, 메시지 등의 각종 데이터를 송수신할 수 있다. 특히, 데이터에는 특정 목적의 영상 또는 영상과 관련된 좌표 정보가 포함될 수 있다.
디스플레이부(110)는 제2 영상을 가상 표시 영역에 디스플레이하는 기능을 수행한다. 제2 영상은 데이터 연동부(106)를 통해 웨어러블 안경과 연동 가능한 스마트 기기(108)로부터 수신될 수 있으며, 제2 영상은 영상 정보뿐만 아니라, 영상에 관련되는 음성 정보, 광고와 같은 특정 목적의 영상에 관련되는 좌표 정보를 더 포함할 수 있다. 웨어러블 안경의 가상 표시 영역은 연산부(미도시)에 의하여 결정될 수 있다.
디스플레이부(110)가 웨어러블 안경의 가상 표시 영역(116)에 제2 영상을 디스플레이하는 방법에는 제2 영상을 웨어러블 안경에 투사하는 방법, 디스플레이부(110)가 웨어러블 안경의 모니터로 구성되어 직접 디스플레이하는 방법이 이용될 수 있다.
본 발명의 일 실시예에서, 디스플레이부(110)가 제2 영상을 웨어러블 안경에 투사하는 방법의 경우, 제2 영상의 투사 방향을 조절하여 웨어러블 안경의 가상 표시 영역(116)에 투사하도록 구성될 수 있다.
본 발명의 다른 실시예에서, 디스플레이부(110)가 웨어러블 안경의 모니터로 구성되어 제2 영상을 디스플레이하는 방법의 경우, 디스플레이부(110)는 제1 영상의 가상 표시 영역(116)에 제2 영상을 합성하여 합성된 영상을 디스플레이할 수 있다.
도 1에는 나타나 있지 않지만, 본 발명의 웨어러블 안경을 이용한 디스플레이 장치는 착용자의 조작을 위한 조작부(미도시)를 더 포함할 수 있다. 조작부는 웨어러블 안경과 연동 가능한 웨어러블 기기, 음성 인식 또는 동작 인식 기능을 이용하여 착용자의 명령을 입력받을 수 있다.
예를 들어, 웨어러블 안경과 연동 가능한 팔찌 형태의 웨어러블 기기를 이용하여 팔찌의 움직임에 따라 메시지의 송수신 등과 같은 동작을 제어하거나, 음성 인식을 통해 동작을 제어할 수 있다. 또한, 착용자의 제스쳐를 인식하여 팔 또는 손가락의 움직임에 따라 동작을 제어할 수도 있다.
상술한 바와 같은 본 발명에 의하면, 착용자 시점의 제1 영상을 분석하여 획득한 가상 표시 영역에 스마트 기기와 연동 가능한 제2 영상을 디스플레이함으로써, 광고, 영상 통화 등의 특정 목적의 영상을 보다 효과적으로 착용자에게 전달할 수 있는 장점이 있다.
본 발명의 실시예에서, 광고, 영상 통화와 같은 영상을 착용자의 시야 내에 존재하는 특정 물체와 결합된 위치에서 재생됨으로써, 광고의 전달, 영상 통화와 같은 특정 목적의 영상 또는 컨텐츠를 보다 효과적으로 착용자에게 전달할 수 있다.
예를 들어, 착용자의 스마트 기기를 통해 착용자의 위치 주변에 존재하는 패스트푸드점이 검색될 수 있다. 착용자의 스마트 기기를 통해 패스트푸드점의 광고 메시지가 웨어러블 안경에 수신되면, 디스플레이부(110)가 수신한 광고 메시지를 디스플레이한다. 착용자는 웨어러블 안경(202)에 디스플레이되는 광고 메시지를 확인하고, 조작부를 통해 광고 메시지를 재생할 것인지를 명령한다. 착용자가 광고 메시지를 재생할 것을 명령하면, 데이터 연동부(106)는 착용자의 조작에 따라 스마트 기기로부터 광고 영상을 수신한다.
한편, 착용자는 웨어러블 안경의 카메라를 통해 촬영된 도 2의 화면을 볼 수 있다. 도 2는 본 발명의 일 실시예에 따른 웨어러블 안경의 디스플레이 화면을 도시한 도면이다. 연산부는 카메라가 획득한 제1 영상을 분석하여 가상 표시 영역으로 결정한다. 보다 상세하게는, 연산부는 광고 메시지가 출력될 광고판의 경계선(204)을 인식하여 인식된 광고판의 경계선(204)을 가상 표시 영역으로 결정할 수 있다.
또한 도 2를 참조하면, 착용자가 광고 영상을 제공하는 패스트푸드점에 도달하기 위한 안내 데이터가 스마트 기기를 통해 수신될 수 있다. 이를 위하여, 스마트 기기로부터 광고 메시지의 좌표 정보가 수신되면, 데이터 연동부는 착용자의 현재 위치 정보 및 광고 메시지의 좌표 정보를 이용하여 착용자가 현재 위치로부터 좌표 정보에 대응되는 위치까지 도달하도록 안내하기 위한 안내 데이터를 수신할 수 있다. 디스플레이부는 도 2의 안내 화면(206)과 같이 안내 데이터를 웨어러블 안경(202)에 디스플레이할 수 있다.
바람직하게는, 위 예시에서 시간, 위치에 따라 선별된 특정 목적의 광고 메시지가 수신될 수 있다. 예를 들어, 점심 시간에는 음식점 관련 광고 메시지가 수신되도록 설정할 수 있다.
또 다른 예로, 착용자의 스마트 기기를 통해 착용자에게 걸려온 영상 통화가 걸려온 상황을 가정한다. 데이터 연동부를 통해 스마트 기기로부터 영상 전화 요청이 수신되면, 착용자는 조작부를 통해 영상 전화를 수신할 것인지를 명령한다. 착용자가 영상 전화를 수신하면, 데이터 연동부는 착용자의 조작에 따라 스마트 기기로부터 영상 전화 데이터를 수신하며, 디스플레이부는 착용자가 미리 지정한 가상 표시 영역에 영상 전화 데이터를 디스플레이한다.
도 3은 본 발명의 실시예에 따른 웨어러블 안경을 이용한 디스플레이 장치의 동작 방법을 설명하기 위한 흐름도이다. 도 3을 참조하면, 먼저 카메라가 웨어러블 안경 착용자 시점의 제1 영상을 획득한다(302). 상술한 바와 같이, 카메라는 웨어러블 안경을 착용한 착용자가 바라보는 방향으로 설치되며, 카메라에 의해 촬영된 착용자 시점의 제1 영상을 획득할 수 있다.
그 다음, 연산부가 제1 영상을 분석하여 가상 표시 영역을 결정한다(304). 구체적으로, 단계(304)는 연산부 제1 영상을 분석하여 특정 물체를 인식하는 단계, 착용자가 이동함에 따라 인식된 특정 물체의 위치가 변화하면, 연산부가 특정 물체의 변화된 위치를 트래킹하여 웨어러블 안경의 가상 표시 영역을 갱신하는 단계를 포함할 수 있다.
그 다음, 데이터 연동부가 연동 스마트 기기로부터 제2 영상을 수신한다(306). 상술한 바와 같이 스마트 기기는 무선 연결을 통해 데이터 연동부와 연동되며, 영상, 음성 등의 데이터를 송수신할 수 있다.
마지막으로, 디스플레이부가 제2 영상을 가상 표시 영역에 디스플레이한다(308). 단계(308)의 디스플레이 방법은 디스플레이부가 웨어러블 안경의 상단에 탑재되어 제2 영상을 웨어러블 안경에 투사하는 방법, 디스플레이부가 웨어러블 안경의 모니터로 구성되어 직접 디스플레이하는 방법 중 어느 하나의 방법일 수 있다.
본 발명의 일 실시예에서, 제2 영상은 특정의 목적을 갖는 영상 또는 데이터일 수 있다. 예를 들어, 스마트 기기로부터 광고 메시지가 수신되면, 착용자는 광고 메시지를 수신할 것인지 여부를 명령할 수 있다. 이 예시에서, 착용자가 광고 메시지를 수락하면, 단계(304)는 연산부가 제1 영상을 분석하여 광고 메시지가 출력될 광고판을 가상 표시 영역으로 결정하는 단계를 포함할 수 있다. 또한, 단계(306)는 데이터 연동부가 광고 영상을 수신하는 단계를, 단계(308)는 디스플레이부가 가상 표시 영역에 광고 영상을 디스플레이하는 단계를 각각 포함할 수 있다. 또한, 단계(306)에서, 데이터 연동부는 광고 메시지의 좌표 정보를 수신하는 단계를 더 포함할 수 있으며, 광고 메시지의 좌표 정보가 수신되면 착용자의 현재 위치 정보 및 광고 메시지의 좌표 정보를 이용하여 착용자가 현재 위치에서 좌표 정보에 대응되는 위치까지 도달할 수 있도록 안내하기 위한 안내 데이터를 수신하는 단계가 포함될 수 있다. 이 경우, 단계(308)는 디스플레이부가 안내 데이터를 웨어러블 안경에 디스플레이하는 단계를 포함할 수 있다.
또 다른 예에서, 착용자의 스마트 기기를 통해 영상 전화가 수신될 수 있다. 이 경우, 단계(304) 내지 단계(308)는 연산부가 제1 영상을 분석하여 영상 메시지가 출력될 가상 표시 영역을 결정하는 단계, 데이터 연동부가 착용자의 조작에 따라 스마트 기기로부터 영상 전화 데이터를 수신하는 단계, 디스플레이부가 가상 표시 영역에 영상 전화 데이터를 디스플레이하는 단계를 각각 포함할 수 있다.
본 발명에 의하면, 웨어러블 안경에 PIP(Picture In Picture), VIV(Video In Video)를 적용함으로써, 보다 효과적인 광고 전달, 타겟팅 광고 효과를 달성할 수 있으며, 종래와 같이 스마트폰을 들고 있지 않아도 웨어러블 안경을 착용하고 걷는 중에, 영상 통화의 수신을 수락하고 착용자가 원하는 위치로 영상 통화 화면을 이동 및 고정시켜 영상 통화를 할 수 있다.
전술한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.

Claims (11)

  1. 웨어러블 안경을 이용한 디스플레이 장치에 있어서,
    상기 웨어러블 안경에 탑재되어 착용자 시점의 제1 영상을 획득하는 카메라;
    상기 제1 영상을 분석하여 상기 웨어러블 안경의 가상 표시 영역을 결정하는 연산부;
    상기 웨어러블 안경과 연동 가능한 스마트 기기로부터 제2 영상을 수신하는 데이터 연동부; 및
    상기 제2 영상을 상기 가상 표시 영역에 디스플레이하는 디스플레이부를 포함하고,
    상기 연산부는 상기 제1 영상을 분석하여 특정 물체를 인식하고, 착용자가 이동함에 따라 상기 인식된 특정 물체의 위치가 변화하면, 상기 특정 물체의 변화된 위치를 트래킹하여 웨어러블 안경의 가상 표시 영역을 갱신하는 것을 특징으로 하는
    웨어러블 안경을 이용한 디스플레이 장치.
  2. 삭제
  3. 제1항에 있어서,
    상기 스마트 기기로부터 광고 메시지가 수신되면,
    상기 연산부는 제1 영상을 분석하여 상기 광고 메시지가 출력될 광고판을 가상 표시 영역으로 결정하고,
    상기 데이터 연동부는 착용자의 조작에 따라 상기 스마트 기기로부터 광고 영상을 수신하며,
    상기 디스플레이부는 상기 가상 표시 영역에 상기 광고 영상을 디스플레이하는
    웨어러블 안경을 이용한 디스플레이 장치.
  4. 제3항에 있어서,
    상기 광고 메시지의 좌표 정보가 수신되면,
    상기 데이터 연동부는 착용자의 현재 위치 정보 및 상기 광고 메시지의 좌표 정보를 이용하여 상기 착용자가 현재 위치로부터 상기 좌표 정보에 대응되는 위치까지 도달하도록 안내하기 위한 안내 데이터를 수신하고,
    상기 디스플레이부는 상기 안내 데이터를 상기 웨어러블 안경에 디스플레이하는
    웨어러블 안경을 이용한 디스플레이 장치.
  5. 제1항에 있어서,
    상기 스마트 기기로부터 영상 통화 요청이 수신되면,
    상기 연산부는 제1 영상을 분석하여 영상 메시지가 출력될 가상 표시 영역을 결정하고,
    상기 데이터 연동부는 착용자의 조작에 따라 상기 스마트 기기로부터 영상 통화 데이터를 수신하며,
    상기 디스플레이부는 상기 가상 표시 영역에 상기 영상 통화 데이터를 디스플레이하는
    웨어러블 안경을 이용한 디스플레이 장치.
  6. 제1항에 있어서,
    상기 웨어러블 안경과 연동 가능한 웨어러블 기기, 음성 인식, 동작 인식 중 적어도 하나를 이용하여 착용자의 명령을 입력받는 조작부
    를 더 포함하는 웨어러블 안경을 이용한 디스플레이 장치.
  7. 웨어러블 안경을 이용한 디스플레이 장치의 동작 방법으로,
    상기 웨어러블 안경에 탑재된 카메라가 착용자 시점의 제1 영상을 획득하는 단계;
    연산부가 상기 제1 영상을 분석하여 상기 웨어러블 안경의 가상 표시 영역을 결정하는 단계;
    데이터 연동부가 상기 웨어러블 안경과 연동 가능한 스마트 기기로부터 제2 영상을 수신하는 단계; 및
    디스플레이부가 제2 영상을 가상 표시 영역에 디스플레이하는 단계를 포함하고,
    상기 연산부가 상기 제1 영상을 분석하여 상기 웨어러블 안경의 가상 표시 영역을 결정하는 단계는
    상기 제1 영상을 분석하여 특정 물체를 인식하고, 착용자가 이동함에 따라 상기 인식된 특정 물체의 위치가 변화하면, 상기 특정 물체의 변화된 위치를 트래킹하여 웨어러블 안경의 가상 표시 영역을 갱신하는 단계를 포함하는 것을 특징으로 하는
    웨어러블 안경을 이용한 디스플레이 장치의 동작 방법.
  8. 삭제
  9. 제7항에 있어서,
    상기 스마트 기기로부터 광고 메시지가 수신되면,
    상기 연산부가 제1 영상을 분석하여 상기 광고 메시지가 출력될 광고판을 가상 표시 영역으로 결정하는 단계;
    상기 데이터 연동부가 착용자의 조작에 따라 상기 스마트 기기로부터 광고 영상을 수신하는 단계; 및
    상기 디스플레이부가 상기 가상 표시 영역에 상기 광고 영상을 디스플레이하는 단계
    를 포함하는 웨어러블 안경을 이용한 디스플레이 장치의 동작 방법.
  10. 제7항에 있어서,
    광고 메시지와 관련된 좌표 정보가 수신되면,
    상기 데이터 연동부가 착용자의 현재 위치 정보 및 상기 광고 메시지의 좌표 정보를 이용하여 상기 착용자가 현재 위치로부터 상기 좌표 정보에 대응되는 위치까지 도달하도록 안내하기 위한 안내 데이터를 수신하는 단계; 및
    상기 디스플레이부가 상기 안내 데이터를 상기 웨어러블 안경에 디스플레이하는 단계
    를 포함하는 웨어러블 안경을 이용한 디스플레이 장치의 동작 방법.
  11. 제7항에 있어서,
    상기 스마트 기기로부터 영상 통화 요청이 수신되면,
    상기 연산부가 제1 영상을 분석하여 영상 메시지가 출력될 가상 표시 영역을 결정하는 단계;
    상기 데이터 연동부가 착용자의 조작에 따라 상기 스마트 기기로부터 영상 통화 데이터를 수신하는 단계; 및
    상기 디스플레이부가 상기 가상 표시 영역에 상기 영상 통화 데이터를 디스플레이하는 단계
    를 포함하는 웨어러블 안경을 이용한 디스플레이 장치의 동작 방법.

KR1020140065865A 2014-05-30 2014-05-30 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법 KR101430614B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020140065865A KR101430614B1 (ko) 2014-05-30 2014-05-30 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법
US14/526,060 US20150346816A1 (en) 2014-05-30 2014-10-28 Display device using wearable eyeglasses and method of operating the same
JP2014233065A JP5967839B2 (ja) 2014-05-30 2014-11-17 ウェアラブルメガネを用いたディスプレイ装置及びその作動方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140065865A KR101430614B1 (ko) 2014-05-30 2014-05-30 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법

Publications (1)

Publication Number Publication Date
KR101430614B1 true KR101430614B1 (ko) 2014-08-18

Family

ID=51750512

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140065865A KR101430614B1 (ko) 2014-05-30 2014-05-30 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법

Country Status (3)

Country Link
US (1) US20150346816A1 (ko)
JP (1) JP5967839B2 (ko)
KR (1) KR101430614B1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101609064B1 (ko) * 2014-09-15 2016-04-04 원혁 증감 현실을 이용한 인터랙티브 설명서
KR20160047305A (ko) 2014-10-22 2016-05-02 윤영기 디스플레이와 카메라가 장착된 스마트 안경과 이를 이용한 공간 터치 입력 및 보정 방법
US9749126B2 (en) 2014-12-26 2017-08-29 Industry-Academic Cooperation Foundation, Yonsei University Data transmitter, data receiver and smart device using the same
KR20180082729A (ko) 2017-01-11 2018-07-19 동서대학교산학협력단 웨어러블 스마트 안경 디바이스 및 이를 이용한 영상이미지 표시방법
KR102150074B1 (ko) 2019-04-01 2020-08-31 주식회사 리모샷 Gps 기반 내비게이션 시스템

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102265086B1 (ko) 2014-11-07 2021-06-15 삼성전자 주식회사 정보를 공유하기 위한 가상 환경
KR20160056133A (ko) * 2014-11-11 2016-05-19 삼성전자주식회사 이미지 표시 제어 방법 및 이를 지원하는 장치
CN105867611A (zh) * 2015-12-29 2016-08-17 乐视致新电子科技（天津）有限公司 虚拟现实系统中的空间定位方法、装置及系统
US10684480B2 (en) 2017-03-16 2020-06-16 Denso Wave Incorporated Information display system
WO2019134203A1 (zh) * 2018-01-05 2019-07-11 华为技术有限公司 Vr显示装置镜屏距的测量装置及测量方法
US10448004B1 (en) * 2018-05-20 2019-10-15 Alexander Shau Ergonomic protective eyewear
CN109254659A (zh) * 2018-08-30 2019-01-22 Oppo广东移动通信有限公司 穿戴式设备的控制方法、装置、存储介质及穿戴式设备
US10855978B2 (en) * 2018-09-14 2020-12-01 The Toronto-Dominion Bank System and method for receiving user input in virtual/augmented reality
US11030793B2 (en) 2019-09-29 2021-06-08 Snap Inc. Stylized image painting
CN111552076B (zh) 2020-05-13 2022-05-06 歌尔科技有限公司 一种图像显示方法、ar眼镜及存储介质
US11829527B2 (en) 2020-11-30 2023-11-28 Samsung Electronics Co., Ltd. Augmented reality device, electronic device interacting with augmented reality device, and controlling method thereof

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030036728A (ko) * 2001-06-25 2003-05-09 코닌클리케 필립스 일렉트로닉스 엔.브이. 비디오에서의 적응형 오버레이 요소 배치
JP2013110764A (ja) * 2013-02-19 2013-06-06 Sony Corp 撮像表示装置、撮像表示方法
US20140101608A1 (en) * 2012-10-05 2014-04-10 Google Inc. User Interfaces for Head-Mountable Devices

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000222116A (ja) * 1999-01-29 2000-08-11 Sony Corp 表示画像の位置認識方法とその位置認識装置および仮想画像立体合成装置
JP2011203823A (ja) * 2010-03-24 2011-10-13 Sony Corp 画像処理装置、画像処理方法及びプログラム
JP5715842B2 (ja) * 2011-02-08 2015-05-13 新日鉄住金ソリューションズ株式会社 情報提供システム、情報提供方法、及びプログラム
JP5732988B2 (ja) * 2011-04-08 2015-06-10 ソニー株式会社 画像処理装置、表示制御方法及びプログラム
JP5935640B2 (ja) * 2012-10-01 2016-06-15 ソニー株式会社 情報処理装置、表示制御方法及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030036728A (ko) * 2001-06-25 2003-05-09 코닌클리케 필립스 일렉트로닉스 엔.브이. 비디오에서의 적응형 오버레이 요소 배치
US20140101608A1 (en) * 2012-10-05 2014-04-10 Google Inc. User Interfaces for Head-Mountable Devices
JP2013110764A (ja) * 2013-02-19 2013-06-06 Sony Corp 撮像表示装置、撮像表示方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101609064B1 (ko) * 2014-09-15 2016-04-04 원혁 증감 현실을 이용한 인터랙티브 설명서
KR20160047305A (ko) 2014-10-22 2016-05-02 윤영기 디스플레이와 카메라가 장착된 스마트 안경과 이를 이용한 공간 터치 입력 및 보정 방법
US9749126B2 (en) 2014-12-26 2017-08-29 Industry-Academic Cooperation Foundation, Yonsei University Data transmitter, data receiver and smart device using the same
KR20180082729A (ko) 2017-01-11 2018-07-19 동서대학교산학협력단 웨어러블 스마트 안경 디바이스 및 이를 이용한 영상이미지 표시방법
KR102150074B1 (ko) 2019-04-01 2020-08-31 주식회사 리모샷 Gps 기반 내비게이션 시스템

Also Published As

Publication number Publication date
JP5967839B2 (ja) 2016-08-10
JP2015228201A (ja) 2015-12-17
US20150346816A1 (en) 2015-12-03

Similar Documents

Publication Publication Date Title
KR101430614B1 (ko) 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법
US11925863B2 (en) Tracking hand gestures for interactive game control in augmented reality
US11699271B2 (en) Beacons for localization and content delivery to wearable devices
US20210407203A1 (en) Augmented reality experiences using speech and text captions
US20210405761A1 (en) Augmented reality experiences with object manipulation
US11160688B2 (en) Visual aid display device and method of operating the same
US9965030B2 (en) Wearable glasses and method of displaying image via the wearable glasses
US11520399B2 (en) Interactive augmented reality experiences using positional tracking
US11854147B2 (en) Augmented reality guidance that generates guidance markers
CN111630477A (zh) 提供增强现实服务的设备及其操作方法
US11089427B1 (en) Immersive augmented reality experiences using spatial audio
US11741679B2 (en) Augmented reality environment enhancement
WO2019142560A1 (ja) 視線を誘導する情報処理装置
WO2022005715A1 (en) Augmented reality eyewear with 3d costumes
US11719931B2 (en) Augmented reality gaming using virtual eyewear beams
US20240119928A1 (en) Media control tools for managing communications between devices
US20240077935A1 (en) Virtual interfaces for controlling iot devices
US20240036336A1 (en) Magnified overlays correlated with virtual markers

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170622

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180625

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190708

Year of fee payment: 6