KR20160009213A - A Head Mounted Display and A Method for Providing Contents Using the Same - Google Patents

A Head Mounted Display and A Method for Providing Contents Using the Same Download PDF

Info

Publication number
KR20160009213A
KR20160009213A KR1020140089325A KR20140089325A KR20160009213A KR 20160009213 A KR20160009213 A KR 20160009213A KR 1020140089325 A KR1020140089325 A KR 1020140089325A KR 20140089325 A KR20140089325 A KR 20140089325A KR 20160009213 A KR20160009213 A KR 20160009213A
Authority
KR
South Korea
Prior art keywords
hmd
target object
image
processor
present
Prior art date
Application number
KR1020140089325A
Other languages
Korean (ko)
Inventor
박수왕
Original Assignee
(주)소셜네트워크
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)소셜네트워크 filed Critical (주)소셜네트워크
Priority to KR1020140089325A priority Critical patent/KR20160009213A/en
Publication of KR20160009213A publication Critical patent/KR20160009213A/en

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02—Viewing or reading apparatus
    • G02B27/022—Viewing apparatus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

The present invention relates to a head mounted display (HMD) and a content providing method using the same and, more specifically, to an HMD providing content including augmented reality information and a content providing method using the same. The HMD includes: a processor controlling an operation of the HMD; a camera unit sensing an image in a front direction of the HMD and transmitting the sensed image to the processor; and a display unit outputting an image based on a command of the processor. The processor obtains information on a target object and obtains an image of an outer area by the camera unit. The processor also displays augmented reality information of the target object in the outer area.

Description

헤드 마운트 디스플레이 및 이를 이용한 콘텐츠 제공 방법{A Head Mounted Display and A Method for Providing Contents Using the Same}[0001] The present invention relates to a head mount display and a content providing method using the same,

본 발명은, 헤드 마운트 디스플레이(Head Mounted Display, HMD) 및 이를 이용한 콘텐츠 제공 방법에 관한 것으로, 더욱 상세하게는 증강현실 정보를 포함하는 콘텐츠를 제공하는 HMD 및 이를 이용한 콘텐츠 제공 방법에 관한 것이다.The present invention relates to a head mounted display (HMD) and a content providing method using the same, and more particularly, to an HMD for providing a content including augmented reality information and a content providing method using the same.

헤드 마운트 디스플레이(HMD)란 안경처럼 머리에 착용하여 멀티미디어 콘텐츠를 제공받을 수 있도록 하는 각종 디지털 디바이스를 말한다. 디지털 디바이스의 경량화 및 소형화 추세에 따라, 다양한 웨어러블 컴퓨터(Wearable Computer)가 개발되고 있으며, 상기 HMD 또한 널리 사용되고 있다. HMD는 단순한 디스플레이 기능을 넘어 증강 현실 기술, N 스크린 기술 등과 조합 되어 유저에게 각종 편의를 제공할 수 있다.Head-mounted displays (HMDs) are various digital devices that can be worn on the head like glasses to receive multimedia contents. 2. Description of the Related Art [0002] Various wearable computers (wearable computers) have been developed in accordance with the trend of weight reduction and miniaturization of digital devices, and such HMDs are also widely used. The HMD can be combined with augmented reality technology, N screen technology, etc., beyond the simple display function, to provide various convenience to the user.

HMD를 착용한 유저는 다양한 상황에서 HMD와 인터랙션을 수행할 수 있다. 이때, HMD가 유저에게 더 나은 상황 인식 서비스(Context Aware Service)를 제공하기 위해서는 보다 간편한 유저 인터페이스가 필요하다.The user wearing the HMD can perform the interaction with the HMD in various situations. In this case, a more convenient user interface is required for the HMD to provide a better context aware service to the user.

본 발명은 HMD를 착용한 유저에게 더 나은 상황 인식 서비스를 제공하기 위한 목적을 가지고 있다.The present invention has an object to provide a better situation recognition service to a user wearing an HMD.

상기와 같은 과제를 해결하기 위해, 본 발명의 실시예에 따른 헤드마운트 디스플레이(HMD)를 이용한 콘텐츠 제공 방법은, 타겟 오브젝트의 정보를 획득하는 단계; 카메라 유닛을 이용하여 외부 영역의 이미지를 획득하는 단계; 및 상기 외부 영역에 상기 타겟 오브젝트의 증강현실 정보를 디스플레이 하는 단계; 를 포함하는 것을 특징으로 한다.According to an aspect of the present invention, there is provided a content providing method using a head-mounted display (HMD), comprising: acquiring information of a target object; Acquiring an image of an outer region using a camera unit; And displaying the augmented reality information of the target object in the outer region; And a control unit.

이때, 상기 타겟 오브젝트의 정보는 상기 타겟 오브젝트를 설정하는 유저 입력에 기초하여 획득되는 것을 특징으로 한다.Here, the information of the target object is acquired based on a user input for setting the target object.

또한, 상기 유저 입력은 상기 HMD에 대한 터치 입력, 음성 입력 및 시선 입력 중 적어도 하나를 포함하는 것을 특징으로 한다.In addition, the user input may include at least one of a touch input, a voice input, and a gaze input to the HMD.

또한, 상기 유저 입력은 상기 HMD와 커넥팅 된 외부 디지털 디바이스를 통해 수신하는 것을 특징으로 한다.The user input is received through an external digital device connected to the HMD.

한편, 본 발명의 실시예에 따른 헤드 마운트 디스플레이(HMD)는,상기 HMD의 작동을 제어하는 프로세서; 상기 HMD의 전방 방향의 이미지를 센싱하고, 센싱된 이미지를 상기 프로세서에 전달하는 카메라 유닛; 및 상기 프로세서의 명령에 기초하여 이미지를 출력하는 디스플레이 유닛을 포함하되, 상기 프로세서는, 타겟 오브젝트의 정보를 획득하고, 상기 카메라 유닛을 이용하여 외부 영역의 이미지를 획득하고, 상기 외부 영역에 상기 타겟 오브젝트의 증강현실 정보를 디스플레이하는 것을 특징으로 한다.Meanwhile, a head-mounted display (HMD) according to an embodiment of the present invention includes a processor for controlling the operation of the HMD; A camera unit for sensing an image in a forward direction of the HMD and transmitting the sensed image to the processor; And a display unit for outputting an image based on an instruction of the processor, wherein the processor acquires information of a target object, acquires an image of an outer region using the camera unit, And displays the augmented reality information of the object.

본 발명의 실시예에 따르면, 유저는 HMD를 통해 증강현실 정보를 포함한 상황 인식 서비스를 제공받을 수 있다.According to the embodiment of the present invention, the user can be provided with the context aware service including the augmented reality information through the HMD.

본 발명의 일 실시예에 따르면, 유저는 자신이 찾고자 하는 타겟 오브젝트의 디텍트 결과를 HMD를 통해 증강현실로 제공 받을 수 있으며, 이를 통해 해당 타겟 오브젝트를 편리하게 찾을 수 있다.According to an embodiment of the present invention, a user can be provided with a detec- tion result of a target object to be searched by himself / herself through an HMD, and thereby the corresponding target object can be conveniently searched.

도 1은 본 발명의 실시예에 따른 HMD를 나타낸 블록도.
도 2는 본 발명의 일 실시예에 따른 HMD를 나타낸 개략도.
도 3은 본 발명의 다른 실시예에 따른 HMD를 나타낸 개략도.
도 4는 본 발명의 실시예에 따른 HMD를 이용하여 타겟 오브젝트를 찾는 구체
적인 실시예를 나타낸 도면.1 is a block diagram showing an HMD according to an embodiment of the present invention;
2 is a schematic diagram illustrating an HMD according to one embodiment of the present invention.
3 is a schematic view of an HMD according to another embodiment of the present invention.
FIG. 4 is a view for explaining a method for searching a target object using a HMD according to an embodiment of the present invention.
Fig.

본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도, 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한 특정 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 아닌 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.As used herein, terms used in the present invention are selected from general terms that are widely used in the present invention while taking into account the functions of the present invention. However, these terms may vary depending on the intention of a person skilled in the art, custom or the emergence of new technology. Also, in certain cases, there may be a term arbitrarily selected by the applicant, and in this case, the meaning thereof will be described in the description of the corresponding invention. Therefore, it is intended that the terminology used herein should be interpreted relative to the meaning of the term rather than to the nomenclature of the term, and the entire content of the specification.

도 1은 본 발명의 실시예에 따른 HMD(100)를 나타낸 블록도이다.1 is a block diagram illustrating an HMD 100 according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 HMD(100)는 프로세서(110), 디스플레이유닛(120), 카메라 유닛(130), 커뮤니케이션 유닛(140), 센서 유닛(150) 및 스토리지 유닛(160)을 포함할 수 있다.1, the HMD 100 of the present invention includes a processor 110, a display unit 120, a camera unit 130, a communication unit 140, a sensor unit 150 and a storage unit 160 can do.

먼저, 디스플레이 유닛(120)은 디스플레이 화면에 이미지를 출력한다. 상기 디스플레이 유닛(120)은 프로세서(110)에서 실행되는 콘텐츠를 출력하거나, 프로세서(110)의 제어 명령에 기초하여 이미지를 출력한다. 또한, 본 발명의 실시예에 따르면 디스플레이 유닛(120)은 HMD(100)와 커넥팅 된 외부 디지털 디바이스(200)의 제어 명령에 기초하여 이미지를 디스플레이 할 수 있다. 예를 들어,디스플레이 유닛(120)은 HMD(100)와 커넥팅 된 외부 디지털 디바이스(200)가 실행중인 콘텐츠를 디스플레이 할 수 있다. 이때, HMD(100)는 커뮤니케이션 유닛(140)을 통해 상기 외부 디지털 디바이스(200)로부터 데이터를 수신하며, 수신 받은 데이터에 기초하여 이미지를 출력할 수 있다.First, the display unit 120 outputs an image on the display screen. The display unit 120 outputs content to be executed by the processor 110 or outputs an image based on a control command of the processor 110. [ Further, according to the embodiment of the present invention, the display unit 120 can display an image based on a control command of the external digital device 200 connected to the HMD 100. [ For example, the display unit 120 may display the content being executed by the external digital device 200 connected to the HMD 100. [ At this time, the HMD 100 receives data from the external digital device 200 through the communication unit 140, and can output an image based on the received data.

다음으로, 카메라 유닛(130)은 이미지를 센싱하고, 센싱된 이미지를 상기 프로세서에 전달한다. 본 발명의 실시예에 따르면, 상기 카메라 유닛(130)은 전방 카메라 유닛(미도시)과 아이 트래킹(eye tracking) 카메라 유닛(미도시)을 포함할 수 있다. 상기 전방 카메라 유닛은 HMD의 전방 방향의 이미지를 디텍트하여 프로세서에 제공할 수 있다. 또한 상기 아이 트래킹 카메라 유닛은 HMD(100)를 착용한 유저의 동공 위치를 디텍트하여 해당 유저의 시선을 트래킹 할 수 있다. 본 발명의 실시예에서 상기 카메라 유닛(130)은 일반적인 CCD(Charge Coupled Device) 또는 CMOS(Complementary Metal-Oxide Semiconductor) 카메라 모듈뿐만 아니라 뎁스 카메라 모듈, 적외선 카메라 모듈 등 다양한 종류의 촬상 장치를 포함한다.Next, the camera unit 130 senses the image and delivers the sensed image to the processor. According to an embodiment of the present invention, the camera unit 130 may include a front camera unit (not shown) and an eye tracking camera unit (not shown). The front camera unit can detect an image of the front direction of the HMD and provide it to the processor. The eye tracking camera unit can detect the pupil position of the user wearing the HMD 100 and track the gaze of the user. In the embodiment of the present invention, the camera unit 130 includes various types of image sensing devices such as a depth camera module and an infrared camera module, as well as a general CCD (Charge Coupled Device) or CMOS (Complementary Metal-Oxide Semiconductor) camera module.

다음으로, 커뮤니케이션 유닛(140)은 외부 디지털 디바이스(200) 또는 서버와 다양한 프로토콜을 사용하여 통신을 수행하여 데이터를 송/수신할 수 있다. 본 발명에서 커뮤니케이션 유닛(140)은 네트워크를 통해 서버 또는 클라우드에 접속할 수 있으며, 디지털 데이터, 예를 들면 콘텐츠를 송/수신할 수 있다. 또한, 본 발명의 다른 실시예에 따르면 HMD(100)는 커뮤니케이션 유닛(140)을 이용하여 외부 디지털 디바이스(200)와 커넥팅을 수행할 수 있다. 이때, HMD(100)는 상기 커넥팅 된 외부 디지털 디바이스(200)가 실행중인 콘텐츠의 디스플레이 출력 정보를 실시간으로 수신하고, 수신된 정보를 이용하여 디스플레이 유닛(120)에 이미지를 출력할 수 있다.Next, the communication unit 140 can communicate with the external digital device 200 or the server using various protocols to transmit / receive data. In the present invention, the communication unit 140 can access a server or a cloud through a network and can transmit / receive digital data, for example, contents. In addition, according to another embodiment of the present invention, the HMD 100 can perform the connection with the external digital device 200 using the communication unit 140. [ At this time, the HMD 100 can receive the display output information of the content being executed by the connected external digital device 200 in real time, and output the image to the display unit 120 using the received information.

센서 유닛(150)은 HMD(100)에 장착된 적어도 하나의 센서를 사용하여 유저 인풋 또는 상기 HMD(100)가 인식하는 환경을 프로세서(110)로 전달할 수 있다. 이때, 상기 센서 유닛(150)은 복수의 센싱 수단을 포함할 수 있다. 일 실시예로서, 복수의 센싱 수단은 중력(gravity) 센서, 지자기 센서, 모션 센서, 자이로 센서, 가속도 센서, 적외선 센서, 기울임(inclination) 센서, 조도 센서, 근접센서, 고도 센서, 후각 센서, 온도 센서, 뎁스 센서, 압력 센서, 밴딩 센서, 오디오 센서, 비디오 센서, 마이크 어레이, GPS(Global Positioning System) 센서, 터치 센서 등의 센싱 수단을 포함할 수 있다. 센서 유닛(150)은 상술한 다양한 센싱 수단을 통칭하는 것으로, 사용자의 다양한 입력 및 사용자의 환경을 센싱하여, 프로세서(110)가 그에 따른 작동을 수행할 수 있도록 센싱 결과를 전달할 수 있다. 상술한 센서들은 별도의 엘리먼트로 HMD(100)에 포함되거나, 적어도 하나 이상의 엘리먼트로 통합되어 포함될 수 있다.The sensor unit 150 may transmit the user input or the environment recognized by the HMD 100 to the processor 110 using at least one sensor mounted on the HMD 100. [ At this time, the sensor unit 150 may include a plurality of sensing means. In one embodiment, the plurality of sensing means may be a gravity sensor, a geomagnetism sensor, a motion sensor, a gyro sensor, an acceleration sensor, an infrared sensor, an inclination sensor, an illuminance sensor, a proximity sensor, A sensor, a depth sensor, a pressure sensor, a banding sensor, an audio sensor, a video sensor, a microphone array, a GPS (global positioning system) sensor, and a touch sensor. The sensor unit 150 collectively refers to the various sensing means described above, and can sense various inputs of the user and the environment of the user, and can transmit the sensing result so that the processor 110 can perform the operation accordingly. The above-described sensors may be included in the HMD 100 as separate elements, or integrated into at least one or more elements.

다음으로, 스토리지 유닛(160)은, 비디오, 오디오, 사진, 문서, 애플리케이션 등 다양한 콘텐츠를 포함하는 디지털 데이터를 저장할 수 있다. 스토리지 유닛(150)은 플래시 메모리, RAM(Random Access Memory), SSD(Solid State Drive) 등의 다양한 디지털 데이터 저장 매체를 포함한다. 또한, 스토리지 유닛(150)은 커뮤니케이션 유닛(140)이 외부 디지털 디바이스(200) 또는 서버로부터 수신한 콘텐츠를 저장할 수 있다.Next, the storage unit 160 may store digital data including various contents such as video, audio, photograph, document, and application. The storage unit 150 includes various digital data storage media such as a flash memory, a random access memory (RAM), and a solid state drive (SSD). The storage unit 150 may also store content received by the communication unit 140 from the external digital device 200 or the server.

본 발명의 프로세서(110)는 HMD(100) 자체의 콘텐츠 또는 데이터 통신을 통해 수신된 콘텐츠 등을 실행할 수 있다. 또한, 다양한 애플리케이션을 실행하고, 디바이스 내부의 데이터를 프로세싱 할 수 있다. 이에 더하여, 상기 프로세서(110)는 상술한 HMD(100)의 각 유닛들을 제어하며, 유닛들 간의 데이터 송수신을 제어할 수도 있다.The processor 110 of the present invention can execute the content of the HMD 100 itself or the content received through the data communication. In addition, it is possible to execute various applications and process data inside the device. In addition, the processor 110 controls each unit of the HMD 100 and controls transmission / reception of data between the units.

도 1에 도시된 HMD(100)는 본 발명의 일 실시예에 따른 블록도로서, 분리하여 표시한 블록들은 디바이스의 엘리먼트들을 논리적으로 구별하여 도시한 것이다. 따라서 상술한 디바이스의 엘리먼트들은 디바이스의 설계에 따라 하나의 칩으로 또는 복수의 칩으로 장착될 수 있다.The HMD 100 shown in FIG. 1 is a block diagram according to an exemplary embodiment of the present invention, in which blocks shown separately are logically distinguished from elements of a device. Thus, the elements of the device described above can be mounted as one chip or as a plurality of chips depending on the design of the device.

도 2는 본 발명의 일 실시예에 따른 HMD(100)를 나타낸 개략도이다.2 is a schematic diagram showing an HMD 100 according to an embodiment of the present invention.

본 발명의 실시예에 따른 HMD(100)는 디스플레이 유닛(120) 및 카메라 유닛(130)을 구비한다.The HMD 100 according to the embodiment of the present invention includes a display unit 120 and a camera unit 130. [

상기 디스플레이 유닛(120)은 HMD(100)의 프로세서(미도시)의 제어 명령에 기초하여 이미지를 디스플레이 한다. 본 발명의 실시예에서 디스플레이 유닛(120)은 디스플레이 스크린을 구비하여, 상기 디스플레이 스크린에 이미지가 맺히도록 할 수 있다. 또한, 본 발명의 다른 실시예에 따르면 디스플레이 유닛(120)은 별도의 디스플레이 스크린을 구비하지 않고, HMD(100)의 전방 방향의 특정 위치에 이미지를 투영할 수 있다.The display unit 120 displays an image based on a control command of a processor (not shown) of the HMD 100. [ In an embodiment of the present invention, the display unit 120 may include a display screen so that an image is formed on the display screen. In addition, according to another embodiment of the present invention, the display unit 120 can project an image at a specific position in the front direction of the HMD 100 without having a separate display screen.

또한, 카메라 유닛(130)은 이미지를 센싱하고, 센싱된 이미지를 상기 프로세서에 전달한다. 상기 카메라 유닛(130)은 전술한 바와 같이 전방 카메라 유닛과 아이 트래킹 카메라 유닛 중 적어도 하나를 포함할 수 있다. 상기 카메라 유닛(130)은 기 설정된 범위의 시야(field of view) 영역을 가질 수 있다. 즉, 카메라 유닛(130)은 상기 시야 영역 내의 이미지를 획득하고, 획득된 이미지를 프로세서에 전달한다.The camera unit 130 also senses the image and delivers the sensed image to the processor. The camera unit 130 may include at least one of a front camera unit and an eye tracking camera unit as described above. The camera unit 130 may have a predetermined field of view area. That is, the camera unit 130 acquires an image in the field of view and delivers the acquired image to the processor.

도 3은 본 발명의 다른 실시예에 따른 HMD(100) 및 이와 커넥팅 된 외부 디지털 디바이스(200)를 나타내고 있다. 도 3의 실시예에서 HMD(100)는 적어도 하나의 외부 디지털 디바이스(200)와 커넥팅 되고, 커넥팅 된 외부 디지털 디바이스(200)의 제어 명령에 기초하여 동작할 수 있다. 상기 HMD(100)와 외부 디지털 디바이스(200) 간의 커넥팅을 위해 별도의 페어링 또는 통신 접속이 수행될 수 있으며, 이러한 페어링 또는 통신 접속 작업은 HMD(100) 또는 외부 디지털 디바이스(200)에 대한 유저 입력에 의해 수행될 수 있다. 예를 들어, HMD(100)는 외부 디지털 디바이스(200)와의 페어링 또는 통신 접속을 위한 별도의 버튼 또는 유저 인터페이스를 제공할 수 있으며, 상기 버튼 또는 유저 인터페이스에 대한 유저 입력을 수신하여 HMD(100)와 외부 디지털 디바이스(200) 간의 페어링 또는 통신 접속을 수행할 수 있다.FIG. 3 shows an HMD 100 and an external digital device 200 connected thereto according to another embodiment of the present invention. In the embodiment of FIG. 3, the HMD 100 may be connected to at least one external digital device 200, and may operate based on the control commands of the connected external digital device 200. A separate pairing or communication connection may be performed for connection between the HMD 100 and the external digital device 200. The pairing or communication connection operation may be performed by a user input to the HMD 100 or the external digital device 200 Lt; / RTI > For example, the HMD 100 may provide a separate button or user interface for pairing or communicating with the external digital device 200, receiving user input to the button or the user interface, And external digital device 200 can be performed.

상기 외부 디지털 디바이스(200)는 HMD(100)를 제어할 수 있는 다양한 종류의 디지털 디바이스를 포함한다. 예를 들어, 외부 디지털 디바이스(200)는 스마트폰, PC, PDA(Personal Digital Assistant), 노트북, 태블릿 피씨, 미디어 플레이어 등을 포함하며, 이 외에도 HMD의 동작을 제어할 수 있는 다양한 종류의 디지털 디바이스를 포함한다. HMD(100)는 다양한 유/무선 통신 수단을 이용하여 외부 디지털 디바이스(200)와 데이터를 송/수신 한다. 이때, 사용 가능한 무선 통신수단으로는 NFC(Near Field Communication), Zigbee, 적외선 통신, 블루투스, 와이파이 등이 있으며, 본 발명은 이에 한정하지 않는다. 본 발명에서 HMD(100)는 앞서 열거된 통신 수단 중 어느 하나, 또는 이들 간의 조합을 이용하여 외부 디지털 디바이스(200)와 커넥팅 되어 통신을 수행할 수 있다.The external digital device 200 includes various types of digital devices capable of controlling the HMD 100. [ For example, the external digital device 200 includes a smart phone, a PC, a PDA (Personal Digital Assistant), a notebook, a tablet PC, a media player, and the like. . The HMD 100 transmits / receives data to / from the external digital device 200 using various wired / wireless communication means. At this time, the available wireless communication means includes NFC (Near Field Communication), Zigbee, infrared communication, Bluetooth, Wi-Fi, etc., but the present invention is not limited thereto. In the present invention, the HMD 100 can be connected to and communicate with the external digital device 200 using any one of the above communication means, or a combination thereof.

도 4는 본 발명의 실시예에 따른 HMD(100)를 이용하여 타겟 오브젝트(305)를 찾는 구체적인 실시예를 나타내고 있다.FIG. 4 illustrates a specific embodiment of searching for a target object 305 using the HMD 100 according to an embodiment of the present invention.

본 발명의 실시예에 따른 HMD(100)는 카메라 유닛을 이용하여 외부영역(300)의 이미지를 획득하고, 해당 이미지에서 타겟 오브젝트(305)를 스캐닝 한다. 이때, 이미지가 획득되는 상기 외부 영역(300)은 HMD(100)의 전방 방향의 시야 영역(102) 내에 위치한 영역이다. 상기 이미지에서 타겟 오브젝트(305)가 디텍트 될 경우, HMD는 해당 타겟 오브젝트(305)의 증강현실 정보(320)를 디스플레이할 수 있다. 도 4에서 상기 증강현실 정보(320)는 HMD(100)의 디스플레이 유닛에 의해 디스플레이 된다. 이때, HMD(100)는 상기 증강현실 정보(320)를 해당 타겟 오브젝트(305)에 오버레이 하여 디스플레이 하거나, 상기 타겟 오브젝트(305)의 위치에 대응하는 영역에 디스플레이 할 수 있다. 이와 같이 타겟 오브젝트(305)의 증강현실 정보(320)를 디스플레이 함으로, HMD(100)는 유저(10)가 찾고자 하는 타겟 오브젝트(305)의 위치를 알려줄 수 있다.The HMD 100 according to the embodiment of the present invention acquires the image of the outer region 300 using the camera unit and scans the target object 305 in the image. At this time, the outer region 300 in which the image is acquired is an area located in the forward view area 102 of the HMD 100. When the target object 305 is detected in the image, the HMD can display the augmented reality information 320 of the target object 305. In FIG. 4, the augmented reality information 320 is displayed by the display unit of the HMD 100. At this time, the HMD 100 may display the augmented reality information 320 in an area corresponding to the position of the target object 305 by overlaying the augmented reality information 320 on the target object 305. By displaying the augmented reality information 320 of the target object 305 in this way, the HMD 100 can notify the location of the target object 305 that the user 10 wants to find.

본 발명에서 설명한 HMD는 본 발명의 목적에 따라 다양한 디바이스로 변경 및 대체 가능하다. 예를 들어, 본 발명의 HMD는 EMD(Eye Mounted Display), eyeglass, eyepiece, eye wear, HWD(Head Worn Display) 등 유저에게 착용되어 디스플레이를 제공할 수 있는 다양한 디바이스를 포함하며, 본 발명에서 사용된 용어에 한정되지 않는다. 이상에서는 본 발명을 구체적인 실시예를 통하여 설명하였으나, 당업자라면 본 발명의 취지 및 범위를 벗어나지 않고 수정, 변경을 할 수 있다. 따라서 본 발명의 상세한 설명 및 실시예로부터 본 발명이 속하는 기술분야에 속한 사람이 용이하게 유추할 수 있는 것은 본 발명의 권리범위에 속하는 것으로 해석된다.The HMD described in the present invention can be changed and replaced with various devices in accordance with the object of the present invention. For example, the HMD of the present invention includes various devices capable of providing a display by being worn by a user such as an EMD (Eye Mounted Display), eyeglass, eyepiece, eye wear, and HWD Lt; / RTI > While the present invention has been described with reference to the particular embodiments, those skilled in the art will appreciate that various modifications, additions and substitutions are possible, without departing from the spirit and scope of the invention. Therefore, it is to be understood that those skilled in the art can easily deduce from the detailed description and the embodiments of the present invention that they fall within the scope of the present invention.

10 : 유저 100 : HMD
102 : 시야 영역 120 : 디스플레이 유닛
300 : 외부 영역 305 : 타겟 오브젝트
320 : 증강현실 정보10: User 100: HMD
102: field of view area 120: display unit
300: outer area 305: target object
320: Augmented reality information

Claims (8)

헤드 마운트 디스플레이(HMD)를 이용한 콘텐츠 제공 방법으로써,
타겟 오브젝트의 정보를 획득하는 단계;
카메라 유닛을 이용하여 외부 영역의 이미지를 획득하는 단계; 및
상기 외부 영역에 상기 타겟 오브젝트의 증강현실 정보를 디스플레이 하는 단계;를 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이(HMD)를 이용한 콘텐츠 제공 방법.As a content providing method using a head mount display (HMD)
Obtaining information of a target object;
Acquiring an image of an outer region using a camera unit; And
And displaying the augmented reality information of the target object in the outer area. 제 1항에 있어서,
상기 타겟 오브젝트의 정보는 상기 타겟 오브젝트를 설정하는 유저 입력에 기초하여 획득되는 것을 특징으로 하는 헤드 마운트 디스플레이(HMD)를 이용한 콘텐츠 제공 방법.The method according to claim 1,
Wherein the information of the target object is acquired based on a user input for setting the target object. 제 1항에 있어서,
상기 유저 입력은 상기 HMD에 대한 터치 입력, 음성 입력 및 시선 입력 중 적어도 하나를 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이(HMD)를 이용한 콘텐츠 제공 방법.The method according to claim 1,
Wherein the user input includes at least one of a touch input, a voice input, and a gaze input to the HMD. 제 1항에 있어서,
상기 유저 입력은 상기 HMD와 커넥팅 된 외부 디지털 디바이스를 통해 수신하는 것을 특징으로 하는 헤드 마운트 디스플레이(HMD)를 이용한 콘텐츠 제공 방법.The method according to claim 1,
Wherein the user input is received through an external digital device connected to the HMD. 헤드 마운트 디스플레이(HMD)로써,
상기 HMD의 작동을 제어하는 프로세서;
상기 HMD의 전방 방향의 이미지를 센싱하고, 센싱된 이미지를 상기 프로세서에 전달하는 카메라 유닛; 및
상기 프로세서의 명령에 기초하여 이미지를 출력하는 디스플레이 유닛을 포함하되,
상기 프로세서는,
타겟 오브젝트의 정보를 획득하고,
상기 카메라 유닛을 이용하여 외부 영역의 이미지를 획득하고, 상기 외부 영역에 상기 타겟 오브젝트의 증강현실 정보를 디스플레이 하는 것을 특징으로 하는 헤드 마운트 디스플레이(HMD).With a head mount display (HMD)
A processor for controlling operation of the HMD;
A camera unit for sensing an image in a forward direction of the HMD and transmitting the sensed image to the processor; And
And a display unit for outputting an image based on instructions of the processor,
The processor comprising:
Acquires information of the target object,
Acquires an image of an outer region using the camera unit, and displays the augmented reality information of the target object in the outer region. 제 5항에 있어서,
상기 타겟 오브젝트의 정보는 상기 타겟 오브젝트를 설정하는 유저 입력에 기초하여 획득되는 것을 특징으로 하는 헤드 마운트 디스플레이(HMD).6. The method of claim 5,
Wherein the information of the target object is obtained based on a user input for setting the target object. 제 5항에 있어서,
상기 유저 입력은 상기 HMD에 대한 터치 입력, 음성 입력 및 시선 입력 중 적어도 하나를 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이(HMD).6. The method of claim 5,
Wherein the user input comprises at least one of a touch input, a voice input, and a gaze input to the HMD. 제 5항에 있어서,
상기 유저 입력은 상기 HMD와 커넥팅 된 외부 디지털 디바이스를 통해 수신하는 것을 특징으로 하는 헤드 마운트 디스플레이(HMD).6. The method of claim 5,
Wherein the user input is received via an external digital device connected to the HMD.
KR1020140089325A 2014-07-15 2014-07-15 A Head Mounted Display and A Method for Providing Contents Using the Same KR20160009213A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140089325A KR20160009213A (en) 2014-07-15 2014-07-15 A Head Mounted Display and A Method for Providing Contents Using the Same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140089325A KR20160009213A (en) 2014-07-15 2014-07-15 A Head Mounted Display and A Method for Providing Contents Using the Same

Publications (1)

Publication Number Publication Date
KR20160009213A true KR20160009213A (en) 2016-01-26

Family

ID=55307236

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140089325A KR20160009213A (en) 2014-07-15 2014-07-15 A Head Mounted Display and A Method for Providing Contents Using the Same

Country Status (1)

Country Link
KR (1) KR20160009213A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018199724A1 (en) * 2017-04-28 2018-11-01 황철하 Virtual reality system enabling bi-directional communication
KR102527405B1 (en) * 2022-12-26 2023-04-28 주식회사 에스씨크리에이티브 Maintenance support system using mixed reality head mounted display

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018199724A1 (en) * 2017-04-28 2018-11-01 황철하 Virtual reality system enabling bi-directional communication
KR102527405B1 (en) * 2022-12-26 2023-04-28 주식회사 에스씨크리에이티브 Maintenance support system using mixed reality head mounted display

Similar Documents

Publication Publication Date Title
US8862186B2 (en) Lapel microphone micro-display system incorporating mobile information access system
US9927877B2 (en) Data manipulation on electronic device and remote terminal
US9423619B2 (en) Head mounted display and method of outputting a content using the same in which the same identical content is displayed
KR101958778B1 (en) A Head Mounted Display and a Method for Controlling a Digital Device Using the Same
US9304320B2 (en) Head-mounted display and method of controlling the same
CN107765429B (en) Image display device and operation method thereof
US10205874B2 (en) Wearable device and control method thereof
US8983539B1 (en) Smart watch, display device and method of controlling therefor
KR20220088660A (en) Method and appratus for processing screen using device
US20200059596A1 (en) Electronic device and control method thereof
TWI697655B (en) Depth sensing device, method for configuring the same and machine-readable storage medium
KR101969351B1 (en) Head mounted display and method for controlling output of the same
US11582391B2 (en) Electronic device capable of controlling image display effect, and method for displaying image
KR20150037254A (en) Wearable display device and method of controlling layer
KR20140129936A (en) A Head Mounted Display and A Method for Providing Contents Using the Same
KR20220145321A (en) Method and apparatus for changing focus of camera
KR20150142282A (en) Function controlling method and electronic device thereof
KR20170092200A (en) Mirror type display device andmethod for controlling the same
US10514755B2 (en) Glasses-type terminal and control method therefor
US20170180626A1 (en) Live view control device, live view control method, live view system, and program
KR20150084200A (en) A head mounted display and the method of controlling thereof
US20150172550A1 (en) Display tiling for enhanced view modes
KR20160009213A (en) A Head Mounted Display and A Method for Providing Contents Using the Same
KR20160025233A (en) The Apparatus and Method for Display Device
KR20160008916A (en) A Head Mounted Display and A Method for Providing Contents Using the Same

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination