KR20150138668A

KR20150138668A - The display control method of Glasses type electronic device and Holography control method and Projector control method

Info

Publication number: KR20150138668A
Application number: KR1020140066880A
Authority: KR
Inventors: 이윤택
Original assignee: 이윤택
Priority date: 2014-06-02
Filing date: 2014-06-02
Publication date: 2015-12-10

Abstract

본 발명은, 디스플레이가 안경형태의 전자장치에 구비되고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 디스플레이를 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 디스플레이 제어방법을 제공한다.
본 발명은, 안경형태의 전자장치가 설정된 공간에 홀로그래피 영상을 출력하고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 홀로그래피 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 홀로그래피 제어방법을 제공한다.
또한, 본 발명은, 안경형태의 전자장치가 프로젝터 모듈로부터 설정된 공간에 프로젝터 영상을 출력하고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 프로젝터 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 프로젝터 제어방법을 제공한다.The present invention relates to an electronic device in which a display is provided in an electronic device in the form of a spectacle, and the position of the user's eyes is detected by one or more cameras provided in the electronic device in the form of glasses, A display control method for controlling an eyeglass-shaped electronic device by directing the display and instructing it by voice is provided.
A holographic image is output to a space in which an electronic device in a form of a glass is set, and the position of the user's pupil is detected by one or more cameras provided in the electronic device in the form of a glasses, And a user controls the electronic device in the form of glasses by directing the holographic image implemented in the set space and instructing it by voice.
In addition, the present invention provides an electronic device in which a spectacle-type electronic device outputs a projector image to a space set from a projector module, detects the position of a user's eye with one or more cameras provided in an eyeglass- The user recognizes the user's voice and directs the user to look at the image of the projector implemented in the predetermined space and to instruct the electronic device in the form of a voice.

Description

BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a display control method, a holography control method,

본 발명은 안경형태의 전자장치의 디스플레이 제어방법에 관한 것이다. The present invention relates to a method of controlling a display of an electronic device in the form of a spectacle.

본 발명은 안경형태의 전자장치로부터 설정된 2차원 내지 3차원 공간에 구현되는 홀로그래피 제어방법에 관한 것이다. BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a holography control method implemented in a two-dimensional to three-dimensional space set from an eyeglass-shaped electronic device.

본 발명은 안경형태의 전자장치로부터 설정된 2차원 내지 3차원 공간에 구현되는 프로젝터 제어방법에 관한 것이다. BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a projector control method implemented in a two-dimensional to three-dimensional space set from an eyeglass-shaped electronic apparatus.

현재의 컴퓨터 연구는 휴대용 컴퓨터에서 벗어나 웨어러블 전자장치에 대하여 활발한 연구가 진행중에 있다. Current computer research has been actively researched for wearable electronic devices away from portable computers.

특히, 안경 형태의 입는(웨어러블) 전자장치에 관해서는 많은 연구가 진행중에 있다. In particular, much research is underway on wearable electronic devices in the form of glasses.

대표적인 예로, 구글글라스를 들 수 있다. 구글글라스는 음성인식 기술로 컴퓨터를 제어하는 안경형태의 (웨어러블) 전자장치를 의미한다. A typical example is Google Glass. Google Glass is a spectacular (wearable) electronic device that controls a computer with speech recognition technology.

또한, 종래의 디스플레이 전자장치는 좀더 선명하고 화려하고 입체적인 디스플레이로 발전되어 가고 있는 추세이다. In addition, conventional display electronic devices tend to evolve into more vivid, colorful and stereoscopic displays.

대표적인 예로, 이동 단말기를 들수 있다. 이동 단말기는 멀티미디어 기기(multimedia player)형태로 구현되고 있다. 하지만 이동에 불편함이 없도록 디스플레이의 크기를 무한정으로 키우는 것은 어려운 것이 현실이다. 이러한 환경에 의하여, 이동 단말기의 변화 및 개량의 하나로 홀로그래피 모듈을 구비하는 이동 단말기 및 홀로그래피 영상을 이용하는 홀로그래피 제어 시스템에 대해 연구되고 있는 추세이다. A representative example is a mobile terminal. The mobile terminal is implemented in the form of a multimedia player. However, it is difficult to raise the size of the display indefinitely so that there is no inconvenience to move. Under such circumstances, there is a trend toward a mobile terminal equipped with a holographic module and a holography control system using a holographic image as one of the changes and improvements of a mobile terminal.

또한, 사용자가 3차원 공간안에서 홀로그래피를 영상을 볼 수는 있지만, 상기 홀로그래피 영상을 제어하는 제어시스템에 대해서는 연구되고 있는 추세이다.
In addition, although the user can view the holographic image in the three-dimensional space, the control system for controlling the holographic image has been studied.

그러나, 음성인식 기술만으로는 안경형태의 (웨어러블) 전자장치의 디스플레이를 다양한 형태로 제어를 하기는 어려웠다. However, it has been difficult to control the display of a wearable electronic device in various forms using only a voice recognition technology.

또한, 종래의 홀로그래피는 단순히 영상을 보는것에만 집중되어 있었다. In addition, conventional holography is concentrated on simply viewing an image.

그러한 이유로는, 3차원 공간안에서 사용자가 홀로그래피를 정확하게 제어하는 것은 기술적으로 연구가 부족한 것이 현실이였다. For this reason, it has been a reality that the user has difficulty in controlling the holography accurately in the three-dimensional space.

따라서, 본 발명은 안경형태의 전자장치의 디스플레이 제어방법에 관한 것이다. Accordingly, the present invention relates to a method of controlling a display of an electronic device in the form of a spectacle.

또한, 본 발명은 안경형태의 전자장치로부터 설정된 2차원 내지 3차원 공간에 구현되는 홀로그래피 제어방법에 관한 것이다. The present invention also relates to a holography control method embodied in a two-dimensional to three-dimensional space set from an eyeglass-shaped electronic device.

또한, 본 발명은 안경형태의 전자장치로부터 설정된 2차원 내지 3차원 공간에 구현되는 프로젝터 제어방법에 관한 것이다.
Further, the present invention relates to a projector control method implemented in a two-dimensional to three-dimensional space set from an eyeglass-shaped electronic apparatus.

이와 같은 목적의 본 발명에 따른 안경형태의 전자장치의 디스플레이 제어방법은 디스플레이가 안경형태의 전자장치에 구비되고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 디스플레이를 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 안경형태의 전자장치의 디스플레이 제어방법을 제시한다. A method of controlling a display of an eyeglass-type electronic device according to the present invention for such a purpose comprises the steps of: detecting a position of a user's eye with one or more cameras provided in an eyeglass- There is provided a method of controlling a display of an eyeglass-shaped electronic device in which a spectacle-type electronic device recognizes a user's voice and controls the electronic device in the form of a glass by directing the user to face the display and vocalizing the display.

또한, 본 발명에 따른 홀로그래피 제어방법은 안경형태의 전자장치가 설정된 공간에 홀로그래피 영상을 출력하고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 홀로그래피 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 홀로그래피 제어방법을 제시한다. According to another aspect of the present invention, there is provided a holography control method comprising: outputting a holographic image to a space in which an eyeglass-shaped electronic device is set; detecting a position of a user's eye with one or more cameras provided in the eyeglass- A holographic control method in which a device recognizes a user's voice and directs a holographic image implemented in the set space by a user and instructs the electronic device to control a spectacle-type electronic device.

본 발명의 한 실시형태에서, 프로젝터 제어방법은 안경형태의 전자장치가 프로젝터 모듈로부터 설정된 공간에 프로젝터 영상을 출력하고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 프로젝터 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 프로젝터 제어방법을 제시한다. In one embodiment of the present invention, a projector control method includes the steps of: outputting a projector image in a space set by a projector module to a spectacle-type electronic device, detecting the position of the user's pupil with one or more cameras provided in a spectacle- And a projector control method in which a spectacle-type electronic apparatus recognizes a user's voice, and a user directs the projector image implemented in the set space and instructs the apparatus to voice to control the electronic apparatus in the form of a glass.

본 발명의 한 실시형태에서, 카메라는 기본적으로 디스플레이 영상 및 사용자의 눈동자의 위치를 감지할 수 있도록 설정되거나, 설정되도록 조절할 수 있는 장치가 더해진 카메라로 구성된다.In one embodiment of the present invention, the camera basically consists of a display plus an additional device that can be set to be able to sense the position of the user's pupil or to be set to be set.

본 발명의 한 실시형태에서, 카메라는 기본적으로 홀로그래피 영상 및 사용자의 눈동자의 위치를 감지할 수 있도록 설정되거나, 설정되도록 조절할 수 있는 장치가 더해진 카메라로 구성된다.In one embodiment of the present invention, the camera basically comprises a holographic image and a camera added with a device that is adjustable to be set or set to detect the position of the user's pupil.

본 발명의 한 실시형태에서, 카메라는 기본적으로 프로젝터 영상 및 사용자의 눈동자의 위치를 감지할 수 있도록 설정되거나, 설정되도록 조절할 수 있는 장치가 더해진 카메라로 구성된다.In one embodiment of the present invention, the camera basically comprises a projector image and a camera added with a device that can be set to be able to sense the position of the user's pupil or adjustable to be set.

본 발명의 한 실시형태에서, 카메라는 하나 이상이 구비되어, 기본적으로 디스플레이 영상 및 사용자의 눈동자의 위치를 충분히 감지할 수 있도록 구비되거나, 사용자의 눈동자의 위치를 감지하면서 사용자의 눈동자의 위치를 따라움직이는 형태를 구비할 수 있다.In one embodiment of the present invention, the camera is provided with at least one camera, and is basically provided to sufficiently detect the display image and the position of the user's pupil, or may be provided along the position of the user's pupil while sensing the position of the user's pupil It may have a moving form.

본 발명의 한 실시형태에서, 카메라는 하나 이상이 구비되어, 기본적으로 홀로그래피 영상 및 사용자의 눈동자의 위치를 충분히 감지할 수 있도록 구비되거나, 사용자의 눈동자의 위치를 감지하면서 사용자의 눈동자의 위치를 따라움직이는 형태를 구비할 수 있다.In one embodiment of the present invention, the camera is provided with at least one camera, which is basically capable of detecting the holographic image and the position of the pupil of the user, or may be provided to detect the position of the pupil of the user, It may have a moving form.

본 발명의 한 실시형태에서, 카메라는 하나 이상이 구비되어, 기본적으로 프로젝터 영상 및 사용자의 눈동자의 위치를 충분히 감지할 수 있도록 구비되거나, 사용자의 눈동자의 위치를 감지하면서 사용자의 눈동자의 위치를 따라움직이는 형태를 구비할 수 있다.In one embodiment of the present invention, the camera is provided with at least one camera, which is basically capable of detecting the projector image and the position of the user's pupil, or may be provided to detect the position of the user's pupil, It may have a moving form.

본 발명의 한 실시형태에서, 사용자의 눈동자의 위치는 사용자의 음성 인식과 결합하여, 사용자의 눈동자가 바라보고 있는 위치를 확대, 사용자의 눈동자가 바라보고 있는 위치를 축소, 눈동자의 위치를 따라서 움직이는 커서기능, 로 구성되는 것 중 선택되는 것을 의미할 수 있다.
In one embodiment of the present invention, the location of the user's pupil is combined with the user's speech recognition to enlarge the location the user's pupil is looking at, to reduce the position the user's pupil is looking at, A cursor function, and the like.

본 발명은, 디스플레이가 안경형태의 전자장치에 구비되고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 디스플레이를 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 안경형태의 전자장치의 디스플레이 제어방법을 제공한다. The present invention relates to an electronic device in which a display is provided in an electronic device in the form of a spectacle, and the position of the user's eyes is detected by one or more cameras provided in the electronic device in the form of glasses, A method of controlling a display of an eyeglass-like electronic device for controlling an eyeglass-shaped electronic device by directing the display and instructing the display by voice.

또한, 본 발명은, 안경형태의 전자장치가 설정된 공간에 홀로그래피 영상을 출력하고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 홀로그래피 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 홀로그래피 제어방법을 제공한다. According to the present invention, a holographic image is output in a space in which an electronic device in the form of a glass is set, and the position of the user's pupil is detected by one or more cameras provided in the electronic device in the form of a glasses, The present invention provides a holography control method for controlling a spectacle-type electronic device by recognizing a voice and directing a user to view a holographic image implemented in the predetermined space and voice instruction.

또한, 본 발명은, 안경형태의 전자장치가 프로젝터 모듈로부터 설정된 공간에 프로젝터 영상을 출력하고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 프로젝터 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 프로젝터 제어방법을 제공한다.
In addition, the present invention provides an electronic device in which a spectacle-type electronic device outputs a projector image to a space set from a projector module, detects the position of a user's eye with one or more cameras provided in an eyeglass- The user recognizes the user's voice and directs the user to look at the image of the projector implemented in the predetermined space and to instruct the electronic device in the form of a voice.

도1 은 안경형태의 전자장치의 간략도.
도2 는 디스플레이 영상을 구비하는 안경형태의 전자장치의 간략도.
도3 은 홀로그래피 영상을 구비하는 안경형태의 전자장치의 간략도.
도4 는 프로젝터 영상을 구비하는 안경형태의 전자장치의 간략도.
도5 는 사용자의 안경형태의 전자장치 사용의 간략도.1 is a schematic view of an electronic device in the form of a spectacle.
2 is a schematic diagram of an electronic device in the form of a spectacle having a display image.
3 is a schematic diagram of an electronic device in the form of a spectacle having a holographic image.
4 is a schematic view of an electronic device in the form of a spectacle having a projector image.
5 is a simplified diagram of the use of an electronic device in the form of a user's eyeglasses.

하기에서 본 발명을 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략할 것이다. In the following description of the present invention, detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.

그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 일반적으로 통용되는 용어들로서 이는 생산자의 의도 또는 관계에 따라 달라질 수 있으므로 그 정의는 본 명세서에서 전반에 걸친 내용을 토대로 내려져야 할 것이다. It is to be understood that both the foregoing general description and the following detailed description are exemplary and explanatory and are intended to provide further explanation of the invention as claimed.

본 발명에서 '직시하다' 라는 표현은 '정신을 집중하여 어떤 대상을 똑바로 보다', '똑바로 쳐다보다', '정확하게 쳐다보다' 라는 뜻을 갖는다. In the present invention, the expression 'to look directly at' means to concentrate on the mind, to look straight at something, to look straight, or to look at it accurately.

본 발명에 따른 안경형태의 전자장치의 디스플레이 제어방법은, 디스플레이가 안경형태의 전자장치에 구비되고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 디스플레이를 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 안경형태의 전자장치의 디스플레이 제어방법을 제공한다. A method of controlling a display of an eyeglass-type electronic device according to the present invention is a method of controlling a display of a eyeglass-type electronic device, the display being provided in an eyeglass-shaped electronic device, There is provided a method of controlling a display of an electronic device in the form of a glass in which the electronic device recognizes the user's voice and controls the electronic device in the form of a glass by directing the user to speak and command the display.

본 발명에 따른 홀로그래피 제어방법은 안경형태의 전자장치가 설정된 공간에 홀로그래피 영상을 출력하고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 홀로그래피 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 홀로그래피 제어방법을 구비한다. A holography control method according to the present invention is a holography control method of outputting a holographic image in a space in which a spectacle-type electronic apparatus is set, detecting the position of a user's pupil with one or more cameras provided in a spectacle- And a holography control method for recognizing the user's voice and controlling the electronic device in the form of glasses by directing the user to visually recognize the holographic image implemented in the set space.

본 발명의 한 실시형태에서, 카메라는 기본적으로 홀로그래피 영상(또는 디스플레이 영상, 또는 프로젝터 영상) 및 사용자의 눈동자의 위치를 감지할 수 있도록 설정되거나, 설정되도록 조절할 수 있는 장치가 더해진 카메라로 구성된다. In one embodiment of the present invention, the camera basically consists of a holographic image (or a display image, or a projector image) and a camera added with a device that can be set or set to detect the position of the user's pupil.

본 발명의 한 실시형태에서, 카메라는 하나 이상이 구비되어, 기본적으로 홀로그래피 영상(또는 디스플레이 영상, 또는 프로젝터 영상) 및 사용자의 눈동자의 위치를 충분히 감지할 수 있도록 구비되거나, 사용자의 눈동자의 위치를 감지하면서 사용자의 눈동자의 위치를 따라움직이는 형태를 구비할 수 있다.In one embodiment of the present invention, the camera is provided with at least one, and is basically provided so as to sufficiently detect the position of the holographic image (or the display image or the projector image) and the pupil of the user, The user may be provided with a mode of moving along the position of the user's pupil.

본 발명의 한 실시형태에서, 사용자의 눈동자의 위치는 사용자의 음성 인식과 결합하여, 사용자의 눈동자가 바라보고 있는 위치를 확대, 사용자의 눈동자가 바라보고 있는 위치를 축소, 눈동자의 위치를 따라서 움직이는 커서기능, 로 구성되는 것 중 선택되는 것을 의미할 수 있다.In one embodiment of the present invention, the location of the user's pupil is combined with the user's speech recognition to enlarge the location the user's pupil is looking at, to reduce the position the user's pupil is looking at, A cursor function, and the like.

본 발명의 한 실시형태에서, 디스플레이 제어방법은 카메라가 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하는 단계; 및 상기 사용자의 눈동자의 위치를 감지 및 사용자의 음성 명령을 인식한 데이터를 안경형태의 전자장치의 판단부에 전송하는 단계; 상기 판단부는 전송된 데이터를 분석하는 단계; 상기 분석된 데이터를 토대로 판단부는 안경형태의 전자장치가 디스플레이 영상을 변화하여 출력하는 단계를 구비한다.In one embodiment of the present invention, a display control method includes: a camera detecting a position of a pupil and an eyeglass-shaped electronic device recognizing a user's voice command; And transmitting data to the determination unit of the electronic device in the form of a pair of glasses, wherein the recognition unit recognizes the position of the user's eyes and recognizes the voice command of the user. Analyzing the transmitted data; Based on the analyzed data, the determination unit includes a step of outputting a display image of the eyeglass-shaped electronic device by changing the display image.

본 발명의 한 실시형태에서, 홀로그래피 제어방법(또는 프로젝터 제어방법)은 카메라가 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하는 단계; 및 상기 사용자의 눈동자의 위치를 감지 및 사용자의 음성 명령을 인식한 데이터를 안경형태의 전자장치의 판단부에 전송하는 단계; 상기 판단부는 전송된 데이터를 분석하는 단계; 상기 분석된 데이터를 토대로 판단부는 안경형태의 전자장치가 설정된 공간에 홀로그래피 영상(또는 프로젝터 영상)을 변화하여 출력하는 단계를 구비한다. In one embodiment of the present invention, a holography control method (or a projector control method) includes the steps of: a camera detecting a position of a pupil and an eyeglass-shaped electronic device recognizing a user's voice command; And transmitting data to the determination unit of the electronic device in the form of a pair of glasses, wherein the recognition unit recognizes the position of the user's eyes and recognizes the voice command of the user. Analyzing the transmitted data; Based on the analyzed data, the determination unit includes a step of outputting a holographic image (or a projector image) in a space in which the electronic device in the form of a glass is set.

본 발명의 한 실시형태에서, 디스플레이 제어방법은 카메라가 디스플레이 영상과 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 안경형태의 전자장치의 판단부에 데이터를 전송하는 단계; 상기 판단부는 전송된 데이터를 분석하는 단계; 상기 분석된 데이터를 토대로 판단부는 안경형태의 전자장치의 디스플레이 영상을 변화하여 출력하는 단계를 구비한다. In one embodiment of the present invention, a display control method includes: a camera sensing a position of a display image and a user's eye; an electronic device in a form of a glass recognizing a user's voice command; ; Analyzing the transmitted data; Based on the analyzed data, the determination unit includes a step of outputting a change of a display image of the electronic device in the form of a pair of glasses.

본 발명의 한 실시형태에서, 홀로그래피 제어방법(또는 프로젝터 제어방법)은 카메라가 홀로그래피 영상(또는 프로젝터 영상)과 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 안경형태의 전자장치의 판단부에 데이터를 전송하는 단계; 상기 판단부는 전송된 데이터를 분석하는 단계; 상기 분석된 데이터를 토대로 판단부는 안경형태의 전자장치가 설정된 공간에 홀로그래피 영상(또는 프로젝터 영상)을 변화하여 출력하는 단계를 구비한다. In one embodiment of the present invention, a holography control method (or a projector control method) is a method in which a camera senses the position of a holographic image (or a projector image) and a pupil of a user, Transmitting data to a determination unit of an electronic device of the type; Analyzing the transmitted data; Based on the analyzed data, the determination unit includes a step of outputting a holographic image (or a projector image) in a space in which the electronic device in the form of a glass is set.

본 발명의 한 실시형태에서, 안경형태의 전자장치는 디스플레이가 되는 안경형태의 전자장치의 측면에서 여러가지 형태를 구비할 수 있다. In one embodiment of the present invention, the electronic device in the form of a spectacle can be provided in various forms in terms of an electronic device in the form of a spectacle in the form of a display.

본 발명의 한 실시형태에서, 안경형태의 전자장치는 디스플레이부 외에, 홀로그래피 영상 모듈, 프로젝터 영상 모듈, 중 하나 이상 선택되는 것을 구비할 수 있다. In one embodiment of the present invention, the electronic device in the form of a spectacle may have one or more selected from a holographic image module, a projector image module, and the like in addition to the display portion.

본 발명의 한 실시형태에서, 안경형태의 전자장치는 사용자의 또다른 웨어러블 전자장치에 연결된 전자장치를 의미할 수 있다. In one embodiment of the present invention, an electronic device in the form of a pair of glasses may refer to an electronic device connected to another wearable electronic device of the user.

본 발명의 한 실시형태에서, 안경형태의 전자장치는 연결선이 없이 네트워크로 다른 전자장치와 연결될 수 있다. In one embodiment of the present invention, an electronic device in the form of a spectacle can be connected to another electronic device via a network without a connection line.

본 발명의 한 실시형태에서, 프로젝터 제어방법은 안경형태의 전자장치가 프로젝터 모듈로부터 설정된 공간에 프로젝터 영상을 출력하고, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 프로젝터 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 프로젝터 제어방법을 의미할 수 있다. In one embodiment of the present invention, a projector control method includes the steps of: outputting a projector image in a space set by a projector module to a spectacle-type electronic device, detecting the position of the user's pupil with one or more cameras provided in a spectacle- And a projector control method in which a spectacle-type electronic apparatus recognizes a user's voice and directs a user to look at a projector image implemented in the set space and commands it by voice to control a spectacle-type electronic apparatus.

본 발명의 한 실시형태에서, 프로젝터 제어방법은 카메라가 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 안경형태의 전자장치의 판단부에 데이터를 전송하는 단계; 상기 판단부는 전송된 데이터를 분석하는 단계; 상기 분석된 데이터를 토대로 판단부는 안경형태의 전자장치가 설정된 공간에 프로젝터 영상을 변화하여 출력하는 단계를 구비한다. In one embodiment of the present invention, a method of controlling a projector includes the steps of: a camera detecting a position of a pupil; and an eyeglass-type electronic device recognizing a user's voice command and transmitting data to a determination unit of the eyeglass-shaped electronic device; Analyzing the transmitted data; Based on the analyzed data, the determination unit includes a step of outputting a projector image in a space in which the electronic device in the form of a glasses is set.

본 발명의 한 실시형태에서, 프로젝터 제어방법은 카메라가 프로젝터 영상과 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 안경형태의 전자장치의 판단부에 데이터를 전송하는 단계; 상기 판단부는 전송된 데이터를 분석하는 단계; 상기 분석된 데이터를 토대로 판단부는 안경형태의 전자장치가 설정된 공간에 프로젝터 영상을 변화하여 출력하는 단계를 구비한다. In one embodiment of the present invention, a projector control method is a method in which a camera senses the position of a projector image and a pupil of a user, and an electronic device in the form of a glass recognizes a voice command of a user, ; Analyzing the transmitted data; Based on the analyzed data, the determination unit includes a step of outputting a projector image in a space in which the electronic device in the form of a glasses is set.

본 발명의 한 실시형태에서, 프로젝터 모듈은, 영상을 외부로 출력하기 위한 광원(예를들어, 레이저 광), 영상을 생성하기 위한 영상 생성 수단, 및 영상을 일정 초점 거리에서 외부로 확대 출력하기 위한 렌즈를 포함할 수 있다. 또한, 프로젝터 모듈은, 렌즈 또는 모듈을 제어하여, 영상 투사 방향을 조절할 수 있다. In one embodiment of the present invention, a projector module includes a light source (for example, laser light) for outputting an image to the outside, an image generating means for generating an image, and an image enlarging / For example. Further, the projector module can control the lens or the module to adjust the image projection direction.

본 발명의 한 실시형태에서, 프로젝터 모듈은, CRT(Cathode Ray Tube) 모듈, LCD(Liquid Crystal Display) 모듈, DLP(Digital Light Processing) 모듈 등으로 나뉠 수 있다. 본 발명의 한 실시형태에서, DLP(Digital Light Processing) 모듈은, 프로젝터 모듈의 소형화에 유용하게 적용될 수 있다. In one embodiment of the present invention, the projector module can be divided into a CRT (Cathode Ray Tube) module, an LCD (Liquid Crystal Display) module, a DLP (Digital Light Processing) module, and the like. In one embodiment of the present invention, a DLP (Digital Light Processing) module can be usefully applied to miniaturize a projector module.

본 발명의 한 실시형태에서, 홀로그래피 모듈 및 프로젝터 모듈은 안경형태의 전자장치의 사용자가 바라보는 정면의 위치에 영상을 출력하도록 구비될 수 있지만 이에 한정되지는 않는다. In one embodiment of the present invention, the holographic module and the projector module may be provided, but are not limited to, output an image at a frontal position that the user of the electronic device in the form of a glasses looks at.

본 발명의 한 실시형태에서, 디스플레이는 안경형태의 전자장치의 사용자가 바라보는 정면의 위치에 영상을 출력하도록 구비될 수 있지만 이에 한정되지는 않는다. In one embodiment of the present invention, the display may be provided, but is not limited to, output an image at a frontal position that the user of the eyeglass-shaped electronic device sees.

본 발명의 한 실시형태에서, 홀로그래피 제어방법에서 홀로그래피 영상을 출력하는 기술은 종래에 사용되고 있는 홀로그래피를 영상을 출력하는 기술이 구비될 수 있다. In an embodiment of the present invention, a technique for outputting a holographic image in the holography control method may include a technique for outputting a holographic image that has been used conventionally.

본 발명의 한 실시형태에서, 프로젝터 제어방법에서 프로젝터 영상을 출력하는 기술은 종래에 사용되고 있는 프로젝터 영상을 출력하는 기술이 구비될 수 있다. In an embodiment of the present invention, a technique for outputting a projector image in a projector control method may include a technique for outputting a projector image that is conventionally used.

본 발명의 한 실시형태에서, 안경형태의 전자장치에는 홀로그래피 모듈이 설치된다. 본 발명의 한 실시형태에서, 상기 홀로그래피 모듈은 안경형태의 전자장치의 전면인 디스플레이부상의 공간에 홀로그래피 영상을 출력하도록 구비되거나 또는/및 안경형태의 전자장치의 후면에 홀로그래피 영상을 출력하도록 구비된다. In one embodiment of the present invention, a holographic module is installed in an electronic device in the form of a spectacle. In an embodiment of the present invention, the holographic module is provided to output a holographic image to a space on a display part, which is the front face of an electronic device in the form of a spectacle, and / or to output a holographic image to the back of the electronic device in the form of a spectacle .

본 발명의 한 실시형태에서, 안경형태의 전자장치에는 프로젝터 모듈이 설치된다. 본 발명의 한 실시형태에서, 상기 프로젝터 모듈은 안경형태의 전자장치의 전면, 후면, 중 선택되는 위치에 프로젝터 영상을 출력하도록 구비된다. In one embodiment of the present invention, a projector module is provided in an electronic device in the form of a spectacle. In one embodiment of the present invention, the projector module is provided to output a projector image at a position selected from a front surface, a rear surface, and the like of a spectacle-type electronic device.

본 발명의 한 실시형태에서, 카메라, 프로젝터 모듈, 홀로그래피 모듈, 중 하나 이상 선택되는 것이나 상기 하나 이상 선택되는 것의 구성부를 기계적으로 제어하는 방법에는 피에조 액추에이터 또는 피에조 모터가 구비되어 사용될 수 있으나, 이에 한정되지는 않는다. In one embodiment of the present invention, a method of mechanically controlling at least one of a camera, a projector module, a holographic module, and a component of the at least one selected may be provided with a piezoactuator or a piezo motor, It does not.

본 발명의 한 실시형태에서, 카메라, 프로젝터 모듈, 홀로그래피 모듈, 중 하나 이상 선택되는 것은 안경형태의 전자장치에서 회전, 상하좌우로 움직임, 탈착, 중 선택되는 것을 구현할 수 있다. In one embodiment of the present invention, it is possible to implement the selection of at least one of a camera, a projector module, and a holographic module in order to be selected from rotation, up, down, left, and right movement, and desorption in an eyeglass type electronic device.

본 발명의 한 실시형태에서, 홀로그래피 제어방법에서, 안경형태의 전자장치가 설정된 공간에 홀로그래피 영상을 출력하는 것은 2차원(2D) 평면 영상 및 3차원(3D) 입체영상을 모두 포함할 수 있다. In an embodiment of the present invention, in the holography control method, outputting a holographic image to a space in which a spectacle-type electronic device is set may include both a two-dimensional (2D) plane image and a three-dimensional (3D) stereoscopic image.

본 발명의 한 실시형태에서, 홀로그래피 제어방법에서, 안경형태의 전자장치가 설정된 공간에 홀로그래피 영상을 출력하는 것은 홀로그래피 모듈을 기계적으로 제어함으로서 홀로그래피의 영상의 위치를 조절하여 출력할 수 있다. In an embodiment of the present invention, in the holography control method, outputting a holographic image to a space in which a spectacle-type electronic device is set can be controlled by mechanically controlling the holography module so as to adjust the position of the holographic image.

본 발명의 한 실시형태에서, 홀로그래피는 안경형태의 전자장치로부터 설정된 2차원 평면에 디스플레이하는 기술을 의미할 수 있다. In one embodiment of the present invention, holography may refer to a technique of displaying on a two-dimensional plane set from an electronic device in the form of a spectacle.

본 발명의 한 실시형태에서, 설정된 2차원 평면은 3차원 평면을 의미할 수 있다.In one embodiment of the present invention, the set two-dimensional plane may mean a three-dimensional plane.

본 발명의 한 실시형태에서, 홀로그래피는 안경형태의 전자장치로부터 설정된 2차원, 3차원, 중 선택되는 것으로 디스플레이 할 수 있는 것을 의미할 수 있다.In one embodiment of the present invention, holography can mean that the holography can be displayed as being selected from two-dimensional, three-dimensional, set-up from an eye-catching electronic device.

본 발명의 한 실시형태에서, 홀로그래피는 레이저 광선으로 2차원 평면에 3차원 입체를 묘사하는 기술을 의미할 수 있다.In one embodiment of the present invention, holography can refer to a technique of describing a three-dimensional solid on a two-dimensional plane with a laser beam.

본 발명의 한 실시형태에서, 홀로그래피 제어방법은 안경형태의 전자장치로부터 설정된 공간에 디스플레이 되어 있는 상태에서, 안경형태의 전자장치에 구비되어 있는 카메라로 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 안경형태의 전자장치의 디스플레이 되어 있는 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 기술을 의미한다.In one embodiment of the present invention, the holography control method is a method of detecting the position of a pupil by a camera provided in an eyeglass-shaped electronic device in a state in which the holographic control method is displayed in a space set from an eyeglass- Means a technique of recognizing a voice command of a user and directing a displayed image of the electronic device in the form of a glass and instructing the electronic device in the form of a glass by voice.

본 발명의 한 실시형태에서, 카메라로 눈동자의 위치를 감지하는 방법은In an embodiment of the present invention, a method of detecting the pupil's position with a camera

a. 카메라로 사용자의 눈동자의 위치를 감지하는 방법,a. A method of detecting the position of the user's eyes with the camera,

b. 카메라로 사용자의 홍채와 사용자의 눈동자의 위치를 감지하는 방법,b. A method of detecting the position of a user's iris and a user's pupil with a camera,

c. 카메라로 사용자의 눈과 사용자의 눈동자의 위치를 감지하는 방법,c. A method of detecting the position of the user's eyes and the user's eyes with the camera,

, 로 구성되는 상기 a 내지 c 중 하나 이상 선택되는 방법을 구비하여 사용할 수 있다., And a to c, each of which is constituted by at least one of (a), (b) and (c).

본 발명의 한 실시형태에서, 안경형태의 전자장치는 사용자의 눈의방향 또는 얼굴방향을 감지하는 방법을 구비할 수 있다.In one embodiment of the present invention, the eyeglass-shaped electronic device may have a method of sensing the orientation of the user's eye or the orientation of the face.

본 발명의 한 실시형태에서, 사용자의 눈, 사용자의 얼굴방향, 을 감지하는 것은 사용자가 영상의 일부분을 보고자할때 자연스럽게 사용자의 얼굴이 보고자 하는 방향으로 움직이게 되며, 이러한 사용자의 움직임을 안경형태의 전자장치가 감지하는 것을 의미한다. 따라서, 이렇게 감지된 사용자의 움직임은, 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 디스플레이를 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 안경형태의 전자장치에 있어서, 명령의 정확성을 높여주거나 직시하게되는 영상의 장면을 안경형태의 전자장치의 정면으로 위치시키는 방법이 될 수 있다. 본 발명의 한 실시형태에서, 사용자의 눈, 사용자의 얼굴방향, 을 감지하는 것은 진동센서로 감지할 수 있으나, 이에 한정되지는 않는다.In one embodiment of the present invention, sensing the user's eye, the user's face orientation, naturally moves the user's face in a direction that the user wants to see a portion of the image, Which means that the electronic device is sensing. Accordingly, the detected movement of the user can be detected by detecting the position of the user's eyes with one or more cameras, and the electronic device in the form of a glass recognizes the user's voice, A method of locating a scene of an image which increases the accuracy of a command or is directly faced to a front side of a glasses-shaped electronic device. In one embodiment of the present invention, sensing a user's eye, a user's face orientation, may be sensed by a vibration sensor, but is not limited thereto.

본 발명의 한 실시형태에서, 카메라로 눈동자의 위치를 감지하는 방식은 카메라에서 직선부로 위치되는 사용자의 눈과 눈동자의 위치를 각도값으로 계산하여 3차원 맵상에서의 데이터 값으로 변환하는 것을 특징으로 할 수 있다.In one embodiment of the present invention, the method of detecting the position of the pupil by the camera is characterized in that the position of the eye and the pupil of the user positioned in the rectilinear portion of the camera is calculated as an angle value and is converted into a data value on the three- can do.

본 발명의 한 실시형태에서, 카메라로 눈동자의 위치를 감지하는 방식은 정확성을 더하기 위하여 하나이상의 카메라가 한 방향 이상에서 구비될 수 있음이다. 상기 방법은 사용자의 눈과 눈동자의 위치를 3차원 맵상에서의 여러 데이터 값으로 변환하여 오차를 줄이는 방법이 될 수 있다. 본 발명의 한 실시형태에서, 하나 이상의 카메라는 사용자의 눈과 눈동자의 위치 및 디스플레이 영상을 같이 감지한다. 본 발명의 한 실시형태에서, 하나 이상의 카메라는 사용자의 눈과 눈동자의 위치 및 홀로그래피 영상을 같이 감지한다. 본 발명의 한 실시형태에서, 하나 이상의 카메라는 사용자의 눈과 눈동자의 위치 및 프로젝터 영상을 같이 감지한다.In one embodiment of the present invention, the manner of sensing the position of the pupil with the camera is such that more than one camera may be provided in more than one direction for added accuracy. The above method may be a method of reducing the error by converting the positions of the user's eyes and pupils into various data values on the three-dimensional map. In one embodiment of the present invention, one or more cameras sense the position of the user ' s eyes and the pupil and the display image together. In one embodiment of the present invention, one or more cameras sense the location of the user ' s eyes and pupil and the holographic image together. In one embodiment of the present invention, one or more cameras sense the position of the user's eyes and the pupil and the projector image together.

본 발명의 한 실시형태에서, 홀로그래피는 홀로그래피(holography) 기술로 촬영된 것을 의미한다. 홀로그래피(holography)는 빛의 간섭성을 이용하여 입체 정보를 기록하고, 재생, 창출하는 것이다. 홀로그래피는 2D 또는 3D 입체 영상을 의미한다.In one embodiment of the present invention, holography means photographed with a holography technique. Holography is to record, reproduce and create stereoscopic information using the coherence of light. Holography refers to 2D or 3D stereoscopic images.

본 발명의 한 실시형태에서, 안경형태의 전자장치의 카메라는 눈동자의 위치를 감지할 수 있는 전자장치라면 어느것이라도 적용 될 수 있음이다.In an embodiment of the present invention, the camera of the electronic device in the form of a spectacle can be applied to any electronic device capable of detecting the position of the pupil.

본 발명의 한 실시형태에서, 안경형태의 전자장치의 카메라는 영상 및 눈동자의 위치를 감지할 수 있는 전자장치라면 어느것이라도 적용 될 수 있음이다.In one embodiment of the present invention, the camera of the electronic device in the form of a spectacle can be applied to any electronic device capable of sensing the position of the image and the pupil.

본 발명의 한 실시형태에서, 홀로그래피 제어방법은 안경형태의 전자장치의 외부의 3차원 공간에 홀로그래피 영상을 출력하고, 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 홀로그래피 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 홀로그래피 제어방법을 구비한다.In one embodiment of the present invention, the holography control method is a method of outputting a holographic image to a three-dimensional space outside the eyeglass-shaped electronic device, detecting the position of the user's eye with one or more cameras, And a holography control method of recognizing a voice and controlling the electronic device in the form of a glass by directing the user to look at the holographic image and voice instruction.

본 발명의 한 실시형태에서, 홀로그래피 제어방법은 안경형태의 전자장치의 외부의 3차원 공간에 홀로그래피 영상을 출력하고, 하나 이상의 카메라로 영상과 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 홀로그래피 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 홀로그래피 제어방법을 구비한다.In one embodiment of the present invention, the holography control method includes the steps of outputting a holographic image to a three-dimensional space outside the eyeglass-shaped electronic device, detecting the position of the eye and the user's eye with one or more cameras, And a holography control method of recognizing the user's voice and controlling the electronic device in the form of a glasses by directing the user to look at the holographic image and voicing it.

본 발명의 한 실시형태에서, 프로젝터 제어방법은 안경형태의 전자장치의 외부의 3차원 공간에 프로젝터 영상을 출력하고, 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 프로젝터 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 프로젝터 제어방법을 구비한다.In one embodiment of the present invention, a projector control method includes the steps of outputting a projector image to a three-dimensional space outside an eyeglass-shaped electronic device, detecting the position of a user's eye with one or more cameras, And a projector control method of recognizing the voice and controlling the electronic device in the form of a glasses by directing the user to look at the image of the projector and commanding the voice.

본 발명의 한 실시형태에서, 프로젝터 제어방법은 안경형태의 전자장치의 외부의 3차원 공간에 프로젝터 영상을 출력하고, 하나 이상의 카메라로 영상과 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 프로젝터 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 프로젝터 제어방법을 구비한다.In one embodiment of the present invention, a projector control method includes the steps of outputting a projector image to an external three-dimensional space of an electronic device in the form of a spectacle, detecting the position of the image and the user's pupil with one or more cameras, And a projector control method for recognizing the user's voice and controlling the electronic device in the form of a glass by directing the user to look at the projector image and instructing the user by voice.

본 발명의 한 실시형태에서, 사용자의 눈동자의 위치는 음성명령과 조합되어 사용되며, 본 발명의 한 실시형태에서, 사용방법으로는In one embodiment of the present invention, the position of the user's pupil is used in combination with a voice command, and in one embodiment of the invention,

a. 사용자가 눈동자로 직시하고 음성으로 '축소' 이라고 명령하는 축소, a. Zooming, which the user faces with a pupil and commands the voice to "zoom out"

b. 사용자가 눈동자로 직시하고 음성으로 '확대' 이라고 명령하는 확대, b. When the user faces with a pupil and instructs the user to magnify by voice,

c. 사용자가 눈동자로 직시하고 음성으로 '클릭' 이라고 명령하는 클릭, c. A click that the user looks at with a pupil and says "click" by voice,

d. 사용자가 눈동자로 바꾸고자 하는 방향을 직시하고 음성으로 '넘김' 이라고 명령하는 장면체인지,d. A scene change in which the user directs the direction to change the pupil and instructs the user to 'turn' by voice,

e. 사용자가 눈동자로 직시하고 음성으로 '드레그' 이라고 명령하여 커서가 붙잡은 영상을 원하는 위치로 이동시키는 드레그 ,e. A drag that moves the image captured by the cursor to a desired position by directing the user to look at the pupil and say 'drag' by voice,

f. 사용자가 눈동자로 직시하고 음성으로 '이동' 이라고 명령하여 커서를 원하는 위치로 이동시키는 이동,f. Moving the cursor to a desired position by directing the user to look at the eyes and saying 'move' by voice,

g. 사용자가 눈동자를 움직이고 음성으로 '패턴' 이라고 명령하는 패턴,g. A pattern in which a user moves a pupil and commands a pattern as a voice,

, 로 구성되는 상기 a 내지 g 중 하나 이상 선택되는 것을 구비할 수 있으나 이에 한정되지는 않는다. 본 발명의 한 실시형태에서, 사용자가 눈동자를 움직일때, 디스플레이 영상, 홀로그래피 영상, 프로젝터 영상, 중 선택되는 영상은 사용자의 눈동자를 따라 움직이는 커서가 표시될 수 있다., &Lt; / RTI > which are selected from one or more of the above-mentioned groups a to g. In one embodiment of the present invention, when the user moves the pupil, a cursor moving along the pupil of the user may be displayed on the display image, the holography image, and the image selected from the projector image.

본 발명의 한 실시형태에서, 카메라로 눈동자의 위치를 감지하는 방식은In one embodiment of the present invention, the method of detecting the position of the pupil with the camera

a. 사용자의 눈동자의 위치의 움직임을 감지 한 후 카메라로 감지a. Detects the movement of the user's pupil position and then detects it with the camera

b. 사용자의 눈과 사용자의 눈동자의 위치의 움직임을 감지 한 후 카메라로 감지 b. Detects movement of user's eyes and eyes of user's eyes

c. 감지를 최적화 하기위해 카메라를 최대사이즈로 확대하여 감지 c. To maximize detection, the camera is zoomed in to the maximum size

, 로 구성되는 a 내지 c, 중 하나 이상 선택되는 촬영방법을 구비한다. , And a to c, each of which is composed of:

본 발명의 한 실시형태에서, 디스플레이 제어방법은 카메라로 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 그 데이터를 판단부가 인식 한 후 미리 저장되어 있는 맵핑데이터와 비교검토하여 디스플레이 영상을 변화하여 출력하는 방식을 구비하나, 이에 한정되지는 않는다.In one embodiment of the present invention, the display control method includes the steps of sensing the position of the pupil by a camera, recognizing the user's voice command by the eyeglass-type electronic device, comparing the data with pre- And outputting the changed display image, but the present invention is not limited thereto.

본 발명의 한 실시형태에서, 디스플레이 제어방법은 카메라로 영상과 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 그 데이터를 판단부가 인식 한 후 미리 저장되어 있는 맵핑데이터와 비교검토하여 디스플레이 영상을 변화하여 출력하는 방식을 구비하나, 이에 한정되지는 않는다.In one embodiment of the present invention, a display control method includes detecting a position of an eye and a pupil with a camera, recognizing a voice command of a user in the form of a glasses, recognizing the user's voice command, recognizing the data, And a method of outputting the display image by changing the display image by comparison is provided. However, the present invention is not limited to this.

본 발명의 한 실시형태에서, 홀로그래피 제어방법 및 프로젝터 제어방법은 카메라로 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 그 데이터를 판단부가 인식 한 후 미리 저장되어 있는 맵핑데이터와 비교검토하여 영상을 변화하여 출력하는 방식을 구비하나, 이에 한정되지는 않는다.In one embodiment of the present invention, the holography control method and the projector control method detect the position of the pupil with the camera, and the electronic device in the form of a glass recognizes the voice command of the user, recognizes the data thereof by the judging unit, Data is compared with data, and the image is changed and output. However, the present invention is not limited to this.

본 발명의 한 실시형태에서, 디스플레이 제어방법 및 홀로그래피 제어방법 및 프로젝터 제어방법은 카메라로 영상과 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 그 데이터를 판단부가 인식 한 후 미리 저장되어 있는 맵핑데이터와 비교검토하여 영상을 변화하여 출력하는 방식을 구비하나, 이에 한정되지는 않는다.In one embodiment of the present invention, a display control method, a holography control method, and a projector control method are provided for detecting a position of a pupil and a video image by a camera, and an electronic device in the form of a glass recognizing a voice command of the user, And comparing the image data with the previously stored mapping data, and outputting the changed image data. However, the present invention is not limited to this.

본 발명의 한 실시형태에서, 카메라는 300만화소 이상으로 이미지를 촬영하는 것이 가능한 디바이스로 구성될 수 있다. 카메라는 영상 또는/및 사용자의 눈동자의 위치를 세밀하게 촬영가능한 디바이스로 구성될 수 있다.In one embodiment of the present invention, the camera may be configured as a device capable of taking an image at 300 megapixels or more. The camera may be composed of a device capable of photographing the position of the image and / or the user's pupil.

본 발명의 한 실시형태에서, 홀로그래피 제어방법은 안경형태의 전자장치/홀로그래피 영상/사용자가 기본적으로 안경형태의 전자장치의 카메라로부터 일직선상에서 위치하였을때 확실한 홀로그래피 제어방법이 구현될 수 있다. 본 발명의 한 실시형태에서, 홀로그래피 제어방법은 안경형태의 전자장치/홀로그래피 영상/사용자가 안경형태의 전자장치의 카메라로부터 일직선상에 위치하지 않더라도 하나 이상의 카메라가 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 홀로그래피 제어방법이 구현될 수 있다. In one embodiment of the present invention, a holographic control method can be implemented when a spectacular electronic / holographic image / user is positioned essentially linearly from a camera of an electronic device in the form of a spectacle. In one embodiment of the present invention, the holography control method includes the steps of: detecting a position of a pupil of a pupil-shaped electronic / holographic image / eyeglass shape, The electronic device recognizes the voice command of the user so that the holographic control method can be implemented.

본 발명의 한 실시형태에서, 프로젝터 제어방법은 안경형태의 전자장치/프로젝터 영상/사용자로 구성되되, 기본적으로 안경형태의 전자장치의 하나 이상의 카메라로 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 프로젝터 제어방법이 구현될 수 있다. In one embodiment of the present invention, the projector control method comprises an electronic device / projector image / user in the form of a spectacle, which basically detects the position of the pupil with one or more cameras of the electronic device in the form of glasses, The projector control method can be implemented by recognizing the voice command of the user.

본 발명의 한 실시형태에서, 하나 이상의 카메라는 안경형태의 전자장치의 정면, 후면을 모두 감지할 수 있도록 구비되어, 정면에 구비된 하나 이상의 카메라가 눈동자의 위치를 감지하면서, 후면에 구비된 하나 이상의 카메라가 외부로 출력되는 홀로그래피 영상 또는 프로젝터 영상을 감지하는 형태를 구비할 수 있다. In one embodiment of the present invention, one or more cameras are provided to detect both the front and back of the electronic device in the form of a pair of glasses, so that one or more cameras provided on the front face detect the position of the pupil, The above camera may be configured to detect a holographic image or a projector image output to the outside.

본 발명의 한 실시형태에서, 카메라로 사용자의 눈과 눈동자의 위치를 감지하는 것은 사용자의 눈의 위치와 사용자의 눈에서 눈동자가 위치하는 위치(눈의 중앙에서 눈동자가 어느 위치에 위치되는지)를 감지해 내는 것이다.In one embodiment of the present invention, sensing the location of the user's eyes and pupil with the camera may include detecting the location of the user's eye and the location where the pupil is located in the user's eye (where the pupil is located at the center of the eye) To detect it.

본 발명의 한 실시형태에서, 홀로그래피 제어방법은 안경형태의 전자장치/홀로그래피 영상/사용자가 기본적으로 안경형태의 전자장치의 카메라로부터 일직선상에서 위치하였을때 사용자로부터 홀로그래피 영상의 뒷부분을 제어가능하게 하기 위하여 안경형태의 전자장치 또는 사용자가 홀로그래피 영상을 회전시킬 수 있다.In one embodiment of the present invention, the holography control method is used to control the backside of the holographic image from the user when the electronic device / holographic image in the form of a spectacle / user is positioned essentially linearly from the camera of the eye- A user can rotate the holographic image.

본 발명의 한 실시형태에서, 홀로그래피 제어방법은 안경형태의 전자장치가 3차원 공간상에서 설정된 공간에 홀로그래피 영상을 출력하고, 사용자가 홀로그래피 영상을 제어하는데 있어서, 안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 홀로그래피 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 홀로그래피 제어방법을 구비한다.In one embodiment of the present invention, a holographic control method is a method in which a spectacle-type electronic device outputs a holographic image in a space set in a three-dimensional space, and a user controls a holographic image, The above-described camera detects the position of the user's eyes, and the electronic device in the form of a glass recognizes the user's voice. The user views the holographic image implemented in the set space and instructs the electronic device to perform holography And a control method.

본 발명의 한 실시형태에서, 디스플레이 제어방법은 안경형태의 전자장치가 디스플레이 영상을 출력하는데 있어서, 3차원 공간상에 하나 이상의 전자장치가 구비되어, 서로 연결되어 디스플레이 영상을 변화시킬 수 있다. 본 발명의 한 실시형태에서, 디스플레이 영상을 사용자가 직시하고 디스플레이 영상을 '드레그'라 명령하여 다른 임의의 전자장치에 디스플레이 영상을 옮기고자 하면, 카메라가 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 다른 전자장치를 ON 시켜, 상기 ON 된 전자장치가 디스플레이 영상을 출력하는 형태를 구비할 수 있다. 이러한 형태는 복수개의 디스플레이 영상을 사용자가 직시하고 음성으로 명령함으로서 제어하는 형태로 구비될 수 있음이다. 본 발명의 한 실시형태에서, 전자장치는 하나 이상의 카메라를 구비한다.In one embodiment of the present invention, in the display control method, one or more electronic devices are provided on a three-dimensional space in an eyeglass-shaped electronic device for outputting a display image, so that they can be connected to each other to change a display image. In an embodiment of the present invention, when the user views the display image and instructs the display image to be 'dragged' to move the display image to another arbitrary electronic device, the camera detects the position of the pupil, May recognize the voice command of the user to turn on another electronic device, and the turned-on electronic device may output the display image. In this case, a plurality of display images can be provided in a form that the user directly controls and commands by voice. In one embodiment of the invention, the electronic device comprises one or more cameras.

본 발명의 한 실시형태에서, 홀로그래피 제어방법(또는 프로젝터 제어방법)은 안경형태의 전자장치가 3차원 공간상에서 설정된 공간에 홀로그래피 영상(또는 프로젝터 영상)을 출력하는데 있어서, 3차원 공간상에 하나 이상의 전자장치가 구비되어, 홀로그래피 영상(또는 프로젝터 영상)을 사용자가 직시하고 음성으로 명령함으로서, 하나 이상의 안경형태의 전자장치가 홀로그래피 영상(또는 프로젝터 영상)을 변화시킬 수 있다. 본 발명의 한 실시형태에서, 홀로그래피 영상(또는 프로젝터 영상)을 사용자가 직시하고 홀로그래피 영상(또는 프로젝터 영상)을 '드레그'라 명령하여 다른 임의의 3차원 공간에 홀로그래피 영상(또는 프로젝터 영상)을 옮기고자 하면, 카메라가 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 다른 전자장치를 ON 시켜, 상기 ON 된 전자장치가 홀로그래피 영상(또는 프로젝터 영상)을 상기 임의의 3차원 공간에 출력하는 형태를 구비할 수 있다. 이러한 형태는 복수개의 홀로그래피 영상(또는 프로젝터 영상)을 사용자가 직시하고 음성으로 명령함으로서 제어하는 형태로 구비될 수 있음이다. 본 발명의 한 실시형태에서, 전자장치는 하나 이상의 카메라를 구비한다. 본 발명의 한 실시형태에서, 홀로그래피 제어방법 및 프로젝터 제어방법은 하나 이상이 구비되어, 서로 연결되어 사용될 수 있다.In an embodiment of the present invention, a holographic control method (or a projector control method) is a method in which a spectacle-type electronic apparatus outputs a holographic image (or a projector image) in a space set on a three- An electronic device is provided so that the holographic image (or projector image) can be changed by one or more eyeglass-shaped electronic devices by directing the user to view and speak the holographic image (or projector image). In an embodiment of the present invention, a user views a holographic image (or a projector image), and a holographic image (or a projector image) is commanded as a 'drag' to transfer a holographic image (or a projector image) to another arbitrary three- If the electronic device senses the position of the pupil and the electronic device in the form of a glass recognizes the voice command of the user, the electronic device turns on the holographic image (or the projector image) And outputting it to a space. Such a configuration can be provided in such a manner that a plurality of holographic images (or projector images) are controlled by directing the user and instructing them by voice. In one embodiment of the invention, the electronic device comprises one or more cameras. In one embodiment of the present invention, at least one of the holography control method and the projector control method is provided and can be used in connection with each other.

본 발명의 한 실시형태에서, 홀로그래피 제어방법 및 프로젝터 제어방법은 또다른 디스플레이부를 구비하는 전자장치와 연결되어 사용될 수 있다.In one embodiment of the present invention, the holography control method and the projector control method can be used in connection with an electronic device having another display portion.

본 발명의 한 실시형태에서, 카메라가 '눈동자의 위치를 감지'라는 표현은 '영상 및 눈동자의 위치를 감지'라는 표현으로 해석할 수 있다.In one embodiment of the present invention, the expression " the position of the pupil is detected " by the camera can be interpreted as the expression " detecting the position of the image and the pupil ".

본 발명의 한 실시형태에서, 카메라가 '눈동자의 위치를 감지'라는 표현은 '눈과 눈동자의 위치를 감지' 또는 '영상과 눈동자의 위치를 감지' 또는 '영상과 눈과 눈동자의 위치를 감지' 라는 표현으로 해석할 수 있다.In one embodiment of the present invention, the expression " sensing the position of the pupil " is used to detect the position of the eye and the pupil, or the position of the image and the pupil, "And"

본 발명의 한 실시형태에서, 홀로그래피 제어방법은, In one embodiment of the present invention, a holography control method includes:

안경형태의 전자장치가 설정된 공간에 홀로그래피 영상을 출력하고, A holographic image is output to a space in which a spectacle-type electronic device is set,

안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 홀로그래피 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 것; 을 특징으로 하는 홀로그래피 제어방법을 구비한다. A user's eyes are detected by one or more cameras provided in a spectacle-type electronic device, and a spectacle-type electronic device recognizes a user's voice, so that a user can see a holographic image implemented in the set space, To control electronic devices in the form of glasses; And a holography control method.

, 로 구성되는 상기 a 내지 c 중 하나 이상 선택되는 방법을 구비하는 것을 특징으로 할 수 있다., And a to c, each of which is constituted by the following formula (1).

, 로 구성되는 상기 a 내지 g 중 하나 이상 선택되는 것을 구비할 수 있으나 이에 한정되지는 않는다., &Lt; / RTI > which are selected from one or more of the above-mentioned groups a to g.

본 발명의 한 실시형태에서, 눈동자의 위치를 감지하는 것은 In one embodiment of the present invention, sensing the pupil's position

처음 스타트의 눈동자의 위치를 감지하며, 음성으로 '처음클릭'이라 명령하고, 두번째클릭, 세번째클릭을 '두번째클릭', '세번째클릭' 이라 명령하여 멀티기능을 구비할 수 있다.A multi-function can be provided by detecting the position of the pupil of the first start and commanding the first click as the voice, the second click, the third click as the second click, and the third click as the voice.

본 발명의 한 실시형태에서, 안경형태의 전자장치를 제어하는 것은In one embodiment of the present invention, controlling an eyeglass-shaped electronic device

안경형태의 전자장치를 제어하여 변화된 디스플레이 영상, 홀로그래피 영상, 프로젝터 영상, 중 선택되는 것을 구비하는 것; 을 특징으로 한다.Having a selected display image, a holographic image, and a projector image by controlling the electronic device in the form of a glass; .

본 발명의 한 실시형태에서, 눈과 눈동자의 위치를 감지하는 것은In one embodiment of the invention, sensing the position of the eyes and the pupil

사용자의 눈의 방향과 사용자의 눈에서 눈동자가 위치하는 위치를 감지하는 것; 을 특징으로 한다.Sensing the orientation of the user's eye and the location of the pupil in the user's eye; .

본 발명의 한 실시형태에서, 눈동자의 위치를 감지하는 것은In one embodiment of the present invention, sensing the pupil's position

상기 사용자의 눈동자의 위치가 홀로그래피 영상으로부터 일정간격이상 떨어진 상태에서, 눈동자의 위치를 감지하는 것; 을 특징으로 한다.Detecting a position of the pupil in a state where the position of the pupil of the user is separated from the holographic image by a predetermined distance or more; .

상기 사용자의 눈동자의 위치가 프로젝터 영상으로부터 일정간격이상 떨어진 상태에서, 눈동자의 위치를 감지하는 것; 을 특징으로 한다.Detecting a position of the pupil in a state where the position of the pupil of the user is separated from the projector image by a predetermined distance or more; .

본 발명의 한 실시형태에서, 프로젝터 제어방법은,In one embodiment of the present invention, a projector control method includes:

안경형태의 전자장치가 프로젝터 모듈로부터 설정된 공간에 프로젝터 영상을 출력하고, The electronic device in the form of a glasses outputs the projector image to the space set from the projector module,

안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 설정된 공간에 구현되어 있는 프로젝터 영상을 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 것; 을 특징으로 하는 프로젝터 제어방법을 구비한다. The position of the user's pupil is detected by one or more cameras provided in the eyeglass-shaped electronic device, and the eyeglass-shaped electronic device recognizes the user's voice, so that the user can see the projector image implemented in the preset space, To control electronic devices in the form of glasses; And a projector control method.

본 발명의 한 실시형태에서, 디스플레이 제어방법 및 홀로그래피 제어방법 및 프로젝터 제어방법은 카메라로 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성 명령을 인식하여 그 데이터를 판단부가 인식 한 후 미리 저장되어 있는 맵핑데이터와 비교검토하여 영상을 변화하여 출력하는 방식을 구비하되, 상기 맵핑데이터와 비교검토하는 방식은 명암, 원근감, 색상, 눈과 눈동자의 경계, 등 이미지로 부터 획득될 수 있는 데이터를 기반으로 비교검토하는 방식을 구비한다.In one embodiment of the present invention, the display control method, the holography control method, and the projector control method detect the position of the pupil with the camera, and the electronic device in the form of a glass recognizes the voice command of the user, And a method of comparing and reviewing the image data with the stored mapping data, wherein the method of comparing and reviewing the mapping data is a method of comparing data that can be obtained from images such as contrast, perspective, color, And a method of performing a comparison review based on the comparison result.

본 발명의 한 실시형태에서, 맵핑데이터와 비교검토하는 방식은 카메라로 둘 이상의 사진, 영상, 파노라마, 등을 감지하여, 명암, 원근감, 색상, 눈과 눈동자의 경계, 등 이미지로 부터 획득될 수 있는 데이터를 기반으로 비교검토하는 방식을 구비한다.In one embodiment of the present invention, the method of comparing and reviewing with the mapping data can be obtained from images such as contrast, perspective, color, eye-to-eye boundary, etc. by sensing two or more pictures, images, panoramas, And a method of comparing and reviewing data based on the data.

본 발명의 한 실시형태에서, 디스플레이 제어방법은 하나 이상의 카메라를 구비하되, 상기 카메라는 디스플레이 영상을 감지하는 기능을 구비할 수 있다.In one embodiment of the present invention, the display control method includes one or more cameras, and the camera may have a function of detecting a display image.

본 발명의 한 실시형태에서, 홀로그래피 제어방법은 하나 이상의 카메라를 구비하되, 상기 카메라는 홀로그래피 영상을 감지하는 기능을 구비할 수 있다.In one embodiment of the present invention, the holography control method includes at least one camera, and the camera may have a function of detecting a holographic image.

본 발명의 한 실시형태에서, 프로젝터 제어방법은 하나 이상의 카메라를 구비하되, 상기 카메라는 프로젝터 영상을 감지하는 기능을 구비할 수 있다.In one embodiment of the present invention, the projector control method includes one or more cameras, and the camera may have a function of detecting a projector image.

본 발명의 한 실시형태에서, 카메라는 기본적으로 디스플레이 영상 및 눈동자의 위치를 감지할 수 있도록 설정되거나, 설정되도록 조절할 수 있는 장치가 더해진 카메라로 구성된다.In one embodiment of the present invention, the camera basically consists of a camera added with a device capable of being set to be able to detect the position of the display image and the pupil or to be set.

본 발명의 한 실시형태에서, 카메라는 기본적으로 홀로그래피 영상 및 눈동자의 위치를 감지할 수 있도록 설정되거나, 설정되도록 조절할 수 있는 장치가 더해진 카메라로 구성된다.In one embodiment of the present invention, the camera basically consists of a camera added with a device capable of being set to be able to detect the holographic image and the position of the pupil or to be set.

본 발명의 한 실시형태에서, 카메라는 기본적으로 프로젝터 영상 및 눈동자의 위치를 감지할 수 있도록 설정되거나, 설정되도록 조절할 수 있는 장치가 더해진 카메라로 구성된다.In one embodiment of the present invention, the camera basically consists of a camera added with a device capable of being set to be able to detect the position of the projector image and the pupil or to be set.

본 발명의 한 실시형태에서, 디스플레이 제어방법 및 홀로그래피 제어방법 및 프로젝터 제어방법은 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지하며, 더하여 안경형태의 전자장치가 사용자의 음성을 인식하고, 카메라로 영상데이터를 함께 감지하여 판단부에서 판단하는 것을 특징으로 한다. In one embodiment of the present invention, the display control method, the holography control method, and the projector control method detect the position of the user's pupil with one or more cameras, and further, the electronic device in the form of a glasses recognizes the user's voice, The data is detected together and the judgment unit judges it.

본 발명의 한 실시형태에서, 판단부는 비주얼C, C++, C#, 등의 프로그래밍 언어를 사용할 수 있으나, 이에 한정되지는 않는다.In one embodiment of the present invention, the determination unit may use a programming language such as Visual C, C ++, C #, and the like, but is not limited thereto.

본 발명의 한 실시형태에서, 카메라는 사용자의 눈과 사용자의 눈동자의 위치 및 디스플레이 영상을 감지하는 것; 을 특징으로 한다.In one embodiment of the invention, the camera senses the position of the user's eyes and the user's pupil and the display image; .

본 발명의 한 실시형태에서, 카메라는 사용자의 눈과 사용자의 눈동자의 위치 및 홀로그래피 영상을 감지하는 것; 을 특징으로 한다.In one embodiment of the present invention, the camera senses the position of the user ' s eye and the pupil of the user and the holographic image; .

본 발명의 한 실시형태에서, 카메라는 사용자의 눈과 사용자의 눈동자의 위치 및 프로젝터 영상을 감지하는 것; 을 특징으로 한다.In one embodiment of the present invention, the camera senses the position of the user's eye and the user's pupil and the image of the projector; .

본 발명의 한 실시형태에서, 맵핑데이터는 2차원 정보를 3차원으로 입체 해석하는 데이터를 의미한다.In one embodiment of the present invention, the mapping data means data for three-dimensionally interpreting two-dimensional information in three dimensions.

본 발명의 한 실시형태에서, 카메라가 사용자의 눈과 사용자의 눈동자의 위치 및 디스플레이 영상을 감지하는 것은 사용자의 눈과 사용자의 눈동자의 위치 및 디스플레이 영상을 3차원 입체 정보로 해석하는 것을 특징으로 하나, 이에 한정되지는 않는다.In one embodiment of the present invention, the camera senses the position of the user's eye, the user's pupil, and the display image, which is characterized by interpreting the position of the user's eye, the pupil of the user, and the display image as three-dimensional stereoscopic information , But is not limited thereto.

본 발명의 한 실시형태에서, 카메라가 사용자의 눈과 사용자의 눈동자의 위치 및 홀로그래피 영상을 감지하는 것은 사용자의 눈과 사용자의 눈동자의 위치 및 홀로그래피 영상을 3차원 입체 정보로 해석하는 것을 특징으로 하나, 이에 한정되지는 않는다.In one embodiment of the present invention, the camera senses the position of the user's eye and the pupil of the user and the holographic image, which is characterized in that the position of the user's eye, the pupil position of the user, and the holographic image are analyzed as three-dimensional stereoscopic information , But is not limited thereto.

본 발명의 한 실시형태에서, 카메라가 사용자의 눈과 사용자의 눈동자의 위치 및 프로젝터 영상을 감지하는 것은 사용자의 눈과 사용자의 눈동자의 위치 및 프로젝터 영상을 3차원 입체 정보로 해석하는 것을 특징으로 하나, 이에 한정되지는 않는다.In one embodiment of the present invention, the camera senses the position of the user's eye, the user's pupil, and the image of the projector, which is characterized by interpreting the position of the user's eye, the pupil of the user, and the projector image as three-dimensional stereoscopic information , But is not limited thereto.

본 발명의 한 실시형태에서, 카메라로 눈동자의 위치를 감지하는 것은 카메라로 사용자의 눈과 사용자의 눈동자의 위치 및 추가적으로 디스플레이 영상을 더 감지하는 것; 을 특징으로 한다.In one embodiment of the present invention, sensing the position of the pupil with the camera further comprises sensing the position of the user's eye and the user's pupil with the camera and additionally further displaying the display image; .

본 발명의 한 실시형태에서, 카메라로 눈동자의 위치를 감지하는 것은 카메라로 사용자의 눈과 사용자의 눈동자의 위치 및 추가적으로 홀로그래피 영상을 더 감지하는 것; 을 특징으로 한다.In one embodiment of the present invention, sensing the position of the pupil with the camera further includes sensing the position of the user's eye and the pupil of the user and additionally a holographic image with the camera; .

본 발명의 한 실시형태에서, 카메라로 눈동자의 위치를 감지하는 것은 카메라로 사용자의 눈과 사용자의 눈동자의 위치 및 추가적으로 프로젝터 영상을 더 감지하는 것; 을 특징으로 한다.In one embodiment of the present invention, sensing the position of the pupil with the camera further comprises sensing the position of the user's eye and the user's pupil with the camera and additionally further projecting the image; .

본 발명의 한 실시형태에서, 하나 이상의 카메라는, 하나 이상의 3차원 카메라(3D 카메라)를 의미할 수 있다.In one embodiment of the invention, one or more cameras may refer to one or more three-dimensional cameras (3D cameras).

본 발명의 한 실시형태에서, 하나 이상의 카메라는, 하나 이상의 카메라 및 하나 이상의 3차원 카메라(3D 카메라)를 의미할 수 있다.In one embodiment of the invention, one or more cameras may mean one or more cameras and one or more three-dimensional cameras (3D cameras).

본 발명의 한 실시형태에서, 3차원 카메라(3D 카메라)는 두대의 카메라가 인간의 눈처럼 촬영하는 것을 의미할 수 있다. 본 발명의 한 실시형태에서, 3차원 카메라(3D 카메라)의 각각의 카메라는 피에조 액추에이터나 피에조모터로 기계적으로 조절될 수 있으나, 이에 한정되지는 않는다.In an embodiment of the present invention, a three-dimensional camera (3D camera) may mean that two cameras shoot like a human eye. In one embodiment of the present invention, each camera of a three-dimensional camera (3D camera) may be mechanically controlled with a piezo actuator or piezo motor, but is not limited thereto.

본 발명의 한 실시형태에서, 안경형태의 전자장치는 안경 형태의 입는(웨어러블) 컴퓨터를 의미할 수 있다.In one embodiment of the present invention, the electronic device in the form of a pair of glasses can mean a wearable computer in the form of a pair of glasses.

본 발명의 한 실시형태에서, 안경형태의 전자장치에 구비되는 디스플레이는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thinfilm transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode,OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.In an embodiment of the present invention, a display provided in an electronic device in the form of a spectacle is a liquid crystal display (LCD), a thin film transistor liquid crystal display (TFT LCD), an organic light an organic light emitting diode (OLED), a flexible display, and a 3D display.

본 발명의 한 실시형태에서, 영상에 출력되는 커서는 눈동자의 움직임에 따라 디스플레이에 표현되어 있는 마우스키형상(예를들어, 화살표)가 따라서 이동하는 형태를 구비할 수 있다.In an embodiment of the present invention, the cursor output to the image may include a form in which a mouse key shape (e.g., an arrow) displayed on the display moves along with the movement of the pupil.

본 발명의 한 실시형태에서, 안경형태의 전자장치는 디스플레이, 홀로그래피 모듈, 프로젝터 모듈, 중 하나 이상 선택되는 것을 구비하는 안경형태의 전자장치를 의미한다. .......
In one embodiment of the present invention, an electronic device in the form of a spectacle means an electronic device in the form of a spectacle having one or more selected from a display, a holography module, and a projector module. .......

본 발명의 한 실시형태에서, 안경형태의 전자장치는, 카메라가 눈동자의 위치를 감지하는 카메라감지부와 수신된 음성 신호를 분석하여 사용자 명령을 판단하는 음성인식감지부; 상기 사용자의 눈동자의 위치를 감지한 데이터 및 음성명령데이터를 전송받는 판단부; 판단부에서 분석된 데이터를 토대로 안경형태의 전자장치가 디스플레이 영상을 변화하여 출력하는 출력부; 를 포함하여 구성된다. In one embodiment of the present invention, the eyeglass-shaped electronic device includes a camera sensing unit for sensing a position of a pupil and a voice recognition sensing unit for analyzing a received voice signal to determine a user command; A determination unit for receiving data and voice command data indicating a position of the user's eyes; An output unit for outputting a change in the display image of the electronic device in the form of a glasses based on the data analyzed by the determination unit; .

본 발명의 한 실시형태에서, 안경형태의 전자장치는, 카메라가 영상과 눈동자의 위치를 감지하는 카메라감지부와 수신된 음성 신호를 분석하여 사용자 명령을 판단하는 음성인식감지부; 상기 영상데이터와 사용자의 눈동자의 위치를 감지한 데이터 및 음성명령데이터를 전송받는 판단부; 판단부에서 분석된 데이터를 토대로 안경형태의 전자장치가 디스플레이 영상을 변화하여 출력하는 출력부; 를 포함하여 구성된다.According to an embodiment of the present invention, a spectacle-type electronic device includes a camera sensing unit for sensing a position of an image and a pupil of a camera, a voice recognition sensing unit for analyzing a received voice signal to determine a user command; A determination unit for receiving the image data and data and voice command data indicating a location of a user's pupil; An output unit for outputting a change in the display image of the electronic device in the form of a glasses based on the data analyzed by the determination unit; .

본 발명의 한 실시형태에서, 음성인식감지부는 음성 수신부, 명령 판단부, 저장부로 구성된다.In one embodiment of the present invention, the voice recognition sensing unit comprises a voice receiving unit, an instruction deciding unit, and a storage unit.

본 발명의 한 실시형태에서, 음성 수신부는 사용자의 음성 신호를 수신하는 것으로서, 마이크를 포함하여 구성되거나 또는 외부 인터페이스를 포함하여 구성될 수 있으나, 음성을 수신하는데 있어서 이에 한정되지는 않는다. In one embodiment of the present invention, the voice receiving unit is configured to receive a voice signal of a user, or may be configured to include a microphone or include an external interface, but the present invention is not limited thereto.

본 발명의 한 실시형태에서, 명령 판단부는 음성 수신부에 수신된 음성 신호를 분석하여 사용자 명령을 판단하는 기능을 수행한다. In one embodiment of the present invention, the command determination unit analyzes the voice signal received by the voice receiving unit and determines a user command.

본 발명의 한 실시형태에서, 명령 판단부가 음성 수신부에 수신된 음성 신호를 분석한 후 사용자 명령을 판단함에 있어서는 저장부에 미리 저장된 정보를 활용할 수 있다. In one embodiment of the present invention, the command determination unit may utilize information stored in advance in the storage unit in determining the user command after analyzing the voice signal received in the voice receiving unit.

본 발명의 한 실시형태에서, 저장부에 특정 명령에 대한 음성 신호 파형 정보가 저장되어 있는 경우 명령 판단부는 수신되는 음성 신호의 파형과 저장부에 저장된 파형 정보를 비교하여 사용자의 명령을 판단할 수 있다. In one embodiment of the present invention, when the speech signal waveform information for a specific instruction is stored in the storage unit, the instruction determination unit compares the waveform of the received speech signal with the waveform information stored in the storage unit, have.

본 발명의 한 실시형태에서, 저장부에 특정 명령에 대한 음성 신호에 대응되는 텍스트가 저장되어 있는 경우 명령 판단부는 수신되는 음성 신호를 분석하여 그 수신된 음성 신호에 대응되는 텍스트를 추출하고, 추출된 텍스트와 저장부에 저장된 텍스트를 비교하여 사용자의 명령을 판단할 수 있다. In one embodiment of the present invention, when text corresponding to a voice command for a specific command is stored in the storage unit, the command decider analyzes the received voice signal, extracts a text corresponding to the received voice signal, And compare the text with the text stored in the storage unit to determine the user's command.

본 발명의 한 실시형태에서, 명령 판단부는 수신되는 음성 신호의 파형 특성 또는 음성 신호를 분석하여 추출한 텍스트를 저장부에 저장할 수 있다. In an embodiment of the present invention, the command determination unit may analyze the waveform characteristics or the voice signal of the received voice signal, and store the extracted text in the storage unit.

본 발명의 한 실시형태에서, In one embodiment of the present invention,

본 발명의 한 실시형태에서, 하나 이상의 카메라로 사용자의 눈과 눈동자의 위치를 감지하는 것은 하나 이상의 카메라가 감지하고 있는 사용자의 눈과 눈동자의 위치를 2차원 내지 3차원 좌표값으로 환산하여 사용자의 눈과 눈동자의 위치가 어디에 위치하는 지를 감지하는 것을 의미할 수 있으나, 이에 한정되지는 않는다.In one embodiment of the present invention, sensing the position of the user's eyes and pupils with one or more cameras converts the position of the user's eyes and pupils sensed by one or more cameras into two-dimensional or three-dimensional coordinate values, But is not limited to, sensing where the position of the eye and pupil is located.

본 발명의 한 실시형태에서, 하나 이상의 카메라로 영상과 사용자의 눈과 눈동자의 위치를 감지하는 것은 하나 이상의 카메라가 감지하고 있는 영상과 사용자의 눈과 눈동자의 위치를 2차원 내지 3차원 좌표값으로 환산하여 영상과 사용자의 눈과 눈동자의 위치가 어디에 위치하는 지를 감지하는 것을 의미할 수 있으나, 이에 한정되지는 않는다.In one embodiment of the present invention, sensing the position of the image and the user's eyes and pupils with one or more cameras may include detecting the positions of the images sensed by one or more cameras and the positions of the user's eyes and pupils as two- or three- , But is not limited to, sensing the position of the image and the user ' s eyes and pupils.

본 발명의 한 실시형태에서, 하나 이상의 카메라로 사용자의 눈과 눈동자의 위치를 감지하는 것은 먼저 사용자의 눈의 위치를 판단하고 그 이후, 눈의 위치로부터 눈동자의 위치를 판단하는 순서의 방법을 구비할 수 있다.In one embodiment of the present invention, the method of detecting the position of the user's eyes and the pupil with one or more cameras includes first determining the position of the user's eye, and then determining the position of the pupil from the position of the eye can do.

본 발명의 한 실시형태에서, 디스플레이 영상을 감지하는 것은 디스플레이 영상을 출력하는 판단부(예를들어, CPU, 마이크로프로세서, 등)에서 감지할 수 있다.In an embodiment of the present invention, the sensing of the display image may be detected by a determination unit (e.g., a CPU, a microprocessor, etc.) that outputs the display image.

본 발명의 한 실시형태에서, 사용자의 음성명령은 특정 음성명령에 대한 영상의 변화를 사용자가 별도로 저장부에 저장하여 사용할 수 있으며, 또한 사용자의 음성명령은 예를들어, 영어, 중국어, 일본어, 등으로 설정 저장하여 사용할 수 있다.In one embodiment of the present invention, the voice command of the user can store the change of the image for the specific voice command separately in the storage unit, and the voice command of the user can be used, for example, And the like can be stored and used.

본 발명의 한 실시형태에서, 카메라는 하나 이상의 카메라가 구비되는 것을 의미할 수 있다.......In one embodiment of the present invention, a camera may mean having one or more cameras .......

본 발명의 한 실시형태에서, 디스플레이 제어방법은, In one embodiment of the present invention,

디스플레이가 안경형태의 전자장치에 구비되고, A display is provided in an electronic device in the form of a spectacle,

안경형태의 전자장치에 구비되어 있는 하나 이상의 카메라로 사용자의 눈동자의 위치를 감지 및 안경형태의 전자장치가 사용자의 음성을 인식하여 사용자가 상기 디스플레이를 직시하고 음성으로 명령함으로서 안경형태의 전자장치를 제어하는 것; 을 특징으로 하는 디스플레이 제어방법을 구비한다. A user of the glasses-shaped electronic device recognizes the user's voice, and the user directs the display and instructs the user to voice the electronic device by using one or more cameras provided in the glasses-shaped electronic device to detect the position of the user's eyes. Controlling; And a display control method.

본 발명의 한 실시형태에서, 카메라로 사용자의 눈동자의 위치를 감지하는 방법은In one embodiment of the present invention, a method for detecting the position of a user's pupil with a camera

, 로 구성되는 상기 a 내지 c 중 하나 이상 선택되는 방법을 구비하는 것; 을 특징으로 한다., And a to c, each of which is composed of: .

본 발명의 한 실시형태에서, 디스플레이를 직시하고 음성으로 명령하는 것은 In one embodiment of the present invention, directing the display and commanding it by voice

h. 사용자가 눈동자로 직시하고 음성으로 '정면' 이라고 명령하는 영상을 정면에 위치시키는 정면,h. A front face in which the user faces the eye and places the image that is commanded as " front "

i. 사용자가 눈동자를 직시하고 음성으로 '멈춤' 이라고 명령하는 커서의 움직임을 멈추는 멈춤,i. A stop that stops the movement of the cursor when the user faces the eye and commands 'stop' by voice,

, 로 구성되는 상기 a 내지 i 중 하나 이상 선택되는 것을 구비하는 것; 을 특징으로 한다., And one or more of the above a to i constituted by: .

안경형태의 전자장치를 제어하여 변화된 디스플레이 영상을 구비하는 것; 을 특징으로 한다.Controlling an electronic device in the form of a spectacle to have a changed display image; .

사용자의 눈에서 눈동자가 위치하는 위치를 감지하는 것; 을 특징으로 한다.Detecting the position of the pupil in the user's eyes; .

상기 사용자의 눈동자의 위치가 디스플레이 영상으로부터 일정간격이상 떨어진 상태에서, 눈동자의 위치를 감지하는 것; 을 특징으로 한다.Sensing a position of the pupil in a state where the position of the pupil of the user is separated from the display image by a predetermined distance or more; .

본 발명의 한 실시형태에서, 카메라로 눈동자의 위치를 감지하는 것은In one embodiment of the invention, sensing the position of the pupil with the camera

카메라로 사용자의 눈과 사용자의 눈동자의 위치 및 추가적으로 디스플레이 영상을 더 감지하는 것; 을 특징으로 한다.Further sensing the location of the user's eyes and the user's pupils and additionally the display image with the camera; .

본 발명의 한 실시형태에서, 하나 이상의 카메라는In one embodiment of the invention, one or more cameras

하나 이상의 3차원 카메라를 의미하는 것; 을 특징으로 한다.Means one or more 3D cameras; .

본 발명의 한 실시형태에서, 홀로그래피 영상을 직시하고 음성으로 명령하는 것은 In one embodiment of the present invention, viewing the holographic image and commanding it by voice

안경형태의 전자장치를 제어하여 변화된 홀로그래피 영상을 구비하는 것; 을 특징으로 한다.Controlling an electronic device in the form of a spectacle to provide a changed holographic image; .

카메라로 사용자의 눈과 사용자의 눈동자의 위치 및 추가적으로 홀로그래피 영상을 더 감지하는 것; 을 특징으로 한다.Further sensing the position of the user's eye and the user's pupil with the camera and additionally a holographic image; .

본 발명의 한 실시형태에서, 프로젝터 제어방법은, In one embodiment of the present invention, a projector control method includes:

본 발명의 한 실시형태에서, 프로젝터 영상을 직시하고 음성으로 명령하는 것은 In one embodiment of the present invention, directing the projector image and commanding it by voice

, 로 구성되는 상기 a 내지 i 중 하나 이상 선택되는 것을 구비하는 것; 을특징으로 한다., And one or more of the above a to i constituted by: .

안경형태의 전자장치를 제어하여 변화된 프로젝터 영상을 구비하는 것; 을 특징으로 한다.Controlling the electronic device in the form of a spectacle to have a changed projector image; .

카메라로 사용자의 눈과 사용자의 눈동자의 위치 및 추가적으로 프로젝터 영상을 더 감지하는 것; 을 특징으로 한다.
Further sensing the position of the user's eyes and the user's pupil with the camera and additionally the image of the projector; .

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 일면에서 상세하게 서술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 일면에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있다.Advantages and features of the present invention and methods for accomplishing the same will become apparent with reference to the embodiments described in detail in some detail. However, the present invention is not limited to the embodiments disclosed in the above embodiments, but may be embodied in various forms.

여기서 채용된 용어 및 표현들은 발명의 상세한 설명의 용어로써 사용되나 의미를 제한하는 것은 아니며, 설명되거나 도시된 특징과의 임의의 등가물의 용어나 표현을 제한할 의도는 없다. 다만, 본 발명의 청구된 범위 안에서 다양한 변형들이 가능하다. 그러므로, 본 발명이 몇몇 바람직한 실시예들에 의해 개시되었음에 불구하고 대표적 실시예 및 선택적 특징들, 여기서 개시된 개념의 수정 및 변화가 종래 기술등에 의해 재분류될 수 있다고 이해되어야 하며, 이러한 수정 및 변화들은 첨부된 청구항에 의해 정의된 바와 같이 본 발명의 범위 안에서 고려될 수 있다.The terms and expressions employed herein are used as terms of description of the invention but are not intended to be limiting and are not intended to limit the terms or expressions of any equivalents to the features described or shown. However, various modifications are possible within the scope of the present invention. It is therefore to be understood that, although the present invention has been disclosed by some preferred embodiments, it is to be understood that the exemplary embodiments and optional features, modifications and variations of the concepts disclosed herein may be reclassified by conventional techniques and the like, May be considered within the scope of the invention as defined by the appended claims.

여기서 제공된 특정 실시예는 본 발명의 유용한 실시예의 예시이고, 본 발명이 장치들, 장치 구성요소들, 방법단계들의 많은 변화들을 사용하여 수행되어질 수 있다는 것은 명백하다.It is to be understood that the specific embodiments provided herein are illustrative of useful embodiments of the invention and that the present invention may be practiced using many variations of the devices, device components, method steps.

본 발명의 유용한 실시예는 다양한 선택적 구성 및 절차 구성요소 및 단계들을 포함할 수 있다.Useful embodiments of the invention may include various optional configuration and procedural components and steps.

여기서 치환된 구성요소들이 개시될 때, 그것은 모든 하위 그룹 및 그룹의 모든 개별 멤버들이 각각 개시된 것으로 이해되어야 한다.When substituted components are disclosed herein, it should be understood that all subgroups and all individual members of the group are disclosed herein.

여기서 마쿠쉬 그룹 또는 다른 그룹들이 사용될 때, 상기 그룹의 모든 개별 멤버들 및 모든 조합과 상기 그룹의 가능한 하위 조합은 개시된 범위 안에서 개별적으로 포함된다.When a mask group or other groups are used herein, all individual members and all combinations of the groups and possible sub-combinations of the groups are individually included within the disclosed ranges.

여기서 개시되거나 설명된 구성요소의 구체적인 명칭은 본 발명이 속하는 기술분야의 일반적 기술을 가진자가 같은 구성요소의 물질이나 구성요소의 구체적인 명칭을 다르게 부를 수도 있는 점에서 임의의 예시로서 불려질 수 있다. The specific names of the components disclosed or described herein may be referred to as arbitrary examples insofar as those of ordinary skill in the art to which the invention pertain may denote specific names of materials or components of the same component.

여기서 개시된 설명에 포함된 설명의 범위, 하위 범위, 포함범위 내의 개별 값들은 여기서 청구된 청구항에는 나타나지 않을 수 있다고 이해되어질 수 있다.It is to be understood that individual values within the scope, sub-scope, and scope of the description included in the description disclosed herein may not appear in the claimed claims herein.

본 발명의 한 실시형태에서, 본 발명의 내용은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자의 레벨에서 설명되었다. In one embodiment of the present invention, the contents of the present invention have been described at the level of those skilled in the art.

본 발명의 한 실시형태에서, 범위, 하위 범위, 포함범위로 설명된 본 발명은, 본 발명의 설명의 범위내에서 실현될 수 있다.In one embodiment of the present invention, the present invention, which is described in terms of ranges, subranges, and ranges, can be realized within the scope of the description of the present invention.

본 발명이 속하는 기술분야에서 통상의 지식을 가진자는 본 발명을 실시하기위한 다양한 방법들이 과도한 실험에 기대지 않고도 본 발명의 실시에 채용될 수 있다는 것을 알 수 있을 것이다. 임의의 방법들 및 기능적으로 등가인 알려진 모든 기술들은 본 발명의 한 실시형태에서, 포함되어질 수 있다.Those skilled in the art will appreciate that the various ways of practicing the invention may be employed in the practice of the invention without undue experimentation. Any methods and all known techniques that are functionally equivalent may be included in one embodiment of the present invention.

이상, 본 발명을 상세하게 설명하였으나, 본 발명은 상기 내용에 한정되지 않으며, 여러 가지 하나 이상의 형태로 변형될 수 있으며, 본 발명의 기술적 사상 내에서 당 분야에서 통상의 지식을 가진 자에 의하여 여러 가지 많은 변형이 가능함이 명백하다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but many variations and modifications can be made by one of ordinary skill in the art It is evident that many variations are possible.

또한 적당하게 도식적으로 설명된 본 발명은 임의의 구성요소 또는 구성요소들, 상세하게 개시되지 않은 제한 또는 제한들이 없는 경우에도 실현될 수 있다.Also, the present invention, which is appropriately and diagrammatically illustrated, may be realized without the need of any elements or components, or restrictions or limitations not specifically disclosed.

임의의 방법들의 기능적으로 등가인 알려진 모든 기술들은 본 발명의 실시예에 적용될 수 있다.
All known functional equivalents of any of the methods may be applied to embodiments of the present invention.

100 : 디스플레이 또는 디스플레이부
100A : 디스플레이 영상
110 : 홀로그래피 모듈
110A : 홀로그래피 영상
120 : 프로젝터 모듈
120A : 프로젝터 영상
200A : 카메라 또는 카메라감지부
200B : 카메라 또는 카메라감지부
300 : 음성인식감지부
500 : 안경형태의 전자장치
600 : 얼굴100: display or display section
100A: Display image
110: holography module
110A: holographic image
120: Projector module
120A: Projector video
200A: camera or camera detection unit
200B: camera or camera detection unit
300: Speech recognition detection unit
500: Electronic device in the form of glasses
600: face

Claims

In the display control method,
A display is provided in an electronic device in the form of a spectacle,
A user of the glasses-shaped electronic device recognizes the user's voice, and the user directs the display and instructs the user to voice the electronic device by using one or more cameras provided in the glasses-shaped electronic device to detect the position of the user's eyes. Controlling; of
The display control method comprising:

The method according to claim 1,
A method of detecting the position of a user's pupil with the camera
a. A method of detecting the position of the user's eyes with the camera,
b. A method of detecting the position of a user's iris and a user's pupil with a camera,
c. A method of detecting the position of the user's eyes and the user's eyes with the camera,
, And a to c, each of which is composed of: of
The display control method comprising:

The method according to claim 1,
Directing the display and vocalizing
a. Zooming, which the user faces with a pupil and commands the voice to "zoom out"
b. When the user faces with a pupil and instructs the user to magnify by voice,
c. A click that the user looks at with a pupil and says "click" by voice,
d. A scene change in which the user directs the direction to change the pupil and instructs the user to 'turn' by voice,
e. A drag that moves the image captured by the cursor to a desired position by directing the user to look at the pupil and say 'drag' by voice,
f. Moving the cursor to a desired position by directing the user to look at the eyes and saying 'move' by voice,
g. A pattern in which a user moves a pupil and commands a pattern as a voice,
h. A front face in which the user faces the eye and places the image that is commanded as " front "
i. A stop that stops the movement of the cursor when the user faces the eye and commands 'stop' by voice,
, And one or more of the above a to i constituted by: of
The display control method comprising:

The method according to claim 1,
Controlling the eyeglass-shaped electronic device
Controlling an electronic device in the form of a spectacle to have a changed display image; of
The display control method comprising:

The method according to claim 1,
Detecting the position of the pupil
Detecting the position of the pupil in the user's eyes; of
The display control method comprising:

The method according to claim 1,
Detecting the position of the pupil
Sensing a position of the pupil in a state where the position of the pupil of the user is separated from the display image by a predetermined distance or more; of
The display control method comprising:

The method according to claim 1,
Detecting the position of the pupil with the camera
Further sensing the location of the user's eyes and the user's pupils and additionally the display image with the camera; of
The display control method comprising:

The method according to claim 1,
The one or more cameras
Means one or more 3D cameras; of
The display control method comprising:

In the holography control method,
A holographic image is output to a space in which a spectacle-type electronic device is set,
A user's eyes are detected by one or more cameras provided in a spectacle-type electronic device, and a spectacle-type electronic device recognizes a user's voice so that a user can see a holographic image implemented in the preset space, To control electronic devices in the form of glasses; of
Wherein the holography control method comprises the steps of:

The method of claim 9,
A method of detecting the position of a user's pupil with the camera
a. A method of detecting the position of the user's eyes with the camera,
b. A method of detecting the position of a user's iris and a user's pupil with a camera,
c. A method of detecting the position of the user's eyes and the user's eyes with the camera,
, And a to c, each of which is composed of: of
Wherein the holography control method comprises the steps of:

The method of claim 9,
Viewing the holographic image and instructing it by voice
a. Zooming, which the user faces with a pupil and commands the voice to "zoom out"
b. When the user faces with a pupil and instructs the user to magnify by voice,
c. A click that the user looks at with a pupil and says "click" by voice,
d. A scene change in which the user directs the direction to change the pupil and instructs the user to 'turn' by voice,
e. A drag that moves the image captured by the cursor to a desired position by directing the user to look at the pupil and say 'drag' by voice,
f. Moving the cursor to a desired position by directing the user to look at the eyes and saying 'move' by voice,
g. A pattern in which a user moves a pupil and commands a pattern as a voice,
h. A front face in which the user faces the eye and places the image that is commanded as " front "
i. A stop that stops the movement of the cursor when the user faces the eye and commands 'stop' by voice,
, And one or more of the above a to i constituted by: of
Wherein the holography control method comprises the steps of:

The method of claim 9,
Controlling the eyeglass-shaped electronic device
Controlling an electronic device in the form of a spectacle to provide a changed holographic image; of
Wherein the holography control method comprises the steps of:

The method of claim 9,
Detecting the position of the pupil
Detecting the position of the pupil in the user's eyes; of
Wherein the holography control method comprises the steps of:

The method of claim 9,
Detecting the position of the pupil
Detecting a position of the pupil in a state where the position of the pupil of the user is separated from the holographic image by a predetermined distance or more; of
Wherein the holography control method comprises the steps of:

The method of claim 9,
Detecting the position of the pupil with the camera
Further sensing the position of the user's eye and the user's pupil with the camera and additionally a holographic image; of
Wherein the holography control method comprises the steps of:

The method of claim 9,
The one or more cameras
Means one or more 3D cameras; of
Wherein the holography control method comprises the steps of:

A method of controlling a projector,
The electronic device in the form of a glasses outputs the projector image to the space set from the projector module,
The position of the user's pupil is detected by one or more cameras provided in the eyeglass-shaped electronic device, and the eyeglass-shaped electronic device recognizes the user's voice, so that the user can see the projector image implemented in the preset space, To control electronic devices in the form of glasses; of
Wherein the projector control method comprises:

The method of claim 17,
A method of detecting the position of a user's pupil with the camera
a. A method of detecting the position of the user's eyes with the camera,
b. A method of detecting the position of a user's iris and a user's pupil with a camera,
c. A method of detecting the position of the user's eyes and the user's eyes with the camera,
, And a to c, each of which is composed of: of
Wherein the projector control method comprises:

The method of claim 17,
Directing the projector image and commanding it by voice
a. Zooming, which the user faces with a pupil and commands the voice to "zoom out"
b. When the user faces with a pupil and instructs the user to magnify by voice,
c. A click that the user looks at with a pupil and says "click" by voice,
d. A scene change in which the user directs the direction to change the pupil and instructs the user to 'turn' by voice,
e. A drag that moves the image captured by the cursor to a desired position by directing the user to look at the pupil and say 'drag' by voice,
f. Moving the cursor to a desired position by directing the user to look at the eyes and saying 'move' by voice,
g. A pattern in which a user moves a pupil and commands a pattern as a voice,
h. A front face in which the user faces the eye and places the image that is commanded as " front "
i. A stop that stops the movement of the cursor when the user faces the eye and commands 'stop' by voice,
, And one or more of the above a to i constituted by: of
Wherein the projector control method comprises:

The method of claim 17,
Controlling the eyeglass-shaped electronic device
Controlling the electronic device in the form of a spectacle to have a changed projector image; of
Wherein the projector control method comprises:

The method of claim 17,
Detecting the position of the pupil
Detecting the position of the pupil in the user's eyes; of
Wherein the projector control method comprises:

The method of claim 17,
Detecting the position of the pupil
Detecting a position of the pupil in a state where the position of the pupil of the user is separated from the projector image by a predetermined distance or more; of
Wherein the projector control method comprises:

The method of claim 17,
Detecting the position of the pupil with the camera
Further sensing the position of the user's eyes and the user's pupil with the camera and additionally the image of the projector; of
Wherein the projector control method comprises:

The method of claim 17,
The one or more cameras
Means one or more 3D cameras; of
Wherein the projector control method comprises: