KR102617220B1 - 가상 이미지 디스플레이 장치 - Google Patents

가상 이미지 디스플레이 장치 Download PDF

Info

Publication number
KR102617220B1
KR102617220B1 KR1020190016615A KR20190016615A KR102617220B1 KR 102617220 B1 KR102617220 B1 KR 102617220B1 KR 1020190016615 A KR1020190016615 A KR 1020190016615A KR 20190016615 A KR20190016615 A KR 20190016615A KR 102617220 B1 KR102617220 B1 KR 102617220B1
Authority
KR
South Korea
Prior art keywords
virtual image
brightness
pupil
identifier
color
Prior art date
Application number
KR1020190016615A
Other languages
English (en)
Other versions
KR20200098908A (ko
Inventor
김병인
Original Assignee
동우 화인켐 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 동우 화인켐 주식회사 filed Critical 동우 화인켐 주식회사
Priority to KR1020190016615A priority Critical patent/KR102617220B1/ko
Publication of KR20200098908A publication Critical patent/KR20200098908A/ko
Application granted granted Critical
Publication of KR102617220B1 publication Critical patent/KR102617220B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Geometry (AREA)
  • Processing Or Creating Images (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

가상 이미지 디스플레이 장치는 밝기 식별자에 부합하는 밝기의 가상 이미지를 생성하는 가상 이미지 생성부, 전방 주시가 가능하게 투명 재질로 구성되고 가상 이미지 생성부로터 수신하는 가상 이미지를 디스플레이하는 가상 이미지 표시부, 동공을 촬영하여 동공 이미지를 생성하는 동공 감지부, 동공 크기와 밝기 식별자를 매칭 저장하는 밝기 데이터베이스, 동공 감지부로부터 수신하는 동공 이미지로부터 동공 크기를 산출하고 산출된 동공 크기에 대응하는 밝기 식별자를 밝기 데이터베이스로부터 추출하여 가상 이미지 생성부로 전송하는 가상 이미지 제어부를 구비한다.

Description

가상 이미지 디스플레이 장치{Virtual Image Display}
본 발명은 디스플레이 장치에 관한 것으로, 상세하게는 안경, 고글 등의 가시 투명체에 가상 이미지를 디스플레이하는 가상 이미지 디스플레이 장치에 관한 것이다.
증강 현실(Augmented Reality: AR)은 컴퓨터가 만들어낸 정보를 실제 이미지 등에 결합하여 보여주는, 즉 실제 세계에 3차원 가상 세계를 겹쳐 보여주는 것을 말한다.
증강 현실을 구현하는 장치로는 소위 ‘구글 글라스’로 알려진 안경 타입의 장치가 있는데, 이러한 장치는 두부 장착형 표시장치(head mounted display(HMD) device)로 일반화되어 가고 있다. HMD 장치는 헬멧에 적용되어, 사용자가 지형이나 지물을 보면서 각종 정보를 동시에 볼 수 있게 한다. 또한, 다른 예로서 HUD(Head Up Display)에도 적용되고 있는데, 일례로 차량의 전면 유리에 속도 등의 정보를 표시하는데 사용되고 있다.
특허공개 제2018-0096434호(가상 이미지 표시 방법, 저장 매체 및 이를 위한 전자 장치)는 제1 카메라 모듈, 디스플레이 장치, 이들을 기능적으로 연결하는 프로세서를 포함하여, 프로세서가 디스플레이 장치에 가상 이미지를 표시하는 중에 제1 카메라 모듈에 의해 획득된 이미지에 포함된 눈 크기를 판단하고, 눈 크기에 대응하여 가상 이미지의 투명도, 하이라이트, 크기, 윤곽선 색 등을 변경하는 것을 개시하고 있다.
그런데, 특허공개 제2018-0096434호는 눈의 크기, 즉 눈꺼풀이 눈동자를 덮은 정도를 기초로 가상 이미지를 변경하고 있어, 주변의 밝기 등과 같은 외부 환경에 최적화된 가상 이미지를 사용자에게 제공하지 못하고 있다. 또한, 특허공개 제2018-0096434호는 사용자의 빈번한 눈 깜박임으로 인해 가상 이미지에 불필요한 변경이 가해지는 경우도 발생할 수 있다.
[선행기술문헌] 한국특허공개 제2018-0096434호
본 발명은 이러한 종래기술의 문제점을 해결하기 위한 것으로,
첫째, 주변 밝기를 자동 감지하여 사용자 눈에 최적화된 밝기의 가상 이미지를 디스플레이함으로써 사용자의 눈 피로를 최소화하고,
둘째, 가상 이미지로 인해 전방 시야가 방해되지 않도록 하여 안전 사고를 방지할 수 있는, 가상 이미지 디스플레이 장치를 제공하고자 한다.
이러한 목적을 달성하기 위한 본 발명의 가상 이미지 디스플레이 장치는 가상 이미지 생성부, 가상 이미지 표시부, 동공 감지부, 밝기 데이터베이스, 가상 이미지 제어부 등을 포함하여 구성할 수 있다.
가상 이미지 생성부는 밝기 식별자에 부합하는 밝기의 가상 이미지를 생성할 수 있다.
가상 이미지 표시부는 전방 주시가 가능한 투명 재질로 구성하고 가상 이미지 생성부로터 수신하는 가상 이미지를 디스플레이할 수 있다.
동공 감지부는 동공을 촬영하여 동공 이미지를 생성할 수 있다.
밝기 데이터베이스는 동공 크기와 밝기 식별자를 매칭하여 저장할 수 있다.
가상 이미지 제어부는 동공 감지부로부터 수신하는 동공 이미지로부터 동공 크기를 산출하고, 산출된 동공 크기에 대응하는 밝기 식별자를 밝기 데이터베이스로부터 추출하여 가상 이미지 생성부로 전송할 수 있다.
본 발명의 가상 이미지 디스플레이 장치에서, 동공 감지부는 카메라 모듈일 수 있다. 카메라 모듈은 양쪽 눈에 대응하여 2개를 구비할 수 있다. 이 경우, 가상 이미지 제어부는 2개 카메라 모듈로부터 수신하는 2개 동공 이미지로부터 평균 동공 크기를 산출할 수 있다.
본 발명의 가상 이미지 디스플레이 장치에서, 가상 이미지 제어부는, 산출 동공 크기와 이전 동공 크기를 비교하여 동공 크기가 변화한 경우, 밝기 식별자를 가상 이미지 생성부로 전송할 수 있다.
본 발명의 가상 이미지 디스플레이 장치는 동공 크기와 색상 신호를 매칭 저장하는 색상 데이터베이스를 포함할 수 있다. 이 경우, 가상 이미지 제어부는 동공 크기에 대응하는 색상 신호를 색상 데이터베이스로부터 추출하여 가상 이미지 생성부로 전송할 수 있다. 가상 이미지 생성부는 수신한 색상 신호에 부합하는 색상의 가상 이미지를 생성하여 가상 이미지 표시부로 전송할 수 있다.
본 발명의 가상 이미지 디스플레이 장치에서, 색상 신호는 흑백 모드를 포함할 수 있다.
본 발명의 가상 이미지 디스플레이 장치에서, 색상 데이터베이스는 객체 식별자와 색상 식별자를 매칭 저장할 수 있다. 이 경우, 색상 신호는 객체 식별자와 색상 식별자를 포함할 수 있다.
본 발명의 가상 이미지 디스플레이 장치는 동공 크기와 표시 방식을 매칭 저장하는 표시방식 데이터베이스를 포함할 수 있다. 이 경우, 가상 이미지 제어부는 동공 크기에 대응하는 표시 방식을 표시방식 데이터베이스로부터 추출하여 가상 이미지 생성부로 전송할 수 있다. 가상 이미지 생성부는 수신한 표시 방식에 부합되게 가상 이미지를 생성하여 가상 이미지 표시부로 전송할 수 있다.
본 발명의 가상 이미지 디스플레이 장치에서, 표시 방식은 면적을 갖는 객체의 윤곽을 표시하는 외곽선 표시를 포함할 수 있다.
본 발명의 가상 이미지 디스플레이 장치에서, 표시방식 데이터베이스는 객체 식별자와 표시 방식을 매칭 저장할 수 있다. 이 경우, 가상 이미지 제어부는 동공 크기에 매칭되는 객체 식별자, 표시 방식을 표시방식 데이터베이스로부터 추출하여 가상 이미지 생성부로 전송하고, 가상 이미지 생성부는 객체 식별자에 대응하는 객체를 표시 방식에 부합하게 가상 이미지를 생성하여 가상 이미지 표시부로 전송할 수 있다.
본 발명의 가상 이미지 디스플레이 장치는 객체 식별자와 표시 방식을 매칭 저장하는 표시방식 데이터베이스와 객체 식별자와 색상 식별자를 매칭 저장하는 색상 데이터베이스를 포함할 수 있다. 이 경우, 가상 이미지 제어부는 객체 식별자, 표시방식, 색상 식별자를 표시방식 데이터베이스와 색상 데이터베이스로부터 추출하여 가상 이미지 생성부로 전송할 수 있다. 가상 이미지 생성부는 객체 식별자에 대응하는 객체를 색상 식별자에 대응하는 색상으로 가상 이미지를 생성하여 가상 이미지 표시부로 전송할 수 있다.
이러한 구성을 갖는 본 발명의 디스플레이 장치에 의하면, 주변 밝기를 정확하고 신속하게 반영하는 동공의 크기를 기초로 주변 밝기를 측정하고, 이에 기초하여 가상 이미지의 밝기를 실시간으로 변경함으로써, 사용자의 눈 피로를 최소화할 수 있을 뿐 아니라 가상 이미지의 부적절한 밝기로 인한 안전 사고도 방지할 수 있다.
또한, 본 발명의 디스플레이 장치에 의하면, 주변 밝기가 급격히 낮아져 가상 이미지에서 색상 구별력이 상실되는 경우에는 가상 이미지에서 색상을 제거하여 불필요한 색상 디스플레이를 차단할 수 있고, 또한 건물 등과 같은 면적을 갖는 객체의 경우에는 윤곽만 추출하여 디스플레이함으로써 어두운 주변 환경에서 가상 이미지로 인해 사용자의 전방 시야가 방해되는 것을 최소화할 수 있다.
도 1은 본 발명에 따른 가상 이미지 디스플레이 장치를 안경 형태로 구현한 예를 도시하고 있다.
도 2a,2b는 본 발명에 따른 가상 이미지 디스플레이 장치에서 가상 이미지의 밝기를 변경하는 예를 도시하고 있다.
도 3a,3b는 본 발명에 따른 가상 이미지 디스플레이 장치에서 가상 이미지의 밝기와 색상을 변경하는 예를 도시하고 있다.
도 4a,4b는 본 발명에 따른 가상 이미지 디스플레이 장치에서 가상 이미지의 밝기와 표시방식을 변경하는 예를 도시하고 있다.
이하, 첨부도면을 참조하여 본 발명을 상세히 설명한다.
도 1은 본 발명에 따른 가상 이미지 디스플레이 장치를 안경 형태로 구현한 예를 도시하고 있다.
도 1에 도시한 바와 같이, 본 발명의 가상 이미지 디스플레이 장치는 프레임(100), 가상 이미지 생성부(200), 가상 이미지 표시부(300), 동공 감지부(400), 가상 이미지 제어부(500) 등을 포함하여 구성할 수 있다.
프레임(100)은 안경, 고글, 헬멜 등으로 구성할 수 있는데, 도 1과 같이 안경 형태로 구성하는 경우에는 프레임 본체(110), 귀 고정부(120), 전방 윈도우(130) 등을 포함할 수 있다.
프레임 본체(110)는 안경테와 같이 머리를 전방에서 후방으로 감싸는 형태일 수 있다. 프레임 본체(110)는 가상 이미지 생성부(200), 가상 이미지 표시부(300), 동공 감지부(400), 가상 이미지 제어부(500) 등을 결합하여 지지하거나, 가상 이미지 표시부(300)와 동공 감지부(400)만 결합하여 지지하고 외부의 가상 이미지 생성부(200), 가상 이미지 제어부(500)와 무선 송수신하는 형태로 구성할 수도 있다. 프레임 본체(110)는 일측에 전원 버튼, 제어 버튼 등을 구비할 수 있다.
귀 고정부(120)는 프레임 본체(110)의 후방 단부에 하방으로 절곡되는 고리 형태로 구성할 수 있다.
전방 윈도우(130)는 좌안 윈도우와 우안 윈도우를 포함할 수 있다. 전방 윈도우(130)는 전방 주시가 가능한 투명 재질의 유리, 플라스틱으로 구성할 수 있다. 전방 윈도우(130)는 이미지 표시부(300)를 내장 또는 결합할 수 있다.
가상 이미지 생성부(200)는 가상 이미지를 생성하여 가상 이미지 표시부(300)로 전송할 수 있다. 가상 이미지 생성부(200)는 이미지 데이터베이스로부터 가상 이미지를 추출할 수 있다.
가상 이미지 생성부(200)는, 가상 이미지 제어부(500)로부터 밝기 식별자를 수신하면, 가상 이미지의 밝기를 밝기 식별자에 부합하게 변경할 수 있다.
가상 이미지 생성부(200)는, 가상 이미지 제어부(500)로부터 색상 신호를 수신하면, 수신한 색상 신호에 따라 가상 이미지의 색상을 변경할 수 있다. 색상 신호는 흑백 모드, 칼라 모드 등을 포함할 수 있다. 예를들어, 가상 이미지 생성부(200)가, 흑백 모드를 수신하면, 가상 이미지를 칼라 모드에서 흑백 모드로 변경할 수 있다. 색상 정보는 청색, 황색 등의 색상 식별자를 포함할 수 있다. 색상 식별자를 수신할 때, 가상 이미지 내의 객체를 나타내는 객체 식별자를 포함할 수 있다. 이 경우, 객체 식별자에 대응하는 객체를 색상 식별자의 색상으로 변경할 수 있다.
가상 이미지 생성부(200)는, 가상 이미지 제어부(500)로부터 표시 방식을 수신하면, 수신한 표시 방식에 따라 가상 이미지를 변경할 수 있다. 표시 방식은 외곽선 표시를 포함할 수 있다. 가상 이미지 생성부(200)가, 외곽선 표시를 수신하면, 가상 이미지에서 면적을 갖는 객체, 예를들어 건물, 옷, 자동차 등의 윤곽만 확인할 수 있도록 해당 객체의 외곽선만 디스플레이할 수 있다.
가상 이미지 생성부(200)는, 외곽선 표시와 객체 식별자를 함께 수신할 수 있는데, 이 경우에는 수신한 객체 식별자에 해당하는 객체만을 외곽선으로 디스플레이할 수 있다.
가상 이미지 생성부(200)는, 외곽선 표시, 객체 식별자, 색상 식별자를 함께 수신할 수 있는데, 이 경우에는 수신한 객체 식별자에 해당하는 객체만을 외곽선으로 표시하면서 외곽선을 색상 식별자에 대응하는 색상으로 디스플레이할 수 있다. 예를들어, 면적을 갖는 기호, 문자의 경우, 내부를 제거하고 외곽선만을 특정 색상으로 디스플레이할 수 있다.
이와 같이, 가상 이미지 생성부(200)는, 면적을 갖는 객체를 외곽선만으로 디스플레이하거나 특정 색상으로 디스플레이함으로써, 전방 윈도우(130)을 통한 사용자의 전방 시야를 최대한 확보할 수 있고, 그 결과 가상 이미지 표시부(300)에 디스플레이되는 가상 이미지로 인해 시야가 가려져 발생하는 안전사고를 방지 내지 최소화할 수 있다.
가상 이미지 표시부(300)는 가상 이미지 생성부(200)로터 수신하는 가상 이미지를 디스플레이하는 것으로, 전방 윈도우(130)에 구비할 수 있다.
동공 감지부(400)는 사용자의 동공을 촬영하는 것으로, 프레임 본체(110)의 전방이나 전방 윈도우(130)에 구비할 수 있다.
동공 감지부(400)는 카메라 모듈일 수 있다. 카메라 모듈은 양쪽 눈의 동공을 개별 감지할 수 있도록 2개, 즉 좌안과 우안과 대향하는 위치에 각각 구비할 수 있다.
동공 감지부(400)는 동공을 연속 또는 비연속적으로 촬영하여 동공 이미지를 가상 이미지 제어부(500)로 전송할 수 있다. 동공 감지부(400)는 하나 이상의 이미지 센서, 렌즈, 이미지 시그널 프로세서(ISP) 등을 포함할 수 있다.
가상 이미지 제어부(500)는 동공 감지부(400)로부터 동공 이미지를 수신하여 동공 크기를 산출할 수 있다. 가상 이미지 제어부(500)는, 2개의 동공 이미지를 수신하면, 각 동공 이미지로부터 산출한 2개 동공 크기를 평균하여 동공 크기를 산출할 수 있다.
가상 이미지 제어부(500)는 동공 크기에 대응하는 밝기 식별자를 밝기 데이터베이스로부터 추출하여 가상 이미지 생성부(200)로 전송할 수 있다. 밝기 데이터베이스는 동공 크기와 밝기 식별자를 매칭하여 저장할 수 있다.
가상 이미지 제어부(500)는 동공 크기에 대응하는 색상 신호를 색상 데이터베이스로부터 추출하여 가상 이미지 생성부(200)로 전송할 수 있다. 색상 데이터베이스는 동공 크기와 색상 신호를 매칭하여 저장할 수 있다. 예를들어, 동공 크기가 일정 크기 이상으로 커지면, 터널속, 밤 등과 같이 주변 환경(외부)의 밝기가 일정 조도 이하로 떨어진 것으로 판단할 수 있는데, 이 경우에는 사용자가 가상 이미지에서 색상을 구별하기가 어려울 수 있으므로, 가상 이미지를 흑백 모드로 디스플레이해도 무방하거나 오히려 바람직할 수 있다. 이 때, 가상 이미지 제어부(500)는 색상 데이터베이스로부터 흑백 모드의 색상 모드 식별자를 추출하여 가상 이미지 생성부(200)로 전송할 수 있다.
가상 이미지 제어부(500)는, 가상 이미지 내의 객체를 개별 색상으로 디스플레이할 수 있는데, 이 경우에는 색상 데이터베이스로부터 객체 식별자와 색상 식별자를 추출하여 가상 이미지 생성부(200)로 전송할 수 있다.
가상 이미지 제어부(500)는 동공 크기에 대응하는 표시 방식을 표시방식 데이터베이스로부터 추출하여 가상 이미지 생성부(200)로 전송할 수 있다. 표시방식 데이터베이스는 동공 크기와 표시 방식을 매칭하여 저장할 수 있다. 예를들어, 동공 크기가 일정 크기 이상으로 커지면 주변 환경(외부)의 밝기가 일정 조도 이하로 떨어진 것으로 판단할 수 있고, 이 경우에는 사용자가 투명한 전방 윈도우(130)를 통해서도 전방 주시가 어려운 상황일 수 있다. 이 때, 가상 이미지에 면적을 갖는 객체가 디스플레이되면 사용자의 전방 주시 능력이 급격히 떨어질 수 있다. 따라서, 이러한 경우에는 가상 이미지 내의 객체, 특히 면적을 갖는 객체를 윤곽만 확인할 수 있게 변경하는 것이 바람직할 수 있다. 이와 같이, 가상 이미지 제어부(500)는 외곽선 표시와 같은 표시 방식을 가상 이미지 생성부(200)로 전송할 수 있다.
가상 이미지 제어부(500)는, 외곽선 표시를 전송할 때, 객체 식별자를 함께 전송하여, 해당 객체만을 외곽선으로 디스플레이하게 할 수 있다. 나아가, 가상 이미지 제어부(500)는 외곽선 표시, 객체 식별자 외에 색상 식별자도 함께 전송하여, 해당 객체만을 외곽선으로 표시하되 외곽선 색상을 색상 식별자에 대응하는 색상으로 디스플레이하게 할 수 있다.
도 2a,2b는 본 발명에 따른 가상 이미지 디스플레이 장치에서 가상 이미지의 밝기를 변경하는 예를 도시하고 있다.
도 2a에 도시한 바와 같이, 본 발명의 가상 이미지 디스플레이 장치는 가상 이미지 생성부(200), 가상 이미지 표시부(300), 동공 감지부(400), 가상 이미지 제어부(500), 밝기 데이터베이스(510) 등으로 구성할 수 있다.
도 2b에 도시한 바와 같이, 가상 이미지 생성부(200)는 가상 이미지를 생성하여 가상 이미지 표시부(300)로 전송하고, 가상 이미지 표시부(300)는 수신한 가상 이미지를 디플레이할 수 있다(S10).
가상 이미지가 디스플레이하는 중에, 동공 감지부(400)는 동공을 연속 또는 비연속적으로 촬영하여 가상 이미지 제어부(500)로 동공 이미지를 전송할 수 있다(S20).
가상 이미지 제어부(500)는 동공 감지부(400)로부터 수신한 동공 이미지에서 동공의 크기를 산출할 수 있다. 2개의 동공 이미지를 수신하면, 2개의 동공 크기를 평균한 것을 동공 크기로 할 수 있다.
가상 이미지 제어부(500)는 산출한 동공 크기에 대응하는 밝기 식별자를 밝기 데이터베이스로부터 추출하여 가상 이미지 생성부(200)로 전송할 수 있다.
가상 이미지 제어부(500)는, 새로 수신한 동공 이미지의 동공 크기와 이전 동공 크기를 비교하여, 동공 크기가 변하였는지를 판단하고, 동공 크기가 변한 경우에만 추출한 밝기 식별자를 가상 이미지 생성부(200)로 전송하도록 구성할 수 있다(S30).
가상 이미지 생성부(200)는 가상 이미지 제어부(500)로부터 수신하는 밝기 식별자에 부합되게 가상 이미지의 밝기를 변경할 수 있다(S40).
가상 이미지 표시부(300)는 밝기가 변경된 가상 이미지를 가상 이미지 생성부(200)로부터 수신하여 디스플레이할 수 있다.
도 3a,3b는 본 발명에 따른 가상 이미지 디스플레이 장치에서 가상 이미지의 밝기와 색상을 변경하는 예를 도시하고 있다.
도 3a에 도시한 바와 같이, 본 발명의 가상 이미지 디스플레이 장치는 도 2a의 구성에 색상 데이터베이스(520)를 추가하여 구성할 수 있다.
도 3b에 도시한 바와 같이, 단계(S31)에서, 가상 이미지 제어부(500)는 동공 크기에 대응하는 밝기 식별자와 색상 신호를 밝기 데이터베이스(510)와 색상 데이터베이스(520)로부터 각각 추출하여, 밝기 식별자와 색상 신호를 가상 이미지 생성부(200)로 전송할 수 있다. 여기서, 색상 신호는 흑백 모드, 객체 식별자, 색상 식별자 등을 포함할 수 있다.
단계(S41)에서, 가상 이미지 생성부(200)는 수신한 밝기 식별자와 색상 신호에 따라 가상 이미지를 변경하여 가상 이미지 표시부(300)로 전송할 수 있다. 변경된 가상 이미지는 흑백 가상 이미지, 특정 객체의 색상을 변경한 가상 이미지 등일 수 있다.
단계(S11)에서, 이미지 표시부(300)는 가상 이미지 생성부(200)로부터 수신하는 변경된 가상 이미지를 디스플레이할 수 있다.
도 4a,4b는 본 발명에 따른 가상 이미지 디스플레이 장치에서 가상 이미지의 밝기와 표시방식을 변경하는 예를 도시하고 있다.
도 4a에 도시한 바와 같이, 본 발명의 가상 이미지 디스플레이 장치는 도 2a의 구성에 표시방식 데이터베이스(530)를 추가하여 구성할 수 있다.
도 4b에 도시한 바와 같이, 단계(S32)에서, 가상 이미지 제어부(500)는 동공 크기에 대응하는 밝기 식별자와 표시 방식을 밝기 데이터베이스(510)와 표시방식 데이터베이스(530)로부터 각각 추출하여 가상 이미지 생성부(200)로 전송할 수 있다. 여기서, 표시 방식은 외곽선 표시 등을 포함할 수 있다.
단계(S42)에서, 가상 이미지 생성부(200)는 수신한 밝기 식별자와 표시 방식에 부합하게 가상 이미지를 변경하여 가상 이미지 표시부(300)로 전송할 수 있다. 변경된 가상 이미지는 객체들을 윤곽선만으로 나타낸 가상 이미지, 특정 객체만 외곽선으로 나타낸 가상 이미지 등일 수 있다.
단계(S12)에서, 이미지 표시부(300)는 가상 이미지 생성부(200)로부터 수신하는 변경된 가상 이미지를 디스플레이할 수 있다.
도 4a에서, 본 발명의 가상 이미지 디스플레이 장치가 표시방식 데이터베이스(530)와 함께 색상 데이터베이스(520)도 구비하는 경우, 도 4b는 도 3b에서 설명한 가상 이미지의 색상 변경 과정도 함께 수행할 수 있다.
이상에서 설명한 실시예는 본 발명을 예증하기 위한 것이다. 이러한 실시예는 다른 형태로 변형되거나 수정될 수 있을 것이다. 그러나, 본 발명의 권리범위는 아래의 특허청구범위에 의해 정해지므로, 그러한 변형이나 수정이 본 발명의 권리범위에 포함되는 것으로 해석될 수 있다.
100 : 프레임 110 : 프레임 본체
120 : 귀 고정부 130 : 전방 윈도우
200 : 가상 이미지 생성부 300 : 가상 이미지 표시부
400 : 동공 감지부 500 : 가상 이미지 제어부
510 : 밝기 데이터베이스 520 : 색상 데이터베이스
530 : 표시방식 데이터베이스

Claims (11)

  1. 삭제
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 밝기 식별자에 부합하는 밝기의 가상 이미지를 생성하는 가상 이미지 생성부;
    전방 주시가 가능한 투명 재질로 구성되고, 상기 가상 이미지 생성부로터 수신하는 가상 이미지를 디스플레이하는 가상 이미지 표시부;
    주변 밝기에 따라 변화하는 동공을 연속 또는 비연속적으로 촬영하여 동공 이미지를 생성하는 동공 감지부;
    주변 밝기에 따라 변화하는 동공 크기와 밝기 식별자를 매칭 저장하는 밝기 데이터베이스;
    상기 동공 감지부로부터 수신하는 동공 이미지로부터 주변 밝기에 따라 변화하는 동공 크기를 산출하고, 상기 산출된 동공 크기에 대응하는 밝기 식별자를 상기 밝기 데이터베이스로부터 추출하여 상기 가상 이미지 생성부로 전송하는 가상 이미지 제어부;
    주변 밝기에 따라 변화하는 동공 크기와 표시 방식을 매칭 저장하는 표시방식 데이터베이스를 포함하고,
    상기 가상 이미지 제어부는 상기 산출된 동공 크기에 대응하는 표시 방식을 상기 표시방식 데이터베이스로부터 추출하여 상기 가상 이미지 생성부로 전송하고,
    상기 가상 이미지 생성부는 상기 표시 방식에 부합하는 가상 이미지를 생성하여 상기 가상 이미지 표시부로 전송하는, 가상 이미지 디스플레이 장치.
  9. 제8항에 있어서, 상기 표시 방식은
    면적을 갖는 객체의 윤곽을 표시하는 외곽선 표시를 포함하는, 가상 이미지 디스플레이 장치.
  10. 제8항에 있어서,
    상기 표시방식 데이터베이스는 객체 식별자와 표시 방식을 매칭 저장하고,
    상기 가상 이미지 제어부는 상기 동공 크기에 매칭되는 객체 식별자, 표시 방식을 상기 표시방식 데이터베이스로부터 추출하여 상기 가상 이미지 생성부로 전송하고,
    상기 가상 이미지 생성부는 상기 객체 식별자에 대응하는 객체를 상기 표시 방식으로 가상 이미지를 생성하여 상기 가상 이미지 표시부로 전송하는, 가상 이미지 디스플레이 장치.
  11. 제10항에 있어서,
    객체 식별자와 색상 식별자를 매칭 저장하는 색상 데이터베이스를 포함하고,
    상기 가상 이미지 제어부는 상기 객체 식별자와 색상 식별자를 상기 색상 데이터베이스로부터 추출하여 상기 가상 이미지 생성부로 전송하고,
    상기 가상 이미지 생성부는 상기 객체 식별자에 대응하는 객체를 상기 색상 식별자에 대응하는 색상으로 가상 이미지를 생성하여 상기 가상 이미지 표시부로 전송하는, 가상 이미지 디스플레이 장치.
KR1020190016615A 2019-02-13 2019-02-13 가상 이미지 디스플레이 장치 KR102617220B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190016615A KR102617220B1 (ko) 2019-02-13 2019-02-13 가상 이미지 디스플레이 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190016615A KR102617220B1 (ko) 2019-02-13 2019-02-13 가상 이미지 디스플레이 장치

Publications (2)

Publication Number Publication Date
KR20200098908A KR20200098908A (ko) 2020-08-21
KR102617220B1 true KR102617220B1 (ko) 2023-12-21

Family

ID=72235710

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190016615A KR102617220B1 (ko) 2019-02-13 2019-02-13 가상 이미지 디스플레이 장치

Country Status (1)

Country Link
KR (1) KR102617220B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220091160A (ko) 2020-12-23 2022-06-30 삼성전자주식회사 증강 현실 디바이스 및 그 동작 방법
KR20220104576A (ko) * 2021-01-18 2022-07-26 삼성전자주식회사 소형 카메라를 포함하는 웨어러블 전자 장치
KR20220137428A (ko) * 2021-04-02 2022-10-12 삼성전자주식회사 전자 장치 및 그 동작 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170025091A1 (en) * 2015-02-17 2017-01-26 Osterhout Group, Inc. See-through computer display systems
JP2017097098A (ja) 2015-11-20 2017-06-01 株式会社リコー 透過型映像表示装置
JP2017161759A (ja) * 2016-03-10 2017-09-14 富士通株式会社 網膜投影型表示装置、画像表示方法、及びプログラム
WO2018183005A1 (en) 2017-03-31 2018-10-04 Sony Interactive Entertainment LLC Quantifying user engagement using pupil size measurements

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102544062B1 (ko) * 2017-02-21 2023-06-16 삼성전자주식회사 가상 이미지 표시 방법, 저장 매체 및 이를 위한 전자 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170025091A1 (en) * 2015-02-17 2017-01-26 Osterhout Group, Inc. See-through computer display systems
JP2017097098A (ja) 2015-11-20 2017-06-01 株式会社リコー 透過型映像表示装置
JP2017161759A (ja) * 2016-03-10 2017-09-14 富士通株式会社 網膜投影型表示装置、画像表示方法、及びプログラム
WO2018183005A1 (en) 2017-03-31 2018-10-04 Sony Interactive Entertainment LLC Quantifying user engagement using pupil size measurements

Also Published As

Publication number Publication date
KR20200098908A (ko) 2020-08-21

Similar Documents

Publication Publication Date Title
KR102617220B1 (ko) 가상 이미지 디스플레이 장치
CN112130329B (zh) 头部佩戴型显示装置以及头部佩戴型显示装置的控制方法
US9823473B2 (en) Head-mounted display device and control method for head-mounted display device
CN107852474B (zh) 头戴式显示器
CN110708533B (zh) 基于增强现实的视觉辅助方法及智能穿戴设备
US11792500B2 (en) Eyewear determining facial expressions using muscle sensors
US11134238B2 (en) Goggle type display device, eye gaze detection method, and eye gaze detection system
US11575877B2 (en) Utilizing dual cameras for continuous camera capture
US9846305B2 (en) Head mounted display, method for controlling head mounted display, and computer program
US20210035533A1 (en) Display device and display method
US20160264051A1 (en) Night Driving System and Method
JP7388349B2 (ja) 情報処理装置、情報処理方法、及びプログラム
JP6669053B2 (ja) ヘッドアップディスプレイシステム
US11774764B2 (en) Digital glasses having display vision enhancement
CN109791294B (zh) 用于运行具有数据眼镜的显示系统的方法和设备
US11619819B2 (en) Eyewear display for generating an immersive image
US11933977B2 (en) Eyewear eye-tracking using optical waveguide
US11852500B1 (en) Navigation assistance for the visually impaired
KR20200098909A (ko) 가상 이미지 디스플레이 장치
CN210745404U (zh) 一种穿戴式视觉显示装置
CN109683707A (zh) 一种使ar眼镜投影颜色自适应的方法及系统
US11875530B2 (en) Image display system and image controller
JP2022113973A (ja) 表示方法、表示装置、及び、プログラム
KR20160083537A (ko) 카메라, 디스플레이 장치 및 영상 처리 기법을 이용한 정보 전달 장치

Legal Events

Date Code Title Description
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant