KR20220074643A - 슬림형 xr 디바이스 및 그 제어 방법 - Google Patents

슬림형 xr 디바이스 및 그 제어 방법 Download PDF

Info

Publication number
KR20220074643A
KR20220074643A KR1020200163376A KR20200163376A KR20220074643A KR 20220074643 A KR20220074643 A KR 20220074643A KR 1020200163376 A KR1020200163376 A KR 1020200163376A KR 20200163376 A KR20200163376 A KR 20200163376A KR 20220074643 A KR20220074643 A KR 20220074643A
Authority
KR
South Korea
Prior art keywords
mode
slim
user
screen
display
Prior art date
Application number
KR1020200163376A
Other languages
English (en)
Inventor
윤홍수
신호동
심승보
김경진
Original Assignee
가온미디어 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 가온미디어 주식회사 filed Critical 가온미디어 주식회사
Priority to KR1020200163376A priority Critical patent/KR20220074643A/ko
Priority to PCT/KR2020/017208 priority patent/WO2022114305A1/ko
Publication of KR20220074643A publication Critical patent/KR20220074643A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 유저의 두상에 착용하는 XR 디바이스을 슬림형으로 제작하는 기술로서, 각종 센서나 복수의 제어칩들이 연결되는 PCB 부재를 사용자의 안면에 배치되는 XR 디바이스의 전면에 얇은 막 형태로 탑재함에 따라 그 PCB 부재가 각종 센서나 복수의 제어칩들과의 접속을 위한 인터페이스를 용이하게 하면서도 해당 XR 디바이스의 두께를 기존에 비해 슬림하게 제작할 수 있도록 하는 기술이다. 본 발명에 따르면, 프레임전방 부재의 전면에 얇은 막 형태로 탑재되는 PCB 부재를 구비함에 따라 그 PCB 부재에 접속되는 각종 칩의 위치 선택이 자유롭기 때문에 XR 디바이스의 디자인을 효과적으로 개선시킬 수 있다는 장점이 있다.

Description

슬림형 XR 디바이스 및 그 제어 방법 {slim type XR device, and method of controlling for the same}
본 발명은 유저의 두상에 착용하는 XR 디바이스을 슬림형으로 제작하는 기술에 관한 것이다.
더욱 상세하게는, 본 발명은 각종 센서나 복수의 제어칩들이 연결되는 PCB 부재를 사용자의 안면에 배치되는 XR 디바이스의 전면에 얇은 막 형태로 탑재함에 따라 그 PCB 부재가 각종 센서나 복수의 제어칩들과의 접속을 위한 인터페이스를 용이하게 하면서도 해당 XR 디바이스의 두께를 기존에 비해 슬림하게 제작할 수 있도록 하는 기술이다.
가상현실(VR; Virtual Reality) 기술은 화면이나 렌즈를 통해 구현되는 객체나 배경 등을 가상으로 만들어진 컴퓨터그래픽(CG; Computer Graphic) 영상으로만 제공한다.
그리고, 증강현실(AR; Augmented Reality) 기술은 실제 영상에 대해 가상으로 만들어진 컴퓨터그래픽 영상을 더하여 함께 제공한다.
또한, 혼합현실(MR; Mixed Reality) 기술은 현실 세계에 대해 가상으로 만들어진 컴퓨터그랙픽 영상을 독립적으로 결합시키거나 믹싱하여 제공하는 컴퓨터그래픽 기술이다.
여기서, 위에 언급한 VR, AR, MR 등을 모두 간단히 확장현실(XR; extended reality) 기술로 지칭하기도 한다.
AR 기술은 실제 영상에 대해 가상의 디지털 이미지를 입히는 방식이다. 또한, MR 기술은 현실 세계에 대해 가상의 디지털 이미지를 입히는 방식으로서 유저의 눈으로 현실 세계를 볼 수 있다는 점에서 눈을 가린 채 가상의 컴퓨터그래픽 영상만 보여주는 VR 기술과는 다르다.
또한, 실내에서만 쓸 수 있는 VR 기기 및 AR 기기와 달리 MR 기기는 안경처럼 착용한 상태로 현실 세계를 걸어다니면서 사용할 수가 있으므로 그 쓰임새(예: 대테러 진압작전, 화재 진압작전 등)가 훨씬 다양하다.
그런데, VR 기기, AR 기기, MR 기기를 통칭하는 XR 디바이스는 사용 목적에 따라 기본적으로 복수의 제어칩들이 탑재된 쪽 보드(예: PCB)를 구비하여야만 한다.
그 결과, 기존의 XR 디바이스는 복수의 제어칩들이 탑재된 쪽 보드를 구비하여야만 하기 때문에 유저의 안면에 착용된 상태에서 전후방으로의 디바이스 두께와 상하좌우 방향으로의 넓은 디바이스 규격을 줄이는 데에 한계가 있음은 물론 디바이스의 유려한 디자인을 고려하는 데에도 한계가 있었다.
그에 따라, 복수의 제어칩들이 탑재되는 복수의 기존 쪽 보드를 배제하고 얇은 막 형태의 PCB 부재를 XR 디바이스의 전면에 배치하여 해당 디바이스의 두께와 사이즈를 획기적으로 줄임에 따라 상기와 같은 종래기술의 문제점을 해결할 수 있는 기술 구현이 요구된다.
본 발명은 상기한 점을 감안하여 제안된 것으로, 본 발명의 목적은 유저의 두상에 착용하는 XR 디바이스를 슬림형으로 구현한 슬림형 XR 디바이스 및 그 제어 방법을 제공함에 있다.
또한, 본 발명의 목적은 XR 디바이스를 착용한 유저의 활동성을 향상시킬 수 있는 슬림형 XR 디바이스 및 그 제어 방법을 제공함에 있다.
상기의 목적을 달성하기 위하여 본 발명에 따른 슬림형 XR 디바이스는 사용자의 눈 쪽에 배치되어 사용자의 시야를 가이드하는 하나이상의 렌즈 부재(110); 렌즈 부재에 정보를 표시하는 디스플레이 부재; 하나이상의 렌즈 부재의 테두리를 감싸는 형태로 렌즈 부재를 고정하는 프레임전방 부재(130); 프레임전방 부재의 양측에 고정된 상태로 후방으로 연장됨에 따라 프레임전방 부재와 협동으로 렌즈 부재를 사용자의 안면에 거치시키는 하나이상의 프레임측방 부재(140); 프레임전방 부재의 전면에 얇은 막 형태로 배치되며 디스플레이 부재와 접속되어 디스플레이 부재의 동작을 제어하는 PCB 부재(150);를 포함하여 구성될 수 있다.
여기서, 렌즈 부재는 사용자의 육안으로 투시가 가능한 투명 재질로 이루어지고, 디스플레이 부재는 MR 표시 부재로서 외부의 제어로 동작하여 렌즈 부재의 일부 영역에 MR 정보를 표시하도록 구성될 수 있다.
한편, 디스플레이 부재는 VR 표시 부재로서 외부의 제어로 동작하여 렌즈 부재에 VR 정보를 표시하도록 구성될 수도 있다. 이때, 렌즈 부재는 사용자의 육안 투시를 차단하는 불투명 재질로 이루어짐이 바람직하다.
다른 한편, 본 발명은 MR (Mixed Reality) 모드 및 VR (Virtual Reality) 모드를 제공하는 슬림형 XR 디바이스의 제어 방법으로서, (a) MR 모드를 실행하는 단계; (b) MR 모드의 스크린을 디스플레이 하는 단계; (c) MR 모드 실행 중 기설정된 트리거(trigger) 조건이 만족된 경우 메모리에 액세스하여 VR 모드 관련 부가 정보를 추출하는 단계; (d) 추출된 VR 모드 관련 부가 정보에 기초하여 MR 모드의 스크린내에 VR 모드의 스크린내 특정 위치의 가상 오브젝트를 디스플레이 하는 단계;를 포함하여 구성될 수 있다.
여기서, MR 모드의 스크린은, XR 디바이스의 카메라에 의해 촬영된 오브젝트를 포함하여 구성될 수 있고, VR 모드의 스크린은, 각 위치별로 맵핑되어 있는 적어도 하나의 가상 오브젝트를 포함하여 구성될 수 있다.
그리고, VR 모드의 스크린내 각 위치별로 맵핑되어 있는 적어도 하나의 가상 오브젝트는, XR 디바이스에 의해 인식된 유저별로 변경되도록 구성될 수 있다.
다른 한편, XR 디바이스의 유저의 시선 또는 특정 디바이스를 트래킹 하는 단계;를 더 포함하여 구성될 수도 있다.
이때, 트리거 조건은, 트래킹된 유저의 시선 또는 특정 디바이스가 MR 모드의 스크린내 특정 영역 내에서 기설정된 시간 동안 인식된 경우를 포함하여 구성될 수 있다.
그리고, 트리거 조건은, XR 디바이스 또는 대응하는 리모컨의 특정 물리키 버튼이 푸쉬된 제1조건과, XR 디바이스 또는 대응하는 리모컨의 특정 모션이 감지된 제2조건과, XR 디바이스의 카메라에 의해 특정 제스쳐가 감지된 제3조건 중 적어도 하나를 포함하여 구성될 수도 있다.
여기서, 트리거 조건이 제3조건에 해당하는 경우 특정 제스쳐가 형성하는 영역의 사이즈 또는 위치에 따라 MR 모드의 스크린내에서 디스플레이된 VR 모드의 스크린내 특정 위치의 가상 오브젝트를 변경하는 단계;를 더 포함하여 구성될 수 있다.
그리고, 단계 (d)는, MR 모드를 실행 중 VR 모드의 스크린내 적어도 하나의 가상 오브젝트를 가이드 하기 위한 인디케이터를 디스플레이 하는 단계;를 구비할 수 있다.
또한, 인디케이터는, VR 모드의 스크린내 적어도 하나의 가상 오브젝트의 타입을 표시하는 제1 그래픽 데이터와, VR 모드의 스크린내 적어도 하나의 가상 오브젝트의 위치를 표시하는 제2 그래픽 데이터와, VR 모드의 스크린내 적어도 하나의 가상 오브젝트의 개수를 표시하는 제3 그래픽 데이터 중 적어도 하나이상을 포함하여 구성될 수 있다.
다른 한편, 본 발명에 따른 컴퓨터프로그램은 하드웨어와 결합되어 이상과 같은 슬림형 XR 디바이스의 제어 방법을 실행시키기 위하여 매체에 저장된 것이다.
본 발명은 프레임전방 부재의 전면에 얇은 막 형태로 탑재되는 PCB 부재를 구비함에 따라 유저의 안면에 착용되는 XR 디바이스를 기존에 비해 획기적으로 가볍고 슬림하게 제작할 수 있다는 장점을 나타낸다.
또한, 본 발명은 프레임전방 부재의 전면에 얇은 막 형태로 탑재되는 PCB 부재를 구비함에 따라 그 XR 디바이스를 착용한 유저의 활동성을 향상시킬 수 있는 장점도 나타낸다.
또한, 본 발명은 프레임전방 부재의 전면에 얇은 막 형태로 탑재되는 PCB 부재를 구비함에 따라 그 PCB 부재에 접속되는 각종 칩의 위치 선택이 자유롭기 때문에 XR 디바이스의 디자인을 효과적으로 개선시킬 수 있다는 장점도 나타낸다.
[도 1]은 본 발명의 제 1 실시예에 따른 슬림형 XR 디바이스를 도시한 예시도,
[도 2]는 [도 1]의 구성을 분리한 도면,
[도 3]은 본 발명의 제 2 실시예에 따른 슬림형 XR 디바이스를 도시한 예시도,
[도 4]는 [도 3]의 구성을 분리한 도면,
[도 5]는 본 발명의 제 3 실시예에 따른 슬림형 XR 디바이스를 도시한 예시도,
[도 6]은 [도 5]의 구성을 분리한 도면,
[도 7]은 본 발명에 따른 슬림형 XR 디바이스의 제어 방법을 나타낸 순서도,
[도 8]은 본 발명에 따른 슬림형 XR 디바이스가 MR/VR 서비스 제공을 위한 파라미터들을 저장한 메모리 데이터 구조의 일례를 나타낸 도면이다.
이하, 도면을 참조하여 본 발명을 상세히 설명한다.
[도 1]은 본 발명의 제 1 실시예에 따른 슬림형 XR 디바이스를 도시한 예시도이고, [도 2]는 [도 1]의 구성을 분리한 도면이다.
[도 1]과 [도 2]를 참조하면, 본 발명에 따른 슬림형 XR 디바이스는 렌즈 부재(110), 디스플레이 부재(미도시), 프레임전방 부재(130), 프레임측방 부재(140), PCB 부재(150)를 포함하여 구성될 수 있다.
렌즈 부재(110)는 사용자의 얼굴 눈 쪽에 배치되어 사용자의 시야를 가이드할 수 있다. 이를 위해, 렌즈 부재(110)는 사용자의 두 눈 위치에 대응하여 [도 2]에서와 같이 한 쌍으로 구성될 수도 있지만, 하나의 렌즈 부재(110)가 좌우로 길게 구성될 수도 있다.
디스플레이 부재(미도시)는 렌즈 부재(110)의 안쪽 면에 MR 정보, AR 정보, VR 정보 중 어느 하나를 표시하도록 구성될 수 있다.
여기서, 본 명세서의 MR 정보, AR 정보, VR 정보를 정의하면 다음과 같다. 먼저, MR 정보는 사용자가 렌즈 부재(110)를 통해 현실 세계를 실제로 보고 있는 상태에서 바람직하게는 그 렌즈 부재(110)의 내측면에 가상으로 만들어진 컴퓨터그래픽(CG) 영상을 표시하는 소위 MR (Mixed Reality) 모드를 의미한다.
그리고, AR 정보는 사용자가 렌즈 부재(110)를 통해 현실 세계가 아닌 촬영된 실제 영상(예: 프로야구 중계)을 보고 있는 상태에서 바람직하게는 그 렌즈 부재(110)의 내측면에 가상으로 만들어진 컴퓨터그래픽(CG) 영상을 표시하는 소위 AR (Augmented Reality) 모드를 의미한다.
또한, VR 정보는 사용자가 렌즈 부재(110)를 통해 가상으로 미리 만들어진 컴퓨터그래픽(CG) 영상이 표시되는 소위 VR(Virtual Reality) 모드를 의미한다.
프레임전방 부재(130)는 [도 1]과 [도 2]에서와 같이 하나이상의 렌즈 부재(110)의 테두리를 감싸는 형태로 렌즈 부재(110)를 고정한다.
프레임측방 부재(140)는 [도 1]과 [도 2]에서와 같이 프레임전방 부재(130)의 양측에 고정된 상태로 후방으로 연장됨에 따라 프레임전방 부재(130)와 협동으로 렌즈 부재(110)를 사용자의 안면에 거치시킨다.
여기서, 프레임측방 부재(140)는 [도 1]과 [도 2]에서와 같이 사용자의 양측 귀에 대응하도록 한 쌍으로 구성될 수도 있고, 프레임전방 부재(130)의 양단에 고리 형태로 연결될 수도 있다.
PCB 부재(150)는 [도 2]에서와 같이 프레임전방 부재(130)의 전면에 얇은 막 형태로 배치되며 디스플레이 부재(미도시)와 접속되어 디스플레이 부재(미도시)의 동작을 제어한다.
이를 위해, PCB 부재(150)는 바람직하게는 [도 2]에서와 같이 낭창낭창하고 얇은 FPCB(Flexible PCB)로 구성될 수도 있다.
한편, 렌즈 부재(110)는 사용자의 육안으로 투시가 가능한 투명 재질로 이루어질 수 있다. 이때, 디스플레이 부재(미도시)는 MR 표시 부재(미도시)로서 외부의 제어로 동작하여 렌즈 부재(110)의 일부 영역에 MR 정보를 표시하도록 구성될 수 있다.
다른 한편, 렌즈 부재(110)는 사용자의 육안 투시를 차단하는 불투명 재질로 이루어질 수 있다. 이때, 디스플레이 부재(미도시)는 VR 표시 부재(미도시)로서 외부의 제어로 동작함에 따라 렌즈 부재(110)에 VR 정보를 표시하도록 구성될 수도 있다.
한편, [도 3]은 본 발명의 제 2 실시예에 따른 슬림형 XR 디바이스를 도시한 예시도이고, [도 4]는 [도 3]의 구성을 분리한 도면이다.
[도 3]과 [도 4]를 참조하면, 본 발명의 제 2 실시예는 보강필름 부재(160)를 더 포함하여 구성될 수 있다.
여기서, [도 1]에서와 같이 프레임전방 부재(130)의 전면에 얇은 막 형태의 PCB 부재(150)가 접합된 상태에서 보강필름 부재(160)는 [도 3]과 [도 4]에서와 같이 그 PCB 부재(150)의 전면에 접합됨에 따라 렌즈 부재(110)가 끼워지는 프레임전방 부재(130)와 PCB 부재(150) 간의 경계 부분을 [도 3]에서와 같이 마감 처리함은 물론 외력으로부터 PCB 부재(150)의 전면을 보호하는 역할도 한다.
다른 한편, [도 5]는 본 발명의 제 3 실시예에 따른 슬림형 XR 디바이스를 도시한 예시도이고, [도 6]은 [도 5]의 구성을 분리한 도면이다.
[도 5]와 [도 6]에서와 같이 렌즈 부재(110)는 단일의 렌즈로 구성될 수 있고, 프레임전방 부재(130)도 그 단일의 렌즈 부재(110)에 대응하는 형태로 [도 5]와 [도 6]에서와 같이 절개 형성될 수 있다.
[도 7]은 본 발명에 따른 슬림형 XR 디바이스의 제어 방법을 나타낸 순서도이다.
단계 (S110) : 본 발명에 따른 슬림형 XR 디바이스는 MR (Mixed Reality) 모드 및 VR (Virtual Reality) 모드를 제공하기 위해 먼저, MR 모드를 실행할 수 있다.
단계 (S120, S130) : 나아가, MR 모드의 스크린을 디스플레이하고, MR 모드 실행 중 기설정된 트리거(trigger) 조건이 만족하는지 여부를 판단한다.
단계 (S140, S150) : 트리거 조건이 만족된 것으로 판단된 경우 메모리에 액세스하여 VR 모드 관련 부가 정보를 추출한다.
이어서, 그 추출된 VR 모드 관련 부가 정보에 기초하여 MR 모드의 스크린 내에 VR 모드의 스크린 내에서 특정 위치에 대응하는 가상 오브젝트를 디스플레이한다.
MR 모드의 스크린은 예컨대 슬림형 XR 디바이스의 카메라에 의해 촬영된 오브젝트를 포함하고, VR 모드의 스크린은 각 위치별로 맵핑되어 있는 적어도 하나의 가상 오브젝트를 포함한다.
VR 모드의 스크린 내 각 위치별로 맵핑되어 있는 적어도 하나의 가상 오브젝트는, 예컨대 슬림형 XR 디바이스에 의해 인식된 유저별로 변경될 수도 있다.
[도 7]에 도시되지는 않았으나, 슬림형 XR 디바이스의 유저의 시선 또는 특정 디바이스를 트래킹하는 단계를 더 포함하여 구성될 수도 있다.
이때, 트리거 조건은 예컨대 트래킹된 유저의 시선 또는 특정 디바이스가 MR 모드의 스크린 내 특정 영역 내에서 기설정된 시간 동안 인식된 경우를 포함할 수 있다.
트리거 조건은, 예를 들어, 슬림형 XR 디바이스 또는 이에 대응하는 리모컨의 특정 물리키 버튼이 푸쉬된 제1조건, 슬림형 XR 디바이스 또는 이에 대응하는 리모컨의 특정 모션이 감지된 제2조건 또는 슬림형 XR 디바이스의 카메라에 의해 특정 제스쳐가 감지된 제3조건 중 적어도 하나를 포함할 수 있다.
트리거 조건이 제3조건에 해당하는 경우, 특정 제스쳐가 형성하는 영역의 사이즈 또는 위치에 따라, MR 모드의 스크린내에서 디스플레이된 VR 모드의 스크린내 특정 위치의 가상 오브젝트를 변경하는 단계를 더 포함한다.
단계 (S150)은 MR 모드를 실행 중, VR 모드의 스크린내 적어도 하나의 가상 오브젝트를 가이드하기 위한 인디케이터를 디스플레이하는 단계를 더 포함할 수도 있다.
여기서, 인디케이터는 예컨대 VR 모드의 스크린내 적어도 하나의 가상 오브젝트의 타입을 표시하는 제1 그래픽 데이터, VR 모드의 스크린내 적어도 하나의 가상 오브젝트의 위치를 표시하는 제2 그래픽 데이터, VR 모드의 스크린내 적어도 하나의 가상 오브젝트의 개수를 표시하는 제3 그래픽 데이터 중 적어도 하나를 포함할 수 있다.
본 발명의 제어 방법과 유사하게, 장치 관점에서 살펴하면 XR (extended reality) 관련 복수 개의 모드를 제공하는 슬림형 XR 디바이스는, 메모리와, 적어도 하나의 모드 중 제1 모드를 실행하는 컨트롤러와, 그리고 제1 모드의 스크린을 디스플레이하는 디스플레이 부재를 포함할 수 있다. 여기서, 메모리의 특징은 이하 [도 8]에서 살펴 본다.
컨트롤러는, 제1 모드 실행 중 기설정된 트리거(trigger) 조건이 만족된 경우, 메모리에 액세스하여 제2 모드 관련 부가 정보를 추출하고, 추출된 제2 모드 관련 부가 정보에 기초하여, 제1 모드의 스크린내에 제2 모드의 스크린내 특정 위치의 가상 오브젝트를 디스플레이하도록 디스플레이 부재를 제어한다.
제1 모드는 예컨대 이전에 설명한 MR 모드에 해당하고, 제2 모드는 예를 들어 이전에 설명한 VR 모드에 해당한다.
[도 8]은 본 발명에 따른 슬림형 XR 디바이스가 MR/VR 서비스 제공을 위한 파라미터들을 저장한 메모리 데이터 구조의 일례를 나타낸 도면이다.
앞서 살펴 본 본 발명의 실시예를 구현하기 위하여 [도 8]에 도시된 바와 같이 슬림형 XR 디바이스의 메모리에 MR/VR 서비스를 위한 특정 파라미터들을 미리 정의할 수 있다.
종래에는 MR 모드를 실행하였다가, 개인화된 VR 모드의 정보를 불러오 기 위해서는 MR 모드가 VR 모드로 전체 전환되어야 하는 문제점이 있었다. 반면, 본원 발명에 의하면, MR 모드 실행 중 VR 모드의 가상 오브젝트들 중 일부만 불러오는 것이 가능하다.
[도 8]에 도시된 바와 같이, ID와 관계 없이 MR 모드에서는 동일한 화면이 제공된다. 그러나, MR 모드 실행 중 트리거 조건 만족시 VR 모드의 스크린내 특정 가상 오브젝트만 불러 오기 위하여, ID 별로 임의의 가상 오브젝트 및 위치가 다르게 정의된다.
한편, 사용자를 구별하기 위한 ID는, 사용자가 임의로 입력할 수도 있고 또는 카메라 등을 통해 자동 구별도 가능하다. 보다 구체적으로 예를 들면, Mr Kim이 XR 디바이스의 MR 모드 실행 중, 트리거 조건 만족시 [도 8]에 도시된 데이터베이스에 액세스 하여, VR 모드의 스크린내 A 부가 정보(가상 오브젝트)의 위치 및 B 부가 정보(가상 오브젝트)의 위치 확인 후, 이를 인디케이팅 하는 GUI를 표시할 수도 있다.
반면, Ms Lee 가 슬림형 XR 디바이스의 MR 모드 실행 중, 트리거 조건 만족시 [도 8]에 도시된 데이터베이스에 액세스하여, VR 모드의 스크린내 A 부가 정보(가상 오브젝트)의 위치 및 C 부가 정보(가상 오브젝트)의 위치 확인 후, 이를 인디케이팅 하는 GUI를 표시할 수도 있다.
마지막으로, Ms Park 이 슬림형 XR 디바이스의 MR 모드 실행 중, 트리거 조건 만족시 [도 8]에 도시된 데이터베이스에 액세스 하여, VR 모드의 스크린내 D 부가 정보(가상 오브젝트)의 위치, E 부가 정보(가상 오브젝트) 및 F 부가 정보(가상 오브젝트)의 위치 확인 후, 이를 인디케이팅 하는 GUI를 표시할 수도 있다.
즉, 여기서의 VR 모드의 스크린은 개인화되어 있으므로, 사용자별로 다르게 설정하는 것이 가능하다.
한편, 본 발명은 컴퓨터가 읽을 수 있는 비휘발성 기록매체에 컴퓨터가 읽을 수 있는 코드의 형태로 구현되는 것이 가능하다. 이러한 비휘발성 기록매체로는 다양한 형태의 스토리지 장치가 존재하는데 예컨대 하드디스크, SSD, CD-ROM, NAS, 자기테이프, 웹디스크, 클라우드 디스크 등이 있고 네트워크로 연결된 다수의 스토리지 장치에 코드가 분산 저장되고 실행되는 형태도 구현될 수 있다. 또한, 본 발명은 하드웨어와 결합되어 특정의 절차를 실행시키기 위하여 매체에 저장된 컴퓨터프로그램의 형태로 구현될 수도 있다.
110 : 렌즈 부재
130 : 프레임전방 부재
140 : 프레임측방 부재
150 : PCB 부재
160 : 보강필름 부재

Claims (10)

  1. 사용자의 눈 쪽에 배치되어 사용자의 시야를 가이드하는 하나이상의 렌즈 부재(110);
    상기 렌즈 부재에 정보를 표시하는 디스플레이 부재;
    상기 하나이상의 렌즈 부재의 테두리를 감싸는 형태로 상기 렌즈 부재를 고정하는 프레임전방 부재(130);
    상기 프레임전방 부재의 양측에 고정된 상태로 후방으로 연장됨에 따라 상기 프레임전방 부재와 협동으로 상기 렌즈 부재를 사용자의 안면에 거치시키는 하나이상의 프레임측방 부재(140);
    상기 프레임전방 부재의 전면에 얇은 막 형태로 배치되며 상기 디스플레이 부재와 접속되어 상기 디스플레이 부재의 동작을 제어하는 PCB 부재(150);
    를 포함하여 구성되는 슬림형 XR 디바이스.
  2. 청구항 1에 있어서,
    상기 렌즈 부재는 사용자의 육안으로 투시가 가능한 투명 재질로 이루어지고,
    상기 디스플레이 부재는 MR 표시 부재로서 외부의 제어로 동작하여 상기 렌즈 부재의 일부 영역에 MR 정보를 표시하는 것을 특징으로 하는 슬림형 XR 디바이스.
  3. 청구항 1에 있어서,
    상기 디스플레이 부재는 VR 표시 부재로서 외부의 제어로 동작하여 상기 렌즈 부재에 VR 정보를 표시하는 것을 특징으로 하는 슬림형 XR 디바이스.
  4. 청구항 3에 있어서,
    상기 렌즈 부재는 사용자의 육안 투시를 차단하는 불투명 재질로 이루어지는 것을 특징으로 하는 슬림형 XR 디바이스.
  5. MR (Mixed Reality) 모드 및 VR (Virtual Reality) 모드를 제공하는 슬림형 XR 디바이스의 제어 방법으로서,
    (a) 상기 MR 모드를 실행하는 단계;
    (b) 상기 MR 모드의 스크린을 디스플레이 하는 단계;
    (c) 상기 MR 모드 실행 중 기설정된 트리거(trigger) 조건이 만족된 경우 메모리에 액세스하여 상기 VR 모드 관련 부가 정보를 추출하는 단계;
    (d) 상기 추출된 VR 모드 관련 부가 정보에 기초하여 상기 MR 모드의 스크린내에 상기 VR 모드의 스크린내 특정 위치의 가상 오브젝트를 디스플레이 하는 단계;
    를 포함하는 슬림형 XR 디바이스의 제어 방법.
  6. 청구항 5에 있어서,
    상기 MR 모드의 스크린은,
    상기 XR 디바이스의 카메라에 의해 촬영된 오브젝트를 포함하여 구성되고,
    상기 VR 모드의 스크린은,
    각 위치별로 맵핑되어 있는 적어도 하나의 가상 오브젝트를 포함하여 구성되는 것을 특징으로 하는 슬림형 XR 디바이스의 제어 방법.
  7. 청구항 5에 있어서,
    상기 VR 모드의 스크린내 각 위치별로 맵핑되어 있는 적어도 하나의 가상 오브젝트는, 상기 XR 디바이스에 의해 인식된 유저별로 변경되도록 구성되는 것을 특징으로 하는 슬림형 XR 디바이스의 제어 방법.
  8. 청구항 5에 있어서,
    상기 XR 디바이스의 유저의 시선 또는 특정 디바이스를 트래킹 하는 단계;
    를 더 포함하여 구성되는 것을 특징으로 하는 슬림형 XR 디바이스의 제어 방법.
  9. 청구항 8에 있어서,
    상기 트리거 조건은,
    상기 트래킹된 유저의 시선 또는 특정 디바이스가 상기 MR 모드의 스크린내 특정 영역 내에서 기설정된 시간 동안 인식된 경우를 포함하여 구성되는 것을 특징으로 하는 슬림형 XR 디바이스의 제어 방법.
  10. 하드웨어와 결합되어 청구항 5 내지 9 중 어느 하나의 항에 따른 슬림형 XR 디바이스의 제어 방법을 실행시키기 위하여 매체에 저장된 컴퓨터프로그램.
KR1020200163376A 2020-11-27 2020-11-27 슬림형 xr 디바이스 및 그 제어 방법 KR20220074643A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020200163376A KR20220074643A (ko) 2020-11-27 2020-11-27 슬림형 xr 디바이스 및 그 제어 방법
PCT/KR2020/017208 WO2022114305A1 (ko) 2020-11-27 2020-11-28 슬림형 xr 디바이스 및 그 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200163376A KR20220074643A (ko) 2020-11-27 2020-11-27 슬림형 xr 디바이스 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20220074643A true KR20220074643A (ko) 2022-06-03

Family

ID=81755750

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200163376A KR20220074643A (ko) 2020-11-27 2020-11-27 슬림형 xr 디바이스 및 그 제어 방법

Country Status (2)

Country Link
KR (1) KR20220074643A (ko)
WO (1) WO2022114305A1 (ko)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120006430U (ko) * 2011-03-09 2012-09-19 주식회사 한국 오.지.케이 일반안경에 탈/부착이 가능한 3ｄ시청용 액티브 안경조립체
KR20130040379A (ko) * 2011-10-14 2013-04-24 주식회사 플렉스엘시디 단일화된 부품이 케이스의 중앙부에 내장된 입체영상 안경
EP4235391A3 (en) * 2016-08-22 2023-10-25 Magic Leap, Inc. Virtual, augmented, and mixed reality systems and methods
KR20190089627A (ko) * 2018-01-23 2019-07-31 삼성전자주식회사 Ar 서비스를 제공하는 디바이스 및 그 동작 방법
KR102592653B1 (ko) * 2019-07-01 2023-10-23 엘지전자 주식회사 Ar 모드 및 vr 모드를 제공하는 xr 디바이스 및 그 제어 방법

Also Published As

Publication number Publication date
WO2022114305A1 (ko) 2022-06-02

Similar Documents

Publication Publication Date Title
JP6095763B2 (ja) ジェスチャ登録装置、ジェスチャ登録プログラムおよびジェスチャ登録方法
US9164621B2 (en) Stereoscopic display apparatus and stereoscopic shooting apparatus, dominant eye judging method and dominant eye judging program for use therein, and recording medium
JP5073013B2 (ja) 表示制御プログラム、表示制御装置、表示制御方法および表示制御システム
WO2016043537A1 (ko) 시선에 의해 제어되는 헤드 마운트형 디스플레이 장치, 이의 제어 방법 및 이의 제어를 위한 컴퓨터 프로그램
KR20180028796A (ko) 이미지 표시 방법, 저장 매체 및 전자 장치
JP2017530438A (ja) 仮想現実環境内における注視に基づく物体配置
CN107832001B (zh) 信息处理方法、装置、电子设备及存储介质
EP2902998A1 (en) Display device, control system, and control programme
JP2012108723A (ja) 指示受付装置
CN111566596A (zh) 用于虚拟现实显示器的真实世界门户
TWI710249B (zh) 可於第一人稱視角模式與第三人稱視角模式之間切換之頭戴式顯示系統、相關方法以及相關電腦可讀取記錄媒體
CN109448050B (zh) 一种目标点的位置的确定方法及终端
KR102217867B1 (ko) Vr 뷰어에서의 휴대용 사용자 디바이스의 정렬을 위한 전도성 접촉부들
EP3923123A1 (en) Method for dynamically displaying real-world scene, electronic device, and computer readable medium
US20190347864A1 (en) Storage medium, content providing apparatus, and control method for providing stereoscopic content based on viewing progression
JP6757404B2 (ja) シースルー・グラス用の補助アイテム選択
CN115598831A (zh) 提供精准眼动追踪的光学系统和相关方法
JP2017182500A (ja) 入力装置、入力プログラム、及び入力方法
JPWO2019044188A1 (ja) 情報処理装置、情報処理方法、及びプログラム
CN117916777A (zh) 手工制作的增强现实努力证据
KR102562420B1 (ko) 5g 통신 기능을 가지는 슬림형 xr 디바이스
US20230367118A1 (en) Augmented reality gaming using virtual eyewear beams
US20120075350A1 (en) Storage medium storing information processing program, information processing apparatus, information processing system, and information processing method
KR20220074643A (ko) 슬림형 xr 디바이스 및 그 제어 방법
CN107320957B (zh) 游戏界面显示方法及装置

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application