KR102586624B1 - 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치 및 그 방법 - Google Patents

개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치 및 그 방법 Download PDF

Info

Publication number
KR102586624B1
KR102586624B1 KR1020200169218A KR20200169218A KR102586624B1 KR 102586624 B1 KR102586624 B1 KR 102586624B1 KR 1020200169218 A KR1020200169218 A KR 1020200169218A KR 20200169218 A KR20200169218 A KR 20200169218A KR 102586624 B1 KR102586624 B1 KR 102586624B1
Authority
KR
South Korea
Prior art keywords
motion sickness
user
image data
posture
degree
Prior art date
Application number
KR1020200169218A
Other languages
English (en)
Other versions
KR20220080281A (ko
Inventor
주정민
Original Assignee
주식회사 테크인모션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 테크인모션 filed Critical 주식회사 테크인모션
Priority to KR1020200169218A priority Critical patent/KR102586624B1/ko
Publication of KR20220080281A publication Critical patent/KR20220080281A/ko
Application granted granted Critical
Publication of KR102586624B1 publication Critical patent/KR102586624B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0118—Head-up displays characterised by optical features comprising devices for improving the contrast of the display / brillance control visibility
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0147—Head-up displays characterised by optical features comprising a device modifying the resolution of the displayed image

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 확장 현실에서 사용자의 멀미나 어지러움 등의 증상을 완하시키기 위한 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치 및 그 방법에 관한 것이다.
본 발명에 따른 멀미 감소 장치는 이전 타임의 사용자 자세와 현재 타임의 사용자 자세에 따른 사용자 시점의 변화가 기설정된 제1 변화 범위 보다 큰 경우, 이전 타임의 예측 영상 데이터를 상기 XR용 영상 데이터로 선택할 수 있다. 또한, 사용자 개별로 멀미도를 측정할 수 있다.

Description

개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치 및 그 방법{APPARATUS REDUCING DIGITAL MOTION SICKNESS BY PERSONALIZED INFORMATION AND ADDJUSTMENT OF IMAGE AND METHOD THEREOF}
본 발명은 확장 현실에서 사용자의 멀미나 어지러움 등의 증상을 완하시키기 위한 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치 및 그 방법에 관한 것이다.
HMD나 스마트 글래스와 같은 웨어러블 디바이스에 의해 현실 세계에서 직접 경험하지 못하는 상황을 간접적으로 체험하게 하는 가상 현실이나 증강 현실 등이 있다.
사용자가 확장 현실 단말기에서 제공하는 컨텐츠를 장시간 이용하는 경우, 사용자가 멀미나 어지러움 등의 증상을 토로하는 경우가 있다. 이를 디지털 멀미라고 표현할 수 있는데, 이러한 디지털 멀미를 감소시키기 위한 방안이 필요하다.
본 발명은 사용자 별로 디지털 멀미도를 측정하여 적합한 하드웨어 장비를 제안하는 것을 목적으로 한다.
또한, 확장 현실 화면에 변화를 주어 사용자의 디지털 멀미를 완화시키는 것을 목적으로 한다.
본 발명의 일 실시예에 따른 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치는 사용자의 자세를 분석하는 자세 분석부; 콘텐츠 및 상기 분석된 자세에 기초하여 사용자의 다음 자세를 예측하여 XR용 예측 영상 데이터를 생성하는 예측부; 및 XR용 영상 데이터를 생성하는 영상 데이터 생성부를 포함하고, 상기 영상 데이터 생성부는 이전 타임의 사용자 자세와 현재 타임의 사용자 자세에 따른 사용자 시점의 변화가 기설정된 제1 변화 범위 보다 큰 경우, 상기 예측부에서 생성한 이전 타임의 예측 영상 데이터를 상기 XR용 영상 데이터로 선택하고, 상기 사용자 시점의 변화가 상기 제1 변화 범위 이내인 경우, 상기 콘텐츠 및 상기 분석된 자세에 기초하여 상기 XR용 영상 데이터를 생성할 수 있다.
또한, 상기 영상 데이터 생성부는 상기 사용자 시점의 변화가 기설정된 제2 변화 범위 보다 큰 경우, 상기 XR용 영상 데이터의 좌안 및 우안 개별 데이터 중 적어도 하나의 개별 데이터를 보정할 수 있다.
또한, 상기 개별 데이터의 보정 대상은 프레임, 색도, 명도, 흐림 정도, 및 해상도 중 적어도 하나일 수 있다.
또한, 상기 사용자의 양안 시력 차이, 그리고, XR 제공 단말기의 착용시 양안 구조 및 위치를 측정하여 사용자 외양을 분석하여 외양 정보를 생성하고, 장면 전환 변화율에 따른 디지털 멀미의 정도를 측정하여 장면 전환율에 따른 멀미도를 산출하고, 운동에 따른 디지털 멀미의 정도를 측정하여 운동에 따른 멀미도를 산출하고, XR 화면의 색도에 따른 디지털 멀미의 정도를 측정하여 색도에 따른 멀미도를 산출하고, 상기 외양 정보, 장면 전환율 멀미도, 운동 멀미도, 및 색도 멀미도에 기초하여 상기 사용자의 개별 멀미 특성을 결정하는 멀미도 측정부를 더 포함할 수 있다.
또한, 상기 멀미도 측정부는 상기 개별 멀미 특성에 대응하여 상기 사용자에게 맞춤형 XR 제공 단말기를 제안할 수 있다.
또한, 영상 데이터 생성부는 상기 XR용 영상 데이터에 상기 개별 멀티 특성을 반영할 수 있다.
또한, 멀미도 측정부는 상기 사용자의 피드백에 따라 상기 개별 멀미 특성을 업데이트할 수 있다.
본 발명의 일 실시예에 따른 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 방법는 사용자의 자세를 분석하는 단계; 콘텐츠 및 상기 분석된 자세에 기초하여 사용자의 다음 자세를 예측하여 XR용 예측 영상 데이터를 생성하는 예측 단계; 이전 타임의 사용자 자세와 현재 타임의 사용자 자세에 따른 사용자 시점의 변화가 기설정된 제1 변화 범위 보다 큰 경우, 이전 타임의 예측 영상 데이터를 XR용 영상 데이터로 선택하는 단계; 및 상기 사용자 시점의 변화가 상기 변화 범위 이내인 경우, 상기 콘텐츠 및 상기 분석된 자세에 기초하여 상기 XR용 영상 데이터를 생성하는 단계를 포함할 수 있다.
다양한 디지털 멀미 요인을 추출하고 해당 사용자에 맞춤인 하드웨어를 제공하여, 디지털 멀미를 감소시킬 수 있다.
또한, 좌안과 우안의 화면을 불일치시켜 사용자의 디지털 멀미를 감소시킬 수 있다.
도 1은 본 발명의 일실시예에 따른 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 시스템의 블록도,
도 2는 도 1의 단말기의 제어 구성도,
도 3은 도 1의 멀미 감소 장치의 제어 구성도,
도 4는 본 발명의 일실시예에 따른 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 방법의 순서도, 및
도 5는 도 4의 개인 맞춤에 따른 디지털 멀미 감소 방법의 순서도이다.
이하, 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다. '또는'은 전후 문맥상 논리적 배타합으로 해석될 수 있으나, 일반적으로 '그렇지 않으면', '논리적 배타합' 등의 직접적인 묘사가 없는 한, '및/또는'과 같은 의미, 즉, 논리합으로 해석한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 또한 네트워크 상의 제1 구성요소와 제2 구성요소가 연결되어 있거나 접속되어 있다는 것은, 유선 또는 무선으로 제1 구성요소와 제2 구성요소 사이에 데이터를 주고 받을 수 있음을 의미한다.
또한, 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.
이와 같은 구성요소들은 실제 응용에서 구현될 때 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 도면 전체를 통하여 동일하거나 유사한 구성요소에 대해서는 동일한 도면 부호를 부여하였고, 동일한 도면 부호를 가지는 구성요소에 대한 자세한 설명은 전술한 구성요소에 대한 설명으로 대체되어 생략될 수 있다.
또한, 본 발명은 본 명세서에 표시된 실시예들의 모든 가능한 조합들을 망라한다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적이지 않다. 본 명세서에 기술된 특정 형상, 구조, 기능, 및 특성의 일 실시예는 다른 실시예로 구현될 수 있다. 예를 들어, 제1 및 제2 실시예에서 언급되는 구성요소는 제1 및 제2 실시예의 모든 기능을 수행할 수 있다.
도 1은 본 발명의 일실시예에 따른 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 시스템의 블록도, 도 2는 도 1의 단말기의 제어 구성도, 도 3은 도 1의 멀미 감소 장치의 제어 구성도이다.
도 1을 참조하면, 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 시스템은 멀미 감소 장치(10) 및 XR 제공 단말기(20)을 포함할 수 있다.
멀미 감소 장치(10)는 콘텐츠에 대응하여 XR용 영상 데이터를 생성하여 XR 제공 단말기(20)에 전송할 수 있다.
XR 제공 단말기(20)는 XR용 영상 데이터를 XR 화면으로 렌더링할 수 있다.
XR용 영상 데이터는 좌안 및 우안 개별 데이터를 구비할 수 있다.
XR 제공 단말기(20)에서 제공하는 확장 현실(XR; eXtended Reality)은 VR(Virtual Reality; 가상 현실), AR(Augmented Reality; 증강 현실), 및 MR(Mixed Reality; 혼합 현실) 모두 또는 이들 중 적어도 하나를 포함하는 개념이다.
도 2를 참조하면, XR 제공 단말기(20)는 단말기 제어부(210) 및 디스플레이부(220)를 포함할 수 있다.
디스플레이부(220)는 확장 현실 화면을 표시할 수 있다. 디스플레이부(220)는 좌-디스플레이 모듈(222) 및 우-디스플레이 모듈(224)를 구비할 수 있다. 좌-디스플레이 모듈(222)는 좌안에 관련된 화면을 우-디스플레이 모듈(224)는 우안에 관련된 화면을 디스플레이할 수 있다.
좌안 개별 데이터는 좌-디스플레이 모듈(222)에 관계되고, 우안 개별 데이터는 우-디스플레이 모듈(224)에 관계될 수 있다.
단말기 제어부(210)는 XR용 영상 데이터를 이용하여 디스플레이부(220)에 확장 현실 화면이 표시되도록 할 수 있다.
XR 제공 단말기(20)는 멀미 감소 장치(10)와 통신하기 위한 통신부 또는 인터페이스 기능의 인터페이스부를 더 포함할 수 있다.
본 명세서의 도면에서 XR 제공 단말기(20)은 멀미 감소 장치(10)와 별도의 장치로 표시하였지만, 이에 한정되지 않고, 멀미 감소 장치(10)에 포함된 구성일 수 있다.
도 3을 참조하면, 멀미 감소 장치(10)는 영상 데이터 생성부(110), 자세 분석부(130), 및 예측부(140)를 포함할 수 있다.
자세 분석부(130)는 사용자의 자세를 분석할 수 있다.
예측부(140)는 콘텐츠 및 분석된 자세에 기초하여 사용자의 다음 자세를 예측하여 XR용 예측 영상 데이터를 생성할 수 있다.
영상 데이터 생성부(110)는 XR용 영상 데이터를 생성할 수 있다.
이전 타임의 사용자 자세와 현재 타임의 사용자 자세에 따른 사용자 시점의 변화가 기설정된 제1 변화 범위 보다 큰 경우, 영상 데이터 생성부(110)는 예측부(140)에서 생성한 이전 타임의 예측 영상 데이터를 XR용 영상 데이터로 선택할 수 있다.
본 실시예에서 영상(또는 그 데이터)에 관계된 타임은 하나 또는 2 이상의 프레임 구간, 일정 시간, 일정 장면 구간 등을 의미할 수 있다. 일정 장면은 고정된 장면(정지 영상) 또는 일정 배경에 움직이는 오브젝트가 별로 없는 것을 의미할 수 있다.
시점은 사용자 머리와 눈동자의 조합에 따른 시선에 기초하여 결정될 수 있다.
사용자 시점의 변화는 벡터로서 시선이 움직이는 방향과 변화하는 양을 구비할 수 있다. 제1 변화 범위는 수평 이동에서 수직 이동으로의 급격한 시선 방향 변경와 같은 급격한 방향 전환이 있을 수 있다. 제1 변화 범위는 기설정된 각속도 이상의 시선 변화량이 있을 수 있다.
사용자 시점의 변화가 제1 변화 범위 이내인 경우, 영상 데이터 생성부(110)는 콘텐츠 및 분석된 자세에 기초하여 XR용 영상 데이터를 생성할 수 있다.
영상 데이터 생성부(110)는 사용자 시점의 변화가 기설정된 제2 변화 범위 보다 큰 경우, XR용 영상 데이터의 좌안 및 우안 개별 데이터 중 적어도 하나의 개별 데이터를 보정할 수 있다.
사용자 시점의 변화가 급격할 경우, 영상 데이터 생성부(110)는 사용자의 현재 자세에 실시간으로 대응하여 영상 데이터를 생성하는 것이 힘들 수 있다. 확장 현실 화면이 사용자 시점의 변화를 못 따라갈 경우, 사용자는 디지털 멀미를 일으키는 것으로 관찰되었다. 예측부(140)에서 사용자의 분석을 계속 분석하여 다음 타임에서의 사용자 시점을 예측하고 그에 따라 생성된 영상 데이터를 다음 타임에서 사용하면, 사용자의 시점과 확장 현실 화면 사이에 지연을 줄이거나 없앨 수 있다.
예측부(140)의 예측이 항상 사용자의 실제 다음 자세와 일치하지 않을 수 있다. 이러한 불일치를 줄이기 위해, 예측부(140)는 기계 학습이나 딥러닝을 통해 예측도를 높일 수 있다.
개별 데이터의 보정 대상은 프레임, 색도, 명도, 흐림 정도, 및 해상도 중 적어도 하나일 수 있다.
개별 데이터의 보정 대상은 프레임인 것이 바람직하다. 예를 들어, 좌안 개별 데이터의 프레임은 그대로이고, 우안 개별 데이터의 프레임의 속도를 변동을 줄 수 있다. 구체적인 예로, 사용자 입장에서 좌측으로 시점을 움직인 경우, 좌안은 시점을 따라오는 화면을, 우안은 시점 보다 늦은 화면(딜레이된 화면)을 볼 수 있다. 이런 경우, 사용자 입장에서 전경에 잔상이 생기게 된다. 이러한 잔상은 사용자의 디지털 멀미를 감소시키는 것으로 관측되었다. 이는 사용자 인지 불일치로 인한 것으로 예상된다.
그 외에 좌안 및 우안 화면의 색도, 명도, 흐림 정도, 및 해상도를 불일치 시키면 사용자 인지 부조화로 디지털 멀미가 감소될 것이다.
제2 변화 범위는 스칼라인 것이 바람직하다. 제2 변화 범위는 시점의 각속력의 변동량일 수 있다.
다른 실시예로 한쪽 개별 데이터는 예측부(140)에서 이전에 생성한 영상 데이터로, 다른쪽 개별 데이터는 현재 사용자 자세에 대응하여 생성한 영상 데이터로 지정할 수 있다. 시점 변화가 클 경우, 현대 사용자 자세에 대응되는 영상 데이터는 딜레이된 영상일 수 있기 때문이다. 예측에 따른 영상이 사용자의 현재 시점과 불일치하더러도 딜레이된 영상이 사용자의 시점에 대응(약간 늦게)되기 때문에, 예측에 따른 영상이 매우 정확하지 않아도 된다.
개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치는 멀미도 측정부(120)를 더 포함할 수 있다.
멀미도 측정부(120)는 사용자 별로 멀미 특성을 결정할 수 있다.
멀미도 측정부(120)는 사용자의 양안 시력 차이, 그리고, XR 제공 단말기(20)의 착용시 양안 구조 및 위치를 측정하여 사용자 외양을 분석하여 사용자 별로 외양 정보를 생성할 수 있다.
멀미도 측정부(120)는 장면 전환 변화율에 따른 디지털 멀미의 정도를 측정하여 장면 전환율에 따른 멀미도를 사용자 별로 산출할 수 있다. 예를 들어, 빠르게 움직이는 장면을 보여줌으로써, 사용자가 디지털 멀미에 어느 정도 내성을 가지고 있는지 파악할 수 있다.
멀미도 측정부(120)는 운동에 따른 디지털 멀미의 정도를 측정하여 운동에 따른 멀미도를 사용자 별로 산출할 수 있다. 예를 들어, 사용자가 트레드밀에서 걷거나 움직일 때, 심박수나 혈압 등을 측정할 수 있다.
멀미도 측정부(120)는 XR 화면의 색도에 따른 디지털 멀미의 정도를 측정하여 색도에 따른 멀미도를 사용자 별로 산출할 수 있다. 사용자가 편안하게 느끼는 색을 결정하도록 하여, 색도에 따른 멀미도를 산출할 수 있다.
멀미도 측정부(120)는 외양 정보, 장면 전환율 멀미도, 운동 멀미도, 및 색도 멀미도에 기초하여 사용자의 개별 멀미 특성을 결정할 수 있다.
멀미도 측정부(120)는 개별 멀미 특성에 대응하여 사용자에게 맞춤형 XR 제공 단말기(20)를 제안할 수 있다.
영상 데이터 생성부(110)는 XR용 영상 데이터에 개별 멀티 특성을 반영할 수 있다.
멀미도 측정부(120)는 사용자의 피드백에 따라 개별 멀미 특성을 업데이트할 수 있다. 사용자 피드백은 확장 현실을 이용하는 중의 사용자의 반응이나 이용 후 사용자의 반응일 수 있다.
사용자 반응은 사용자의 맥박이나 혈압, 호홉 등의 신체 특성 또는, 사용자가 표현한 내용일 수 있다.
도 4는 본 발명의 일실시예에 따른 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 방법의 순서도이고, 도 5는 도 4의 개인 맞춤에 따른 디지털 멀미 감소 방법의 순서도이다. 도 1 내지 도 3을 참고한다.
도 4를 참조하면, 멀미 감소 장치(10)의 자세 분석부(130)는 사용자의 자세를 분석할 수 있다(S320).
멀미 감소 장치(10)의 예측부(140)는 콘텐츠 및 분석된 자세에 기초하여 사용자의 다음 자세를 예측하여 XR용 예측 영상 데이터를 생성할 수 있다(S330).
영상 데이터 생성부(110)는 이전 타임의 사용자 자세와 현재 타임의 사용자 자세에 따른 사용자 시점의 변화가 기설정된 제1 변화 범위 보다 큰 경우, 이전 타임의 예측 영상 데이터를 XR용 영상 데이터로 선택할 수 있다.
영상 데이터 생성부(110)는 사용자 시점의 변화가 변화 범위 이내인 경우, 콘텐츠 및 분석된 자세에 기초하여 XR용 영상 데이터를 생성할 수 있다.
영상 데이터 생성부(110)는 사용자의 시점의 변화가 기설정된 제2 변화 범위 보다 큰 경우, XR용 영상 데이터를 보정할 수 있다(S340).
도 5를 참조하면, 멀미 감소 장치(10)의 멀미도 측정부(120)는 사용자의 양안 시력 차이, 그리고, XR 제공 단말기의 착용시 양안 구조 및 위치를 측정하여 사용자 외양을 분석하여 외양 정보를 생성할 수 있다(S410).
멀미도 측정부(120)는 장면 전환 변화율에 따른 디지털 멀미의 정도를 측정하여 장면 전환율에 따른 멀미도를 산출할 수 있다(S420).
멀미도 측정부(120)는 운동에 따른 디지털 멀미의 정도를 측정하여 운동에 따른 멀미도를 산출할 수 있다(S430).
멀미도 측정부(120)는 XR 화면의 색도에 따른 디지털 멀미의 정도를 측정하여 색도에 따른 멀미도를 산출할 수 있다(S440).
멀미도 측정부(120)는 외양 정보, 장면 전환율 멀미도, 운동 멀미도, 및 색도 멀미도에 기초하여 상기 사용자의 개별 멀미 특성을 생성할 수 있다(S450).
멀미도 측정부(120)는 사용자의 멀미 특성에 기초하여 적합한 XR 제공 단말기를 제아할 수 있다(S460).
멀미도 측정부(120)는 사용자의 피드백을 받아(S470), 사용자의 개별 멀미 특성을 업데이트할 수 있다(S480).
상기 본 발명은 하드웨어 또는 소프트웨어에서 구현될 수 있다. 구현은 상기 본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 즉, 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 매체를 포함한다. 컴퓨터 판독 가능 매체는 컴퓨터 저장 매체 및 통신 저장 매체를 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터가 읽을 수 있는 명령어, 데이터 구조, 프로그램 모듈, 및 기타 데이터 등 정보 저장을 위한 임의의 방법 또는 기술로서 구현된 모든 저장 가능한 매체를 포함하는 것으로, 휘발성/비휘발성/하이브리드형 메모리 여부, 분리형/비분리형 여부 등에 한정되지 않는다. 통신 저장 매체 는 반송파와 같은 변조된 데이터 신호 또는 전송 메커니즘, 임의의 정보 전달 매체 등을 포함한다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안 될 것이다.
10: 멀미 감소 장치 20: XR 제공 단말기
110: 영상 데이터 생성부 120: 멀미도 측정부
130: 자세 분석부 140: 예측부
210: 단말기 제어부 220: 디스플레이부

Claims (8)

  1. 사용자의 자세를 분석하는 자세 분석부;
    콘텐츠 및 상기 분석된 자세에 기초하여 사용자의 다음 자세를 예측하여 XR용 예측 영상 데이터를 생성하는 예측부; 및
    XR용 영상 데이터를 생성하는 영상 데이터 생성부를 포함하고,
    상기 영상 데이터 생성부는
    이전 타임의 사용자 자세와 현재 타임의 사용자 자세에 따른 사용자 시점의 변화가 기설정된 제1 변화 범위 보다 큰 경우, 상기 예측부에서 생성한 이전 타임의 예측 영상 데이터를 상기 XR용 영상 데이터로 선택하고,
    상기 사용자 시점의 변화가 상기 제1 변화 범위 이내인 경우, 상기 콘텐츠 및 상기 분석된 자세에 기초하여 상기 XR용 영상 데이터를 생성하고,
    상기 사용자의 양안 시력 차이, 그리고, XR 제공 단말기의 착용시 양안 구조 및 위치를 측정하여 사용자 외양을 분석하여 외양 정보를 생성하고,
    장면 전환 변화율에 따른 디지털 멀미의 정도를 측정하여 장면 전환율에 따른 멀미도를 산출하고,
    운동에 따른 디지털 멀미의 정도를 측정하여 운동에 따른 멀미도를 산출하고,
    XR 화면의 색도에 따른 디지털 멀미의 정도를 측정하여 색도에 따른 멀미도를 산출하고,
    상기 외양 정보, 장면 전환율 멀미도, 운동 멀미도, 및 색도 멀미도에 기초하여 상기 사용자의 개별 멀미 특성을 결정하는 멀미도 측정부를 더 포함하는 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치.
  2. ◈청구항 2은(는) 설정등록료 납부시 포기되었습니다.◈
    제 1 항에 있어서,
    상기 영상 데이터 생성부는 상기 사용자 시점의 변화가 기설정된 제2 변화 범위 보다 큰 경우, 상기 XR용 영상 데이터의 좌안 및 우안 개별 데이터 중 적어도 하나의 개별 데이터를 보정하는, 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치.
  3. 삭제
  4. 삭제
  5. ◈청구항 5은(는) 설정등록료 납부시 포기되었습니다.◈
    제 1 항에 있어서,
    상기 멀미도 측정부는 상기 개별 멀미 특성에 대응하여 상기 사용자에게 맞춤형 XR 제공 단말기를 제안하는, 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치.
  6. 삭제
  7. 삭제
  8. 삭제
KR1020200169218A 2020-12-07 2020-12-07 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치 및 그 방법 KR102586624B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200169218A KR102586624B1 (ko) 2020-12-07 2020-12-07 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200169218A KR102586624B1 (ko) 2020-12-07 2020-12-07 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20220080281A KR20220080281A (ko) 2022-06-14
KR102586624B1 true KR102586624B1 (ko) 2023-10-10

Family

ID=81980420

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200169218A KR102586624B1 (ko) 2020-12-07 2020-12-07 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR102586624B1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017220224A (ja) 2017-05-08 2017-12-14 株式会社コロプラ 仮想空間を提供するための方法、当該方法をコンピュータに実現させるためのプログラム、および仮想空間を提供するためのシステム
US20190076618A1 (en) 2017-09-14 2019-03-14 Advanced Micro Devices, Inc. Method, apparatus and system for mitigating motion sickness in a virtual reality environment
JP6642432B2 (ja) 2014-07-31 2020-02-05 ソニー株式会社 情報処理装置及び情報処理方法、並びに画像表示システム
US20200184728A1 (en) * 2014-11-16 2020-06-11 Intel Corporation Optimizing head mounted displays for augmented reality

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102271198B1 (ko) * 2013-03-15 2021-06-29 매직 립, 인코포레이티드 디스플레이 시스템 및 방법
KR102468346B1 (ko) * 2017-12-05 2022-11-17 한국전자통신연구원 가상 현실 콘텐츠의 시청 피로도 예측 모델에 관한 모니터링 장치 및 방법
KR102622882B1 (ko) * 2019-08-26 2024-01-09 엘지전자 주식회사 Xr 컨텐츠 제공 방법 및 xr 디바이스

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6642432B2 (ja) 2014-07-31 2020-02-05 ソニー株式会社 情報処理装置及び情報処理方法、並びに画像表示システム
US20200184728A1 (en) * 2014-11-16 2020-06-11 Intel Corporation Optimizing head mounted displays for augmented reality
JP2017220224A (ja) 2017-05-08 2017-12-14 株式会社コロプラ 仮想空間を提供するための方法、当該方法をコンピュータに実現させるためのプログラム、および仮想空間を提供するためのシステム
US20190076618A1 (en) 2017-09-14 2019-03-14 Advanced Micro Devices, Inc. Method, apparatus and system for mitigating motion sickness in a virtual reality environment

Also Published As

Publication number Publication date
KR20220080281A (ko) 2022-06-14

Similar Documents

Publication Publication Date Title
JP7454627B2 (ja) 仮想および拡張現実システムならびに方法
CN106873778B (zh) 一种应用的运行控制方法、装置和虚拟现实设备
US20160238852A1 (en) Head mounted display performing post render processing
US11061240B2 (en) Head-mountable apparatus and methods
JP6439702B2 (ja) 画像処理装置及び画像処理方法、コンピューター・プログラム、並びに画像表示システム
US10310595B2 (en) Information processing apparatus, information processing method, computer program, and image processing system
US20200183166A1 (en) Graphics rendering method and apparatus of virtual reality
AU2017317600A1 (en) Virtual, augmented, and mixed reality systems and methods
CN102981616A (zh) 增强现实中对象的识别方法及系统和计算机
US20170036111A1 (en) Head position detecting apparatus and head position detecting method, image processing apparatus and image processing method, display apparatus, and computer program
CN103927966A (zh) 显示控制方法及显示控制装置
JP2017078891A (ja) 画像生成装置、画像生成方法、及び画像生成プログラム
US10712817B1 (en) Image re-projection for foveated rendering
KR20160145976A (ko) 영상 공유 방법 및 이를 수행하는 전자 장치
EP3365755B1 (en) Video display apparatus and method for reducing vr sickness
KR20180076023A (ko) 객체추적을 이용한 안구운동장치 및 방법
KR102586624B1 (ko) 개인 맞춤 및 영상 보정을 통한 디지털 멀미 감소 장치 및 그 방법
JP2021527888A (ja) 軸外カメラを使用して眼追跡を実施するための方法およびシステム
US10602116B2 (en) Information processing apparatus, information processing method, and program for performing display control
KR20210134966A (ko) 인공 현실을 위한 레이턴시 감소
KR101947372B1 (ko) Hmd에 위치 보정 영상을 제공하는 방법 및 hmd에 위치 보정 영상을 표시하는 방법, 그리고 이를 이용한 위치 보정 영상을 표시하는 hmd
US20210217223A1 (en) Heat map presentation device and heat map presentation program
KR101990373B1 (ko) 가상현실 영상 제공 방법 및 이를 이용한 프로그램
JP7467094B2 (ja) 情報処理装置、情報処理方法、及びプログラム
KR102103430B1 (ko) 클라우드에 기반한 가상현실 서비스의 레이턴시 측정방법 및 시스템

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant