KR20180063581A - 가상 현실 표시 장치 및 그 제어 방법 - Google Patents

가상 현실 표시 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20180063581A
KR20180063581A KR1020160163490A KR20160163490A KR20180063581A KR 20180063581 A KR20180063581 A KR 20180063581A KR 1020160163490 A KR1020160163490 A KR 1020160163490A KR 20160163490 A KR20160163490 A KR 20160163490A KR 20180063581 A KR20180063581 A KR 20180063581A
Authority
KR
South Korea
Prior art keywords
user
event signal
eye
moving speed
event
Prior art date
Application number
KR1020160163490A
Other languages
English (en)
Inventor
김기창
임찬우
Original Assignee
김기창
임찬우
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김기창, 임찬우 filed Critical 김기창
Priority to KR1020160163490A priority Critical patent/KR20180063581A/ko
Publication of KR20180063581A publication Critical patent/KR20180063581A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

가상 현실 표시 장치 및 방법이 개시된다. 본 발명의 일 실시예에 따른 가상 현실 표시 장치는,
사용자의 머리 부분의 자세를 검출하여 사용자 자세 변화 정보를 생성하는 사용자 자세 검출부, 사용자의 눈 감김에 따라 제1 이벤트 신호 및 제2 이벤트 신호를 발생시키는 이벤트 검출부, 제1 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 기준 영상의 기준 좌표를 사용자 자세 변화 정보에 따라 변경시키는 3D 영상 좌표 변환부, 및 제2 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 화면 이동 속도를 사용자 자세 변화 정보에 따라 변경시키는 화면 이동 속도 조절부를 포함한다.

Description

가상 현실 표시 장치 및 그 제어 방법{VIRTUAL REALITY DISPLAY DEVICE AND METHOD FOR CONTROLLING THE SAME}
본 발명의 실시예는 표시 기술에 관한 것으로, 보다 상세하게는 가상 현실 표시 기술 및 제어 방법에 관한 것이다.
가상 현실(Virtual Reality)은 직접 체험하지 않고서도 새로운 환경에 들어와 있는 것처럼 보여주고 조작할 수 있는 세계를 말하며, 그 환경 안에서 상호 작용할 수 있는 세계를 일컫는다.
일반적으로, 가상 현실을 이용한 가상 현실 표시 장치는 상기 가상 현실을 사용자가 체험하게 하는 장치로서, 여행, 스포츠, 게임, 군사, 부동산 등 각종 분야에서 많이 활용 되고 있다.
종래 가상 현실 표시 장치는 3D 영상의 기준 영상이 사용자의 기준 자세에 의해 정해져서, 사용자가 기준 자세에서 자세를 변화시켜 화면을 보면 현재 변화된 자세에 대응하는 3D 영상이 표시되어 3D 영상을 감상하는데 불편함이 있었다. 그리고, 종래 가상 현실 표시 장치는 사용자의 머리 부분을 회전시키는대로만 3D 영상이 가상 좌표 내에서 이동되어 표시되므로, 사용자가 머리를 자유롭게 회전시키지 못하는 상태에서는 3D 영상을 제대로 감상하지 못하는 문제점이 있다.
본 발명의 실시예는 사용자가 편안한 자세에서 3D 영상을 감상할 수 있는 가상 현실 표시 장치 및 제어 방법을 제공하고자 한다.
본 발명의 예시적인 일 실시예에 따른 가상 현실 표시 장치는, 사용자의 머리 부분에 착용 가능한 가상 현실 표시 장치로서, 상기 사용자의 머리 부분의 자세를 검출하여 사용자 자세 변화 정보를 생성하는 사용자 자세 검출부, 상기 사용자의 눈 감김에 따라 제1 이벤트 신호 및 제2 이벤트 신호를 발생시키는 이벤트 검출부, 상기 제1 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 기준 영상의 기준 좌표를 상기 사용자 자세 변화 정보에 따라 변경시키는 3D 영상 좌표 변환부, 및 상기 제2 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 화면 이동 속도를 상기 사용자 자세 변화 정보에 따라 변경시키는 화면 이동 속도 조절부를 포함한다.
상기 이벤트 검출부는, 상기 사용자의 두 눈 중 일측 눈이 기 설정된 시간 이상 감기는 경우 상기 제1 이벤트 신호를 발생시키고, 상기 사용자의 두 눈 중 타측 눈이 기 설정된 시간 이상 감기는 경우 상기 제2 이벤트 신호를 발생시킬 수 있다. 상기 제2 이벤트 신호는, 상기 사용자의 타측 눈의 감김 유지 시간 정보를 포함하고, 상기 화면 이동 속도 조절부는, 상기 타측 눈의 감김 유지 시간 정보에 따라 상기 화면 이동 속도를 기 설정된 화면 이동 속도보다 빠르게 변경시킬 수 있다.
본 발명의 일 실시 예에 따른 가상 현실 표시 장치의 제어 방법은, 하나 이상의 프로세서들, 및 상기 하나 이상의 프로세서들에 의해 실행되는 하나 이상의 프로그램들을 저장하는 메모리를 구비하며, 사용자의 머리 부분에 착용 가능한 가상 현실 표시 장치에서 수행되는 방법으로서, 상기 사용자의 머리 부분의 자세를 검출하여 사용자 자세 변화 정보를 생성하는 단계, 상기 사용자의 눈 감김에 따라 제1 이벤트 신호 및 제2 이벤트 신호를 발생시키는 단계, 상기 제1 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 기준 영상의 기준 좌표를 상기 사용자 자세 변화 정보에 따라 변경시키는 단계, 및 상기 제2 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 화면 이동 속도를 상기 사용자 자세 변화 정보에 따라 변경시키는 단계를 포함한다.
상기 제1 이벤트 신호를 발생시키는 단계는, 상기 사용자의 두 눈 중 일측 눈이 기 설정된 시간 이상 감기는 경우, 상기 제1 이벤트 신호를 발생시키고, 상기 제2 이벤트 신호를 발생시키는 단계는, 상기 사용자의 두 눈 중 타측 눈이 기 설정된 시간 이상 감기는 경우, 상기 제2 이벤트 신호를 발생시킬 수 있다.
상기 제2 이벤트 신호는, 상기 사용자의 타측 눈의 감김 유지 시간 정보를 포함하고, 상기 3D 영상 그룹의 화면 이동 속도를 상기 사용자 자세 변화 정보에 따라 변경시키는 단계는, 상기 타측 눈의 감김 유지 시간 정보에 따라 상기 화면 이동 속도를 기 설정된 화면 이동 속도보다 빠르게 변경시킬 수 있다.
본 발명의 실시예에 의하면, 사용자에 의해 제1 이벤트가 발생하는 경우, 3D 영상 그룹의 기준 영상의 기준 좌표를 사용자 자세 변화 정보에 따라 변경시킴으로써, 사용자의 자세가 변경된 상태에서도 사용자가 기준 영상을 정면에서 볼 수 있도록 할 수 있게 된다.
또한, 사용자에 의해 제2 이벤트가 발생하는 경우, 제2 이벤트와 연관된 눈의 감김 유지 시간에 따라 3D 영상 그룹의 화면 이동 속도를 기 설정된 이동 속도보다 빠르게 변경시킴으로써, 사용자가 자세 변화를 크게 하지 않아도 3D 영상의 시야 범위를 넓힐 수 있게 하여, 자유롭게 몸을 움직이지 못하는 일반인, 장애인들의 작은 움직임에도 화면의 이동속도를 빠르게 하여 가상 공간의 모든 공간의 장면들을 볼 수 있도록 할 수 있는 방법을 제공하여 가상현실 장치의 화면 시청을 원활하게 지속 할 수 있다.
도 1은 본 발명의 일 실시예에 따른 가상 현실 표시 장치의 블록도
도 2는 본 발명의 일 실시예에 따른 가상 현실 표시 장치의 제어 방법에 대 한 흐름도
도 3은 본 발명의 일 실시예에 따른 가상 현실 표시 장치에서, 제2 이벤트 신호에 따른 화면 이동 속도 변화를 설명하기 위한 도면
도 4는 본 발명의 일 실시예에 따른 가상 현실 표시 장치에서 사용 되기에 적합한 컴퓨팅 장치를 포함하는 컴퓨팅 환경을 예시하여 설명하기 위한 블록 도
이하, 도면을 참조하여 본 발명의 구체적인 실시형태를 설명하기로 한다. 이하의 상세한 설명은 본 명세서에서 기술된 방법, 장치 및/또는 시스템에 대한 포괄적인 이해를 돕기 위해 제공된다. 그러나 이는 예시에 불과하며 본 발명은 이에 제한되지 않는다.
본 발명의 실시예들을 설명함에 있어서, 본 발명과 관련된 공지기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 상세한 설명에서 사용되는 용어는 단지 본 발명의 실시예들을 기술하기 위한 것이며, 결코 제한적이어서는 안 된다. 명확하게 달리 사용되지 않는 한, 단수 형태의 표현은 복수 형태의 의미를 포함한다. 본 설명에서, "포함" 또는 "구비"와 같은 표현은 어떤 특성들, 숫자들, 단계들, 동작들, 요소들, 이들의 일부 또는 조합을 가리키기 위한 것이며, 기술된 것 이외에 하나 또는 그 이상의 다른 특성, 숫자, 단계, 동작, 요소, 이들의 일부 또는 조합의 존재 또는 가능성을 배제하도록 해석되어서는 안 된다.
이하의 설명에 있어서, 신호 또는 정보의 "전송", "통신", "송신", "수신" 기타 이와 유사한 의미의 용어는 일 구성요소에서 다른 구성요소로 신호 또는 정보가 직접 전달되는 것뿐만이 아니라 다른 구성요소를 거쳐 전달되는 것도 포함한다. 특히 신호 또는 정보를 일 구성요소로 "전송" 또는 "송신"한다는 것은 그 신호 또는 정보의 최종 목적지를 지시하는 것이고 직접적인 목적지를 의미하는 것이 아니다. 이는 신호 또는 정보의 "수신"에 있어서도 동일하다. 또한 본 명세서에 있어서, 2 이상의 데이터 또는 정보가 "관련"된다는 것은 하나의 데이터(또는 정보)를 획득하면, 그에 기초하여 다른 데이터(또는 정보)의 적어도 일부를 획득할 수 있음을 의미한다.
도 1은 본 발명의 일 실시예에 따른 가상 현실 표시 장치의 구성을 나타낸 블럭도이다.
도 1을 참조하면, 가상 현실 표시 장치(100)는 표시부(102), 사용자 자세 검출부(104), 이벤트 검출부(106), 3D 영상 좌표 변환부(108), 화면 이동 속도 조절부(110), 및 저장부(112)를 포함할 수 있다.
여기서, 가상 현실 표시장치(100)는 사용자의 머리 부분에 착용 가능한 형태로 구현될 수 있다. 즉, 가상 현실 표시 장치(100)는 헤드 마운티드 디스플레이 (Head Mounted Display : HMD)로 구현될 수 있다. 그러나 이에 한정하는 것은 아니며, 가상 현실 표시 장치(100)는 가상의 3D 영상을 표시할 수 있는 별도의 전자 기기(예를 들어, 스마트폰 등)가 장착되어 구현될 수도 있다.
표시부(102)는 3D 영상을 화면에 표시하는 역할을 한다. 표시부(102)는 예를 들어, LCD 패널, OLED 패널, PDP, 투명 디스플레이등을 포함할 수 있다. 표시부(102)는 저장부(112)에 저장된 3D 영상을 화면에 표시할 수 있다. 표시부(102)는 3D 영상 좌표 변환부(108)에 의해 영상의 기준 좌표가 변경된 3D 영상을 화면에 표시할 수 있고, 화면 이동 속도 조절부(110)에 의해 화면 이동 속도가 변경된 화면을 표시할 수 있다.
사용자 자세 검출부(104)는 사용자의 자세를 검출할 수 있다. 구체적으로, 사용자 자세 검출부(104)는 가상 현실 표시 장치(100)를 착용하고 있는 사용자의 머리 부분의 자세를 검출할 수 있다. 사용자 자세 검출부(104)는 사용자 머리 부분의 3축 방향(X축 방향, Y축 방향, 및 Z축 방향)의 자세를 검출할 수 있다. 사용자 자세 검출부(104)는 사용자의 기준 자세로부터 변화된 자세 정도를 검출하여 사용자 자세 변화 정보를 생성할 수 있다. 여기서, 사용자의 기준 자세는 사용자의 머리가 꼿꼿이 선 상태에서 정면을 바라보고 있는 자세일 수 있다. 사용자 자세 검출부(104)는 자이로센서, 지자계센서, 가속도 센서등을 이용하여 사용자의 변화된 자세 정도를 검출할 수 있다.
이벤트 검출부(106)는 사용자의 눈감김에 따라 기 설정된 적어도 하나의 이벤트를 검출할 수 있다. 여기서, 이벤트는 제1 이벤트 및 제2 이벤트를 포함할 수 있다. 상기 제1 이벤트는 사용자의 두 눈 중 어느 하나(예를 들어, 우측 눈)가 기 설정된 시간 이상 감기는 것을 통해 발생될 수 있으며, 사용자의 자세에 따라 3D 영상 그룹의 기준 영상의 기준좌표를 변경하기 위한 것일 수 있다. 상기 제2 이벤트는 사용자의 두 눈 중 다른 하나(예를 들어, 좌측 눈)가 기 설정된 시간 이상 감기는 것을 통해 발생될 수 있으며, 사용자의 자세에 따라 3D 영상 그룹의 화면 이동 속도를 변경하기 위한 것일 수 있다.
이벤트 검출부(106)는 제1 이벤트와 연관된 눈(예를 들어, 우측 눈)이 기 설정된 시간 이상 감기는 것을 검출하는 경우, 제1 이벤트 신호를 발생시킬 수 있다. 상기 이벤트 검출부(106)는 제2 이벤트와 연관된 눈(예를 들어, 좌측 눈)이 기 설정된 시간 이상 감기는 경우, 제2 이벤트 신호를 발생시킬 수 있다. 제2 이벤트 신호에는 제2 이벤트와 연관된 눈의 감김 유지 시간 정보가 포함될 수 있다. 상기 이벤트 검출부 (106)는 사용자의 눈 감김을 검출하기 위한 적외선 센서 또는 카메라등을 구비할 수 있다.
이벤트 검출부(106)는 가상 현실 표시 장치(100)를 사용자가 머리 부분에 착용하는 경우, 일정 시간 동안 해당 사용자의 눈깜박임을 모니터링할 수 있다. 이벤트 검출부(106)는 해당 사용자의 눈깜박임 평균 시간을 산출하고, 상기 기 설정된 시간을 해당 사용자의 눈깜박임 평균 시간보다 긴 시간(예를 들어, 해당 사용자의 눈깜박임 평균 시간의 3배의 시간 등)으로 설정할 수 있다.
3D 영상 좌표 변환부(108)는 상기 이벤트 검출부(106)에서 제1 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 기준 영상의 기준 좌표(예를 들어, 기준 영상의 중심점에 해당하는 좌표일 수 있음)를 사용자 자세 검출부(104)가 생성한 자세 변화 정보에 따라 변경시킬 수 있다. 여기서, 기준 영상은 사용자의 기준 자세에 대응하여 (예를 들어, 꼿꼿이 서 있을때) 표시되는 영상을 의미할 수 있다. 그리고 3D 영상 그룹에 속하는 각 영상들은 기준 영상과 그 좌표가 매칭되어 있을 수 있다. 이때, 이벤트 검출부(106)에서 제1 이벤트 신호가 발생하는 경우, 3D 영상 좌표 변환부(108)는 3D 영상 그룹의 기준 영상의 기준 좌표를 사용자 자세 변화 정보에 따라 변경시킴으로써, 사용자의 자세가 변경된 상태에서도 사용자가 기준 영상을 정면에서 볼 수 있도록 할 수 있게 된다.
예를 들어, 사용자가 가상 현실 표시 장치(100)를 머리 부분에 착용한 상태에서 소파에 누워 있는 경우, 가상 현실 표시 장치(100)는 누워 있는 자세에서 3D 영상 그룹의 기준 영상이 사용자의 정면에 표시되도록 상기 기준 영상의 기준 좌표를 변경시킬 수 있다. 여기서, 기준 영상의 기준 좌표가 사용자 자세 변화 정보에 따라 변경됨으로써, 기준 영상이 포함된 3D 영상 그룹의 다른 영상들의 기준 좌표들도 그에 대응하여 변경되게 된다. 이로써, 사용자의 자세에 따라 3D 영상 그룹의 전체적인 화면 시점을 변화시킬 수 있다. 이 경우, 사용자는 자신이 편안한 상태에서 3D 영상을 감상할 수 있게 된다.
화면 이동 속도 조절부(110)는 이벤트 검출부(106)에서 제2 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 화면 이동 속도를 사용자 자세 변화 정보에 따라 변경시킬 수 있다. 이때, 화면 이동 속도 조절부(110)는 제2 이벤트 신호에 포함되는 눈 감김 유지 시간에 따라 3D 영상 그룹의 화면 이동 속도를 기 설정된 이동 속도보다 빠르게 변경시킬 수 있다. 이로써 사용자의 작은 움직임에도 3D 영상을 볼 수 있는 시야 범위가 넓어지게 된다.
저장부(112)는 표시부(102)에 표시되는 3D 영상 그룹을 저장할 수 있다. 상기 3D 영상 그룹은 기준 영상을 기준으로 복수 개의 영상들이 그 좌표가 매칭(동기화)된 것일 수 있다.
본 발명의 실시예에 의하면, 사용자에 의해 제1 이벤트가 발생하는 경우, 3D 영상 그룹의 기준 영상의 기준 좌표를 사용자 자세 변화 정보에 따라 변경시킴으로써, 사용자의 자세가 변경된 상태에서도 사용자가 기준 영상을 정면에서 볼 수 있도록 할 수 있게 된다.
또한, 사용자에 의해 제2 이벤트가 발생하는 경우, 제2 이벤트와 연관된 눈의 감김 유지 시간에 따라 3D 영상 그룹의 화면 이동 속도를 기 설정된 이동 속도보다 빠르게 변경시킴으로써, 사용자가 자세 변화를 크게 하지 않아도 3D 영상의 시야 범위를 넓힐 수 있게 된다.
도 2는 본 발명의 일 실시예에 따른 가상현실 표시 장치의 제어 방법을 나타낸 흐름도이다. 도시된 흐름도에서는 상기 방법을 복수 개의 단계로 나누어 기재하였으나, 적어도 일부의 단계들은 순서를 바꾸어 수행되거나, 다른 단계와 결합되어 함께 수행되거나, 생략되거나, 세부 단계들로 나뉘어 수행되거나, 또는 도시되지 않은 하나 이상의 단계가 부가되어 수행될 수 있다.
도 2를 참조하면, 가상 현실 표시 장치(100)는 기 설정된 시간 이상 사용자의 눈이 감겨 있는지 여부를 확인한다(S 101). 여기서, 기 설정된 시간은 사용자의 자연스런 눈깜박임 시간보다 더 긴 시간(예를 들어, 2초 이상)으로 설정될 수 있다.
단계 S 101의 확인 결과, 기 설정된 시간 이상 사용자의 눈이 감겨 있는 경우, 가상 현실 표시 장치(100)는 사용자의 감김 눈이 제1 이벤트와 연관된 눈 (예를 들어, 우측 눈)인지를 확인한다(S 103). 단계 S 103의 확인 결과, 사용자의 감김 눈이 제1 이벤트와 연관된 눈인 경우, 가상 현실 표시 장치(100)는 제1 이벤트 신호를 발생시킨다 (S 105).
다음으로, 가상 현실 표시 장치(100)는 사용자의 자세 변화 정보에 따라 3D 영상 그룹의 기준 영상의 기준 좌표를 변경시킨 후(S 107), 3D 영상을 화면에 표시한다(S 109). 여기서, 가상 현실 표시 장치는(100)는 단계 S 101를 확인함과 동시에 사용자의 자세 변화를 검출할 수 있다.
단계 S 103의 확인 결과, 사용자의 감김 눈이 제1 이벤트와 연관된 눈이 아닌 경우, 가상 현실 장치(100)는 사용자의 감김 눈이 제2 이벤트와 연관된 눈(예를 들어, 좌측 눈)인 것으로 판단하여 제2 이벤트 신호를 발생시킨다(S 111). 다음으로, 가상 현실 표시 장치(100)는 제2 이벤트 신호에 포함된 눈 감김 유지 시간 및 사용자의 자세 변화 정보를 기반으로 3D 영상 그룹의 화면 이동 속도를 변경시킨 후(S 113), 3D 영상을 화면에 표시한다 (S 115).
도 3은 본 발명의 일 실시예에서 제2 이벤트 신호 발생에 따라 3D 영상 그룹의 화면 이동 속도가 변경되는 상태를 설명하기 위한 도면이다. 먼저 도 3 의 (a)를 참조하면, 사용자가 머리 부분을 제1 각도(θ1)만큼 우측으로 회전시키는 경우, 가상 현실 표시 장치(100)는 3D 영상 그룹의 가상 좌표에서 기준 영상(A)을 기준으로 3D 영상 그룹을 전체적으로 제1 각도(θ1)에 대응하는 제1 좌표 거리(D1)만큼 이동시켜 사용자의 머리가 움직인 정도에 대응하여 3D 영상을 화면에 표시하게 된다.
반면, 도 3의 (b)를 참조하면, 제2 이벤트 신호가 발생한 상태에서 사용자가 머리 부분을 제1 각도(θ1)만큼 우측으로 회전시키는 경우, 가상 현실 표시 장치(100)는 3D 영상 그룹을 전체적으로 제1 각도에 대응하는 제1 좌표 거리(D1)만큼만 좌측으로 이동시키는 것이 아니라, 제2 이벤트 신호에 포함된 눈 감김 유지 시간에 따라 제2 좌표 거리(D2)만큼 추가적으로 이동시키게 된다.
즉, 제2 이벤트 신호가 발생된 상태에서, 가상 현실 표시 장치(100)는 사용자가 머리 부분을 제1 각도(θ1)만큼 우측으로 회전시켰을 때, 제1 좌표거리(D1) + 제2 좌표거리(D2)만큼 3D 영상 그룹을 전체적으로 이동시켜 화면에 표시하게 된다.
도 4는 예시적인 실시예들에서 사용되기에 적합한 컴퓨팅 장치를 포함하는 컴퓨팅 환경(10)을 예시하여 설명하기 위한 블록도이다. 도시된 실시예에서, 각 컴포넌트들은 이하에 기술된 것 이외에 상이한 기능 및 능력을 가질 수 있고, 이하에 기술된 것 이외에도 추가적인 컴포넌트를 포함할 수 있다.
도시된 컴퓨팅 환경(10)은 컴퓨팅 장치(12)를 포함한다. 일 실시예에서, 컴퓨팅 장치(12)는 가상 현실 표시 장치(예를 들어, 가상 현실 표시 장치(100)일 수 있다.
컴퓨팅 장치(12)는 적어도 하나의 프로세서(14), 컴퓨터 판독 가능 저장 매체(16) 및 통신 버스(18)를 포함한다. 프로세서(14)는 컴퓨팅 장치(12)로 하여금 앞서 언급된 예시적인 실시예에 따라 동작하도록 할 수 있다. 예컨대, 프로세서(14)는 컴퓨터 판독 가능 저장 매체(16)에 저장된 하나 이상의 프로그램들을 실행할 수 있다. 상기 하나 이상의 프로그램들은 하나 이상의 컴퓨터 실행 가능 명령어를 포함할 수 있으며, 상기 컴퓨터 실행 가능 명령어는 프로세서(14)에 의해 실행되는 경우 컴퓨팅 장치(12)로 하여금 예시적인 실시예에 따른 동작들을 수행하도록 구성될 수 있다.
컴퓨터 판독 가능 저장 매체(16)는 컴퓨터 실행 가능 명령어 내지 프로그램 코드, 프로그램 데이터 및/또는 다른 적합한 형태의 정보를 저장하도록 구성된다. 컴퓨터 판독 가능 저장 매체(16)에 저장된 프로그램(20)은 프로세서(14)에 의해 실행 가능한 명령어의 집합을 포함한다. 일 실시예에서, 컴퓨터 판독 가능 저장 매체(16)는 메모리(랜덤 액세스 메모리와 같은 휘발성 메모리, 비휘발성 메모리, 또는 이들의 적절한 조합), 하나 이상의 자기 디스크 저장 디바이스들, 광학 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 그 밖에 컴퓨팅 장치(12)에 의해 액세스되고 원하는 정보를 저장할 수 있는 다른 형태의 저장 매체, 또는 이들의 적합한 조합일 수 있다.
통신 버스(18)는 프로세서(14), 컴퓨터 판독 가능 저장 매체(16)를 포함하여 컴퓨팅 장치(12)의 다른 다양한 컴포넌트들을 상호 연결한다.
컴퓨팅 장치(12)는 또한 하나 이상의 입출력 장치(24)를 위한 인터페이스를 제공하는 하나 이상의 입출력 인터페이스(22) 및 하나 이상의 네트워크 통신 인터페이스(26)를 포함할 수 있다. 입출력 인터페이스(22) 및 네트워크 통신 인터페이스(26)는 통신 버스(18)에 연결된다. 입출력 장치(24)는 입출력 인터페이스(22)를 통해 컴퓨팅 장치(12)의 다른 컴포넌트들에 연결될 수 있다. 예시적인 입출력 장치(24)는 포인팅 장치(마우스 또는 트랙패드 등), 키보드, 터치 입력 장치(터치패드 또는 터치스크린 등), 음성 또는 소리 입력 장치, 다양한 종류의 센서 장치 및/또는 촬영 장치와 같은 입력 장치, 및/또는 디스플레이 장치, 프린터, 스피커 및/또는 네트워크 카드와 같은 출력 장치를 포함할 수 있다. 예시적인 입출력 장치(24)는 컴퓨팅 장치(12)를 구성하는 일 컴포넌트로서 컴퓨팅 장치(12)의 내부에 포함될 수도 있고, 컴퓨팅 장치(12)와는 구별되는 별개의 장치로 컴퓨팅 장치(12)와 연결될 수도 있다.
10: 컴퓨팅 환경
12: 컴퓨팅 장치
14: 프로세서
16: 컴퓨터 판독 가능 저장 매체
18: 통신 버스
20: 프로그램
22: 입출력 인터페이스
24: 입출력 장치
26: 네트워크 통신 인터페이스
100 : 가상 현실 표시 장치
102 : 표시부
104 : 사용자 자세 검출부
106 : 이벤트 검출부
108 : 3D 영상 좌표 변환부
110 : 화면 이동 속도 조절부
112 : 저장부

Claims (6)

  1. 사용자의 머리 부분에 착용 가능한 가상 현실 표시 장치로서,
    상기 사용자의 머리 부분의 자세를 검출하여 사용자 자세 변화 정보를 생성하는 사용자 자세 검출부;
    상기 사용자의 눈 감김에 따라 제1 이벤트 신호 및 제2 이벤트 신호를 발생시키는 이벤트 검출부;
    상기 제1 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 기준 영상의 기준 좌표를 상기 사용자 자세 변화 정보에 따라 변경시키는 3D 영상 좌표 변환부; 및
    상기 제2 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 화면 이동 속도를 상기 사용자 자세 변화 정보에 따라 변경시키는 화면 이동 속도 조절부를 포함하는, 가상 현실 표시 장치.
  2. 청구항 1에 있어서,
    상기 이벤트 검출부는,
    상기 사용자의 두 눈 중 일측 눈이 기 설정된 시간 이상 감기는 경우 상기 제1 이벤트 신호를 발생시키고,
    상기 사용자의 두 눈 중 타측 눈이 기 설정된 시간 이상 감기는 경우 상기 제2 이벤트 신호를 발생시키는, 가상 현실 표시 장치.
  3. 청구항 2에 있어서,
    상기 제2 이벤트 신호는,
    상기 사용자의 타측 눈의 감김 유지 시간 정보를 포함하고,
    상기 화면 이동 속도 조절부는,
    상기 타측 눈의 감김 유지 시간 정보에 따라 상기 화면 이동 속도를 기 설정된 화면 이동 속도보다 빠르게 변경시키는, 가상 현실 표시 장치.
  4. 하나 이상의 프로세서들, 및
    상기 하나 이상의 프로세서들에 의해 실행되는 하나 이상의 프로그램들을 저장하는 메모리를 구비하며, 사용자의 머리 부분에 착용 가능한 가상 현실 표시 장치에서 수행되는 방법으로서,
    상기 사용자의 머리 부분의 자세를 검출하여 사용자 자세 변화 정보를 생성하는 단계;
    상기 사용자의 눈 감김에 따라 제1 이벤트 신호 및 제2 이벤트 신호를 발생시키는 단계;
    상기 제1 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 기준 영상의 기준 좌표를 상기 사용자 자세 변화 정보에 따라 변경시키는 단계; 및
    상기 제2 이벤트 신호가 발생하는 경우, 3D 영상 그룹의 화면 이동 속도를 상기 사용자 자세 변화 정보에 따라 변경시키는 단계를 포함하는, 방법.
  5. 청구항 4에 있어서,
    상기 제1 이벤트 신호를 발생시키는 단계는, 상기 사용자의 두 눈 중 일측 눈이 기 설정된 시간 이상 감기는 경우, 상기 제1 이벤트 신호를 발생시키고, 상기 제2 이벤트 신호를 발생시키는 단계는, 상기 사용자의 두 눈 중 타측 눈이 기 설정된 시간 이상 감기는 경우, 상기 제2 이벤트 신호를 발생시키는, 방법.
  6. 청구항 5에 있어서,
    상기 제2 이벤트 신호는, 상기 사용자의 타측 눈의 감김 유지 시간 정보를 포함하고, 상기 3D 영상 그룹의 화면 이동 속도를 상기 사용자 자세 변화 정보에 따라 변경시키는 단계는, 상기 타측 눈의 감김 유지 시간 정보에 따라 상기 화면 이동 속도를 기 설정된 화면 이동 속도보다 빠르게 변경시키는, 방법.
KR1020160163490A 2016-12-02 2016-12-02 가상 현실 표시 장치 및 그 제어 방법 KR20180063581A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160163490A KR20180063581A (ko) 2016-12-02 2016-12-02 가상 현실 표시 장치 및 그 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160163490A KR20180063581A (ko) 2016-12-02 2016-12-02 가상 현실 표시 장치 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20180063581A true KR20180063581A (ko) 2018-06-12

Family

ID=62622483

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160163490A KR20180063581A (ko) 2016-12-02 2016-12-02 가상 현실 표시 장치 및 그 제어 방법

Country Status (1)

Country Link
KR (1) KR20180063581A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110308794A (zh) * 2019-07-04 2019-10-08 郑州大学 具有两种显示模式的虚拟现实头盔及显示模式的控制方法
CN113574592A (zh) * 2019-03-19 2021-10-29 佳能株式会社 电子设备、电子设备的控制方法、程序和存储介质
KR20220144248A (ko) * 2021-04-19 2022-10-26 김주형 현실공간과 가상공간의 디지털 트윈을 이용한 이벤트 서비스 제공 시스템

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113574592A (zh) * 2019-03-19 2021-10-29 佳能株式会社 电子设备、电子设备的控制方法、程序和存储介质
CN110308794A (zh) * 2019-07-04 2019-10-08 郑州大学 具有两种显示模式的虚拟现实头盔及显示模式的控制方法
KR20220144248A (ko) * 2021-04-19 2022-10-26 김주형 현실공간과 가상공간의 디지털 트윈을 이용한 이벤트 서비스 제공 시스템

Similar Documents

Publication Publication Date Title
US11036292B2 (en) Menu navigation in a head-mounted display
US10949057B2 (en) Position-dependent modification of descriptive content in a virtual reality environment
US11756269B2 (en) Tangibility visualization of virtual objects within a computer-generated reality environment
US9829989B2 (en) Three-dimensional user input
US10115235B2 (en) Method for controlling head mounted display, and system for implemeting the method
US20130050069A1 (en) Method and system for use in providing three dimensional user interface
WO2015112361A1 (en) Environmental interrupt in a head-mounted display and utilization of non field of view real estate
EP3369091A1 (en) Systems and methods for eye vergence control
KR20160147735A (ko) 헤드부 위치 검출 장치 및 헤드부 위치 검출 방법, 화상 처리 장치 및 화상 처리 방법, 표시 장치, 및 컴퓨터 프로그램
JP2017138832A (ja) 仮想空間の提供方法、およびプログラム
JP2019125215A (ja) 情報処理装置、情報処理方法、及び記録媒体
KR20180063581A (ko) 가상 현실 표시 장치 및 그 제어 방법
KR101857466B1 (ko) 헤드 마운트 디스플레이 및 그 캘리브레이션 방법
JP2017021824A (ja) ヘッドマウントディスプレイ制御方法、および、ヘッドマウントディスプレイ制御プログラム
KR20170004816A (ko) 디스플레이 장치 및 그 제어 방법
KR20180055637A (ko) 전자 장치 및 그의 제어 방법
US11983306B2 (en) Peripheral tracking system and method
JP2017033465A (ja) 方法、および、プログラム
US20230376109A1 (en) Image processing apparatus, image processing method, and storage device
JP6448478B2 (ja) ヘッドマウントディスプレイを制御するプログラム。
JP2018190078A (ja) コンテンツ表示プログラム、コンピュータ装置、コンテンツ表示方法、及びコンテンツ表示システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E601 Decision to refuse application