KR102442811B1 - 자동차에서 적어도 한 쌍의 가상 현실 안경을 작동하기 위한 방법 및 시스템 - Google Patents

자동차에서 적어도 한 쌍의 가상 현실 안경을 작동하기 위한 방법 및 시스템 Download PDF

Info

Publication number
KR102442811B1
KR102442811B1 KR1020207013571A KR20207013571A KR102442811B1 KR 102442811 B1 KR102442811 B1 KR 102442811B1 KR 1020207013571 A KR1020207013571 A KR 1020207013571A KR 20207013571 A KR20207013571 A KR 20207013571A KR 102442811 B1 KR102442811 B1 KR 102442811B1
Authority
KR
South Korea
Prior art keywords
virtual
reality glasses
theme
vehicle
virtual reality
Prior art date
Application number
KR1020207013571A
Other languages
English (en)
Other versions
KR20200062328A (ko
Inventor
마르쿠스 퀴네
다니엘 프로펜디너
닐스 볼니
Original Assignee
아우디 아게
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아우디 아게 filed Critical 아우디 아게
Publication of KR20200062328A publication Critical patent/KR20200062328A/ko
Application granted granted Critical
Publication of KR102442811B1 publication Critical patent/KR102442811B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G25/00—Autocar-like self-drivers; Runways therefor
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00—Amusement arrangements
    • A63G31/16—Amusement arrangements creating illusions of travel
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Navigation (AREA)
  • Processing Or Creating Images (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

본 발명은 자동차(1)에서 적어도 한 쌍의 가상 현실 안경(4, 5)을 작동하기 위한 방법에 관한 것으로, 하기 단계들, 즉 가상 환경 내에서 특정한 가상 이동 유형을 규정하는 가상 테마를 설정하는 단계; 설정된 가상 테마에 가장 적합한 경로 설정을 갖는 경로를 선택하는 단계; 선택된 경로를 따라 주행하는 동안 자동차(1)의 고유 움직임을 검출하고, 가상 현실 안경(4, 5)을 착용한 차량 탑승자(2, 3)가 자동차(1)의 검출된 고유 움직임에 따라 그리고 설정된 가상 테마의 설정된 가상 이동 유형에 따라 가상 환경 내에서 이동하는 방식으로, 가상 현실 안경(4, 5)을 제어하는 단계를 포함한다. 본 발명은 또한 자동차(1)에서 적어도 한 쌍의 가상 현실 안경(4, 5)을 작동하기 위한 시스템(6)에 관한 것이다.

Description

자동차에서 적어도 한 쌍의 가상 현실 안경을 작동하기 위한 방법 및 시스템
본 발명은 자동차에서 적어도 한 쌍의 가상 현실 안경을 작동하기 위한 방법 및 시스템에 관한 것이다.
운전 작업을 수행하는 중에 예를 들어 지원을 위해 또는 오락을 위해 또는 휴식을 위해, 차량에서 몰입형 기술을 이용하는 사람이 앞으로 점점 많아질 것이다. 소위 시뮬레이터 병 또는 시뮬레이터 멀미(Simulator Sickness)가 발생할 수 있기 때문에, 특히 차량에서 가상 현실 애플리케이션의 이용은 문제가 될 수도 있다. 이는 일종의 특수한 형태의 가속도병(kinetosis)으로, 이것은 보이는 것과 느껴지는 고유 움직임의 부조화로 인해 발생할 수 있다. 즉, 가상 현실 안경의 착용자에게 주행 중인 차량에서 순서에 따라 실제로 발생하는 것과는 다른 움직임을 시각적으로 느끼게 하는 가상 콘텐츠가 경우에 따라서는 이러한 가상 현실 안경에 의해 가상 현실 안경의 착용자에게 표시된다.
이를 저지하는 공개된 방법은, 차량 내의 실제 움직임에 대응하는 콘텐츠 및 전자 데이터 안경을 이용한 본래의 가상 현실 콘텐츠 또는 증강 현실 콘텐츠의 표시의 지나친 과신(hubris)이다. DE 10 2014 019 579 A1호는 차량에서 전자 데이터 안경을 작동하기 위한 방법을 제시하고, 상기 방법에서 제 1 영역에 예를 들어 텍스트가 표시되고 제 2 영역에 차량의 실제 이동에 따라서 움직이는 콘텐츠가 표시된다.
DE 101 56 219 C1호는 가속도병 장애를 줄이기 위한 방법을 제시한다. 이와 관련하여, 광학 재생 장치를 통해 운행 중에 이미지 신호를 제공하는 것이 제안되며, 상기 이미지 신호는, 고려된 이미지의 시각적 인상이 승객에게 실제로 주관적으로 인지되는 위치- 및 움직임값과 상관 관계가 있도록, 주행에 따라서 수정된다.
또한, DE 10 2014 214 516 A1호는 일반적으로 자동차에서 전자 데이터 안경의 사용을 제시한다.
본 발명의 과제는, 주행 중인 자동차에서 가상 현실 안경을 작동할 때 이러한 안경의 착용자가 멀미를 느끼는 것을 방지할 수 있는 특히 신뢰적인 가능성을 제공하는 것이다.
상기 과제는 독립 특허 청구항의 특징들을 갖는 적어도 한 쌍의 가상 현실 안경을 작동하기 위한 방법 및 시스템에 의해 해결된다. 본 발명의 유효한 주요 개선에 따른 바람직한 실시예들은 종속 청구항에 명시되어 있다.
자동차에서 적어도 한 쌍의 가상 현실 안경을 작동하기 위한 본 발명에 따른 방법에서, 가상 환경 내에서 특정한 가상 이동 유형을 규정하는 가상 테마가 설정된다. 이러한 가상 테마는, 예를 들어 자동차의 가상 주행, 항공기의 가상 비행, 선박의 가상 운항 또는 이와 같은 것일 수 있다. 가상 테마는 바람직하게는 항상 해당 가상 환경 내에서 특정한 가상 이동 유형의 임의의 형태와 관련된다. 가상 테마 자체는 유희성, 정보성 또는 오락성이 있을 수 있다. 예를 들어, 가상 테마는 특히 실제 지형을 따라 또는 가상 지형을 따라 플라잉 카펫(flying carpet)을 이용한 가상 비행과 관련되는 것이 고려될 수도 있다. 원칙적으로, 특정한 가상 환경 내에서 특정한 가상 이동 유형을 규정하는 임의의 가상 테마가 설정될 수 있다.
본 발명에 따른 방법에서, 가상 테마를 설정한 후에 설정된 가상 테마에 가장 적합한 경로 설정을 갖는 경로가 선택된다. 선택된 경로를 따라 주행하는 동안, 자동차의 고유 움직임이 검출되고, 가상 현실 안경은, 가상 현실 안경을 착용한 차량 탑승자가 자동차의 검출된 고유 움직임에 따라 그리고 설정된 가상 테마의 설정된 가상 이동 유형에 따라 가상 환경 내에서 이동하는 방식으로 제어된다.
즉, 본 발명에 따르면, 차량 탑승자는 가상 현실 안경을 착용한 경우에 설정된 가상 테마에 따라 가상 환경 내에서 가상으로 이동하고, 차량 탑승자의 가상 이동은 자동차의 검출된 고유 움직임과 상관관계가 있는 한편, 상기 자동차는 실제의 선택된 경로를 따라 주행하는 것이 제공된다. 자동차가 예를 들어 우회전을 하면, 가상 현실 안경의 착용자는 디스플레이된 가상 환경 내에서도 우회전을 실시한다. 자동차가 예를 들어 언덕이 많은 지형을 오르내리면, 가상 현실 안경의 착용자는 디스플레이된 가상 환경 내에서도 상응하게 위아래로 움직인다.
경로는, 그 경로 설정이 설정된 가상 테마에 가장 적합하도록 선택됨으로써, 가상 현실 안경의 제어가 특히 간단하게 이루어질 수 있다. 실제 경로 설정이 실제 가상 테마에서 벗어난 정도에 따라, 디스플레이된 가상 콘텐츠, 즉 디스플레이된 가상 환경 내에서 가상 이동이 주행 상황에 대해 다시 동적으로 약간 조정되어야 하는 것이 필수적일 수 있다. 그러나 선택된 실제 경로의 유사성으로 인해, 설정된 가상 테마에 비해 가상 현실 안경의 제어 시 조정- 및 계산 복잡성은 비교적 낮다.
가상 현실 안경 측에서, 제공될 컴퓨팅 용량 및 경우에 따라서 저장 용량과 관련하여 비교적 낮은 하드웨어 복잡성으로, 가상 현실 안경을 착용한 차량 탑승자가 자동차의 검출된 고유 움직임에 따라 디스플레이된 가상 환경 내에서 가상으로 특히 사실적으로 이동하는 것이 보장될 수 있다. 가상 현실 안경의 착용자는 그러므로 디스플레이된 가상 환경에 완전히 몰입한다. 가상 이동이 적어도 실질적으로 자동차의 검출된 고유 움직임에 대응하도록 가상 현실 안경이 제어됨으로써, 전술한 시뮬레이터 멀미 또는 시뮬레이터 병이 이에 대해 민감한 사용자에게도 발생하지 않거나 최소로 감소하는 것이 보장될 수 있다.
또한, 실질적으로 임의의 주행 시 가상 현실 안경을 이용하여 특히 재미있는 가상 테마가 재생될 수 있으므로, 자동차의 주행 시 차량 탑승자에게 추가 장점이 발생한다. 자동차가 반드시 공공 도로에 있을 필요는 없다. 그 대신 예를 들어, 가상 현실 안경을 착용한 상태에서 자동차의 주행 시 경험이 매우 중요할 수 있다. 이 경우에 예를 들어, 비 공공 도로 및 차단된 구간도 적합한 경로 설정으로 통행될 수 있으므로, 가상 현실 안경을 이용하여 특히 몰입형 경험이 가능하다.
본 발명의 바람직한 실시예는, 경로로서, 가상 테마가 사전에 조정된 경로 설정을 갖는 경로가 선택되는 것을 제공한다. 따라서 바람직하게는, 가상 테마는 자동차의 주행이 이루어지기 전에도, 매우 특정한 경로 및 그것의 경로 설정에 대해 의도대로 조정되는 것이 제공된다. 이러한 조정된 가상 테마, 보다 정확하게는 이에 관한 데이터 세트는 예를 들어 가상 현실 안경 또는 다른 메모리에도 로딩될 수 있다. 매우 특정한 경로에 대해 사전에 조정된 가상 테마를 알면, 정확히 이러한 경로가 선택될 수 있고, 자동차는 상기 경로를 따라 이동한다. 특히 코너 주행 또는 오르막길 및 내리막길 주행과 관련하여 자동차의 결과적인 고유 움직임은, 디스플레이된 가상 환경 내에서 대응하는 가상 이동으로 변환하는데 특히 적합하다.
본 발명의 대안적인 바람직한 실시예는, 경로로서, 설정된 가상 테마에 가장 적합한 곡선 형태를 갖는 경로가 선택되는 것을 제공한다. 또한, 대안으로서 또는 추가로, 경로로서, 설정된 가상 테마에 가장 적합한 고도 프로파일을 갖는 경로가 선택되는 것이 제공될 수 있다. 매우 특정한 설정된 가상 테마는 매우 특정한 실제 경로에 대해 미리 조정되지 않아도 될 수 있다. 그 대신, 가상 테마가 설정된 후에, 예를 들어 자동차의 위치 주위의 특정한 검색 반경 내에서, 가능한 한 적합한 경로가 선택되는 것이 가능하고, 이 경우 특히 상기 경로의 고도 프로파일 및/또는 곡선 형태는 설정된 가상 테마에 가장 적합하다. 이러한 방법에서, 선택된 경로는 설정된 가상 테마에 특히 매우 적합하기 때문에, 가상 현실 안경에 의해 디스플레이된 가상 콘텐츠를 특히 간단한 방식으로 각각의 주행 상황에 대해 동적으로 조정하는 것도 특히 간단할 수 있다. 가상 테마가 예를 들어 특히 많은 커브가 있는 가상 환경 내에서 이동과 관련이 있는 경우, 경로는, 특히 예를 들어 특정한 목적지를 향한, 적은 커브를 갖는 다른 경로가 이용 가능할 경우에도, 많은 커브를 갖도록 선택될 수 있다. 이러한 방법은 반드시, 특정 대상에 특히 빠르게 도달하는 것이 중요하지 않고, 그 대신 선택된 경로가 설정된 가상 테마의 특성에 특히 매우 적합한 것이 중요하다.
본 발명의 다른 바람직한 실시예에 따르면, 복수의 가상 테마가 선택을 위해 제공되며, 상기 테마들은 각각의 가상 환경 내에서 각각 상이한 가상 이동 유형을 규정하며, 가상 테마는 주행을 위해 사용자 선택에 따라 설정되는 것이 제공된다. 따라서 차량 탑승자는 다수의 가상 테마 중에서 선택할 수 있으므로, 그에게 가장 적합한, 예를 들어 가장 흥미로운 테마를 선택할 수 있다. 탑승자의 선택에 따라서 가장 적합한 경로의 선택은 이번에도 전술한 방법에 따라 이루어진다.
본 발명의 다른 바람직한 실시예는, 자동차가 선택된 경로를 반자율 또는 완전 자율로 출발하는 것을 제공한다. 특히 후자의 경우에, 통행 경로에 따라 경우에 따라서는 운전자가 자동차에 앉아 있지 않아도 된다. 자동차가 선택된 경로를 반자율, 완전 자율 또는 수동으로 주행하는지와 무관하게, 본 방법은 예를 들어 택시 회사 등과 같은 모빌리티 서비스 제공자에 의해 부가 서비스로서 제공될 수 있다. 이러한 모빌리티 서비스 제공자는, 본 발명에 따른 방법 또는 본 발명에 따른 방법의 바람직한 실시예의 제공을 통해 경쟁사와 차별화하기 위해 그리고 추가 수입원을 마련하기 위해, 그들의 차량에 적절한 기술을 설치할 수 있다.
방법이 서비스 형태로 예약되는 경우에, 특히 바람직하다. 다시 말해서, 본 방법은 서비스로서 제공되고 예약될 수 있다. 이로 인해 전술한 장점들이 얻어진다. 예약은 예를 들어, 소속 차량에 대해 또는 다른 차량의 주행 중에도 이루어질 수 있다.
본 발명의 다른 바람직한 실시예는, 적어도 하나의 제 2 가상 현실 안경은, 제 2 가상 현실 안경을 착용한 다른 차량 탑승자가 자동차의 검출된 고유 움직임에 따라 그리고 설정된 가상 테마의 설정된 가상 이동 유형에 따라 가상 환경 내에서 가상으로 이동하는 방식으로 제어되는 것을 제공한다. 바람직하게는 차량 탑승자 모두가 검출되고, 차량 탑승자의 각각의 가상 표현은 가상 현실 안경에 의해 디스플레이된다. 따라서 자동차 내에 다수의 차량 탑승자가 앉아 있고 각각 가상 현실 안경을 착용한 경우, 그들은 제공된 가상 테마에 따라, 예를 들어 동일한 가상 환경 내에서 가상으로 함께 이동할 수 있고, 서로 대화하고 각각의 표현을 서로 가상의 방식으로 인지할 수 있다. 다수의 탑승자도 한 출발지에서 한 목적지로 이동할 수 있고, 그동안에 주행 중에 유희성, 정보성 또는 순수 오락성의 높은 몰입 경험이 차량 탑승자에게 제공된다. 전술한 바와 같이, 차량 탑승자들은 바람직하게는 디스플레이된 가상 환경 내에서 서로를 볼 수도 있고, 설정된 가상 테마에 따라 함께 대화를 실시한다.
자동차에서 적어도 한 쌍의 가상 현실 안경을 작동하기 위한 본 발명에 따른 시스템은 가상 환경 내에서 특정한 가상 이동 유형을 규정하는 가상 테마를 설정하도록; 설정된 가상 테마에 가장 적합한 경로 설정을 갖는 경로를 선택하도록; 선택된 경로를 따라 주행하는 동안 자동차의 검출된 고유 움직임에 기초하여, 가상 현실 안경을 착용한 차량 탑승자가 자동차의 검출된 고유 움직임에 따라 그리고 설정된 가상 테마의 설정된 가상 이동 유형에 따라 가상 환경 내에서 가상으로 이동하는 방식으로 가상 현실 안경을 제어하도록 구성된다. 본 발명에 따른 방법의 바람직한 실시예는, 본 발명에 따른 시스템의 바람직한 실시예로 간주되고, 그 반대도 마찬가지이며, 상기 시스템은 특히 방법 단계들을 수행하기 위한 수단을 갖는다.
본 발명의 다른 장점, 특징 및 세부 사항은 바람직한 실시예의 하기 설명 및 도면에 제시된다. 상기 설명에 언급된 특징들 및 특징 조합과 이하 도면 설명 및/또는 도면에 단독으로 도시된 특징들 및 특징 조합은 각각의 명시된 조합뿐만 아니라, 본 발명의 범위를 벗어나지 않으면서, 다른 조합으로도 이용될 수 있다.
도 1은 복수의 가상 현실 안경을 작동하기 위한 시스템이 배치된 자동차의 개략도를 도시한 도면.
자동차(1)가 도 1에 매우 개략적으로 도시되어 있다. 자동차(1)에는 각각 가상 현실 안경(4, 5)을 착용한 2명의 차량 탑승자(2, 3)가 앉아 있다. 또한, 2개의 가상 현실 안경(4, 5)을 작동하기 위한 시스템(6)이 자동차(1) 내에 배치된다. 또한, 자동차(1)의 주행 동안 자동차(1)의 고유 움직임을 검출하도록 설계된 검출 장치(7)도 자동차(1) 내에 배치된다.
검출 장치(7)는 가속, 속도 등을 검출하기 위해, 예를 들어 차량 측에 설치된 다양한 센서를 가질 수 있다. 대안으로서 또는 추가로, 검출 장치(7)는 본 개략도와 달리, 시스템(6)의 일부일 수도 있고, 이 경우 검출 장치(7) 자체는 차량 측이 아니라 시스템 측에 설치된 대응하는 센서들을 가질 수 있다. 전체 시스템(6)은 또한, 휴대용일 수도 있고, 즉, 반드시 차량에 고정 설치되지 않아도 된다. 이 경우에 시스템(6)은 일종의 휴대용 전자 하드웨어 박스로서 고려될 수 있다.
2개의 가상 현실 안경(4, 5)을 작동하기 위한 방법은 아래에 더 상세히 설명된다. 먼저, 시스템(6)에 의해 가상 환경 내에서 특정한 가상 이동 유형을 규정하는 적어도 하나의 가상 테마가 설정된다. 이러한 가상 테마는 차량 탑승자(2, 3)가 예를 들어 사전에 또는 자동차(1)의 주행 동안 서비스로서 예약할 수 있는 매우 특정한 형태의 가상 경험을 의미할 수 있다. 예를 들어, 자동차(1)는 완전 자율로 주행할 수 있어서, 차량 탑승자(2, 3) 모두 가상 현실 안경(4, 5)을 완벽히 안전하게 사용할 수 있다.
상기 가상 테마는 특정한 가상 환경 내에서 특정한 가상 이동 유형을 규정한다. 예를 들어, 가상 테마는 자동차의 가상 주행, 항공기의 가상 비행 또는 선박의 가상 운항과도 관련될 수 있다. 기본적으로 다양한 가상 테마 또는 가상 경험이 가능하다. 예를 들어, 우주선의 비행이 가상 테마로서 제공될 수도 있다. 바람직하게는 각각의 가상 테마는 매우 특정한 가상 이동 유형, 예를 들어 매우 특정한 관련 가상 환경 내에서 육상 차량, 항공기 또는 예를 들어 선박 또는 잠수함과 같은 수상 차량의 운행을 항상 포함한다. 또한, 시스템(6)은 차량 탑승자(2, 3)가 예를 들어 유료 서비스로서 선택하고 예약할 수 있는 복수의 테마를 선택을 위해 제공할 수 있다.
차량 탑승자(2, 3) 중 한 탑승자에 의해 매우 특정한 가상 테마가 선택되자마자, 대응하는 선택된 가상 테마에 가장 적합한 경로 설정을 갖는 경로가 선택된다. 기본적으로 2개의 상이한 방법이 있다. 경로로서 예를 들어, 가상 테마가 사전에 미리 조정된 경로 설정을 갖는 경로가 선택될 수 있다. 이 경우에, 예를 들어 가상 테마에 관한 데이터 세트는 매우 특정한 경로의 매우 특정한 경로 설정에 기초하여 사전에 생성되었다. 이 경우에 경로 설정과 관련하여 사전에 조정된 가상 테마에 특히 매우 적합한 이러한 경로가 정확히 경로로서 선택될 수 있다.
대안으로서 경로로서, 설정된 가상 테마에 가장 적합한 곡선 형태를 갖는 경로가 선택될 수도 있으며, 이 경우 추가로, 선택할 경로의 고도 프로파일은 설정된 가상 테마에 가장 적합하다는 사실이 고려될 수 있다. 이 경우에, 먼저 매우 특정한 가상 테마가 설정되고, 그 후에 복수의 가능한 경로 중 하나가 먼저 선택되며, 이 경우 가상 테마는 선택된 경로에 대해 사전에 미리 정확하게 조정되지 않았다. 경로 선택은 특히 곡선 형태 및 고도 프로파일과 관련하여, 경로 설정이 선택된 가상 테마에 적합하도록 선택됨으로써, 가상 현실 안경(4, 5)의 작동 시 선택된 경로에 대해 동적 적응을 위한 노력은 절제된다.
가상 테마가 설정되고 해당 경로가 선택되자마자, 자동차(1)는 경로를 따라 출발한다. 이 경우, 자동차(1)의 고유 움직임은 검출 장치(7)에 의해 연속적으로 검출된다. 관련 데이터는 시스템(6)으로 도입되고, 상기 시스템은, 각각의 차량 탑승자(2, 3)가 자동차(1)의 검출된 고유 움직임에 따라 그리고 설정된 가상 테마의 설정된 가상 이동 유형에 따라 각각의 가상 현실 안경(4, 5)에 의해 디스플레이된 가상 환경 내에서 가상으로 이동하는 방식으로, 2개의 가상 현실 안경(4, 5)을 제어한다.
자동차(1)가 좁은 우회전 주행을 하는 경우, 가상 현실 안경(4, 5)은 또한, 차량 탑승자(2, 3)에게 디스플레이된 가상 환경 내에서 마찬가지로 급하게 우회전을 통과하거나 그렇지 않으면 급하게 우회전을 통과해서 이동하는 것처럼 보이도록 제어된다. 자동차(1)의 임의의 다른 고유 움직임에도 동일하게 적용된다. 자동차(1)의 주행 동안, 차량 탑승자(2, 3)는, 예컨대 가상 현실 안경(4, 5)을 이용하여, 디스플레이된 가상 환경 내에서 특히 현실적인 느낌을 불러 일으키는 가상 이동을 경험한다. 한편으로는 이로 인해 자동차(1)의 주행이 특히 재미있어진다. 다른 한편으로 이로 인해, 가상 현실 안경(4, 5)을 착용하였음에도 불구하고 차량 탑승자(2, 3)가 멀미를 느끼는 것이 방지될 수 있다. 그 이유는 가상 현실 안경(4, 5)에 의해 디스플레이된 가상 콘텐츠는 차량 탑승자(2, 3)에게 자동차(1)의 고유 움직임으로 인해 그들의 평형 기관이 감지하는 것을 시각적으로 정확히 느끼게 하기 때문이다.
또한, 차량 탑승자(2, 3) 모두 예를 들어 자동차(1)의 주행 동안 카메라 시스템에 의해 검출될 수 있으며, 이 경우 각각의 카메라 데이터는 시스템(6)으로 전송된다. 상기 시스템은, 디스플레이된 가상 환경 내에서 동승자의 각각의 가상 표현이 착용한 가상 현실 안경(4, 5)에 의해 차량 탑승자(2, 3)에게 표시되도록 가상 현실 안경(4, 5)을 제어한다. 차량 탑승자(2, 3)는 가상 현실 안경(4, 5)을 이용해서 디스플레이된 가상 환경 내에서 각각의 가상 표현을 통해 서로를 볼 수 있고, 경우에 따라서는 서로 대화할 수도 있다.
가상 현실 안경(4, 5)을 작동하기 위한 전술한 시스템(6) 및 관련 방법은, 예를 들어 추가의 유료 서비스로서 택시 회사 또는 다른 모빌리티 서비스 제공자에 의해 제공될 수 있다. 따라서 차량 탑승자는 주행 중에 멀미를 느끼지 않고 다양한 가상 콘텐츠를 즐길 수 있는데, 그 이유는 디스플레이된 가상 콘텐츠는 주행 중에 자동차의 고유 움직임과 상관 관계가 있기 때문이다.

Claims (11)

  1. 자동차(1)에서 적어도 한 쌍의 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법으로서
    - 가상 환경 내에서 특정한 가상 이동 유형을 규정하는 가상 테마를 설정하는 단계;
    - 설정된 가상 테마에 가장 적합한 경로 설정을 갖는 경로를 선택하는 단계;
    - 선택된 경로를 따라 주행하는 동안 상기 자동차(1)의 고유 움직임을 검출하고, 상기 가상 현실 안경(4, 5)을 착용한 차량 탑승자(2, 3)가 상기 자동차(1)의 검출된 고유 움직임에 따라 그리고 설정된 가상 테마의 설정된 가상 이동 유형에 따라 가상 환경 내에서 이동하는 방식으로, 상기 가상 현실 안경(4, 5)을 제어하는 단계를 포함하는 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법.
  2. 제 1 항에 있어서, 가상 테마는 다음 가상 현실 중 하나와 관련되는 것을 특징으로 하는 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법:
    - 자동차(1)의 가상 주행;
    - 비행기의 가상 비행;
    - 선박의 가상 운항.
  3. 제 1 항 또는 제 2 항에 있어서, 경로로서, 가상 테마가 사전에 조정된 경로 설정을 갖는 경로가 선택되는 것을 특징으로 하는 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법.
  4. 제 1 항 또는 제 2 항에 있어서, 경로로서, 설정된 가상 테마에 가장 적합한 곡선 형태를 갖는 경로가 선택되는 것을 특징으로 하는 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법.
  5. 제 1 항 또는 제 2 항에 있어서, 경로로서, 설정된 가상 테마에 가장 적합한 고도 프로파일을 갖는 경로가 선택되는 것을 특징으로 하는 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법.
  6. 제 1 항 또는 제 2 항에 있어서, 복수의 가상 테마가 선택을 위해 제공되고, 상기 테마들은 각각의 가상 환경 내에서 각각 상이한 가상 이동 유형을 규정하며, 상기 가상 테마는 주행을 위해 사용자 선택에 따라 설정되는 것을 특징으로 하는 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법.
  7. 제 1 항 또는 제 2 항에 있어서, 상기 자동차(1)는 선택된 경로를 반자율 또는 완전 자율로 출발하는 것을 특징으로 하는 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법.
  8. 제 1 항 또는 제 2 항에 있어서, 상기 방법은 서비스 형태로 예약되는 것을 특징으로 하는 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법.
  9. 제 1 항 또는 제 2 항에 있어서, 적어도 하나의 제 2 가상 현실 안경(5)은, 상기 제 2 가상 현실 안경(5)을 착용한 다른 차량 탑승자(3)가 상기 자동차(1)의 검출된 고유 움직임에 따라 그리고 설정된 가상 테마의 설정된 가상 이동 유형에 따라 가상 환경 내에서 가상으로 이동하는 방식으로 제어되는 것을 특징으로 하는 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법.
  10. 제 9 항에 있어서, 차량 탑승자(2, 3) 모두가 검출되고, 상기 차량 탑승자(2, 3)의 각각의 가상 표현은 상기 가상 현실 안경(4, 5)에 의해 디스플레이되는 것을 특징으로 하는 가상 현실 안경(4, 5)을 작동시키기 위해 시스템에 의해 수행되는 방법.
  11. 자동차(1)에서 적어도 한 쌍의 가상 현실 안경(4, 5)을 작동시키기 위한 시스템(6)으로서,
    - 가상 환경 내에서 특정한 가상 이동 유형을 규정하는 가상 테마를 설정하도록;
    - 설정된 가상 테마에 가장 적합한 경로 설정을 갖는 경로를 선택하도록;
    - 선택된 경로를 따라 주행하는 동안 자동차(1)의 검출된 고유 움직임에 기초하여, 가상 현실 안경을 착용한 차량 탑승자(2, 3)가 상기 자동차(1)의 검출된 고유 움직임에 따라 그리고 설정된 가상 테마의 설정된 가상 이동 유형에 따라 가상 환경 내에서 가상으로 이동하는 방식으로 상기 가상 현실 안경(4, 5)을 제어하도록 구성되는, 가상 현실 안경(4, 5)을 작동시키기 위한 시스템(6).
KR1020207013571A 2017-10-12 2018-09-12 자동차에서 적어도 한 쌍의 가상 현실 안경을 작동하기 위한 방법 및 시스템 KR102442811B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102017218214.8A DE102017218214A1 (de) 2017-10-12 2017-10-12 Verfahren und System zum Betreiben wenigstens einer Virtual-Reality-Brille in einem Kraftfahrzeug
DE102017218214.8 2017-10-12
PCT/EP2018/074554 WO2019072479A1 (de) 2017-10-12 2018-09-12 Verfahren und system zum betreiben wenigstens einer virtual-reality-brille in einem kraftfahrzeug

Publications (2)

Publication Number Publication Date
KR20200062328A KR20200062328A (ko) 2020-06-03
KR102442811B1 true KR102442811B1 (ko) 2022-09-13

Family

ID=63683145

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020207013571A KR102442811B1 (ko) 2017-10-12 2018-09-12 자동차에서 적어도 한 쌍의 가상 현실 안경을 작동하기 위한 방법 및 시스템

Country Status (8)

Country Link
US (1) US11024081B2 (ko)
EP (1) EP3695292B1 (ko)
JP (1) JP7012153B2 (ko)
KR (1) KR102442811B1 (ko)
CN (1) CN111201503B (ko)
DE (1) DE102017218214A1 (ko)
ES (1) ES2901464T3 (ko)
WO (1) WO2019072479A1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8133568B2 (en) 2005-08-22 2012-03-13 Owens Corning Intellectual Capital, Llc Die cut insulation blanket
DE102019116711A1 (de) * 2019-06-19 2021-01-07 Bayerische Motoren Werke Aktiengesellschaft Verfahren, Vorrichtung und Fortbewegungsmittel zur Kinetosevermeidung während einer Verwendung einer Datenbrille im Fortbewegungsmittel
JP7384014B2 (ja) * 2019-12-06 2023-11-21 トヨタ自動車株式会社 表示システム
DE102019135721A1 (de) 2019-12-23 2021-06-24 Holoride Gmbh Verfahren zum Steuern einer Datenbrille während einer Fahrt eines Kraftfahrzeugs sowie Anzeigevorrichtung, Kraftfahrzeug, Analyseschaltung und VR-System
DE102020126954A1 (de) * 2020-10-14 2022-04-14 Bayerische Motoren Werke Aktiengesellschaft System und Verfahren zum Erfassen einer räumlichen Orientierung einer tragbaren Vorrichtung
CN112612139A (zh) * 2020-12-21 2021-04-06 上海影创信息科技有限公司 缓解人流对冲的ar眼镜提示方法和系统
CN112764703A (zh) * 2021-01-22 2021-05-07 领悦数字信息技术有限公司 用于车辆的显示方法、装置及存储介质
CN115442578A (zh) * 2021-12-29 2022-12-06 北京罗克维尔斯科技有限公司 车载vr眼镜图像显示方法、装置及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150294505A1 (en) 2014-04-14 2015-10-15 Harman International Industries, Incorporated Head mounted display presentation adjustment
JP2017020859A (ja) 2015-07-09 2017-01-26 三菱電機株式会社 ナビゲーション装置
US20170103571A1 (en) 2015-10-13 2017-04-13 Here Global B.V. Virtual Reality Environment Responsive to Predictive Route Navigation
JP2017110990A (ja) 2015-12-16 2017-06-22 アルパイン株式会社 走行支援装置および走行支援方法
JP2017146963A (ja) 2016-02-18 2017-08-24 国立大学法人名古屋大学 仮想空間表示システム
US20180040163A1 (en) 2016-08-05 2018-02-08 Uber Technologies, Inc. Virtual reality experience for a vehicle

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10156219C1 (de) 2001-11-15 2003-08-14 Daimler Chrysler Ag Verfahren und Vorrichtung zur Reduzierung von Kinetose-Störungen
JP2007133489A (ja) * 2005-11-08 2007-05-31 Sony Corp 仮想空間画像表示方法、装置、仮想空間画像表示プログラム及び記録媒体
US20080310707A1 (en) * 2007-06-15 2008-12-18 Microsoft Corporation Virtual reality enhancement using real world data
US8977489B2 (en) * 2009-05-18 2015-03-10 GM Global Technology Operations LLC Turn by turn graphical navigation on full windshield head-up display
US20130009994A1 (en) * 2011-03-03 2013-01-10 Thomas Casey Hill Methods and apparatus to generate virtual-world environments
DE102011115739A1 (de) * 2011-10-11 2013-04-11 Daimler Ag Verfahren zur Integration von virtuellen Objekten in Fahrzeuganzeigen
EP2620750A3 (en) * 2012-01-26 2015-06-17 Hyundai Motor Company Apparatus and method for generating a path
US9630631B2 (en) * 2013-10-03 2017-04-25 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
DE102014214516A1 (de) 2014-07-24 2016-01-28 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und Verfahren zur Wiedergabe von Daten in einer erweiterten Realität für einen Insassen eines Fahrzeugs
DE102015100943A1 (de) * 2015-01-22 2016-07-28 Mack Rides Gmbh & Co Kg Verfahren zum Betreiben einer Vorrichtung, insbesondere eines Fahrgeschäftes, eines Transportmittels, eines Fitnessgerätes oder dergleichen
US20160048027A1 (en) * 2014-08-18 2016-02-18 Sam Shpigelman Virtual reality experience tied to incidental acceleration
DE102014019579B4 (de) 2014-12-30 2016-12-08 Audi Ag System und Verfahren zum Betreiben einer Anzeigeeinrichtung
US20160210382A1 (en) * 2015-01-21 2016-07-21 Ford Global Technologies, Llc Autonomous driving refined in virtual environments
KR20170015112A (ko) * 2015-07-30 2017-02-08 삼성전자주식회사 자율 주행 차량 및 그의 동작 방법
CN105607742A (zh) 2016-01-20 2016-05-25 陈鹏 一种基于虚拟现实技术避免晕车的方法
US20170352185A1 (en) * 2016-06-02 2017-12-07 Dennis Rommel BONILLA ACEVEDO System and method for facilitating a vehicle-related virtual reality and/or augmented reality presentation

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150294505A1 (en) 2014-04-14 2015-10-15 Harman International Industries, Incorporated Head mounted display presentation adjustment
JP2017020859A (ja) 2015-07-09 2017-01-26 三菱電機株式会社 ナビゲーション装置
US20170103571A1 (en) 2015-10-13 2017-04-13 Here Global B.V. Virtual Reality Environment Responsive to Predictive Route Navigation
JP2017110990A (ja) 2015-12-16 2017-06-22 アルパイン株式会社 走行支援装置および走行支援方法
JP2017146963A (ja) 2016-02-18 2017-08-24 国立大学法人名古屋大学 仮想空間表示システム
US20180040163A1 (en) 2016-08-05 2018-02-08 Uber Technologies, Inc. Virtual reality experience for a vehicle

Also Published As

Publication number Publication date
EP3695292B1 (de) 2021-11-10
EP3695292A1 (de) 2020-08-19
DE102017218214A1 (de) 2019-04-18
CN111201503A (zh) 2020-05-26
ES2901464T3 (es) 2022-03-22
US11024081B2 (en) 2021-06-01
US20200320788A1 (en) 2020-10-08
CN111201503B (zh) 2023-09-01
JP2020537258A (ja) 2020-12-17
JP7012153B2 (ja) 2022-01-27
KR20200062328A (ko) 2020-06-03
WO2019072479A1 (de) 2019-04-18

Similar Documents

Publication Publication Date Title
KR102442811B1 (ko) 자동차에서 적어도 한 쌍의 가상 현실 안경을 작동하기 위한 방법 및 시스템
KR102306159B1 (ko) 몰입형 가상 디스플레이
US11321923B2 (en) Immersive display of motion-synchronized virtual content
US9902403B2 (en) Sensory stimulation for an autonomous vehicle
Diels et al. Motion sickness in automated vehicles: the elephant in the room
Tonnis et al. Visual longitudinal and lateral driving assistance in the head-up display of cars
JP6102117B2 (ja) 移動体、システム、プログラム、および情報処理装置
US20190061655A1 (en) Method and apparatus for motion sickness prevention
CN108028016A (zh) 增强现实显示系统
US20170253254A1 (en) Sensory stimulation system for an autonomous vehicle
CN109195850A (zh) 用于产生用于基于规则进行驾驶员辅助的控制数据的方法
JP2017024652A (ja) 車両用シート制御装置
JPWO2019124158A1 (ja) 情報処理装置、情報処理方法、プログラム、表示システム、及び移動体
JP2006035980A5 (ko)
CN110383142A (zh) 用于机动车的娱乐系统和用于运行娱乐系统的方法
McGill et al. Augmented, Virtual and Mixed Reality Passenger Experiences
US20210188298A1 (en) Method and control device for operating a motor vehicle
CN112566808A (zh) 运行布置在机动车中的显示装置的方法和在机动车中使用的显示装置
Spießl Assessment and support of error recognition in automated driving
KR20200006249A (ko) 차량 및 그를 위한 주행 모드 선택 방법
JP7095593B2 (ja) 興味推定システム
JP7268481B2 (ja) 情報処理装置、自律走行車両、情報処理方法及びプログラム
JP2021005215A (ja) 興味推定システム
CN111923918A (zh) 在交通工具中辅助虚拟现实的方法和相关的控制装置
JP7298432B2 (ja) 観光疑似体験システム

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant