NL2002841A - Immersive collaborative environment using motion capture, head mounted display, and cave. - Google Patents

Immersive collaborative environment using motion capture, head mounted display, and cave. Download PDF

Info

Publication number
NL2002841A
NL2002841A NL2002841A NL2002841A NL2002841A NL 2002841 A NL2002841 A NL 2002841A NL 2002841 A NL2002841 A NL 2002841A NL 2002841 A NL2002841 A NL 2002841A NL 2002841 A NL2002841 A NL 2002841A
Authority
NL
Netherlands
Prior art keywords
virtual reality
simulation
users
data
simulator
Prior art date
Application number
NL2002841A
Other languages
English (en)
Other versions
NL2002841C2 (en
Inventor
Michael K Dobbins
Pascale Rondot
Eric D Shone
Michael R Yokell
Kevin J Abshire
Anthony Ray Harbor
Scott Lovell
Michael K Barron
Original Assignee
Lockheed Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US12/355,771 external-priority patent/US8615383B2/en
Application filed by Lockheed Corp filed Critical Lockheed Corp
Publication of NL2002841A publication Critical patent/NL2002841A/en
Application granted granted Critical
Publication of NL2002841C2 publication Critical patent/NL2002841C2/en

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/10Geometric CAD
    • G06F30/15Vehicle, aircraft or watercraft design
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2111/00Details relating to CAD techniques
    • G06F2111/02CAD in a network environment, e.g. collaborative CAD or distributed simulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Geometry (AREA)
  • Computer Hardware Design (AREA)
  • Evolutionary Computation (AREA)
  • Human Computer Interaction (AREA)
  • Computational Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Processing Or Creating Images (AREA)

Claims (15)

1. Een systeem voor het evalueren van een engineering ontwerp, waarbij het systeem omvat: - een virtual reality simulator die is ingericht voor het ontvangen van computer-aided-design (CD) gegevens voor een CAD ontwerp en voor het creëren van een drie-dimensionale virtual reality simulatie op schaal vanuit de CAD ontwerp data, waarbij de drie-dimensionale virtual reality simulatie in staat is om te worden weergegeven op één of meer stereoscopische op het hoofd bevestigde weergave-eenheden zodat elk van de één of meer op het hoofd bevestigde weergave-eenheden verschillende perspectieven van de virtual reality simulatie kan hebben; - een opnamesysteem voor beweging dat is geïntegreerd in de virtual reality simulator en is ingericht voor het simultaan volgen van bewegingen van één of meer gebruikers binnen de virtual reality simulatie; - een immersie observatiesysteem waarbij de één of meer gebruikers de virtual reality simulatie stereoscopisch en in real time kunnen bezien voor het daardoor definiëren van een gemeenschappelijke immersie omgeving zodat de één of meer gebruikers het CAD ontwerp kunnen evalueren, waarbij de virtual reality simulator voorts is ingericht voor het representeren van elk van de één of meer gebruikers door een avatar in de simulatie en voor het onafhankelijk in real time schalen van elk van de één of meer avatars om daardoor te verifiëren dat taken die verbonden zijn met een product dat is vervaardigd overeenkomstig het CAD ontwerp, uitgevoerd kunnen worden door een vooraf bepaald bereik van gebruikers afmetingen, en waarbij de virtual reality simulator voorts is ingericht voor het detecteren van een botsing tussen een gebruiker en een gesimuleerd object in de virtual reality simulatie en voor het verschaffen van feedback voor de gedetecteerde botsing.
2. Een systeem volgens conclusie 1, waarbij de feedback voor de gedetecteerde botsing omvat het wijzigen van een aanzicht van het object en een geluid in een bepaalde richting.
3. Een systeem volgens conclusie 1, waarbij het opnamesysteem voor beweging voorts is ingericht voor het volgen van de bewegingen van één of meer echte objecten die worden gebruikt door de één of meer gebruikers; en waarbij de virtual reality simulator voorts is ingericht voor het representeren van de één of meer echte objecten in de simulatie in respons op de gevolgde bewegingen van de één of meer echte objecten, voor het detecteren van een botsing tussen twee of meer gesimuleerde objecten in de virtual reality simulatie, en voor het verschaffen van feedback voor de gedetecteerde botsing.
4. Een systeem volgens conclusie 1, waarbij het opnamesysteem voor beweging omvat: één of meer lichaamskledingstukken, handschoenen en hoofdtoestellen met markeerelementen op vooraf bepaalde locaties voor het waarnemen van beweging; een meervoudig aantal camera’s op vooraf geselecteerde locaties die zijn ingericht voor het opnemen van beelden die bewegingen van de één of meer gebruikers die hun lichaamskledingstuk, handschoenen en hoofdtoestellen voor het opnemen van beweging registreren; en één of meer computers voor het digitaal registreren van locaties van de markeerelementen die zijn verbonden met de Uchaamskledingstukken, handschoenen, en hoofdtoestellen wanneer de één of meer gebruikers in de simulatie interacteren, in respons op de op genomen beelden van he t meervoudig aantal camera’s.
5. Een systeem volgens conclusie 1, waarbij het immersie-observatiesysteem omvat een configureerbare weergave-eenheid omvattende drie wanden en een vloer, waarbij de weergave-eonheid stereoscopische beelden op volledige schaal omvat van de één of meer gebruikers, voor het definiëren van een Cave Automatic Virtual Environment (CAVE).
6. Een systeem volgens conclusie 1, waarbij de gegevens van het CAD ontwerp voor een vliegtuig is.
7. Een systeem volgens conclusie 1, waarbij de gegevens van het CAD ontwerp voor een ruimteschip is.
8. Een systeem volgens conclusie 1, waarbij de gegevens van het CAD design voor een schip is,
9. Een systeem volgens conclusie 1, waarbij de gegevens van het CAD ontwerp voor een raketsysteem is.
10. Een systeem volgens conclusie 1, waarbij het opnamesysteem voor beweging een draagbaar opnamesysteem voor beweging is dat is geplaatst op een eerste locatie; en waarbij de virtual reality simulator en het immersie-observatiesysteem geplaatst zijn op een tweede locatie, waarbij de tweede locatie ver verwijderd is van de eerste locatie.
11. Computerprogrammaprodukt, dat is opgeslagen in één of meer tastbare door een computer leesbare media die leesbaar zijn door de computer zodat het computerprogrammaprodukt in werking treedt voor het uitvoeren van de hierna volgende instructies wanneer deze worden gelezen door de computer: het ontvangen van computer-aided design (CAD) gegevens door een virtual reality simulator; het genereren Van videosignalen door de virtual reality simulator voor het simuleren in een virtual reality van een ontwerp vanuit de CAD gegevens weergaven, waarbij de videosignalen worden gericht naar één of meer op het hoofd bevestigde weergave-eenheden zodat elk van de één of meer op het hoofd bevestigde weergave-eenheden een verschillend perspectief kunnen hebben van de virtual reality simulatie, waarbij elk van de één of meer op het hoofd bevestigde weergave-eenheden afzonderlijke weergave-eenheden voor het linkeroog en het rechteroog omvatten met verschillende signalen zodat een gebruiker een beeld in het op het hoofd bevestigde weergave-eenheid stereoscopisch ziet; het volgen van bewegingen van één of meer gebruikers die interacteren met de virtual reality simulatie; het genereren van geregistreerde gegevens van beweging voor de één of meer gebruikers in respons op de gevolgde bewegingen van de één of meer gebruikers; en het in real time aansturen van één of meer op schaal gebrachte avatars in de simulatie door de virtual reality simulator gebruikmakend van de geregistreerde gegevens voor beweging voor de één of meer gebruikers zodat elk van de één of meer gebruikers correspondeert met één van de één of meer avatars, zodat een gebruiker van een eerste afmeting een avatar simuleert van een tweede afmeting, waarbij de tweede afmeting verschilt met de eerste afmeting, en zodanig dat de één of meer gebruikers het CAD ontwerp kunnen evalueren; het detecteren van een botsing tussen een gebruiker en een gesimuleerd object in de virtual reality simulatie door de virtual reality simulator; en het wijzigen van het aanzicht van het object in de virtual reality simulatie door de virtual reality simulator voor het verschaffen van feedback voor de gedetecteerde botsing,
12. Een cOmputerprogrammaprodukt volgens conclusie 11, waarbij het programmaprodukt voorts werkt voor het uitvoeren van de volgende instructie: het verschaffen van een geluid in een bepaalde richting als respons op de gedetecteerde botsing.
13. Een computerprogrammaproduct volgens conclusie 11, waarbij het programmaproduct voorts werkt voor het uitvoeren van de volgende instructies: het volgen van bewegingen van één of meer echte objecten die worden gebruikt door de één of meer gebruikers; het genereren van registratiegegevens van beweging voor één of meer echte objecten in respons op de gevolgde bewegingen van de één of meer echte objecten; het representeren van de één of meer echte objecten in de simulatie door de virtual reality simulator in respons op de geregistreerde gegevens van beweging; het detecteren van een botsing tussen twee of meer gesimuleerde objecten in de virtual reality simulatie door de virtual reality simulator; en het wijzigen van een aanzicht van het object in de virtual reality simulatie door de virtual reality simulator voor het verschaffen van feedback voor de gedetecteerde botsing.
14. Computergeïmplementeerde werkwijze voor het evalueren van een engineering ontwerp, waarbij de werkwijze omvat: het creëren van een driedimensionaal virtual reality simulatie door een virtual reality simulator in respons op computer aided design (CAD) gegevens van een CAD ontwerp; het in real time animeren van één of meer avatars in de virtual reality simulatie door de virtual reality simulator in respons op geregistreerde gegevens voor bewegingen die zijn verkregen van de één of meer gebruikers die simultaan interacteren met de virtual reality simulatie zodat elk van de één of meer gebruikers correspondeert met één van de één of meer avatars; het weergeven van de virtual reality simulatie, omvattende de interacties van de één of meer avatars als een driedimensionaal beeld dat één of meer gebruikers in real time lijkt te omgeven om daardoor een gemeenschappelijke iinmersie-omgeving te definiëren gebruikmakend van één of meer op het hoofd bevestigde weergave-eenheden zodat de één of meer gebruikers een verschillend perspectief van de virtual reality simulatie hebben in respons op de geregistreerde gegevens voor beweging; het detecteren van een botsing tussen een gebruiker en een gesimuleerd object in de virtual reality simulatie door de virtual reality simulator; en het verschaffen van feedback voor de gedetecteerde botsing,
15. Computer-geïmplementeerde werkwijze van conclusie 14, waarbij de feedback voor de gedetecteerde botsing omvat tenminste het wijzigen van een aanzicht van het object of een geluid uit een bepaalde richting.
NL2002841A 2009-01-17 2009-05-05 Immersive collaborative environment using motion capture, head mounted display, and cave. NL2002841C2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US35577109 2009-01-17
US12/355,771 US8615383B2 (en) 2008-01-18 2009-01-17 Immersive collaborative environment using motion capture, head mounted display, and cave

Publications (2)

Publication Number Publication Date
NL2002841A true NL2002841A (en) 2010-07-20
NL2002841C2 NL2002841C2 (en) 2014-10-20

Family

ID=42357641

Family Applications (1)

Application Number Title Priority Date Filing Date
NL2002841A NL2002841C2 (en) 2009-01-17 2009-05-05 Immersive collaborative environment using motion capture, head mounted display, and cave.

Country Status (5)

Country Link
KR (1) KR20100084597A (nl)
CA (1) CA2662318C (nl)
DK (1) DK177693B1 (nl)
NL (1) NL2002841C2 (nl)
TR (1) TR200903142A1 (nl)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101845231B1 (ko) 2011-06-14 2018-04-04 삼성전자주식회사 영상 처리 장치 및 방법
KR101389894B1 (ko) * 2012-07-18 2014-04-29 주식회사 도담시스템스 모션 캡쳐 기술을 이용한 가상 현실 시뮬레이션 장치 및 방법
KR101495673B1 (ko) * 2013-08-14 2015-02-25 한국항공우주연구원 우주비행체 이착륙 체험 시스템
KR102077108B1 (ko) 2013-09-13 2020-02-14 한국전자통신연구원 콘텐츠 체험 서비스 제공 장치 및 그 방법
KR101493614B1 (ko) * 2013-11-01 2015-02-13 (주)세이프텍리서치 증강현실기술 기반 가상선교시스템을 이용한 선박운항시뮬레이터 및 이를 이용한 선박운항시뮬레이션 구현방법
US9599821B2 (en) * 2014-08-08 2017-03-21 Greg Van Curen Virtual reality system allowing immersion in virtual space to consist with actual movement in actual space
KR101659849B1 (ko) * 2015-01-09 2016-09-29 한국과학기술원 아바타를 이용한 텔레프레즌스 제공 방법, 상기 방법을 수행하는 시스템 및 컴퓨터 판독 가능한 기록 매체
WO2016144279A1 (en) 2015-03-06 2016-09-15 Ors Filiz Mujdehan Virtual reality based remote learning system and method
US10043311B2 (en) * 2015-09-16 2018-08-07 The Boeing Company Immersive design management system
CN106409053A (zh) * 2016-11-24 2017-02-15 四川艾瑞智信科技有限公司 一种基于虚拟现实的便携式模拟教学设备
KR101922677B1 (ko) * 2016-12-06 2019-02-20 주식회사 상화 체험장치
FR3062489B1 (fr) * 2017-02-01 2020-12-25 Peugeot Citroen Automobiles Sa Dispositif d’analyse pour la determination d’un delai de detection contribuant a un temps de latence au sein d’un systeme immersif de realite virtuelle
FR3062488B1 (fr) * 2017-02-01 2020-12-25 Peugeot Citroen Automobiles Sa Dispositif d'analyse pour la determination d'un temps de latence d'un systeme immersif de realite virtuelle
CN110267028B (zh) * 2019-06-24 2021-04-30 中冶智诚(武汉)工程技术有限公司 一种用于五面led-cave的信号同步显示系统
KR102472579B1 (ko) * 2020-07-16 2022-11-30 주식회사 아이팝 가상 소방 훈련을 위한 모션 캡쳐 시스템 및 이를 이용한 모션 캡쳐 방법
KR102456069B1 (ko) * 2020-07-17 2022-10-18 주식회사 아이팝 현실 가상 모델 간 비율 보정 방법
CN112288880A (zh) * 2020-10-29 2021-01-29 重庆建工住宅建设有限公司 基于ar技术的建筑物装配式装修设计系统
KR102447171B1 (ko) * 2022-03-18 2022-09-27 헬리오센 주식회사 메타버스를 위한 건축물 실내외 투어링 가이드 마크 시스템
KR20240006373A (ko) 2022-07-06 2024-01-15 주식회사 와플코퍼레이션 오디션 관리 방법 및 이를 수행하는 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2369467A (en) * 2000-08-02 2002-05-29 Ford Global Tech Inc Subjective evaluation of a vehicle design
EP1533683A2 (en) * 2003-11-21 2005-05-25 Seat, S.A. Mixed reality simulation system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2369467A (en) * 2000-08-02 2002-05-29 Ford Global Tech Inc Subjective evaluation of a vehicle design
EP1533683A2 (en) * 2003-11-21 2005-05-25 Seat, S.A. Mixed reality simulation system

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
J. LEIGH ET AL: "Supporting transcontinental collaborative work in persistent virtual environments", IEEE COMPUTER GRAPHICS AND APPLICATIONS, vol. 16, no. 4, 1 July 1996 (1996-07-01), pages 47 - 51, XP055121071, ISSN: 0272-1716, DOI: 10.1109/38.511853 *
J.S BAO ET AL: "Immersive virtual product development", JOURNAL OF MATERIALS PROCESSING TECHNOLOGY, vol. 129, no. 1-3, 1 October 2002 (2002-10-01), pages 592 - 596, XP055121063, ISSN: 0924-0136, DOI: 10.1016/S0924-0136(02)00655-6 *

Also Published As

Publication number Publication date
DK200900534A (en) 2010-07-18
CA2662318A1 (en) 2010-07-17
DK177693B1 (en) 2014-03-10
CA2662318C (en) 2014-12-02
TR200903142A1 (tr) 2010-08-23
NL2002841C2 (en) 2014-10-20
KR20100084597A (ko) 2010-07-27

Similar Documents

Publication Publication Date Title
US8615383B2 (en) Immersive collaborative environment using motion capture, head mounted display, and cave
US8624924B2 (en) Portable immersive environment using motion capture and head mounted display
NL2002841C2 (en) Immersive collaborative environment using motion capture, head mounted display, and cave.
Krichenbauer et al. Augmented reality versus virtual reality for 3d object manipulation
CN107667331B (zh) 共享空间多人沉浸式虚拟现实中共享触觉交互和用户安全
TWI567659B (zh) 照片表示視圖的基於主題的增強
EP3458942B1 (en) Display of three-dimensional model information in virtual reality
US20170092223A1 (en) Three-dimensional simulation system for generating a virtual environment involving a plurality of users and associated method
JP2010257081A (ja) 画像処理方法及び画像処理装置
Spanlang et al. A first person avatar system with haptic feedback
Song et al. An immersive VR system for sports education
Drossis et al. Interaction with immersive cultural heritage environments using virtual reality technologies
US11393153B2 (en) Systems and methods performing object occlusion in augmented reality-based assembly instructions
Zaldívar-Colado et al. A mixed reality for virtual assembly
Camporesi et al. The effects of avatars, stereo vision and display size on reaching and motion reproduction
EP4151291A1 (en) Information processing device, information processing method, and program
Thalmann et al. Virtual reality software and technology
Lyne Development of virtual reality applications for the construction industry using the Oculus Rift head mounted display
Onyesolu et al. A survey of some virtual reality tools and resources
Bernal A system for immersive medical and engineering training based on serious games
Nesamalar et al. An introduction to virtual reality techniques and its applications
Chung et al. Optimizing camera setup for in-home first-person rendering mixed reality gaming system
Magnenat-Thalmann et al. Virtual reality software and technology
Wu et al. Quantifiable fine-grain occlusion removal assistance for efficient vr exploration
Rodrigues et al. Mid-air manipulation of 3D models in (semi-) immersive virtual environments

Legal Events

Date Code Title Description
MM Lapsed because of non-payment of the annual fee

Effective date: 20190601