JP7190434B2 - 外部条件に基づくウェアラブルディスプレイデバイスの自動制御 - Google Patents
外部条件に基づくウェアラブルディスプレイデバイスの自動制御 Download PDFInfo
- Publication number
- JP7190434B2 JP7190434B2 JP2019535899A JP2019535899A JP7190434B2 JP 7190434 B2 JP7190434 B2 JP 7190434B2 JP 2019535899 A JP2019535899 A JP 2019535899A JP 2019535899 A JP2019535899 A JP 2019535899A JP 7190434 B2 JP7190434 B2 JP 7190434B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- wearable system
- environment
- virtual content
- virtual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 135
- 230000004044 response Effects 0.000 claims description 75
- 230000009471 action Effects 0.000 claims description 36
- 230000000903 blocking effect Effects 0.000 claims description 27
- 230000003213 activating effect Effects 0.000 claims description 25
- 230000008859 change Effects 0.000 claims description 23
- 238000013528 artificial neural network Methods 0.000 claims description 22
- 230000033001 locomotion Effects 0.000 claims description 18
- 230000003190 augmentative effect Effects 0.000 claims description 16
- 230000003993 interaction Effects 0.000 claims description 15
- 238000001514 detection method Methods 0.000 claims description 13
- 238000004422 calculation algorithm Methods 0.000 description 99
- 210000001508 eye Anatomy 0.000 description 98
- 238000003384 imaging method Methods 0.000 description 78
- 230000007613 environmental effect Effects 0.000 description 58
- 230000008569 process Effects 0.000 description 58
- 238000012545 processing Methods 0.000 description 43
- 230000000007 visual effect Effects 0.000 description 37
- 230000003287 optical effect Effects 0.000 description 30
- 210000001747 pupil Anatomy 0.000 description 27
- 238000010801 machine learning Methods 0.000 description 26
- 230000004438 eyesight Effects 0.000 description 22
- 230000036544 posture Effects 0.000 description 17
- 238000004891 communication Methods 0.000 description 16
- 238000000605 extraction Methods 0.000 description 15
- 230000004308 accommodation Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 239000000835 fiber Substances 0.000 description 11
- 210000003128 head Anatomy 0.000 description 9
- 239000000463 material Substances 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 8
- 238000013507 mapping Methods 0.000 description 8
- 239000008280 blood Substances 0.000 description 7
- 210000004369 blood Anatomy 0.000 description 7
- 235000013305 food Nutrition 0.000 description 7
- 230000002829 reductive effect Effects 0.000 description 7
- 238000003860 storage Methods 0.000 description 7
- 238000010168 coupling process Methods 0.000 description 6
- 238000005859 coupling reaction Methods 0.000 description 6
- 230000002996 emotional effect Effects 0.000 description 6
- 230000001815 facial effect Effects 0.000 description 6
- 230000006855 networking Effects 0.000 description 6
- 230000008447 perception Effects 0.000 description 6
- 210000001525 retina Anatomy 0.000 description 6
- 239000007787 solid Substances 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 5
- 238000013459 approach Methods 0.000 description 5
- 230000004424 eye movement Effects 0.000 description 5
- 239000000779 smoke Substances 0.000 description 5
- 239000013598 vector Substances 0.000 description 5
- 230000006399 behavior Effects 0.000 description 4
- 210000004556 brain Anatomy 0.000 description 4
- 238000012790 confirmation Methods 0.000 description 4
- 238000013135 deep learning Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000004807 localization Effects 0.000 description 4
- 239000013307 optical fiber Substances 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 4
- 230000029058 respiratory gaseous exchange Effects 0.000 description 4
- 238000000926 separation method Methods 0.000 description 4
- 238000001356 surgical procedure Methods 0.000 description 4
- 208000006550 Mydriasis Diseases 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000003066 decision tree Methods 0.000 description 3
- 230000007423 decrease Effects 0.000 description 3
- 125000001475 halogen functional group Chemical group 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 229910052751 metal Inorganic materials 0.000 description 3
- 239000002184 metal Substances 0.000 description 3
- 230000005043 peripheral vision Effects 0.000 description 3
- 238000013139 quantization Methods 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 238000009877 rendering Methods 0.000 description 3
- 230000002207 retinal effect Effects 0.000 description 3
- 230000001953 sensory effect Effects 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 239000000126 substance Substances 0.000 description 3
- 238000012706 support-vector machine Methods 0.000 description 3
- 210000003813 thumb Anatomy 0.000 description 3
- 238000013519 translation Methods 0.000 description 3
- 238000012800 visualization Methods 0.000 description 3
- 238000003466 welding Methods 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000002350 accommodative effect Effects 0.000 description 2
- 238000003915 air pollution Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 210000000613 ear canal Anatomy 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 231100000584 environmental toxicity Toxicity 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 210000003811 finger Anatomy 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 238000007499 fusion processing Methods 0.000 description 2
- 238000002347 injection Methods 0.000 description 2
- 239000007924 injection Substances 0.000 description 2
- 238000003064 k means clustering Methods 0.000 description 2
- 230000000670 limiting effect Effects 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 238000013488 ordinary least square regression Methods 0.000 description 2
- 238000013021 overheating Methods 0.000 description 2
- 238000000513 principal component analysis Methods 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- 230000036387 respiratory rate Effects 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 241000256837 Apidae Species 0.000 description 1
- 206010003173 Arterial rupture Diseases 0.000 description 1
- 206010019233 Headaches Diseases 0.000 description 1
- 208000010496 Heart Arrest Diseases 0.000 description 1
- 241000699666 Mus <mouse, genus> Species 0.000 description 1
- 241000699670 Mus sp. Species 0.000 description 1
- 239000004983 Polymer Dispersed Liquid Crystal Substances 0.000 description 1
- 208000036366 Sensation of pressure Diseases 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 230000006793 arrhythmia Effects 0.000 description 1
- 206010003119 arrhythmia Diseases 0.000 description 1
- 208000003464 asthenopia Diseases 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 238000009414 blockwork Methods 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000005253 cladding Methods 0.000 description 1
- 230000008045 co-localization Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000010411 cooking Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 238000002570 electrooculography Methods 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 230000005021 gait Effects 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 231100000869 headache Toxicity 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000010348 incorporation Methods 0.000 description 1
- 239000003317 industrial substance Substances 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000001473 noxious effect Effects 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 230000035790 physiological processes and functions Effects 0.000 description 1
- 239000004033 plastic Substances 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000000306 recurrent effect Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000004043 responsiveness Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 231100000430 skin reaction Toxicity 0.000 description 1
- 125000006850 spacer group Chemical group 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 235000013599 spices Nutrition 0.000 description 1
- 230000004936 stimulating effect Effects 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 230000021542 voluntary musculoskeletal movement Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0081—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for altering, e.g. enlarging, the entrance or exit pupil
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B6/00—Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
- G02B6/0001—Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems
- G02B6/0011—Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form
- G02B6/0033—Means for improving the coupling-out of light from the light guide
- G02B6/005—Means for improving the coupling-out of light from the light guide provided by one optical element, or plurality thereof, placed on the light output side of the light guide
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/20—Linear translation of whole images or parts thereof, e.g. panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/19—Recognition using electronic means
- G06V30/192—Recognition using electronic means using simultaneous comparisons or correlations of the image signals with a plurality of references
- G06V30/194—References adjustable by an adaptive method, e.g. learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0127—Head-up displays characterised by optical features comprising devices increasing the depth of field
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
- G02B2027/0174—Head mounted characterised by optical features holographic
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0185—Displaying image at variable distance
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B6/00—Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
- G02B6/0001—Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems
- G02B6/0011—Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form
- G02B6/0075—Arrangements of multiple light guides
- G02B6/0076—Stacked arrangements of multiple light guides of the same or different cross-sectional area
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04804—Transparency, e.g. transparent or translucent windows
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/44—Event detection
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Optics & Photonics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Ophthalmology & Optometry (AREA)
- Databases & Information Systems (AREA)
- Social Psychology (AREA)
- Psychiatry (AREA)
- Evolutionary Computation (AREA)
- Mathematical Physics (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
- Position Input By Displaying (AREA)
- Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
- Processing Or Creating Images (AREA)
- Circuit For Audible Band Transducer (AREA)
- Image Analysis (AREA)
Description
本願は、2016年12月29日に出願され“MANUAL OR AUTOMATIC CONTROL OF WEARABLE DISPLAY DEVICE BASED ON EXTERNAL CONDITIONS”と題された米国仮出願第62/440099号に対する35 U.S.C. § 119(e)のもとでの優先権を主張するものであり、該米国仮出願の開示は、その全体が参照により本明細書中に援用される。
本明細書は、例えば、以下の項目も提供する。
(項目1)
仮想コンテンツを複合現実または仮想現実環境内で表示するように構成されるウェアラブルシステムであって、前記ウェアラブルシステムは、
仮想コンテンツを複合現実、拡張現実、または仮想現実環境内で提示するように構成されるディスプレイと、
ハードウェアプロセッサであって、前記ハードウェアプロセッサは、
前記ユーザの環境の画像を受信することと、
機械学習アルゴリズムを用いて前記環境内のオブジェクトを認識するように構成される1つ以上のオブジェクト認識装置を使用して前記画像を分析することと、
少なくとも部分的に、前記画像の分析に基づいて、トリガイベントを検出することと、
前記トリガイベントの検出に応答して、
前記トリガイベントと関連付けられた閾値条件が満たされることの決定に応答して、前記ディスプレイをミュートにすることと
を行うようにプログラムされる、ハードウェアプロセッサと
を備える、ウェアラブルシステム。
(項目2)
前記ディスプレイをミュートにするために、前記ハードウェアプロセッサは、少なくとも、
前記ディスプレイによって出力される光を暗化すること、
前記仮想コンテンツの表示をオフにすること、
前記仮想コンテンツのサイズを低減させること、
前記仮想コンテンツの透明度を増加させること、または
前記ディスプレイによってレンダリングされる際の前記仮想コンテンツの位置を変化させること
を行うようにプログラムされる、項目1に記載のウェアラブルシステム。
(項目3)
前記ハードウェアプロセッサはさらに、
前記トリガイベントの終了条件を検出することと、
終了条件の検出に応答して、前記表示を再開することと
を行うようにプログラムされる、項目1に記載のウェアラブルシステム。
(項目4)
前記終了条件を検出するために、前記ウェアラブルシステムは、
前記トリガイベントが終了したかどうかを決定すること、または
前記ユーザが前記トリガイベントが生じた環境から離れたかどうかを決定すること
を行うようにプログラムされる、項目3に記載のウェアラブルシステム。
(項目5)
前記ハードウェアプロセスはさらに、前記トリガイベントの検出に応答して、前記ウェアラブルシステムのスピーカをミュートにするようにプログラムされる、項目1に記載のウェアラブルシステム。
(項目6)
前記トリガイベントに応答して、前記ハードウェアプロセッサはさらに、前記トリガイベントの存在のインジケーションを提供するようにプログラムされ、前記インジケーションは、
少なくとも部分的に、前記トリガイベントに関わる、前記環境内の要素と関連付けられた焦点インジケータ、または
アラートメッセージであって、前記アラートメッセージは、前記ユーザに、(1)前記HMDが、前記ユーザがキャンセルアクションを実施しない限り、ある時間周期内に自動的にミュートにされるであろうこと、または(2)前記HMDが、前記ユーザが確認アクションを実施しない限り、ミュートにされないであろうことのうちの少なくとも1つを示す、アラートメッセージ
のうちの少なくとも1つを含む、項目1に記載のウェアラブルシステム。
(項目7)
前記トリガイベントと関連付けられた閾値条件は、前記キャンセルアクションが検出されない時間の持続時間を含む、項目6に記載のウェアラブルシステム。
(項目8)
前記キャンセルアクションまたは前記確認アクションは、現実ボタンを作動させること、前記ディスプレイによってレンダリングされた仮想ユーザインターフェース要素を作動させること、ユーザ入力デバイスを作動させること、または前記ユーザのキャンセルまたは確認姿勢を検出することのうちの少なくとも1つを含む、項目6に記載のウェアラブルシステム。
(項目9)
前記トリガイベントは、前記ユーザの環境内の緊急または非安全条件を含む、項目1に記載のウェアラブルシステム。
(項目10)
前記機械学習アルゴリズムは、深層ニューラルネットワークまたは畳み込みニューラルネットワークを含む、項目1に記載のウェアラブルシステム。
(項目11)
仮想コンテンツを複合現実または仮想現実環境内で表示するための方法であって、前記方法は、
ハードウェアプロセッサの制御下で、
ユーザの環境の画像を受信することと、
前記環境内のオブジェクトを認識するように構成される1つ以上のオブジェクト認識装置を使用して、前記画像を分析することと、
少なくとも部分的に、前記画像の分析に基づいて、トリガイベントを検出することと、
前記トリガイベントの検出に応答して、
前記トリガイベントと関連付けられた閾値条件が満たされることの決定に応答して、仮想コンテンツをミュートにすることと
を含む、方法。
(項目12)
前記仮想コンテンツをミュートにすることは、
前記仮想コンテンツがレンダリングされないようにブロックすること、
前記仮想コンテンツとの相互作用をディスエーブルにすること、
前記仮想コンテンツの表示をオフにすること、
前記仮想コンテンツのサイズを低減させること、
前記仮想コンテンツの透明度を増加させること、または
前記ディスプレイによってレンダリングされる際の前記仮想コンテンツの位置を変化させること
のうちの少なくとも1つを含む、項目11に記載の方法。
(項目13)
前記トリガイベントの終了条件を検出することと、
終了条件の検出に応答して、前記表示を再開することと
をさらに含む、項目11に記載の方法。
(項目14)
前記終了条件を検出するために、前記ウェアラブルシステムは、
前記トリガイベントが終了したかどうかを決定すること、または
前記ユーザが前記トリガイベントが生じた環境から離れたかどうかを決定すること
を行うようにプログラムされる、項目13に記載の方法。
(項目15)
前記画像を分析することは、前記ユーザの環境内のオブジェクトを認識することを含み、前記トリガイベントを決定することは、少なくとも部分的に、前記認識されたオブジェクトに基づいて、前記ユーザの場所を決定することを含む、項目11に記載の方法。
(項目16)
前記トリガイベントは、前記ユーザの場所の変化または前記ユーザを囲繞する場面の変化を含む、項目15に記載の方法。
(項目17)
前記トリガイベントの検出に応答して、前記方法はさらに、前記場所における前記仮想コンテンツをミュートにするための設定にアクセスすることと、前記設定に従って前記仮想コンテンツをミュートにすることとを含む、項目15に記載の方法。
(項目18)
前記ユーザの環境内のオブジェクトを認識することは、ニューラルネットワークによって実施される、項目15に記載の方法。
(項目19)
前記トリガイベントと関連付けられた閾値条件は、キャンセルアクションが検出されない時間の持続時間を含む、項目11に記載の方法。
(項目20)
前記キャンセルアクションは、現実ボタンを作動させること、前記ディスプレイによってレンダリングされた仮想ユーザインターフェース要素を作動させること、ユーザ入力デバイスを作動させること、または前記ユーザのキャンセルまたは確認姿勢を検出することのうちの少なくとも1つを含む、項目11に記載の方法。
(概要)
(3Dディスプレイの実施例)
(ディスプレイシステムの実施例)
(例示的環境センサ)
(3Dライトフィールドディスプレイの実施例)
(導波管スタックアセンブリ)
(ウェアラブルシステムの他のコンポーネント)
(例示的ウェアラブルシステム、環境、およびインターフェース)
(環境センサを含むウェアラブルシステムの実施例)
(ウェアラブルディスプレイシステムの自動制御)
(外科手術コンテキストにおけるウェアラブルデバイスをミュートにする実施例)
(産業コンテキストにおいてウェアラブルデバイスをミュートにする実施例)
(教育コンテキストにおいてウェアラブルデバイスをミュートにする実施例)
(エンターテインメントコンテキストにおいてウェアラブルデバイスをミュートにする実施例)
(買物コンテキストにおいてウェアラブルデバイスをミュートにする実施例)
(環境に基づいて仮想コンテンツをミュートにする実施例)
(仕事環境における選択的コンテンツミュートの実施例)
(休憩室環境における選択的コンテンツのブロックの実施例)
(トリガイベントの実施例)
(トリガイベントのコンピュータビジョンおよびセンサベースの検出)
(トリガイベントの機械学習)
(例示的アラート)
(トリガイベントに応答して、ウェアラブルシステムのコンポーネントまたは仮想コンテンツをミュートにする実施例)
(ウェアラブルデバイスをミュートにするための例示的プロセス)
(ウェアラブルディスプレイシステムの手動制御)
(付加的側面)
(他の考慮点)
Claims (17)
- 仮想コンテンツを複合現実、拡張現実、または仮想現実環境内で表示するように構成されるウェアラブルシステムであって、前記ウェアラブルシステムは、
仮想コンテンツアイテムを複合現実、拡張現実、または仮想現実環境内でユーザに表示するように構成されるディスプレイと、
ハードウェアプロセッサであって、前記ハードウェアプロセッサは、
環境内の前記ユーザの場所の画像を受信することと、
前記環境内の前記ユーザの前記場所内のオブジェクトを認識するように構成される1つ以上のオブジェクト認識装置を使用して前記画像を分析することと、
少なくとも部分的に、前記画像の分析に基づいて、トリガイベントを検出することと、
前記トリガイベントの検出に応答して、
前記環境内の前記ユーザの前記場所と関連付けられたコンテンツブロック設定にアクセスする第1のステップであって、前記コンテンツブロック設定は、前記環境内の前記ユーザの前記場所において既に表示済みでこれからミュートする対象となる少なくともいくつかの仮想コンテンツアイテムを示すブラックリストを含む、第1のステップ、
前記第1のステップにおいてアクセスされた前記コンテンツブロック設定に基づいて、前記ブラックリスト内にある前記表示された仮想コンテンツアイテムのうちの1つ以上の仮想コンテンツアイテムを決定する第2のステップ、および、
前記第2のステップにおいて決定された1つ以上の仮想コンテンツアイテムの表示をミュートにする第3のステップ
を行うことと
を行うようにプログラムされる、ハードウェアプロセッサと
を備える、ウェアラブルシステム。 - 前記1つ以上の仮想コンテンツアイテムの表示をミュートにするために、前記ハードウェアプロセッサは、少なくとも、
前記ディスプレイによって出力される光を暗化すること、
前記1つ以上の仮想コンテンツアイテムの表示をオフにすること、
前記1つ以上の仮想コンテンツアイテムのサイズを低減させること、
前記1つ以上の仮想コンテンツアイテムの透明度を増加させること、または
前記1つ以上の仮想コンテンツアイテムの位置を変化させること
を行うようにプログラムされる、請求項1に記載のウェアラブルシステム。 - 前記ハードウェアプロセッサはさらに、
前記トリガイベントの終了条件を検出することと、
終了条件の検出に応答して、前記表示を再開することと
を行うようにプログラムされる、請求項1に記載のウェアラブルシステム。 - 前記終了条件を検出するために、前記ウェアラブルシステムは、
前記トリガイベントが終了したかどうかを決定すること、または
前記ユーザが前記トリガイベントが生じた前記環境内の前記場所から離れたかどうかを決定すること
を行うようにプログラムされる、請求項3に記載のウェアラブルシステム。 - 前記ハードウェアプロセッサはさらに、前記トリガイベントの検出に応答して、前記ウェアラブルシステムのスピーカをミュートにするようにプログラムされる、請求項1に記載のウェアラブルシステム。
- 前記トリガイベントに応答して、前記ハードウェアプロセッサはさらに、前記トリガイベントの存在のインジケーションを提供するようにプログラムされ、前記インジケーションは、
少なくとも部分的に、前記トリガイベントに関わる、前記環境内の前記ユーザの前記場所内の要素と関連付けられた焦点インジケータ、または
アラートメッセージであって、前記アラートメッセージは、前記ユーザに、(1)前記ウェアラブルシステムが、前記ユーザがキャンセルアクションを実施しない限り、ある時間周期内に自動的にミュートにされるであろうこと、または(2)前記ウェアラブルシステムが、前記ユーザが確認アクションを実施しない限り、ミュートにされないであろうことのうちの少なくとも1つを示す、アラートメッセージ
のうちの少なくとも1つを含む、請求項1に記載のウェアラブルシステム。 - 前記キャンセルアクションまたは前記確認アクションは、現実ボタンを作動させること、前記ディスプレイによってレンダリングされた仮想ユーザインターフェース要素を作動させること、ユーザ入力デバイスを作動させること、または前記ユーザのキャンセルまたは確認姿勢を検出することのうちの少なくとも1つを含む、請求項6に記載のウェアラブルシステム。
- 前記トリガイベントは、前記環境内の前記ユーザの場所内の緊急または非安全条件を含む、請求項1に記載のウェアラブルシステム。
- ユーザに対して複合現実、拡張現実、または仮想現実環境内で表示されている仮想コンテンツアイテムの表示をミュートにするための方法であって、前記方法は、
ハードウェアプロセッサの制御下で、
環境内の前記ユーザの場所の画像を受信することと、
前記環境内の前記ユーザの前記場所内のオブジェクトを認識するように構成される1つ以上のオブジェクト認識装置を使用して、前記画像を分析することと、
少なくとも部分的に、前記画像の分析に基づいて、トリガイベントを検出することと、
前記トリガイベントの検出に応答して、
前記環境内の前記ユーザの前記場所と関連付けられたコンテンツブロック設定にアクセスする第1のステップであって、前記コンテンツブロック設定は、前記環境内の前記ユーザの前記場所において既に表示済みでこれからミュートする対象となる少なくともいくつかの仮想コンテンツアイテムを示すブラックリストを含む、第1のステップ、
前記第1のステップにおいてアクセスされた前記コンテンツブロック設定に基づいて、前記ブラックリスト内にある前記表示された仮想コンテンツアイテムのうちの1つ以上の仮想コンテンツアイテムを決定する第2のステップ、および、
前記第2のステップにおいて決定された1つ以上の仮想コンテンツアイテムの表示をミュートにする第3のステップ
を行うことと
を行うことを含む、方法。 - 前記1つ以上の仮想コンテンツアイテムの表示をミュートにすることは、
前記1つ以上の仮想コンテンツアイテムの表示をブロックすること、
前記1つ以上の仮想コンテンツアイテムとの相互作用をディスエーブルにすること、
前記1つ以上の仮想コンテンツアイテムの表示をオフにすること、
前記1つ以上の仮想コンテンツアイテムのサイズを低減させること、
前記1つ以上の仮想コンテンツアイテムの透明度を増加させること、または
前記1つ以上の仮想コンテンツアイテムの位置を変化させること
のうちの少なくとも1つを含む、請求項9に記載の方法。 - 前記トリガイベントの終了条件を検出することと、
前記終了条件の前記検出に応答して、前記表示を再開することと
をさらに含む、請求項9に記載の方法。 - 前記トリガイベントの前記終了条件を検出することは、
前記トリガイベントが終了したかどうかを決定すること、または
前記ユーザが前記トリガイベントが生じた前記環境内の前記場所から離れたかどうかを決定すること
を含む、請求項11に記載の方法。 - 前記画像を分析することは、前記環境内の前記ユーザの場所内のオブジェクトを認識することを含み、前記トリガイベントを決定することは、少なくとも部分的に、前記認識されたオブジェクトに基づいて、前記ユーザの場所を決定することを含む、請求項9に記載の方法。
- 前記トリガイベントは、前記ユーザの場所の変化または前記ユーザを囲繞する場面の変化を含む、請求項13に記載の方法。
- 前記環境内の前記ユーザの場所内のオブジェクトを認識することは、ニューラルネットワークによって実施される、請求項13に記載の方法。
- 前記1つ以上の仮想コンテンツアイテムの表示をミュートにすることは、キャンセルアクションが受信されない限り、ある時間周期内に自動的に前記1つ以上の仮想コンテンツアイテムをミュートにすることを含み、前記キャンセルアクションは、現実ボタンを作動させること、前記ユーザに表示された仮想ユーザインターフェース要素を作動させること、ユーザ入力デバイスを作動させること、または前記ユーザのキャンセルまたは確認姿勢を検出することのうちの少なくとも1つを含む、請求項9に記載の方法。
- 前記トリガイベントは、前記環境内の第1の場所から前記環境内の第2の場所への前記ユーザの移動を含む、請求項1に記載のウェアラブルシステム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022123237A JP7487265B2 (ja) | 2016-12-29 | 2022-08-02 | 外部条件に基づくウェアラブルディスプレイデバイスの自動制御 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662440099P | 2016-12-29 | 2016-12-29 | |
US62/440,099 | 2016-12-29 | ||
PCT/US2017/062365 WO2018125428A1 (en) | 2016-12-29 | 2017-11-17 | Automatic control of wearable display device based on external conditions |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022123237A Division JP7487265B2 (ja) | 2016-12-29 | 2022-08-02 | 外部条件に基づくウェアラブルディスプレイデバイスの自動制御 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020507797A JP2020507797A (ja) | 2020-03-12 |
JP7190434B2 true JP7190434B2 (ja) | 2022-12-15 |
Family
ID=62710743
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019535899A Active JP7190434B2 (ja) | 2016-12-29 | 2017-11-17 | 外部条件に基づくウェアラブルディスプレイデバイスの自動制御 |
JP2022123237A Active JP7487265B2 (ja) | 2016-12-29 | 2022-08-02 | 外部条件に基づくウェアラブルディスプレイデバイスの自動制御 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022123237A Active JP7487265B2 (ja) | 2016-12-29 | 2022-08-02 | 外部条件に基づくウェアラブルディスプレイデバイスの自動制御 |
Country Status (9)
Country | Link |
---|---|
US (2) | US11138436B2 (ja) |
EP (1) | EP3563215A4 (ja) |
JP (2) | JP7190434B2 (ja) |
KR (2) | KR102630774B1 (ja) |
CN (2) | CN110419018B (ja) |
AU (1) | AU2017387781B2 (ja) |
CA (1) | CA3051060A1 (ja) |
IL (2) | IL290002B2 (ja) |
WO (1) | WO2018125428A1 (ja) |
Families Citing this family (110)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3062142B1 (en) | 2015-02-26 | 2018-10-03 | Nokia Technologies OY | Apparatus for a near-eye display |
WO2017068926A1 (ja) * | 2015-10-21 | 2017-04-27 | ソニー株式会社 | 情報処理装置及びその制御方法、並びにコンピュータ・プログラム |
US20180082480A1 (en) * | 2016-09-16 | 2018-03-22 | John R. White | Augmented reality surgical technique guidance |
US10867445B1 (en) * | 2016-11-16 | 2020-12-15 | Amazon Technologies, Inc. | Content segmentation and navigation |
EP3563215A4 (en) | 2016-12-29 | 2020-08-05 | Magic Leap, Inc. | AUTOMATIC CONTROL OF A WEARABLE DISPLAY DEVICE BASED ON EXTERNAL CONDITIONS |
US10650552B2 (en) | 2016-12-29 | 2020-05-12 | Magic Leap, Inc. | Systems and methods for augmented reality |
EP3343267B1 (en) | 2016-12-30 | 2024-01-24 | Magic Leap, Inc. | Polychromatic light out-coupling apparatus, near-eye displays comprising the same, and method of out-coupling polychromatic light |
JP6298558B1 (ja) * | 2017-05-11 | 2018-03-20 | 株式会社コロプラ | 仮想空間を提供するための方法、および当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置 |
US20190005699A1 (en) * | 2017-06-30 | 2019-01-03 | Intel Corporation | Technologies for generating a motion model for a virtual character |
US10578870B2 (en) | 2017-07-26 | 2020-03-03 | Magic Leap, Inc. | Exit pupil expander |
US10762620B2 (en) * | 2017-11-27 | 2020-09-01 | Nvidia Corporation | Deep-learning method for separating reflection and transmission images visible at a semi-reflective surface in a computer image of a real-world scene |
US11270161B2 (en) * | 2017-11-27 | 2022-03-08 | Nvidia Corporation | Deep-learning method for separating reflection and transmission images visible at a semi-reflective surface in a computer image of a real-world scene |
EP3721270B1 (en) | 2017-12-10 | 2024-04-10 | Magic Leap, Inc. | Anti-reflective coatings on optical waveguides |
AU2018392482A1 (en) | 2017-12-20 | 2020-07-02 | Magic Leap, Inc. | Insert for augmented reality viewing device |
CN107977586B (zh) * | 2017-12-22 | 2021-04-13 | 联想(北京)有限公司 | 显示内容处理方法、第一电子设备以及第二电子设备 |
US10339508B1 (en) * | 2018-02-12 | 2019-07-02 | Capital One Services, Llc | Methods for determining user experience (UX) effectiveness of ATMs |
EP3766039B1 (en) | 2018-03-15 | 2024-08-14 | Magic Leap, Inc. | Image correction due to deformation of components of a viewing device |
CN112601975B (zh) | 2018-05-31 | 2024-09-06 | 奇跃公司 | 雷达头部姿势定位 |
US10825424B2 (en) | 2018-06-05 | 2020-11-03 | Magic Leap, Inc. | Homography transformation matrices based temperature calibration of a viewing system |
US11816886B1 (en) * | 2018-06-28 | 2023-11-14 | Meta Platforms Technologies, Llc | Apparatus, system, and method for machine perception |
US11579441B2 (en) | 2018-07-02 | 2023-02-14 | Magic Leap, Inc. | Pixel intensity modulation using modifying gain values |
US11856479B2 (en) | 2018-07-03 | 2023-12-26 | Magic Leap, Inc. | Systems and methods for virtual and augmented reality along a route with markers |
US11510027B2 (en) | 2018-07-03 | 2022-11-22 | Magic Leap, Inc. | Systems and methods for virtual and augmented reality |
CN112822979A (zh) | 2018-07-23 | 2021-05-18 | Mvi医疗保健公司 | 用于物理治疗的系统和方法 |
WO2020023545A1 (en) | 2018-07-24 | 2020-01-30 | Magic Leap, Inc. | Temperature dependent calibration of movement detection devices |
US11624929B2 (en) | 2018-07-24 | 2023-04-11 | Magic Leap, Inc. | Viewing device with dust seal integration |
WO2020023404A1 (en) | 2018-07-24 | 2020-01-30 | Magic Leap, Inc. | Flicker mitigation when toggling eyepiece display illumination in augmented reality systems |
CN112740665A (zh) | 2018-08-02 | 2021-04-30 | 奇跃公司 | 基于头部运动的瞳孔间距离补偿的观察系统 |
CN116820239A (zh) | 2018-08-03 | 2023-09-29 | 奇跃公司 | 图腾在用户交互系统中的融合姿势的基于未融合姿势的漂移校正 |
US11347056B2 (en) * | 2018-08-22 | 2022-05-31 | Microsoft Technology Licensing, Llc | Foveated color correction to improve color uniformity of head-mounted displays |
JP7487176B2 (ja) | 2018-08-22 | 2024-05-20 | マジック リープ, インコーポレイテッド | 患者視認システム |
US10706347B2 (en) | 2018-09-17 | 2020-07-07 | Intel Corporation | Apparatus and methods for generating context-aware artificial intelligence characters |
JP7503542B2 (ja) * | 2018-10-05 | 2024-06-20 | マジック リープ, インコーポレイテッド | 任意の場所における場所特有の仮想コンテンツのレンダリング |
US10712819B2 (en) * | 2018-10-30 | 2020-07-14 | Dish Network L.L.C. | System and methods for recreational sport heads-up display control |
EP3881279A4 (en) | 2018-11-16 | 2022-08-17 | Magic Leap, Inc. | IMAGE SIZE-TRIGGERED CLARIFICATION TO MAINTAIN IMAGE SHARPNESS |
US11127282B2 (en) * | 2018-11-29 | 2021-09-21 | Titan Health & Security Technologies, Inc. | Contextualized augmented reality display system |
KR20210100175A (ko) * | 2018-12-10 | 2021-08-13 | 페이스북 테크놀로지스, 엘엘씨 | 하이퍼보컬 뷰포트(hvp) 디스플레이를 위한 적응형 뷰포트 |
WO2020132484A1 (en) | 2018-12-21 | 2020-06-25 | Magic Leap, Inc. | Air pocket structures for promoting total internal reflection in a waveguide |
JP7539386B2 (ja) | 2018-12-28 | 2024-08-23 | マジック リープ, インコーポレイテッド | 左眼および右眼のための共有ディスプレイを伴う拡張および仮想現実ディスプレイシステム |
US11531516B2 (en) * | 2019-01-18 | 2022-12-20 | Samsung Electronics Co., Ltd. | Intelligent volume control |
FR3092416B1 (fr) * | 2019-01-31 | 2022-02-25 | Univ Grenoble Alpes | Système et procédé d’interaction avec des robots dans des applications de réalité mixte |
WO2020185405A1 (en) | 2019-03-12 | 2020-09-17 | Magic Leap, Inc. | Registration of local content between first and second augmented reality viewers |
JP7372061B2 (ja) * | 2019-07-01 | 2023-10-31 | 株式会社日立製作所 | 遠隔作業支援システム |
US11017231B2 (en) * | 2019-07-10 | 2021-05-25 | Microsoft Technology Licensing, Llc | Semantically tagged virtual and physical objects |
US11514673B2 (en) | 2019-07-26 | 2022-11-29 | Magic Leap, Inc. | Systems and methods for augmented reality |
US11470017B2 (en) * | 2019-07-30 | 2022-10-11 | At&T Intellectual Property I, L.P. | Immersive reality component management via a reduced competition core network component |
US11307647B2 (en) | 2019-09-11 | 2022-04-19 | Facebook Technologies, Llc | Artificial reality triggered by physical object |
DE102019125348A1 (de) * | 2019-09-20 | 2021-03-25 | 365FarmNet Group GmbH & Co. KG | Verfahren zur Unterstützung eines Benutzers bei einer landwirtschaftlichen Tätigkeit |
US11762457B1 (en) * | 2019-09-27 | 2023-09-19 | Apple Inc. | User comfort monitoring and notification |
US11568605B2 (en) | 2019-10-15 | 2023-01-31 | Magic Leap, Inc. | Cross reality system with localization service |
JP2023501574A (ja) | 2019-11-14 | 2023-01-18 | マジック リープ, インコーポレイテッド | 仮想および拡張現実のためのシステムおよび方法 |
JP2023502927A (ja) | 2019-11-15 | 2023-01-26 | マジック リープ, インコーポレイテッド | 外科手術環境において使用するための視認システム |
TWI712011B (zh) | 2019-12-18 | 2020-12-01 | 仁寶電腦工業股份有限公司 | 安全警示語音提示方法 |
US11687778B2 (en) | 2020-01-06 | 2023-06-27 | The Research Foundation For The State University Of New York | Fakecatcher: detection of synthetic portrait videos using biological signals |
US11080879B1 (en) * | 2020-02-03 | 2021-08-03 | Apple Inc. | Systems, methods, and graphical user interfaces for annotating, measuring, and modeling environments |
EP4104001A4 (en) | 2020-02-13 | 2024-03-13 | Magic Leap, Inc. | CROSS-REALLY SYSTEM WITH MAP PROCESSING USING MULTIPLE RESOLUTION FRAME DESCRIPTORS |
JP2023515526A (ja) * | 2020-02-26 | 2023-04-13 | マジック リープ, インコーポレイテッド | ウェアラブルシステムのための手およびトーテム入力融合 |
US11686940B2 (en) | 2020-03-19 | 2023-06-27 | Snap Inc. | Context-based image state selection |
EP4127878A4 (en) * | 2020-04-03 | 2024-07-17 | Magic Leap Inc | AVATAR CUSTOMIZATION FOR OPTIMAL GAZE DISCRIMINATION |
US11321928B2 (en) * | 2020-05-14 | 2022-05-03 | Qualcomm Incorporated | Methods and apparatus for atlas management of augmented reality content |
WO2021241431A1 (ja) * | 2020-05-29 | 2021-12-02 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、及びコンピュータが読み取り可能な記録媒体 |
DE102020207314A1 (de) * | 2020-06-11 | 2021-12-16 | Volkswagen Aktiengesellschaft | Steuerung einer Anzeige einer Augmented-Reality-Head-up-Display-Vorrichtung für ein Fortbewegungsmittel |
JP7492869B2 (ja) * | 2020-06-30 | 2024-05-30 | 株式会社メルカリ | 端末装置、画面表示システム、表示方法およびプログラム |
JP7096295B2 (ja) * | 2020-07-27 | 2022-07-05 | ソフトバンク株式会社 | 表示制御システム、プログラム、及び表示制御方法 |
US11320896B2 (en) * | 2020-08-03 | 2022-05-03 | Facebook Technologies, Llc. | Systems and methods for object tracking using fused data |
US11520456B2 (en) * | 2020-09-25 | 2022-12-06 | Apple Inc. | Methods for adjusting and/or controlling immersion associated with user interfaces |
US20220101002A1 (en) * | 2020-09-30 | 2022-03-31 | Kyndryl, Inc. | Real-world object inclusion in a virtual reality experience |
TWI818305B (zh) * | 2020-10-29 | 2023-10-11 | 宏達國際電子股份有限公司 | 頭戴式顯示裝置及其電源管理方法 |
US20240048934A1 (en) * | 2020-12-14 | 2024-02-08 | Moea Technologies, Inc. | Interactive mixed reality audio technology |
CN112255921B (zh) * | 2020-12-21 | 2021-09-07 | 宁波圻亿科技有限公司 | 一种ar眼镜智能控制系统及方法 |
EP4288856A1 (en) | 2021-02-08 | 2023-12-13 | Sightful Computers Ltd | Extended reality for productivity |
EP4295314A1 (en) | 2021-02-08 | 2023-12-27 | Sightful Computers Ltd | Content sharing in extended reality |
CN112783660B (zh) * | 2021-02-08 | 2024-05-07 | 腾讯科技(深圳)有限公司 | 虚拟场景中的资源处理方法、装置及电子设备 |
EP4288950A1 (en) | 2021-02-08 | 2023-12-13 | Sightful Computers Ltd | User interactions in extended reality |
US11995230B2 (en) | 2021-02-11 | 2024-05-28 | Apple Inc. | Methods for presenting and sharing content in an environment |
US20220329971A1 (en) * | 2021-03-31 | 2022-10-13 | Here Global B.V. | Determining context categorizations based on audio samples |
US11798276B2 (en) * | 2021-06-03 | 2023-10-24 | At&T Intellectual Property I, L.P. | Providing information about members of a group using an augmented reality display |
US20220401607A1 (en) * | 2021-06-22 | 2022-12-22 | International Business Machines Corporation | Activating emitting modules on a wearable device |
CN113344909B (zh) * | 2021-07-01 | 2023-12-08 | 中国石油大学(北京) | 一种火电锅炉透火焰高温滤镜结焦识别显示方法和装置 |
WO2023009580A2 (en) | 2021-07-28 | 2023-02-02 | Multinarity Ltd | Using an extended reality appliance for productivity |
CN113593342A (zh) * | 2021-08-03 | 2021-11-02 | 福州大学 | 一种沉浸式的智能互动室内火灾实景模拟系统 |
US11620797B2 (en) | 2021-08-05 | 2023-04-04 | Bank Of America Corporation | Electronic user interface with augmented detail display for resource location |
US12056268B2 (en) | 2021-08-17 | 2024-08-06 | Meta Platforms Technologies, Llc | Platformization of mixed reality objects in virtual reality environments |
US20230078919A1 (en) * | 2021-09-16 | 2023-03-16 | Globus Medical, Inc. | Extended reality systems for visualizing and controlling operating room equipment |
US11985176B2 (en) | 2021-09-24 | 2024-05-14 | Jvckenwood Corporation | Virtual-break-room providing system, virtual-break-room providing device, and virtual-break-room providing method |
US11900550B2 (en) | 2021-09-30 | 2024-02-13 | Snap Inc. | AR odometry using sensor data from a personal vehicle |
US12030577B2 (en) | 2021-09-30 | 2024-07-09 | Snap Inc. | AR based performance modulation of a personal mobility system |
US11933621B2 (en) * | 2021-10-06 | 2024-03-19 | Qualcomm Incorporated | Providing a location of an object of interest |
JP2023056109A (ja) * | 2021-10-07 | 2023-04-19 | トヨタ自動車株式会社 | 仮想空間制御システム、その制御方法、及び、制御プログラム |
US11500476B1 (en) | 2021-10-14 | 2022-11-15 | Hewlett-Packard Development Company, L.P. | Dual-transceiver based input devices |
US11748944B2 (en) | 2021-10-27 | 2023-09-05 | Meta Platforms Technologies, Llc | Virtual object structures and interrelationships |
US11813528B2 (en) | 2021-11-01 | 2023-11-14 | Snap Inc. | AR enhanced gameplay with a personal mobility system |
US20230185360A1 (en) * | 2021-12-10 | 2023-06-15 | Logitech Europe S.A. | Data processing platform for individual use |
US12069356B2 (en) | 2021-12-14 | 2024-08-20 | Dell Products L.P. | Display backplate to facilitate camera magnet attachment to a display panel |
US11985448B2 (en) | 2021-12-14 | 2024-05-14 | Dell Products L.P. | Camera with magnet attachment to display panel |
US20230188839A1 (en) * | 2021-12-14 | 2023-06-15 | Dell Products L.P. | Camera with microphone mute responsive to movement |
US12056827B2 (en) | 2021-12-30 | 2024-08-06 | Snap Inc. | AR-enhanced detection and localization of a personal mobility device |
CN114241396A (zh) * | 2021-12-31 | 2022-03-25 | 深圳市智岩科技有限公司 | 灯效控制方法、系统、装置、电子设备及存储介质 |
US12014465B2 (en) | 2022-01-06 | 2024-06-18 | Htc Corporation | Tracking system and method |
US12093447B2 (en) | 2022-01-13 | 2024-09-17 | Meta Platforms Technologies, Llc | Ephemeral artificial reality experiences |
US11948263B1 (en) | 2023-03-14 | 2024-04-02 | Sightful Computers Ltd | Recording the complete physical and extended reality environments of a user |
US20230334795A1 (en) | 2022-01-25 | 2023-10-19 | Multinarity Ltd | Dual mode presentation of user interface elements |
WO2023191314A1 (ko) * | 2022-03-31 | 2023-10-05 | 삼성전자 주식회사 | 정보를 제공하는 방법 및 이를 지원하는 전자 장치 |
KR102559938B1 (ko) * | 2022-04-24 | 2023-07-27 | 주식회사 피앤씨솔루션 | 증강현실 전용 필기도구를 이용한 증강현실 텍스쳐 전시 방법 |
US12026527B2 (en) | 2022-05-10 | 2024-07-02 | Meta Platforms Technologies, Llc | World-controlled and application-controlled augments in an artificial-reality environment |
WO2023228565A1 (ja) * | 2022-05-24 | 2023-11-30 | 株式会社Nttドコモ | 表示制御装置 |
WO2023244267A1 (en) * | 2022-06-13 | 2023-12-21 | Magic Leap, Inc. | Systems and methods for human gait analysis, real-time feedback and rehabilitation using an extended-reality device |
CN114783002B (zh) * | 2022-06-22 | 2022-09-13 | 中山大学深圳研究院 | 一种应用于科技服务领域的对象智能匹配方法 |
CN114795181B (zh) * | 2022-06-23 | 2023-02-10 | 深圳市铱硙医疗科技有限公司 | 辅助儿童适应核磁共振检查的方法及装置 |
US12073054B2 (en) | 2022-09-30 | 2024-08-27 | Sightful Computers Ltd | Managing virtual collisions between moving virtual objects |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009081529A (ja) | 2007-09-25 | 2009-04-16 | Nikon Corp | ヘッドマウントディスプレイ装置 |
JP2014010326A (ja) | 2012-06-29 | 2014-01-20 | Sony Computer Entertainment Inc | 立体映像観察デバイスおよび透過率制御方法 |
JP2015118332A (ja) | 2013-12-19 | 2015-06-25 | ソニー株式会社 | 画像表示装置及び画像表示方法 |
JP2015181216A (ja) | 2014-03-06 | 2015-10-15 | パナソニックIpマネジメント株式会社 | 表示制御装置および表示制御プログラム |
US20160027212A1 (en) | 2014-07-25 | 2016-01-28 | Alexandre da Veiga | Anti-trip when immersed in a virtual reality environment |
Family Cites Families (68)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6222525B1 (en) | 1992-03-05 | 2001-04-24 | Brad A. Armstrong | Image controllers with sheet connected sensors |
US5670988A (en) | 1995-09-05 | 1997-09-23 | Interlink Electronics, Inc. | Trigger operated electronic device |
US20030210228A1 (en) | 2000-02-25 | 2003-11-13 | Ebersole John Franklin | Augmented reality situational awareness system and method |
US7503006B2 (en) | 2003-09-25 | 2009-03-10 | Microsoft Corporation | Visual indication of current voice speaker |
US8778022B2 (en) | 2004-11-02 | 2014-07-15 | E-Vision Smart Optics Inc. | Electro-active intraocular lenses |
US20070081123A1 (en) | 2005-10-07 | 2007-04-12 | Lewis Scott W | Digital eyewear |
US8696113B2 (en) | 2005-10-07 | 2014-04-15 | Percept Technologies Inc. | Enhanced optical and perceptual digital eyewear |
US11428937B2 (en) | 2005-10-07 | 2022-08-30 | Percept Technologies | Enhanced optical and perceptual digital eyewear |
JP5036177B2 (ja) | 2005-12-12 | 2012-09-26 | オリンパス株式会社 | 情報表示装置 |
JP5228307B2 (ja) | 2006-10-16 | 2013-07-03 | ソニー株式会社 | 表示装置、表示方法 |
US9304319B2 (en) | 2010-11-18 | 2016-04-05 | Microsoft Technology Licensing, Llc | Automatic focus improvement for augmented reality displays |
US10156722B2 (en) | 2010-12-24 | 2018-12-18 | Magic Leap, Inc. | Methods and systems for displaying stereoscopy with a freeform optical system with addressable focus for virtual and augmented reality |
CA2822978C (en) | 2010-12-24 | 2019-02-19 | Hong Hua | An ergonomic head mounted display device and optical system |
CN103635891B (zh) | 2011-05-06 | 2017-10-27 | 奇跃公司 | 大量同时远程数字呈现世界 |
US8223088B1 (en) | 2011-06-09 | 2012-07-17 | Google Inc. | Multimode input field for a head-mounted display |
EP2760363A4 (en) | 2011-09-29 | 2015-06-24 | Magic Leap Inc | TACTILE GLOVE FOR HUMAN COMPUTER INTERACTION |
US9081177B2 (en) * | 2011-10-07 | 2015-07-14 | Google Inc. | Wearable computer with nearby object response |
US9255813B2 (en) * | 2011-10-14 | 2016-02-09 | Microsoft Technology Licensing, Llc | User controlled real object disappearance in a mixed reality display |
CN104011788B (zh) | 2011-10-28 | 2016-11-16 | 奇跃公司 | 用于增强和虚拟现实的系统和方法 |
KR102440195B1 (ko) | 2011-11-23 | 2022-09-02 | 매직 립, 인코포레이티드 | 3차원 가상 및 증강 현실 디스플레이 시스템 |
US20130178257A1 (en) * | 2012-01-06 | 2013-07-11 | Augaroo, Inc. | System and method for interacting with virtual objects in augmented realities |
CN104170155A (zh) | 2012-03-15 | 2014-11-26 | 三洋电机株式会社 | 非水电解质二次电池 |
BR112014024941A2 (pt) | 2012-04-05 | 2017-09-19 | Magic Leap Inc | dispositivo de imagem de campo de visão amplo com capacidade de focalização ativa |
EP2850609A4 (en) * | 2012-05-16 | 2017-01-11 | Mobile Augmented Reality Ltd. Imagine | A system worn by a moving user for fully augmenting reality by anchoring virtual objects |
CN104737061B (zh) | 2012-06-11 | 2018-01-16 | 奇跃公司 | 使用波导反射器阵列投射器的多深度平面三维显示器 |
US9671566B2 (en) | 2012-06-11 | 2017-06-06 | Magic Leap, Inc. | Planar waveguide apparatus with diffraction element(s) and system employing same |
JP5580855B2 (ja) | 2012-06-12 | 2014-08-27 | 株式会社ソニー・コンピュータエンタテインメント | 障害物回避装置および障害物回避方法 |
US9219901B2 (en) * | 2012-06-19 | 2015-12-22 | Qualcomm Incorporated | Reactive user interface for head-mounted display |
KR101957943B1 (ko) * | 2012-08-31 | 2019-07-04 | 삼성전자주식회사 | 정보 제공 방법 및 이를 위한 정보 제공 차량 |
JP2015534108A (ja) | 2012-09-11 | 2015-11-26 | マジック リープ, インコーポレイテッド | 人間工学的な頭部搭載型ディスプレイデバイスおよび光学システム |
US9077647B2 (en) * | 2012-10-05 | 2015-07-07 | Elwha Llc | Correlating user reactions with augmentations displayed through augmented views |
US9812046B2 (en) * | 2013-01-10 | 2017-11-07 | Microsoft Technology Licensing, Llc | Mixed reality display accommodation |
US9395543B2 (en) | 2013-01-12 | 2016-07-19 | Microsoft Technology Licensing, Llc | Wearable behavior-based vision system |
IL283193B (en) | 2013-01-15 | 2022-08-01 | Magic Leap Inc | A system for scanning electromagnetic imaging radiation |
US10685487B2 (en) | 2013-03-06 | 2020-06-16 | Qualcomm Incorporated | Disabling augmented reality (AR) devices at speed |
IL313175A (en) | 2013-03-11 | 2024-07-01 | Magic Leap Inc | System and method for augmentation and virtual reality |
NZ735754A (en) | 2013-03-15 | 2019-04-26 | Magic Leap Inc | Display system and method |
JP5813030B2 (ja) * | 2013-03-22 | 2015-11-17 | キヤノン株式会社 | 複合現実提示システム、仮想現実提示システム |
US10262462B2 (en) | 2014-04-18 | 2019-04-16 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
US9874749B2 (en) | 2013-11-27 | 2018-01-23 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
GB2517143A (en) * | 2013-08-07 | 2015-02-18 | Nokia Corp | Apparatus, method, computer program and system for a near eye display |
US9542626B2 (en) * | 2013-09-06 | 2017-01-10 | Toyota Jidosha Kabushiki Kaisha | Augmenting layer-based object detection with deep convolutional neural networks |
IL295157B2 (en) | 2013-10-16 | 2023-10-01 | Magic Leap Inc | An augmented or virtual reality head device with intrapupillary distance adjustment |
CN103559713B (zh) * | 2013-11-10 | 2017-01-11 | 深圳市幻实科技有限公司 | 一种提供增强现实的方法及终端 |
CN107315249B (zh) | 2013-11-27 | 2021-08-17 | 奇跃公司 | 虚拟和增强现实系统与方法 |
US9857591B2 (en) | 2014-05-30 | 2018-01-02 | Magic Leap, Inc. | Methods and system for creating focal planes in virtual and augmented reality |
CN103761085B (zh) * | 2013-12-18 | 2018-01-19 | 微软技术许可有限责任公司 | 混合现实全息对象开发 |
NZ722904A (en) | 2014-01-31 | 2020-05-29 | Magic Leap Inc | Multi-focal display system and method |
CN111552079B (zh) | 2014-01-31 | 2022-04-15 | 奇跃公司 | 多焦点显示系统和方法 |
US10203762B2 (en) * | 2014-03-11 | 2019-02-12 | Magic Leap, Inc. | Methods and systems for creating virtual and augmented reality |
US20150262425A1 (en) * | 2014-03-13 | 2015-09-17 | Ryan Hastings | Assessing augmented reality usage and productivity |
WO2015161307A1 (en) * | 2014-04-18 | 2015-10-22 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
AU2015297036B2 (en) | 2014-05-09 | 2017-09-28 | Google Llc | Systems and methods for discerning eye signals and continuous biometric identification |
CA3124368C (en) | 2014-05-30 | 2023-04-25 | Magic Leap, Inc. | Methods and systems for generating virtual content display with a virtual or augmented reality apparatus |
US10108256B2 (en) * | 2014-10-30 | 2018-10-23 | Mediatek Inc. | Systems and methods for processing incoming events while performing a virtual reality session |
US20160131905A1 (en) | 2014-11-07 | 2016-05-12 | Kabushiki Kaisha Toshiba | Electronic apparatus, method and storage medium |
US20160131904A1 (en) * | 2014-11-07 | 2016-05-12 | Osterhout Group, Inc. | Power management for head worn computing |
CN107209906A (zh) * | 2014-11-17 | 2017-09-26 | 维萨国际服务协会 | 三维图像增强显示装置中的认证和交易 |
US9858676B2 (en) * | 2015-01-08 | 2018-01-02 | International Business Machines Corporation | Displaying location-based rules on augmented reality glasses |
US10725297B2 (en) * | 2015-01-28 | 2020-07-28 | CCP hf. | Method and system for implementing a virtual representation of a physical environment using a virtual reality environment |
EP4173550A1 (en) | 2015-03-16 | 2023-05-03 | Magic Leap, Inc. | Diagnosing and treating health ailments |
US10296086B2 (en) * | 2015-03-20 | 2019-05-21 | Sony Interactive Entertainment Inc. | Dynamic gloves to convey sense of touch and movement for virtual objects in HMD rendered environments |
USD758367S1 (en) | 2015-05-14 | 2016-06-07 | Magic Leap, Inc. | Virtual reality headset |
EP3113106A1 (en) * | 2015-07-02 | 2017-01-04 | Nokia Technologies Oy | Determination of environmental augmentation allocation data |
US9836845B2 (en) * | 2015-08-25 | 2017-12-05 | Nextvr Inc. | Methods and apparatus for detecting objects in proximity to a viewer and presenting visual representations of objects in a simulated environment |
US10482681B2 (en) * | 2016-02-09 | 2019-11-19 | Intel Corporation | Recognition-based object segmentation of a 3-dimensional image |
US9726896B2 (en) * | 2016-04-21 | 2017-08-08 | Maximilian Ralph Peter von und zu Liechtenstein | Virtual monitor display technique for augmented reality environments |
EP3563215A4 (en) | 2016-12-29 | 2020-08-05 | Magic Leap, Inc. | AUTOMATIC CONTROL OF A WEARABLE DISPLAY DEVICE BASED ON EXTERNAL CONDITIONS |
-
2017
- 2017-11-17 EP EP17888654.5A patent/EP3563215A4/en active Pending
- 2017-11-17 CN CN201780087609.9A patent/CN110419018B/zh active Active
- 2017-11-17 KR KR1020237022456A patent/KR102630774B1/ko active IP Right Grant
- 2017-11-17 CA CA3051060A patent/CA3051060A1/en active Pending
- 2017-11-17 JP JP2019535899A patent/JP7190434B2/ja active Active
- 2017-11-17 CN CN202310968411.9A patent/CN117251053A/zh active Pending
- 2017-11-17 US US15/816,875 patent/US11138436B2/en active Active
- 2017-11-17 KR KR1020197021805A patent/KR102553190B1/ko active IP Right Grant
- 2017-11-17 IL IL290002A patent/IL290002B2/en unknown
- 2017-11-17 AU AU2017387781A patent/AU2017387781B2/en active Active
- 2017-11-17 WO PCT/US2017/062365 patent/WO2018125428A1/en unknown
-
2019
- 2019-06-26 IL IL267683A patent/IL267683B/en unknown
-
2021
- 2021-08-19 US US17/407,023 patent/US11568643B2/en active Active
-
2022
- 2022-08-02 JP JP2022123237A patent/JP7487265B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009081529A (ja) | 2007-09-25 | 2009-04-16 | Nikon Corp | ヘッドマウントディスプレイ装置 |
JP2014010326A (ja) | 2012-06-29 | 2014-01-20 | Sony Computer Entertainment Inc | 立体映像観察デバイスおよび透過率制御方法 |
JP2015118332A (ja) | 2013-12-19 | 2015-06-25 | ソニー株式会社 | 画像表示装置及び画像表示方法 |
US20160282618A1 (en) | 2013-12-19 | 2016-09-29 | Sony Corporation | Image display device and image display method |
JP2015181216A (ja) | 2014-03-06 | 2015-10-15 | パナソニックIpマネジメント株式会社 | 表示制御装置および表示制御プログラム |
US20160027212A1 (en) | 2014-07-25 | 2016-01-28 | Alexandre da Veiga | Anti-trip when immersed in a virtual reality environment |
Also Published As
Publication number | Publication date |
---|---|
EP3563215A1 (en) | 2019-11-06 |
KR102630774B1 (ko) | 2024-01-30 |
JP2022140621A (ja) | 2022-09-26 |
AU2017387781A1 (en) | 2019-07-25 |
US11568643B2 (en) | 2023-01-31 |
KR20230107399A (ko) | 2023-07-14 |
CN110419018B (zh) | 2023-08-04 |
US20220044021A1 (en) | 2022-02-10 |
CN117251053A (zh) | 2023-12-19 |
IL267683A (en) | 2019-08-29 |
US11138436B2 (en) | 2021-10-05 |
KR20190100957A (ko) | 2019-08-29 |
JP2020507797A (ja) | 2020-03-12 |
IL267683B (en) | 2022-02-01 |
IL290002B2 (en) | 2023-10-01 |
CN110419018A (zh) | 2019-11-05 |
CA3051060A1 (en) | 2018-07-05 |
US20180189568A1 (en) | 2018-07-05 |
WO2018125428A1 (en) | 2018-07-05 |
IL290002B1 (en) | 2023-06-01 |
AU2017387781B2 (en) | 2022-04-28 |
IL290002A (en) | 2022-03-01 |
JP7487265B2 (ja) | 2024-05-20 |
KR102553190B1 (ko) | 2023-07-07 |
EP3563215A4 (en) | 2020-08-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7487265B2 (ja) | 外部条件に基づくウェアラブルディスプレイデバイスの自動制御 | |
JP7168612B2 (ja) | ユーザインターフェースメニューのコンテキスト認識 | |
JP7492558B2 (ja) | 視野周辺の視覚的背光 | |
CN110249368B (zh) | 混合现实环境中提供虚拟远程控制的可穿戴系统及方法 | |
JP2023520463A (ja) | 最適視線弁別のためのアバタカスタマイズ | |
JP2023542847A (ja) | 三次元環境と相互作用するためのデバイス、方法、及びグラフィカルユーザインタフェース | |
JP2021524629A (ja) | ウェアラブルシステムのためのトランスモード入力融合 | |
NZ794186A (en) | Automatic control of wearable display device based on external conditions | |
US20230306695A1 (en) | Devices, methods, and graphical user interfaces for three-dimensional user experience sessions in an extended reality environment | |
WO2023183340A1 (en) | Devices, methods, and graphical user interfaces for three-dimensional user experience sessions in an extended reality environment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201116 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210720 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211001 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220502 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220802 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221202 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221205 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7190434 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |