JP2023542628A - ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース - Google Patents
ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース Download PDFInfo
- Publication number
- JP2023542628A JP2023542628A JP2023515028A JP2023515028A JP2023542628A JP 2023542628 A JP2023542628 A JP 2023542628A JP 2023515028 A JP2023515028 A JP 2023515028A JP 2023515028 A JP2023515028 A JP 2023515028A JP 2023542628 A JP2023542628 A JP 2023542628A
- Authority
- JP
- Japan
- Prior art keywords
- user
- electronic device
- graphical representation
- predetermined
- change
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 100
- 230000008859 change Effects 0.000 claims abstract description 101
- 230000004044 response Effects 0.000 claims abstract description 26
- 210000001508 eye Anatomy 0.000 claims description 229
- 230000033001 locomotion Effects 0.000 claims description 52
- 230000000694 effects Effects 0.000 claims description 15
- 238000004891 communication Methods 0.000 claims description 10
- 238000005562 fading Methods 0.000 claims description 8
- 230000010365 information processing Effects 0.000 claims 5
- 230000000007 visual effect Effects 0.000 description 85
- 230000003993 interaction Effects 0.000 description 22
- 238000012986 modification Methods 0.000 description 22
- 230000004048 modification Effects 0.000 description 22
- 230000008569 process Effects 0.000 description 22
- 210000003128 head Anatomy 0.000 description 21
- 210000004709 eyebrow Anatomy 0.000 description 20
- 230000001149 cognitive effect Effects 0.000 description 17
- 238000012545 processing Methods 0.000 description 16
- 230000003190 augmentative effect Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 13
- 230000005540 biological transmission Effects 0.000 description 10
- 230000002093 peripheral effect Effects 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 9
- 210000001747 pupil Anatomy 0.000 description 9
- 230000001953 sensory effect Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 210000004247 hand Anatomy 0.000 description 7
- 210000000707 wrist Anatomy 0.000 description 7
- -1 802.3x Chemical compound 0.000 description 6
- 230000007704 transition Effects 0.000 description 6
- 210000001061 forehead Anatomy 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 230000007935 neutral effect Effects 0.000 description 5
- 238000005286 illumination Methods 0.000 description 4
- 210000001331 nose Anatomy 0.000 description 4
- 230000000295 complement effect Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 206010014970 Ephelides Diseases 0.000 description 2
- 208000003351 Melanosis Diseases 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 210000004209 hair Anatomy 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 210000000214 mouth Anatomy 0.000 description 2
- APTZNLHMIGJTEW-UHFFFAOYSA-N pyraflufen-ethyl Chemical compound C1=C(Cl)C(OCC(=O)OCC)=CC(C=2C(=C(OC(F)F)N(C)N=2)Cl)=C1F APTZNLHMIGJTEW-UHFFFAOYSA-N 0.000 description 2
- 229910052710 silicon Inorganic materials 0.000 description 2
- 239000010703 silicon Substances 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 241000473391 Archosargus rhomboidalis Species 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000003750 conditioning effect Effects 0.000 description 1
- 239000002772 conduction electron Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 230000005669 field effect Effects 0.000 description 1
- 210000002478 hand joint Anatomy 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 230000004270 retinal projection Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
- A63F13/2145—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads the surface being also a display device, e.g. touch screens
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/25—Output arrangements for video game devices
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
- A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
- A63F13/655—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/90—Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
- A63F13/92—Video game devices specially adapted to be hand-held while playing
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0081—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for altering, e.g. enlarging, the entrance or exit pupil
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
- G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Optics & Photonics (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
本出願は、2020年9月26日出願の米国特許仮出願第63/083,911号の優先権を主張する2021年9月23日出願の米国特許出願第17/483,744号の継続出願であり、これら特許出願のそれぞれは、参照によりその全体が組み込まれる。
本開示は、概して、ディスプレイを介して仮想現実及び複合現実体験を提供する電子デバイスを含むがこれらに限定されない、表示生成コンポーネントと、コンピュータ生成体験を提供する1つ以上の入力デバイスと、を有するコンピュータシステムに関する。
ユーザインターフェース及び関連するプロセス
Claims (33)
- ユーザの身体の所定の部分の上に装着されるように構成された電子デバイスであって、1つ以上のプロセッサと、メモリと、前記ユーザの身体の前記所定の部分とは反対側にて前記電子デバイス上に配置された表示生成コンポーネントとを有する、電子デバイスにおいて、
前記電子デバイスが前記ユーザの身体の前記所定の部分の上に装着されている間に、前記表示生成コンポーネントを介して、前記ユーザの身体の前記所定の部分に対応する身体部分の外観のグラフィック表現を表示することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の変化を検出することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記変化を検出したことに応答して、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って、前記ユーザの身体の所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することと、
を含む、方法。 - 前記電子デバイスの前記検出された位置の変化が、前記ユーザの身体の前記所定の部分から離れる前記電子デバイスの動きである、請求項1に記載の方法。
- 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って前記グラフィック表現を修正することが、
前記ユーザの身体の前記所定の部分から離れた所定の距離において、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部の表示を停止すること、
を含む、請求項2に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することが、
前記ユーザの身体の前記所定の部分に対する(前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の)前記グラフィック表現の少なくとも一部の位置を維持すること、
を含む、請求項1~3のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することが、
前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の全てよりも少ないサブセットを含むように、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正すること、
を含む、請求項1~4のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することが、
前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部を不明瞭にすること
を含む、請求項1~4のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を不明瞭にすることが、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部をフェードアウトさせることを含む、請求項6に記載の方法。
- 前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を不明瞭にすることが、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部をぼかすことを含む、請求項6に記載の方法。
- 前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を不明瞭にすることが、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現をビネットにすることを含む、請求項6に記載の方法。
- 前記ユーザが前記電子デバイスを装着する前に、前記ユーザが前記電子デバイスを着けようとしている間、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を表示すること、
を含む、請求項1~9のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分から離れた所定の距離において、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の表示を開始すること、
を含む、請求項1~10のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の第2の変化を検出することであって、前記電子デバイスの前記位置の前記第2の変化が前記ユーザの身体の前記所定の部分に向かうものである、ことと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化を検出したことに応答して、徐々に、経時的に、又は前記ユーザの身体の前記所定の部分に向かう前記位置の変化の進行に従って、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することと、
を含む、請求項1~11のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することが、
前記電子デバイスが前記ユーザの身体の前記所定の部分に向かって移動されるにつれて、より多い数の解剖学的特徴のグラフィック表現を含むように、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正すること、
を含む、請求項12に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することは、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部をフェードインさせることを含む、請求項12に記載の方法。
- 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することは、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部のぼかしを減少させることを含む、請求項12に記載の方法。
- 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することは、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現のビネット効果を低減することを含む、請求項12に記載の方法。
- 前記ユーザの身体の前記所定の部分が両目を含む、請求項1~16のいずれか一項に記載の方法。
- 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化が、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の第1の変化であり、
前記方法が、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の第2の変化を検出することであって、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化は、前記第1の変化と反対である、ことと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に応答して、ある期間にわたって、又は前記ユーザの身体の前記所定の部分から離れる位置の前記第2の変化の進行に従って、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観を反転させることと、
を更に含む、請求項1~10のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の変化が第1の方向に沿っているという判定に従って、第1の方式で前記グラフィック表現を修正することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の変化が前記第1の方向とは異なる第2の方向に沿っているという判定に従って、前記第1の方式とは異なる第2の方式で前記グラフィック表現を修正することと、
を含む、請求項1~18のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の変化が、前記第1の方向に沿った成分及び前記第2の方向に沿った成分を有するという判定に従って、
前記第1の方向に沿った前記成分に基づいて、前記第1の方式で前記グラフィック表現を修正することと、
前記第2の方向に沿った前記成分に基づいて、前記第2の方式で前記グラフィック表現を修正することと、
を含む、請求項19に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の変化が、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの回転であるという判定に従って、第3の方式で前記グラフィック表現を修正すること、
を含む、請求項1~20のいずれか一項に記載の方法。 - 電子デバイスであって、
ユーザの身体の所定の部分とは反対側にて前記電子デバイス上に配置された表示生成コンポーネントと、
1つ以上の入力デバイスと、
1つ以上のプロセッサと、
前記1つ以上のプロセッサによって実行されるように構成されている1つ以上のプログラムを記憶したメモリと、を備え、前記1つ以上のプログラムが、
前記電子デバイスが前記ユーザの身体の前記所定の部分の上に装着されている間に、前記表示生成コンポーネントを介して、前記ユーザの身体の前記所定の部分に対応する身体部分の外観のグラフィック表現を表示することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の変化を検出することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記変化を検出したことに応答して、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って、前記ユーザの身体の所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することと、
を行うための命令を含む、
電子デバイス。 - 前記1つ以上のプログラムが、請求項2~21のいずれか一項に記載の方法を実行するための命令を含む、請求項22に記載の電子デバイス。
- 1つ以上のプログラムを記憶するコンピュータ可読記憶媒体であって、前記1つ以上のプログラムが、ユーザの身体の所定の部分とは反対側にて電子デバイス上に配置された表示生成コンポーネントと1つ以上の入力デバイスとを含む、及び/又はそれらと通信する前記電子デバイスによって実行されると、前記電子デバイスに、
前記コンピュータシステムが前記ユーザの身体の前記所定の部分の上に装着されている間に、前記表示生成コンポーネントを介して、前記ユーザの身体の前記所定の部分に対応する身体部分の外観のグラフィック表現を表示することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の変化を検出することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記変化を検出したことに応答して、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って、前記ユーザの身体の所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することと、
を行わせるための命令を含む、コンピュータ可読記憶媒体。 - 前記1つ以上のプログラムが、前記第1の電子デバイスによって実行されると、前記第1の電子デバイスに請求項2~21のいずれか一項に記載の方法を実行させる、命令を含む、請求項24に記載のコンピュータ可読記憶媒体。
- 電子デバイスであって、
ユーザの身体の所定の部分とは反対側にて前記電子デバイス上に配置された表示生成コンポーネントと、
1つ以上の入力デバイスと、
前記電子デバイスが前記ユーザの身体の前記所定の部分の上に装着されている間に有効化されて、前記表示生成コンポーネントを介して、前記ユーザの身体の前記所定の部分に対応する身体部分の外観のグラフィック表現を表示するための手段と、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の変化を検出するための手段と、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記変化を検出したことに応答して有効化されて、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って、前記ユーザの身体の所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正するための手段と、
を備える、電子デバイス。 - 請求項2~21のいずれか一項に記載の方法を実行するための手段を更に備える、請求項26に記載の電子デバイス。
- ユーザの身体の所定の部分とは反対側にて電子デバイス上に配置された表示生成コンポーネントと、1つ以上の入力デバイスとを含む、及び/又はそれらと通信する前記電子デバイスにおいて使用するための情報処理装置であって、
前記電子デバイスが前記ユーザの身体の前記所定の部分の上に装着されている間に有効化されて、前記表示生成コンポーネントを介して、前記ユーザの身体の前記所定の部分に対応する身体部分の外観のグラフィック表現を表示するための手段と、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の変化を検出するための手段と、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記変化を検出したことに応答して有効化されて、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って、前記ユーザの身体の所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正するための手段と、
を備える、情報処理装置。 - コンピュータシステムであって、
表示生成コンポーネントと、
1つ以上の入力デバイスと、
1つ以上のプロセッサと、
前記1つ以上のプロセッサによって実行されるように構成されている1つ以上のプログラムを記憶したメモリと、を備え、前記1つ以上のプログラムが、請求項1~21のいずれか一項に記載の方法を実行するための命令を含む、
コンピュータシステム。 - 1つ以上のプログラムを記憶したコンピュータ可読記憶媒体であって、前記1つ以上のプログラムが、表示生成コンポーネントと、1つ以上の入力デバイスとを含む、及び/又はそれらと通信するコンピュータシステムによって実行されると、前記コンピュータシステムに、請求項1~21のいずれか一項に記載の方法を実行させる命令を含む、コンピュータ可読記憶媒体。
- 表示生成コンポーネントと、1つ以上の入力デバイスと、メモリと、前記メモリに記憶された1つ以上のプログラムを実行する1つ以上のプロセッサと、を含む、及び/又はそれらと通信するコンピュータシステムのグラフィカルユーザインターフェースであって、請求項1~21のいずれか一項に記載の方法に従って表示されるユーザインターフェースを備える、グラフィカルユーザインターフェース。
- 電子デバイスであって、
表示生成コンポーネントと、
1つ以上の入力デバイスと、
請求項1~21のいずれか一項に記載の方法を実行するための手段と、
を備える、電子デバイス。 - 表示生成コンポーネントと1つ以上の入力デバイスとを含む、及び/又はそれらと通信する電子デバイスにおいて使用するための情報処理装置であって、
請求項1~21のいずれか一項に記載の方法を実行するための手段
を備える、情報処理装置。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202063083911P | 2020-09-26 | 2020-09-26 | |
US63/083,911 | 2020-09-26 | ||
US17/483,744 | 2021-09-23 | ||
US17/483,744 US11579693B2 (en) | 2020-09-26 | 2021-09-23 | Systems, methods, and graphical user interfaces for updating display of a device relative to a user's body |
PCT/US2021/052047 WO2022067097A1 (en) | 2020-09-26 | 2021-09-24 | Systems, methods, and graphical user interfaces for updating display of a device relative to a user's body |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023542628A true JP2023542628A (ja) | 2023-10-11 |
JP7459375B2 JP7459375B2 (ja) | 2024-04-01 |
Family
ID=80821198
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023515028A Active JP7459375B2 (ja) | 2020-09-26 | 2021-09-24 | ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース |
Country Status (7)
Country | Link |
---|---|
US (2) | US11579693B2 (ja) |
EP (1) | EP4182780A1 (ja) |
JP (1) | JP7459375B2 (ja) |
KR (1) | KR20230037054A (ja) |
CN (1) | CN116710181A (ja) |
AU (1) | AU2021350084B2 (ja) |
WO (1) | WO2022067097A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11579693B2 (en) | 2020-09-26 | 2023-02-14 | Apple Inc. | Systems, methods, and graphical user interfaces for updating display of a device relative to a user's body |
US11644890B2 (en) * | 2021-02-11 | 2023-05-09 | Qualcomm Incorporated | Image capturing in extended reality environments |
US11972526B1 (en) | 2023-03-31 | 2024-04-30 | Apple Inc. | Rendering of enrolled user's face for external display |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080150921A1 (en) * | 2006-12-20 | 2008-06-26 | Microsoft Corporation | Supplementing and controlling the display of a data set |
BR112015004958A8 (pt) | 2012-09-12 | 2019-08-13 | Sony Corp | dispositivo e método de exibição de imagem, e, mídia de gravação legível por computador. |
US10554962B2 (en) * | 2014-02-07 | 2020-02-04 | Samsung Electronics Co., Ltd. | Multi-layer high transparency display for light field generation |
US10274992B2 (en) | 2014-11-12 | 2019-04-30 | Kyocera Corporation | Wearable device with muscle activity detector |
US20160239091A1 (en) | 2015-02-12 | 2016-08-18 | Qualcomm Incorporated | Controlled display of content on wearable displays |
US10268438B2 (en) * | 2016-06-30 | 2019-04-23 | Sony Interactive Entertainment Inc. | Display screen front panel of HMD for viewing by users viewing the HMD player |
JP7140602B2 (ja) | 2018-08-28 | 2022-09-21 | 株式会社Nttドコモ | ウェアラブル端末及び表示システム |
US11200752B1 (en) * | 2019-08-23 | 2021-12-14 | Lucasfilm Entertainment Company Ltd. | Color correction for immersive content production systems |
US11627259B2 (en) * | 2019-10-24 | 2023-04-11 | Sony Corporation | Device, method and computer program |
US11579693B2 (en) | 2020-09-26 | 2023-02-14 | Apple Inc. | Systems, methods, and graphical user interfaces for updating display of a device relative to a user's body |
-
2021
- 2021-09-23 US US17/483,744 patent/US11579693B2/en active Active
- 2021-09-24 JP JP2023515028A patent/JP7459375B2/ja active Active
- 2021-09-24 AU AU2021350084A patent/AU2021350084B2/en active Active
- 2021-09-24 KR KR1020237005233A patent/KR20230037054A/ko active Search and Examination
- 2021-09-24 EP EP21795107.8A patent/EP4182780A1/en active Pending
- 2021-09-24 CN CN202180062294.9A patent/CN116710181A/zh active Pending
- 2021-09-24 WO PCT/US2021/052047 patent/WO2022067097A1/en active Application Filing
-
2023
- 2023-02-08 US US18/107,385 patent/US11893154B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20230185375A1 (en) | 2023-06-15 |
AU2021350084B2 (en) | 2024-06-13 |
AU2021350084A1 (en) | 2023-03-23 |
EP4182780A1 (en) | 2023-05-24 |
US20220100271A1 (en) | 2022-03-31 |
JP7459375B2 (ja) | 2024-04-01 |
CN116710181A (zh) | 2023-09-05 |
KR20230037054A (ko) | 2023-03-15 |
US11893154B2 (en) | 2024-02-06 |
WO2022067097A1 (en) | 2022-03-31 |
US11579693B2 (en) | 2023-02-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11340756B2 (en) | Devices, methods, and graphical user interfaces for interacting with three-dimensional environments | |
US11520456B2 (en) | Methods for adjusting and/or controlling immersion associated with user interfaces | |
CN116719452A (zh) | 用于与用于移动虚拟环境中的虚拟对象的虚拟控件和/或示能表示交互的方法 | |
US11853527B2 (en) | Devices, methods, and graphical user interfaces for providing computer-generated experiences | |
JP7459375B2 (ja) | ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース | |
US11720171B2 (en) | Methods for navigating user interfaces | |
CN118159935A (zh) | 用于内容应用程序的设备、方法和图形用户界面 | |
US20230336865A1 (en) | Device, methods, and graphical user interfaces for capturing and displaying media | |
US20230171484A1 (en) | Devices, methods, and graphical user interfaces for generating and displaying a representation of a user | |
US20230092874A1 (en) | Devices, Methods, and Graphical User Interfaces for Interacting with Three-Dimensional Environments | |
US20240094862A1 (en) | Devices, Methods, and Graphical User Interfaces for Displaying Shadow and Light Effects in Three-Dimensional Environments | |
US20230152935A1 (en) | Devices, methods, and graphical user interfaces for presenting virtual objects in virtual environments | |
US20240104819A1 (en) | Representations of participants in real-time communication sessions | |
US20240118746A1 (en) | User interfaces for gaze tracking enrollment | |
KR20240091224A (ko) | 사용자의 표현을 생성 및 디스플레이하기 위한 디바이스들, 방법들, 및 그래픽 사용자 인터페이스들 | |
CN117957581A (zh) | 用于与三维环境交互的设备、方法和图形用户界面 | |
WO2024063786A1 (en) | Devices, methods, and graphical user interfaces for displaying shadow and light effects in three-dimensional environments | |
WO2023096940A2 (en) | Devices, methods, and graphical user interfaces for generating and displaying a representation of a user | |
EP4388502A1 (en) | Devices, methods, and graphical user interfaces for interacting with three-dimensional environments | |
CN117999534A (zh) | 用于与三维环境进行交互的设备、方法和图形用户界面 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230303 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230303 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240219 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240219 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240319 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7459375 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |