JP7459375B2 - ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース - Google Patents
ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース Download PDFInfo
- Publication number
- JP7459375B2 JP7459375B2 JP2023515028A JP2023515028A JP7459375B2 JP 7459375 B2 JP7459375 B2 JP 7459375B2 JP 2023515028 A JP2023515028 A JP 2023515028A JP 2023515028 A JP2023515028 A JP 2023515028A JP 7459375 B2 JP7459375 B2 JP 7459375B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- electronic device
- graphical representation
- predetermined
- appearance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 95
- 210000001508 eye Anatomy 0.000 claims description 232
- 230000008859 change Effects 0.000 claims description 95
- 230000033001 locomotion Effects 0.000 claims description 55
- 238000012986 modification Methods 0.000 claims description 23
- 230000004048 modification Effects 0.000 claims description 23
- 230000004044 response Effects 0.000 claims description 23
- 230000000694 effects Effects 0.000 claims description 16
- 238000005562 fading Methods 0.000 claims description 11
- 230000000007 visual effect Effects 0.000 description 83
- 230000003993 interaction Effects 0.000 description 23
- 210000003128 head Anatomy 0.000 description 22
- 230000008569 process Effects 0.000 description 22
- 210000004709 eyebrow Anatomy 0.000 description 20
- 230000001149 cognitive effect Effects 0.000 description 17
- 238000012545 processing Methods 0.000 description 16
- 230000003190 augmentative effect Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 11
- 230000005540 biological transmission Effects 0.000 description 10
- 230000002093 peripheral effect Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 210000001747 pupil Anatomy 0.000 description 9
- 230000001953 sensory effect Effects 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 8
- 230000007704 transition Effects 0.000 description 7
- 210000000707 wrist Anatomy 0.000 description 7
- -1 802.3x Chemical compound 0.000 description 6
- 210000001061 forehead Anatomy 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 230000007935 neutral effect Effects 0.000 description 5
- 210000004247 hand Anatomy 0.000 description 4
- 238000005286 illumination Methods 0.000 description 4
- 230000000295 complement effect Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 210000001331 nose Anatomy 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 206010014970 Ephelides Diseases 0.000 description 2
- 208000003351 Melanosis Diseases 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 210000004209 hair Anatomy 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 210000000214 mouth Anatomy 0.000 description 2
- APTZNLHMIGJTEW-UHFFFAOYSA-N pyraflufen-ethyl Chemical compound C1=C(Cl)C(OCC(=O)OCC)=CC(C=2C(=C(OC(F)F)N(C)N=2)Cl)=C1F APTZNLHMIGJTEW-UHFFFAOYSA-N 0.000 description 2
- 229910052710 silicon Inorganic materials 0.000 description 2
- 239000010703 silicon Substances 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000003750 conditioning effect Effects 0.000 description 1
- 239000002772 conduction electron Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 230000005669 field effect Effects 0.000 description 1
- 210000002478 hand joint Anatomy 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 230000004270 retinal projection Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
- A63F13/2145—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads the surface being also a display device, e.g. touch screens
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/25—Output arrangements for video game devices
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
- A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
- A63F13/655—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/90—Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
- A63F13/92—Video game devices specially adapted to be hand-held while playing
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0081—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for altering, e.g. enlarging, the entrance or exit pupil
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
- G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Optics & Photonics (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Description
本出願は、2020年9月26日出願の米国特許仮出願第63/083,911号の優先権を主張する2021年9月23日出願の米国特許出願第17/483,744号の継続出願であり、これら特許出願のそれぞれは、参照によりその全体が組み込まれる。
本開示は、概して、ディスプレイを介して仮想現実及び複合現実体験を提供する電子デバイスを含むがこれらに限定されない、表示生成コンポーネントと、コンピュータ生成体験を提供する1つ以上の入力デバイスと、を有するコンピュータシステムに関する。
ユーザインターフェース及び関連するプロセス
Claims (26)
- ユーザの身体の所定の部分の上に装着されるように構成された電子デバイスであって、1つ以上のプロセッサと、メモリと、前記ユーザの身体の前記所定の部分とは反対側にて前記電子デバイス上に配置された表示生成コンポーネントとを有する、電子デバイスにおいて、
前記電子デバイスが前記ユーザの身体の前記所定の部分の上に装着されている間に、前記表示生成コンポーネントを介して、前記ユーザの身体の前記所定の部分に対応する身体部分の外観のグラフィック表現を表示することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の変化を検出することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記変化を検出したことに応答して、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って、前記ユーザの身体の所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することであって、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の一部を不明瞭にすることを含む、ことと、
を含む、方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記変化を検出することが、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの個別の位置から離れる方向への前記電子デバイスの動きを検出することを含み、
前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の前記一部を不明瞭にすることが、前記電子デバイスの前記位置が前記電子デバイスの前記個別の位置に対して変化するにつれて、前記身体部分の前記外観の前記グラフィック表現の1つ以上の特徴を徐々に不明瞭にすること、
を含む、請求項1に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って前記グラフィック表現を修正することが、
前記ユーザの身体の前記所定の部分から離れた所定の距離において、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部の表示を停止すること、
を含む、請求項2に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することが、
前記ユーザの身体の前記所定の部分に対する前記グラフィック表現の少なくとも一部の位置を維持すること、
を含む、請求項1~3のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することが、
前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の全てよりも少ないサブセットを含むように、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の前記一部を不明瞭にすること、
を含む、請求項1~3のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の変化を検出することが、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置を前記ユーザが調節しているのを検出することを含む、請求項1~3のいずれか一項に記載の方法。
- 前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の前記一部を不明瞭にすることが、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部をフェードアウトさせることを含む、請求項1~3のいずれか一項に記載の方法。
- 前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の前記一部を不明瞭にすることが、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部をぼかすことを含む、請求項1~3のいずれか一項に記載の方法。
- 前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の前記一部を不明瞭にすることが、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現をビネットにすることを含む、請求項1~3のいずれか一項に記載の方法。
- 前記ユーザが前記電子デバイスを装着する前に、前記ユーザが前記電子デバイスを着けようとしている間、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を表示すること、
を含む、請求項1~3のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分から離れた所定の距離において、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の表示を開始すること、
を含む、請求項1~3のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の第2の変化を検出することであって、前記電子デバイスの前記位置の前記第2の変化が前記ユーザの身体の前記所定の部分に向かうものである、ことと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化を検出したことに応答して、徐々に、経時的に、又は前記ユーザの身体の前記所定の部分に向かう前記位置の変化の進行に従って、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することと、
を含む、請求項1~3のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することが、
前記電子デバイスが前記ユーザの身体の前記所定の部分に向かって移動されるにつれて、より多い数の解剖学的特徴のグラフィック表現を含むように、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正すること、
を含む、請求項12に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することは、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部をフェードインさせることを含む、請求項12に記載の方法。
- 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することは、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の少なくとも一部のぼかしを減少させることを含む、請求項12に記載の方法。
- 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に従って前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することは、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現のビネット効果を低減することを含む、請求項12に記載の方法。
- 前記ユーザの身体の前記所定の部分が両目を含む、請求項1~3のいずれか一項に記載の方法。
- 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化が、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の第1の変化であり、
前記方法が、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の第2の変化を検出することであって、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化は、前記第1の変化と反対である、ことと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記第2の変化に応答して、ある期間にわたって、又は前記ユーザの身体の前記所定の部分から離れる位置の前記第2の変化の進行に従って、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の前記修正を反転させることと、
を更に含む、請求項1~3のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の前記第2の変化を検出することが、前記ユーザの身体の前記所定の部分から離れる又は近づく前記電子デバイスの動き、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの上又は下への動き、及び前記ユーザの身体の前記所定の部分に対する前記電子デバイスの左又は右への動きのうちの1つ以上を検出することを含む、請求項18に記載の方法。
- 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の変化が第1の方向に沿っているという判定に従って、第1の方式で前記グラフィック表現を修正することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の変化が前記第1の方向とは異なる第2の方向に沿っているという判定に従って、前記第1の方式とは異なる第2の方式で前記グラフィック表現を修正することと、
を含む、請求項1~3のいずれか一項に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の変化が、前記第1の方向に沿った成分及び前記第2の方向に沿った成分を有するという判定に従って、
前記第1の方向に沿った前記成分に基づいて、前記第1の方式で前記グラフィック表現を修正することと、
前記第2の方向に沿った前記成分に基づいて、前記第2の方式で前記グラフィック表現を修正することと、
を含む、請求項20に記載の方法。 - 前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の変化が、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの回転であるという判定に従って、第3の方式で前記グラフィック表現を修正すること、
を含む、請求項21に記載の方法。 - 電子デバイスであって、
ユーザの身体の所定の部分とは反対側にて前記電子デバイス上に配置された表示生成コンポーネントと、
1つ以上の入力デバイスと、
1つ以上のプロセッサと、
前記1つ以上のプロセッサによって実行されるように構成されている1つ以上のプログラムを記憶したメモリと、を備え、前記1つ以上のプログラムが、
前記電子デバイスが前記ユーザの身体の前記所定の部分の上に装着されている間に、前記表示生成コンポーネントを介して、前記ユーザの身体の前記所定の部分に対応する身体部分の外観のグラフィック表現を表示することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の変化を検出することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記変化を検出したことに応答して、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って、前記ユーザの身体の所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することであって、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の一部を不明瞭にすることを含む、ことと、
を行うための命令を含む、
電子デバイス。 - 前記1つ以上のプロセッサが、請求項2~22のいずれか一項に記載の方法を実行するように構成されている、請求項23に記載の電子デバイス。
- プログラムであって、ユーザの身体の所定の部分とは反対側にて電子デバイス上に配置された表示生成コンポーネントと1つ以上の入力デバイスとを含む、及び/又はそれらと通信する前記電子デバイスによって実行されると、前記電子デバイスに、
前記電子デバイスが前記ユーザの身体の前記所定の部分の上に装着されている間に、前記表示生成コンポーネントを介して、前記ユーザの身体の前記所定の部分に対応する身体部分の外観のグラフィック表現を表示することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの位置の変化を検出することと、
前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記位置の前記変化を検出したことに応答して、前記ユーザの身体の前記所定の部分に対する前記電子デバイスの前記検出された位置の変化に従って、前記ユーザの身体の所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現を修正することであって、前記ユーザの身体の前記所定の部分に対応する前記身体部分の前記外観の前記グラフィック表現の一部を不明瞭にすることを含む、ことと、
を行わせる命令を含む、プログラム。 - 前記電子デバイスによって実行されると、前記電子デバイスに請求項2~22のいずれか一項に記載の方法を実行させる、命令を更に含む、請求項25に記載のプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2024043683A JP2024096704A (ja) | 2020-09-26 | 2024-03-19 | ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース |
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202063083911P | 2020-09-26 | 2020-09-26 | |
US63/083,911 | 2020-09-26 | ||
US17/483,744 US11579693B2 (en) | 2020-09-26 | 2021-09-23 | Systems, methods, and graphical user interfaces for updating display of a device relative to a user's body |
US17/483,744 | 2021-09-23 | ||
PCT/US2021/052047 WO2022067097A1 (en) | 2020-09-26 | 2021-09-24 | Systems, methods, and graphical user interfaces for updating display of a device relative to a user's body |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2024043683A Division JP2024096704A (ja) | 2020-09-26 | 2024-03-19 | ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023542628A JP2023542628A (ja) | 2023-10-11 |
JP7459375B2 true JP7459375B2 (ja) | 2024-04-01 |
Family
ID=80821198
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023515028A Active JP7459375B2 (ja) | 2020-09-26 | 2021-09-24 | ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース |
JP2024043683A Pending JP2024096704A (ja) | 2020-09-26 | 2024-03-19 | ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2024043683A Pending JP2024096704A (ja) | 2020-09-26 | 2024-03-19 | ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース |
Country Status (7)
Country | Link |
---|---|
US (2) | US11579693B2 (ja) |
EP (1) | EP4182780A1 (ja) |
JP (2) | JP7459375B2 (ja) |
KR (1) | KR20230037054A (ja) |
CN (1) | CN116710181A (ja) |
AU (2) | AU2021350084B2 (ja) |
WO (1) | WO2022067097A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11579693B2 (en) | 2020-09-26 | 2023-02-14 | Apple Inc. | Systems, methods, and graphical user interfaces for updating display of a device relative to a user's body |
US11644890B2 (en) * | 2021-02-11 | 2023-05-09 | Qualcomm Incorporated | Image capturing in extended reality environments |
US20230368453A1 (en) * | 2022-05-12 | 2023-11-16 | Microsoft Technology Licensing, Llc | Controlling computer-generated facial expressions |
US11972526B1 (en) | 2023-03-31 | 2024-04-30 | Apple Inc. | Rendering of enrolled user's face for external display |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014041871A1 (ja) | 2012-09-12 | 2014-03-20 | ソニー株式会社 | 画像表示装置及び画像表示方法、並びに記録媒体 |
WO2016076376A1 (ja) | 2014-11-12 | 2016-05-19 | 京セラ株式会社 | ウェアラブル装置 |
US20180004478A1 (en) | 2016-06-30 | 2018-01-04 | Sony Interactive Entertainment Inc. | Display Screen Front Panel of HMD for Viewing by Users Viewing the HMD Player |
JP2018512640A (ja) | 2015-02-12 | 2018-05-17 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | ウェアラブルディスプレイ上のコンテンツの制御された表示 |
JP2020034646A (ja) | 2018-08-28 | 2020-03-05 | 株式会社Nttドコモ | ウェアラブル端末及び表示システム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080150921A1 (en) * | 2006-12-20 | 2008-06-26 | Microsoft Corporation | Supplementing and controlling the display of a data set |
US10554962B2 (en) * | 2014-02-07 | 2020-02-04 | Samsung Electronics Co., Ltd. | Multi-layer high transparency display for light field generation |
US11107195B1 (en) * | 2019-08-23 | 2021-08-31 | Lucasfilm Entertainment Company Ltd. | Motion blur and depth of field for immersive content production systems |
US11627259B2 (en) * | 2019-10-24 | 2023-04-11 | Sony Corporation | Device, method and computer program |
US11579693B2 (en) | 2020-09-26 | 2023-02-14 | Apple Inc. | Systems, methods, and graphical user interfaces for updating display of a device relative to a user's body |
-
2021
- 2021-09-23 US US17/483,744 patent/US11579693B2/en active Active
- 2021-09-24 CN CN202180062294.9A patent/CN116710181A/zh active Pending
- 2021-09-24 AU AU2021350084A patent/AU2021350084B2/en active Active
- 2021-09-24 EP EP21795107.8A patent/EP4182780A1/en active Pending
- 2021-09-24 JP JP2023515028A patent/JP7459375B2/ja active Active
- 2021-09-24 KR KR1020237005233A patent/KR20230037054A/ko active Search and Examination
- 2021-09-24 WO PCT/US2021/052047 patent/WO2022067097A1/en active Application Filing
-
2023
- 2023-02-08 US US18/107,385 patent/US11893154B2/en active Active
-
2024
- 2024-03-19 JP JP2024043683A patent/JP2024096704A/ja active Pending
- 2024-09-11 AU AU2024219585A patent/AU2024219585A1/en active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014041871A1 (ja) | 2012-09-12 | 2014-03-20 | ソニー株式会社 | 画像表示装置及び画像表示方法、並びに記録媒体 |
WO2016076376A1 (ja) | 2014-11-12 | 2016-05-19 | 京セラ株式会社 | ウェアラブル装置 |
JP2018512640A (ja) | 2015-02-12 | 2018-05-17 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | ウェアラブルディスプレイ上のコンテンツの制御された表示 |
US20180004478A1 (en) | 2016-06-30 | 2018-01-04 | Sony Interactive Entertainment Inc. | Display Screen Front Panel of HMD for Viewing by Users Viewing the HMD Player |
JP2020034646A (ja) | 2018-08-28 | 2020-03-05 | 株式会社Nttドコモ | ウェアラブル端末及び表示システム |
Also Published As
Publication number | Publication date |
---|---|
JP2024096704A (ja) | 2024-07-17 |
US20220100271A1 (en) | 2022-03-31 |
AU2021350084A1 (en) | 2023-03-23 |
US11893154B2 (en) | 2024-02-06 |
EP4182780A1 (en) | 2023-05-24 |
AU2024219585A1 (en) | 2024-10-03 |
US20230185375A1 (en) | 2023-06-15 |
CN116710181A (zh) | 2023-09-05 |
WO2022067097A1 (en) | 2022-03-31 |
JP2023542628A (ja) | 2023-10-11 |
KR20230037054A (ko) | 2023-03-15 |
US11579693B2 (en) | 2023-02-14 |
AU2021350084B2 (en) | 2024-06-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11995285B2 (en) | Methods for adjusting and/or controlling immersion associated with user interfaces | |
US20230185426A1 (en) | Devices, Methods, and Graphical User Interfaces for Providing Computer-Generated Experiences | |
US11720171B2 (en) | Methods for navigating user interfaces | |
CN116719452A (zh) | 用于与用于移动虚拟环境中的虚拟对象的虚拟控件和/或示能表示交互的方法 | |
JP7459375B2 (ja) | ユーザの身体に対するデバイスの表示を更新するためのシステム、方法、及びグラフィカルユーザインターフェース | |
US20230152935A1 (en) | Devices, methods, and graphical user interfaces for presenting virtual objects in virtual environments | |
US20230171484A1 (en) | Devices, methods, and graphical user interfaces for generating and displaying a representation of a user | |
US20230336865A1 (en) | Device, methods, and graphical user interfaces for capturing and displaying media | |
CN118159935A (zh) | 用于内容应用程序的设备、方法和图形用户界面 | |
US20230114043A1 (en) | Devices, Methods, and Graphical User Interfaces for Interacting with Three-Dimensional Environments | |
US12124674B2 (en) | Devices, methods, and graphical user interfaces for interacting with three-dimensional environments | |
US20240094862A1 (en) | Devices, Methods, and Graphical User Interfaces for Displaying Shadow and Light Effects in Three-Dimensional Environments | |
US20230092874A1 (en) | Devices, Methods, and Graphical User Interfaces for Interacting with Three-Dimensional Environments | |
US20240104819A1 (en) | Representations of participants in real-time communication sessions | |
CN117957581A (zh) | 用于与三维环境交互的设备、方法和图形用户界面 | |
JP2024535753A (ja) | 三次元環境との相互作用のためのデバイス、方法、及びグラフィカルユーザインタフェース | |
WO2023096940A2 (en) | Devices, methods, and graphical user interfaces for generating and displaying a representation of a user | |
WO2024063786A1 (en) | Devices, methods, and graphical user interfaces for displaying shadow and light effects in three-dimensional environments | |
JP2024537657A (ja) | メディア及び三次元環境と相互作用するためのデバイス、方法、及びグラフィカルユーザインタフェース | |
CN118672393A (zh) | 用于与三维环境进行交互的设备、方法和图形用户界面 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230303 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230303 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240219 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240219 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240319 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7459375 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |