RU2015155541A - Навигация по пользовательскому интерфейсу - Google Patents
Навигация по пользовательскому интерфейсу Download PDFInfo
- Publication number
- RU2015155541A RU2015155541A RU2015155541A RU2015155541A RU2015155541A RU 2015155541 A RU2015155541 A RU 2015155541A RU 2015155541 A RU2015155541 A RU 2015155541A RU 2015155541 A RU2015155541 A RU 2015155541A RU 2015155541 A RU2015155541 A RU 2015155541A
- Authority
- RU
- Russia
- Prior art keywords
- visual elements
- location
- axis
- target location
- gaze
- Prior art date
Links
- 230000000007 visual effect Effects 0.000 claims 24
- 238000000034 method Methods 0.000 claims 7
- 238000013459 approach Methods 0.000 claims 4
- 230000007423 decrease Effects 0.000 claims 1
- 230000000977 initiatory effect Effects 0.000 claims 1
- 238000012986 modification Methods 0.000 claims 1
- 230000004048 modification Effects 0.000 claims 1
- 230000000452 restraining effect Effects 0.000 claims 1
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Optics & Photonics (AREA)
- User Interface Of Digital Computer (AREA)
- Navigation (AREA)
- Position Fixing By Use Of Radio Waves (AREA)
Claims (29)
1. Система пользовательского интерфейса для навигации по иерархии визуальных элементов, причем иерархия содержит двумерную плоскость, содержащую визуальные элементы и включающую в себя первую ось и вторую ось, ортогональную к первой оси, причем система пользовательского интерфейса содержит:
- устройство отображения, функционально соединенное с вычислительным устройством, причем устройство отображения включает в себя систему слежения за взглядом и систему отображения для представления одного или более визуальных элементов; и
- навигационный модуль, выполняемый посредством процессора вычислительного устройства, причем навигационный модуль выполнен с возможностью:
- устанавливать исходное местоположение внутри просматриваемой области устройства отображения;
- устанавливать пропорциональное соотношение размеров между каждым из визуальных элементов и каждым из других визуальных элементов в плоскости;
- принимать данные слежения за взглядом из системы слежения за взглядом;
- с использованием данных слежения за взглядом, определять местоположение взгляда, на которое пользователь смотрит внутри просматриваемой области устройства отображения;
- сопоставлять местоположение взгляда с целевым местоположением в плоскости, при этом целевое местоположение отстоит от исходного местоположения вдоль первой оси;
- инициировать движение целевого местоположения к исходному местоположению, при этом движение содержит первый компонент вдоль первой оси;
- по мере того, как целевое местоположение приближается к исходному местоположению в первом направлении вдоль первой оси, постепенно увеличивать каждый из визуальных элементов, которые являются просматриваемыми внутри просматриваемой области, при одновременном поддержании пропорционального соотношения размеров между каждым из визуальных элементов и каждым из других визуальных элементов; и
- по мере того, как целевое местоположение приближается к исходному местоположению во втором направлении, противоположном первому направлению вдоль первой оси, постепенно уменьшать каждый из визуальных элементов, которые являются просматриваемыми внутри просматриваемой области, при одновременном поддержании пропорционального соотношения размеров между каждым из визуальных элементов.
2. Система пользовательского интерфейса по п. 1, в которой навигационный модуль дополнительно выполнен с возможностью сдерживать инициирование движения целевого местоположения к исходному местоположению, когда целевое местоположение находится внутри области приостановки, окружающей исходное местоположение.
3. Система пользовательского интерфейса по п. 1, в которой навигационный модуль дополнительно выполнен с возможностью пропорционально снижать скорость движения целевого местоположения к исходному местоположению по мере того, как уменьшается расстояние целевого местоположения от исходного местоположения.
4. Способ для навигации по иерархии визуальных элементов, причем иерархия содержит двумерную плоскость, включающую в себя первую ось и вторую ось, ортогональную к первой оси, при этом способ содержит этапы, на которых:
- представляют один или более визуальных элементов через систему отображения устройства отображения, которое функционально соединено с вычислительным устройством, причем устройство отображения включает в себя систему слежения за взглядом;
- устанавливают исходное местоположение внутри просматриваемой области устройства отображения;
- устанавливают пропорциональное соотношение размеров между каждым из визуальных элементов и каждым из других визуальных элементов в плоскости;
- принимают данные слежения за взглядом из системы слежения за взглядом;
- с использованием данных слежения за взглядом, определяют местоположение взгляда, на которое пользователь смотрит внутри просматриваемой области;
- сопоставляют местоположение взгляда с целевым местоположением в плоскости, при этом целевое местоположение отстоит от исходного местоположения вдоль первой оси;
- инициируют движение целевого местоположения к исходному местоположению, при этом движение содержит первый компонент вдоль первой оси;
- по мере того, как целевое местоположение приближается к исходному местоположению вдоль первой оси в первом направлении вдоль первой оси, постепенно увеличивают каждый из визуальных элементов, которые являются просматриваемыми внутри просматриваемой области, при одновременном поддержании пропорционального соотношения размеров между каждым из визуальных элементов и каждым из других визуальных элементов; и
- по мере того, как целевое местоположение приближается к исходному местоположению во втором направлении, противоположном первому направлению вдоль первой оси, постепенно уменьшают каждый из визуальных элементов, которые являются просматриваемыми внутри просматриваемой области, при одновременном поддержании пропорционального соотношения размеров между каждым из визуальных элементов.
5. Способ по п. 4, в котором целевое местоположение также отстоит от исходного местоположения вдоль второй оси, движение дополнительно содержит второй компонент вдоль второй оси, и способ дополнительно содержит этап, на котором сдерживают модификацию визуальных элементов, которые являются просматриваемыми через дисплей относительно второго компонента движения целевого местоположения.
6. Способ по п. 4, в котором визуальные элементы включают в себя один или более элементов-вершин и множество подчиненных элементов, которые подчиняются одному или более элементам-вершинам, и при этом каждый из подчиненных элементов непосредственно подчинен не более чем еще одному элементу из визуальных элементов.
7. Способ по п. 4, дополнительно содержащий этапы, на которых:
- принимают пользовательский ввод и
- на основе пользовательского ввода выбирают один из визуальных элементов, который ассоциирован с целевым местоположением.
8. Способ по п. 4, дополнительно содержащий этап, на котором выбирают один из визуальных элементов, который ассоциирован с целевым местоположением, на основе пользовательского ввода, когда целевое местоположение находится внутри области приостановки, окружающей исходное местоположение.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US13/927,045 | 2013-06-25 | ||
| US13/927,045 US8988344B2 (en) | 2013-06-25 | 2013-06-25 | User interface navigation |
| PCT/US2014/043305 WO2014209771A1 (en) | 2013-06-25 | 2014-06-20 | User interface navigation |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| RU2015155541A true RU2015155541A (ru) | 2017-06-27 |
| RU2015155541A3 RU2015155541A3 (ru) | 2018-05-29 |
| RU2663477C2 RU2663477C2 (ru) | 2018-08-06 |
Family
ID=51168458
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2015155541A RU2663477C2 (ru) | 2013-06-25 | 2014-06-20 | Навигация по пользовательскому интерфейсу |
Country Status (11)
| Country | Link |
|---|---|
| US (1) | US8988344B2 (ru) |
| EP (1) | EP3014411B1 (ru) |
| JP (1) | JP6359099B2 (ru) |
| KR (1) | KR102296121B1 (ru) |
| CN (1) | CN105359082B (ru) |
| AU (1) | AU2014302873B2 (ru) |
| BR (1) | BR112015031655B1 (ru) |
| CA (1) | CA2914060C (ru) |
| MX (1) | MX357057B (ru) |
| RU (1) | RU2663477C2 (ru) |
| WO (1) | WO2014209771A1 (ru) |
Families Citing this family (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11010042B2 (en) * | 2014-02-13 | 2021-05-18 | Lenovo (Singapore) Pte. Ltd. | Display of different versions of user interface element |
| US9898078B2 (en) * | 2015-01-12 | 2018-02-20 | Dell Products, L.P. | Immersive environment correction display and method |
| US10740971B2 (en) | 2015-01-20 | 2020-08-11 | Microsoft Technology Licensing, Llc | Augmented reality field of view object follower |
| TWI670625B (zh) * | 2015-10-19 | 2019-09-01 | 日商鷗利硏究所股份有限公司 | 視線輸入裝置、視線輸入方法、及程式 |
| US10977435B2 (en) * | 2015-12-28 | 2021-04-13 | Informatica Llc | Method, apparatus, and computer-readable medium for visualizing relationships between pairs of columns |
| US10176641B2 (en) * | 2016-03-21 | 2019-01-08 | Microsoft Technology Licensing, Llc | Displaying three-dimensional virtual objects based on field of view |
| CN107015637B (zh) * | 2016-10-27 | 2020-05-05 | 阿里巴巴集团控股有限公司 | 虚拟现实场景下的输入方法和装置 |
| US11099716B2 (en) | 2016-12-23 | 2021-08-24 | Realwear, Inc. | Context based content navigation for wearable display |
| US10936872B2 (en) | 2016-12-23 | 2021-03-02 | Realwear, Inc. | Hands-free contextually aware object interaction for wearable display |
| US11507216B2 (en) | 2016-12-23 | 2022-11-22 | Realwear, Inc. | Customizing user interfaces of binary applications |
| US10620910B2 (en) | 2016-12-23 | 2020-04-14 | Realwear, Inc. | Hands-free navigation of touch-based operating systems |
| JP6426225B2 (ja) * | 2017-04-05 | 2018-11-21 | シャープ株式会社 | 表示装置、テレビジョン受像機、表示制御方法、表示制御プログラム、および記録媒体 |
| US10620779B2 (en) | 2017-04-24 | 2020-04-14 | Microsoft Technology Licensing, Llc | Navigating a holographic image |
| CN109471579B (zh) * | 2018-11-13 | 2023-08-01 | 努比亚技术有限公司 | 终端屏幕信息布局调整方法、装置、移动终端及存储介质 |
| JP7307568B2 (ja) * | 2019-03-20 | 2023-07-12 | 任天堂株式会社 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
Family Cites Families (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6359601B1 (en) * | 1993-09-14 | 2002-03-19 | Francis J. Maguire, Jr. | Method and apparatus for eye tracking |
| US6127990A (en) * | 1995-11-28 | 2000-10-03 | Vega Vista, Inc. | Wearable display and methods for controlling same |
| US6437758B1 (en) * | 1996-06-25 | 2002-08-20 | Sun Microsystems, Inc. | Method and apparatus for eyetrack—mediated downloading |
| US5731805A (en) * | 1996-06-25 | 1998-03-24 | Sun Microsystems, Inc. | Method and apparatus for eyetrack-driven text enlargement |
| US5850211A (en) | 1996-06-26 | 1998-12-15 | Sun Microsystems, Inc. | Eyetrack-driven scrolling |
| US6351273B1 (en) | 1997-04-30 | 2002-02-26 | Jerome H. Lemelson | System and methods for controlling automatic scrolling of information on a display or screen |
| JP3854030B2 (ja) * | 2000-03-06 | 2006-12-06 | 日本電信電話株式会社 | 情報閲覧装置及び情報閲覧プログラムを記憶した媒体 |
| US6603491B2 (en) | 2000-05-26 | 2003-08-05 | Jerome H. Lemelson | System and methods for controlling automatic scrolling of information on a display or screen |
| US6886137B2 (en) | 2001-05-29 | 2005-04-26 | International Business Machines Corporation | Eye gaze control of dynamic information presentation |
| KR20070029678A (ko) * | 2004-02-23 | 2007-03-14 | 힐크레스트 래보래토리스, 인크. | 그래픽 사용자 인터페이스 상에서 포인터를 네비게이션하는방법 및 매체 |
| DE102004027289B4 (de) | 2004-06-04 | 2006-08-24 | Siemens Ag | Verfahren und Anordnung zur berührungslosen Navigation in einem Dokument |
| WO2007085682A1 (en) * | 2006-01-26 | 2007-08-02 | Nokia Corporation | Eye tracker device |
| WO2007107949A1 (en) * | 2006-03-23 | 2007-09-27 | Koninklijke Philips Electronics N.V. | Hotspots for eye track control of image manipulation |
| US8082518B2 (en) * | 2008-08-29 | 2011-12-20 | Microsoft Corporation | Scrollable area multi-scale viewing |
| KR101602363B1 (ko) * | 2008-09-11 | 2016-03-10 | 엘지전자 주식회사 | 3차원 사용자 인터페이스의 제어방법과 이를 이용한 이동 단말기 |
| JP2010113040A (ja) * | 2008-11-05 | 2010-05-20 | Toshiba Corp | 画像表示装置及び画像表示方法 |
| CN101840265B (zh) * | 2009-03-21 | 2013-11-06 | 深圳富泰宏精密工业有限公司 | 视觉感知装置及其控制方法 |
| JP2010258603A (ja) * | 2009-04-22 | 2010-11-11 | Ntt Docomo Inc | 通信端末及び表示サイズの調整方法 |
| JP5658451B2 (ja) * | 2009-11-30 | 2015-01-28 | ソニー株式会社 | 情報処理装置、情報処理方法及びそのプログラム |
| US9507418B2 (en) | 2010-01-21 | 2016-11-29 | Tobii Ab | Eye tracker based contextual action |
| JP2012104070A (ja) * | 2010-11-15 | 2012-05-31 | Osamu Shichinohe | 情報装置、情報処理方法、プログラム、及びコンピュータ読み取り可能な記録媒体 |
| US8493390B2 (en) | 2010-12-08 | 2013-07-23 | Sony Computer Entertainment America, Inc. | Adaptive displays using gaze tracking |
| US8643680B2 (en) * | 2011-04-08 | 2014-02-04 | Amazon Technologies, Inc. | Gaze-based content display |
| US8881051B2 (en) | 2011-07-05 | 2014-11-04 | Primesense Ltd | Zoom-based gesture user interface |
-
2013
- 2013-06-25 US US13/927,045 patent/US8988344B2/en active Active
-
2014
- 2014-06-20 CN CN201480036261.7A patent/CN105359082B/zh active Active
- 2014-06-20 JP JP2016521829A patent/JP6359099B2/ja active Active
- 2014-06-20 KR KR1020167002035A patent/KR102296121B1/ko active IP Right Grant
- 2014-06-20 AU AU2014302873A patent/AU2014302873B2/en active Active
- 2014-06-20 EP EP14737475.5A patent/EP3014411B1/en active Active
- 2014-06-20 WO PCT/US2014/043305 patent/WO2014209771A1/en active Application Filing
- 2014-06-20 CA CA2914060A patent/CA2914060C/en active Active
- 2014-06-20 MX MX2015017631A patent/MX357057B/es active IP Right Grant
- 2014-06-20 RU RU2015155541A patent/RU2663477C2/ru active
- 2014-06-20 BR BR112015031655-7A patent/BR112015031655B1/pt active IP Right Grant
Also Published As
| Publication number | Publication date |
|---|---|
| US8988344B2 (en) | 2015-03-24 |
| CN105359082A (zh) | 2016-02-24 |
| CA2914060A1 (en) | 2014-12-31 |
| MX2015017631A (es) | 2016-04-15 |
| EP3014411A1 (en) | 2016-05-04 |
| JP6359099B2 (ja) | 2018-07-18 |
| US20140375544A1 (en) | 2014-12-25 |
| WO2014209771A1 (en) | 2014-12-31 |
| JP2016525743A (ja) | 2016-08-25 |
| BR112015031655A8 (pt) | 2021-05-25 |
| BR112015031655B1 (pt) | 2022-05-10 |
| RU2015155541A3 (ru) | 2018-05-29 |
| KR20160022922A (ko) | 2016-03-02 |
| AU2014302873B2 (en) | 2019-05-02 |
| CN105359082B (zh) | 2018-11-06 |
| AU2014302873A1 (en) | 2015-12-17 |
| BR112015031655A2 (pt) | 2017-07-25 |
| MX357057B (es) | 2018-06-25 |
| CA2914060C (en) | 2021-06-01 |
| EP3014411B1 (en) | 2018-08-29 |
| KR102296121B1 (ko) | 2021-08-30 |
| RU2663477C2 (ru) | 2018-08-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2015155541A (ru) | Навигация по пользовательскому интерфейсу | |
| KR102090075B1 (ko) | 머리-장착형 디스플레이에서의 메뉴 내비게이션 | |
| WO2016099906A3 (en) | Assisted object placement in a three-dimensional visualization system | |
| WO2013018099A3 (en) | System and method for interfacing with a device via a 3d display | |
| WO2013052855A3 (en) | Wearable computer with nearby object response | |
| WO2012102883A3 (en) | Presenting selectors within three-dimensional graphical environments | |
| WO2013166456A3 (en) | Methods, systems and software programs for enhanced sports analytics and applications | |
| WO2014108387A3 (de) | Navigationsvorrichtung für ein fahrzeug und verfahren zur erzeugung eines anzeigesignals für eine navigationsvorrichtung für ein fahrzeug | |
| WO2015047453A3 (en) | Interactions of virtual objects with surfaces | |
| BR112015031695A8 (pt) | método de recebimento de uma seleção de um elemento de interface de usuário exibido em uma interface gráfica de usuário, método de recebimento de uma seleção por meio de gestos de olhar de conteúdo exibido em uma interface gráfica de usuário e sistema de exibição montado em cabeça | |
| WO2011126858A3 (en) | Precise measurement on a mobile computing device | |
| WO2014125380A3 (en) | Systems and methods of eye tracking calibration | |
| RU2015113441A (ru) | Бесконтактный ввод | |
| WO2014013012A9 (en) | Image processing to derive movement characteristics for a plurality of queue objects | |
| JP2017054201A5 (ru) | ||
| WO2015192085A3 (en) | Systems and methods for multitasking on an electronic device with a touch-sensitive display | |
| RU2017107164A (ru) | Параметрическая инерция и интерфейсы прикладного программирования | |
| JP2016024273A5 (ru) | ||
| TR201904055T4 (tr) | Klinisyen dikkatinin değerlendirilmesi. | |
| RU2014113401A (ru) | Выбор объектов в трехмерном виртуальном динамическом отображении | |
| MX2016008817A (es) | Dispositivo de visualizacion de imagenes tridimensionales. | |
| MX348173B (es) | Ajuste de interfases de usuario basandose en ubicacion de entidad. | |
| WO2015186069A3 (en) | Display and interaction method in a user interface | |
| IN2014CH00978A (ru) | ||
| WO2015116697A3 (en) | Architecture for providing dynamically sized image sequences |