RU2016136371A - Дистанционное управление устройствами через обнаружение взгляда - Google Patents
Дистанционное управление устройствами через обнаружение взгляда Download PDFInfo
- Publication number
- RU2016136371A RU2016136371A RU2016136371A RU2016136371A RU2016136371A RU 2016136371 A RU2016136371 A RU 2016136371A RU 2016136371 A RU2016136371 A RU 2016136371A RU 2016136371 A RU2016136371 A RU 2016136371A RU 2016136371 A RU2016136371 A RU 2016136371A
- Authority
- RU
- Russia
- Prior art keywords
- remotely controlled
- user
- controlled device
- control
- display
- Prior art date
Links
- 238000001514 detection method Methods 0.000 title 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
- G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C2201/00—Transmission systems of control signals via wireless link
- G08C2201/30—User interface
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C2201/00—Transmission systems of control signals via wireless link
- G08C2201/70—Device selection
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
- Selective Calling Equipment (AREA)
- Position Input By Displaying (AREA)
Claims (26)
1. В вычислительной системе, содержащей детектор направления взгляда, способ для дистанционного управления на основе взгляда различными дистанционно управляемыми электронными устройствами в окружении, при этом способ содержит этапы, на которых:
- картографируют местоположения упомянутых различных дистанционно управляемых электронных устройств;
- обнаруживают, через данные из детектора направления взгляда, направление взгляда пользователя;
- обнаруживают указание от пользователя управлять дистанционно управляемым устройством, расположенным в направлении взгляда упомянутых различных электронных устройств;
- адаптируют пользовательский интерфейс контроллерного устройства, чтобы обеспечивать пользователю возможность управления дистанционно управляемым устройством;
- принимают ввод от пользователя, взаимодействующего с пользовательским интерфейсом контроллерного устройства, через направление взгляда; и
- передают сигнал в дистанционно управляемое устройство на основе ввода, принимаемого, чтобы управлять дистанционно управляемым устройством.
2. Способ по п. 1, в котором контроллерное устройство включает в себя дисплей, просматриваемый пользователем, и при этом адаптированный пользовательский интерфейс представлен на дисплее.
3. Способ по п. 1, в котором указание управлять дистанционно управляемым устройством включает в себя временную выдержку в направлении взгляда.
4. Способ по п. 1, в котором указание управлять дистанционно управляемым устройством включает в себя речь.
5. Способ по п. 1, в котором указание управлять дистанционно управляемым устройством включает в себя жест.
6. Способ по п. 1, дополнительно содержащий этап, на котором распознают лицо пользователя, при этом пользовательский интерфейс контроллерного устройства адаптирован по-разному на основе распознанного лица.
7. Способ по п. 1, в котором контроллерное устройство содержит электронную мультимедийную систему.
8. Способ по п. 1, в котором контроллерное устройство содержит портативное устройство.
9. Способ по п. 1, в котором дистанционно управляемое устройство представляет собой первое дистанционно управляемое устройство, при этом способ дополнительно содержит этап, на котором параллельно управляют одним или более других дистанционно управляемых устройств.
10. Система для дистанционного управления на основе взгляда различными дистанционно управляемыми электронными устройствами в окружении, при этом система содержит:
- логическую машину, функционально соединенную с машиной для хранения инструкций, причем машина для хранения инструкций хранит инструкции, которые инструктируют логической машине:
- картографировать местоположения упомянутых различных дистанционно управляемых электронных устройств;
- обнаруживать, через данные из детектора направления взгляда, указание от пользователя управлять дистанционно управляемым устройством, размещаемым в определенном направлении взгляда упомянутых различных электронных устройств;
- отображать через устройство отображения, отдельное от дистанционно управляемого устройства, пользовательский интерфейс, чтобы обеспечивать пользователю возможность управления дистанционно управляемым устройством;
- принимать ввод от пользователя; и
- передавать сигнал в дистанционно управляемое устройство на основе ввода, принятого, чтобы управлять дистанционно управляемым устройством.
11. Система по п. 10, в которой инструкции выполняются, чтобы обнаруживать указание от пользователя посредством обнаружения взгляда, направленного на геометрическое место точек за пределами дисплея.
12. Система по п. 10, в которой инструкции выполняются,
чтобы принимать ввод от пользователя через взгляд, направленный на геометрическое место точек на дисплее.
13. Система по п. 10, в которой дисплей и детектор направления взгляда интегрированы с машиной хранения и логической машиной в носимом устройстве.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/207,255 US20150261293A1 (en) | 2014-03-12 | 2014-03-12 | Remote device control via gaze detection |
US14/207,255 | 2014-03-12 | ||
PCT/US2015/019346 WO2015138271A1 (en) | 2014-03-12 | 2015-03-09 | Remote device control via gaze detection |
Publications (2)
Publication Number | Publication Date |
---|---|
RU2016136371A true RU2016136371A (ru) | 2018-03-15 |
RU2016136371A3 RU2016136371A3 (ru) | 2018-09-21 |
Family
ID=52727425
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
RU2016136371A RU2016136371A (ru) | 2014-03-12 | 2015-03-09 | Дистанционное управление устройствами через обнаружение взгляда |
Country Status (11)
Country | Link |
---|---|
US (1) | US20150261293A1 (ru) |
EP (1) | EP3117417B1 (ru) |
JP (1) | JP2017513093A (ru) |
KR (1) | KR20160135242A (ru) |
CN (1) | CN106104650A (ru) |
AU (1) | AU2015229755A1 (ru) |
CA (1) | CA2939532A1 (ru) |
MX (1) | MX2016011540A (ru) |
RU (1) | RU2016136371A (ru) |
TW (1) | TW201535155A (ru) |
WO (1) | WO2015138271A1 (ru) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
IL232391A0 (en) * | 2014-04-30 | 2014-08-31 | Pointgrab Ltd | A method and system for controlling accessories |
US9858720B2 (en) | 2014-07-25 | 2018-01-02 | Microsoft Technology Licensing, Llc | Three-dimensional mixed-reality viewport |
US9766460B2 (en) | 2014-07-25 | 2017-09-19 | Microsoft Technology Licensing, Llc | Ground plane adjustment in a virtual reality environment |
US10451875B2 (en) | 2014-07-25 | 2019-10-22 | Microsoft Technology Licensing, Llc | Smart transparency for virtual objects |
US9865089B2 (en) | 2014-07-25 | 2018-01-09 | Microsoft Technology Licensing, Llc | Virtual reality environment with real world objects |
US9904055B2 (en) | 2014-07-25 | 2018-02-27 | Microsoft Technology Licensing, Llc | Smart placement of virtual objects to stay in the field of view of a head mounted display |
US20160027218A1 (en) * | 2014-07-25 | 2016-01-28 | Tom Salter | Multi-user gaze projection using head mounted display devices |
US10416760B2 (en) | 2014-07-25 | 2019-09-17 | Microsoft Technology Licensing, Llc | Gaze-based object placement within a virtual reality environment |
US10311638B2 (en) | 2014-07-25 | 2019-06-04 | Microsoft Technology Licensing, Llc | Anti-trip when immersed in a virtual reality environment |
US10921896B2 (en) | 2015-03-16 | 2021-02-16 | Facebook Technologies, Llc | Device interaction in augmented reality |
US11559365B2 (en) * | 2017-03-06 | 2023-01-24 | Intuitive Surgical Operations, Inc. | Systems and methods for entering and exiting a teleoperational state |
CN107097227B (zh) * | 2017-04-17 | 2019-12-06 | 北京航空航天大学 | 一种人机协作机器人系统 |
CA3061332A1 (en) * | 2017-05-19 | 2018-11-22 | Magic Leap, Inc. | Keyboards for virtual, augmented, and mixed reality display systems |
US11290518B2 (en) * | 2017-09-27 | 2022-03-29 | Qualcomm Incorporated | Wireless control of remote devices through intention codes over a wireless connection |
US10732826B2 (en) * | 2017-11-22 | 2020-08-04 | Microsoft Technology Licensing, Llc | Dynamic device interaction adaptation based on user engagement |
US10528817B2 (en) | 2017-12-12 | 2020-01-07 | International Business Machines Corporation | Smart display apparatus and control system |
WO2019117350A1 (ko) * | 2017-12-14 | 2019-06-20 | 삼성전자 주식회사 | 응시 거리를 결정하는 방법 및 디바이스 |
US10559194B2 (en) * | 2018-02-23 | 2020-02-11 | Samsung Electronics Co., Ltd. | System and method for providing customized connected device functionality and for operating a connected device via an alternate object |
US10725176B2 (en) | 2018-03-14 | 2020-07-28 | Nathan J. DeVries | System and method of intrusion detection |
US11994751B1 (en) | 2020-12-30 | 2024-05-28 | Snap Inc. | Dual system on a chip eyewear |
WO2022170366A1 (en) * | 2021-02-08 | 2022-08-11 | Virginia Tech Intellectual Properties Inc. | Personalized recommender system for informaton visualization |
US20220374067A1 (en) * | 2021-05-19 | 2022-11-24 | International Business Machines Corporation | Augmented reality based power management |
US20230050526A1 (en) * | 2021-08-10 | 2023-02-16 | International Business Machines Corporation | Internet of things configuration using eye-based controls |
US20230123344A1 (en) * | 2021-10-14 | 2023-04-20 | Jason Heger | Dual system on a chip eyewear |
US11997249B2 (en) | 2021-10-14 | 2024-05-28 | Snap Inc. | Dual system on a chip eyewear |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6426740B1 (en) * | 1997-08-27 | 2002-07-30 | Canon Kabushiki Kaisha | Visual-axis entry transmission apparatus and method therefor |
CN1740951A (zh) * | 2004-08-25 | 2006-03-01 | 西门子公司 | 用于利用人眼进行设备控制的装置 |
US7183920B2 (en) * | 2004-08-31 | 2007-02-27 | Gtech Rhode Island Corporation | System and method for detecting access to an article or opening of a package |
CN101169897A (zh) * | 2006-10-25 | 2008-04-30 | 友立资讯股份有限公司 | 多媒体系统的脸部检测的遥控系统及其方法及多媒体系统 |
US8384718B2 (en) * | 2008-01-10 | 2013-02-26 | Sony Corporation | System and method for navigating a 3D graphical user interface |
WO2011043762A1 (en) * | 2009-10-05 | 2011-04-14 | Hewlett-Packard Development Company, L.P. | User interface |
JP5728009B2 (ja) * | 2010-06-17 | 2015-06-03 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | 指示入力装置、指示入力方法、プログラム、記録媒体および集積回路 |
US8395655B2 (en) * | 2010-08-15 | 2013-03-12 | Hewlett-Packard Development Company, L.P. | System and method for enabling collaboration in a video conferencing system |
US9658687B2 (en) * | 2011-09-30 | 2017-05-23 | Microsoft Technology Licensing, Llc | Visual focus-based control of coupled displays |
US20130147686A1 (en) * | 2011-12-12 | 2013-06-13 | John Clavin | Connecting Head Mounted Displays To External Displays And Other Communication Networks |
US9773345B2 (en) * | 2012-02-15 | 2017-09-26 | Nokia Technologies Oy | Method and apparatus for generating a virtual environment for controlling one or more electronic devices |
US9122321B2 (en) * | 2012-05-04 | 2015-09-01 | Microsoft Technology Licensing, Llc | Collaboration environment using see through displays |
US8893164B1 (en) * | 2012-05-16 | 2014-11-18 | Google Inc. | Audio system |
US20140009395A1 (en) * | 2012-07-05 | 2014-01-09 | Asustek Computer Inc. | Method and system for controlling eye tracking |
KR20140011203A (ko) * | 2012-07-18 | 2014-01-28 | 삼성전자주식회사 | 복수의 디스플레이 장치와 연결된 제어 장치 및 그의 제어 방법, 그리고 디스플레이 장치 제어 시스템 |
KR101984590B1 (ko) * | 2012-11-14 | 2019-05-31 | 엘지전자 주식회사 | 디스플레이 디바이스 및 그 제어 방법 |
US11747895B2 (en) * | 2013-03-15 | 2023-09-05 | Intuitive Surgical Operations, Inc. | Robotic system providing user selectable actions associated with gaze tracking |
US20140368442A1 (en) * | 2013-06-13 | 2014-12-18 | Nokia Corporation | Apparatus and associated methods for touch user input |
CN103500061B (zh) * | 2013-09-26 | 2017-11-07 | 三星电子(中国)研发中心 | 控制显示器的方法及设备 |
-
2014
- 2014-03-12 US US14/207,255 patent/US20150261293A1/en not_active Abandoned
-
2015
- 2015-01-12 TW TW104100974A patent/TW201535155A/zh unknown
- 2015-03-09 KR KR1020167027942A patent/KR20160135242A/ko unknown
- 2015-03-09 AU AU2015229755A patent/AU2015229755A1/en not_active Abandoned
- 2015-03-09 WO PCT/US2015/019346 patent/WO2015138271A1/en active Application Filing
- 2015-03-09 RU RU2016136371A patent/RU2016136371A/ru not_active Application Discontinuation
- 2015-03-09 CN CN201580013359.5A patent/CN106104650A/zh active Pending
- 2015-03-09 MX MX2016011540A patent/MX2016011540A/es unknown
- 2015-03-09 EP EP15711971.0A patent/EP3117417B1/en active Active
- 2015-03-09 JP JP2016552519A patent/JP2017513093A/ja not_active Withdrawn
- 2015-03-09 CA CA2939532A patent/CA2939532A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
CN106104650A (zh) | 2016-11-09 |
KR20160135242A (ko) | 2016-11-25 |
CA2939532A1 (en) | 2015-09-17 |
US20150261293A1 (en) | 2015-09-17 |
AU2015229755A1 (en) | 2016-09-08 |
MX2016011540A (es) | 2016-11-29 |
JP2017513093A (ja) | 2017-05-25 |
WO2015138271A1 (en) | 2015-09-17 |
EP3117417B1 (en) | 2017-12-20 |
EP3117417A1 (en) | 2017-01-18 |
TW201535155A (zh) | 2015-09-16 |
RU2016136371A3 (ru) | 2018-09-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
RU2016136371A (ru) | Дистанционное управление устройствами через обнаружение взгляда | |
JP2017513093A5 (ru) | ||
WO2014142600A3 (en) | Display control method and apparatus | |
EP2778853A3 (en) | Object control method and apparatus of user device | |
EP2796982A3 (en) | Method and apparatus for providing a changed shortcut icon corresponding to a status thereof | |
WO2014118644A3 (en) | Banking services experience center | |
WO2011066343A3 (en) | Methods and apparatus for gesture recognition mode control | |
AU2016219716A1 (en) | Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs | |
WO2017074827A3 (en) | Touch sensing of user input device | |
EP2793168A3 (en) | Gesture recognition device, gesture recognition method, electronic apparatus, control program, and recording medium | |
ES2552881B1 (es) | Dispositivo portable y método de control mediante gestos | |
WO2010138470A3 (en) | Gesture coach | |
EP2620863A3 (en) | Intelligent gesture-based user's instantaneous interaction and task requirements recognition system and method | |
EP3015956A3 (en) | Method and apparatus for controlling screen display on electronic devices | |
WO2013192454A3 (en) | Fingertip location for gesture input | |
WO2014024122A3 (en) | An apparatus and associated methods | |
EP2693359A3 (en) | Mobile device, and method for releasing lock of the mobile device via handwriting recognition | |
WO2013189233A3 (en) | Apparatus and method for controlling a touchscreen display for one hand operation | |
WO2015066736A3 (en) | Wearable blasting system apparatus | |
MY175525A (en) | Method and apparatus to combine ocular control with motion control for human computer interaction | |
EP2846231A3 (en) | Apparatus and method for controlling a user interface using an input image | |
MY194990A (en) | Electronic device including a plurality of touch displays and method for changing status thereof | |
WO2015192085A3 (en) | Systems and methods for multitasking on an electronic device with a touch-sensitive display | |
JP2015115849A5 (ru) | ||
MX2018008214A (es) | Metodo de control de dispositivo de visualizacion y dispositivo de visualizacion. |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FA94 | Acknowledgement of application withdrawn (non-payment of fees) |
Effective date: 20191122 |