JP2017513093A5 - - Google Patents

Download PDF

Info

Publication number
JP2017513093A5
JP2017513093A5 JP2016552519A JP2016552519A JP2017513093A5 JP 2017513093 A5 JP2017513093 A5 JP 2017513093A5 JP 2016552519 A JP2016552519 A JP 2016552519A JP 2016552519 A JP2016552519 A JP 2016552519A JP 2017513093 A5 JP2017513093 A5 JP 2017513093A5
Authority
JP
Japan
Prior art keywords
user
controllable device
remotely controllable
gaze
remotely
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2016552519A
Other languages
English (en)
Other versions
JP2017513093A (ja
Filing date
Publication date
Priority claimed from US14/207,255 external-priority patent/US20150261293A1/en
Application filed filed Critical
Publication of JP2017513093A publication Critical patent/JP2017513093A/ja
Publication of JP2017513093A5 publication Critical patent/JP2017513093A5/ja
Withdrawn legal-status Critical Current

Links

Claims (13)

  1. 注視方向検出器を備えたコンピューティングシステムで、注視を利用して、環境内の各種の遠隔制御可能電子デバイスを遠隔制御する方法であって、
    前記各種の遠隔制御可能電子デバイスの場所をマッピングするステップと、
    前記注視方向検出器からのデータを介して、ユーザの注視の方向を検出するステップと、
    前記各種電子デバイスの注視の方向に位置する遠隔制御可能デバイスを制御するための前記ユーザからのインジケーションを検出するステップと、
    前記遠隔制御可能デバイスをユーザが制御できるようにコントローラデバイスのユーザインターフェースを適合するステップと、
    注視の方向を介して前記コントローラデバイスの前記ユーザインターフェースと対話している前記ユーザからの入力を受信するステップと、
    前記受信された入力に基づいて、前記遠隔制御可能デバイスに信号を送信して前記遠隔制御可能デバイスを制御するステップと
    を含む方法。
  2. 前記コントローラデバイスが、前記ユーザが見ることが可能なディスプレイを含み、前記適合されたユーザインターフェースが前記ディスプレイに提示される請求項1に記載の方法。
  3. 前記遠隔制御可能デバイスを制御するためのインジケーションが、前記注視の方向の休止を含む請求項1に記載の方法。
  4. 前記遠隔制御可能デバイスを制御するためのインジケーションが音声を含む請求項1に記載の方法。
  5. 前記遠隔制御可能デバイスを制御するためのインジケーションがジェスチャを含む請求項1に記載の方法。
  6. 前記ユーザの顔を認識するステップをさらに含み、前記コントローラデバイスの前記ユーザインターフェースが、認識された顔に基づいて異なる形で適合される請求項1に記載の方法。
  7. 前記コントローラデバイスが娯楽システムからなる請求項1に記載の方法。
  8. 前記コントローラデバイスが手持ち型デバイスからなる請求項1に記載の方法。
  9. 前記遠隔制御可能デバイスが第1の遠隔制御可能デバイスであり、前記方法は、1つまたは複数の他の遠隔制御可能デバイスを同時に制御するステップをさらに含む請求項1に記載の方法。
  10. 注視を利用して、環境内の各種の遠隔制御可能電子デバイスを遠隔制御するシステムであって、
    動作可能に命令記憶機械に結合された論理機械を備え、前記命令記憶機械は、前記論理機械に、
    前記各種の遠隔制御可能電子デバイスの場所をマッピングさせ、
    注視方向検出器からのデータを介して、前記各種電子デバイスの決定された注視の方向に配置されている遠隔制御可能デバイスを制御するためのユーザからのインジケーションを検出させ、
    前記遠隔制御可能デバイスとは別個のディスプレイを介して、前記遠隔制御可能デバイスをユーザが制御することができるユーザインターフェースを表示させ、
    前記ユーザからの入力を受信させ、
    前記受信された入力に基づいて、前記遠隔制御可能デバイスに信号を送信して前記遠隔制御可能デバイスを制御するための
    命令を保持しているシステム。
  11. 前記命令を実行して、前記ディスプレイの外側の箇所に向けられた注視を検出することによって前記ユーザからの前記インジケーションを検出することができる請求項10に記載のシステム。
  12. 前記命令を実行して、前記ディスプレイ上の箇所に向けられた注視を介して前記ユーザからの前記入力を受信することができる請求項10に記載のシステム。
  13. 前記ディスプレイおよび注視方向検出器が、装着型デバイス内で前記命令記憶機械および論理機械と一体化されている請求項10に記載のシステム。
JP2016552519A 2014-03-12 2015-03-09 注視の検出を介した遠隔デバイスの制御 Withdrawn JP2017513093A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/207,255 2014-03-12
US14/207,255 US20150261293A1 (en) 2014-03-12 2014-03-12 Remote device control via gaze detection
PCT/US2015/019346 WO2015138271A1 (en) 2014-03-12 2015-03-09 Remote device control via gaze detection

Publications (2)

Publication Number Publication Date
JP2017513093A JP2017513093A (ja) 2017-05-25
JP2017513093A5 true JP2017513093A5 (ja) 2018-03-15

Family

ID=52727425

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016552519A Withdrawn JP2017513093A (ja) 2014-03-12 2015-03-09 注視の検出を介した遠隔デバイスの制御

Country Status (11)

Country Link
US (1) US20150261293A1 (ja)
EP (1) EP3117417B1 (ja)
JP (1) JP2017513093A (ja)
KR (1) KR20160135242A (ja)
CN (1) CN106104650A (ja)
AU (1) AU2015229755A1 (ja)
CA (1) CA2939532A1 (ja)
MX (1) MX2016011540A (ja)
RU (1) RU2016136371A (ja)
TW (1) TW201535155A (ja)
WO (1) WO2015138271A1 (ja)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL232391A0 (en) * 2014-04-30 2014-08-31 Pointgrab Ltd A method and system for controlling accessories
US9904055B2 (en) 2014-07-25 2018-02-27 Microsoft Technology Licensing, Llc Smart placement of virtual objects to stay in the field of view of a head mounted display
US9865089B2 (en) 2014-07-25 2018-01-09 Microsoft Technology Licensing, Llc Virtual reality environment with real world objects
US9858720B2 (en) 2014-07-25 2018-01-02 Microsoft Technology Licensing, Llc Three-dimensional mixed-reality viewport
US10451875B2 (en) 2014-07-25 2019-10-22 Microsoft Technology Licensing, Llc Smart transparency for virtual objects
US10311638B2 (en) 2014-07-25 2019-06-04 Microsoft Technology Licensing, Llc Anti-trip when immersed in a virtual reality environment
US9766460B2 (en) 2014-07-25 2017-09-19 Microsoft Technology Licensing, Llc Ground plane adjustment in a virtual reality environment
US10416760B2 (en) 2014-07-25 2019-09-17 Microsoft Technology Licensing, Llc Gaze-based object placement within a virtual reality environment
US20160027218A1 (en) * 2014-07-25 2016-01-28 Tom Salter Multi-user gaze projection using head mounted display devices
US10921896B2 (en) 2015-03-16 2021-02-16 Facebook Technologies, Llc Device interaction in augmented reality
US11559365B2 (en) * 2017-03-06 2023-01-24 Intuitive Surgical Operations, Inc. Systems and methods for entering and exiting a teleoperational state
CN107097227B (zh) * 2017-04-17 2019-12-06 北京航空航天大学 一种人机协作机器人系统
AU2018270286A1 (en) * 2017-05-19 2019-11-14 Magic Leap, Inc. Keyboards for virtual, augmented, and mixed reality display systems
US11290518B2 (en) * 2017-09-27 2022-03-29 Qualcomm Incorporated Wireless control of remote devices through intention codes over a wireless connection
US10732826B2 (en) * 2017-11-22 2020-08-04 Microsoft Technology Licensing, Llc Dynamic device interaction adaptation based on user engagement
US10528817B2 (en) 2017-12-12 2020-01-07 International Business Machines Corporation Smart display apparatus and control system
WO2019117350A1 (ko) * 2017-12-14 2019-06-20 삼성전자 주식회사 응시 거리를 결정하는 방법 및 디바이스
US10559194B2 (en) * 2018-02-23 2020-02-11 Samsung Electronics Co., Ltd. System and method for providing customized connected device functionality and for operating a connected device via an alternate object
US10725176B2 (en) 2018-03-14 2020-07-28 Nathan J. DeVries System and method of intrusion detection
US11994751B1 (en) 2020-12-30 2024-05-28 Snap Inc. Dual system on a chip eyewear
US20240143348A1 (en) * 2021-02-08 2024-05-02 Virginia Tech Intellectual Properties, Inc. Personalized recommender system for information visualization
US20220374067A1 (en) * 2021-05-19 2022-11-24 International Business Machines Corporation Augmented reality based power management
US20230050526A1 (en) * 2021-08-10 2023-02-16 International Business Machines Corporation Internet of things configuration using eye-based controls
US20230123344A1 (en) * 2021-10-14 2023-04-20 Jason Heger Dual system on a chip eyewear
US11997249B2 (en) 2021-10-14 2024-05-28 Snap Inc. Dual system on a chip eyewear

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6426740B1 (en) * 1997-08-27 2002-07-30 Canon Kabushiki Kaisha Visual-axis entry transmission apparatus and method therefor
CN1740951A (zh) * 2004-08-25 2006-03-01 西门子公司 用于利用人眼进行设备控制的装置
US7183920B2 (en) * 2004-08-31 2007-02-27 Gtech Rhode Island Corporation System and method for detecting access to an article or opening of a package
CN101169897A (zh) * 2006-10-25 2008-04-30 友立资讯股份有限公司 多媒体系统的脸部检测的遥控系统及其方法及多媒体系统
US8384718B2 (en) * 2008-01-10 2013-02-26 Sony Corporation System and method for navigating a 3D graphical user interface
US20120030596A1 (en) * 2009-10-05 2012-02-02 David H Hanes User interface
CN102812416B (zh) * 2010-06-17 2015-10-07 松下电器(美国)知识产权公司 指示输入装置、指示输入方法、程序、记录介质以及集成电路
US8395655B2 (en) * 2010-08-15 2013-03-12 Hewlett-Packard Development Company, L.P. System and method for enabling collaboration in a video conferencing system
US9658687B2 (en) * 2011-09-30 2017-05-23 Microsoft Technology Licensing, Llc Visual focus-based control of coupled displays
US20130147686A1 (en) * 2011-12-12 2013-06-13 John Clavin Connecting Head Mounted Displays To External Displays And Other Communication Networks
US9773345B2 (en) * 2012-02-15 2017-09-26 Nokia Technologies Oy Method and apparatus for generating a virtual environment for controlling one or more electronic devices
US9122321B2 (en) * 2012-05-04 2015-09-01 Microsoft Technology Licensing, Llc Collaboration environment using see through displays
US8893164B1 (en) * 2012-05-16 2014-11-18 Google Inc. Audio system
US20140009395A1 (en) * 2012-07-05 2014-01-09 Asustek Computer Inc. Method and system for controlling eye tracking
KR20140011203A (ko) * 2012-07-18 2014-01-28 삼성전자주식회사 복수의 디스플레이 장치와 연결된 제어 장치 및 그의 제어 방법, 그리고 디스플레이 장치 제어 시스템
KR101984590B1 (ko) * 2012-11-14 2019-05-31 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
US11747895B2 (en) * 2013-03-15 2023-09-05 Intuitive Surgical Operations, Inc. Robotic system providing user selectable actions associated with gaze tracking
US20140368442A1 (en) * 2013-06-13 2014-12-18 Nokia Corporation Apparatus and associated methods for touch user input
CN103500061B (zh) * 2013-09-26 2017-11-07 三星电子(中国)研发中心 控制显示器的方法及设备

Similar Documents

Publication Publication Date Title
JP2017513093A5 (ja)
RU2016136371A (ru) Дистанционное управление устройствами через обнаружение взгляда
MX2016009847A (es) Sistema y metodo para el control de una puerta de un vehiculo a base de gestos.
GB2515436A (en) Virtual hand based on combined data
WO2010138470A3 (en) Gesture coach
EP2778853A3 (en) Object control method and apparatus of user device
RU2017114986A (ru) Облегчение взаимодействия между пользователями и их окружающими средами с помощью гарнитуры, имеющей механизмы ввода
EP2759919A3 (en) Methods and devices for simultaneous multi-touch input
EP2827225A3 (en) System and method for activating a hidden control
JP2015111447A5 (ja)
JP2016081476A5 (ja)
EP2796982A3 (en) Method and apparatus for providing a changed shortcut icon corresponding to a status thereof
WO2014142600A3 (en) Display control method and apparatus
EP4310644A3 (en) Flexible display apparatus and control method thereof
EP2702931A3 (en) Interactive control apparatus
WO2014024122A3 (en) An apparatus and associated methods
WO2015066736A3 (en) Wearable blasting system apparatus
WO2013189233A3 (en) Apparatus and method for controlling a touchscreen display for one hand operation
JP2013105454A5 (ja)
MX2011007211A (es) Sistema y metodo para el monitoreo y control remoto de un dispositivo de campo.
WO2014162154A3 (en) A pet interaction device
WO2016071670A3 (en) System for controlling a display device
WO2014064510A3 (en) System and method for remotely positioning an end effector
ES2552881A1 (es) Dispositivo portable y método de control mediante gestos
MX2018008214A (es) Metodo de control de dispositivo de visualizacion y dispositivo de visualizacion.