JP2012528405A5 - - Google Patents

Download PDF

Info

Publication number
JP2012528405A5
JP2012528405A5 JP2012513264A JP2012513264A JP2012528405A5 JP 2012528405 A5 JP2012528405 A5 JP 2012528405A5 JP 2012513264 A JP2012513264 A JP 2012513264A JP 2012513264 A JP2012513264 A JP 2012513264A JP 2012528405 A5 JP2012528405 A5 JP 2012528405A5
Authority
JP
Japan
Prior art keywords
input
input device
mode
gesture control
coupled
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012513264A
Other languages
Japanese (ja)
Other versions
JP2012528405A (en
JP5782431B2 (en
Filing date
Publication date
Priority claimed from US12/553,845 external-priority patent/US8531396B2/en
Application filed filed Critical
Priority claimed from PCT/US2010/036440 external-priority patent/WO2010138743A2/en
Publication of JP2012528405A publication Critical patent/JP2012528405A/en
Publication of JP2012528405A5 publication Critical patent/JP2012528405A5/ja
Application granted granted Critical
Publication of JP5782431B2 publication Critical patent/JP5782431B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (26)

入力デバイスと、
プロセッサに結合され、前記入力デバイスの方位を検出する検出器と、
を備えているシステムであって、
前記入力デバイスが、前記方位に対応する複数のモード方位を有し、
前記複数のモード方位が、ジェスチャ制御システムの複数の入力モードに対応し、
前記検出器が、前記ジェスチャ制御システムに結合され、前記方位に応答して、前記複数の入力モードからの入力モードの選択を自動的に制御する、システム。
An input device;
A detector coupled to a processor for detecting the orientation of the input device;
A system comprising:
The input device has a plurality of mode orientations corresponding to the orientations;
The plurality of mode orientations correspond to a plurality of input modes of the gesture control system;
A system, wherein the detector is coupled to the gesture control system and automatically controls selection of an input mode from the plurality of input modes in response to the orientation.
請求項1記載のシステムにおいて、前記検出器が、前記入力デバイスの方位を解釈して、前記ジェスチャ制御システムの入力信号に変換し、また、前記複数のモード方位間で前記入力デバイスの方位遷移を解釈して、前記ジェスチャ制御システムの入力信号に変換する、システム。   The system of claim 1, wherein the detector interprets the orientation of the input device and converts it to an input signal of the gesture control system, and also translates the orientation of the input device between the plurality of mode orientations. A system that interprets and converts the input signal to the gesture control system. 請求項1記載のシステムにおいて、前記方位の検出が、ある時点および空間における前記入力デバイスの瞬時的状態の絶対三空間位置を検出することを含む、システム。   The system of claim 1, wherein detecting the orientation includes detecting an absolute three-space position of the instantaneous state of the input device at a point in time and space. 請求項1記載のシステムにおいて、前記検出器が、前記複数のモード方位間で、前記入力デバイスの方位遷移を追跡し、
前記方位遷移が、前記入力デバイスの軸を中心とする回転遷移を含む、システム。
The system of claim 1, wherein the detector tracks azimuth transitions of the input device between the plurality of mode azimuths.
The system, wherein the azimuthal transition includes a rotational transition about an axis of the input device.
請求項1記載のシステムにおいて、前記検出器が、
瞬時的方位をリアル・タイムで追跡し、
前記入力デバイスの瞬時的位置をリアル・タイムで追跡し、
前記入力デバイスの生の追跡データを、6度の空間位置に変換する、
システム。
The system of claim 1, wherein the detector is
Track instantaneous heading in real time,
Track the instantaneous position of the input device in real time,
Converting the raw tracking data of the input device to a spatial position of 6 degrees;
system.
請求項1記載のシステムであって、少なくとも1つの入力センサを備え、
この入力センサが前記入力デバイス上に位置付けられており、
前記検出器が、生の入力センサ位置データを、入力センサ状態および入力センサ遷移データの内の少なくとも1つに変換し、
前記入力センサの位置が、前記複数の入力モードを制御する、システム。
The system of claim 1, comprising at least one input sensor,
The input sensor is positioned on the input device;
The detector converts raw input sensor position data into at least one of input sensor state and input sensor transition data;
The system, wherein a position of the input sensor controls the plurality of input modes.
前記入力デバイスが、ハンドヘルド入力デバイスである、請求項1記載のシステム。   The system of claim 1, wherein the input device is a handheld input device. 請求項1記載のシステムにおいて、前記検出器が、ある時点および空間における前記入力デバイスの瞬時的状態の絶対三空間位置を検出し、
前記複数の入力モードが、
前記ジェスチャ制御システムに結合されているコンポーネントのアプリケーション・エレメントの直接操作のために、前記瞬時的状態が用いられる、直接操作モードと、
前記ジェスチャ制御システムに結合されているコンポーネントの1組のアプリケーション・エレメントの直接操作のために、前記瞬時的状態が用いられる、メタ操作モードと、
前記ジェスチャ制御システムに結合されているコンポーネントのアプリケーション・エレメントの三次元操作のために、前記瞬時的状態が用いられる、三次元操作モードと、
の内の少なくとも1つを含む、システム。
The system of claim 1, wherein the detector detects an absolute three-space position of the instantaneous state of the input device at a point in time and space;
The plurality of input modes are:
A direct operating mode in which the instantaneous state is used for direct manipulation of application elements of components coupled to the gesture control system;
A meta-operation mode in which the instantaneous state is used for direct manipulation of a set of application elements of a component coupled to the gesture control system;
A three-dimensional operation mode in which the instantaneous state is used for three-dimensional operation of an application element of a component coupled to the gesture control system;
A system comprising at least one of:
請求項8記載のシステムにおいて、前記ジェスチャ制御システムが、前記ジェスチャ制御システムに結合されている三空間物体を、3度の平行移動自由度および3度の回転自由度で制御する、システム。   9. The system of claim 8, wherein the gesture control system controls a three-space object coupled to the gesture control system with 3 degrees of freedom of translation and 3 degrees of freedom of rotation. 請求項9記載のシステムであって、前記入力デバイスの前記複数の入力モードを、前記三空間物体の複数の物体の平行移動にマッピングすることによって、前記三空間物体の移動を制御することを含む、システム。   10. The system of claim 9, comprising controlling movement of the three-space object by mapping the plurality of input modes of the input device to translation of a plurality of objects of the three-space object. ,system. 請求項10記載のシステムにおいて、前記マッピングが、
前記複数の入力モードと前記複数の物体の平行移動との間における直接マッピングと、
前記複数の入力モードと前記複数の物体の平行移動との間における間接マッピングと、
前記複数の入力モードの位置的偏倚を、前記三空間物体の物体平行移動の位置的偏倚に相関付けることと、
前記入力デバイスの位置的偏倚を、前記三空間物体の前記物体平行移動の平行移動速度に相関付けることと、
の内の少なくとも1つを含む、システム。
The system of claim 10, wherein the mapping is
Direct mapping between the plurality of input modes and translation of the plurality of objects;
Indirect mapping between the plurality of input modes and translation of the plurality of objects;
Correlating the positional deviation of the plurality of input modes with the positional deviation of the object translation of the three-space object;
Correlating the positional deviation of the input device with the translation speed of the object translation of the three-space object;
A system comprising at least one of:
請求項9記載のシステムにおいて、前記検出が、前記入力デバイスの外挿補間位置が仮想空間と交差するときを検出することを含み、前記仮想空間が、前記ジェスチャ制御システムに結合されているディスプレイ・デバイス上に図示される空間を含む、システム。   The display of claim 9, wherein the detecting includes detecting when an extrapolated position of the input device intersects a virtual space, the virtual space being coupled to the gesture control system. A system comprising the space illustrated on the device. 請求項1記載のシステムにおいて、前記検出器が、前記入力デバイスのイベントを検出し、前記イベントが、前記入力デバイスの三空間位置および三空間方位の内少なくとも1つに対応し、前記イベントが第1タイプのアプリケーションに対応する、システム。   2. The system of claim 1, wherein the detector detects an event of the input device, the event corresponds to at least one of three spatial positions and three spatial orientations of the input device, and the event is A system that supports one type of application. 請求項13記載のシステムにおいて、前記プロセッサが、前記イベントを指定する入力デバイス・イベント・データと、前記イベントの状態情報とを備えているデータ・シーケンスを発生し、
前記入力デバイス・イベント・データおよび状態情報が、前記ジェスチャ制御システムの第1アプリケーションに対応するタイプを有するタイプ特定データである、システム。
14. The system of claim 13, wherein the processor generates a data sequence comprising input device event data designating the event and status information of the event.
The system, wherein the input device event data and status information is type specific data having a type corresponding to a first application of the gesture control system.
請求項14記載のシステムにおいて、前記プロセッサが、前記データ・シーケンスを含むようにデータ・カプセルを形成し、前記データ・カプセルが、前記データ・シーケンスのアプリケーション独立表現を含むデータ構造を有し、前記プロセッサが前記データ・カプセルをレポジトリに入れる、システム。   15. The system of claim 14, wherein the processor forms a data capsule to include the data sequence, the data capsule having a data structure that includes an application independent representation of the data sequence, A system in which a processor places the data capsule in a repository. 請求項15記載のシステムにおいて、第2タイプのアプリケーションの下で実行する第2イベントが、前記レポジトリを検索して、前記データ・カプセルと前記第2イベントとの間の対応を特定し、
前記第2タイプのアプリケーションが、前記データ・カプセルのデータ・シーケンスの内容を用いて、前記第2イベントに対応する動作を実行する、システム。
16. The system of claim 15, wherein a second event executing under a second type of application searches the repository to identify a correspondence between the data capsule and the second event;
The system in which the second type application performs an operation corresponding to the second event using the content of the data sequence of the data capsule.
請求項1記載のシステムにおいて、前記入力デバイスからは離れている少なくとも1つの電磁界発生器を備えており、
前記少なくとも1つの電磁界発生器が、前記複数のコイルに信号を誘発するEMFを発生し、
前記追跡が電磁界(EMF)追跡であり、
前記入力デバイスが、回路に結合されている前記検出器を含み、
前記検出器が複数のコイルを備え、
前記検出器が、前記複数のコイルに誘発される前記信号を用いて、前記入力デバイスの方位および位置の内の少なくとも1つを検出する、システム。
The system of claim 1, comprising at least one electromagnetic field generator remote from the input device;
The at least one electromagnetic field generator generates an EMF that induces a signal in the plurality of coils;
The tracking is electromagnetic field (EMF) tracking;
The input device includes the detector coupled to a circuit;
The detector comprises a plurality of coils;
The system, wherein the detector detects at least one of the orientation and position of the input device using the signals induced in the plurality of coils.
請求項17記載のシステムにおいて、
前記入力デバイスが、前記プロセッサに結合されている送信機を備えており、
前記送信機がワイヤレス送信機であり、前記入力デバイスの方位および位置を、前記ジェスチャ制御システムに伝達し、
前記入力デバイスが、少なくとも1つの入力センサを備えており、
前記送信機が、前記少なくとも1つの入力センサの状態を、前記ジェスチャ制御システムに伝達する、システム。
The system of claim 17, wherein
The input device comprises a transmitter coupled to the processor;
The transmitter is a wireless transmitter and communicates the orientation and position of the input device to the gesture control system;
The input device comprises at least one input sensor;
The system wherein the transmitter communicates the state of the at least one input sensor to the gesture control system.
請求項1記載のシステムにおいて、前記入力デバイスに接続されている少なくとも1つのタグを備えており、
前記追跡が光学的追跡であり、
前記追跡が、前記少なくとも1つのタグの位置を動的に検出することを含む、システム。
The system of claim 1, comprising at least one tag connected to the input device;
The tracking is optical tracking;
The system wherein the tracking includes dynamically detecting a position of the at least one tag.
請求項19記載のシステムにおいて、前記少なくも1つのタグが、1組の赤外線(IR)発光ダイオード(LED)と、1組の逆反射ドットとを備え、
前記入力デバイスが、回路に結合されているマイクロプロセッサを含み、
前記回路が前記1組のIR LEDに結合され、前記回路に結合されている少なくとも1つの入力センサを備えており、
前記少なくとも1つのセンサが、前記入力デバイス上に位置付けられ、
前記少なくとも1つの入力センサが、前記1組のIR LEDの状態を制御し、
各IR LEDの状態が、前記複数の入力モードの内少なくとも1つの入力モードに対応する、システム。
The system of claim 19, wherein the at least one tag comprises a set of infrared (IR) light emitting diodes (LEDs) and a set of retro-reflective dots.
The input device includes a microprocessor coupled to a circuit;
The circuit is coupled to the set of IR LEDs and includes at least one input sensor coupled to the circuit;
The at least one sensor is positioned on the input device;
The at least one input sensor controls the state of the set of IR LEDs;
A system wherein the state of each IR LED corresponds to at least one input mode of the plurality of input modes.
請求項19記載のシステムにおいて、
前記少なくとも1つのタグが、前記入力デバイスに接続されている少なくとも1つの追跡ドットを備え、
前記少なくとも1つの追跡ドットが、
少なくとも1つの赤外線(IR)発光ダイオード(LED)と、少なくとも1つの逆反射ドットと、
赤外線(IR)発光ダイオード(LED)および逆反射ドットの内少なくとも1つと、
1組のIR LEDと1組の逆反射ドットと
の内の1またはそれ以上を備えている、システム。
The system of claim 19, wherein
The at least one tag comprises at least one tracking dot connected to the input device;
The at least one tracking dot is
At least one infrared (IR) light emitting diode (LED); at least one retroreflective dot;
At least one of an infrared (IR) light emitting diode (LED) and a retroreflective dot;
A system comprising one or more of a set of IR LEDs and a set of retro-reflective dots.
請求項1記載のシステムにおいて、前記入力デバイスが、複数の側面を備えており、前記複数の側面における各側面が、前記複数のモード方位の内1つのモード方位、および前記複数の入力モードにおける1つの入力モードの内の少なくとも1つに対応する、システム。   The system according to claim 1, wherein the input device includes a plurality of side surfaces, and each side surface of the plurality of side surfaces is one mode direction out of the plurality of mode directions, and 1 in the plurality of input modes. A system corresponding to at least one of the two input modes. 前記複数の側面における各側面が、入力センサを備えている、請求項22記載のシステム。   24. The system of claim 22, wherein each side of the plurality of sides comprises an input sensor. 請求項23記載のシステムにおいて、各側面の各入力センサには、方位およびコンテキストの内の少なくとも1つに基づいて、機能が動的に割り当てられる、システム。   24. The system of claim 23, wherein each input sensor on each side is dynamically assigned a function based on at least one of orientation and context. 請求項22記載のシステムにおいて、
前記複数の側面が、3つの側面を含み、前記入力デバイスが三角形の断面を有し、
前記複数の側面における各側面が、前記複数のモード方位における1つのモード方位に対応する、システム。
The system of claim 22, wherein
The plurality of side surfaces include three side surfaces, and the input device has a triangular cross-section;
The system wherein each side surface in the plurality of side surfaces corresponds to one mode orientation in the plurality of mode orientations.
請求項22記載のシステムにおいて、
前記複数の側面における各側面が、前記複数の入力モードにおける1つの入力モードに対応し、前記複数の側面における第1側面が第1入力モードに対応し、
前記複数の側面における第2側面が第2入力モードに対応し、前記第1側面の中心に対して120度よりも大きく前記入力デバイスを長手方向軸を中心に回転させることを含む方位遷移が、第1入力モードから前記第2モードへの変化を生じさせる、システム。
The system of claim 22, wherein
Each side surface in the plurality of side surfaces corresponds to one input mode in the plurality of input modes, and the first side surface in the plurality of side surfaces corresponds to the first input mode,
An azimuth transition including rotating the input device about a longitudinal axis greater than 120 degrees relative to a center of the first side surface, wherein a second side surface of the plurality of side surfaces corresponds to a second input mode, A system for causing a change from a first input mode to the second mode.
JP2012513264A 2009-05-27 2010-05-27 Spatial multi-mode control device for use with spatial motion systems Expired - Fee Related JP5782431B2 (en)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US18162109P 2009-05-27 2009-05-27
US61/181,621 2009-05-27
US12/553,845 2009-09-03
US12/553,845 US8531396B2 (en) 2006-02-08 2009-09-03 Control system for navigating a principal dimension of a data space
PCT/US2010/036440 WO2010138743A2 (en) 2009-05-27 2010-05-27 Spatial, multi-modal control device for use with spatial operating system

Publications (3)

Publication Number Publication Date
JP2012528405A JP2012528405A (en) 2012-11-12
JP2012528405A5 true JP2012528405A5 (en) 2013-07-11
JP5782431B2 JP5782431B2 (en) 2015-09-24

Family

ID=43223365

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012513264A Expired - Fee Related JP5782431B2 (en) 2009-05-27 2010-05-27 Spatial multi-mode control device for use with spatial motion systems

Country Status (5)

Country Link
EP (1) EP2435986A4 (en)
JP (1) JP5782431B2 (en)
KR (1) KR101705924B1 (en)
CN (1) CN102460510B (en)
WO (1) WO2010138743A2 (en)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011017305A1 (en) 2011-04-15 2012-10-18 Abb Technology Ag Operating and monitoring system for technical installations
US9571816B2 (en) 2012-11-16 2017-02-14 Microsoft Technology Licensing, Llc Associating an object with a subject
US9251701B2 (en) 2013-02-14 2016-02-02 Microsoft Technology Licensing, Llc Control device with passive reflector
WO2014128748A1 (en) 2013-02-19 2014-08-28 株式会社ブリリアントサービス Calibration device, calibration program, and calibration method
WO2014128750A1 (en) 2013-02-19 2014-08-28 株式会社ブリリアントサービス Input/output device, input/output program, and input/output method
WO2014128752A1 (en) 2013-02-19 2014-08-28 株式会社ブリリアントサービス Display control device, display control program, and display control method
JP6177872B2 (en) 2013-02-19 2017-08-09 ミラマ サービス インク I / O device, I / O program, and I / O method
JP6195893B2 (en) 2013-02-19 2017-09-13 ミラマ サービス インク Shape recognition device, shape recognition program, and shape recognition method
US10373304B2 (en) * 2014-11-05 2019-08-06 Illinois Tool Works Inc. System and method of arranging welding device markers
US11598546B2 (en) * 2014-12-22 2023-03-07 Trane International Inc. Occupancy sensing and building control using mobile devices
JP5988286B1 (en) * 2016-04-01 2016-09-07 株式会社Cygames Program and image processing apparatus
US10522251B2 (en) 2016-07-08 2019-12-31 International Business Machines Corporation Infrared detectors and thermal tags for real-time activity monitoring
US10311273B2 (en) * 2016-10-18 2019-06-04 International Business Machines Corporation Thermal tags for real-time activity monitoring and methods for detecting the same
KR102136526B1 (en) 2017-03-15 2020-07-22 미쓰비시덴키 가부시키가이샤 Touch gesture judgment device, touch gesture judgment method, touch gesture judgment program, and touch panel input device
CN111104091B (en) * 2019-12-12 2021-11-26 北京科技大学 Detection and conversion method for precision specific calculation in dynamic floating point error analysis
CN112549010B (en) * 2020-12-22 2022-11-08 南昌大学 Design method of multi-joint snake-shaped robot self-adaptive trajectory tracking controller based on improved Serpenoid curve

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3421167B2 (en) * 1994-05-03 2003-06-30 アイティユー リサーチ インコーポレイテッド Input device for contact control
US20030062889A1 (en) * 1996-12-12 2003-04-03 Synaptics (Uk) Limited Position detector
JP2001216069A (en) * 2000-02-01 2001-08-10 Toshiba Corp Operation inputting device and direction detecting method
US7445550B2 (en) * 2000-02-22 2008-11-04 Creative Kingdoms, Llc Magical wand and interactive play experience
SE0000850D0 (en) * 2000-03-13 2000-03-13 Pink Solution Ab Recognition arrangement
US7159194B2 (en) * 2001-11-30 2007-01-02 Palm, Inc. Orientation dependent functionality of an electronic device
US7854655B2 (en) * 2002-07-27 2010-12-21 Sony Computer Entertainment America Inc. Obtaining input for controlling execution of a game program
US7755620B2 (en) * 2003-05-20 2010-07-13 Interlego Ag Method and system for manipulating a digital representation of a three-dimensional object
SG115546A1 (en) * 2003-06-23 2005-10-28 Affineon Technologies Pte Ltd Computer input device tracking six degrees of freedom
US7545362B2 (en) * 2004-02-26 2009-06-09 Microsoft Corporation Multi-modal navigation in a graphical user interface computing system
US20050212753A1 (en) * 2004-03-23 2005-09-29 Marvit David L Motion controlled remote controller
US7158118B2 (en) * 2004-04-30 2007-01-02 Hillcrest Laboratories, Inc. 3D pointing devices with orientation compensation and improved usability
JP5631535B2 (en) * 2005-02-08 2014-11-26 オブロング・インダストリーズ・インコーポレーテッド System and method for a gesture-based control system
KR102358378B1 (en) * 2005-03-04 2022-02-08 애플 인크. Multi-functional hand-held device
EP1907244A4 (en) * 2005-06-16 2009-07-01 Wabash Technologies Inc Pedal assembly having a hysteresis mechanism
WO2010030822A1 (en) * 2008-09-10 2010-03-18 Oblong Industries, Inc. Gestural control of autonomous and semi-autonomous systems

Similar Documents

Publication Publication Date Title
JP2012528405A5 (en)
CN202255404U (en) Binocular vision navigation system of indoor mobile robot
KR101978740B1 (en) Tele-operation system and control method thereof
US9400504B2 (en) Mobile robot
US9417714B2 (en) RFID-based input device
Monajjemi et al. UAV, come to me: End-to-end, multi-scale situated HRI with an uninstrumented human and a distant UAV
Gromov et al. Proximity human-robot interaction using pointing gestures and a wrist-mounted IMU
CN102902271A (en) Binocular vision-based robot target identifying and gripping system and method
CA2407992A1 (en) Method and system for remote control of mobile robot
ATE445172T1 (en) THREE-DIMENSIONAL ROOM MONITORING WITH CONFIGURATION MODE TO DETERMINE THE PROTECTIVE FIELDS
US11014243B1 (en) System and method for instructing a device
CN105629969A (en) Restaurant service robot
EP1918004B1 (en) Toy
KR20100086093A (en) Location control system of autonomous group robot
US20230244312A1 (en) Detection device and detection method
CN206892666U (en) A kind of autonomous flight system of four rotor wing unmanned aerial vehicles of view-based access control model navigation
EP2198939A1 (en) Torch
WO2021049147A1 (en) Information processing device, information processing method, information processing program, and control device
KR20160150380A (en) Destination leading system using infrared rays, pad for travelling mobile robot and method for controlling robot thereof
WO2012010082A1 (en) Terminal trace ball navigation device and navigation method
CN111443811A (en) Disconnect-type handle, virtual reality equipment and virtual reality tracker
CN204314733U (en) A kind of monitoring head that mobile personage is followed the tracks of automatically
CN212906218U (en) Disconnect-type handle, virtual reality equipment and virtual reality tracker
JP2020192658A (en) Robot system and portable teaching device
Pierlot et al. A simple and low cost angle measurement system for mobile robot positioning